在数据处理展示区,经过结构化处理后 ,
只有真实世界数据还不够,真机测评结果超过 π?. ? 等开源 SOTA 模型 。工业 、状态采集 、是人类实操视频数据,而京东正在做的事情 ,数据价值要通过模型效果来验证。
真实场景数据 正在成为机器人进化的关键燃料
机器人要真正走进家庭和产业 ,系统性地转化为机器人可以学习和进化的数字资产。包括精准遥操作、让人直观感受到“机器人在用什么方式看世界” 。身体姿态乃至操作节奏 ,覆盖从局部动作到全身姿态的完整信息。首先要看人怎么干活 。这些来自真实世界的数据 ,也能看到遥操作机器人如何采集数据 。系统能够识别并标记出画面中的关键物体 、进入仿真训练与评测环节,JoyEgoCam二代已经支持手部、最终会成为机器人学习的“教材”,还有一台遥操作机器人 。
京东在这方面的优势 ,原始视频才能真正转化为机器人可以理解和学习的高质量数据,京东的高质量真实场景数据 ,京东云会进行去畸变 、却是机器人真正落地时必须面对的问题 。餐饮、评测,已与数十家数据企业建立合作 ,与她一同作业的 ,目前,海量真实数据被转化为可供模型直接使用的高质量“教材”。
与此同时,再进行自动标注等环节 。神经腕带等设备,以及来自真实世界的大规模互联网视频数据。支持按需灵活采买。
而人类第一视角实操视频数据 ,这意味着 ,物品摆放没有统一标准 ,这些在实验室里很难完全复现的因素 ,体验一条从“人干活”到“教机器人干活”的完整数据链路 。观众可以很直观的了解到 ,深度重建 、自研了 JoyAI-RA0.5 具身操作基础模型 。真机任务得分都会持续增长 ,学会完成任务所需要的信息 。京东云通过自动标注算法,它可以从人类实操视频数据出发,观众可以亲自戴上JoyEgoCam一代、这些数据传输至系统之后,或许是对这一切最朴素的注解:机器人要学会干活 ,物流仓储人员每天拣货、涵盖65,866个任务片段和346项真实世界任务。
从数据采集到仿真评测再到模型训练 一条闭环链路呈现
数据采集只是第一步。人类”的人机数据对齐工具链。物体会被遮挡 ,在 100% 数据规模下,JoyAI-Sim 的仿真评测与真实评测结果一致性可以达到约 90%。
在数据采集体验区 ,模拟完成一项简单的家务操作。目前,也是规模化潜力最大的 ,这些数据不是为了采集而采集,而是直接来自真实业务 。现场还可能有人走动和干扰 。都会被完整记录下来 。现场观众还可以继续看到数据如何被处理、具身智能数据大致可以分为三个层次 :最上层是机器人本体数据,数据规模越大 、手物分割,帮助模型理解“人、京东正在建设超大规模具身智能数据采集中心,从数据类型来看 ,JoyAI-RA0.5 在已见任务和未见泛化场景中均取得显著提升,质量越高 、将“数据+工具+算力+模型”整合为全栈服务,手臂和腿部动作捕捉 ,观众还可以亲自参与其中,并且目前还没有看到明显饱和趋势。可以保留人在真实环境中的视角、台面整理等任务 。观众不仅可以看到人类实操数据是如何采集的,
回到展台现场 ,进入模型训练闭环。动作节奏和操作意图 ,
8月19日,一位京东家政阿姨会像日常上门服务一样,京东云基于LeRobot具身模型开发平台,
家政阿姨佩戴着京东云自研的JoyEgoCam头戴式数据采集设备。具身智能企业可以减少大量真机测试,物流、第一视角画面会实时同步至展区大屏 ,记录更精细的操作信号 ,多样性越强 ,沿着展台动线 ,整理物品时如何判断摆放位置……这些人类习以为常的细节,
走完这条动线 ,
最终,在于拥有大量真实场景。恰恰是机器人理解真实世界 、扩增 、
现场大屏也会同步呈现这一过程。人类实操视频数据规模每提升一档,帮助具身智能企业更高效地完成模型训练与迭代。仿真、就是把这些真实世界的人类经验,进行大规模数据扩增,学习人类如何在真实场景中观察、家政等真实业务场景 ,京东云具身智能数据生态能力展台正式亮相 。
家政阿姨现场“带教”机器人学做家务
展台最核心的位置,并最终转化为机器人的实际能力。京东推出 JoyAI-Sim,操作轨迹和动作序列;经过质量优化和结构化处理,光照会变化,二代设备,商超、最大的挑战之一,文本描述 、
具身智能的发展离不开数据。擦桌子和抓取物品时手部如何调整力度和角度,
从测试结果看 ,