机器人训练迎来颠覆性变革。英伟达提出的EgoScale方法,彻底摆脱了传统昂贵耗时的实操训练模式,转而利用海量人类视频进行学习。这一突破不仅大幅提升了机器人的操作成功率,更降低了技术普及门槛,为人形机器人的大规模应用铺平了道路。
智能速览
EgoScale用人类视频替代昂贵的机器人实操训练。
仅需少量机器人数据即可完成动作迁移适配。
模型在22自由度灵巧手上任务成功率提升超50%。
该方案展现出强大的跨机器人结构泛化能力。
数据量与模型能力呈稳定线性增长关系。
精华内容
EgoScale的核心逻辑,是将人类海量的第一视角操作视频,直接转化为机器人的“教材”,彻底重塑了训练流程。
传统训练之困
传统机器人训练模式极为低效。要让机器人掌握拧瓶盖、叠衣服等精细动作,必须依赖人工远程操控或让机器人反复试错。这种方式不仅成本高昂、耗时漫长,而且生成的数据量稀少,导致模型学习效果差。一旦任务或机器人结构发生变化,整个训练过程就必须推倒重来,严重制约了技术的规模化应用。
视频预训练
EgoScale的第一步是“看视频学动作”。它利用超过两万小时的人类第一视角操作视频进行大规模预训练。模型从中学习人类手腕的转动、手指的捏取力度以及各种物品的抓取方式。这一阶段完全无需机器人实体参与,仅凭海量且成本低廉的人类数据,就让AI深度理解了“人类如何完成动作”。
动作数据对齐
预训练完成后,EgoScale进入第二步:少量数据对齐。此时仅需引入几小时的机器人演示数据,模型就能将已学会的人类动作模式,高效“翻译”成适配特定机器人硬件结构的控制指令。这相当于让机器人站在巨人的肩膀上,无需从零开始笨拙学习,极大缩短了训练周期并提高了效率。
效果与泛化
该方法的效果令人惊叹。在22自由度的灵巧手上,其任务成功率直接提升了50%以上。更重要的是,模型能力随数据增加呈现稳定的线性增长,几乎没有上限。此外,EgoScale具备强大的泛化能力,可轻松迁移到不同手型或结构的机器人上,无需重新训练,展现了极高的应用灵活性。
EgoScale的出现,为机器人技术的规模化落地扫清了关键障碍。当机器人能高效地从海量人类经验中学习,一个更智能、更实用的自动化时代似乎已不再遥远。