张大妈

NVIDIA新纪元:Cosmos模型与推理型自动驾驶AI

源自抖音:深度记事学AI

02-19 13:24

物理AI的发展长期受困于现实数据采集难、成本高的瓶颈。NVIDIA通过发布基础物理AI模型Cosmos和首款推理型自动驾驶AI Alpamayo,提出了一套以合成数据为核心的解决方案,不仅解决了罕见场景的训练难题,更让自动驾驶系统具备了思考和解释行为的能力,为机器人与自动驾驶领域带来了全新的发展路径。

NVIDIA新纪元:Cosmos模型与推理型自动驾驶AI智能速览

  • 物理AI面临现实数据采集难、成本高的核心挑战。

  • Cosmos是首个开源物理AI基础模型,能生成高度逼真的合成数据。

  • Cosmos支持场景生成、推理及轨迹预测,可模拟罕见驾驶案例。

  • Alpamayo是全球首款具备思考和推理能力的端到端自动驾驶AI。

  • Alpamayo不仅能自主决策,还能解释其决策背后的原因。

NVIDIA新纪元:Cosmos模型与推理型自动驾驶AI精华内容

物理世界的复杂性让AI训练步履维艰,NVIDIA Cosmos的出现,正试图将计算能力直接转化为数据生产力,从而重塑整个AI的训练范式。

物理AI的数据困境

物理AI,如自动驾驶和机器人技术,其发展瓶颈在于现实世界数据的获取。真实驾驶数据采集不仅速度慢、成本高昂,且难以覆盖所有极端或罕见的“长尾”场景。

数据量的不足直接限制了AI模型的泛化能力和安全性。因此,寻找一种高效、低成本且能覆盖全面场景的数据生成方式,成为了行业亟待解决的关键问题。合成数据,正是在这样的背景下被推向了前台。

Cosmos:世界模拟器

NVIDIA Cosmos是一个开源的物理世界基础模型,它通过学习海量网络视频、真实驾驶数据和3D仿真环境,构建了一个统一的物理世界表征。

这个模型的核心能力在于打通了语言、图像、三维和动作等多个领域。开发者可以仅凭一张图片、一段3D场景描述,或是一段驾驶数据,Cosmos就能生成与之对应的、物理逻辑连贯的真实视频与动态场景。

赋能开发与训练

Cosmos最实用的价值在于其互动闭环模拟能力。开发者可以在其中测试各种复杂或极端的驾驶场景,AI执行动作后,虚拟世界会给出实时反馈。

这使得训练自动驾驶模型处理罕见案例变得异常高效,例如突然出现的行人、恶劣天气等,从而显著提升模型在真实世界中的应对能力。该模型已被全球开发者广泛应用和下载。

Alpamayo:会思考的AI

在Cosmos的基础上,NVIDIA发布了Alpamayo,这是全球首款具备思考与推理能力的端到端自动驾驶AI。

它完全通过摄像头输入进行训练,数据来源包括人类驾驶数据和Cosmos生成的海量合成数据。与以往的黑盒模型不同,Alpamayo不仅能决定要执行的动作,还能解释做出该决策的原因,大大提升了系统的透明度和安全性。

NVIDIA通过Cosmos和Alpamayo,展示了一条以合成数据和推理能力为核心的物理AI发展新路径。这不仅加速了自动驾驶等技术的成熟,也让整个行业看到了AI从感知走向认知的可能性。未来,机器人将如何更好地理解并融入我们的世界?

内容由AI生成
0
扫一下,分享更方便,购买更轻松
0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

最新文章 热门文章
相关兴趣推荐