Cosmos 3

general · First seen 2026-06-01 · Last seen 2026-10-21 · 31 mentions

Overview

Cosmos 3是NVIDIA最新推出的物理AI世界模型框架,能够统一处理语言、图像、视频、音频和动作等多种模态数据,代表了AI在理解和模拟物理世界方面的重要进展。2023年8月,NVIDIA发布了Physis-Lang物理视频生成框架,该框架在物理视频生成任务中取得了领先性能,展示了Cosmos 3在物理模拟方面的能力。

Cosmos 3 近期进展

AWS Machine Learning Blog报道,NVIDIA Cosmos 3现在可以在SageMaker HyperPod上构建物理AI模型工厂,使开发者和研究人员能够更高效地创建和部署物理AI模型。NVIDIA提供了Cosmos 3的后训练演示,并展示了如何使用TAO Agent Skills在一天内完成对Cosmos 3的后训练,大大缩短了模型优化周期。LingBot-Video作为开源模型采用MoE架构,拥有30B参数但只有3B激活,专注于物理推理,为边缘设备上的物理AI应用提供了可能。

当前焦点与观察点

物理AI模型正从理论研究走向实际应用,Cosmos 3作为这一领域的代表,正在推动AI系统更好地理解和模拟物理世界。CaliBench等评估框架的出现,表明学术界和工业界开始关注视频世界模型的物理校准能力,这将是衡量物理AI模型性能的重要标准。PhyAI等边缘实时推理引擎的开发,表明物理AI正从云端向边缘设备扩展,这将使智能系统能够在更多场景下实时响应物理环境变化。Cosmo 3的教程和简化版本(如Colab友好型)的发布,降低了这一先进技术的使用门槛,有望加速物理AI在各领域的创新应用。

Coverage

10 on file