11月5日,英伟达在Hugging Face上架了Cosmos 3家族的四个开源权重,全部是160亿参数的Nano版本,全部采用OpenMDW1.1许可——也就是说,允许商用。这是”世界模型”这个概念,今年最实在的一次落地。
所谓世界模型,就是能预测”世界接下来会变成什么样”的AI。Cosmos 3的四个检查点分工很明确:Transfer-Auto负责离线批量生成多视角驾驶数据,一次能同步生成最多11路摄像头画面外加匹配的LiDAR点云;Sim-Auto是流式版本,随着驾驶操作实时吐出画面和雷达数据;Sim-Transfer把物理模拟器的信号转成照片级视频;Sim-Bimanual专门给双臂机器人用,能预测机器人动完手之后,世界会变成什么样。
为什么”能造假数据”这么重要
自动驾驶和机器人训练最大的瓶颈,从来不是算法,而是数据。真实路测贵、慢、还危险,corner case(极端场景)可遇不可求。Cosmos 3的打法是:用世界模型批量”造梦”——雨天、夜路、突发加塞、双臂机器人抓杯子翻车,这些场景都能在模拟里无限生成,而且摄像头和LiDAR数据是严格同步的。
这就是它跟普通视频生成模型的区别:它生成的不是”看起来像”的视频,而是”能拿去训练”的数据。英伟达的算盘也很清楚:当全世界的自动驾驶和机器人团队都用它的世界模型做训练,下一代物理AI的”数据标准”就握在它手里了。
开源,但别急着all in
要泼一盆冷水:这些模型需要英伟达的硬件和配套工具才能跑,闭环驾驶还需要仿真运行时;更重要的是,生成场景到底能不能有效提升真实世界的表现,英伟达自己也说”仍需实测”。开源权重不等于开箱即用,小团队想用,先掂量掂量自己的卡够不够。
但方向已经很清楚了:物理AI的竞争,正在从”谁的模型更聪明”转向”谁的世界更逼真”。当机器人可以在梦里先练一万次再上岗,真实世界的试错成本会被彻底改写。