英伟达重磅开源Cosmos 3 Edge!这款4B参数的边缘世界模型,让机器人和自动驾驶在设备端实时“看懂世界、预测未来、采取行动”!
这款4B参数的开放前沿世界模型,搭配2B Nemotron reasoner,专为设备端部署设计。它将理解(understanding)、预测(prediction)、模拟(simulation)和行动(action)有机连接,在机器人学习与动作、自动驾驶场景理解与意图预测、视觉AI代理等领域表现出色,在相关基准测试中领先。
Cosmos 3 Edge代表了英伟达在Physical AI(物理AI)赛道上的战略深化——从数据中心的大模型转向边缘设备的实时智能,让AI真正“落地”到工厂、仓库、道路和智能基础设施中。传统AI多停留在数字世界,而世界模型(World Model)正是让AI理解物理因果、时空关系和动作反馈的核心。Cosmos 3 Edge通过两个Transformer塔(自回归塔处理视觉/文本理解与推理,扩散塔处理预测、生成与模拟)的共享多模态注意力机制,实现了统一表征,这让模型能在受限的内存和算力下,同时做好“看懂当下”和“规划未来”。

