NVIDIA Cosmos 开放新工具,用于训练、评估与部署世界模型
摘要
英伟达扩展 Cosmos 世界模型平台,补齐从数据策展、合成数据生成到模型训练、评估与部署的工具链,并公布多家机器人、汽车客户的落地数据。
核心要点
- Cosmos 平台在六个不同开放模型榜单上进入前五,向世界模型开发者提供前沿开放模型以及配套的数据、训练与优化工具和配方。
- Cosmos Data Factory 推出五个云原生蓝图:自动驾驶数据集生成、图像属性增强、事件视频生成、PCB、金属和玻璃缺陷图像生成、视频数据增强(改变天气与光照但保留场景结构)。
- Cosmos Curator 是 GPU 加速的视频训练数据管理方案,新增对多模态、多传感输入与处理模块的支持;Cosmos Data Factory 则通过代理技能(agentic skills)加速数据策展、处理与合成数据生成。
- 保时捷牵头在微软 Azure 上经由 Voxel51 使用 Cosmos Data Factory,构建大众集团跨品牌共享自动驾驶数据飞轮,预计减少重复实车测试最多 90%、缩短开发周期最多 85%。
- ANYbotics 用 Data Factory 蓝图生成超过 1500 条合成视频片段,并通过 Encord 平台校验,训练工业巡检机器人识别液体泄漏等设施变化。
原文佐证
- Ranking top five on six different open models leaderboards, the NVIDIA Cosmos platform gives world model builders the frontier open models — as well as data, training and optimization tools and recipes — to scale training data, adapt models, test behavior and optimize for performance before deployment.
- Porsche is leading the development of a shared AV data flywheel across Volkswagen Group brands, using Cosmos Data Factory through Voxel51 on Microsoft Azure. This is expected to reduce repeated physical test drives by up to 90% and shorten development cycle times by up to 85%.
- ANYbotics generated over 1,500 synthetic video clips with Cosmos Data Factory blueprints, curating real-world data and validating outputs with Encord's platform
AI 洞察
世界模型的竞争焦点正从模型结构转向数据生产管线:谁能低成本、规模化地制造长尾与危险场景数据,谁就能更快把机器人、自动驾驶推到可部署状态。英伟达把工具链打包成云原生蓝图并绑定 Azure、CoreWeave 等算力渠道,本质是把卖芯片升级为卖物理 AI 的数据工厂与开发标准,进一步锁定生态。对行业而言,合成数据加自动策展若真能把实车路测削减九成,仿真与数据服务商的价值链位置将被重估,而缺乏数据飞轮的自研团队会面临明显的进度差距。