AI导航

英伟达Cosmos扩充世界模型工具:从造数据到部署仿真一条龙

AI资讯
2 min read
0 次阅读

英伟达Cosmos世界模型平台在2026年10月22日的GTC柏林活动上完成一次系统更新:Cosmos Data Factory开放五套数据蓝图,Cosmos Framework把训练、优化工具扩展到更多开源模型,新的Cosmos 3 Nano仿真变体与推理微服务则负责让自动驾驶和机器人策略先在虚拟环境里测够,再部署到真实设备。

训练数据先成套供应

世界模型最缺的不是架构,而是覆盖长尾场景的多模态数据。Cosmos Data Factory这次给出五套云原生蓝图:自动驾驶数据集生成、图像属性增强、事件视频生成、缺陷图像生成和视频数据增强,分别对应行车难例、检索、罕见危险事件、工业质检和天气光照变化,已可通过GitHub以及Azure、Nebius、CoreWeave使用。落地数字已有参照:保时捷牵头在大众集团品牌间共建自动驾驶数据飞轮,预计减少最多90%的重复实车测试、缩短85%的开发周期;ANYbotics用蓝图生成了1500多段合成视频训练巡检机器人识别液体泄漏;Ultralytics用合成缺陷图重训YOLO后,缺陷定位和召回都有提升。

训练工具不再只服务自家模型

Cosmos Framework这次以智能体技能的形式开放:开发者可以拿GR00T、Alpamayo、Qwen、Pi0.5等兼容的Hugging Face开源模型做微调和强化学习,再用蒸馏、量化压缩后部署推理。机器人实验室MicroAGI把Cosmos 3后训练到人类操作视频上,再把32B的推理器蒸馏成8B的Nano模型且不掉精度;开发者也能在Roboflow上完成标注、后训练和托管或本地部署。对只想用开源底座的团队,这意味着世界模型的门槛从自建全套流水线,降到了组装现成环节。

上线之前先在仿真里跑

新的Cosmos 3 Nano仿真变体支持多视角、多传感器场景生成,配套代码可以把自动驾驶和双臂机器人策略放进闭环仿真反复评估,再决定是否上真车真机。部署侧,更新后的Cosmos 3 NIM微服务在验证配置下推理速度最高提升2倍且不掉质量,Metropolis视频搜索与摘要蓝图3.3版用同样的GPU能多监控40%的视频流,阿布扎比国家石油公司已用它在65个站点实时检测安全隐患。对物理AI团队来说,这次更新的实际意义是把造数据、训模型、测策略、跑推理接成了一条能直接开工的流水线。

推荐工具

NVIDIA Chat with RTX AI聊天 Chat with RTX 是 NVIDIA 面向 RTX 电脑的本地 AI 聊天工具,可围绕本地文档和视频资料做问答,适合重视隐私、离线检索并具备硬件条件的用户更适合资料不便上传云 HuggingChat AI聊天 HuggingChat 是 Hugging Face 的开源模型聊天应用,支持 Omni 自动选模型,也可手动选社区开放模型对话。它适合体验开源模型、技术探索和问答,结果可能不稳定,重要内容需复核。 纳米AI搜索 AI搜索 纳米AI 是 360 旗下 AI 搜索和智能体入口,支持文字、语音、拍照提问、多模型协作与内容创作,适合中文用户做日常搜索、学习问答、移动查询、热点追踪、生活决策、知识整理和轻量创作。 Qwen Chat(通义千问) AI聊天 Qwen Chat 是Qwen 大模型聊天助手,支持Qwen 模型聊天、写作和编程问答,适合中文用户和开发者完成 AI 对话、资料问答和任务协作,适合上线前核对权限、成本和资料质量。 DuckDuckGo AI Chat AI聊天 DuckDuckGo AI Chat 适合重视隐私的普通用户使用,围绕隐私 AI 聊天、免账户使用和多模型问答提供对话式 AI 支持和任务协作能力,适合上线前核对权限、成本和资料质量。 Goody-2 AI聊天 Goody-2 是以极端安全和伦理对齐为特色的 AI 聊天助手,常用于观察模型拒答边界、内容安全策略、保守输出体验和 AI 风险讨论,更适合作为安全边界样本使用前应理解它偏实验性质,不适合。