NVIDIA 宣布全面扩展 Cosmos 平台,推出全新训练工具、仿真检查点以及 Cosmos Data Factory 蓝图,助力开发者低成本构建物理 AI 与世界模型,加速自动驾驶及机器人等场景从研发到落地的闭环验证。
为了帮助开发者快速构建让物理 AI系统理解并模拟现实世界的世界模型,NVIDIA 宣布扩展其 Cosmos 平台,带来全新的训练工具、仿真检查点以及 Cosmos Data Factory 蓝图。
在六大开放模型榜单中稳居前五的 NVIDIA Cosmos 平台,正为世界模型构建者提供前沿的开源底座,配合数据、训练与优化方案,帮助团队在模型部署前完成规模化数据扩展、微调适配、行为验证与性能调优。
世界模型的构建始于多模态、多感官数据。
NVIDIA Cosmos Data Factory 集成了面向物理 AI 训练的大规模数据标注、筛选、增强与评估工具。其中,用于视频训练集筛选的 GPU 加速方案 Cosmos Curator,现已支持多模态、多感官输入及处理模块。
Cosmos Data Factory 现推出五大云原生蓝图,可通过 GitHub、Microsoft Azure、Nebius 与 CoreWeave 获取:
多家企业已经开始运用这些蓝图提速研发流程。
保时捷正通过 Microsoft Azure 上的 Voxel51 平台接入 Cosmos Data Factory,牵头构建大众汽车集团各品牌共享的自动驾驶数据飞轮。该方案预计可减少高达 90% 的重复实车路测,并将研发周期缩短达 85%。
机器人企业 ANYbotics 利用 Cosmos Data Factory 蓝图生成了超过 1500 段合成视频片段,结合真实数据与 Encord 平台验证,训练工业巡检机器人识别液体泄漏等设施细微变化。
计算机视觉公司 Ultralytics 则利用 Cosmos 生成的定向合成缺陷数据重新训练 YOLO 模型,大幅提升了缺陷定位精度与召回率。
完成数据准备后,开发者既可训练自有架构,也能基于预训练模型继续迭代。
NVIDIA 在 GTC 柏林大会上扩展了 Cosmos Framework 的训练、优化及部署工具链,将其作为 AI 智能体技能全面开放给 Cosmos 3 等开源基座。
开发者与智能体如今可以通过微调和强化学习,轻松适配 GR00T、Alpamayo、QWEN、Pi0.5 等来自 Hugging Face 生态的模型,结合模型蒸馏与量化完成轻量化改造,实现高吞吐推理部署。

针对第一人称视角的机械操作,机器人研究机构 MicroAGI 使用人类操作物体的视频对 Cosmos 3 进行后训练,并将 320 亿参数的推理模型无损蒸馏为 80 亿参数的 Nano 版本。开发者还能在 Roboflow 上标注数据并微调 Cosmos 3,直接部署于工业现场边缘 GPU 上运行视频推理。
免费获取企业 AI 成熟度诊断报告,发现转型机会
除了开发工具链,基础模型能力也迎来了同步升级。
全新的 Cosmos 3 Nano 仿真变体模型 支持开发者在可复现、多视角、多传感器的严苛工况下测试自主决策策略。借助配套代码,工程团队能够在实车上路和真机测试之前,在交互式仿真环境中训练并评估自动驾驶系统或双臂机器人的控制策略。

在部署端,更新后的 NVIDIA Cosmos 3 NIM 微服务实现了高达 2 倍的推理速度提升,且保持精度无损,支持亚秒级连续视频分析与告警。
此外,基于 Cosmos NIM 构建的全新 NVIDIA Metropolis 视频搜索与摘要(VSS)3.3 蓝图,允许开发者仅凭一条提示词搭建高效视频分析应用,单颗 GPU 可同时监控的视频流数量提升了 40%。ADNOC 已经在 65 个生产现场落地该方案,并在罕见异常监控中利用 Cosmos Data Factory 生成合成训练数据,规避了人为制造危险测试场景的风险。
关注公众号

扫码关注,获取最新 AI 资讯
3 步完成企业诊断,获取专属转型建议
已有 200+ 企业完成诊断