NVIDIA 发布手术机器人实时生成仿真模型

NVIDIA 近日在 Hugging Face 上开源了 Cosmos-H-Dreams，这是一个基于扩散模型的实时生成仿真框架，专门面向手术机器人领域。传统上，训练手术机器人需要大量真实手术数据或物理仿真环境，成本高、周期长，且难以覆盖所有可能的临床场景。Cosmos-H-Dreams 通过生成式 AI 在毫秒级内合成高保真的手术场景（包括组织、器械和交互），让机器人可以在近乎无限多样的虚拟环境中进行训练和测试。

该模型的核心在于其“实时性”和“可控性”。它利用条件扩散过程，在输入用户指定的手术类型、器械位置、组织状态等参数后，瞬间输出对应的视觉场景，并支持动态调整。这与传统的离线渲染或预生成数据集不同，能够让机器人策略在训练过程中实时改变环境，从而提升泛化能力。

上图展示了 Cosmos-H-Dreams 生成的几组手术场景，从腹腔镜到微创手术，细节丰富，与真实场景高度相似。NVIDIA 表示，该模型在 NVIDIA GPU 上能以超过 30 FPS 的速度运行，满足实时仿真需求。

应用层面，Cosmos-H-Dreams 尤其适用于以下场景：

• 强化学习训练：为机器人策略提供多样化的环境，减少对真实数据的依赖；
• 术前规划：医生可通过生成仿真场景，模拟不同方案的风险；
• 设备测试：在部署前对机器人系统进行压力测试和安全性验证。

NVIDIA 将该模型开源，旨在推动手术机器人社区加速创新。开发者可在 Hugging Face 上获取模型权重和推理代码，并基于此构建定制化的仿真环境。

值得注意的是，Cosmos-H-Dreams 并非孤立项目，它是 NVIDIA 更大“数字孪生”生态的一部分，与 Isaac Sim、Omniverse 等平台协同工作。未来，随着生成式 AI 与机器人学的深度融合，手术机器人的开发效率有望跃升一个台阶。

---

原文链接：Hugging Face
本文由前途科技编辑整理