NVIDIA与Hugging Face为LeRobot带来新模型和框架

开源AI已经证明了当模型、数据和工具共享时，开发者可以快速创新。机器人领域同样面临这样的机遇，但物理AI的发展仍受限于昂贵且碎片化的资源——从大规模数据集和机器人基础模型，到仿真、计算和验证工具。

NVIDIA与Hugging Face正在合作，将NVIDIA Isaac GR00T 1.7（面向人形机器人的开放推理视觉语言动作VLA模型）和NVIDIA Isaac Teleop框架引入LeRobot——Hugging Face的开源机器人库。未来还计划加入NVIDIA Cosmos 3（物理AI前沿世界模型）。这些整合为开发者提供了更易访问、标准化的端到端机器人开发路径，同时推动开放机器人社区的创新与协作。

“开源让一个领域将先进研究转化为可学习、可适配、可构建的东西，”Hugging Face联合创始人兼首席科学官Thomas Wolf表示。“今天，NVIDIA Isaac GR00T 1.7和Isaac Teleop已进入LeRobot，开发者可以使用共享的模型、数据和工作流，在开放环境中训练和评估机器人。而随着NVIDIA Cosmos 3的即将加入，社区将能把前沿世界模型纳入同一个协作循环。”

机器人基础模型的开放管线

Hugging Face LeRobot是一个开源机器人库，用于训练、运行和共享机器人数据集、模型、策略和工作流。NVIDIA与Hugging Face的持续合作，将NVIDIA的300万机器人开发者与Hugging Face的1600万AI构建者连接起来，通过开放工作流拓展前沿物理AI工具的获取渠道。

将NVIDIA物理AI能力引入LeRobot，为开发者提供了一种通用的方式，用于收集和标准化数据、训练和微调机器人基础模型、评估性能，并通过开放工作流部署模型。具体整合包括：

• NVIDIA Isaac Teleop：一个开源机器人数据收集框架，帮助开发者从外部设备捕获高质量人类演示，使用标准化、可互操作的格式，然后扩展并与社区共享数据集——全部直接在LeRobot中完成。
• NVIDIA Isaac GR00T 1.7：首个开放且商业可行的机器人基础模型，通过LeRobot工作流简化后训练和部署，帮助开发者将其适配到新的机器人形态和任务，并具有基准测试的性能。
• NVIDIA Cosmos 3：物理AI前沿世界基础模型，即将加入LeRobot，帮助开发者生成和增强机器人数据，模拟场景，并在真实世界数据有限或采集成本过高时支持策略开发。

这些整合建立在NVIDIA已连接至LeRobot的更广泛资源基础上，以支持完整的机器人开发循环，包括：

• 最大的开源物理AI数据集（下载量超1500万次），包含超过35万个真实和模拟轨迹以及5700万个抓取点，帮助开发者快速启动机器人工作流。
• 基于NVIDIA Isaac Sim和Isaac Lab的仿真框架，帮助开发者搭建环境、生成机器人数据、测试策略，并在迁移到物理机器人前验证行为。
• LeRobot环境中心中的NVIDIA Isaac Lab-Arena，使开发者能够快速原型化复杂仿真环境，在LeRobot EnvHub中注册，并无缝嵌入LeRobot生态系统，训练和评估通用机器人策略（如GR00T、Pi和SmolVLA）。
• 搭载NVIDIA Jetson Thor的LeRobot Reachy 2集成，支持在开源人形机器人上部署VLA模型。

了解更多关于如何在端到端人形机器人开发中使用Isaac Teleop、Isaac GR00T 1.7和Isaac Lab-Arena的信息，并探索详细的LeRobot集成工作流。

---

原文链接：NVIDIA AI Blog
本文由前途科技编辑整理