7月7日,英伟达宣布与全球最大AI模型社区HuggingFace扩大战略合作,将面向人形机器人的开源视觉-语言-动作(VLA)基础模型IsaacGR00T1.7、遥操作框架IsaacTeleop及丰富的数据集与工作流,全面导入HuggingFace的开源机器人库LeRobot。这是英伟达继2025年成为HuggingFace首要贡献者之后,在物理AI开源生态领域的又一次关键落子。
本次整合围绕机器人开发的完整闭环展开,覆盖数据采集、模型训练微调、性能评估到最终部署的全流程。
IsaacGR00T1.7是英伟达首款开源且具备商业可行性的机器人基础模型,拥有30亿参数。它采用独特的动作级联架构,通过双系统设计将高级推理与低级运动控制分离,能将视觉观测与自然语言指令直接映射为连续机器人动作。开发者可通过LeRobot工作流对模型进行后训练与部署,快速适配新的机器人形态与任务。
IsaacTeleop是英伟达的开源遥操作框架,帮助开发者以标准化、可互操作的格式从外部设备采集高质量人工示范数据,并直接在LeRobot中扩展数据集、与社区共享。
NVIDIACosmos3作为物理AI前沿世界模型,计划于近期接入LeRobot。在真实世界数据有限或采集成本过高时,Cosmos3可帮助开发者生成和扩充机器人数据、模拟场景,并支持策略开发。
此外,LeRobot已接入的英伟达资源还包括全球最大的开源物理AI数据集,累计下载量超1500万次,包含超过35万条真实与仿真轨迹及5700万次抓取操作。
此次合作将英伟达的300万名机器人开发者与HuggingFace的1600万名AI构建者连接在一起。双方通过开放工作流,将物理AI开发中长期面临的高成本与碎片化资源壁垒——包括大型数据集、基础模型、仿真工具、算力及验证工具——转化为可共享、可复用的开源资产。
HuggingFace联合创始人兼首席科学官ThomasWolf表示:“开源是一个领域将前沿研究转化为可供学习、改编和构建内容的方式。随着IsaacGR00T1.7和IsaacTeleOp今日正式接入LeRobot,机器人开发者可以借助共享的模型、数据和工作流在开放环境中训练和评估机器人。”