Hugging Face与NVIDIA联手推动开源AI机器人

realtime news  Nov 07, 2024 02:34  UTC 18:34

1 Min Read

在德国慕尼黑举行的最近一次机器人学习大会(CoRL)上,Hugging Face和NVIDIA公布了一项战略合作计划,旨在推进开源AI机器人技术。根据NVIDIA的消息,这项合作旨在统一双方的开源机器人社区,利用尖端技术推动制造、医疗和物流等多个领域的创新。

物理AI时代的开源机器人技术

Hugging Face与NVIDIA的合作承诺将激活物理AI的时代,让机器人理解其环境的物理特性。此计划为研究人员提供机器人训练、模拟和推理的开源框架,消除反复重写代码的需求,预示着产业变革。

Hugging Face的LeRobot平台集成了NVIDIA的AI、Omniverse和Isaac机器人技术,提供了一整套数据收集、模型训练和模拟环境的工具。此集成允许开发者访问和微调Hugging Face Hub上超过150万个模型、数据集和应用程序。

通过模拟扩展机器人开发

开发物理AI提出了重大挑战,尤其是在收集大量物理交互数据方面。以Isaac Sim平台构建的NVIDIA Isaac实验室通过高保真渲染和物理模拟创建合成环境解决了这一问题。这种方法加快了机器人的训练,从单次演示中生成大量训练数据。

基于模仿学习的政策训练迭代过程,随后在真实机器人上部署,充分利用了现实数据的准确性和合成数据的可扩展性。这确保了强大而可靠的机器人系统,促进了一个能加速AI机器人进展的数据共享社区。

促进协作与社区参与

此次合作还强调社区参与,通过Isaac实验室的远程操作和模拟进行数据收集。数据以标准格式存储,便于在模拟中进行政策训练和评估,然后使用NVIDIA Jetson进行实时推理并部署到真实机器人上。

初步的合作步骤显示出了令人鼓舞的结果,包括在NVIDIA Jetson Orin Nano上运行的物理拣选设置。这种集成为AI模型的部署提供了强大的平台,增强了AI机器人创新的潜力。

通过将Hugging Face的开源社区与NVIDIA的硬件和模拟工具结合起来,此举旨在加速AI机器人领域的研究和创新。预计这项合作将对从交通到物流等各行各业产生变革性影响。



Read More