Hugging Face与NVIDIA联手推动开源AI机器人
realtime news Nov 06, 2024 18:34
Hugging Face与NVIDIA合作，增强开源AI机器人技术，整合LeRobot与NVIDIA的AI工具，旨在推进制造和医疗等行业的发展。
在德国慕尼黑举行的最近一次机器人学习大会（CoRL）上，Hugging Face和NVIDIA公布了一项战略合作计划，旨在推进开源AI机器人技术。根据NVIDIA的消息，这项合作旨在统一双方的开源机器人社区，利用尖端技术推动制造、医疗和物流等多个领域的创新。
物理AI时代的开源机器人技术
Hugging Face与NVIDIA的合作承诺将激活物理AI的时代，让机器人理解其环境的物理特性。此计划为研究人员提供机器人训练、模拟和推理的开源框架，消除反复重写代码的需求，预示着产业变革。
Hugging Face的LeRobot平台集成了NVIDIA的AI、Omniverse和Isaac机器人技术，提供了一整套数据收集、模型训练和模拟环境的工具。此集成允许开发者访问和微调Hugging Face Hub上超过150万个模型、数据集和应用程序。
通过模拟扩展机器人开发
开发物理AI提出了重大挑战，尤其是在收集大量物理交互数据方面。以Isaac Sim平台构建的NVIDIA Isaac实验室通过高保真渲染和物理模拟创建合成环境解决了这一问题。这种方法加快了机器人的训练，从单次演示中生成大量训练数据。
基于模仿学习的政策训练迭代过程，随后在真实机器人上部署，充分利用了现实数据的准确性和合成数据的可扩展性。这确保了强大而可靠的机器人系统，促进了一个能加速AI机器人进展的数据共享社区。
促进协作与社区参与
此次合作还强调社区参与，通过Isaac实验室的远程操作和模拟进行数据收集。数据以标准格式存储，便于在模拟中进行政策训练和评估，然后使用NVIDIA Jetson进行实时推理并部署到真实机器人上。
初步的合作步骤显示出了令人鼓舞的结果，包括在NVIDIA Jetson Orin Nano上运行的物理拣选设置。这种集成为AI模型的部署提供了强大的平台，增强了AI机器人创新的潜力。
通过将Hugging Face的开源社区与NVIDIA的硬件和模拟工具结合起来，此举旨在加速AI机器人领域的研究和创新。预计这项合作将对从交通到物流等各行各业产生变革性影响。
Image source: Shutterstock