NVIDIA Project GR00T提升类人机器人开发
realtime news Nov 06, 2024 16:17
NVIDIA的Project GR00T旨在通过引入环境生成、运动模仿和灵巧操作的创新工作流程，推动类人机器人的发展。
NVIDIA推出了Project GR00T，这是一个雄心勃勃的研究计划，旨在通过引入一系列高级工作流程推动类人机器人的发展。据NVIDIA称，这些工作流程旨在增强机器人对人类环境的感知、互动和导航能力。
GR00T-Gen：环境模拟
GR00T-Gen促进了多样化、仿真就绪环境的创建，这对于训练机器人至关重要。它利用大语言模型和3D生成AI模型，生成超过150个对象类别的2,500多个3D资产。这种多样性对于开发能够在现实环境中实现广泛适应的强大机器人学习模型至关重要。
GR00T-Mimic：模仿学习
通过GR00T-Mimic，NVIDIA旨在通过远程操作收集高质量的演示数据，提高机器人运动和轨迹生成能力。此工作流程通过合成运动数据扩大数据收集规模，提供全面的数据集以训练人类中心环境中的机器人。
GR00T-Dexterity：高级操作
GR00T-Dexterity引入了一种基于强化学习的灵巧操作方法，使机器人能够执行复杂任务。通过采用NVIDIA的DextrAH-G方法，系统被训练实现端到端抓取，能够适应新对象和场景。
GR00T-Mobility：导航与运动
为了应对导航挑战，GR00T-Mobility利用强化和模仿学习创建适应性强的导航系统。这一工作流程支持各种机器人外壳，并促进零次试验的仿真到现实转移，增强在复杂环境中的导航能力。
GR00T-Control：全身控制
GR00T-Control专注于开发全身控制策略，这对于需要精准和灵巧的任务至关重要。通过与NVIDIA的Isaac Lab集成，这一工作流程为传统的模型预测控制提供了替代方案，优化类人机器人执行复杂任务的能力。
GR00T-Perception：多模态感知
增强感知能力，GR00T-Perception集成了先进的感知库和基础模型，以提高机器人的上下文理解和交互效率。增加的ReMEmbR工作流程使机器人能够保留和利用历史数据，显著提升了它们的自适应反应。
NVIDIA Project GR00T在类人机器人领域迈出了重要一步，为开发者提供了创建更智能、更适应性强的机器人的重要工具和工作流程。这些进步将重新定义类人机器在现实应用中的能力。
Image source: Shutterstock