英伟达用Vision Pro训练机器人:模仿学习与GR00T新模式
近日,英伟达在CES 2025大会中宣布了基于模仿学习的人形机器人训练模式--GR00T Blueprint。通过苹果的Vision Pro技术,用户可以为机器人创建数字孪生,并让机器人在模拟中学习复制人类行为。此外,英伟达还发布了一系列机器人基础模型、数据管道和仿真框架,用于加速下一代仿人机器人的开发。模仿学习是机器人学习的一个子集,它允许机器人通过观察和模仿人类专家的示范来学习新技能。GR00T Blueprint的工作流程包括GR00T-Teleop、GR00T-Mimic和GR00T-Gen,通过这些工作流程,开发者可以轻松生成合成数据集。这些数据集可以用作机器人策略的输入,并在英伟达的Isaac Lab中教导机器人如何移动和与环境交互。此外,英伟达还宣布了Cosmos平台,用于生成物理感知视频和物理人工智能开发的世界状态。通过结合Omniverse和Cosmos,可以实现高度可控、物理精确的模拟,帮助减少世界模型相关的潜在幻觉。