GR00T-Teleop是NVIDIA Isaac GR00T的一部分,用在捕获远程操作数据的关键技术。基于NVIDIA CloudXR连接Apple Vision Pro头显,用专门设计的人形远程操作自定义CloudXR运行时,将手部跟踪数据流式传输到模拟平台,如Isaac Lab,将机器人环境的沉浸式视图流式传输回设备。这种设置实现了对机器人的直观交互式控制,便于收集高质量的远程操作数据,为后续的合成轨迹生成和机器人训练提供基础。

GR00T-baidu09Teleop – 英伟达发布通过 Apple Vision Pro 捕捉人类动作的技术  第1张
(图片来源网络,侵删)
GR00T-baidu09Teleop – 英伟达发布通过 Apple Vision Pro 捕捉人类动作的技术  第2张
(图片来源网络,侵删)