DreamGen是英伟达推出的创新的机器人学习技术,基于AI视频世界模型生成合成数据,让机器人能在梦境中学习新技能。DreamGen仅需少量现实视频数据,能生成大规模逼真的训练数据,实现机器人在新环境中的行为泛化和环境泛化。DreamGen的四步流程包括微调视频世界模型、生成虚拟数据、提取虚拟动作以及训练下游策略。DreamGen让机器人在没有真实世界数据支持的情况下,凭文本指令完成复杂任务,显著提升学习效率和泛化能力。

DreamGen – 英伟达推出的新型机器人学习技术  第1张
(图片来源网络,侵删)
DreamGen – 英伟达推出的新型机器人学习技术  第2张
(图片来源网络,侵删)