Ego2Robot：跨本体机器人学习的新数据方案

由中国人民大学AIM3 Lab、阿里Qwen Team、上海科技大学、北京智源人工智能研究院及北京航空航天大学合作提出的Ego2Robot框架，旨在将大规模人类第一视角操作视频转化为机器人可直接学习的视觉与动作数据。该方法通过手部动作重定向、相机坐标系与末端执行器的对齐，以及SAM 3分割和ProPainter修复等技术，应对人手、相机和机器人之间的域差距。研究覆盖十五种机器人形态，并构建了包含18,561小时数据的数据集数据集按统一格式整理好的大批量数据集合，是训练 AI 模型的「教材库」。开源数据集相当于整个行业的公共基础设施。◆ 小白科普 · 现身。此外，框架引入三层质量筛选机制，并基于RoboTwin2.0的四维十二设置解耦评测验证效果。