研究团队提出HuRo方法:将人类视频转化为机器人操作训练数据
论文提出HuRo方法,将人类视频机器人化以生成大规模VLA预训练数据,构建63万条数据提升机器人操作性能。
AI 编撰 · 内容基于所列来源,重要信息请以原文为准
一篇发表于arXiv的论文提出HuRo方法,旨在将人类视频转化为可用于机器人操作的大规模预训练数据用来「喂」给 AI 模型学习的教材。对机器人来说,主要是「看到的画面 + 做出的动作」一一配对的操作示范。◆ 小白科普 · 现身。作者包括Jinho Jeong、Se June Joo、Jaehyun Kang、Dongyun Kim、Yena Kim、Hanjung Kim和Seon Joo Kim,来自RLWRLD与延世大学。
该方法的核心思路是低成本大规模预训练数据用来「喂」给 AI 模型学习的教材。对机器人来说,主要是「看到的画面 + 做出的动作」一一配对的操作示范。◆ 小白科普 · 现身方案,将人类视频进行机器人化处理,以服务于VLA模型AI 模型的简称,指经过训练、能从输入算出输出的程序。机器人的模型输入画面和指令,输出动作。◆ 小白科普 · 现身的预训练。据论文介绍,研究团队据此构建了大规模数据集按统一格式整理好的大批量数据集合,是训练 AI 模型的「教材库」。开源数据集相当于整个行业的公共基础设施。◆ 小白科普 · 现身,规模为63万条,用于提升机器人的操作性能。
从技术路径看,这类工作属于具身智能Embodied AI让 AI 通过机器人身体感知并作用于真实世界,不只在屏幕里回答问题。◆ 小白科普 · 现身领域的数据与预训练方向,试图利用人类视频这一相对易得的数据源缓解机器人操作数据采集为 AI 模型收集「教材」的过程。机器人行业主要靠人远程示范(遥操作)一条条录,或在仿真环境里批量生成。◆ 小白科普 · 现身成本高、规模受限的问题。论文的关键贡献在于数据生成流程与预训练应用,而非单纯的模型结构改动。