Skill-Space Shooting:利用基础模型探索可复用技能以改进机器人策略
研究者提出Skill-Space Shooting方法,借助基础模型探索可复用技能来修正机器人策略,实现自主改进与技能共享。
AI 编撰 · 内容基于所列来源,重要信息请以原文为准
近期,一篇来自arXiv的论文提出了一种名为“Skill-Space Shooting”的机器人策略改进方法。该方法旨在让部署把机器人真正放到工作现场长期干活,而不只是在实验室演示。部署规模决定了数据回流和经验积累的速度。◆ 小白科普 · 现身在物理世界中的机器人能够超越初始训练,在遇到新情况和失败时自主改进。现有方法中,利用基础模型AI 模型的简称,指经过训练、能从输入算出输出的程序。机器人的模型输入画面和指令,输出动作。◆ 小白科普 · 现身自主组合已学行为虽可减少对人类演示的依赖,但完成任务本身并不能教会策略克服失败,因此需要将这些行为转化为可学习的修正。研究者的洞察是,许多此类修正属于常见的短行为或技能,它们在不同任务中重复出现,且基础模型AI 模型的简称,指经过训练、能从输入算出输出的程序。机器人的模型输入画面和指令,输出动作。◆ 小白科普 · 现身能够根据场景进行推理。Skill-Space Shooting通过基础模型AI 模型的简称,指经过训练、能从输入算出输出的程序。机器人的模型输入画面和指令,输出动作。◆ 小白科普 · 现身引导,探索这些可复用技能,并将成功试验转化为策略改进。
真实世界实验表明,策略在自主行动中可重复获得改进,同时技能也能被共享,从而减少新任务改进所需的教学。该方法使可复用技能成为纠正性监督的来源,支持任务内和跨任务的可扩展、可泛化指 AI 面对没见过的新东西、新场景时也能举一反三做出正确反应的能力。这是「通用机器人」和「专用机器」的分水岭。◆ 小白科普 · 现身的策略改进。