正在发生
现身看见具身智能正在发生
TECHNOLOGY · 技术
运动控制与强化学习

面向完整STL规范的时空管奖励强化学习控制框架

该论文提出基于时空管几何特性的时间感知强化学习框架,将完整STL规范映射为时变几何边界,以无历史状态方式学习满足输入约束的控制策略。

文 / 现身编辑部来源 / arXiv约 1 分钟读完技术 · XIANSHEN

AI 编撰 · 内容基于所列来源,重要信息请以原文为准

现身编辑封面 · 几何图形由站内算法生成 · article-1542

印度科学研究所的研究者发表论文,针对非完整和欠驱动等未知动力学、执行器受限的机器人系统,提出一种基于时空管(STT)几何特性的时间感知强化学习一种 AI 训练方法:让机器人在亿万次「试错」中自己摸索,做对了就给奖励。机器人走稳路、跑酷空翻,大多是这么练出来的。◆ 小白科普 · 现身框架,用于满足信号时序逻辑(STL)表达的高层规范。传统STT解析控制器难以处理输入约束,现有强化学习一种 AI 训练方法:让机器人在亿万次「试错」中自己摸索,做对了就给奖励。机器人走稳路、跑酷空翻,大多是这么练出来的。◆ 小白科普 · 现身方法则依赖内存密集型状态历史。该方法将完整STL的逻辑与时序复杂度映射为时变几何边界,直接约束多维系统状态,不依赖标量鲁棒性度量。状态空间增广时间维度后,采用连续几何感知奖励函数训练时间感知Soft Actor-Critic智能体,无需在执行中显式评估复杂逻辑语义。该框架无需状态历史,计算高效,可学习连续控制策略,在严格满足系统输入约束的同时保证规范的鲁棒满足。