跳到正文
arXiv · 机器人与计算机视觉· Francisco M. L\'{o}pez, Francisco Cruz·· 9 天前精选AI 评分78

Fade to... Red? 调度彩色噪声支持高效且低抖动的机器人学习

Fade to... Red? Scheduling Coloured Noise Exploration Supports Efficient Robot Learning with Reduced Movement Jerk

AI 导读

针对连续控制中的探索问题,本文系统研究了从白噪声到红噪声的线性调度策略及其对 Fetch 机械臂和 Shadow Dexterous Hand 在稀疏奖励操作任务上的影响。研究发现,训练结束时的噪声颜色不影响最终性能,但向红噪声过渡可将所有任务的探索动作抖动减半。研究建议将向红噪声过渡的调度器作为离线机器人学习的默认配置,以平衡学习效率、最终表现与运动平滑度。

推荐理由

研究证实训练后期向红噪声过渡的策略,在保持学习效率的同时显著降低动作抖动,可作为离线强化学习的默认探索方案。

来源:arXiv · 机器人与计算机视觉 · arxiv.org