arXiv · 机器人与计算机视觉· Jiahui Yang, Jason Jingzhou Liu, Ray Muxin Liu, Andrew E. Wang, Kenneth Shaw, Deepak Pathak, Ruslan Salakhutdinov·· 28 天前AI 评分73
COWBOY:一种可扩展的仿真到现实框架,用于学习上下文驱动的全身操作
COWBOY: A Scalable Sim-to-Real Framework for Learning Contextual Whole-Body Manipulation
AI 导读
针对移动操作器需适应物体及空间环境的挑战,本文提出 COWBOY 框架,利用向量化环境感知全身控制器处理千种场景下的到达与避障,再训练局部 RL 专家进行物体交互,最终蒸馏为单一视觉策略以控制移动基座、机械臂、灵巧手和主动相机。该策略能从点云观测自动适应场景几何并执行操作。材料为预印本论文,未报告真实机器人部署结果或具体性能指标。
来源:arXiv · 机器人与计算机视觉 · arxiv.org