arXiv · 机器人与计算机视觉· Qianqian Yang, Dayou Li, Bangya Liu, Zihao Zhu, Nuo Chen, Siyuan Xu, Hezhen Hu, Chen Yu, Rebecca Friesen, Minghui Zheng, Cynthia Hipwell, Xiaoning Qian, Kenji Shimada, Zhiwen Fan·· 2026-10-19AI 评分65
Ego2Contact:基于人类第一视角视频预测接触以支持富接触机器人操作
Ego2Contact: Predicting Touch from Egocentric Human Video for Contact-Rich Robot Manipulation
AI 导读
论文 Ego2Contact 提出一种视觉 - 触觉先验学习方法,将人类交互中习得的触觉预测能力迁移到机器人手上。该方法融合时间场景上下文与手部局部视觉特征,推断双手机械触觉场,并通过解剖区域对应关系适配不同机器人的触觉布局。实验表明,该模型在人类数据上优于现有预测器,且在机器人数据适应后表现更佳;其生成的触觉输入可用于仿真强化学习与真实机器人策略训练,在仿真环境中能恢复部分真值触觉感知的收益。
来源:arXiv · 机器人与计算机视觉 · arxiv.org