arXiv · 机器人与计算机视觉· Jin Wu, Lianjie Yuan, Zeyan Sun, Yuanyuan Lei, Disi A, Bicheng Han, Fangzhou Xia·· 2026-10-06精选AI 评分78
DEXTERA:通过真实到仿真再到真实的框架实现单图可部署灵巧操作
DEXTERA: From a Single Image to Deployable Dexterous Manipulation via Real-to-Sim-to-Real
AI 导读
DEXTERA 是一个自动化的真实到仿真再到真实框架,能将单张 RGB 图像转化为跨多种策略架构的可部署灵巧操作策略。该框架包含场景因子化、度量对齐与形态平衡校准、可扩展任务构建及共享多模态接口四个阶段。实验显示其在视觉保真度与几何重建上优于生成式基线,仿真训练的策略可在真实机器人上零样本部署,且联合训练将平均物理策略成功率从 29.2% 提升至 61.9%。
推荐理由
DEXTERA 框架实现从单图到可部署策略的自动化闭环,仿真训练策略在真实机器人上零样本部署有效,且联合训练将成功率提升至 61.9%。
来源:arXiv · 机器人与计算机视觉 · arxiv.org