跳到正文
arXiv · 机器人与计算机视觉· Yinlong Dai, Homanga Bharadhwaj, Dylan P. Losey·· 2026-10-12AI 评分73

CASTER:将合成视频的零样本操作形式化为约束优化

CASTER: Formalizing Zero-Shot Manipulation from Synthetic Videos as Constrained Optimization

AI 导读

论文 CASTER 针对从合成视频生成到真实世界机器人轨迹的零样本操作任务,将其形式化为约束优化问题。研究指出合成视频虽具备合理运动但缺乏物理一致性与机器人接地,因此无法直接执行。该方法利用视频中提取的对象轨迹作为初始猜测,在数字孪生环境中对轨迹进行修正,同时强制执行物理可行性和语义一致性。实验表明,去除现有简化假设后,该方法平均任务成功率较最佳基线提升 34.1%。

来源:arXiv · 机器人与计算机视觉 · arxiv.org