arXiv · 机器人与计算机视觉· Seongjin Bien, Carlo Kneissl, Tobias J\"ulg, Frank Fundel, Thomas Ressler-Antal, Florian Walter, Bj\"orn Ommer, Gitta Kutyniok, Wolfram Burgard·· 17 天前AI 评分75
FlowTouch:一种基于局部 3D 网格的视图不变手眼触觉预测模型
FlowTouch: View-Invariant Visuo-Tactile Prediction
AI 导读
该论文提出 FlowTouch 模型,旨在解决触觉传感器仅在接触时才有读数的局限,通过利用物体局部 3D 网格编码信息并抽象场景细节,实现从视觉到触觉的预测。研究整合了场景重建与基于流匹配(Flow Matching)的图像生成技术,结果显示该模型能跨越仿真到现实的差距并泛化到新传感器实例,其生成的触觉图像还可用于下游抓握稳定性预测。代码、数据集及视频已公开。
来源:arXiv · 机器人与计算机视觉 · arxiv.org