跳到正文
arXiv · 机器人与计算机视觉· Xingyi He, Zhiwen Qiu, Adhitya Polavaram, Yunhao Cao, Cory Fan, Julius Samwer, Saleh Kalantari, Kuan Fang·· 28 天前AI 评分74

基于重建增强的 RGB 单目视频三维地双手灵巧性预训练框架 SpatialDex

Reconstruction-Augmented Visuomotor Pre-Training of 3D-Grounded Bimanual Dexterity from RGB-Only Human Videos

AI 导读

论文提出了 SpatialDex 框架,旨在从仅含 RGB 的人体视频中学习带有空间上下文的三维双手灵巧操作。该方法通过重建场景几何并估计手部运动,利用手尺寸先验在共享视频级尺度上进行对齐,并将重建的几何信息既作为策略输入也作为预测目标。

来源:arXiv · 机器人与计算机视觉 · arxiv.org