跳到正文
arXiv · 机器人与计算机视觉· Ruicheng Li, Qixiu Li, Yu Deng, Sicheng Xu, Jiaolong Yang, Baining Guo·· 2026-10-20AI 评分71

V-JEPA Hand:基于自监督视频的 3D 手部与相机轨迹恢复方法

V-JEPA Hand: Simple, Accurate and Fast 3D Hand and Camera Trajectory Recovery from Egocentric Videos

AI 导读

论文提出 V-JEPA Hand,这是一个简单的前馈视频模型,能联合从第一人称视频中重建双侧手部运动和相机自运动,将手部轨迹表达在统一的世界坐标系中。模型使用自监督 V-JEPA 2.1 编码器提取时空特征,并通过基于查询的预测器解码为每帧的手部姿态、手部存在性及相机运动;支持已知焦距或预测焦距,单次前向传播完成重建。

来源:arXiv · 机器人与计算机视觉 · arxiv.org