arXiv · 机器人与计算机视觉· Ayushi Mehrotra, Sai Vidyaranya Nuthalapati·· 24 天前AI 评分35
双体交互视频揭示物理 AI 编码器中的关系物理属性
Interpreting Physics in Video Encoders using Multi-Object Interaction Videos
AI 导读
V-JEPA2 与 VideoMAE 两个冻结的自监督视频编码器在双体设置下,能可靠区分弹性与非弹性碰撞。V-JEPA2 的动能读数可跨环境迁移且其预测器对产生动能的碰撞更敏感,但两模型均无法保持随几何变化而稳定的摩擦系数。该研究揭示了现有工作仅关注单物体量的局限,表明关系物理属性(如动量传递)在视频编码器中的表征能力存在显著差异。
来源:arXiv · 机器人与计算机视觉 · arxiv.org