跳到正文
arXiv · 机器人与计算机视觉· Kai Zhu, Yintianrun Zhang, Shuwei Jiang, Ruolin Zuo, Yixin Chen, Duomin Wang, Miao Liu, Yin Li, Daquan Zhou, Yiwu Zhong·· 28 天前精选AI 评分83

CausalAlign:面向一致自运动的视频生成模型因果对齐方法

CausalAlign: Causal Alignment of Video Generation Models for Consistent Ego-Motion

AI 导读

针对扩散式视频生成模型在长序列中自运动(ego-motion)漂移导致几何不一致的问题,该研究提出 CausalAlign 框架。该方法利用线性探针诊断自运动表征的保留模式,并通过将特定层的表征与 3D 基础模型在 delta-token 空间对齐来增强自运动状态。

推荐理由

该工作通过因果对齐框架修正扩散视频生成模型的自运动漂移,显著提升了几何一致性与具身任务成功率。

来源:arXiv · 机器人与计算机视觉 · arxiv.org