跳到正文
arXiv · 机器人与计算机视觉· Duolikun Danier, Ge Gao, Chengxi Zeng, Steven McDonagh, Changjian Li, Hakan Bilen, Oisin Mac Aodha·· 24 天前AI 评分62

视图一致的表征对相机控制视频生成重要吗?ViCoDR 方法验证与改进

Do View-Consistent Representations Matter for Camera-Controlled Video Generation?

AI 导读

针对相机控制视频生成中物体形变和场景结构破坏的问题,本文研究扩散表示的视图一致性属性及其影响。研究发现视图一致性高的模型能生成三维一致性更好的视频。提出的 ViCoDR 方法通过在训练阶段直接监督内部扩散表示的视图一致性,在图像到视频、文本到视频及多视角生成任务中均提升了输出三维效果。

来源:arXiv · 机器人与计算机视觉 · arxiv.org