arXiv · 机器人与计算机视觉· Yanjun Guo, Zhengqiang Zhang, Pengfei Wang, Xinyue Liang, Zhiyuan Ma, Lei Zhang·· 22 天前AI 评分66
按需记忆:用于空间一致长视界视频生成的解耦记忆控制
Memorize When Needed: Decoupled Memory Control for Spatially Consistent Long-Horizon Video Generation
AI 导读
该论文针对现有方法在场景重访时内容不一致及探索新区域能力下降的问题,提出一种将记忆条件化与视频生成分离的框架。研究引入混合记忆表示以捕捉时空线索,利用逐帧交叉注意力机制确保每帧仅由最相关的历史空间信息条件化,并设计相机感知门控机制仅在存在有效历史参考时激活记忆模块。实验表明该方法在视觉质量和空间一致性上均达到当前最优水平,且数据效率更高。
来源:arXiv · 机器人与计算机视觉 · arxiv.org