arXiv · 机器人与计算机视觉· Zhiqi Li, Bo Zhu·· 16 天前精选AI 评分78
dKV Forcing:通过可微 KV Cache 分离生成与记忆表示
dKV Forcing: Separating Generation and Memory Representations through a Differentiable KV Cache
AI 导读
论文提出 dKV Forcing 方法,旨在预训练因果视频生成器中从共享骨干网络学习专用的记忆表示。该方法利用未来读取来训练写入特定的低秩残差,将记忆写入与生成过程分离。
推荐理由
提出 dKV Forcing 方法,通过可微缓存分离生成与记忆表示,在降低显存和训练周期的同时提升长视频生成的美学质量。
来源:arXiv · 机器人与计算机视觉 · arxiv.org