跳到正文
arXiv · 机器人与计算机视觉· Yanan Wang, Shengcai Liao, Guangyi Liu, Xiaodan Liang·· 3 天前AI 评分72

Mind the RefGAP:修正基于扩散模型的视觉编辑中的参考注意力偏差

Mind the RefGAP: Correcting Reference Attention in Diffusion-Based Visual Editing

AI 导读

论文 Mind the RefGAP 指出当前参考引导的扩散编辑器(如 LoomVideo)在编辑区域对参考图的注意力分配严重不足,导致身份还原困难。作者提出一种无需训练的在线修正方法 RefGAP,通过测量前向传播过程中的参考注意力质量,动态计算各层的 logits 偏移量:对编辑区域施加正向偏移以增强参考利用,对保留区域施加负向偏移以限制非预期变化。

来源:arXiv · 机器人与计算机视觉 · arxiv.org