跳到正文
arXiv · 机器人与计算机视觉· Sujung Hong, Tae Eun Choi, Youngjun Jun, Chanyong Yoon, Seong Jae Hwang·· 24 天前AI 评分48

TIE:免训练 CLIP 嵌入引导实现组合式文生图语义对齐

TIE: Training-free CLIP Embedding Guidance for Compositional Text-to-Image Alignment

AI 导读

TIE 是一种针对基于 CLIP 的文生图扩散模型提出的免训练推理时解决方案,旨在解决多对象多属性提示下的概念丢失与混淆问题。该方法通过熵感知奇异值放大处理概念丢失,并利用 CLIP 注意力分数进行插值外推绑定以消除概念混淆。实验表明,TIE 在提升多概念场景语义保真度的同时,仅引入极小的采样开销且无需额外训练。

来源:arXiv · 机器人与计算机视觉 · arxiv.org