跳到正文
arXiv · 机器人与计算机视觉· Jinhao Li, Sarah Erfani, Lei Feng, Guangrui Li, James Bailey, Feng Liu·· 9 天前AI 评分58

Permute-then-Adapt:一种基于弱 - 强对比的图像文本适应方法

Permute-then-Adapt: Weak-to-Strong Contrastive Image-Text Adaptation

AI 导读

论文提出了 Permute-then-Adapt (PTA) 框架,旨在改进 CLIP 等图像文本对齐模型中对比学习的负样本假设。该方法利用高效弱模型识别被遗漏的正样本,并通过条件排列参考分布校准正集,避免启发式阈值带来的噪声惩罚。实验表明,在物体识别、跨模态检索和数据效率方面优于现有的启发式软标签方法。该工作已接受于 NeurIPS 2026 Spotlight。

来源:arXiv · 机器人与计算机视觉 · arxiv.org