arXiv · 机器人与计算机视觉· Elad Yoshai, Natan T. Shaked·· 14 天前AI 评分56
CAPTOR:通过统计词频实现免文本编码器定位的视觉模型研究
CAPTOR: text-encoder-free grounding by counting caption co-occurrence over the visual words of a frozen encoder
AI 导读
arXiv 发布论文 CAPTOR 提出一种无需文本编码器的图像定位方案,通过将冻结图像编码器的 patch token 聚类为视觉词汇并计算词频差异来构建矩阵。该方法在 COCO、Pascal VOC 和 Cityscapes 数据集上均优于无文本编码器基线,且在乳腺癌病理切片测试中超越最强基线。
来源:arXiv · 机器人与计算机视觉 · arxiv.org