arXiv · 机器人与计算机视觉· Hao Sun, Tao Hu, Shixiong Kai, Siyuan Xu, Wenqian Zhao, Mingxuan Yuan, Da-Wei Zhou·· 2 天前AI 评分54
[CLS] 和 [EOS] Token 不足以支持基于 CLIP 的分类增量学习:PACE 方法
[CLS] and [EOS] Tokens are not Enough for CLIP-based Class-Incremental Learning
AI 导读
针对基于 CLIP 的分类增量学习(CIL)任务,现有方法仅利用全局表示而忽视了局部特征。本文提出 PACE 方法,通过识别关键视觉 patch 和文本 token 并进行跨模态融合来挖掘被忽视的局部表征。
来源:arXiv · 机器人与计算机视觉 · arxiv.org