跳到正文
arXiv · 机器人与计算机视觉· Hao Sun, Tao Hu, Shixiong Kai, Siyuan Xu, Wenqian Zhao, Mingxuan Yuan, Da-Wei Zhou·· 2 天前AI 评分54

[CLS] 和 [EOS] Token 不足以支持基于 CLIP 的分类增量学习:PACE 方法

[CLS] and [EOS] Tokens are not Enough for CLIP-based Class-Incremental Learning

AI 导读

针对基于 CLIP 的分类增量学习(CIL)任务,现有方法仅利用全局表示而忽视了局部特征。本文提出 PACE 方法,通过识别关键视觉 patch 和文本 token 并进行跨模态融合来挖掘被忽视的局部表征。

来源:arXiv · 机器人与计算机视觉 · arxiv.org