跳到正文
arXiv · 机器人与计算机视觉· Duy-Cuong Bui, Trung-Anh Dang, Vincent Nguyen, Duc V. Le, Ngoc-Son Vu·· 9 天前精选AI 评分82

TEA-Prompt:基于单一共享提示词的无回放持续学习方法

Anchor Behavior, Not Parameters: Rehearsal-Free Continual Learning with a Single Shared Prompt

AI 导读

论文提出 TEA-Prompt 方法,旨在解决基于提示词的持续学习中旧知识遗忘问题。该方法通过引入令牌评估模块和注意力行为锚定损失,在不存储旧图像的情况下约束提示词在特定类别查询区域的注意力输出,从而允许参数自由更新同时保持对过去类别的功能。

推荐理由

提出 TEA-Prompt 方法,通过锚定注意力行为实现无回放持续学习,在 CIFAR-100 等数据集上显著降低遗忘。

来源:arXiv · 机器人与计算机视觉 · arxiv.org