arXiv · 机器人与计算机视觉· Hao Fu, Qian Feng, Hanbin Zhao, Jiahua Dong, Xu Tan, Lina Wei, Chao Zhang, Hui Qian·· 2 天前AI 评分38
视觉语言模型通过任务子空间投影与动态 LoRA 实现增量学习
Incremental Learning of Vision-Language Models via Task Subspace Projection and Dynamic LoRA
AI 导读
针对预训练视觉语言模型在多域任务增量学习中面临的遗忘与适配难题,研究提出 TSP-DLoRA 方法。该方法利用任务子空间投影区分已知未知任务,并通过动态分配低秩适配器平衡性能与参数成本。在 11 个数据集上的三项指标实验验证了该方法的有效性,代码已开源。
来源:arXiv · 机器人与计算机视觉 · arxiv.org