跳到正文
arXiv · 机器人与计算机视觉· Shihab Aaqil Ahamed, Mohamed Ansaff, Nang Khin Myat Lay Phyu, Udaya Sampath K. Perera Miriya Thanthrige, Chamira U. S. Edussooriya, Ranga Rodrigo, Muhammad Haris Khan·· 20 天前AI 评分56

M-PFT:一种用于微调视觉语言模型的校准提示词调整方法

M-PFT: Angular Margin for Calibrated Prompt-Tuning of Fine-Tuned Vision-Language Models

AI 导读

论文提出 M-PFT 方法,针对提示微调后视觉语言模型在基类与新颖类上的双重校准偏差问题,引入两个互补目标以扩大角距离并保留语义几何结构。实验表明该方法能有效降低新颖类的平均校准误差,同时保持基类竞争力和准确率,且计算开销可忽略。

来源:arXiv · 机器人与计算机视觉 · arxiv.org