跳到正文
arXiv · 机器人与计算机视觉· Sanghyuk Chun, William Yang, Amaya Dharmasiri, Olga Russakovsky·· 8 天前AI 评分57

CoMet:一种用于多模态大模型的不确定性估计新方法

CoMet: Context and Multiplicity Decomposition for Multimodal Uncertainty Estimation

AI 导读

针对多模态大语言模型难以准确评估自身不确定性的问题,论文提出 CoMet 方法,将不确定性分解为反映任务歧义的上下文项和反映合理答案数量的多重性项。该方法训练一个轻量级后处理模块来估算这两项指标,无需自回归生成或重复采样即可实现高效的不确定性估计。实验在多个开放多模态基准、幻觉检测及视觉问答任务上验证了 CoMet 相比现有基线的有效性。代码与论文预印本已公开。

来源:arXiv · 机器人与计算机视觉 · arxiv.org