跳到正文
arXiv · 机器人与计算机视觉· Qinan Zhang, Xinyu Wang, Qihang Jin, Tianyuan Wang, Hongbing Luo, Pengfei Li, Wenjun Lv, Yu Kang, Jian Di·· 8 天前精选AI 评分83

迈向可靠的 VLM 裁判:状态条件不变性与呈现感知诊断

Towards Reliable VLM Judges: State-Conditional Invariance and Presentation-Aware Diagnostics

AI 导读

论文提出状态条件不变性(SCI)原则,要求视觉语言模型在保持语义不变的呈现变化下保持稳定,同时能响应改变任务结果的因果干预。作者构建了 GridWM-Judge 基准,利用确定性 MiniGrid 轨迹生成全量、证据移除及反事实变体,结合呈现与表征探测进行诊断评估。

推荐理由

提出状态条件不变性原则,构建基于确定性轨迹的仿真基准以诊断多模态模型作为裁判时的感知与因果敏感性。

来源:arXiv · 机器人与计算机视觉 · arxiv.org