跳到正文
arXiv · 机器人与计算机视觉· Hengyu You, Xintong Wang, Jin Cao, Liang Ding·· 12 小时前AI 评分38

PURE:多粒度多模态身份匹配诊断基准发布

PURE: A Diagnostic Benchmark for Multi-Granularity Multimodal Identity Matching

AI 导读

PURE 是首个针对电商领域的多粒度多模态身份匹配诊断基准,涵盖感知、理解、推理及证据判断四个维度。该基准包含 1,457 道选择题和 14 个任务,验证显示跨十款最新多模态大模型的整体得分介于 47.1% 至 86.0%,揭示了现有模型在视觉差异定位与变体规则判断上的短板。

来源:arXiv · 机器人与计算机视觉 · arxiv.org