跳到正文
arXiv · 机器人与计算机视觉· Xiangyang Wu, Chen Ju, Xu Chen, Likang Peng, Jinsong Lan, Haihong Tang, Yang Hu·· 9 天前AI 评分45

TRIAD:多模态检索跨抽象、约束与状态基准评测

TRIAD: Multimodal Retrieval across Abstraction, Constraints, and State

AI 导读

TRIAD 是一个评估多模态检索系统满足复杂动态请求能力的基准,涵盖抽象、约束及状态三个赛道。该基准含六个子集,每子集 1,000 查询与固定候选池,采用多正均值平均精度(mAP)协议评测 20 种配置的 17 个系统。结果显示无系统在全部子集领先,且跨轮次检索在 40 组对比中 39 组表现低于单轮任务。

来源:arXiv · 机器人与计算机视觉 · arxiv.org