跳到正文
arXiv · 机器人与计算机视觉· Yinsong Yan, Ling Wang, Yuxuan Wang, Yifan Yang, Ruiyang Xu, Junming Lin, Qi Chen, Meng Gao, Minghao Han, Yunfei Chu, Qize Yang, Xize Cheng, Jin Xu, Jibin Wu·· 23 天前AI 评分65

Omni-InteractScope:连续全模态流中的主动与代理式交互基准测试

Omni-InteractScope: Benchmarking Proactive and Agentic Interaction in Continuous Omnimodal Streams

AI 导读

作者提出了 Omni-InteractScope 基准,包含 1,479 条人工标注、跨评审的交互数据及 1,790 个时间目标。实验结果显示当前多模态大模型存在三大局限:工具调用的及时响应率最高仅 40%,无查询提醒的召回率不超过 23.0%,且仅有少数模型能覆盖完整的端到端引导序列。该基准涵盖了事件触发的工具调用、免查询协助及状态追踪等场景,旨在推动开发具备主动行动能力的流式助手。

来源:arXiv · 机器人与计算机视觉 · arxiv.org