arXiv · 机器人与计算机视觉· Dheeraj Varghese, Anna Vettoruzzo, Walter Simoncini, Michelle Lorena Acevedo Callejas, Mohammad Mahdi Derakhshani, Kristof Meding, Joaquin Vanschoren, Cees G. M. Snoek·· 2026-10-07精选AI 评分82
PlaySuite:面向交互式视觉智能的大规模评测基准
PlaySuite: A Large-Scale Benchmark for Interactive Visual Intelligence
AI 导读
PlaySuite 是一个基于超过 5000 款开源视频游戏的交互式视觉智能评测基准,涵盖 Pygame、Unity 等多种引擎。研究构建了统一的闭环交互框架与 Video-LLM-as-a-judge 协议以支持异构游戏评估。对十四种近期开放模型的测试显示,尽管推理能力强,但模型在空间定位、动作执行和自我修正方面存在持续失败,揭示了感知与行动之间的差距。
推荐理由
PlaySuite 发布大规模游戏评测基准,揭示当前模型在动态环境中的感知 - 行动差距。
来源:arXiv · 机器人与计算机视觉 · arxiv.org