arXiv · 机器人与计算机视觉· Sirui Chen, Huang Huang, Qineng Wang, Wenlong Huang, Manling Li, Ruohan Zhang, Li Fei-Fei, Jiajun Wu·· 23 天前AI 评分68
BEHAVIOR-Spatial 基准:评估机器人的空间理解能力
BEHAVIOR-Spatial Benchmark: Evaluating Spatial Understanding for Robotics
AI 导读
本文发布 BEHAVIOR-Spatial 基准,基于 BEHAVIOR-1K 构建,包含 3,256 个空间问答、1,240 个点定位查询及动作评估。实验显示基线模型在固定布局下仅能遵循 41.6% 的指令,当目标变更时降至 16.1%,表明单纯的任务成功无法证明空间指令被正确执行。研究还发现视觉语言模型的问答能力与机器人操作性能存在策略依赖的相关性,为评估空间感知向行为的转化提供了新视角。
来源:arXiv · 机器人与计算机视觉 · arxiv.org