arXiv · 机器人与计算机视觉· Jingtong Yang, Dongding Lin, Jian Wang, Wenjie Li·· 9 天前AI 评分45
SituRecBench:评估前沿视觉语言模型作为三维环境情境推荐助手的基准
SituRecBench: Evaluating Frontier Models as Situated Recommendation Assistants in 3D Environments
AI 导读
SituRecBench 是一个交互式基准,用于评估前沿视觉语言模型(VLMs)在高保真三维环境中作为情境推荐助手的能力。该基准模拟超市和家居店等真实购物场景,要求助手在共享用户第一视角时通过对话激发偏好、将推荐锚定环境并引导导航。实验揭示了空间锚定与偏好激发方面的持续挑战,表明现有模型难以整合全局上下文与局部观测信息。
来源:arXiv · 机器人与计算机视觉 · arxiv.org