跳到正文
arXiv · 机器人与计算机视觉· Keyuan Luo, Yi Xie, Wanyun Ling, Yuanzhe Li, Ziyue Li, Zhuoqi Zeng·· 2026-10-19精选AI 评分78

超越成功率:视觉语言动作系统中记忆的干预式评估

Beyond Success Rate: Interventional Evaluation of Memory in Vision-Language-Action Systems

AI 导读

针对机器人记忆系统仅凭成功率无法验证任务相关事实有效性的问题,本文提出了干预式记忆评估协议(IMEP)。研究在检索接口对比了目标事实替换与事实保留替换的效果,并引入 ChainBench 基准测试历史信息的必要性。实验显示,跨集学习库中特定干预改变了 11.9% 的结果,而完整记忆配置将任务成功率从 39.1% 提升至 74.3%,证实了正确历史信息对决策的支持作用。

推荐理由

提出 IMEP 协议与 ChainBench,证明记忆系统需通过事实特异性干预评估而非仅看成功率。

来源:arXiv · 机器人与计算机视觉 · arxiv.org