跳到正文
arXiv · 机器人与计算机视觉· Qiancheng Zhou, Wenhua Zhang·· 2 天前精选AI 评分85

Acting by Intent, Reacting by Sight:面向实时 VLM 智能体的视觉条件反射方法

Acting by Intent, Reacting by Sight: Visual Conditioned Reflexes for Real-Time VLM Agents

AI 导读

论文提出 ViCoR(Visual Conditioned Reflex)架构,旨在解决通用视觉语言模型在实时交互环境中反应过慢的问题。该方法将正常游戏动作与轻量级情境指导交由主 VLM 处理,同时利用无需深度思考的视觉反射分支检查局部动态视图以做出亚秒级决策。

推荐理由

提出 ViCoR 架构,通过视觉条件反射分支将高频反应决策延迟降低 2.6 倍并减少 36.9% token 消耗。

来源:arXiv · 机器人与计算机视觉 · arxiv.org