跳到正文
arXiv · 机器人与计算机视觉· Atiksh Bhardwaj, Edward W. Duan, Junwon Seo, Prithwish Dan, Wei-Chiu Ma, Andrea Bajscy, Preston Culbertson·· 27 天前AI 评分58

Progress Probes P^2:面向视觉语言动作模型的轻量级运行时监控方法

Progress Probes $P^2$: Lightweight Runtime Monitoring for Vision-Language-Action Models

AI 导读

针对视觉语言动作模型在执行任务时易出错且难以持续人工监督的问题,本文提出利用模型内部激活值进行进度监测的新思路。研究通过在演示数据上训练线性探针来估计执行进度,并在偏离预期进度时发出警报。实验在开源 VLA 模型 pi_0.5 及模拟与真实操作任务中表明,该方法在故障检测效果上与基于外部视觉语言模型的监督方法相当甚至更优,且无需依赖外部基础模型或失败数据训练。

来源:arXiv · 机器人与计算机视觉 · arxiv.org