arXiv · 机器人与计算机视觉· Ce Zhang, Ziyang Wang, Yulu Pan, Oluwatumininu Oguntola, Pranav Wagh, Qiyu Wu, Hiromi Wakaki, Mohit Bansal, Gedas Bertasius·· 9 天前AI 评分75
Searching Videos as Trees: Self-Correcting Agents for Grounded Long Video QA
Searching Videos as Trees: Self-Correcting Agents for Grounded Long Video QA
AI 导读
该论文提出了 VideoTreeSearch (VTS) 框架,旨在解决长视频 grounded 问答中现有代理方法缺乏细粒度回溯能力导致过早收敛的问题。VTS 将任务建模为在自适应时间树上的迭代自修正搜索,构建了包含语义连贯片段的非均匀树结构,并训练智能体通过 zoom_in、zoom_out、shift 和 answer 四种离散操作进行导航。
来源:arXiv · 机器人与计算机视觉 · arxiv.org