跳到正文
arXiv · 机器人与计算机视觉· Haoyang Fan, Dhruv Parikh, Anvitha Ramachandran, Sameh Gobriel, Nilesh Jain, Rajgopal Kannan, Viktor Prasanna·· 9 天前AI 评分66

FOLIO:面向流式视频理解的聚焦语义记忆系统

FOLIO: Focused Semantic Memory for Streaming Video Understanding

AI 导读

针对在线流式视频理解中内存无限增长与冗余细节过多的挑战,本文介绍 FOLIO 免训练聚焦语义记忆系统。该系统在流式数据到达时按片段更新记忆,利用动态焦点状态结合短期视觉缓冲与围绕观测实体组织的长期语义记忆,并通过视觉证据缓存压缩周边上下文;查询时采用轻量混合检索结合结构化直接匹配与语义查询扩展。

来源:arXiv · 机器人与计算机视觉 · arxiv.org