跳到正文
arXiv · 机器人与计算机视觉· Zhengtao Liu, Jinrong Xu, Shiu-Hong Kao, Huixin Sun, Yicong Li·· 14 天前AI 评分65

Sekai:面向通用推理的视频分割增量事件记忆方法

Sekai: Incremental Event Memory for Generalized Reasoning Video Segmentation

AI 导读

针对流式视频中目标集合随时间演化的特性,本文提出广义推理视频分割(GRVS)新任务及 Sekai 在线框架。该框架包含维护查询相关事件的 Event Memory Reasoner 和基于记忆的解码器 MGD。在包含 60 个视频与 197 个查询的 Isekai 基准测试中,Sekai 取得 50.33 J&F 分数,优于最强基线 3.2 分。代码、标注及评测脚本已开源。

来源:arXiv · 机器人与计算机视觉 · arxiv.org