arXiv · 机器人与计算机视觉· Zhiran Zhang, Hu Wang, Yichen Wu, Yutong Xie·· 9 天前精选AI 评分83
MemSurg:用于机器人辅助手术的场景与工作流理解的结构性记忆框架
Remembering to Reason: Structured Memory for Scene and Workflow Understanding in Robot-Assisted Surgery
AI 导读
MemSurg 是一个针对机器人辅助手术的视频理解框架,旨在解决帧级提示无法利用早期观察历史的难题。该框架通过结构化记忆图存储带时间戳的实体类别、位置、运动线索和交互摘要,并利用时序链接与实体关联链接保留上下文及跨阶段观测。
推荐理由
该框架通过结构化记忆图解决手术视频理解中的历史上下文缺失问题,在前列腺切除术等基准上显著优于现有方法。
来源:arXiv · 机器人与计算机视觉 · arxiv.org