arXiv · 机器人与计算机视觉· Shi Li, Lalith Sharan, Jo\"el L. Lavanchy, Kun Yuan, Lorenzo Arboit, Nabani Banik, Elif Yazici, Maria Vannucci, Vinkle Srivastav, Pietro Mascagni, Nicolas Padoy·· 2 天前AI 评分57
EndoComparer:基于伪孪生视觉适配与感知 - 比较推理的手术视频对比问答研究
EndoComparer: Comparative Surgical Video Question Answering with Pseudo-Siamese Visual Adaptation and Perceive-then-Compare Reasoning
AI 导读
论文提出 EndoComparer 模型用于手术视频对比问答,包含伪孪生视觉 LoRA(PSVL)和感知 - 比较思维链(PtC-CoT)两个组件。作者构建了 EndoDiffVQA 基准数据集,涵盖胆囊切除术和胃旁路手术的解剖、工具、动作和技能问题。实验显示该模型在检测视频差异方面优于通用及手术专用 VLM,且对视频交换干扰具有更强鲁棒性。
来源:arXiv · 机器人与计算机视觉 · arxiv.org