跳到正文
arXiv · 机器人与计算机视觉· Zhicheng He, Xiaohan Xing, Hongqiu Wang, Kun Yuan, Guankun Wang, Yanheng Li, Haoxuan Che, Nassir Navab, Hongliang Ren, Long Bai·· 16 天前AI 评分58

SurgPace:一种用于手术多模态大模型的复杂度感知渐进蒸馏方法

SurgPace: Complexity-Aware Progressive Distillation for Surgical Multimodal Large Language Models

AI 导读

针对手术多模态大模型计算成本高且直接知识蒸馏在手术数据上不稳定的问题,作者提出 SurgPace 框架。该方法利用预测置信度和洛伦兹几何一致性估计样本复杂度,引导从易到难的连续训练过程;同时引入分层表示对齐机制,逐步将训练重心从模仿教师转向任务监督。

来源:arXiv · 机器人与计算机视觉 · arxiv.org