arXiv · 机器人与计算机视觉· Bruce Changlong Xu, Lan Wu, Alexander Ryu·· 27 天前AI 评分60
测量公共医疗视觉语言基准中的预训练污染
Measuring Pretraining Contamination in Public Medical Vision-Language Benchmarks
AI 导读
Bruce Changlong Xu 等人测试了开放 VLM 在 SLAKE-En、PathVQA、VQA-RAD 和 OmniMedVQA 镜像上的数据污染情况。图像侧检测显示部分样本与 PMC-OA-beta 存在来源重叠,文本侧交换性信号在无医疗数据的模型上也会触发,表明现有检测方法需配合外部基线模型使用。
来源:arXiv · 机器人与计算机视觉 · arxiv.org