跳到正文
arXiv · 机器人与计算机视觉· Zahid Mansur, Kalpana Yadav, Deepak Mishra·· 3 天前AI 评分5

Cracks in Embeddings:JEPA 基胸片表征的鲁棒性与稳定性研究

Cracks in Embeddings: Robustness and Stability of JEPA-Based Chest X-Ray Representations

AI 导读

针对自监督联合嵌入预测架构(JEPA)在医疗影像中鲁棒性不足的问题,研究测试了四种基于 JEPA 的胸片编码器。实验显示,在边界攻击等扰动下,I-JEPA 编码器的余弦相似度降至 0.33,AUROC 下降 0.12。通过对抗微调将嵌入一致性提升至 0.97 以上,而仅用干净数据训练的向量量化方法则导致性能进一步恶化。

来源:arXiv · 机器人与计算机视觉 · arxiv.org