arXiv · 机器人与计算机视觉· Oliver Wei{\ss}l, Eduardo Breitembach, Andrea Stocco·· 24 天前AI 评分72
基于搜索的视觉语言模型模态敏感性测试:MoST 框架
Search-Based Testing of Modality Sensitivity in Vision Language Models
AI 导读
论文介绍 MoST 框架,用于黑盒测试视觉语言模型的模态敏感性。该方法通过多目标搜索选择并组合图像与文本扰动,在限制输入变化的同时寻求预测性能下降。研究在 ImageNet 和驾驶图像上的四个对象定位模型上验证了不同模态的敏感性差异,发现联合扰动能以较小改动达到甚至超过单模态扰动的效果。
来源:arXiv · 机器人与计算机视觉 · arxiv.org