arXiv · 机器人与计算机视觉· Qigan Sun, Chaoning Zhang, Jianwei Zhang, Xudong Wang, Jiehui Xie, Pengcheng Zheng, Haoyu Wang, Sungyoung Lee, Chi-lok Andy Tai, Yang Yang, Heng Tao Shen·· 2 天前AI 评分35
GRASP:一种面向遥感图像的引导式区域感知稀疏提示微调策略
GRASP: Guided Region-Aware Sparse Prompting for Adapting MLLMs to Remote Sensing
AI 导读
针对遥感图像大尺度变化与目标稀疏分布导致的多模态大语言模型过拟合问题,研究提出参数高效微调策略 GRASP。该方法利用冻结视觉令牌网格提取空间块构建结构化软提示,通过问答引导的稀疏融合机制动态聚合任务上下文并过滤背景噪声。在多个 RSVQA 基准测试中,GRASP 在保持高参数量效率的同时取得了与现有微调及提示方法具有竞争力的性能表现。
来源:arXiv · 机器人与计算机视觉 · arxiv.org