arXiv · 机器人与计算机视觉· Peter A. Massih, Eric Cosatto, Martin Renqiang Min·· 22 天前AI 评分62
SQuID:卫星图像定量空间推理基准发布
SQuID: A Benchmark for Quantitative Spatial Reasoning on Satellite Imagery
AI 导读
作者发布了 SQuID 基准数据集,包含 2000 个针对 587 张卫星图像的定量问题,涵盖从数建筑到测距离等任务。结果显示端到端 VLM 准确率仅 28.1%,而基于 LLM 编写几何程序的 QASR 基线达 42.0%;微调后模型可接近该水平。数据集公开了参考掩膜与训练对,支持相关团队评估与训练具备度量空间推理能力的系统。
来源:arXiv · 机器人与计算机视觉 · arxiv.org