跳到正文
arXiv · 机器人与计算机视觉· Yu Zhao, Jiaxin Zhang, Rohit Saxena, Fazl Barez, Pasquale Minervini, Yiwen Guo·· 4 小时前AI 评分67

通过自适应数据选择实现忠实的图像思维方法

Learning to Think with Images Faithfully via Adaptive Data Selection

AI 导读

该论文指出‘用图像思考’(TwI)模型常出现工具调用不忠实于缩放区域的现象,归因于训练数据中包含了无需缩放的样本。作者提出一种自适应数据选择策略,结合小物体定位与可验证问题构建的合成管线,并引入偏好无工具回答的奖励机制,以维持缩放在整个训练过程中的有效性。

来源:arXiv · 机器人与计算机视觉 · arxiv.org