跳到正文
11月10日周二
  1. arXiv · 机器人与计算机视觉20

    Edge Computing for Computer Vision in IoT 可行性与方向研究

    该论文评估了 LoRaWAN 和卫星物联网通信策略,分析了边缘硬件上的计算机视觉工作负载。研究探讨了在动态现实条件下部署多接入边缘拓扑、模型量化及卫星增强平台的可行性。未来方向包括支持低延迟、能效高且具社会影响力的物联网应用中的零样本学习与多模态感知。

  2. arXiv · 机器人与计算机视觉49

    全量微调非问题:为何 Adam 失败而 SGD 在少样本 CLIP 适配中成功

    该研究通过 11 个数据集、3 种 CLIP 骨干及 5 个 shot 水平的实验证明,在全量微调下普通 SGD 优于代表性 PEFT 方法,而 Adam/AdamW 因支持集预条件化不可靠导致崩溃。理论形式化了少样本估计误差如何被放大为不安全更新,证实优化器诱导的预条件化而非全量微调本身是失败主因。论文已接受发表于 NeurIPS 2026,代码与权重开放许可待确认。

  3. arXiv · 机器人与计算机视觉35

    Confidence-Driven Adaptive Semantic Transmission 提升带宽受限网络下的图像分类可靠性

    Confidence-Driven Adaptive Semantic Transmission(CDA)通过边缘设备根据置信度自适应选择文本、压缩 ROI 或全图传输,解决无线监控中通信成本与分类可靠性的权衡。数值评估显示,在带宽受限和丢包链路下,该方法相比仅传边缘结果或未压缩 ROI 的基线实现了更高的接收端任务准确率。该研究为物理 AI 系统在资源约束下的语义通信提供了新范式。

  4. arXiv · 机器人与计算机视觉43

    Hyperbolic Elastic Representation Learning (HERL) 框架实现维度自适应嵌入学习

    Hyperbolic Elastic Representation Learning (HERL) 框架通过轻量级适配器在无需重训基础编码器的情况下,实现了图像与文本模态下嵌入的压缩与扩展。该方法利用双曲几何指数容量,在保持下游性能的同时显著降低计算成本,并支持监督与非监督设置下的平滑维度插值。代码已开源,论文已被 NeurIPS 2026 接收。

  5. arXiv · 机器人与计算机视觉58

    Plot-to-Code 生成中的简单测试时优化:基于视觉 - 代码诊断

    针对多模态大模型在 Plot-to-Code 任务中缺乏类似人类‘先生成后纠错’工作流的痛点,本文提出首个基于迭代测试时优化的研究框架。作者构建了 Visual-Code Diagnostics 系统,将生成错误分为四类,训练轻量判别器利用渲染出的视觉输出与对应代码进行错误识别与定位。

  6. arXiv · 机器人与计算机视觉75

    面向抗干扰流编辑的前瞻引导方法

    针对扩散和流模型在受控编辑中难以兼顾源图像保真度与编辑合规性的问题,本文提出一种无需逆推、基于轨迹视角的流图像编辑框架。该方法引入一步前瞻机制,通过去噪估计候选更新对编辑和保真度奖励的影响,并在显式保真约束下调整当前更新。实验表明,该方案在保持更强语义编辑的同时,比现有强基线更好地保留了源内容。

  7. arXiv · 机器人与计算机视觉68

    Evaluating Physically Grounded Procedural Reasoning in VLMs through Real-World Execution: Crochet as a Testbed

    作者提出以钩针编织为物理测试床来评估视觉语言模型(VLM)的物理基础程序推理能力,因为该过程难以仿真且验证成本低。研究引入 FoundationChain 测试框架,通过手工执行四个 VLM 生成的 40 种钩针图案进行验证。结果显示仅有四个图案无错误,分析暴露了模型在视觉、几何和程序推理方面的缺陷。

  8. arXiv · 机器人与计算机视觉35

    STABLE:一种具备自适应漂移控制的持续学习优化器

    STABLE 是一种原对偶优化器,通过自适应漂移控制解决持续学习中灾难性遗忘与不稳定的适应问题。实验表明,在长视界单模态及 CLIP 多模态流中,STABLE 微调基线匹配或超越专用持续学习方法并保留零样本迁移能力。该成果已获 NeurIPS 2026 接收,代码与权重开放许可。

  9. arXiv · 机器人与计算机视觉42

    EgoVeil:面向第一人称视频的个性化隐私推理系统

    EgoVeil 是一种将视觉区域转化为结构化语义观察并结合用户特定记忆的个性化隐私推理系统,旨在智能眼镜辅助中平衡隐私保护与上下文保留。该系统在 10 名真实用户的野外数据上评估,实现了 91.93% 的平衡准确率和 84.42% 的掩码召回率,优于直接 VLM 基线及其他受控推理方法。研究证明个性化自适应推理能更好地对齐个体偏好并保留有效视觉上下文。

  10. arXiv · 机器人与计算机视觉82

    TIGER:通过桥接推理 - 访问差距解锁视觉推理

    该论文指出多模态大语言模型在视觉输入上存在推理能力下降现象,将其定义为‘推理 - 访问差距’。作者提出 TIGER(Text-to-Image Gap-targeted training for Enhanced Reasoning)方法。

    推荐理由:提出 TIGER 方法通过挖掘合成反事实数据并微调,弥合视觉推理与文本推理间的差距。

  11. arXiv · 机器人与计算机视觉18

    Compact Quantum Channel Attention for Static ASL Recognition:参数匹配基线下的受控研究

    QCA-DenseNet 采用八量子比特变分电路作为通道注意力门,在 DenseNet121 特征上实现静态美国手语识别。该模型在保留 17,464 个参数的情况下,于 1,815 张 MU HandImages 图像测试中达到 94.50% 准确率,优于 SE 块基线且无显著量子优势。研究证实紧凑注意力门未带来精度损失,但亦未发现量子优越性。

  12. arXiv · 机器人与计算机视觉49

    GB-SAE 通过门控瓶颈稀疏自编码器实现跨模型语义字典统一与特征复用

    GB-SAE 提出门控瓶颈稀疏自编码器框架,同时学习共享通用语义字典与各模型私有残差字典以解决表示异构问题。该方法在 ViT、SigLIP、DINOv2 及 ConvNeXt 等基础模型上验证了卓越的重组能力与跨模型可复用性,并支持未见模型的泛化。代码已开源,相关成果将在 NeurIPS 2026 会议呈现。

  13. arXiv · 机器人与计算机视觉45

    SituRecBench:评估前沿视觉语言模型作为三维环境情境推荐助手的基准

    SituRecBench 是一个交互式基准,用于评估前沿视觉语言模型(VLMs)在高保真三维环境中作为情境推荐助手的能力。该基准模拟超市和家居店等真实购物场景,要求助手在共享用户第一视角时通过对话激发偏好、将推荐锚定环境并引导导航。实验揭示了空间锚定与偏好激发方面的持续挑战,表明现有模型难以整合全局上下文与局部观测信息。

  14. arXiv · 机器人与计算机视觉5

    确定性生成扩散模型的通用结构研究

    该研究表明,基于扩散的生成模型在确定性采样轨迹上存在一种与数据模态及模型实现无关的通用几何结构。这一发现可通过基于最优线性去噪器的精确可解模型进行解释,为跨领域的模型训练与推理提供了统一的理论框架。

  15. arXiv · 机器人与计算机视觉35

    LITHOS 多模态岩相图像分类与可解释性评估报告

    基于 105,802 个专家标注颗粒的评估显示,LITHOS 双流视觉Transformer在正交偏振光输入缺失时,25类中有20类真类概率下降幅度大于正交偏振光替换。五种XAI归因方法对同一输入生成不同可视化地图,且超像素删除分析中所有41个95%置信区间均包含零值。研究证实仅凭分类准确率或视觉检查无法确立模型误差结构、模态敏感性及归因行为等关键性能维度。

  16. arXiv · 机器人与计算机视觉59

    超越提示攻击:概念擦除的最小动作审计

    针对文本到图像扩散模型的‘概念擦除’(如 NSFW 内容),现有提示攻击仅测试条件字符串能否检索目标概念,无法衡量冻结生成器对该概念的分配概率。本文提出‘最小动作审计’方法,通过计算驱动冻结反向过程进入检测器定义的事件所需的最小控制成本(即路径空间 KL 散度或事件负对数概率)来量化残留概率。

  17. arXiv · 机器人与计算机视觉13

    Polarization Aware Deep Learning Framework for SAR Despeckling 提出统一去斑框架

    该研究提出一种统一的深度学习框架,利用单张训练好的卷积神经网络处理单、双及全极化合成孔径雷达数据。方法采用九通道协方差矩阵表示与极化感知掩码策略,无需修改网络架构即可适配不同配置。在三种传感器场景的定性定量对比中,该方法展现了跨极化配置的竞争力并验证了统一方案的可行性。

  18. arXiv · 机器人与计算机视觉42

    频率一致合成与选择性迁移用于医学图像分析

    该研究提出通过自适应频率一致性和选择性特征转移的框架,将医学图像合成与任务学习相链接。在五个数据集上的评估显示,该方法在无配对监督下训练的对抗及扩散翻译器中提升了转换保真度,并在脑肿瘤分割和病灶中心点检测上取得增益。所有 105 组配对比较的点估计均支持所提方法,包括在未重新训练情况下对治疗后 MRI 进行的 36 次外部翻译比较。

  19. arXiv · 机器人与计算机视觉57

    Process then Retrieve:探究视觉语言模型中模态差距的起源

    该论文调查了视觉语言模型(VLM)中模态差距的成因,发现文本嵌入层的语义密度远低于视觉嵌入层,导致早期网络层优先处理文本表示。研究通过机制分析证明,用语义最接近的文本令牌替换视觉令牌位置可增强早期层的注意力,这为改善多模态推理架构提供了基础洞察。

  20. arXiv · 机器人与计算机视觉75

    Reframe:面向代理视觉推理的观测对齐多教师同策略蒸馏方法

    论文介绍Reframe后训练框架,旨在解决视觉智能体在工具使用中忽视返回观测及动作缺乏依据的问题。该方法包含两个阶段:Ground-Drop-GRPO利用证据感知奖励和随机移除原始视觉输入来训练空间与时序专家;Observation-Gated-MOPD则在推理中途用规范动作替换不足的工具动作并修复观测以继续蒸馏。

  21. arXiv · 机器人与计算机视觉72

    超越模态偏好:在 MLLM 模态冲突下控制多模态仲裁

    针对多模态大语言模型(MLLMs)在输入模态不一致时可能偏向不可靠模态的问题,研究团队识别出一组能因果影响预测遵循视觉还是文本证据的注意力头(arbitration heads)。在此基础上,提出一种轻量级、无需训练的推理干预方法,通过在推理阶段引导这些头部向指定可信模态倾斜,实现对多模态依赖的有效双向控制。该方法在多个基准测试中表现稳定且具备泛化能力,代码已开源。

  22. arXiv · 机器人与计算机视觉73

    Grasping the Future:基于互联网视频的联合 3D 手 - 物体未来预测

    本文提出 Grasping-the-Future,这是一个统一的生成模型,用于联合预测手腕、手指关节及物体的三维位置与朝向。通过掩蔽时空补全和流匹配技术,该单一模型可执行多种预测任务:预测未来交互、根据物体运动推断手部运动或反之、生成交互轨迹以达成目标物体姿态,以及补全部分观测到的交互过程。

  23. arXiv · 机器人与计算机视觉73

    Click3R:基于稀疏对应点点击的交互式立体 3D 重建

    针对现有前馈大模型 3D 重建无法纠错的局限,提出 Click3R 框架,通过轻量级适配器将用户提供的少量跨视图对应点注入网络以解决几何歧义。研究构建了专门用于暴露现有方法失败模式的基准测试,实验表明仅凭一次点击即可降低重建误差,在标准及自建基准上均提升性能。材料为 NeurIPS 2026 预印本,提供 GitHub 项目页面与论文链接。

  24. arXiv · 机器人与计算机视觉35

    2D Gum-Net:通过对称相关与谱池化实现无监督稠密弹性图像配准

    2D Gum-Net 将原用于冷冻电镜的 3D Gum-Net 架构迁移至 2D,利用冻结基矩阵乘法替代传统池化以提速约 50 倍。该方法在合成数据上训练并零样本评估于指纹基准,使 FVC2004 结构相关度提升最高达 15.7%。论文已获 NeurIPS 2026 NewInML Workshop 接收,代码与权重开放许可待注册。

  25. arXiv · 机器人与计算机视觉42

    DTHA 框架实现零样本脑电图像检索,Top-1 准确率超基线 12.4%

    DTHA 框架利用双教师层级对齐机制,在 THINGS-EEG 数据集上实现零样本脑电到图像检索,Top-1 准确率达 92.4%,较现有最先进方法提升 12.4 个百分点。该研究通过共享编码器结合 CLIP 与 DINOv2 互补偏差,验证了跨范式视觉基础模型在提取层级视觉信息方面的有效性。THINGS-MEG 评估进一步证实了该方法在生物合理性及跨模态泛化上的优势。

  26. arXiv · 机器人与计算机视觉35

    Plant Orbiter:利用视频扩散轨道相机与 3D 高斯泼溅实现植物三维重建与生成

    Plant Orbiter 方法通过视频扩散模型从单张图像生成高质量植物 3D 高斯泼溅,在复杂形态下比基线获得最高 3D F-score。结合 2D 扩散模型,该方法实现了基于文本提示的 3D 植物模型生成,且因对齐更简单、相机布设成本更低而更适合高通量数字表型流水线。论文已提交至 Plant Phenomics 预印本 arXiv:2611.12739,包含代码与数据。

  27. arXiv · 机器人与计算机视觉48

    OptiCover:Airbnb 冷启动视觉优化框架实现首页与搜索页互动提升

    Airbnb 推出 OptiCover 框架,解决电商市场冷启动下多表面照片选择难题。该方案结合冻结 CLIP 嵌入的轻量级视觉头与 VLM 语义校验,在首页和搜索页实验中将互动量提升 1.5%、预订者增加 0.35%,每日执行数千万次照片替换并创造百万美元增量收入。目前 OptiCover 已部署至生产环境,验证了动作空间塑造与语义约束对性能的核心驱动作用。

  28. arXiv · 机器人与计算机视觉55

    Spaghetti Splatting:通过卷积区分曲线性 Dirac 质量

    该论文提出了 Spaghetti Splatting 方法,旨在解决生产系统中用点、线、三角形等原语表示 3D 几何的挑战。研究将曲线近似为多段线,并通过卷积使各段复合时不重复计数关节处。该方法支持高斯及贝塔核以外的内核,是 3D Gaussian Splatting 的严格超集,在通用场景中保持竞争力,优于专用于线状几何的方法,原生支持抗锯齿并生成可直接用于物理仿真的长连接丝状结构。

  29. arXiv · 机器人与计算机视觉71

    GeoScope:超越计数视界的无训练程序执行方法用于超高解析度遥感问答

    针对超高解析度遥感图像中物体计数和空间关系判断的难题,该研究指出现有视觉语言模型(VLM)存在固定的‘计数视界’限制,一旦视图内物体超过约五个便会显著失准。作者提出 GeoScope 方法,利用纯文本语言模型将问题转化为空间程序以固定区域和分辨率,仅让 VLM 在其有效范围内进行定位与计数,并显式计算方向关系。

  30. arXiv · 机器人与计算机视觉5

    可微逆渲染从血管内光学相干断层扫描恢复固有属性

    该方法通过梯度下降利用可微物理前向模型,无需训练数据或分割即可从单张 OCT 图像恢复像素级衰减系数。研究在分析解验证基础上,于体外拟真物及 128 名患者的 29,269 张临床血管内 OCT 图像中实现跨平台无修改应用。该技术为定量组织表征提供可扩展框架,支持光学参数与成像模态的通用扩展。

  31. arXiv · 机器人与计算机视觉36

    Google AlphaEarth Foundations Embeddings 实现摩洛哥国家级作物类型映射

    Google AlphaEarth Foundations Embeddings 结合 Fields of the World 边界图,无需处理原始卫星影像即可在约五小时内完成摩洛哥全国级作物分类。该方法针对冬谷物、树生作物及其他作物三类目标,经十次独立测试平均准确率达 (87.17 +/- 0.42%)。实验表明预训练嵌入表示在计算高效的大规模农业映射中具备显著潜力。

  32. arXiv · 机器人与计算机视觉78

    草图监督分割的失效机制:一项基于审计的标注鲁棒性基准

    针对草图监督分割在固定标注集评估下对语义和几何缺陷鲁棒性不足的问题,作者引入六种受控扰动算子(包括类别腐蚀、空间偏移、方向扰动等)并构建可复现基准。实验显示,在最强设置下,类别腐蚀使 mIoU 从 70.08 骤降至 1.46,而语义锚点腐蚀造成最大性能退化。该基准旨在诊断标注鲁棒性而非仅依赖干净集准确率,代码已开源。

    推荐理由:该工作通过审计驱动建立了草图标注鲁棒性基准,量化了语义与几何扰动对分割性能的影响。