跳到正文
10月20日周二
  1. arXiv · 机器人与计算机视觉52

    PlantXpert:面向植物表型分析的多模态大模型基准

    arXiv 预印本 PlantXpert 提出了一套针对大豆、棉花、水稻和玉米的植物表型分析基准,包含 545 张数字图像和 4351 个样本。研究评估了 11 种先进视觉语言模型(VLM),发现微调后多数模型准确率可达 70%,但通用多模态能力不足以支撑可靠的农学推理,需进行领域特定适配。

  2. arXiv · 机器人与计算机视觉42

    CTFS:面向前视声纳图像语义分割的协作教师框架

    CTFS 提出一种由通用教师与多个声纳专用教师组成的多教师协作机制,通过交替引导策略在极少量标签下实现声纳图像特征建模。该框架引入跨教师可靠性评估以抑制噪声伪标签影响,在 FLSMD 数据集仅标注 2% 数据时,mIoU 较最先进方法提升 5.08%。论文已获 CVPR 2026 Finding 接收,代码与权重开放于 GitHub。

  3. arXiv · 机器人与计算机视觉65

    医学图像分割:从权重空间到记忆空间的适应范式转移——MemSeg-Agent 模型发布

    针对单数据集训练的视觉基础模型难以跨机构、扫描仪或人群泛化的问题,作者提出 MemSeg-Agent,通过轻量级静态、少样本及测试时工作记忆动态组合固定骨干网络。实验表明,仅静态记忆即可匹配强监督基线且参数高效,结合测试时工作记忆可进一步提升域内与跨域性能,无需微调即支持联邦监督学习与测试时自适应,显著降低通信开销。

  4. arXiv · 机器人与计算机视觉70

    SpargeAttention2:基于混合 Top-k+Top-p 掩码与蒸馏微调的可训练稀疏注意力方法

    该文提出 SpargeAttention2,一种针对扩散模型的可训练稀疏注意力机制。研究分析了传统掩码规则的失效条件及微调局限性,提出了结合 Top-k 和 Top-p 的混合掩码策略、高效实现以及蒸馏式的微调目标。实验表明该方法在视频扩散模型上实现了 95% 的注意力稀疏度和 16.2 倍加速,同时保持了生成质量,优于现有方法。

  5. arXiv · 机器人与计算机视觉43

    Semantic-Guided Dynamic Sparsification 提升预训练模型类增量学习性能

    Semantic-Guided Dynamic Sparsification(SGDS)通过调控激活子空间的定向与秩,解决冻结参数正交约束损害可塑性的问题。该方法在鼓励相似类别共享紧凑激活子空间的同时,为不相似类别分配非重叠子空间以抑制干扰。多项基准数据集实验表明,SGDS 在不施加刚性参数约束下实现了最先进的类增量学习性能。

  6. arXiv · 机器人与计算机视觉33

    Generative Spatiotemporal Data Augmentation:利用视频扩散模型增强低数据场景下的计算机视觉性能

    该方法利用现成视频扩散模型,从图像数据集生成逼真的三维空间与时间变化,以弥补传统几何变换在相机视角和场景动态上的不足。在标注稀缺的无人机(UAV)成像等低数据设置中,引入合成视频片段作为补充训练数据可带来一致的性能提升。研究提供了选择生成架构、迁移标注及解决遮挡区域的具体指南,并在 COCO 子集与 UAV 数据集上验证了其在数据匮乏 regime 下的有效性。

  7. arXiv · 机器人与计算机视觉4

    SiLVi:支持视频交互标注的开源计算机视觉工具

    哥廷根大学团队发布开源软件 SiLVi,填补了现有工具在行为标注与个体定位间无法同时实现的空白。该软件允许研究人员直接在视频中注释行为及互动,生成结构化数据以训练和验证计算机视觉模型。其文档、下载说明及 Linux 版本已提供,适用于从动物行为分析到提取动态场景图的人类交互标注任务。

  8. arXiv · 机器人与计算机视觉23

    Cattle-CLIP:一种用于奶牛行为识别的多模态框架

    Cattle-CLIP 提出了一种基于对比语言图像预训练(CLIP)的域自适应视觉语言框架,通过引入时间整合模块将图像级预训练扩展至视频行为理解。该框架构建了包含 1,905 个标注片段、涵盖六种室内行为的 CattleBehaviours6 数据集,并在监督及少样本设置下实现了跨模态语义对齐。

  9. arXiv · 机器人与计算机视觉21

    RestoRect:基于潜在整流流与特征蒸馏的退化图像复原方法

    RestoRect 提出一种结合 Retinex 分解、各向异性扩散约束及三角色空间极化的新方法,通过可学习轨迹在潜空间合成教师质量特征。该方法在 15 个数据集、4 项任务及 10 个指标上均优于基线,实现了更优的训练稳定性与更快的收敛推理速度。

  10. arXiv · 机器人与计算机视觉82

    TestDG:面向持续测试时适应的测试时域泛化方法

    该论文研究了持续测试时适应(CTTA)任务,即模型在测试阶段不断适应未见过的新域同时保留先前知识。现有方法多仅关注当前域而忽视对未来域的泛化能力。为此,作者提出了 TestDG 框架,旨在测试过程中在线学习对当前及历史测试域均不变的特征,并提出新的模型架构、适应策略以及原型选择更新机制以管理历史信息。

    推荐理由:提出 TestDG 框架,在测试时学习域不变特征以应对未来未知领域,在三个公开基准上达到最先进水平。

  11. arXiv · 机器人与计算机视觉75

    DecompDreamer:一种面向结构化 3D 资产生成的组合感知课程学习框架

    针对现有文生 3D 方法在处理组合式提示时因梯度冲突导致几何纠缠或发散的问题,本文提出 DecompDreamer 框架。该方法将核心挑战重构为优化调度问题,采用新颖的分阶段优化策略作为隐式课程:优先建立物体间的连贯结构骨架,再转向个体组件的高保真细化。定性定量评估显示,DecompDreamer 在保真度、解耦性和空间一致性上优于最先进方法。

  12. arXiv · 机器人与计算机视觉42

    PDB:并非所有驾驶员都相同——用于理解驾驶行为的个性化数据集

    研究团队发布 PDB 数据集,采集了 9 名驾驶员在相同车辆与路线下的多模态数据,包含 128 线激光雷达点云、超 130 万图像及心率等信号。基于此构建的 PDB-Traj 基准含 1,309 段轨迹,验证了 Gate-SP 基线通过选择性融入驾驶员身份可提升个性化运动预测效果。该预印本为研究驾驶者特异性行为提供了新基准与参考结果。

  13. arXiv · 机器人与计算机视觉42

    RefCraft:通过网页开发评测视觉参考条件智能体生成

    RefCraft 基准包含 300 个结合自然语言指令与 1-5 张截图参考的网页开发任务,要求智能体在渲染中迭代优化输出。对九种前沿大模型测试显示,最强系统整体得分仅 52.12/100,表明视觉参考条件生成仍是当前挑战。该预印本通过独立可验证关键点及程序化与 VLM 裁判器评估开放-ended 产物。

  14. arXiv · 机器人与计算机视觉58

    CAVA:一种感知互补标签的数据估值方法

    针对互补标签学习中因语义错配导致的光流传输估值失效问题,论文提出 CAVA 方法。该方法引入互补标签成本与边距机制,在无需参数阈值的情况下即可检测对角噪声,并将识别出的有害样本回收为普通监督信号。实验表明,CAVA 能近乎完美地分离合成数据与人标注中的对角噪声,且仅需少量干净验证集即可提升所有评估的互补标签学习目标,证明了显式建模互补监督语义后光流估值的有效性。

  15. arXiv · 机器人与计算机视觉21

    通用大模型估算餐食能量摄入误差分析:六款模型在受控喂养试验中的表现评估

    研究评估了 Claude Haiku/Sonnet/Opus 5.5、GPT-6 luna/6.1 sol/6 astra 等六款模型,基于 ACETADA 试验中 802 份餐食的前后照片估算能量摄入。结果显示仅用前照并乘以平均食用比例(0.87)即可匹配大部分增益,且所有模型均低估蛋白质摄入。代码、提示词及每餐输出已公开,但低平均偏差不能证明个体摄入估算准确,不应替代营养师评估。

  16. arXiv · 机器人与计算机视觉73

    TempoMoE:识别并引导快慢思考专家以实现高效多模态推理

    该论文提出 TempoMoE,一种无需训练的框架,通过 tempo-contrastive routing analysis 识别快慢思考专家并动态调整路由权重以适应样本难度。在 Kimi-VL、Qwen3-VL 和 ERNIE-4.5-VL 上评估显示,相比 Vanilla 方法,TempoMoE 在保持准确率提升的同时显著减少输出 Token 数。

  17. arXiv · 机器人与计算机视觉5

    NeurIPS 2026 接收论文提出基于 KAN 的无回放持续学习分布外检测框架

    针对持续学习中需避免灾难性遗忘且无法访问历史数据以识别未知样本的挑战,该研究提出受 Kolmogorov-Arnold Networks (KAN) 启发的新框架。通过引入任务自适应分类器架构 TA-KAN 及几何引导的分布外评分,该方法在无需回放缓冲的情况下显著提升了检测性能并维持了强内部分类能力。论文已获 NeurIPS 2026 接收,相关代码与数据许可状态待进一步确认。

  18. arXiv · 机器人与计算机视觉48

    SWIFT:通过目标外推实现自引导弱到强扩散模型训练

    Swift 是一种利用冻结弱去噪器进行目标外推的自引导训练方法,无需推理开销即可提升强模型性能。在 ImageNet-256 配置下,该方法用约一半的训练算力超越基线最佳 FID,RAEv2 无指导时 FID 达 1.15、有指导时为 0.99。实验涵盖 CIFAR-10 和 ImageNet-256,证明了目标外推在高效单模型推理下的有效性。

  19. arXiv · 机器人与计算机视觉68

    MAPS:一种由强化学习增强的多智能体个性化脚本驱动视频广告系统

    针对现有检索式个性化视频广告颗粒度不足的问题,本文提出了 MAPS 系统。该系统设计了四个协作智能体形成闭环流程,利用配备多维奖励函数的强化学习框架训练脚本生成器,使其同时对齐用户偏好与产品信息。离线实验及快手特定场景的在线 A/B 测试表明,该方法在生成和整合个性化创意方面表现优异,相比生成式基线使点击率提升 2.87%,转化率提升 2.74%,每用户平均收入提升 9.85%。

  20. arXiv · 机器人与计算机视觉58

    BitFlat:一种用于鲁棒扩散图像压缩的错误定位位流设计

    arXiv 论文 BitFlat 针对零样本扩散图像压缩中位流易受比特翻转影响的问题,提出了一种无需重训练的错误定位框架。该方法通过块级局部对齐将全局耦合的原子选择分解为独立单元,并利用可靠性感知扩散控制将解码状态转化为二进制可靠性门限,从而在已知位置将受损原子转换为擦除并排除其参与噪声合成。

  21. arXiv · 机器人与计算机视觉53

    有限交互透镜:面向视觉语言模型的结构化精度共享

    针对视觉语言模型中视觉干预联合效应难以精确识别的问题,本文提出有限交互透镜(FIL)这一混合精度评估方法。该方法将输入分解为原生状态、单干预分量及高维混合残差,在更高精度下投影单干预分量并复用数值贡献,同时保留混合残差与非线性轨迹。

  22. arXiv · 机器人与计算机视觉73

    A failure of Imagination:VLMs 无法利用视觉表征处理文本任务,但自蒸馏可助益

    论文探讨视觉语言模型在视觉对齐后是否改变了其文本表征的视觉结构。研究通过形状计数任务发现,尽管模型能回答图像问题,但在纯文本描述的几何问题上表现并未提升,且解码器嵌入缺乏视觉结构。作者提出一种优化目标,将上下文中的视觉嵌入蒸馏到文本嵌入中,无需显式监督即可在复杂样本上提升纯文本任务的性能,表明传统的 VQA 风格对齐未充分利用跨模态迁移潜力。

  23. arXiv · 机器人与计算机视觉35

    Reliability-Preserving Compression for Deployable Medical Image Segmentation 提出 SGAV-MP 框架,在保持不确定性与 Dice 指标的同时实现医疗图像分割模型压缩

    SGAV-MP 是一种后训练压缩框架,通过可靠性约束选择层精度并在校准集上进行全模型验证。该方法在五类 2D 骨干网络及三类 3D 基准测试中,实现了 2D 场景下 3.59 至 7.8 倍、3D 场景下 4.73 至 7.82 倍的压缩率,同时保持 FP32 级别的 Dice 值和高不确定性图一致性。研究还单独报告了支持 TensorRT 部署的运行时执行测量,以区分可靠性存储压缩与运行性能。

  24. arXiv · 机器人与计算机视觉45

    Evidence Field:可独立重构空间决策的医学影像分类架构

    Evidence Field 是一种可训练的空间程序架构,能联合输出类别分数、选定覆盖程序及带符号证据。该架构在独立读者处实现了精确单重覆盖与类中心偏移不变性,并在组织病理学应用中通过跨中心留置验证了实证效果。其核心贡献在于构建了耦合表示、决策与证据的架构,使计算过程可被独立复现。

  25. arXiv · 机器人与计算机视觉4

    Severity-Channel Conditioning:iPhoneBlur 基准下的去模糊注入级研究

    该研究针对运动去模糊模型在智能手机影像上精度下降问题,对比了基于目标信息的严重度描述符与元数据调制等四种适配方案。实验显示输入拼接使 iPhoneBlur 测试集峰值信噪比从 31.23 dB 提升至 31.30 dB,增益覆盖 87.2% 图像及 15 个视频中的 14 个。代码与补充材料已随论文公开,但结果未确立注入位置为唯一成因或具备可靠部署优势。

  26. arXiv · 机器人与计算机视觉38

    BEM:通过双级优化学习布雷格曼散度以在流匹配模型中实现概念擦除

    BEM 是首个通过学习布雷格曼散度的流匹配微调方法,能在擦除不当概念的同时保持模型其他能力。实验显示该方法在 GEM 协议下将血腥内容的 unsafe rate 从 53.9% 降至 14.4%,并将裸体生成的 FID 从 8.64 改善至 6.64。该预印本目前处于审稿中,代码与权重尚未开放。

  27. arXiv · 机器人与计算机视觉68

    联合、解耦还是智能体:每种多模态对齐范式的胜出场景

    论文对比了联合预训练(JOINT)、下游解耦融合(DECOUPLED)和智能体指令(AGENT)三种范式在 16 个数据集上的表现,发现没有单一范式在所有组合中占优。研究提出利用任务诊断与元数据结合的方法,能在留一验证中将选对范式的比例提升至 71.4%,为多模态模型选择提供依据。

  28. arXiv · 机器人与计算机视觉78

    DS-Net:一种用于端云协同推理的动态分割网络

    针对现有端云协同方法在多分割点切换时存储开销大、延迟高的问题,本文提出了 DS-Net 动态分割网络。该方法设计了动态切换框架以支持单模型内的灵活分割点选择,并引入分层补偿机制来缓解特征分布偏移与信息丢失。

    推荐理由:提出动态分割网络架构,在降低存储开销的同时实现毫秒级切换与精度提升。

  29. arXiv · 机器人与计算机视觉73

    SAGE-CP:当边际覆盖率掩盖自适应 VLM 集成中的路线条件失败时

    论文 SAGE-CP 指出自适应视觉语言模型(VLM)集成在早期退出和升级输入的路径上存在覆盖率不均衡问题,提出通过冻结路由选择并分别校准分数来实现每条路径的有限样本覆盖。实验显示该方法在保持边际覆盖率的同时,将最差路线覆盖率从 0.623 提升至 0.887,并将路线覆盖率差距从 0.324 降至 0.025,同时比完整集成减少约 70% 的源调用次数和 GPU 能耗。

  30. arXiv · 机器人与计算机视觉8

    多模态学习的信息论统一视角:依赖、压缩与协同综述

    该综述将多模态学习置于广义多模态信息拉格朗日框架下,系统梳理了互信息、信息瓶颈及部分信息分解等原理在跨模态对齐与融合中的应用。文章回顾了 2018 至 2026 年间共 170 项近期研究与 12 项基础工作,并指出高维场景下的可扩展信息估计仍是关键挑战。

  31. arXiv · 机器人与计算机视觉38

    StreamRPS 实时雷达语义与全景场景理解框架发布

    StreamRPS 提出一种流式 FMCW 雷达全景分割框架,通过激光雷达补全自动生成标签并引入极坐标注意力机制。在 SAX 和 BOREAS 数据集上,该方法比最强基线至少提升 1.4pp 精度,且在四扇区流式设置下实现超过 400 FPS 的处理速度。作者额外提供 100 次 SAX 雷达扫描的手动标注数据以支持独立评估。

  32. arXiv · 机器人与计算机视觉38

    可解释人脸对比度建模用于智能手机人像渲染

    针对智能手机人像摄影中跨设备面部渲染差异问题,研究提出将人脸对比度分解为整体色调分离、眼部区域对比及皮肤微细纹理三个组件的可解释框架。该工作构建了包含 29 款手机在多样光照下拍摄的 508 组高分辨率人台数据,并通过成对人工判断验证了新指标比传统措施更贴近人类感知偏好。初步评估显示,基于人台研究的洞察可延伸至真实人像数据集,为定义和评估人像成像中的面部对比度提供了受控的首步基础。

  33. arXiv · 机器人与计算机视觉73

    YUTELA:一种支持多站点视频异常检测的可扩展边缘云 AIoT 系统

    YUTELA 是一种基于 NVIDIA Jetson Thor 边缘设备的边缘 - 服务器 - 云端 AIoT 系统,用于长期、多站点的视频异常检测。该系统通过相机批处理与重分布、共享内存及 TensorRT 加速推理优化了多摄像头流水线,并为每个相机维护独立的异常模型,在收集到足够的伪正常数据后于集中式 GPU 服务器上重新训练并将更新权重下发至边缘端。