跳到正文
11月11日周三
  1. arXiv · 机器人与计算机视觉72

    COMO:基于最小风险训练的光学分子闭环识别

    arXiv 预印本介绍了一种名为 COMO 的新框架,用于光学化学结构识别(OCSR)。该方法引入最小风险训练(MRT)策略,直接优化分子层面的非可微目标以缓解暴露偏差。实验在十项基准上验证了其在合成及真实文档数据上的优越性,且消融研究表明该训练范式对架构无关。

  2. arXiv · 机器人与计算机视觉65

    基于视觉的四足机器人敏捷运动:稀疏门控混合专家模型研究

    该论文提出将稀疏门控混合专家(MoE)架构应用于基于视觉的四足机器人运动控制任务。实验在受控设置下对比了标准 MLP 与 MoE 策略,结果显示在激活参数数匹配的情况下,MoE 架构使训练奖励提升 8%,且优于同等总参数的 MLP。研究还通过真实 Unitree Go2 四足机器人的实验验证了该方法在现实世界中的性能表现,表明借鉴大语言模型领域的稀疏化技术对机器人运动控制具有应用潜力。

  3. arXiv · 机器人与计算机视觉72

    DVFace:面向真实世界视频人脸复原的一步扩散框架

    DVFace 是一种用于视频人脸复原的一步扩散框架,旨在将退化视频增强为具有逼真细节、稳定身份和时序连贯的高质量结果。该方法引入时空双码本设计以从退化视频中提取互补的时空人脸先验,并提出非对称时空融合模块将这些先验注入扩散主干网络。在多个基准测试中,DVFace 展现出优于近期方法的复原质量、时序一致性和身份保持能力。代码已开源。

  4. arXiv · 机器人与计算机视觉68

    BigEarthNet.txt:一个大规模多传感器遥感图文数据集与基准

    针对现有遥感数据缺乏大规模、多传感器且具备多样化文本标注的局限,该研究发布了 BigEarthNet.txt 数据集。该数据集包含 46.4 万幅配准后的 Sentinel-1 合成孔径雷达和 Sentinel-2 多光谱图像,附带 960 万条文本标注,涵盖地理锚定的土地利用/覆盖描述、视觉问答对及边界框预测指令。

  5. arXiv · 机器人与计算机视觉82

    基于激活打补丁的因果归因方法 CAAP

    针对 Vision Transformer 归因方法依赖局部近似或输入扰动的局限,本文提出 Causal Attribution via Activation Patching (CAAP)。该方法通过在不同层间将源图像激活插入中性目标上下文,直接评估内部表征对预测的贡献。实验表明,CAAP 在多种 ViT 骨干网络中均能产生更忠实且定位准确的归因图,优于现有梯度、相关性传播及注意力基线方法。

    推荐理由:提出通过激活打补丁直接干预内部表征的归因方法,在多种 ViT 骨干网络中表现优于现有梯度或扰动类基线。

  6. arXiv · 机器人与计算机视觉68

    Show, Don't Tell:通过观看人类视频检测新物体

    论文提出一种名为 Show, Don't Tell 的自监督系统,旨在解决机器人快速识别演示中出现的未知物体的问题。该方法通过在自动创建的、由人类演示监督的数据集上训练专用目标检测器,完全绕过语言描述和复杂的提示工程。研究开发了集成在机器人上的系统,将这一范式应用于现实世界的机器人部署,实验结果表明该流程在操作物体检测和识别方面显著优于现有最先进方法,从而提升了机器人的任务完成率。

  7. arXiv · 机器人与计算机视觉68

    LucidNFT:面向流匹配真实世界超分辨率的多奖励偏好优化

    针对生成式真实图像超分辨率中随机采样导致的语义幻觉问题,论文提出 LucidNFT 框架。该框架引入基于内容一致性的退化池与硬负样本训练出的 LucidConsistency 评估器以检测局部幻觉,并采用解耦的奖励归一化策略保留各目标间的对比度。实验表明,该方法在保持低分辨率输入参考一致性的同时提升了感知质量,且在独立人类评测中,72.5% 的比较结果认为其输出更忠实于原始低分辨率输入。

  8. arXiv · 机器人与计算机视觉65

    Altitude-Adaptive UAV-to-Map Image Matching for Aerial Geo-Localization 论文发布

    该研究针对直接定位信号缺失场景,提出一种适应无人机飞行高度的空天地地理定位框架。通过频率域表示和回归分类估计相对高度,利用预测的高度中心定义尺度先验以引导图像归一化,并采用足迹自适应边距分类器调整训练策略。在合成与真实飞行数据集上的实验表明,相比无高度归一化的检索流程,该模块在 100 米定位阈值下的平均 R@1 和 R@5 分别提升了 50.68 和 47.20 个百分点。

  9. arXiv · 机器人与计算机视觉63

    基于物理信息的可变形线性物体自监督动态操控方法 SPiD

    论文提出了 SPiD 框架,通过耦合精确的可变形物体质量弹簧模型与增强的自监督训练策略,实现了对绳类等可变形线性物体的快速平滑稳定控制。该方法在仿真和真实世界中均验证了其在不同初始状态、绳长及外部干扰下的泛化能力,并展示了从遥操作到自主执行的鲁棒性。

  10. arXiv · 机器人与计算机视觉73

    3A-VLA:面向 3D 游戏世界的视觉语言代理抽象对齐动作学习

    针对动态 3D 开放世界与竞技 PvP 场景下 VLA 模型难以从密集视觉输入中提取稀疏可行动作的局限,本文提出 3A-VLA 框架。该框架通过意图抽象(IA)与环境语义抽象(ESA)将指令压缩为语义原语并将视觉流结构化,利用抽象对齐重加权(AAR)模块自适应调整动作模仿损失权重。

  11. arXiv · 机器人与计算机视觉82

    Generative Scenario Rollouts for End-to-End Autonomous Driving

    论文提出了 Generative Scenario Rollouts (GeRo) 框架,旨在解决当前端到端自动驾驶系统过度依赖稀疏轨迹标注模仿学习的问题。该框架将 VLA 模型作为规划器,通过自回归策略联合执行规划与基于语言的未来交通场景生成。

    推荐理由:提出 GeRo 框架,利用 VLA 模型进行语言引导的自回归场景生成与规划,在 Bench2Drive 基准上显著提升了端到端自动驾驶的得分与成功率。

  12. arXiv · 机器人与计算机视觉15

    Attention Fusion for Bridge Deck Delamination Detection 论文因实验缺陷被撤回

    该研究提出一种融合 GPR 与 IRT 模态的层级注意力框架,用于检测钢筋混凝土桥面脱层。作者指出模型约 0.53M 参数,但实验结果因训练测试集划分存在缺陷而被夸大且不可复现。论文已正式撤回,无法提供 PDF 或可验证的实验数据。

  13. arXiv · 机器人与计算机视觉72

    基于确定性世界模型的视觉系统动作引导可达性分析

    针对端到端视觉控制器的闭环行为难以验证问题,本文提出确定性世界模型(DWM)和动作引导分区验证方案。DWM 仅从物理状态生成图像,无需潜在变量解码器;结合动作引导的分区策略,在固定计算预算下显著降低未知区域比例。实验显示该方法比 cGAN 代理更准确,鲁棒性区间收窄 1.9 至 69 倍。

  14. arXiv · 机器人与计算机视觉72

    预测潜在风险:面向自动驾驶的视觉语言推理研究

    现有自动驾驶数据缺乏对风险前兆与应对措施的关联标注。本文介绍 PotentialRiskQA 数据集,提供场景证据、潜在风险及缓解动作的结构化注释;基于此训练 PR-Reasoner 模型,通过多任务监督提升场景理解、风险认知与行动质量,减少无依据的风险推断。消融实验表明中间推理步骤的监督进一步降低错误推断并改善行动质量;在 NAVSIM 上的表征学习提升了开环规划性能。

  15. arXiv · 机器人与计算机视觉68

    3D-Guided Scalable Flow Matching for Generating Volumetric Tissue Spatial Transcriptomics from Serial Histology

    论文介绍 HoloTea,一种基于流匹配的三维感知框架,用于从连续组织切片和 H&E 图像推断未检测切片的基因表达。方法利用相邻切片的注册位置信息通过轻量 ControlNet 提供跨切片上下文,确保预测沿解剖结构连续;采用学习到的零膨胀负二项分布先验处理计数数据的离散性;引入全局注意力块以线性成本整合全片上下文。

  16. arXiv · 机器人与计算机视觉35

    A Generative Data Framework with Reliable Supervision for Underwater Image Restoration and Enhancement 提出生成式数据框架

    针对水下图像恢复依赖高质量配对数据的难题,该框架利用自然照片构建 UWNature 数据集并合成输入以保留清晰参考源。实验在 6 种恢复架构和 3 个测试集上验证了其在客观指标、人类感知评估及合成退化与学习行为对应关系上的有效性。研究证实合成数据的空间合理性并非性能提升的必要条件,为构建可靠配对监督提供了可扩展方案。

  17. arXiv · 机器人与计算机视觉75

    基于控制李雅普诺夫函数引导的强化学习实现类人机器人跑步

    该研究提出 CLF-RL 方法,将非线性控制理论中的控制李雅普诺夫函数与优化的参考轨迹嵌入强化学习奖励,替代传统启发式奖励的手动调优。通过处理系统混合结构的全阶动力学进行轨迹优化,位置跟踪性能提升最多 1.7 倍。策略在宇树 G1 类人机器人上实现完整飞行阶段的可靠跑步,具备抗干扰能力和仅靠机载传感器实现的准确全局参考跟踪能力。

  18. arXiv · 机器人与计算机视觉28

    Filter-Enhanced Smartphone Hyperspectral Imaging 提出利用多摄系统与光谱滤光片调制提升手机高光谱重建精度的新方法

    该方法通过精心选择的光谱滤光片调制智能手机多摄系统的响应函数,结合新数据集 Doomer 训练神经网络,实现比传统单图方法更准确的高光谱重建。实验在三部物理手机上评估,其中两部为训练未见设备,且利用 DNG 元数据适配无需目标设备实拍图像。

  19. arXiv · 机器人与计算机视觉62

    超越刚性操作的混合软硬机器人学习研究

    本文介绍了一种由刚性手臂和软体操纵器串联而成的混合机器人系统,旨在结合刚性机器人的精度与重复性与软体结构的顺应性和适应性。作者提出了一种定制的模仿学习算法,该算法适用于此类混合系统,能够利用刚性的精确操作和软体的身体特性来习得操作技能,并一次性泛化到任务变化中。实验表明,该系统在堆叠等经典任务中的性能达到或超过刚性机器人,同时实现了通过狭窄开口抓取物体等全新的行为模式。

  20. arXiv · 机器人与计算机视觉53

    机械可解释性需要推理逻辑:从内部观测到机制解释的递归框架

    该论文提出机械可解释性(MI)需建立严谨的推理逻辑以支持科学发现。作者通过对比神经科学与 MI 进展,识别出从复杂神经网络中推断机制时的瓶颈,并提出了五项原则构成的递归逻辑框架。该框架旨在将局部可解释性结果转化为模型内部的累积机制知识,并使这些机制足够精确以生成关于模型外部领域的可测试假设。材料强调仅凭 MI 证据不足以确立模型机制对世界的揭示,需要额外证据支持。

  21. arXiv · 机器人与计算机视觉78

    一种保留已习得正确答案的多模态拒答方法

    针对多模态模型在任务适配后加入拒答机制可能丢失正确答案的问题,本文提出了 ReFrain(无回归拒答)方法。该方法结合首 token 对数概率线性探测、图像簇阈值校准及确定性否决机制,在替换被拒绝输出为“以上都不是”选项的同时保留所有其他响应。

    推荐理由:提出 ReFrain 方法,在保持微调增益的同时显著提升不可回答问题的正确拒绝率。

  22. arXiv · 机器人与计算机视觉42

    CLIFER 模型通过持续学习实现人机谈判中的个性化情感感知

    CLIFER 模型结合想象与持续学习技术,在 66 名参与者与人形机器人进行的平衡内被试实验中,显著提升了个体效用并诱发了更高的让步率。该异步架构能在实时交互背景中更新模型,相比 FaceChannel 基线实现了更广泛的唤醒度估计范围。研究证实将持续情感个性化与差异反馈耦合于实时谈判具有实际价值。

  23. arXiv · 机器人与计算机视觉66

    GARD:面向多模态对比学习模型后门的梯度引导对抗表征防御

    论文 GARD 针对 CLIP 等多模态对比学习模型易受后门攻击的问题,提出一种目标与触发器无关的后处理防御方法。该方法利用有损编码器对全局和局部扰动的敏感性差异,优化互补的对抗探针以最大化位移干净图像表征,随后将扰动后的表征与解耦的干净锚点重新对齐并保留图文对齐能力。

  24. arXiv · 机器人与计算机视觉28

    HaiRuo:基于卫星测高基础模型的海洋涡旋场与对象联合预报

    HaiRuo 模型从 30 天卫星海平面图中单次前向传播,同时输出 15 天海平面、地转流速及每日涡旋掩膜与轨迹。其核心组件 HaiRuo-1B 为无标签预训练的 10.5 亿参数基础模型,在相同解码器下将 15 天中心误差从 30.6 km 降至 25.2 km(-18%),并在厄尔尼诺 - 南方涛动周期内保持优势。开源权重、代码与项目页面已公开,支持跨六个骨干网络的物体注意力机制优化。

  25. arXiv · 机器人与计算机视觉36

    Visual Similarity in Adult Word Extension and Artificial Word Learning 研究视觉相似性对词汇扩展的影响

    该研究重新分析了 Lewis & Frank(2018)的成人词扩展数据,发现基于 DINOv2 编码器的图像距离与词汇扩展呈显著关联。实验显示,当示例为上位词时,成人将新词扩展到上位项目的比例达 77.5%,远高于下位词示例的 1.1%。在人工学习系统中,类别间视觉距离越远,命名准确率越低(近/中/远距离对分别为 84.7%/65.4%/53.0%),表明视觉相似性仅部分解释泛化机制。

  26. arXiv · 机器人与计算机视觉51

    基于 Fisher 几何的结构化置信度扰动用于对抗训练

    针对对抗训练中伪攻击导致损失增加却无法改变模型置信度结构的问题,论文提出两种互补方法:一是结合交叉熵和 KL 散度的混合目标以同时破坏预测精度与分布一致性;二是通过最大化置信流形上的分布距离进行几何重构。理论分析表明最优扰动方向对齐 Fisher 信息矩阵的主特征向量,并提出了避免高维矩阵计算的算法。实验显示该方法在多个数据集和架构上优于现有方法,尤其在置信度区域的结构化扰动方面表现突出。

  27. arXiv · 机器人与计算机视觉42

    TransGHOST:眼科显微手术中仪器遮挡区域的实时无合成重建方法

    TransGHOST 提出一种因果参考引导的重建管线,其非生成式安全模式通过仅对可见区域拟合几何变换进行重采样,实现眼科显微手术的实时操作。该系统在犬白内障手术数据集上达到 31.89 dB 掩膜 PSNR 和 51.7 ms 中位延迟,并在验证集上比 LaMa 基线提升 3.45 dB。该方法提供逐像素置信度与溯源标记,将不支持区域标记为弃权,确保视觉来源可靠性。

  28. arXiv · 机器人与计算机视觉58

    Vision-Language 医学图像分割中的标注衍生提示词范围泄露反事实分析

    针对文本引导的医学图像分割模型过度依赖提示词中病灶范围信息的现象,该研究通过反事实实验发现,仅保留大小或位置描述即可恢复大部分性能提升,且部分模型从训练数据习得了命名诊断的习惯。论文提出了一种无需训练新模型即可量化提示词泄露程度的评测协议,并报告了在不使用测试掩码的情况下,基于图像估计病灶范围的最佳方法在结肠镜任务上达到 74.59 Dice,略低于已发表的 77.23。

  29. arXiv · 机器人与计算机视觉72

    RB-LDC:一种用于抗噪扩散潜变量的冗余平衡编码方法

    该论文提出了 RB-LDC(Redundancy-Balanced Latent Coding)方法,旨在解决潜在扩散模型解码器对扰动的敏感性不均问题。研究构建了一个编码器与扩散过程之间的可逆线性层,利用基于雅可比矩阵的敏感度估计,在能量预算约束下最小化加权后的 LMMSE 风险,从而优化潜空间各方向的噪声分配策略。

  30. arXiv · 机器人与计算机视觉38

    深度神经网络机械可解释性方法、框架与展望综述

    针对图像、音频及语言处理中深层网络内部机制难解的问题,该文章概述了通过识别因果激活组件来解析网络行为的方法进展。内容涵盖机器学习、人工智能及计算机视觉领域的最新研究视角,旨在揭示神经元间复杂依赖关系背后的运作机理。

  31. arXiv · 机器人与计算机视觉58

    振荡处理单元:一种用于生物仿生智能的计算基底

    Alexander A. Wolf 在 arXiv 发布预印本论文,引入振荡处理单元(OPUs)概念,即共享节律的合成神经元组。该架构通过定向交互将输入活动与先验状态转化为振荡占用空间(OOS),支持逻辑数值运算、联想回忆及固定权重下的闭环决策。研究建立了测量关系图谱以支持响应类预测,旨在为生物仿生智能提供经验保留于状态中的计算基底。

  32. arXiv · 机器人与计算机视觉35

    Word-Level Alignment of OCR and Ground Truth under Zoning and Reading-Order Errors 论文提交至 IJDAR

    该研究针对分区与阅读顺序错误下的 OCR 文本对齐问题,通过合成噪声、历史报纸及几何推导金标准进行了严格评测。实验显示,在测试的多种方法中,2019 年提出的位置感知对齐器在合成基准页面上取得了最高的 F1 分数。尽管多区域版本存在二次方扩展成本且局部跟踪对大位移仍显脆弱,但该方法在处理锚点稀缺情况下的恢复能力优于基线。