跳到正文
11月6日周五
  1. arXiv · 机器人与计算机视觉45

    SigDiffuser:基于废墟重建的自监督扩散模型用于手写签名验证

    SigDiffuser 提出一种基于“废墟重建(RFR)”任务的自监督框架,通过故意损毁签名结构引导视觉编码器学习鲁棒表征。实验在多语言数据集上显著优于现有自监督方法及手写签名验证模型,且证实极端损毁比轻微形变更能提升表征质量。代码将公开可用。

  2. arXiv · 机器人与计算机视觉78

    Rain Beyond Streaks:基于场景先验的级联真实雨水与湿表面合成

    针对现有方法仅关注雨痕而忽略反射与水洼等关键物理效应的不足,该研究提出 CascadeRS 框架,利用深度和分割先验通过物理启发的零样本生成管线,渲染出包含雨痕、反射及水洼的逼真城市雨天场景。作者构建了 Cityscapes-CascadeRS 数据集以评估下游任务在真实雨天条件下的性能,并通过用户研究与定量指标验证了其在感知真实性与鲁棒性上的优势。代码与数据已开源。

    推荐理由:该工作提出 CascadeRS 框架,利用深度与分割先验生成含雨痕、反射与水洼的逼真雨天场景,并开源 Cityscapes-CascadeRS 数据集以评估恶劣天气下的视觉鲁棒性。

  3. arXiv · 机器人与计算机视觉78

    BiGrounder:双向训练释放 GUI 定位潜力

    BiGrounder 针对图形用户界面(GUI)定位任务,提出一种双向奖励范式以解决传统端到端训练对语言变化鲁棒性不足的问题。该方法在监督微调阶段让模型从目标坐标生成动作描述,并在强化学习阶段采样语义一致的指令变体进行自循环验证,将模型自身的策略转化为持续更新的强化轨迹。

    推荐理由:提出双向训练范式,利用模型自身策略生成强化学习轨迹,在五个基准测试中取得竞争性精度。

  4. arXiv · 机器人与计算机视觉42

    MIIB:基于部分信息分解的多模态自监督学习新框架

    针对多模态数据异质性与交互复杂性问题,研究提出基于部分信息分解的 MIIB 框架,通过双路径架构显式编码冗余、独特与协同信息。该方法利用变分界与基于分数的熵估计优化目标,无需显式互信息估算即可捕捉跨模态交互并抑制冗余信息。实验在多个基准上验证了其对现有最先进多模态自监督方法的持续改进效果。

  5. arXiv · 机器人与计算机视觉78

    选择性事件证据与持久时间先验用于事件相机点跟踪

    arXiv 论文提出 SEPT 框架,专为长序列任意点跟踪设计,仅利用事件数据。该方法包含两个模块:任务自适应事件证据调制(TEEM)学习有界可靠性场以加权时空通道特征;持久轨迹先验(PTP)通过边缘化局部二次模型与 Schur 补传递几何信息并修正可见性坐标。

    推荐理由:该工作提出仅基于事件相机的长序列点跟踪框架,通过任务自适应证据调制与持久轨迹先验解决稀疏性与漂移问题。

  6. arXiv · 机器人与计算机视觉75

    FlyingDrones:基于物理渲染的光学流估计数据集与基准

    作者发布了一个名为 FlyingDrones 的基准,包含由物理渲染生成的密集真值光学流和分割掩码,并定义了分辨率归一化指标(EPE Norm)。研究评估了 16 个模型家族在分层子集上的表现,发现架构差异随分辨率增大而显著。此外,基于真实无人机视频的无真值运动对齐测试显示合成排名与真实性能存在中度相关性,微调实验表明该基准数据能有效降低误差并提升定位精度。

  7. arXiv · 机器人与计算机视觉49

    InfMasking:统一变分框架实现协同多模态学习

    InfMasking 提出一种基于无限掩码的统一多模态学习框架,在融合前随机掩蔽各模态特征以强制模型学习跨模态交互模式而非依赖主导模态。该方法通过优化闭式变分界值,在多个基准测试中提升了预测性能并提高了任务标签协同性的均值 PID 估计与 InterSHAP 归因得分。代码已公开,论文已被 IEEE TPAMI 接收发表。

  8. arXiv · 机器人与计算机视觉78

    ReferClaw:通过交互澄清解决第一人称助手中的用户意图歧义

    针对第一人称 AI 助手常遇到的短促且指代不明的提问(如“我把它放哪了?”),现有视频问答系统往往直接给出单一解释,导致答案虽合理但与用户真实意图不符。本文介绍 ReferClaw,这是一个代理框架,将第一人称流式问答转化为交互过程:助手在回答前先提出澄清性问题以明确用户意图。

    推荐理由:提出交互澄清框架以解决第一人称助手的意图歧义,在基准测试中提升准确率并实现零样本迁移。

  9. arXiv · 机器人与计算机视觉48

    Egocentric Action Recognition with Objects and Vision-Language Affordances 提出融合冻结 SlowFast 视频专家与基于物体功能(affordances)的注意力机制方法,在 MECCANO 数据集上将 Top-1 准确率从基线提升至 49.9%,代码将在论文接收后开源。

    该方法结合冻结 SlowFast 视频专家与生成零样本物体功能的注意力机制,利用视觉语言模型生成的交互功能过滤非活跃检测,将 MECCANO 数据集上 Top-1 准确率从 44.9% 提升至 49.9%,优于 SlowFast 及物体感知 RGB 基线。研究在标注框与官方检测器两种条件下评估性能,其中约半数精度损失源于非活跃物体检测干扰。代码将在论文被 IEEE FG 2027 接收后发布。

  10. arXiv · 机器人与计算机视觉35

    CoGenRec:统一生成框架实现互补视觉重建

    CoGenRec 提出一种互补驱动的统一生成重建框架,融合长曝光 RGB 与短曝光时空差分路径以解决极端运动下的高动态范围成像难题。该模型在 SportsSloMo-CVS 数据集上相比最强通用基线,去模糊 PSNR 提升 4.40 dB、帧插值提升 3.89 dB、HDR 融合提升 5.04 dB,并在 129 个真实 CVS 场景验证了感知质量。

  11. arXiv · 机器人与计算机视觉72

    面向视觉生成的生成器对齐奖励建模与目标感知有界优化方法

    该论文针对视觉生成模型后训练阶段数据分布不匹配及属性监督混淆的问题,提出结合生成器对齐奖励建模(GARM)与目标感知有界优化(TABO)的框架。GARM 通过生成器支持匹配和内容匹配的真实对比降低无关内容干扰;TABO 将学习到的奖励映射为平滑的上界函数以抑制过优化。

  12. arXiv · 机器人与计算机视觉35

    基于内外先验融合的对齐神经图像压缩模型发布

    该研究提出基于四叉树空间通道联合建模的 IE-PFA 上下文模型,利用共享字典作为外部先源并通过 RWKV 模块高效融合内外先验。实验在七个基准上实现平均 BD-Rate 降低 21.65%,参数量仅 29.9M,编码与解码耗时分别为 61ms 和 52ms。代码已开源,支持单网络覆盖 64 个质量级别的变率编码。

  13. arXiv · 机器人与计算机视觉63

    面向实时的全波形激光雷达 Transformer:基于光强引导的 Token 缩减与物理感知增强

    针对全波形激光雷达(FWL)计算成本高且标注数据稀缺的问题,该研究提出 FWL-ToPM 机制利用光强分布剪枝冗余 Token,并引入 FWLAug 框架通过保留飞行时间和视锥几何结构进行数据增强。在 Ghost-FWL 基准测试中,该方法实现超 8 倍速度提升、F1 值增加近 9 个点,建立了首个同时兼顾实时性与精度的 FWL Transformer 模型。代码与分布外数据集已公开。

  14. arXiv · 机器人与计算机视觉58

    Subspace Learning with Outlier Exposure for Out-of-Distribution Detection

    Hongxu Shen 等人提出一种名为 RecOE 的基于异常暴露的检测框架,旨在利用训练数据中的离群点作为代理分布外数据来微调深度神经网络。该方法通过学习来自分布内数据和辅助离群点的特征子空间,以最小化重构误差捕捉主导变化,并利用样本级目标和正交性正则化减少子空间重叠。

  15. arXiv · 机器人与计算机视觉37

    Tail-SD 通过布局指令条件扩散合成提升长尾目标检测性能

    Tail-SD 提出一种支持文本、布局或混合输入的布局指令条件稳定扩散框架,利用多任务交叉注意力模块实现从框、掩码及提示词的可控合成以覆盖长尾物体。在 COCO 和 LVIS 数据集上的实验表明,该混合条件扩散合成使 LVIS 验证集稀有类别的 Box/Mask AP 分别提升 4.89% 和 5.68%,有效改善了长尾性能瓶颈。

  16. arXiv · 机器人与计算机视觉42

    PreSTP:免训练时空 Token 剪枝加速少步自回归视频扩散模型推理

    PreSTP 框架通过利用去噪轨迹中的早期清洁估计,无需重训或辅助预测器即可识别跨帧与跨步冗余。在 5 秒生成任务中,该方法相比 TeaCache 和 FlowCache 基线实现 1.52x-3.20x 加速并优化效率 - 保真度权衡;30 秒生成时最高达 1.96x 加速且抑制长视界漂移。该研究在极端单步模式下仍有效降低推理成本,论文已上传 arXiv 待注册 DOI。

  17. arXiv · 机器人与计算机视觉78

    OptIMerge:一种基于优化的扩散模型融合方法

    针对图像到图像(I2I)扩散模型在多任务学习中的参数干扰与伪影问题,本文提出了 OptIMerge 框架。该方法通过最小化多任务损失函数学习轻量级合并系数,利用架构感知的变换对齐注意力层与卷积层的特征,在冻结专家网络的前提下实现了媲美联合训练的多任务能力。

    推荐理由:提出基于优化的多任务融合框架,解决图像修复类扩散模型直接平均导致的伪影问题。

  18. arXiv · 机器人与计算机视觉78

    标签库增长导致旧决策漂移:VLM 分类器审计与一致性保持方法

    Vision-language classifiers 在仅凭文本学习新标签时,其服务列表持续增长会静默改变基于 softmax 的 conformal scores,进而影响旧标签的决策。

    推荐理由:提出 PrefixCP 方法解决标签库增长导致的旧决策漂移问题,兼顾覆盖率保证与历史决策稳定性。

  19. arXiv · 机器人与计算机视觉72

    Degree-Equalized View-Graph Selection under Tight Pair Budgets

    针对运动恢复结构(SfM)中成对图像匹配计算量过大需限制预算的问题,现有方法因忽略已分配边数可能导致重建失败。本文提出无需训练的贪心规则 DEAL,通过指数级降低端点覆盖度高的图像对的权重来均衡度数。在九个大型互联网照片集上,DEAL 将基于相同先验的选择器成功率从 0.776 提升至 0.929,并在标准基准测试中达到最高均值 0.875。

  20. arXiv · 机器人与计算机视觉68

    FUHA:用于前馈统一人体动画的紧凑运动嵌入

    arXiv 预印本论文介绍 FUHA,一种支持实时的前馈 Transformer 模型,通过学习紧凑的运动嵌入来实现人脸、上半身及全身的人体动画驱动。该方法利用 Q-Former 压缩驱动者特征,并通过对比损失解耦运动与外观,推理时无需外部姿态估计器或参数化身体模型。

  21. arXiv · 机器人与计算机视觉38

    VIPA:首个实现视角不变与分类器无关的物理投影对抗攻击方法

    VIPA 提出一种基于视角不变的投影仪相机系统仿真,通过聚合多视角模拟损失优化对抗图案,在真实场景中成功欺骗各类分类器。实验表明该方法在目标与非目标攻击中均取得更高成功率,同时提升隐蔽性并最小化感知退化。该研究为动态环境下的物理世界对抗攻击提供了新的鲁棒解决方案。

  22. arXiv · 机器人与计算机视觉38

    TRiST:拓扑增强的 Swin Transformer 用于医学图像分析

    TRiST 框架将拓扑信息融入特征构建、细化与注意力机制,通过分层多尺度拓扑表示及带感知残差模块处理不同持久性信息。实例化的 Topo-SwinV2-B 和 Topo-Swin-UNet 在五个数据集上分类与分割性能均优于 Swin 基线且媲美现有方法。该预印本论文 arXiv:2611.07431 尚未被会议接收,代码与数据许可状态未明确说明。

  23. arXiv · 机器人与计算机视觉68

    PSGAgent:通过智能体推理增强 MLLM 的动态视觉感知以生成全景场景图

    针对当前多模态大语言模型在复杂关系推理中存在的静态观察局限,本文提出 PSGAgent 框架,利用区域缩放和视觉高亮工具实现动态感知优化。研究构建了高质量思维链数据集并设计了分层奖励机制,实验表明该方法在全景场景图生成基准上达到最先进水平,相关成果已获 ACM Multimedia 2026 录用。

  24. arXiv · 机器人与计算机视觉7

    FreePath:基于神经平均自由路径的单图像去雾框架

    FreePath 提出一种神经平均自由路径框架,将去雾视为特征空间路径状态恢复而非直接映射或显式散射变量反演。在 CDD-11 配对雾图与 RTTS 真实场景实验中,该方法在满参考保真度、无参考感知质量及视觉忠实度上均优于代表性基线。该研究预印本发布于 arXiv,代码与权重暂未公开。

  25. arXiv · 机器人与计算机视觉72

    Vis2State:基于可执行状态抽象的视觉推理

    arXiv 预印本发布 Vis2State,这是一个无需训练的代理框架,将视觉谜题抽象为显式且可修订的问题状态,连接视觉检查与执行。模型在无预设谜题模式或求解程序的情况下构建状态和程序,并通过反馈独立修正表示与流程。该方法在四个基准测试中达到最先进水平,代码即将公开。

  26. arXiv · 机器人与计算机视觉72

    MIKU:面向 PBR 生成的材质不变性与知识统一框架

    针对基于物理渲染(PBR)中数据集缺乏标准表示导致结果不稳定且不符合物理规律的问题,论文提出 MIKU 统一框架。该框架通过标准化预处理到纹理合成的工作流,利用归一化方案统一异构参数化表示,并训练了新的物理感知扩散模型进行多视图合成。实验表明该方法在物体部分语义一致性方面达到最先进水平,推动了 3D 内容创作的自动化材质生成。

  27. arXiv · 机器人与计算机视觉82

    长视频问答增益来源受控审计:帧选择、证据注入与专家路由分析

    Shih-Yao Lin 发布 VideoRouteAudit 审计,在固定骨干网络与解码设置下分离了帧选择、非视觉证据注入和模型路由的影响。全量数据(n=900)显示无测试选择器显著优于均匀采样,最大增益仅 +1.2 分且置信区间包含零;小样本(n=200)评估极不稳定,35.8% 的抽样反转了全量效果。

    推荐理由:该审计发现长视频问答的增益主要来自模型切换而非帧选择,且小样本评估极不稳定。

  28. arXiv · 机器人与计算机视觉63

    ArtiVidRM:一种用于视频生成的可验证伪影作为评分标准的奖励模型

    该文提出 ArtiVidRM 模型,采用先观察后评分范式,将可见生成伪影组织成结构化列表并作为明确标准进行质量评估。该方法通过多奖励强化学习联合优化伪影预测与质量排名,在视频偏好基准上达到最先进水平,能为视频扩散模型优化提供有效信号并支持闭源生成器的伪影引导式改进。

  29. arXiv · 机器人与计算机视觉60

    Householder Motion Embedding:用于运动可控视频生成的噪声调制技术

    论文提出 Householder Motion Embedding(HME)方法,通过一系列 Householder 反射将用户提供的运动信号编码进噪声,在保持帧内空间高斯结构的同时引入跨帧相关性以提升时序一致性。该方法对网络架构无依赖,可直接集成至标准视频扩散微调流程,实验显示其匹配或优于最先进方法,且比噪声变形法快 2.7 倍。材料为 arXiv 预印本,未提及同行评审状态或真实部署结果。

  30. arXiv · 机器人与计算机视觉58

    VINO:用体积 Transformer 重新审视 3D 表示学习

    针对 3D 场景表示学习尚未取得与图像基础模型相当成功的现状,本文提出 VINO 框架以无标签方式学习语义表示。核心改进包括:将分层 PTv3 骨干替换为体积 Transformer;在学生 - 教师网络中分离角色,由教师提供一致目标、学生学习强扰动下的不变性,并禁止学生访问被遮挡几何体;最后重构 2D 到 3D 的知识蒸馏,用视图一致的监督替代直接回归。