跳到正文
10月6日周二
  1. Hugging Face Daily Papers78

    PAIR:在视觉语言动作模型中连接感知与动作

    论文提出 PAIR 框架,旨在解决连续动作视觉语言动作模型中感知表示到动作生成的过渡问题。该框架利用掩码动作自编码器将专家动作编码为动作潜在令牌,并通过桥接模块从当前视觉语言特征中提取任务相关信息以形成桥接令牌。

    推荐理由:该框架通过引入桥接令牌,在感知与动作表示间建立共享中间层,显著提升了 OpenVLA-OFT 和 VLA-Adapter 在多基准及真实任务中的成功率。

10月5日周一
  1. arXiv · 机器人与计算机视觉42

    OrigamiBench 如何评估物理折叠语言的程序化理解能力

    OrigamiBench 基准通过折纸任务集成视觉感知、几何推理与序列规划,揭示单纯扩大模型规模无法可靠提升对物理变换的推理。实验显示现代视觉语言模型难以将程序信息锚定到视觉观测,表明视觉与语言表征整合不足。该工作获 NeurIPS LP4FM 杰出亚军奖及 ICML LM4Plan 口头报告荣誉。

  2. arXiv · 机器人与计算机视觉69

    TimelyDAgger:面向 VLA 策略改进的感知时专家查询方法

    论文提出 TimelyDAgger,通过 Bridge-PCA 监控 VLA 内部特征并结合反馈引导阈值适应来优化机器人接管时机。研究建立了包含失败检测、接管时机与策略改进的评估框架,引入无需重训练的 TASR 指标衡量监督质量。实验表明该方法在匹配专家动作预算下实现了具有竞争力的失败检测和更高的训练后成功率。

  3. arXiv · 机器人与计算机视觉75

    APT:动作专家预训练提升视觉语言动作策略的指令泛化能力

    论文提出 APT 方法,通过两阶段训练解决视觉语言动作(VLA)模型中因语言数据稀缺导致的视觉捷径问题。第一阶段在冻结 VLM 上对动作专家进行视觉 - 动作先验预训练;第二阶段注入语言令牌并融合 VLM 特征以保留视觉运动先验。实验表明该方法能显著提升未见指令和组合任务的泛化性能,适用于主流 VLA 架构。

  4. arXiv · 机器人与计算机视觉50

    Detect and Suppress:一种针对 VLA 模型对抗补丁的机制化防御

    论文通过稀疏自编码器(SAE)对视觉语言动作(VLA)模型的内部表征进行机制分析,识别出与对抗补丁存在强相关性的特定特征。研究提出在推理阶段仅当线性探针检测到攻击时才抑制该特征的干预策略,该方法在不微调模型的前提下提升了鲁棒性。实验基于 LIBERO-10 数据集评估显示,条件式干预能改善间歇性攻击下的成功率,而持续应用相同干预则会显著降低策略性能。

  5. arXiv · 机器人与计算机视觉42

    Qwen2.5-VL-7B-Instruct 内部自欺机制研究:视觉编码器腐蚀表征而语言解码器差异化仲裁

    针对 Qwen2.5-VL-7B-Instruct 的对抗扰动实验显示,图像像素统计无法预测模型是否被腐蚀,且目标 token 在词表中的排名固定为 3,488。研究发现视觉编码器对所有图像均产生同等程度的表征腐蚀,而语言解码器则通过差异化仲裁放大或抑制该信号。结果表明自回归 VLM 的对抗鲁棒性主要取决于语言解码器的先验而非视觉编码器。

  6. arXiv · 机器人与计算机视觉75

    MixVLA:一种无需架构修改即可提升 VLA 模型零样本泛化的自适应混合框架

    论文提出 MixVLA 框架,通过自适应混合非不变信息(AMI)正则化分布特异性变异并保留预测线索,在融合不变表示后实现动作预测。实验表明该方法在 LIBERO、LIBERO-Plus、RoboTwin 扰动套件及真实世界任务中提升了零样本鲁棒性,同时保持了领域内性能。材料为 arXiv 预印本,未提及同行评审状态或具体部署规模。

  7. arXiv · 机器人与计算机视觉82

    FastOPD:面向轻量级 VLA 部署的同策略蒸馏方法

    针对大规模视觉语言动作模型计算成本高难以部署的问题,本文提出了 FastOPD 框架,通过同策略蒸馏将大模型知识迁移至紧凑学生网络。该方法结合单状态教师监督与自一致性目标,理论上可恢复理想少步模型的分布特性。

    推荐理由:提出基于同策略蒸馏的轻量化框架,在仿真与真机实验中验证了大幅降低推理延迟同时保持性能的方法。

  8. arXiv · 机器人与计算机视觉58

    ManiPhysicsBench:一种用于评估 VLA 操作物体保持能力的物理基准

    论文介绍 ManiPhysicsZoo 和 ManiPhysicsBench,利用材料属性和几何信息计算抓取损伤阈值以评估物体变形风险。研究在 LIBERO 和 SimplerEnv 上发现现有模型存在任务成功但物体损坏的问题,并指出连续抓取标签能提升物体保持能力但可能降低通用性。

  9. arXiv · 机器人与计算机视觉75

    CHASE-VLA:一种针对视觉语言动作模型的块感知后训练量化框架

    论文提出 CHASE-VLA 方法,解决扩散基动作专家层在低比特后训练量化中的尺度失配问题。该方法利用策略生成的动作块及其未执行后缀作为因果上下文,结合去噪步信息自适应调整激活尺度,实现 MLP 和注意力投影的 W4A4 量化而无需修改预训练策略。

  10. arXiv · 机器人与计算机视觉84

    IG-VLA:通过内化的时空想象实现高效 VLA 推理

    针对现有视觉语言动作模型仅基于观测状态推理而未明确预测未来场景演进的局限,本文提出 IG-VLA 框架。该方法在视觉表征空间直接学习任务相关的未来场景演化(潜在时空推理),并通过场景 gist 记忆将推理衍生的场景行为关联内化为紧凑 token,从而在推理阶段绕过昂贵的像素级视频生成。

  11. arXiv · 机器人与计算机视觉76

    World-Calibrated Proposal-to-Action Flow for Vision-Language-Action Models

    论文提出 ProAct 框架,针对现有基于流的 VLA 策略因生成源未受近期执行或未来演化条件约束而丢失局部连续性的问题,引入轻量级提案专家与前瞻性世界专家。前者将近期动作转化为场景感知假设以保留运动连续性,后者预测任务一致的潜在未来并校准各向异性生成源。

    推荐理由:提出 ProAct 框架,通过世界校准的提案到动作流解决生成源不可预测问题,在仿真与真实任务中提升性能并降低推理延迟。

10月1日周四
  1. The Robot Report42

    VicOne LAB R7 揭示恶意输入如何绕过机器人安全机制并影响合规测试

    VicOne LAB R7 通过实验证明,即便机器人遵循既定规则,被篡改的视觉、文本或音频输入仍会导致其做出错误动作。研究利用 Gemma 4 E4B 和 Nemotron 模型展示了海报文字与不可听音频如何误导机器狗与服务机器人,并指出 ROS 2/DDS 消息注入可触发意外移动。

9月30日周三
  1. Hugging Face Daily Papers85

    通过失败库自进化从运行时反馈中学习:面向视觉语言动作模型的更安全策略

    针对复杂环境中 VLA 模型需平衡任务成功与意外接触的挑战,本文提出 FailBank 四阶段框架,将运行时反馈转化为持久的策略改进。该框架在 VLA-Arena 基准上评估显示,相比基线策略和纯运行时屏蔽方法,FailBank 能显著提升任务成功率并降低由策略引起的累积成本,证明运行时反馈可作为持续监督而非临时约束。

    推荐理由:FailBank 框架利用运行时反馈实现 VLA 策略自我进化,在基准测试中显著提升了任务成功率并降低了累积成本。

9月29日周二
  1. Hugging Face Daily Papers48

    RLE-Bench:机器人学习工程师编码智能体的资格考试基准

    RLE-Bench 是一项针对机器人学习工程师编码智能体的新基准,涵盖交互控制、策略学习、感知估计与机械设计四大工作流。该基准通过成功率等任务特定指标聚合出整体 RLE Index,并生成各工作流的能力画像以支持系统比较。研究还包含深入案例研究,揭示了当前智能体能力局限及未来训练机会。

  2. Hugging Face Daily Papers72

    驯服执行错误:VLA 的自我补偿与压力测试

    针对机器人执行动作偏离指令的问题,研究提出了一种无需任务奖励或标签的在线自补偿 VLA 方法,利用指令与执行残差更新策略。同时引入 RoboStress 仿真基准,整合摩擦、背隙等关节模型以模拟复杂部署场景。实验显示该方法在物理机械臂上将平均任务成功率提升超过 30 个百分点,且泛化至未见过的物体。材料为预印本论文,未提及同行评审状态或具体机构归属。

  3. Hugging Face Daily Papers85

    MotorMind:为通用视觉语言模型搭建零样本机器人操作框架

    论文介绍 MotorMind,这是一个连接通用视觉语言模型(VLM)与确定性机器人控制的中间层动作表示及异步执行框架。该方案无需任务特定策略训练、代码智能体或 SAM3 等定位工具,在 LIBERO-PRO 基准上实现 66.7% 成功率(扰动下为 53.8%,优于此前零样本方法的最高 13.3%),并在真实 xArm6 机器人上达到 95% 平均成功率。

    推荐理由:该工作提出 MotorMind 框架,证明通用 VLM 无需额外训练或工具即可实现零样本机器人操作,显著优于现有方法。

9月22日周二
  1. Hugging Face Daily Papers38

    OSWorld-Pro:基于过程的计算机使用智能体评估基准

    OSWorld-Pro 引入包含超 300 个任务及 2800 个子目标的基准,依托逾 6.7 万条人工标注实现计算机使用智能体的过程化评估。该基准利用对齐人类的 LLM-Judges 揭示模型在序列子目标中的进展,发现顶尖模型如 Claude Opus 5 在此基准上仅获 75.7% 成功率(OSWorld 为 83.4%)。

9月21日周一
  1. 智元 AGIBOT · Newsroom48

    智元 AGIBOT 在大湾区电影音乐会现场演示 WITA-Omni 具身原生全模态模型

    智元 AGIBOT 机器人于大湾区电影音乐会现场,通过 WITA-Omni 模型实现非脚本化的人机实时互动。该模型基于 Thinker-Talker-Actor 架构,在 DailyOmni 基准测试中综合准确率高达 85.21%,位列八项评估维度中的六项第一。演示验证了机器人能动态识别对话对象并协调语音、动作与表情,未来将拓展至娱乐及零售等复杂服务场景。

9月17日周四
  1. IEEE Spectrum · Robotics42

    VicOne 提出 Rethinking Robot Safety 框架,应对物理 AI 在感知、系统栈及运行时层面的攻击风险

    VicOne 指出物理 AI 面临攻击者篡改感知或决策时的安全挑战,涵盖 BadVLA 等后门攻击、UniPwn 蓝牙漏洞及运行时感知操纵三类风险。NVIDIA Isaac Sim 搭配 VicOne Radeis 可在部署前验证对抗输入影响,而 VicOne Lab R7 演示显示无线漏洞链可在 60 秒内引发失控行为。

8月11日周二
  1. NVIDIA Technical Blog12

    NVIDIA Nemotron 3.5 Lightning 为长运行智能体提供快速精准的任务执行能力

    NVIDIA Nemotron 3.5 Lightning 是一款开源的 30B MoE 模型,拥有 3B 活跃参数,专为长运行 AI 智能体的高频工具调用与结果验证等执行层设计。该模型旨在解决在每一步执行都使用前沿推理模型所带来的高成本与延迟问题,通过轻量化架构提升持续运行智能体的效率。

8月8日周六
  1. IEEE Spectrum · Robotics20

    DARPA Lift Challenge 重型无人机演示与 SonicFly 被动声学感知框架介绍

    DARPA Lift Challenge 周末举行,展示了多款设计奇特的重型无人机及 NASA SkyFall 火星直升机概念。SonicFly 框架利用无人机的固有飞行声实现被动气动声学感知,使一架 UAV 仅需声音即可估计并跟随另一架。IEEE Spectrum Robotics 每周精选此类视频并预告未来机器人活动日程。

8月3日周一
8月1日周六
7月6日周一
7月1日周三
  1. Berkeley BAIR Blog43

    2026 BAIR 研究生展示会:毕生涵盖具身智能、世界模型与视觉推理等前沿领域

    Berkeley BAIR Lab 庆祝 2026 届博士毕业生在物理 AI、大语言模型及计算机视觉等领域的卓越成就。毕业生去向包括 Physical Intelligence、OpenAI、Amazon 等行业实验室,以及普林斯顿大学、UCLA 和芝加哥大学的教职岗位。多位学者正投身于具身智能、世界模型构建及人机协作系统的研发与创业探索。

6月22日周一
2月28日周六
1月22日周四
8月2日周六
  1. Hugging Face LeRobot · Releases11

    LeRobot 发布 v0.3.2 版本,集成扩散策略与多数据集支持

    LeRobot 软件栈 v0.3.2 发布,新增 Pusht、Aloha 及 UMI-gripper 等数据集下载与评估功能。该版本整合了扩散策略(Diffusion Policy)与 ACT 策略模型,并优化了对 Apple Silicon MPS 后端的支持。更新还包含对 CPU 单核兼容性改进、WandB 日志配置调整以及多项训练与推理逻辑的修复。

9月26日周四
  1. Kodiak AI · 自动驾驶货运42

    Kodiak AI 探索生成式 AI 提升自动驾驶安全:VLMs 如何赋能复杂场景决策

    Kodiak AI 将视觉语言模型(VLM)集成至其自动驾驶系统,利用文本知识与图像结合以增强对紧急车辆等长尾边缘案例的理解。该技术通过零样本分类与多模态解码器实现类人驾驶行为,使卡车能在未见过的复杂场景中做出精准决策并规划路线。此创新方法无需显式训练即可检测罕见事件(如高速警车),显著提升了感知栈的鲁棒性与适应性。