跳到正文
11月18日周三
  1. 智东西 · 机器人67

    蓝虫具身发布Mantis Ultra旗舰机器人,单臂负载15kg并支持自主换电

    西安创企蓝虫具身于2026年11月发布第三代旗舰机器人Mantis Ultra,单臂末端最大负载达15kg,采用十字交叉并联腕关节与独角仙关节实现全身力控。该机器人配备四轮底盘、腰部旋转关节及自主换电系统,搭载“蜘蛛感知”多传感器融合方案并适配VLA模型。产品依托春茧本体、量子遥操作、虫洞模型训练及蜂巢云端四大平台体系,旨在承接工业现场高负载、连续作业任务。

  2. arXiv · 机器人与计算机视觉65

    Orchestra:通过解耦行动生成与进度评估实现长周期操作

    论文介绍 Orchestra 智能体框架,将多模态指令分解为有序子任务并跟踪完成状态,利用独立训练的进度评估器决定何时推进。在 RMBench-Compose 基准上平均成功长度为 7.35 个子任务,优于 HarnessVLA;在四个真实世界多步任务中相比基线提升 25%。代码与项目页面已公开。

  3. arXiv · 机器人与计算机视觉85

    面向人形机器人的视频模仿学习中的直接动态重定向方法

    针对单目视频演示到人形机器人运动迁移的形态失配问题,本文提出直接动态重定向(DDR)方法。该方法在物理仿真器中利用基于采样的模型预测控制求解器,直接在任务空间追踪人体关键点,无需接触标注或中间几何重定向步骤。

    推荐理由:提出直接动态重定向方法,在仿真中实现零样本迁移至不同尺寸实体机器人,并开源代码与数据集。

  4. arXiv · 机器人与计算机视觉72

    面向动态扰动的鲁棒视觉控制:Agent-Centric Observation Adaptation for Robust Visual Control under Dynamic Perturbations

    论文介绍 VDCS 基准与 ACO-MoE 方法,通过混合专家路由修复图像内容以应对天气、噪声等退化。在八个任务中,ACO-MoE 将 DreamerV3 的平均回报从 562 恢复至 730;在机械臂部署中,该方法将运动模糊和暗光下的成功率从最高 10% 提升至 75%-95%。代码与论文为预印本状态。

  5. arXiv · 机器人与计算机视觉72

    Learning Generalizable Hand-Object Tracking from Synthetic Demonstrations

    该论文提出一种完全基于合成数据的系统,用于训练通用的手物跟踪控制器,无需人类演示。核心贡献包括 HOG 高效数据生成器和 HOT 跟踪器,后者通过强化学习和交互模仿学习实现从仿真到物理的迁移。方法支持多种物体形状和手部形态,并能在不同仿真器间迁移。评估显示该系统能让灵巧手处理包含物体重排和敏捷内部转向的挑战性长序列任务,旨在解决灵巧操作的数据瓶颈问题。

  6. arXiv · 机器人与计算机视觉82

    MillBill:一种具备几何反馈的加工代理

    MillBill 是一种将加工决策与几何执行及验证分离的智能体系统。给定边界表示零件、毛坯和材料信息,本地托管的中大型开放模型负责提出操作和切削参数;几何约束生成器则生成刀具路径、模拟材料去除并返回反馈以优化计划。系统考虑了刀库的物理可达性而非仅可见性。基于 Qwen3.8-27B 的评估显示,MillBill 在指定公差内的目标表面积比例上优于前沿模型方法。代码与论文已公开。

    推荐理由:该工作提出将加工决策与几何执行分离的代理架构,在仿真环境下验证了其对复杂零件加工的优越性。

  7. arXiv · 机器人与计算机视觉43

    Feedback-Linearised Trajectory Tracking via Model-Informed Robust Geometric DDPC 论文提交至 2027 年学习动力学与控制会议

    该研究提出基于模型反馈线性化的几何鲁棒数据驱动预测控制(DDPC),用于全驱动机械臂轨迹跟踪。仿真在含重力平面 2R 机械臂上验证,相比双积分 MPC 提升跟踪精度但增加扭矩消耗,性能相对 DeePC 取决于参考轨迹。论文已提交至 2027 年瑞典斯德哥尔摩学习动力学与控制会议,暂未开源代码或权重。

  8. arXiv · 机器人与计算机视觉42

    PAIR:基于 Matter 协议的智能家居仿真环境与基准测试

    PAIR 是一个基于 Matter 协议构建的智能家居仿真环境,包含 84 个智能设备资产及 340 个人类演示数据。在由 1,200 次评估组成的基准测试中,两种微调后的视觉语言动作模型(VLA)策略均未完成任何任务,超过 90% 的失败案例停滞于导航或操作环节。研究团队表示将在发表时开放代码与数据。

  9. arXiv · 机器人与计算机视觉63

    RFW-S:具备独立仿真验证的日常可变形物体数据集

    论文介绍 RFW-S 数据集,包含 83,365 个经过独立仿真验证的变形物体资产,覆盖 485 类日常物品及五种结构家族。作者开发了结合参考引导生成、结构感知物理建模与 LLM 参数校准的自动化管线,并通过独立于校准过程的交互行为评估确保物理可靠性。

  10. arXiv · 机器人与计算机视觉58

    Magflow:一种支持工业级 6D 磁悬浮的可微分仿真方法

    论文介绍了 Magflow,这是一个完全可微分的 GPU 并行仿真器,专门用于模拟具有六自由度的工业级磁悬浮系统。研究团队利用该工具训练了首个纯基于物理仿真的神经网络控制器,并展示了其能零样本迁移到真实硬件,在 4 kHz 频率下满足硬实时约束,甚至实现了传统手工设计无法支持的拓扑结构控制。

  11. arXiv · 机器人与计算机视觉52

    基于物理信息的触觉变形线性物体形状估计研究

    针对变形线性物体(DLO)在视觉遮挡下难以精确估计形状的问题,该研究提出无需视觉感知的触觉本体感知方案。作者引入物理信息视觉 Transformer 框架,利用高解析度触觉印记捕捉边界条件与接触梯度,通过自注意力机制和物理加权损失函数确保预测几何符合物体的物理流形。

  12. arXiv · 机器人与计算机视觉5

    Auriga Robotics @Work 机器人技术报告:工业环境移动操作平台设计

    Auriga Robotics 团队在沙希德贝赫什提大学开发了名为@Work 的移动操作机器人,专为提升工业环境中重复或危险任务的效率而设计。该平台采用四轮麦克纳姆轮驱动与五自由度机械臂,结合 ESP32 微控制器、NVIDIA Jetson Orin NX 处理器及 Hector SLAM、YOLO 等软件栈实现自主导航与物体处理。

  13. arXiv · 机器人与计算机视觉38

    LISST 框架实现动态支撑上的受李雅普诺夫启发持续平衡

    LISST(Lyapunov-Inspired Sustained Stabilization)是一种学习框架,通过协调平衡恢复与抑制机器人自身修正引发的支撑运动,解决刚性假设在机械响应支撑上的不足。该策略仅依赖本体感知,利用物理监督将表征关联至机器人与支撑行为,并通过可微模型回滚指导关节级策略学习。真实世界实验表明,LISST 能在与动态响应支撑的持续交互中维持平衡并限制残余振荡。

  14. arXiv · 机器人与计算机视觉48

    Zero-Shot Compositional Generalization for Embodied Manipulation 提出几何监督训练框架实现零样本组合泛化

    针对机器人演示数据中关节标签受限问题,该方法利用校准的正向运动学为不同本体提供工具空间目标监督。实验在三个骨干网络和两个仿真器上验证了策略学习效果,成功实现了跨机器人的技能组合迁移。

  15. arXiv · 机器人与计算机视觉83

    Body Schema Policy:基于身体图式的视觉 - 动作接口用于高效机器人位姿操作

    论文介绍 Body Schema Policy (BSP),一种将身体图式构建为视觉与动作接口的模仿学习策略,其潜在身体图式在机器人运动学树上放置关节和连杆 token,利用学习到的螺旋运动传递特征。

    推荐理由:提出将身体图式作为视觉与动作接口的模仿学习策略,在仿真及真实机器人上以极少参数实现高效全身位姿控制。

  16. arXiv · 机器人与计算机视觉58

    基于惯性反馈的四足机械臂精确末端轨迹跟踪学习

    针对四足机械臂因执行器不确定性和几何误差导致的末端轨迹跟踪难题,本文提出一种结合末端惯性反馈的强化学习框架。实验表明,该方法在保持机身姿态和支撑构型不变的情况下,相比仅依赖本体感知或名义模型的基线,将基于动作捕捉的均方根误差分别降低了 17.3%、28.0%,并在轨迹层面揭示了名义运动学重建与实测末端位置间的显著差异。

  17. arXiv · 机器人与计算机视觉64

    面向生成式机器人的任务收敛流匹配方法

    针对生成式策略缺乏任务进展保证的问题,本文引入基于物理仿真的推理时优化框架,评估候选动作片段并搜索满足任务收敛条件的运动。该方法结合区间 Lipschitz 约束与径向分位带限制源分布,支持欧氏及姿态值黎曼流匹配策略。在 PushT 和立方体堆叠任务中,成功率分别从 31.3% 提升至 88.5%,从 77.0% 提升至 86.0%;同时显著降低最大损失并减少分布外动作比例。

  18. arXiv · 机器人与计算机视觉48

    Anchored Path Matching 蒸馏世界动作模型提升双臂操作效率

    Anchored Path Matching(APM)通过监督端点与短过渡预测,在 RoboTwin 2.0 上实现一步生成即支持多步联合推理。该方法在 Clean 演示集上将闭环成功率较基线提升 2.0 个百分点,视频 PSNR 从 30.169 升至 32.317 dB。真实机器人实验中,APM 相比八步教师模型将控制周期延迟降低 21.3 倍。

  19. arXiv · 机器人与计算机视觉83

    InteractVLA:将视觉语言动作模型转化为机器人操作的可交互工具

    现有代理操作系统将预训练的视觉语言动作策略视为不透明的语言原语,在指令或场景扰动下无法调整行为。本文提出 InteractVLA 框架,通过双向几何接口使预训练流式 VLA 成为可被几何引导和检查的工具:正向利用测试时几何引导将末端执行器目标转化为输入梯度,反向暴露动作片段与相机重投影以诊断空间差异并修正后续调用。

    推荐理由:提出 InteractVLA 框架,通过双向几何接口将预训练 VLA 转化为可交互工具,实现测试时几何引导与递归自我改进。

  20. arXiv · 机器人与计算机视觉82

    Progress Predicts Policy:一种基于语言条件标量场的混合机器人策略方法

    论文介绍 Progress Predicts Policy (PPP),该方法通过学习语言条件的标量场并利用其微分诱导命令,结合共享世界模型读取动作梯度以生成连续或离散动作控制。实验表明,在无需额外标注的情况下,仅拟合演示进度值即可实现优于行为克隆的策略性能,适用于仿真与真实机器人操作任务。

    推荐理由:该工作提出通过语言条件标量场学习混合策略,无需独立动作头或迭代搜索,在仿真与真实机器人操作中优于行为克隆。

  21. arXiv · 机器人与计算机视觉68

    真实机器人数据质量背后的隐藏变量:来自数十万小时数据的教训

    该研究报告了 25 台双臂机器人的运动学、遥操作控制及真实机器人微调实验结果。研究发现,位置可达性会高估方向感知任务覆盖率;并行化身体部位控制可将任务完成时间减少 43-53%;主动搜索演示能将臂选择准确率从 50% 提升至 100%;推理时校准错误会导致所有试验失败;策略仍保留约 90% 的无效绕行路径长度。报告建议在大规模采集前评估有效工作空间、控制效率及运动质量,以消除系统诱导的补偿行为。

  22. arXiv · 机器人与计算机视觉83

    Heave-Ho:去中心化长程多个人形协作框架

    论文介绍 Heave-Ho 框架,旨在解决人形机器人长程协作中的全身交互、长期规划与同步难题。该框架在底层利用多智能体后训练适配物理耦合交互,在高层训练视觉语言规划器并设计基于语音的领导者 - 跟随者协调机制,实现无需网络通信的去中心化执行。

    推荐理由:提出去中心化多个人形协作框架,通过视觉语言规划与语音协调机制实现无需网络通信的长程协同。

  23. arXiv · 机器人与计算机视觉38

    ALERT:一种通用轻量级人体避让流水线扩展全身运动追踪器

    ALERT 是一种通用且轻量级的流水线,用于将人类感知与主动避让能力集成至预训练的全身运动追踪策略中。仿真与现实实验表明,该方法在保留原有动作能力的同时实现了局部无碰撞执行及参考轨迹的快速恢复。该研究作为预印本发布于 arXiv,代码与权重开放许可状态待进一步确认。

  24. arXiv · 机器人与计算机视觉35

    Haptic Probing for Subsurface-Aware Force Distribution on Layered Soft Tissue 预印本发布

    针对分层软组织下表面成分变化导致控制器滞后问题,该方法利用轻预载下的低幅激励通过触觉通道区分肌肉与骨质组织。执行阶段采用力与触觉驱动的分配律,使指尖压力瞬时均衡并将接触面积设为可控变量。研究在三位受试者曲面上验证了力跟踪与压力均匀性,相关代码与数据待注册。

  25. arXiv · 机器人与计算机视觉59

    EgoHandWAM:探究手部动作在自中心世界动作建模中的作用

    论文 EgoHandWAM 探究了第一人称相机视角下手部运动对预测未来视觉特征的贡献。研究基于 751,065 个 EgoDex 窗口训练,冻结 DINOv2 编码器,结果显示仅凭历史轨迹信息对视觉特征预测的增益有限(平滑 L1 误差降低 1.32%),而结合未来位移掩码能显著减少误差(降低 3.93%)。

  26. arXiv · 机器人与计算机视觉57

    DailyBrick:语言引导的积木组装指令合成

    该论文介绍 DailyBrick 系统,这是一个多阶段代理系统,能够根据用户请求生成 LEGO 模型及其逐块组装指令,支持人类搭建和机器人执行。系统通过版本化构建 SDK 将语义子部件决策编译为规范操作,并利用外部 Meta-Reviewer 代理回放、检查生成包以验证模型与过程,识别失败并路由至修复或技能更新。

  27. arXiv · 机器人与计算机视觉72

    ALOHA Lightning:学习快速且精准的操作

    ALOHA Lightning(Flash ALOHA)是一个用于学习快速且精准机器人操作的新系统。该系统利用运动学示教在可反向驱动的双手平台上直观收集接近人类速度的演示数据,并通过测试时动作平滑与视觉数据分布对齐技术实现流畅的高速执行。针对每个任务仅需 50 次演示,即可让机器人在接近人类速度的情况下自主完成抛接球、折叠短裤、插入电池和擦桌子等双手操作任务,成功率超过 80%。

  28. arXiv · 机器人与计算机视觉78

    FlowRRT:基于蒸馏 MPPI 策略的单足复杂地形敏捷跳跃运动规划

    论文提出了 FlowRRT,这是一种针对离散地形单足跳跃的激动力学规划器。该方法将多起点 MPPI 专家离线收集的可行动作集通过条件流匹配蒸馏为生成采样器,以解决传统方法在狭窄不连通动作空间中的局限性。

    推荐理由:提出将 MPPI 专家蒸馏为生成采样器的 FlowRRT,在单足跳跃任务上实现更短规划时间与更高成功率。

  29. arXiv · 机器人与计算机视觉45

    开源 da Vinci X/Xi 腹腔镜手术器械模块发布

    该研究团队为 UR5/UR5e 机械臂开发了开源 da Vinci X/Xi 器械模块,通过五电机与电外科中介器实现运动控制及能量激活记录。 bench 测试验证了六次踏板按压的完整事件捕获,ex vivo 演示涵盖脾脏凝固与胆囊离断等任务。光学追踪校准将芬斯特双极钳俯仰增益优化至接近理想值,模块支持腹腔镜手术中的动作、视频及电外科指令时序记录。