跳到正文
10月28日周三
  1. arXiv · 机器人与计算机视觉82

    OmniBrain-0:一种用于具身智能的统一代理模型

    论文介绍 OmniBrain-0,这是一个轻量级统一具身代理模型,旨在协调操作与导航任务。该模型采用共享高层决策架构,结合任务理解、规划及反馈驱动恢复机制。研究提出渐进式训练框架,整合具身预训练、领域专用代理蒸馏及多教师在线策略蒸馏(MOPD),并将 Rubric-Guided Recursive Self-Improvement 数据飞轮引入以持续优化专家模型。

    推荐理由:报告提出 OmniBrain-0 统一代理架构,通过渐进式训练与递归自我改进机制整合多模态能力。

  2. arXiv · 机器人与计算机视觉73

    ThinkWorld:基于世界想象的链式动力学推理强化学习框架

    针对 VLA 模型泛化受限于动作标注数据的不足,本文提出 ThinkWorld 框架,将动作思考表示为连接当前与未来状态的离散运动序列(Chain-of-Dynamics)。该方法先利用带标注演示初始化,再通过预测未来状态并与观测结果匹配进行强化学习,使无标注视频能提供直接监督。实验在仿真和真实机器人上验证了有效的人机经验迁移及对新任务环境的泛化能力。

  3. arXiv · 机器人与计算机视觉48

    EgoThumb:一款视觉驱动的超数拇指机器人,实现自主抓握与持物辅助

    EgoThumb 是一款完全开源的视觉驱动超数机械拇指,通过紧凑的双肌腱驱动结构将执行器移至前臂以减轻末端重量。系统利用基于视觉的模仿学习策略,直接将手掌朝向相机的自中心图像映射为连续关节位置,从而解码人类意图并实现跨用户与环境的鲁棒自主操作。所有硬件设计与软件实现均已开源,相关论文已获 IEEE/RSJ IROS 会议接收。

  4. arXiv · 机器人与计算机视觉83

    通过可微分仿真学习四旋翼穿越动态窄缝的视运动控制

    本文介绍了一种针对四旋翼穿越移动窄缝任务的端到端视觉控制策略,该策略直接基于机载视觉和惯性测量输出推力与姿态指令。研究提出可微分移动间隙公式,将稀疏的穿越事件转化为密集的路径目标,无需教师、规划器或蒸馏即可从随机初始化训练。

    推荐理由:提出可微分移动间隙公式,实现无需教师或规划的端到端视觉控制策略,在仿真与真实四旋翼上均验证了从随机初始化直接学习动态窄缝穿越的能力。

  5. arXiv · 机器人与计算机视觉70

    何时何地及如何修正:基于人类引导的自适应残差修正用于机器人策略

    针对模仿策略在局部区域执行失败的问题,本文提出 Adaptive Residual Correction (ARC) 模块,利用强化学习在冻结策略上学习残差修正,并通过稀疏人工修正确定激活时机、探索空间与最终执行内容。实验显示该方法将三个精细操作任务的平均成功率从 33.3% 提升至 75.0%,且人工修正能定义保留 96.0-97.7% 修正幅度的低维子空间。

  6. arXiv · 机器人与计算机视觉82

    免渲染事件帧仿真加速自主机器人导航的强化学习

    针对现有仿真器需先渲染图像再转事件的低效问题,作者提出一种解析式事件相机仿真器,直接利用场景几何与自运动合成事件流,无需视觉渲染。该仿真器在单 GPU 上生成 64x64 事件观测仅需 17 微秒,速度比最先进渲染管线快 400 倍,使目标导向避障的端到端强化学习收敛时间缩短三个数量级(低于 30 分钟)。

    推荐理由:提出无需渲染的事件相机仿真器,将强化学习训练速度提升 400 倍并实现端到端策略迁移至真实微型无人机。

  7. arXiv · 机器人与计算机视觉82

    World Dreamer v5-lite:一种基于共享世界状态的多机器人动作模型

    这篇论文提出了 World Dreamer v5-lite 模型,旨在解决多机器人控制需整合分布式相机视图并预测独立动作序列的挑战。该模型围绕共享的世界状态构建,利用预训练视频编码器将校准后的特征填充到工作空间坐标中,保持空间尺寸固定以支持多视角输入。

    推荐理由:该预印本提出多机器人共享世界状态架构,在仿真与真实机器人任务中均显著优于基线。

  8. arXiv · 机器人与计算机视觉66

    Ego-CEVR:从人类第一视角视频中学习跨具身视觉表征

    论文提出了 Ego-CEVR 数据原生框架,旨在将低成本的人类第一视角视频转化为机器人操作能力。该框架包含全局模块和交互模块,分别通过未来预测学习物体关系与任务状态,以及结合腕部观测学习局部对齐与接触线索。系统支持在大规模人类第一视角视频及多样化机器人具身视频上独立预训练全局模块,无需机器人动作标签或成对的腕部观测数据。

  9. arXiv · 机器人与计算机视觉68

    基于强化学习的固定翼自主拦截系统研究

    该研究提出了一种由神经网络控制的固定翼拦截无人机系统,该网络直接将单目视觉观测映射为执行器指令。策略通过自定义 Python 环境中的强化学习和近端策略优化进行训练,并在仿真中与经典引导控制器进行了对比测试。最终该系统在真实飞行场景中成功拦截了机动目标,验证了人工智能在自主控制固定翼拦截无人机方面的潜力。

  10. arXiv · 机器人与计算机视觉43

    离散电路元件电动场感应电机提升转子动力学性能

    Alex S. Miller 团队开发了一种使用离散电路组件构建转子的宏观电动场感应电机,成功模拟了深条设计以在宽速度范围内实现更高扭矩。该研究通过 stator 电极诱导可动转子表面电荷,突破了单一连续材料在电阻率、介电常数及电路特性上的限制。论文已提交至 arXiv (arXiv:2610.37452),涵盖机器人学与系统控制领域。

  11. arXiv · 机器人与计算机视觉82

    MARL-Exo:一种用于降低代谢能耗的髋关节外骨骼协同自适应控制方法

    该研究提出 MARL-Exo 框架,通过多智能体强化学习在仿真中同时训练全身体肌肉骨骼模型与双侧髋关节外骨骼策略。策略仅观测延迟的髋部运动学信息,奖励函数包含基于生理学的代谢功率(及可选的机械功塑形)。

    推荐理由:该研究展示了通过多智能体强化学习在仿真中与人体模型共适应训练的髋关节外骨骼策略,能在无需针对新用户单独调优的情况下降低代谢成本。

  12. arXiv · 机器人与计算机视觉35

    Spiking Neuromorphic Control 用于欠驱动机器人周期轨道稳定:基于贪婪李雅普诺夫方法的研究

    该研究利用事件驱动的脉冲神经网络控制器,解决欠驱动机器人的轨迹跟踪与周期轨道稳定问题。方法将非线性动力学线性化为周期性时变系统,并扩展了原用于 LTI 系统的贪婪李雅普诺夫设计以构建反馈控制器。有效性已在蝴蝶机器人(butterfly robot)的轨迹稳定任务中得到验证。

  13. arXiv · 机器人与计算机视觉56

    Retrieve to Act:基于运动原语图检索的鲁棒 VLA 执行方法

    论文介绍 Retrieve to Act (R2A) 测试时扩展框架,将分布外鲁棒性问题转化为几何运动原语检索问题。该方法构建离线时空运动原语图,利用查询依赖的图神经网络在推理时动态定位并检索兼容的未来运动原语,通过门控机制与冻结 VLA 预测动作融合,修正错误轨迹同时保持局部反应性。

  14. arXiv · 机器人与计算机视觉48

    Remember Where You Walk:基于 Hadamard 记忆的 LSMM 实现足式机器人迷宫探索空间记忆

    针对强化学习策略在长时序中信息丢失问题,该工作提出基于 Hadamard 记忆的本地空间矩阵记忆(LSMM)架构。实验显示,LSMM 在自主迷宫探索任务中匹配了强基线的覆盖率,且是唯一能记住迷宫布局的架构,将重建误差降低了三倍。

  15. arXiv · 机器人与计算机视觉64

    RAVEN:一种用于四旋翼无人机在定位不确定性下快速自主视觉探索的统一主动 SLAM 系统

    论文介绍 RAVEN,这是一个针对四旋翼无人机的统一主动 SLAM 框架,旨在解决未知环境下的快速自主视觉探索与高定位精度之间的平衡问题。该系统通过识别前沿和主动闭环候选点生成全局巡游方案,并利用效用向量量化探索效率与定位精度,最终根据优先级参数选择最优路径。

  16. arXiv · 机器人与计算机视觉58

    Omni-IGN:基于全景视觉的无人机机载图像目标导航

    论文提出 Omni-IGN,这是一个完全机载的图像目标导航系统,整合了四路鱼眼感知、注意力强化学习策略和碰撞安全层。系统在 Habitat 基准上优于连续动作基线,IsaacSim 飞行测试验证了结合学习型深度估计与安全层的避障有效性,真实世界实验实现了无需微调的外部定位零样本迁移。代码与模型检查点将在接收后发布。

  17. arXiv · 机器人与计算机视觉49

    Keeping Contact:双足非抓持操作中的任务自适应摩擦边距研究

    该研究提出利用符号摩擦距离度量力空间中的摩擦边距,并将其嵌入二阶锥规划(SOCP)序列以平衡物体并远离名义摩擦边界。实验表明,在物体属性变化及模型失配条件下,该方法相比固定边距或无边距策略均能成功执行双足非抓持操作。论文已被 IEEE Robotics and Automation Letters 接收,arXiv 版本为 v1。

  18. arXiv · 机器人与计算机视觉35

    黑盒机器人策略失效时的在线传感器诊断与修复研究

    针对冻结或不可访问的机器人基础模型策略,该方法通过结构化代理分离步态周期以指导输入修复。在仿真 Go2 平台上,离线诊断将行走成功率从 259/640 提升至 429/640,在线修复达 382/640 且未触发故障集外的误报。研究结果目前仅基于单一策略和部分筛选的仿真故障集,硬件验证与通用性仍待开放。

  19. arXiv · 机器人与计算机视觉78

    TAPESTRY:一种用于视频生成与机器人控制的单一骨干网络

    论文提出 TAPESTRY 方法,通过 Tokenizing Actions as Video Patches in a Shared Transformer Policy,将预训练视频扩散模型复用于机器人控制策略,无需在推理时进行资源密集的视频生成。

    推荐理由:该工作将预训练视频扩散模型复用于机器人策略,无需推理时生成视频即可输出动作序列。

  20. arXiv · 机器人与计算机视觉23

    NASA HERC 2027 四轮教育型漫游车集成设计与可复现可行性分析

    该研究为 2027 年 NASA 人类探索漫游车挑战赛高中组开发了一套集成设计评估方案,结合商业差速控制与树莓派子系统执行成像及测距指令。在估算质量 10.919 kg 条件下,理论滚动速度达 8.105 km/h,需至少 1.255 N·m/轮扭矩以应对 20 度爬坡。通过合成基准测试验证了颜色几何规则与线性支持向量分类器在 2,400 张生成板上的表现,但未报告物理漫游车实测结果。

  21. arXiv · 机器人与计算机视觉42

    磁倾角与强度梯度流作为无 GPS 导航机制的研究

    针对生物启发式磁导航(BIMN)中地磁场坐标无法一一对应地理位置的模糊性挑战,研究提出将 BIMN 建模为梯度流控制问题。实验表明,在地球预定义区域内,利用磁倾角和强度的梯度流可充当引导电流,控制系统经中间航点被导向目标目的地。该框架提供了无 GPS 导航机制,适用于工程建立地磁基础设施及生物学分析迁徙路线。

  22. arXiv · 机器人与计算机视觉82

    RynnWorld-Latent:一种基于通用潜在动作的跨具身世界模型

    论文提出了 RynnWorld-Latent,这是一个利用 3D-grounded latent actions 作为共享条件接口的跨具身视频世界模型。该模型在预训练阶段联合使用了人类交互视频、机器人演示和仿真 rollout,无需统一的原生动作空间。

    推荐理由:该工作提出基于通用潜在动作的跨具身世界模型,支持在人类视频与机器人演示上联合预训练,并验证了其在真实机器人上的策略成功率提升。

  23. arXiv · 机器人与计算机视觉58

    构建可审计的自驱动实验室:混合动作、测量与安全执行的统一框架

    论文提出一种可审计的自驱动实验室(SDL)统一框架,包含四个核心组件:LAM 用于生成连续机器人轨迹和仪器 API 调用;OpenSDL 作为执行底层映射异构设备并记录因果事件;Safe-SDL 运行时门控结合预调度检查与信号时序逻辑监控;L3-Bench 定义涵盖物理结果、安全性及故障恢复的评估协议。该框架旨在解决 SDL 工作流中的协调性与可追溯性挑战,目前为 arXiv 预印本状态。

  24. arXiv · 机器人与计算机视觉63

    Learning Side-by-Side Navigation for Personal Mobility Vehicles from Human Drivers

    该研究提出一种让两辆个人移动车辆(PMV)进行侧向协同自主运动的方法。系统基于全局路径规划合作队形以方便乘客交谈,同时确保安全平稳。每辆车运行独立的采样模型预测规划器,仅交换观测到的里程计信息,联合决策通过公共规则解析效用矩阵。

  25. arXiv · 机器人与计算机视觉35

    On Shaky Ground:非刚性底盘效应对移动操作的影响研究

    该论文通过砂光案例研究,结合仿真与两台轻量级无驱动轮式测试床实验,揭示了持续接触下非刚性底盘行为对任务执行的影响。在低底盘 - 地面阻力条件下,仅能实现 100 N 指令力的 54%-70%,工具中心点误差高达 100 mm;增加阻力可改善力实现并抑制位移,但底盘振动与力跟踪误差无一致关联。研究强调了联合考察力、运动与振动以表征轻量级移动操作的重要性。

  26. arXiv · 机器人与计算机视觉83

    TOPS:重塑流源与传输以优化多任务机器人操作

    该论文提出 TOPS(Task-Oriented Priors and Schedules)方法,针对语言条件化的多任务机器人操纵问题,通过构建多模态任务源并调整去噪过程中的插值调度来适应不同运动需求。

    推荐理由:TOPS 方法通过调整流源先验与插值调度,在无需修改网络架构下提升多任务机器人操作的成功率与推理效率。

  27. arXiv · 机器人与计算机视觉60

    RoboSTD:基于矢状面镜像的零样本单臂至双臂迁移方法

    针对双臂机器人操作演示采集成本高且单臂数据难以直接迁移的问题,论文提出 RoboSTD 方法。该方法首先对观测、本体感知及动作进行矢状面镜像处理以构建可执行的伪双侧演示,随后利用大语言模型生成结构化的时空协调约束,指导在工作空间区域与任务阶段的重建监督信号。

  28. arXiv · 机器人与计算机视觉42

    SWIM:通过逆动力学模型学习关键状态权重以提升 JEPA 世界模型的规划成功率

    SWIM 提出一种利用逆动力学模型从离线轨迹中学习状态权重的方法,解决联合嵌入预测架构(JEPA)中视觉目标未显式融合任务相关状态信息的问题。该方法在五个机器人操作仿真任务中,相比均匀加权基线一致提升了基于图像的规划成功率,且无需额外推理计算。论文为预印本,代码与权重暂未开放。

  29. arXiv · 机器人与计算机视觉58

    HumiMimic:基于野生视频的拟真人机交互转移与数据集构建

    论文提出HumiTransfer框架,旨在保留人类互动中的空间、语义及接触关系(如拥抱、握手),并将这些关系迁移至不同形态的人形机器人上。该方法先重建3D人体运动,再通过加权关节相对方向和解剖偏移优化接触关键关系,最后通过后重定向优化确保平衡与避障。