跳到正文

技术方向

机器人学习与VLA 最新动态

视觉语言动作模型、模仿学习、强化学习和操作策略,关注任务条件、数据与成功率。

840 条精选近 30 天 569 条共收录 3,491 条

更新

精选归档 · 第 42 页

7月23日周四第 821–840 条
  1. Generalist · Research Blog78

    Generalist 发布 GEN-1 具身基础模型,支持千手通用物理智能

    Generalist 发布最新具身基础模型 GEN-1,该模型在超过五十万小时真实交互数据上预训练,覆盖从五指人手到专用工具等九千多种末端执行器变体。研究通过任务向量分析量化了不同工具的权重更新幅度(2.5%至11.4%),并验证了模型能在中任务切换机械手时即时适应新策略。该工作旨在构建不依赖特定硬件形态的通用物理智能,使机器人能像工具箱一样灵活组合工具完成任务。

    推荐理由:GEN-1 基础模型支持多种末端执行器,通过混合数据训练实现跨工具策略迁移与中任务切换适应。

7月11日周六
  1. Genesis World · Releases76

    Genesis World v1.2.2 发布:增强触觉传感器与碰撞检测鲁棒性

    Genesis World v1.2.2 发布,新增支持噪声选项(迟滞、死区、探针增益)的触觉传感器家族,适用于通过强化学习训练灵巧策略。修复了非凸碰撞检测中的虚假深接触和薄壳穿模问题,并将 noslip 后处理步骤的性能损耗控制在 20% 以内。同时修复了 go2_backflip RL 训练示例及大数据量下的数据访问器回归问题。

    推荐理由:该版本修复了触觉传感器与碰撞检测的稳定性问题,并优化了 RL 训练性能。

6月30日周二
  1. Figure · News82

    Figure 03 抵达宝马集团斯帕坦堡工厂并开启排序任务演示

    Figure 宣布 Figure 03 机器人抵达宝马集团斯帕坦堡工厂 Hall 52,接替上一代机型开展更具挑战性的“排序”(sequencing)任务。该任务要求机器人在非标准化、位置随机的零件中抓取并放入指定槽位,同时需结合全身移动与精细操作。

    推荐理由:Figure 03 在宝马工厂演示了结合全身控制与视觉策略的排序任务,验证了通用物理 AI 处理复杂物流场景的能力。

5月18日周一
  1. Boston Dynamics · Blog67

    Boston Dynamics 发布 Atlas 人形机器人:强化学习驱动的重物搬运与高保真仿真训练

    Boston Dynamics 发布了专为高强度物理工作设计的 Atlas 人形机器人,展示了其通过强化学习在仿真中练习数百万小时以掌握搬运迷你冰箱等复杂任务的能力。

    推荐理由:Boston Dynamics 展示 Atlas 通过强化学习与高保真仿真训练,实现搬运重物等工业级任务,并开放相关技术细节。

5月8日周五
  1. Figure · News84

    Helix-02 发布:单策略实现双人协同整理卧室

    Figure 展示了 Helix-02 双机器人无中央协调器、仅凭视觉语言动作策略协同整理卧室的演示,验证了单一神经网络处理多智能体协作与变形物体操作的可行性。

    推荐理由:Figure 展示了 Helix-02 双机器人无中央协调器、仅凭视觉语言动作策略协同整理卧室的演示,验证了单一神经网络处理多智能体协作与变形物体操作的可行性。

4月2日周四
  1. Generalist · Research Blog87

    Generalist 发布 GEN-1:具身智能基础模型迈向精通时代

    Generalist 正式发布 GEN-1,将其定义为首个实现物理任务“精通”(mastery)的通用多模态机器人基础模型。该模型在仅需约 1 小时机器人数据的情况下,将多项简单任务的平均成功率从之前的 64% 提升至 99%,完成任务速度约为现有最先进水平的 3 倍。

    推荐理由:Generalist 发布 GEN-1 多模态机器人基础模型,宣称在仅需 1 小时机器人数据下将简单任务成功率提升至 99% 并提速 3 倍。

3月9日周一
  1. Figure · News70

    Figure 发布 Helix 02 完成客厅整理演示

    Figure 发布了 Helix 02 模型在客厅整理任务的演示,该系统无需新算法或特殊工程,仅凭新增数据便掌握了使用喷雾瓶清洁、处理柔性毛巾、双手协同操作、动态投掷枕头及狭窄空间导航等复杂技能。材料展示了单一通用架构如何通过数据扩展实现全身端到端自主控制,迈向具备广泛家庭与工作场所能力的未来。

    推荐理由:Figure 展示了 Helix 02 在客厅整理任务中的全身端到端自主能力,验证了单一架构通过数据扩展即可掌握复杂移动与操作技能。

  2. Hugging Face Blog · LeRobot80

    开源具身智能框架 LeRobot v0.5.0 发布:首发 Unitree G1 人形支持与仿真环境直连 Hub

    LeRobot v0.5.0 是该项目最大规模的更新,核心新增包括首次支持宇树 G1 人形机器人(含全身控制与遥操作)、引入 Pi0-FAST 自回归视觉语言动作模型及实时分块推理技术、集成 NVIDIA IsaacLab-Arena 仿真环境。

    推荐理由:LeRobot v0.5.0 首发 Unitree G1 人形机器人支持并引入 Pi0-FAST 等策略,同时通过 EnvHub 实现仿真环境从 Hugging Face Hub 直接加载。

1月29日周四
  1. Generalist · Research Blog72

    Generalist 博客:机器人的暗物质——物理常识

    文章将“物理常识”定义为机器人在真实世界中应对不确定性、摩擦与滑移的直觉反应能力,指出当前基于互联网文本训练的模型缺乏闭环交互因而无法获得此能力。作者分享了团队通过开发轻量级手持设备采集自然操作数据(如编织、削土豆)的实验,发现此类数据能诱导模型涌现出类似人类的恢复与微调行为。文章认为物理常识是机器人基础模型的底层结构,将推动机器人从结构化环境走向开放世界,是实现通用智能的关键转折点。

    推荐理由:作者提出物理常识是机器人泛化的关键,并分享了通过手持设备采集自然交互数据以诱导模型涌现能力的实验思路。

1月27日周二
  1. Figure · News84

    Figure 推出 Helix 02:实现全身像素到扭矩的连续自主控制

    Figure 发布 Helix 02 模型,将单神经网络对类人机器人的控制从上半身扩展至全身,支持行走、操作与平衡的连续系统。该模型由 System 0(基于超千小时人类运动数据的全身控制器)、System 1(连接所有传感器与执行器的视觉运动策略)和 System 2(场景理解与语言层)组成。

    推荐理由:Figure 推出 Helix 02,实现全身像素到扭矩的连续自主控制,完成长达四分钟的洗碗机装卸任务。

11月19日周三
  1. Figure · News80

    Figure 02 机器人助力宝马生产 3 万辆汽车并正式退役

    Figure 宣布 Figure 02 机器人在宝马斯巴坦堡工厂完成部署,在 10 个月内实现全天候运行并贡献了超过 3 万辆 X3 车辆的生产。该机器人完成了包括钣金装载在内的关键任务,累计运行超 1250 小时、执行超 120 万步动作。

    推荐理由:Figure 02 在宝马工厂完成量产部署并贡献了 3 万辆 X3 生产数据,其硬件可靠性与机械臂设计经验已直接应用于 Figure 03 的架构重构。

10月29日周三
  1. NVIDIA Isaac Lab · Releases68

    NVIDIA Isaac Lab 2.3.0 发布:新增灵巧操作环境与 G1 人形机器人遥操作支持

    NVIDIA Isaac Lab 2.3.0 版本基于 Isaac Sim 5.1,重点增强具身智能与遥操作工作流。核心更新包括引入 Dexterous RL(DexSuite)环境以支持 Kuka 机械臂与 Allegro 手,集成 SkillGen 框架实现 cuRobo GPU 加速运动规划,并新增 G1 人形机器人环境结合强化学习与逆运动学进行移动操作任务演示。

    推荐理由:Isaac Lab 2.3.0 发布,新增 Dexterous RL 环境、Mimic-SkillGen 集成及 G1 人形机器人仿真支持。

10月9日周四
  1. Figure · News75

    Figure 发布第三代人形机器人 Figure 03

    Figure 正式发布第三代人形机器人 Figure 03,旨在打造通用型机器人以服务于家庭与大规模商业场景。硬件层面,该机型配备全新设计的感官套件和手部系统,支持 Helix 视觉语言动作 AI;相机架构帧率翻倍、延迟降低四分之一且视场角扩大 60%,手掌集成嵌入式广角低延迟相机以实现遮挡下的持续感知。

    推荐理由:Figure 03 发布新一代硬件与 Helix AI,通过高帧率视觉、嵌入式手掌相机及自研触觉传感器提升感知与控制能力。

9月24日周三
  1. Generalist · Research Blog72

    Generalist 发布首个端到端视觉运动控制搭建乐高积木的机器人能力

    Generalist 展示了其模型在单样本组装任务中的能力,能够观察人类构建的小型结构并复制它。该模型实现了从像素输入到每秒 100 次动作输出的端到端控制,无需特定工程或自定义指令。测试仅在四色、三块 2x4 乐高积木的 99,840 种组合上验证了泛化边界,体现了对物理力的精细理解与序列推理能力。

    推荐理由:Generalist 展示首个端到端视觉运动控制搭建乐高积木的能力,验证了从像素到高频动作的泛化潜力。

9月3日周三
  1. Figure · News72

    Figure 发布通用机器人模型 Helix 并演示洗碗机装载能力

    Figure 发布了其视觉语言动作(VLA)模型 Helix,展示了该模型仅需新增数据即可适应从折叠衣物到装载洗碗机的不同现实挑战。Helix 能够处理分离堆叠盘子、单手抓取玻璃杯并配合另一只手调整姿态等复杂操作,且无需特殊工程定制或新算法,体现了通用架构的可扩展学习能力。

    推荐理由:Figure 展示了其 VLA 模型 Helix 在无需新算法的情况下,仅凭新数据即可掌握洗碗机装载等全新任务。

8月12日周二
  1. Figure · News80

    Helix 学会自主折叠衣物

    Figure 的视觉语言动作(VLA)模型 Helix 展示了在物流场景下完全自主的包裹重定向能力后,现将其应用于更具挑战性的衣物折叠任务。这是人形机器人首次利用多指手实现端到端神经网络驱动的完全自主折叠。Helix 沿用解决物流任务的同一架构与超参数,仅通过更换数据集即可适应毛巾等可变形的物体,无需显式构建物体级表示。此外,模型还学会了与人保持眼神接触、引导视线及做出手势。

    推荐理由:Figure 开源 Helix VLA 架构,首次实现人形机器人端到端自主折叠衣物,验证了同一模型从物流到家务任务的泛化能力。

8月6日周三
  1. Skild AI · Research Blog77

    Skild AI 发布 Skild Brain:单策略实现任意场景的端到端移动

    Skild AI 发布 Skild Brain 的低层控制能力更新,该模型完全由在线视觉和本体感知驱动,直接从原始图像和关节反馈输出底层电机指令。无需预规划、建图或手动切换行为,机器人即可在从未见过的环境中(如城市公园、街道、消防梯)无缝行走、爬楼梯和跨越障碍。

    推荐理由:Skild AI 发布 Skild Brain 低层控制模块,实现仅凭在线视觉与本体感知的端到端移动,无需预规划即可跨越障碍。

6月17日周二
  1. Generalist · Research Blog65

    Generalist 发布端到端机器人操控能力预览

    Generalist 分享其通用机器人部署的早期成果,展示了由端到端深度神经网络控制的实时自主操控能力。模型在多种机械臂(如 Flexiv Rizon 4、UR5)和环境中实现了精细操作、双手动作及跨场景泛化。演示任务包括分拣紧固件、折叠盒子并收纳链条、将螺丝倒回玻璃罐以及拆解乐高积木,验证了系统在复杂物理交互中的鲁棒性与精确性。

    推荐理由:Generalist 展示端到端神经网络的实时自主操控能力,涵盖精细控制、双手动作及跨机械臂泛化。

6月7日周六
  1. Figure · News72

    Figure 推出 Helix 物流机器人系统:具备视觉记忆与力感知能力

    Figure 宣布其 Helix 人形机器人系统在物流场景下性能显著提升,处理速度从约 5.0 秒降至 4.05 秒/件,条码扫描成功率达 95%。系统新增短期视觉记忆模块以消除冗余动作,整合状态历史与力反馈输入以提升控制鲁棒性,并能自适应处理软包、信封等变形物体。通过增加演示数据量及架构优化,Helix 已接近人类操作水平,且可通过少量演示快速适应如人机交接等新任务。

    推荐理由:Figure 宣布 Helix 物流系统性能跃升,通过视觉记忆、状态历史与力反馈等架构改进及数据扩展,实现接近人类水平的速度与精度。

4月24日周四
  1. NVIDIA Isaac Lab · Releases71

    Isaac Lab v2.1.0 发布:新增 Apple Vision Pro 遥操作与 HOVER 人形机器人仿真部署

    NVIDIA Isaac Lab 发布 v2.1.0 版本,正式支持使用 Apple Vision Pro 进行双手遥操作以采集灵巧手部数据,并集成 Isaac Lab Mimic 实现模仿学习工作流。

    推荐理由:NVIDIA Isaac Lab v2.1.0 新增 Apple Vision Pro 遥操作与 HOVER 人形机器人仿真部署支持,并开放 USD 属性随机化等新功能。