Luxonis DepthAI 固件 v2.32.0 发布:新增运行时状态查询与处理器选择功能,扩展崩溃转储上下文
Luxonis DepthAI 固件更新至 v2.32.0,新增 device.getState 函数以返回设备运行时固件状态。此次发布还引入 setProcessor 函数供用户为 Sync 和 Demux 节点选择处理器。此外,固件崩溃转储数据已扩展,包含更多导致崩溃的上下文信息。
Luxonis DepthAI 固件更新至 v2.32.0,新增 device.getState 函数以返回设备运行时固件状态。此次发布还引入 setProcessor 函数供用户为 Sync 和 Demux 节点选择处理器。此外,固件崩溃转储数据已扩展,包含更多导致崩溃的上下文信息。
Google DeepMind 推出 D4RT(Dynamic 4D Reconstruction and Tracking),这是一个统一的编码器 - 解码器 Transformer 架构,通过查询机制从 2D 视频中恢复 3D 动态世界。
推荐理由:DeepMind 推出 D4RT 统一模型,以查询机制实现 300 倍加速的 4D 场景重建与追踪,支持机器人导航、AR 及世界模型构建。
Skild AI 今日宣布完成 C 轮融资,领投方为软银,参投方包括英伟达、贝佐斯等,公司估值超过 140 亿美元。融资将用于加速其通用机器人基础模型(Omni-Bodied Intelligence)的研发与真实世界部署。
推荐理由:Skild AI 宣布完成 C 轮融资,估值超 140 亿美元,将重点投入通用机器人基础模型研发与真实场景部署。
11 月 27 日,百度 Apollo 向北京航空航天大学捐赠一批配备完整自动驾驶系统的车辆,支持该校科研教学与人才培养。此次合作延续双方联合开设国内首个“自动驾驶”专业及编写入选国家重点规划丛书等深厚渊源。作为“星火计划”首批受赠高校之一,北航将利用该资源推动学生科技创新与理论实践深度融合。
Luxonis DepthAI v2.31.0 软件栈新增对 OAK-Thermal (R8) 和 OAK-ToF (R4) 设备的支持,同时优化了 IMX577 传感器去蓝偏及 IMX678 的亮度色彩校正。修复了 BNO08x IMU 时间戳溢出、设备连接超时卡死导致无法重启等稳定性问题,并将看门狗频率上限从 4.5 秒提升至无限。
NVIDIA Isaac Lab 2.3.0 版本基于 Isaac Sim 5.1,重点增强具身智能与遥操作工作流。核心更新包括引入 Dexterous RL(DexSuite)环境以支持 Kuka 机械臂与 Allegro 手,集成 SkillGen 框架实现 cuRobo GPU 加速运动规划,并新增 G1 人形机器人环境结合强化学习与逆运动学进行移动操作任务演示。
推荐理由:Isaac Lab 2.3.0 发布,新增 Dexterous RL 环境、Mimic-SkillGen 集成及 G1 人形机器人仿真支持。
Open Robotics 正式启用由 Kandra Labs 支持的官方 Zulip 聊天服务器,无需注册即可在线访问并参与实时对话。该服务依托开源项目计划免费提供高级功能,旨在将维护者与社区成员汇聚于统一空间,共同构建机器人开放未来。
Hugging Face LeRobot 团队宣布发布 v0.4.0 版本,核心更新包括数据集基础设施重构为 v3.0(支持 OXE 级海量数据流式处理与编辑工具)、集成 LIBERO 和 Meta-World 仿真环境、引入模块化数据处理管道 Processors、简化多 GPU 训练流程。
推荐理由:LeRobot v0.4.0 发布数据集编辑工具、LIBERO/Meta-World 仿真支持及 PI0/GR00T N1.5 模型集成,并推出硬件插件系统。
Open Source Robotics Alliance (OSRA) 技术治理委员会正式批准新的机器人增强提案(REP)流程,作为 ROS、ros-controls 等项目的统一技术规范开发框架。该流程将治理主体由单人改为项目管理委员会(PMCs),并推出首个规范 REP-0001:2025。新机制旨在提升社区共识构建能力,鼓励维护者提交标准消息格式或文件约定提案。
Luxonis DepthAI 发布 v3.1.0 版本,自动选择 Camera node 线程池数并提升 OAK1-Max 高分辨率性能。该更新要求 Luxonis OS v1.19.1,修复了 RVC2/4 在 Linux 容器、NV12 去畸变及 IMU 时间戳溢出等 Bug。此外还优化了 IMX678 支持并完善 Python bindings,提供 C++与 Python示例代码。
World Labs 发布了名为 RTFM(Real-Time Frame Model)的实时生成式世界模型研究预览版。该模型能在单张 H100 GPU 上以交互帧率运行,支持对生成的 3D 场景和真实地点进行持久化探索。
推荐理由:World Labs 发布实时生成式世界模型 RTFM,单卡 H100 即可实现持久化交互与复杂光影渲染。
Generalist 展示了其模型在单样本组装任务中的能力,能够观察人类构建的小型结构并复制它。该模型实现了从像素输入到每秒 100 次动作输出的端到端控制,无需特定工程或自定义指令。测试仅在四色、三块 2x4 乐高积木的 99,840 种组合上验证了泛化边界,体现了对物理力的精细理解与序列推理能力。
推荐理由:Generalist 展示首个端到端视觉运动控制搭建乐高积木的能力,验证了从像素到高频动作的泛化潜力。
Figure 宣布与 Brookfield 达成战略合作,Brookfield 将协助 Figure 利用其管理的超十万住宅单元、5 亿平方英尺办公空间及物流空间,通过人类视频采集构建 Helix 视觉语言动作模型的全球最大且最多样化的现实世界预训练数据集。
推荐理由:Figure 与 Brookfield 达成战略合作,利用后者超十万住宅及商业空间构建 Helix 模型预训练数据集并探索机器人部署。
Figure 宣布通过 C 轮融资获得超过 10 亿美元承诺资金,后估值为 390 亿美元。本轮融资由 Parkway Venture Capital 牵头,Brookfield Asset Management、NVIDIA、Intel Capital 等机构参与投资。
推荐理由:融资将加速 Helix 平台与 BotQ 制造规模扩张,并用于构建下一代 GPU 基础设施以支持感知、推理与控制模型训练。
World Labs 发布 Marble 模型预览版,支持通过图像或文本提示生成长时间无限制、几何一致且风格多样的 3D 世界。该模型专注于构建大型环境而非孤立物体,并开放开源渲染库 Spark 以集成 Gaussian splats 到 Three.js,支持在桌面和 VR 设备上高效运行。
推荐理由:World Labs 推出 Marble 模型,支持生成持久、可导航且风格一致的 3D 世界,并提供开源渲染库 Spark。
Hugging Face 发布 LeRobotDataset v3.0,通过合并多集文件与元数据索引解决扩展性瓶颈,原生支持流式读取以处理百万级集数。该格式将表格数据存为 Parquet、视频存为 MP4,利用 JSONL 元数据管理单集信息,避免文件系统压力。
8 月 29 日,百度 Apollo 向大连理工大学捐赠 6 辆自动驾驶车辆及全套套件,使其成为环渤海地区首个拥有 L4 级前装量产自动驾驶车辆的高等院校。这些车辆将依托 Apollo 开放平台支持教学科研与跨学科课程开发,助力师生在感知、决策算法等核心技术领域开展实车验证与课题研究。
NVIDIA Isaac Lab 发布 v2.2.0 版本,核心升级包括与 Isaac Sim 5.0 全量兼容及向后兼容 4.5。物理层面更新 PhysX API 关节摩擦建模、支持空间肌腱与表面夹持器交互。
推荐理由:NVIDIA Isaac Lab v2.2.0 发布,新增 FORGE 与 AutoMate 接触丰富操作任务及 GR1 模仿学习环境,并适配 Isaac Sim 5.0。
8 月 5 日,百度 Apollo 在苏州举办第 27 届星火自动驾驶大赛总决赛,设置仿真与实车两大赛项,吸引全国 350 余所高校、1800 支队伍参与。赛事新增实车赛项并捐赠第四代自动驾驶车辆,让选手将代码部署到真车体验,实现从仿真到真车的实战跨越。超 15% 的往届选手凭借赛事经历获得百度、华为等企业工作机会,深化产学研融合。
Open Source Robotics Alliance (OSRA) 技术治理委员会批准 25 万美元资金,旨在通过引入 Cargo 依赖管理提升构建农场效率并统一信息架构。该投资将重点改善 ROS 项目的文档结构、搜索性及大语言智能体可用性,以优化全球开发者工作流。此举依托成员会费确保开源机器人生态基础设施的可持续性与可访问性。
Figure 宣布其 Helix 人形机器人系统在物流场景下性能显著提升,处理速度从约 5.0 秒降至 4.05 秒/件,条码扫描成功率达 95%。系统新增短期视觉记忆模块以消除冗余动作,整合状态历史与力反馈输入以提升控制鲁棒性,并能自适应处理软包、信封等变形物体。通过增加演示数据量及架构优化,Helix 已接近人类操作水平,且可通过少量演示快速适应如人机交接等新任务。
推荐理由:Figure 宣布 Helix 物流系统性能跃升,通过视觉记忆、状态历史与力反馈等架构改进及数据扩展,实现接近人类水平的速度与精度。
Hugging Face 团队发布 SmolVLA-450M,这是一个可在消费级硬件运行的开源视觉语言动作(VLA)模型。该模型仅使用 LeRobot 社区共享的公开数据集进行预训练,在仿真和真实世界任务中表现优于大型专有模型及 ACT 等基线。架构采用流匹配 Transformer 与异步推理栈,支持 CPU 运行或单卡训练,显著降低研究门槛。
推荐理由:SmolVLA 是首个基于社区数据训练的紧凑型 VLA 模型,在消费级硬件上实现异步推理与高性能。
Open Robotics 正式发布 ROS 2 Kilted Kaiju,这是首个将 Eclipse Zenoh 列为 Tier 1 中间件支持的版本,同时显著提升了 Python 客户端性能并新增 ROSBag 多文件回放与 NV12 图像编码支持。该版本主要支持 Ubuntu 24.04 和 Windows 11,将于 2026 年 11 月结束支持周期。
推荐理由:ROS 2 Kilted Kaiju 发布,新增 Zenoh 中间件支持、Python 性能优化及 ROSBag 多文件回放等特性。
LeRobot 社区数据集项目正式推出,目标是建立类似 ImageNet 的多样化机器人基准数据。材料指出当前机器人数据存在任务标注缺失、特征映射不一致及低质量片段等挑战,并发布了包含图像采集、元数据记录、命名规范及任务描述的具体清单与工具入口,鼓励社区上传高质量数据以训练通用策略模型。
Hugging Face 与 Yaak 合作发布 Learning to Drive (L2D),这是全球最大的开源自动驾驶数据集,包含德国 30 个城市、60 辆电动车在 3 年内采集的 5000+ 小时多模态数据(90+ TB)。
推荐理由:Yaak 与 LeRobot 合作推出全球最大开源自动驾驶数据集 L2D,包含德国 30 城 5000+ 小时多模态数据及专家/学员双策略。
NVIDIA Isaac Lab 基于 Isaac Sim 4.2 发布 v1.4.0 版本,新增工厂接触丰富操作任务、Franka 堆叠环境、Ray 分布式超参数调优及实时绘图功能。同时重构了姿态与速度 API 并修复多项 Bug,后续版本将适配 Isaac Sim 4.5 并引入破坏性变更。
Open Source Robotics Foundation(OSRF)正式宣布加入 Eclipse Foundation,成为该基金会旗下超过 400 个开源项目的一员。
Open-RMF 项目宣布发布支持 ROS 2 Jazzy Jalistro 的最新二进制和源码包,包含多项关键修复与功能增强。核心新功能包括:机器人分舰队选择性启用/停用及任务分配管理、运行时动态换电(支持多机共享充电桩或就近充电)、基于 Gazebo Harmonic 的仿真性能提升(复杂场景实时因子最高提升 70%)以及小空间交通死锁优化。
推荐理由:Open-RMF 发布支持 ROS 2 Jazzy 的新版本,新增机器人调度、动态换电及 Gazebo Harmonic 仿真加速功能。
NVIDIA Isaac Lab 发布首个正式版本 v1.0.0,基于 Orbit 框架整合 OmniIsaacGymEnvs 的强化学习环境设计工作流。
推荐理由:NVIDIA Isaac Lab v1.0.0 正式发布,集成 RL 环境设计工作流并新增波士顿动力、宇树等多款机器人模拟支持。
Open Robotics 发布 ROS 2 第十版长期支持版本 Jazzy Jalisco,默认支持 Ubuntu 24.04 Noble Numbat 和 Windows 10。该版本重点改进 Gazebo Harmonic 集成、命令行日志管理、ROSBag 服务调用记录与类型过滤功能,以及 RViz2 的 TF 正则过滤与时钟重置能力。Zenoh RMW 作为预览特性需从源码编译使用。
推荐理由:ROS 2 Jazzy Jalisco 发布,新增 Gazebo Harmonic 集成、日志自定义及 ROSBag 服务调用记录等工程改进。
Open Robotics 正式宣布成立开源机器人联盟(OSRA),旨在确保其开源机器人软件项目的长期稳定性与健康度。OSRA 将负责管理 ROS、Gazebo、Open-RMF 及其基础设施,采用混合会员制与功绩参与模式以增强社区决策参与度并获取资金支持。
推荐理由:Open Robotics 宣布成立开源机器人联盟 OSRA,通过混合治理模式接管 ROS、Gazebo 等核心项目以保障长期稳定。
OSRF 官方确认 Audrow Nash 将卸任其主持的机器人领域旗舰播客 Sense, Think, Act,该节目曾涵盖导航、伦理及制造等主题。Nash 的新播客 The Audrow Nash Podcast 现已上线供订阅,而原节目的既有集数将继续保留并可供收听。
ROSCon 2023 于 10 月 18-20 日在新奥尔良举办,汇聚来自 42 个国家的 700 多名 ROS 开发者。会议涵盖工业与移动机器人、仿真及空间机器人等主题,并包含 Chris Lalancette 关于 ROS 2 Iron Irwini 及 Jazzy Jalisco 的 keynote 演讲。