DeepMind 发布 D4RT:统一 AI 模型实现 4D 场景重建与时空追踪
Google DeepMind 推出 D4RT(Dynamic 4D Reconstruction and Tracking),这是一个统一的编码器 - 解码器 Transformer 架构,通过查询机制从 2D 视频中恢复 3D 动态世界。
推荐理由:DeepMind 推出 D4RT 统一模型,以查询机制实现 300 倍加速的 4D 场景重建与追踪,支持机器人导航、AR 及世界模型构建。
Google DeepMind 推出 D4RT(Dynamic 4D Reconstruction and Tracking),这是一个统一的编码器 - 解码器 Transformer 架构,通过查询机制从 2D 视频中恢复 3D 动态世界。
推荐理由:DeepMind 推出 D4RT 统一模型,以查询机制实现 300 倍加速的 4D 场景重建与追踪,支持机器人导航、AR 及世界模型构建。
Drake v1.49.0 作为最后一个支持 Ubuntu 22.04 的版本,将 C++、GCC、Clang 及 Python 等工具链版本下限上调。此次更新修复了模拟器默认上下文内存泄漏问题,并将 MOSEK 依赖库升级至 11.1.2 以适配 Python 3.14。官方提供了 drake-1.49.0-{jammy|noble|mac-arm64}.tar.gz 预编译二进制包供用户下载。
Google DeepMind 回顾 2025 年进展,推出 Gemini 3 Pro 和 Gemini 3 Flash 模型。Gemini 3 Pro 在 Humanity's Last Exam 基准测试中表现优异,数学任务 MathArena Apex 达到 23.4% 准确率;Gemini 3 Flash 则以更低延迟和成本提供类 Pro 级能力。
Drake v1.48.0 正式支持 macOS 26 Tahoe,修复 RenderEngineVtk 渲染能量损失并将 VTK BRDF 模型改为多散射近似以提升亮度。新版本引入 AutoDiff 新实现选项,将于 2026-07-01 移除旧版支持,用户需尽快切换默认配置以规避后续兼容性问题。
Google DeepMind 宣布即日起向全部 17 个 DOE 国家实验室提供加速访问权限,部署基于 Gemini 的"AI co-scientist"多智能体虚拟协作系统。
Google DeepMind 推出 WeatherNext 2,这是其最先进的天气预测模型,能将预报生成速度提升 8 倍且分辨率达到 1 小时。该模型基于功能生成网络(FGN)架构,能从单一输入预测数百种可能的气象结果,在 99.9% 的变量和 0-15 天的时效上超越上一代 WeatherNext 模型。
推荐理由:DeepMind 推出 WeatherNext 2,生成速度提升 8 倍且分辨率达小时级,支持数百种场景预测并已在 Earth Engine 开放数据。
Drake v1.47.0 新增 CMake 与 Bazel 构建标志以在编译时禁用 GL、GLTF 客户端及 VTK 渲染引擎。该版本将 macOS 二进制包升级至 Python 3.14,移除 3.12 轮子,并将 Gurobi 更新至 12.0.3 需用户同步安装。修复了多体动力学几何验证、Meshcat 缓存及优化回调中的多个段错误与未定义行为问题。
DeepMind 发布 SIMA 2,这是继去年版本后的重大升级,通过嵌入 Gemini 模型赋予其推理与对话能力,使其从指令跟随者转变为可协作的虚拟游戏伙伴。
推荐理由:DeepMind 推出 SIMA 2,通过集成 Gemini 推理能力实现目标规划与自我改进,并在 Genie 3 生成的虚拟世界中验证了泛化性。
World Labs 正式发布多模态生成式世界模型 Marble,使其从早期测试转向通用可用。该模型支持通过文本、图像、视频或粗略 3D 布局创建 3D 世界,并允许交互式编辑、扩展和组合场景。
推荐理由:World Labs 正式发布多模态生成式世界模型 Marble,支持从文本、图像及视频构建 3D 场景,并新增编辑、扩展与导出功能。
Berkeley BAIR 团队发布了 Transitive RL (TRL) 算法,旨在解决传统时序差分(TD)学习难以扩展至长周期任务的瓶颈。该算法采用“分治”范式,将轨迹递归分割以更新价值函数,从而将对数级减少贝尔曼递归次数并避免误差累积。
推荐理由:作者提出 Transitive RL 算法,利用分治策略解决离线强化学习在长序列任务中的误差累积难题。
Drake v1.46.0 正式弃用 macOS Sonoma (macOS 14) 并计划 soon 支持 macOS Tahoe,同时新增对 Eigen 5.0.0 的支持。
World Labs 发布了名为 RTFM(Real-Time Frame Model)的实时生成式世界模型研究预览版。该模型能在单张 H100 GPU 上以交互帧率运行,支持对生成的 3D 场景和真实地点进行持久化探索。
推荐理由:World Labs 发布实时生成式世界模型 RTFM,单卡 H100 即可实现持久化交互与复杂光影渲染。
World Labs 发布 Marble 模型预览版,支持通过图像或文本提示生成长时间无限制、几何一致且风格多样的 3D 世界。该模型专注于构建大型环境而非孤立物体,并开放开源渲染库 Spark 以集成 Gaussian splats 到 Three.js,支持在桌面和 VR 设备上高效运行。
推荐理由:World Labs 推出 Marble 模型,支持生成持久、可导航且风格一致的 3D 世界,并提供开源渲染库 Spark。
Drake v1.45.0 正式移除对 WORKSPACE 的遗留支持,全面转向 Bazel 模块架构。此次更新将构建工具 bazel 升级至 8.4.0,同时修复了多体动力学几何查询及 IrisNp2 求解器约束相关的多项 Bug。官方提供 drake-1.45.0-{jammy|noble|mac-arm64}.tar.gz 预编译二进制包供用户直接安装使用。
NVIDIA Isaac Lab v2.2.1 作为小版本补丁发布,新增 ContactSensor 接触点位置报告、环境动作描述符导出及 RSL-RL 对称示例。
Drake v1.44.0 发布,新增自动微分基础教程并调整 Wheel 包将 Mosek 设为 PyPI 依赖而非内嵌。版本引入 IrisNp2 新策略支持、SchunkWsgTrajectoryGenerator 上下文优化及 Acceleromer 等新 API 绑定。
Drake v1.43.0 正式发布预编译二进制包,引入 DifferentialInverseKinematicsSystem 控制器与 IRIS-NP2 并行规划算法。此次更新移除了 manipulation_station 示例,新增 glTF 渲染修复及数学规划线性约束重载功能。发布物包含 SNOPT 求解器支持,默认 C++ 标准升至 23 并升级至 Clang-19 等构建依赖。
Drake v1.42.0 发布,新增 DiagramBuilder::Disconnect、SimulatorConfig start_time 及多体距离查询等新功能。
Drake v1.41.0 版本发布,新增 DiscreteTimeApproximation 离散时间系统转换功能及 ProjectedGradientDescentSolver 投影梯度下降求解器。
NVIDIA Isaac Lab 发布 v2.1.0 版本,正式支持使用 Apple Vision Pro 进行双手遥操作以采集灵巧手部数据,并集成 Isaac Lab Mimic 实现模仿学习工作流。
推荐理由:NVIDIA Isaac Lab v2.1.0 新增 Apple Vision Pro 遥操作与 HOVER 人形机器人仿真部署支持,并开放 USD 属性随机化等新功能。
Drake v1.40.0 发布,新增离散时间稳态卡尔曼滤波与积分器克隆功能,并启用 Mesh 和 Convex 几何的非均匀缩放以支持镜像加载。软件栈升级至 macOS Python 3.13 和 Linux manylinux_2_34,移除对 Python 3.11 的支持并将 pybind11 切换至上游版本加补丁。
Drake v1.39.0 正式发布,将构建系统从 WORKSPACE 迁移至 Bazel 模块,旧版支持将于 2025-09-01 后移除。此次更新优化了 MultibodyPlant 的隐式 PD 控制输入端口并修正了 VTK 光照计算错误。此外,规划器新增 IrisZo 参数化功能且多项依赖库升级至最新版本。
NVIDIA Isaac Lab v2.0.2 补丁版发布,通过引入 velocity_limit_sim 和 effort_limit_sim 参数明确区分仿真求解器限制与执行器模型约束,回退至 v2.0.1 前行为以修复隐式速度限制导致的策略失效问题。
NVIDIA Isaac Lab v2.0.1 发布,主要修复了因 RSL RL 库名更新导致的安装兼容性中断问题。此次更新切换至 PyPI 安装源并修正文档路径、禁用保存文件时的扩展自动重载等细节。同时修复了关节姿态写入缓冲区的时序戳错误、RayCaster 传感器漂移重置失效及 rsl-rl 分布匹配失败等 Bug,确保仿真环境稳定运行。
Drake v1.37.0 将 MultibodyPlant 默认离散接触近似更新为 kLagged,该 SAP 公式在保持物理精度的同时提供强收敛保证。此次发布正式支持 macOS 15 Sequoia,Ipopt 改为源码编译导致 MUMPS 不可用且仅保留 SPRAL 求解器。用户依赖特定接触近似或旧构建规则需更新代码以适应这些变更。
Drake v1.36.0 在 macOS 构建源代码时强制要求 Xcode 16 或更新版本,并启动向 Bazel 模块的端口工作以逐步弃用仓库规则。该版本将 Ubuntu 上 IpoptSolver 的默认线性求解器从 MUMPS 切换为 SPRAL,未来计划完全移除对 MUMPS 的支持。此外,数学规划与多体动力学等模块新增多项功能并修复了相关解析与计算错误。
NVIDIA Isaac Lab 发布 v1.3.0 版本,作为 Isaac Sim 4.2 的最终版,该版本新增 IMU 传感器支持、相机基准工具及距离深度图像的正确反投影功能。
推荐理由:Isaac Lab v1.3.0 作为 Isaac Sim 4.2 的最终版,新增 IMU 传感器、相机基准工具及基于 Gymnasium 空间的感知环境支持。
Drake v1.35.0 发布,MultibodyPlant 新增 SetBaseBodyJointType() 函数以在最终化前控制未连接刚体与世界间的关节类型(默认 QuaternionFloatingJoint,可选 RpyFloatingJoint 或 WeldJoint)。
Drake v1.34.0 发布,SceneGraph 新增 InMemoryMesh 以支持动态创建及混合存储的网格数据。RenderEngineVtk 提供 Ubuntu EGL 选项用于云端渲染,但处于测试阶段且不再支持 macOS Ventura。
Drake v1.33.0 发布,修复了 GraphOfConvexSets 中 SolveShortestPath 与 SolveConvexRestriction 函数的返回值不一致问题,并将 GetSolution*() 返回值由 NaN 改为 std::nullopt。该版本终结了对 macOS Ventura (macOS 13) 的支持,不再提供预编译二进制包。
Drake v1.32.0 发布,将 GcsTrajectoryOptimization 标记为实验性并排除在稳定 API 之外。版本新增 RgbdSensor::X_PB() 暴露及 Meldis 实时率报告、SnoptSolverDetails 求解时间上报等新特性。
NVIDIA Isaac Lab v1.1.0 发布,新增 skrl 分布式多 GPU 学习及 JAX 训练评估支持。此次更新同时引入射线传感器 LiDAR 模式、可变形网格生成 API 及 PBS 作业调度器集群支持。官方正式停用 Isaac Sim 2023.1.1 版本支持,要求用户升级至 Isaac Sim 4.1 以获取最新功能与改进。
Drake v1.31.0 默认启用离散时间多体系统的采样输出端口,显著提升接触力等动力学可视化仿真速度并修正数学基础。该版本同时修复了 OsqpSolver 与 MosekSolver 的解析漏洞,解决了二次项交叉项误解及矩阵验证错误问题。用户若需最小状态表示可设置 use_sampled_output_ports=false 或改用连续时间植物。
Drake v1.30.0 正式发布,官方新增对 Ubuntu 24.04 ("Noble Numbat") 的系统支持。该版本默认将 OsqpSolver 切换至确定性模式并允许全局设置场景为"compliant"接触类型,无需修改现有模型文件即可实现全场景合规弹性接触。此外,数学规划模块新增符号 L2 范数成本解析能力,多体动力学与几何接口也进行了多项性能优化与 API 调整。
Open Robotics 宣布五名贡献者加入 Google Summer of Code 2024,致力于将 DAVE 项目的物理声纳仿真插件迁移并适配 ROS 2 与 Gazebo Harmonic。该项目旨在提升水下机器人模拟刷新率并支持侧扫等新类型声纳,以在真实部署前更准确验证自主算法。
Drake v1.29.0 发布,新增 RemoveJoint() 方法以应对元素移除后索引不连续问题,并升级至 Clang 15。macOS x86_64 构建中 IPOPT 现默认禁用且不再支持。该版本同时提供了多项数学规划与多体动力学的新特性及修复。
Drake v1.28.0 将原树中的.urdf和.sdf模型文件移至drake_models目录,并改变Convex形状语义为自动使用任意网格的凸包。该版本新增离散时间积分器、支持L2范数成本及gltf解析等新特性,提供预编译二进制包供Ubuntu/macOS平台安装。
Drake v1.26.0 发布,PyPI 轮子新增对 Python 3.11 和 3.12 的支持。这是最后一个支持 Ubuntu 20.04 的版本,同时废弃了 FindSeparationCertificateOptions.num_threads 等 API。
Drake v1.25.0 发布,新增 MJCF 解析器对 eulerseq、mesh defaults 及视觉/碰撞几何的支持,并修复 RenderEngineGl 窗口缩放等缺陷。
Drake v1.24.0 正式支持开源凸锥求解器 Clarabel 及 macOS Sonoma 系统。新版本在 SAP 求解器中引入基于物理观测的 Similar 和 Lagged 两种新接触近似模型,取代部分旧有 TAMSI 配置并保证收敛性。同时修复了 SDFormat 环境变量依赖问题,新增 Python 绑定以支持 FlattenModelDirectives 等功能。