跳到正文
arXiv · 机器人与计算机视觉· Jiaming Hu, Shi Bo, Yan Zheng, Tian Wang, Florian Dubost, Alejandro Mottini, Junze Liu, Arvind Srinivasan, Kai Zhong, Kun Qian, Sharon Gao, Vianne Gao, Houyu Zhang, Qingjun Cui·· 22 天前AI 评分42

SWIM:通过逆动力学模型学习关键状态权重以提升 JEPA 世界模型的规划成功率

SWIM: Learning What Matters from Behaviors for JEPA World Models

AI 导读

SWIM 提出一种利用逆动力学模型从离线轨迹中学习状态权重的方法,解决联合嵌入预测架构(JEPA)中视觉目标未显式融合任务相关状态信息的问题。该方法在五个机器人操作仿真任务中,相比均匀加权基线一致提升了基于图像的规划成功率,且无需额外推理计算。论文为预印本,代码与权重暂未开放。

来源:arXiv · 机器人与计算机视觉 · arxiv.org