跳到正文
arXiv · 机器人与计算机视觉· Longtao Jiang, Mingfei Han, Jianmin Bao, Tingjun Dai, Jinjie Wei, Zhiran Zhang, Xin Tao, Zhihui Li, Salman Khan, Xiaojun Chang·· 12 小时前精选AI 评分85

Evolve in Panorama, Render in View:用于视频世界模型的全景状态演化方法

Evolve in Panorama, Render in View: Panoramic World State Evolution for Video World Models

AI 导读

针对现有视频世界模型在视角变化时冻结场景或丢失物体的问题,本文提出 PanoEvo 架构,利用全景扩散模型的潜在空间进行全局状态演化,并通过透视渲染器生成高质量视图。

推荐理由

提出 PanoEvo 架构解决全景视频世界模型的视角演化问题,在 WRBench 和 STEVO-Bench 上取得最佳分数。

来源:arXiv · 机器人与计算机视觉 · arxiv.org