跳到正文
arXiv · 机器人与计算机视觉· Tianyi Xu, Boyang Lyu, Yunkai Tang, Kairan Ding, Jiahang Li, Weiyu Guo, Yandong Guo, Shuchen Weng, Boxin Shi·· 4 小时前AI 评分53

StreamEgo:一种支持流式处理的第三人称转第一人称视频生成方法

StreamEgo: Streaming Exocentric-to-Egocentric Video Generation

AI 导读

该论文提出了 StreamEgo 框架,旨在解决现有方法在操作区域退化、过拟合及固定长度限制等问题,实现实时且可泛化的第三人称转第一人称(Exo2Ego)视频生成。研究通过引入流式双分支先验提供像素级引导,采用区域感知损失课程稳定多目标扩散训练,并将模型蒸馏为块状自回归架构以支持 24.3 FPS 的实时生成。材料仅提供了预印本链接与摘要,未包含代码或实验数据下载入口。

来源:arXiv · 机器人与计算机视觉 · arxiv.org