跳到正文
arXiv · 机器人与计算机视觉· Sadman Rakib Pinon, Adamo Orsini, Yanis Falaki, Linlian Jiang, Jacob Kingi, Yang Wang, Xinxin Zuo·· 16 天前精选AI 评分78

单图即够:基于自生成监督的测试时人类视频扩散个性化方法

One Image Is Enough: Self-Generated Supervision for Personalizing Human Video Diffusion at Test Time

AI 导读

针对姿态驱动的人类视频扩散模型难以在大幅变姿时保持身份一致的问题,该研究提出一种无需主体视频、真实标签或地面真值的个性化方案。通过域调整的姿态条件生成器合成关键姿态下的伪真值帧,利用推理时的参考仅采样器引导候选帧以维持身份一致性,并基于静态片段训练每个主体的低秩适配器。

推荐理由

该工作提出在测试时利用自生成监督实现单图个性化视频扩散,无需主体视频或标签即可提升身份保持与动作一致性。

来源:arXiv · 机器人与计算机视觉 · arxiv.org