arXiv · 机器人与计算机视觉· Sangjoon Yu, Seungeun Lee, JoonHeyok Shin, Ji-Su Kang·· 10 天前AI 评分75
Emo-LiveSync:带显式情感控制的实时通用口型同步框架
Emo-LiveSync: Real-Time Universal Lip Synchronization with Explicit Emotion Control
AI 导读
论文提出了 Emo-LiveSync 框架,基于 LivePortrait 构建,通过从预训练视频到运动模型蒸馏知识将音频信号对齐至隐式运动空间,实现高保真且实时的口型生成。该方法引入表达控制门以显式操控情感表达,并自然泛化到风格化角色及非人类实体。实验表明其在视觉质量和口型同步精度上达到最先进水平,同时保证实时推理能力。该工作已接受发表于 BMVC 2026。
来源:arXiv · 机器人与计算机视觉 · arxiv.org