arXiv · 机器人与计算机视觉· Baiqin Wang, Zhixing Ding, Jijie Li, Jiankuo Zhao, Zhen Lei, Xiangyu Zhu·· 2026-10-06精选AI 评分78
Talk Like You:面向实时说话头生成的个性化说话习惯模仿方法
Talk Like You: Imitating How You Speak in Real-Time Talking Head Generation
AI 导读
针对现有说话头生成方法忽视用户特定说话习惯的问题,本文提出 TalkLikeYou 框架,在运动空间建模习惯并通过流匹配实现推理一步的实时性能。该方法采用两阶段模仿学习策略,支持通过预设风格或参考视频指定目标习惯,并引入 PLAD 新指标量化口型动作的模仿精度与生成多样性。实验表明其能显著提升个性化表达效果,代码已开源。
推荐理由
提出 TalkLikeYou 框架,通过流匹配实现实时口型生成并引入 PLAD 指标评估个性化说话习惯的模仿效果。
来源:arXiv · 机器人与计算机视觉 · arxiv.org