arXiv · 机器人与计算机视觉· Hualiang Wei, Wenhui Li·· 15 天前AI 评分51
ReXMo:支持多场景的视频角色替换与表情动作保持框架
ReXMo: End-to-End Video Character Replacement with Expression and Motion Preservation
AI 导读
该预印本论文提出了 ReXMo 端到端框架,旨在在替换视频中演员身份的同时保留面部表情、肢体动作及场景动态。方法引入配对三元组监督机制,利用合成数据生成实现可扩展训练;通过上下文扩散 Transformer 联合驱动视频、参考身份与文本提示学习身份变换,并借助表情增强适配器提升多人场景的表情保持效果。实验显示其在身份保真度、动作一致性等方面优于现有方法,数据集与代码将公开。
来源:arXiv · 机器人与计算机视觉 · arxiv.org