arXiv · 机器人与计算机视觉· Henglei Lv, Bailin Deng, Xiaoqiang Liu, Yichen Wang, Haoxian Zhang, Pengfei Wan, Lin Gao·· 28 天前AI 评分72
JointLight:基于异步 RGB-辐照度联合建模的人本视频重光照方法
JointLight: Human-Centric Video Relighting with Asynchronous RGB-Irradiance Joint Modeling
AI 导读
针对人本场景光传输建模难、可控性差及现有路径追踪线索易产生伪影的问题,该文提出 JointLight 模型。通过在游戏引擎合成的高质量配对数据集上训练,采用两阶段策略强制模型分别对 RGB 和真实辐照度帧进行去噪,并利用域匹配缩小差距;推理时引入异步劫持生成管线实现灵活光照控制。该方法在真实场景中展现出鲁棒泛化能力,在光照保真度和生成质量上优于现有方法。代码与数据集将公开。
来源:arXiv · 机器人与计算机视觉 · arxiv.org