arXiv · 机器人与计算机视觉· Zongze Wu (Adobe), Xianbang Wang (MIT), Zhengyang Geng (Adobe), Mingdeng Cao (Adobe), Zhoutong Zhang (Adobe), Richard Zhang (Adobe), Eli Shechtman (Adobe), Ruiming Cao (Adobe)·· 17 天前AI 评分65
更好的评论家对分布匹配蒸馏至关重要:联合缩放与步感知评论家
A Better Critic Matters for Distribution Matching Distillation
AI 导读
该论文研究了分布匹配蒸馏(DMD)中评论家的容量与信息需求。实验表明,固定小评论家而增大教师模型会导致训练崩溃;通过联合缩放评论器与教师模型可避免此问题。此外,提出的步感知评论家(STAC)能根据生成步骤估计特定分数,显著提升了 ImageNet 图像生成、SDXL/FLUX.2 文生图及 Wan2.1 文生视频的性能。
来源:arXiv · 机器人与计算机视觉 · arxiv.org