跳到正文
arXiv · 机器人与计算机视觉· Youngjoong Kim, Deokyeong Lee, Jaesik Park·· 13 天前AI 评分72

无需假分数网络的分布匹配蒸馏方法

Distribution Matching Distillation without Fake Score Network

AI 导读

该论文提出FSF-DMD方法,为具备流图结构的生成器提供分布级校正,替代了传统DMD依赖的辅助假分数网络以降低显存开销。研究基于扰动假设推导出生成器诱导的代理项,并扩展至反向模拟与从头训练变体。在ImageNet-1K 256x256实验显示,该方法在预训练初始化及从头训练中均能与现有DMD基线竞争。

来源:arXiv · 机器人与计算机视觉 · arxiv.org