arXiv · 机器人与计算机视觉· Jinho Chang, Jong Chul Ye·· 13 天前AI 评分75
Manifold-Constrained Initial Noise Optimization for Efficient Generative Model Alignment
Manifold-Constrained Initial Noise Optimization for Efficient Generative Model Alignment
AI 导读
针对生成式模型在黑盒奖励场景下梯度信息不稳定或不可用的问题,作者提出了 ZeNOVA 方法。该方法通过退火软价值引导、流形约束超球朗之万动力学及 Metropolis-Hastings 跳跃机制,实现了对初始噪声的稳定高效优化。实验表明,ZeNOVA 在图像和视频生成模型上优于所有零阶基线,能更稳定地探索高奖励区域并有效利用高斯先验的几何特性。
来源:arXiv · 机器人与计算机视觉 · arxiv.org