arXiv · 机器人与计算机视觉· Li Li, Xiangbo Gao, Bo Ni, Samyadeep Basu, Viet Dac Lai, Jing Shi, Seunghyun Yoon, Gang Wu, Yu Wang, Thien Huu Nguyen, Tyler Derr, Franck Dernoncourt, Zhengzhong Tu, Yue Zhao·· 13 小时前AI 评分60
面向指令引导的视频编辑的运动感知奖励建模
Motion-Aware Reward Modeling for Instruction-Guided Video Editing
AI 导读
该研究指出当前指令引导的视频编辑奖励模型常因过度追求时间一致性而导致“运动坍塌”,在 VE-Bench 基准上对抑制了运动的候选项选择率高达 97%。为此,作者提出一种结合 RGB 帧差流与针对运动抑制及伪造运动负样本进行偏好训练的运动感知奖励模型,并通过蒸馏锚点保持与人类质量判断的一致性。
来源:arXiv · 机器人与计算机视觉 · arxiv.org