arXiv · 机器人与计算机视觉· Enhuai Liu, Yunke Wang, Yutong Wang, Changming Sun·· 9 天前AI 评分65
ESTRA:通过精炼注意力实现训练无关的视频扩散极端稀疏加速
ESTRA: Enabling Extreme Attention Sparsity for Training-Free Video Diffusion Acceleration
AI 导读
视频扩散 Transformer 在处理长时空序列时推理成本高昂。本文提出 ESTRA(Extreme Sparsity Through Refined Attention),一种无需训练的加速方法,通过将精确计算集中在少量关键 token 并利用聚类代表近似其余贡献来降低开销。
来源:arXiv · 机器人与计算机视觉 · arxiv.org