arXiv · 机器人与计算机视觉· Chengfeng Han, Ang Wang, Baole Ai, Xianlu Bian, Jie Yao, Zilong Huang, Dandan Ding·· 2026-10-09AI 评分63
iCATS:一种基于交互感知稀疏注意力和时间步自适应稀疏性的快速视频生成方法
iCATS: Fast Video Generation via Interaction-Aware Sparse Attention and Timestep-Adaptive Sparsity
AI 导读
论文提出 iCATS,这是一种无需微调的稀疏注意力方案,旨在解决扩散 Transformer(DiTs)的计算效率问题。该方法通过基于查询 - 键点积交互的重要性估计替代传统的特征相似性聚类,并将目标重构为二次型以降低计算成本;同时引入信噪比引导的动态稀疏度调度策略以适应不同去噪步长的误差容忍度;最后采用尾部合并策略优化硬件执行效率。
来源:arXiv · 机器人与计算机视觉 · arxiv.org