跳到正文
Hugging Face Daily Papers·· 2026-10-08AI 评分53

InfiLoop:通过循环原生注意力残差扩展测试时迭代规模

Scaling to Tens of Thousands of Test-Time Iterations with Loop-Native Attention Residuals

AI 导读

论文指出循环 Transformer 随迭代次数增加会出现推理精度下降现象,提出 InfiLoop 架构利用内容加权与学习到的时间衰减机制保留有用中间状态并抑制不可靠提议。在 Sudoku-Extreme 任务上达到 97.9% 精确准确率,并在 ARC-AGI-2 任务上取得 13.6% pass@2 分数。代码已开源。

来源:Hugging Face Daily Papers · arxiv.org