跳到正文
arXiv · 机器人与计算机视觉· Shu Wei, Jingjing Wu, Qunyi Xie, Lingshu Zhang, Xiangcheng Du, Yannian Fu, Mengjie Wang, Zuyi Wang, Zhichao Liu, Yangliu Xu, Youyang Yin, Huanhuan Liu, YY, Yi Yang·· 20 天前精选AI 评分78

Unlimited OCR 2:通过稀疏注意力实现超长文档解析

Unlimited OCR Works 2

AI 导读

论文提出了 Unlimited OCR 2 模型,利用稀疏参考滑动窗口注意力(SR-SWA)将活跃参考 token 限制在固定容量内,从而在任意长度的文档上维持恒定的计算成本。

推荐理由

该工作提出稀疏参考滑动窗口注意力机制,在保持计算成本恒定的同时实现超长文档解析,并发布了新的评测基准。

来源:arXiv · 机器人与计算机视觉 · arxiv.org