跳到正文
arXiv · 机器人与计算机视觉· Hoang Quan Dang, Xin Shen, Yanbin Liu, Xin Yu, Ling Chen·· 16 天前精选AI 评分82

从片段到流:一种用于流式手语翻译的统一框架

From Clips to Streams: A Unified Framework for Streaming Sign Language Translation

AI 导读

Sign Language Translation 研究通常局限于预分割的片段,导致模型脱离连续交流现实。本文正式定义 Streaming SLT 任务,并提出 StreamSLST 首个端到端框架,通过可变形 Transformer 架构在单次前向中联合优化时序分割与翻译。

推荐理由

该工作提出首个端到端流式手语翻译框架,在真实与合成数据集上验证了联合优化优于级联方法。

来源:arXiv · 机器人与计算机视觉 · arxiv.org