跳到正文
原文
arXiv 自然语言处理· Zhi Rao, Yucheng Zhou, Qianran Sun, Yiqing Huang, Longcan Yuan, Jiayi Hou, Chengwen Yao, Lin Cheng, Donghui Sun, Xiaoxin Chen, Jun Wan·· 4 小时前AI 评分36

SignRAG:统一的检索增强无手语词手语翻译框架

SignRAG: Unified Retrieval-Augmented Gloss-Free Sign Language Translation

AI 导读

研究人员提出 SignRAG 框架,结合分层预训练、目标域检索增强与检索效用引导强化微调(RUG-RFT),使 decoder-only 大语言模型适配无手语词手语翻译任务。该方法在多个 SLT 基准上刷新 SOTA,并在 CSL-Daily 上首次在全部指标上超越有手语词监督的方法。相关代码与不同规模模型已在 GitHub 开源。

来源:arXiv 自然语言处理 · arxiv.org