arXiv 自然语言处理· Hieu Hoang, Amittai Axelrod·· 4 小时前AI 评分35
端到端同声语音翻译中基于部分语音学习提交时机
Learning When to Commit from Partial Speech for End-to-End Simultaneous Speech Translation
AI 导读
该研究提出通过模型自身完整与部分音频翻译派生前缀监督，无需转录文本或人工翻译即可适配全句语音语言模型用于同声语音翻译。在 FLEURS 和 CoVoST2 基准的三个语向测试中，前缀训练显著优化了质量与延迟的权衡边界。在多轮仅追加解码训练下，模型的提交校准误差总体下降 63%–68%，早期前缀位置下降 68%–80%。
来源：arXiv 自然语言处理 · arxiv.org