arXiv 自然语言处理· Jeongsoo Choi, Junseok Ahn, Joon Son Chung·· 11 小时前AI 评分38
DIAL-S2ST:学习同传语音到语音翻译的推理延迟控制
DIAL-S2ST: Learning Latency Control for Simultaneous Speech-to-Speech Translation
AI 导读
研究人员提出后训练方法 DIAL-S2ST,用于在同传语音到语音翻译中实现推理延迟控制。该方法通过前瞻预测自蒸馏复用预训练能力,并联合训练单个 LoRA 适配器,无需配对目标数据或奖励计算。在 Hibiki 法英翻译实验中,仅用 10 小时源语音即可完成适配,提供灵活的延迟控制与优质的质量-延迟权衡。
来源:arXiv 自然语言处理 · arxiv.org