arXiv 自然语言处理· S\'everin Baroudi, Yanis Labrak, Pierfrancesco Melucci, Sergio Burdisso, Petr Motlicek, Herv\'e Bredin, Mirco Ravanelli, Ricard Marxer·· 4 小时前AI 评分35
引导语音大语言模型：通过对比激活添加实现免训练任务特化
Steering Speech-Language Models: Training-Free Task Specialization via Contrastive Activation Addition
AI 导读
研究提出一种针对 SpeechLLM 的免训练对比激活添加（CAA）方案，通过少量标注语音提取控制向量，在推理阶段的表征空间中引导模型执行特定语音任务。实验表明，该方法与提示词结合后，在自动语音识别（ASR）和情绪识别（ER）等任务上表现均优于单纯提示词，并可迁移至域外数据及用于规范目标语言文字脚本。
来源：arXiv 自然语言处理 · arxiv.org