arXiv 自然语言处理· Beimnet Bekele Guta, Xiaoyu Yang, Guangzhi Sun, Philip C. Woodland·· 8 小时前AI 评分34
基于路由稀疏自编码器解耦语言与副语言信息
Disentangling Linguistic and Paralinguistic Information with Routed Sparse Autoencoders
AI 导读
研究者结合 TopK 稀疏自编码器、路由特定监督与跨因子对抗提出路由稀疏自编码器，成功在冻结的 SPEAR 和 WavLM 语音编码器中解耦语言与副语言信息。说话人身份、情绪及韵律等副语言因子被有效隔离至专用路由中，且在 LibriSpeech 学习到的路由无需重训即可迁移至 MSP-Podcast，同时支持特征空间的定向因子干预。
来源：arXiv 自然语言处理 · arxiv.org