★ 2
稀疏自编码器分离语音语言与副语言信息
论文提出将 TopK 稀疏自编码器与路由专属监督、跨因子对抗结合,在冻结的 SPEAR 与 WavLM 语音编码器中分离语言信息与副语言信息(说话人、情感、韵律)。实验显示路由选择性分离在不同编码器、语料与探针间保持一致,且在 LibriSpeech 上学习到的路由结构可迁移至 MSP-Podca…
arXiv NLP24 天前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文提出将 TopK 稀疏自编码器与路由专属监督、跨因子对抗结合,在冻结的 SPEAR 与 WavLM 语音编码器中分离语言信息与副语言信息(说话人、情感、韵律)。实验显示路由选择性分离在不同编码器、语料与探针间保持一致,且在 LibriSpeech 上学习到的路由结构可迁移至 MSP-Podca…