★ 2
研究:LLM 内部表征中现代标准阿拉伯语并未主导方言
研究者将语言主导性框架应用于 26 种阿拉伯语变体,检验 LLM 内部表征是否被现代标准阿拉伯语(MSA)主导。结果显示没有证据表明 MSA 构成方言的主导内部表征,方言表征形成高度重叠空间。该发现挑战了 MSA 偏置生成源于内部表征主导的常见解释。
arXiv NLP24 天前
共 2 篇相关资讯,按重要度与时间排序,每 3 小时更新。
研究者将语言主导性框架应用于 26 种阿拉伯语变体,检验 LLM 内部表征是否被现代标准阿拉伯语(MSA)主导。结果显示没有证据表明 MSA 构成方言的主导内部表征,方言表征形成高度重叠空间。该发现挑战了 MSA 偏置生成源于内部表征主导的常见解释。
研究者提出通过标准语言 TTS 模型转换 LLM 生成的方言文本,合成伪方言语音,无需真实方言语音数据。同时引入中间标准文本预测作为语义归一化。在日语、德语和中文方言的方言到英语语音翻译评估中,该方法显著提升性能。