技术
Polysemanticity(多义性)
Polysemanticity(多义性)指神经网络中单个神经元对多种不同语义特征产生响应的现象,解决模型可解释性难题,典型应用于机制可解释性研究如稀疏自编码器。
详细解释
在深度神经网络中,单个神经元常对多个不相关的输入特征激活,而非对应单一语义概念,这被称为多义性。它源于神经元数量有限而特征空间巨大,导致特征叠加(superposition)。多义性使得直接解释神经元含义变得困难。为解耦特征,研究者采用稀疏自编码器(SAE)将激活分解为稀疏的、单义的潜在特征。该现象是机制可解释性领域的核心问题,代表工作包括 Anthropic 的字典学习和特征可视化。
别名与相关写法
polysemanticity
相关术语
SAE共现 1 篇
相关资讯
新框架重估稀疏自编码器:原子可解释单元2026/10/23