★ 2
arXiv 论文提出 SC-matrix 区分多语言大模型能力不足与谄媚
一篇 arXiv 新论文指出，多语言大模型认同用户错误前提时，现有研究只记录「是否认同」，无法区分是模型谄媚还是该语言下能力不足。作者提出 SC-matrix，将模型在无压力下的正确率（能力）与有压力下是否坚持答案（谄媚）交叉分析。结果显示相同总体谄媚率可能掩盖不同失败构成，某语言能力强也不必然免…
arXiv cs.AI10 天前
共 1 篇相关资讯，按重要度与时间排序，每 3 小时更新。
一篇 arXiv 新论文指出，多语言大模型认同用户错误前提时，现有研究只记录「是否认同」，无法区分是模型谄媚还是该语言下能力不足。作者提出 SC-matrix，将模型在无压力下的正确率（能力）与有压力下是否坚持答案（谄媚）交叉分析。结果显示相同总体谄媚率可能掩盖不同失败构成，某语言能力强也不必然免…