★ 3
研究:LLM 缺乏规范能力,只会模仿行为难辨社会规则
论文提出多智能体社区辩论设定,研究 LLM 的「规范能力」,即仅从交互中辨别社区所执行规范的能力。实验显示基线 LLM 智能体即使学习规范能提升准确率也学不会,且当真实规范伴随非规范性行为时会出现无选择性归因失败,不加区分地模仿噪声。作者称这是首次对 LLM 规范能力进行可操作化评估。
arXiv cs.AI24 天前
共 2 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文提出多智能体社区辩论设定,研究 LLM 的「规范能力」,即仅从交互中辨别社区所执行规范的能力。实验显示基线 LLM 智能体即使学习规范能提升准确率也学不会,且当真实规范伴随非规范性行为时会出现无选择性归因失败,不加区分地模仿噪声。作者称这是首次对 LLM 规范能力进行可操作化评估。
论文通过大规模人类实验研究新型社会规范的传播扩散,借助程序合成刻画不同人群形成的协作程序。发现继承的程序在跨变体互动中趋于结构简化与丢失,但互动修复机会可抵消这一压力,保留复杂算法。结果表明互动推理调节着程序性规范文化演化中的结构复杂度选择压力。