★ 3
研究:LLM 缺乏规范能力,只会模仿行为难辨社会规则
论文提出多智能体社区辩论设定,研究 LLM 的「规范能力」,即仅从交互中辨别社区所执行规范的能力。实验显示基线 LLM 智能体即使学习规范能提升准确率也学不会,且当真实规范伴随非规范性行为时会出现无选择性归因失败,不加区分地模仿噪声。作者称这是首次对 LLM 规范能力进行可操作化评估。
arXiv cs.AI24 天前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文提出多智能体社区辩论设定,研究 LLM 的「规范能力」,即仅从交互中辨别社区所执行规范的能力。实验显示基线 LLM 智能体即使学习规范能提升准确率也学不会,且当真实规范伴随非规范性行为时会出现无选择性归因失败,不加区分地模仿噪声。作者称这是首次对 LLM 规范能力进行可操作化评估。