★ 3
新框架评估大语言模型的元规范二阶社会推理能力
研究引入元规范推理框架,评估大语言模型在情绪评价和行为反应两个维度上的二阶社会推理能力,并发布NormReact数据集,包含450个规范违反场景。结果显示,六个模型普遍过度预测负面制裁,且与人类判断的一致性随社会距离增加而下降。这表明AI在规范敏感领域可能产生扭曲的社会调节图景,过度强调惩罚而忽视…
arXiv cs.AI54 天前
共 2 篇相关资讯,按重要度与时间排序,每 3 小时更新。
研究引入元规范推理框架,评估大语言模型在情绪评价和行为反应两个维度上的二阶社会推理能力,并发布NormReact数据集,包含450个规范违反场景。结果显示,六个模型普遍过度预测负面制裁,且与人类判断的一致性随社会距离增加而下降。这表明AI在规范敏感领域可能产生扭曲的社会调节图景,过度强调惩罚而忽视…
研究提出会议动态预测基准MDFB,基于2207场真实会议和24794条面向未来的查询,评估模型生成多轮会议续写的效用与拟人性。同时提出GLARE,将对抗模仿学习适配到条件语言生成,用判别器为策略提供KL正则化奖励。GLARE在效用与拟人性上的人类评估胜率分别达0.66和0.70,优于SFT与SPI…