★ 3
arXiv 研究揭示 Agent-as-a-Judge 存在确认偏误
论文指出以智能体作为评审(Agent-as-a-Judge)时,即便评审自行收集证据,仍难逃确认偏误。一条被归因于权威、与正确结论无关的虚假预筛备注,可在四个评审与五个数据集上推翻最多 40% 的正确判定。研究将行为变化归为过度信任、幻觉与调查不足三类失败模式,其中 Claude 评审以过度信任为…
arXiv cs.AI6 小时前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文指出以智能体作为评审(Agent-as-a-Judge)时,即便评审自行收集证据,仍难逃确认偏误。一条被归因于权威、与正确结论无关的虚假预筛备注,可在四个评审与五个数据集上推翻最多 40% 的正确判定。研究将行为变化归为过度信任、幻觉与调查不足三类失败模式,其中 Claude 评审以过度信任为…