★ 3
研究：推理集中错误，自一致性无法察觉
研究在五个基准、74944个样本上固定权重仅切换推理模式，发现推理会集中模型的错误：两个独立错误答案重合的概率在全部对比中上升。推理还大幅减少不同答案数量，但同时也缩小了答案多样性可起作用的题目集合。在280种方法-数据集-模型组合中，没有一种置信度加权方法在修正后能胜过简单多数投票。
arXiv cs.AI34 天前
共 1 篇相关资讯，按重要度与时间排序，每 3 小时更新。
研究在五个基准、74944个样本上固定权重仅切换推理模式，发现推理会集中模型的错误：两个独立错误答案重合的概率在全部对比中上升。推理还大幅减少不同答案数量，但同时也缩小了答案多样性可起作用的题目集合。在280种方法-数据集-模型组合中，没有一种置信度加权方法在修正后能胜过简单多数投票。