★ 3
研究质疑 LLM 在 CLadder 上的因果推理能力
论文重新审视 LLM 在因果推理基准 CLadder 上的高分表现，发现其生成器在数据中嵌入了高度可预测的浅层模式。随机森林等简单模型训练后同样表现良好，且商业 LLM 在删除关键推理文本后性能几乎不变。作者认为高分更可能源于利用浅层模式，而非真正的形式因果推理。
arXiv cs.AI3 天前
共 1 篇相关资讯，按重要度与时间排序，每 3 小时更新。
论文重新审视 LLM 在因果推理基准 CLadder 上的高分表现，发现其生成器在数据中嵌入了高度可预测的浅层模式。随机森林等简单模型训练后同样表现良好，且商业 LLM 在删除关键推理文本后性能几乎不变。作者认为高分更可能源于利用浅层模式，而非真正的形式因果推理。