★ 2
arXiv 论文:LLM 能否预判决策关键点
论文研究如何从语言模型输出中提取影响决策结论的「关键点」(cruxes),即模型多次 rollout 存在分歧的子问题。比较三种成本递增的策略后发现,模型先验预判的关键点与事后实际重要因素几乎无关,单次 rollout 也不充分,高风险决策必须依赖多次 rollout 比较。
arXiv NLP17 天前
共 2 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文研究如何从语言模型输出中提取影响决策结论的「关键点」(cruxes),即模型多次 rollout 存在分歧的子问题。比较三种成本递增的策略后发现,模型先验预判的关键点与事后实际重要因素几乎无关,单次 rollout 也不充分,高风险决策必须依赖多次 rollout 比较。
论文利用 Pythia、OLMo 等开源模型的中间检查点,在教师强制评估下系统考察语言习得随训练步与模型规模的变化。研究发现模型在语义嵌入稳定之前就已习得形态结构,训练数据规模正向影响分歧识别,而预训练共现与推理重复则产生负面影响。