★ 3
RL如何重塑大模型推理:迁移性、覆盖度与缩放律
一篇新 arXiv 论文系统研究强化学习对 LLM 推理能力的影响,试图解释此前看似矛盾的证据:数学训练能提升其他领域表现,但 Pass@1 提升的同时 Pass@N 可能低于基座模型。作者在 Qwen 与 Gemma 系列上验证了跨域增益与遗忘并存、大采样预算下覆盖度有增有减的现象,并提出两阶段…
arXiv cs.LG27 天前
共 3 篇相关资讯,按重要度与时间排序,每 3 小时更新。
一篇新 arXiv 论文系统研究强化学习对 LLM 推理能力的影响,试图解释此前看似矛盾的证据:数学训练能提升其他领域表现,但 Pass@1 提升的同时 Pass@N 可能低于基座模型。作者在 Qwen 与 Gemma 系列上验证了跨域增益与遗忘并存、大采样预算下覆盖度有增有减的现象,并提出两阶段…
研究者提出 EASE(Entropy-Adaptive Distribution Shaping for Evasion),一种无需训练、与检测器无关的框架,用于规避 AI 生成文本检测。EASE 直接从源 LLM 的下一 token 分布计算预测熵,据此自适应调整 logit 扰动与采样温度,无…
该论文研究拉格朗日神经网络与哈密顿神经网络在具有显式时间依赖性的耗散系统上的适用性,以带阻尼的一维谐振子为对象进行模拟实验。结果显示,两种方法均能预测阻尼振子的物理行为,并在不同程度上学习到潜在的拉格朗日量与哈密顿量。研究揭示了在无显式时间依赖系统中不易显现的力学性质。