★ 4
arXiv 评测 GPT-6 Astra、Claude Opus 5.5 等预测 ML 实验效果
论文构建 288 条 LLM 提出的 ML 实验想法数据集，让 GPT-6 Astra、Claude Opus 5.5、Claude Fable 5.1、Kimi K3、GLM-5.3 预测训练结果。结果显示最佳模型 Claude Opus 5.5 仅解释一半方差（R²=0.49），所有模型系统性…
arXiv cs.LG14 天前
#arXiv
共 275 篇相关资讯，按重要度与时间排序，每 3 小时更新。
★ 4
arXiv对论文投稿设限，遏制AI灌水潮
预印本平台arXiv对论文提交实施速率限制，以应对大量由AI生成的低质量投稿（AI slop）涌入。此举旨在减轻审稿与平台运营压力，维护学术内容质量，也反映出生成式AI对学术出版生态的冲击。
Hacker News – AI30 天前
★ 4
AI 给出 Erdős–Sós 猜想的证明
一篇 arXiv 论文声称借助 AI 完成了 Erdős–Sós 猜想的证明，属于 AI 辅助数学研究的前沿尝试。若证明成立，将再次展示 AI 在组合数学等纯数学难题上的潜力，但此类成果通常需同行严格验证。
Hacker News – AI40 天前
★ 3
BlindToChange：AI 智能体能查到变化，却不会主动去查
论文提出 BlindToChange 基准，衡量智能体是否会主动发现影响其回答的近期事件：请求中的明显候选因现实事件失效，事件自动取自 Wikidata 可定期刷新。结果显示，当近期事件未被明确提及时，系统性能最多下降 27.5 分，即便推理投入很高。轨迹分析表明过半失败源于智能体未直接搜索验证相…
arXiv NLP12 小时前
★ 3
研究评测五种 LLM 论文评审范式：直接评分与对比排序难分高下
论文在 232 篇 ICLR 2025 投稿上比较五种 LLM 评审范式、三种输入表示与三个模型，发现直接绝对评分与对比排序在和人类评分的秩相关上相当，但预测普遍压缩在录用线以上。校准实验表明对比排序只提供位置而非更好排序，校准后直接评分一致性更高且 API 调用仅为 24%。仅摘要输入优于全文摘…
arXiv NLP12 小时前
★ 3
GSR-Bench：定义并评测有据生成式语音识别
论文将语音识别重新定义为生成语义有据的文本而非单一转写，提出 Grounded Generative Speech Recognition 概念与四级改写能力层级，并发布首个综合基准 GSR-Bench。基准覆盖会议转写、跨方言翻译、上下文语音理解与噪声鲁棒性等场景，并采用语音锚定评估加 LLM …
arXiv NLP12 小时前
★ 3
ASTC：面向长程 LLM 智能体的模型内软 Token 上下文压缩
论文提出免训练的 Agentic Soft-Token Compression（ASTC），利用模型原生循环动态判断已吸收信息，以软 Token 前传、硬 Token 保留精确值，从而减少后续层计算并复用 KV 缓存。在长程任务上，ASTC 在端到端 Attention Pairs 减少最多 50…
arXiv NLP12 小时前
★ 3
TraceSpec：为 LLM 智能体改进投机解码的轨迹自适应框架
论文指出聚合式投机解码指标掩盖了智能体不同决策点的差异，提出 TraceSpec 框架，将轨迹评估与自适应草稿训练结合，并发布含 1 万训练状态、2500 测试状态的 TraceSpec-Traj 语料。方法按状态条件分配预测预算，在三种目标规模与两种温度下将重放吞吐提升 12.5%–22.6%。…
arXiv NLP12 小时前
★ 3
Mage-VL-Cowork：4B 混合电脑操作智能体训练全流程
论文提出 Mage-VL-Cowork，一个 4B 混合电脑操作智能体，从多模态对齐检查点出发，经中训练、SFT 与 RL 的五阶段渐进课程训练，兼顾 GUI 视觉交互与代码/终端执行。配套 Mage-CUA-Forge 以技能条件化生成流程合成 293806 个桌面与网页任务、覆盖 6915 项…
arXiv NLP12 小时前
★ 3
arXiv 论文解析大模型强化学习中训练-推理失配的成因与修正
论文指出大模型在线强化学习中，推理引擎采样与训练器计算梯度之间存在训练-推理失配，来源分为引擎数值误差与异步采样的策略滞后。作者将误差精确拆分为数值偏差与策略滞后，并提出 discrepancy-lag correction（DLC）方法。在 Qwen3-0.6B 与 Qwen3-1.7B 上，D…
arXiv cs.LG12 小时前
★ 3
CGAP：用 PDDL 规划器提升 LLM 智能体工具调用成功率
arXiv 论文提出 Capability-Grounded Agentic Planning（CGAP），将工具目录确定性地编译为 PDDL 模型，由 LLM 把用户请求转成目标，再用经典规划器求解，避免 LLM 试错式选工具。执行阶段由 LLM 补充实体级调用，并用确定性检查与 LLM 验证器…
arXiv cs.AI12 小时前
★ 3
arXiv 发布 SafeWebWorld：评测网页世界模型安全充分性
研究指出网页世界模型预测的未来虽看似合理，却未必支撑正确的安全决策：3000 条预测中 86.1% 语义合理，但多个模型在授权判断上高度不对称，倾向 BLOCK 且漏判需澄清的 ASK 情形。作者提出 SafeWebWorld 基准与潜在授权恢复（LAR）方法，发现证据保留、聚合可恢复性均不足以保…
arXiv cs.AI12 小时前
★ 3
arXiv 发布 CLR-Bench：评测自进化智能体学习隐藏规则能力
研究者提出 CLR-Bench 基准，用逐层叠加隐藏规则的课程链测试自进化智能体能否真正学会未被明示的规则。结果显示六种自进化方法在认证模型上几乎学不到东西，最好仅比冻结智能体高 5 分；换成 GPT-6-Sol 后 ACE 与 Dynamic Cheatsheet 可达 78% 准确率。该基准揭…
arXiv cs.AI12 小时前
★ 3
arXiv 论文主张严格区分幻觉、语义错觉与表达不确定性
论文指出研究界对「幻觉」一词用法混乱，主张幻觉应严格定义为「自信地出错」，与模型表达不确定性（UNK）区分。作者用「重述测试」将幻觉细分为知识缺失的虚构（CF）与知识可及但应用不一致的语义错觉（SI）。重评 14 种方法发现：检测方法更常标记 UNK，缓解方法对 SI 远比对 CF 有效。
arXiv NLP3 天前
★ 3
arXiv 发布 3DCodeEdit 基准评测指令引导的 3D 程序编辑
论文提出 3DCodeEdit 基准，包含 108 个 Blender 程序上的 2592 个指令引导编辑任务，覆盖参数、结构、风格与场景组合改动。17 个模型平均成功率仅 37%，最强模型结构类与风格类编辑完成率不足 60%，失败集中在「几何预见」能力。研究表明独立评审模型的多轮反馈最有效，可让…
arXiv NLP3 天前
★ 3
审计：41 个模型版本预训练披露并不持续改善
研究基于 2025 年基础模型透明度指数（FMTI）的 24 项预训练指标，审计 17 个模型家族共 41 个条目。24 组相邻版本对比中 11 组得分下降、6 组上升、7 组持平，共 38 项指标丢失、28 项提升；OLMo-2 与 OLMo-3 总分相同但各有三项得失，Llama-3.1 虽优…
arXiv NLP5 天前
★ 3
TrawMem：将智能体记忆重构为任务导向角色自适应工作区
论文指出仅按查询相关性检索记忆无法刻画记忆在任务中的角色，提出 TrawMem，将交互历史组织为局部线程，并按任务角色分配与联合选择互补记忆构建工作区。在 LoCoMo 与 MemGallery 上 macro-F1 提升 2.23–3.14 点，同时减少约 5%–13% 上下文 token。
arXiv NLP5 天前
★ 3
决策模型低成本识别 RAG 知识冲突类型，准确率比肩 Gemini
论文研究用单次前向输出概率的决策模型对 RAG 检索源冲突类型分类，在 CONFLICTS 基准上 11 个决策模型准确率 50%–67%，其中 10 个达到或超过 Gemini 2.5 Flash 的 61.3%，成本低 4–39 倍、延迟低 2.6–6 倍。将低置信查询级联给 Gemini 3…
arXiv NLP5 天前
★ 3
Mycelium：幻觉检测基准的来源、类型与粒度元研究
arXiv 论文将幻觉检测视为受基准条件制约的测量问题，沿来源、类型学、粒度三轴梳理现有基准，分析基准构建与标注选择如何塑造预测任务。作者还提出基于包含关系的 Span Coverage F1 指标，指出跨基准比较的局限，呼吁更明确地评估泛化性。
arXiv NLP6 天前
★ 3
Trajectory2Gym：面向工具调用智能体的可学习交互合成
arXiv 论文指出成功的工具调用轨迹未必是有效监督，提出 Trajectory2Gym 框架，围绕组合覆盖与决策落地两项要求构造可执行交互，并仅从有据可依的决策中提取监督信号。在 Qwen3 五个规模上，Tau1、Tau2、BFCL 三基准均值提升 16.9–29.8 个百分点，多轮有状态交互增…
arXiv NLP6 天前
★ 3
SEDATE：跨语言攻击性神经回路与免训练安全编辑
arXiv 论文提出 SEDATE，一种基于「检测-编辑-验证」的免训练方法，用于定位并编辑大模型中与攻击性/不安全输出相关的神经元，从而提升多语言安全性。方法在 7 种语言、4 个模型家族及 4 种分布外语言上评测，安全得分显著优于最佳基线，同时保留通用能力、开销可忽略。
arXiv NLP6 天前
★ 3
FORK 奖励：精确率目标缓解评分标准 RL 的奖励黑客
arXiv 论文指出，基于评分标准（rubric）的强化学习奖励本质是召回导向，导致模型输出冗长、含无关或错误内容，反而不如基座模型受偏好。作者提出 FORK 奖励，联合优化召回与新的精确率目标，要求每个响应单元既必要又事实正确。实验显示 FORK 在 RubricHub-Medical 与 He…
arXiv NLP6 天前
★ 3
研究审计低成本内容审核模型：分歧与决策风险是两种不确定性
arXiv 论文对一类冻结的「System One」低成本内容审核模型做了首次独立审计，在 14.2 万条人工标注评论上对比 14 个前沿推理模型（GPT-5.x、Claude、Gemini 3、Grok）。结果显示该廉价模型零样本 AUROC 0.83，与 14 个前沿系统中 13 个无统计差异…
arXiv NLP6 天前
★ 3
arXiv 提出 EviGround-CT：核查 LLM 生成胸部 CT 报告
EviGround-CT 在报告生成后核查阳性发现，用确定性抽取器识别阳性句子，再由 3D 定位模型为每句预测证据掩码。在 137 个范围内阳性发现上，证据支持精确率从 0.263 提升至 0.365，无支持阳性发现率从 0.737 降至 0.635，预测掩码可与 CT 影像一同检视。
arXiv NLP6 天前
★ 3
arXiv 发布 StyleInstructCaps：可控说话风格描述基准
研究将说话风格描述（SSC）形式化为指令遵循的音频语言任务，推出首个可控说话风格描述标准化基准 StyleInstructCaps，含数据集与评估框架，衡量元数据依据性、幻觉、指令遵循、泛化与说话人风格一致性。对 9 个音频语言模型的测试显示，强指令遵循能力并不必然带来有依据的风格理解。
arXiv NLP6 天前
★ 3
arXiv 提出 Conceptizer：在下一词预测外增加语义奖励
Conceptizer 训练框架在下一词预测之外引入约 9000 个概念构成的固定词表，将下一词分布映射为概念分布，把目标语义的奖励分摊到多种可能表述上，且不增加模型参数。在 1B 至 8B 参数的 3 个模型家族上，概念目标位置困惑度最低，知识与情感任务表现提升。
arXiv NLP6 天前
★ 3
arXiv 实验：记忆互联的语言模型会把对方记忆当成自己的
研究用同一语言模型的两个副本构建记忆互联实验，接收方副本可直接注意伙伴的内部记忆。当伙伴记忆权重加倍时，接收方在 97% 的回答中把伙伴被分配的规则说成自己的，且写入伙伴姓名无助于区分归属，切断连接后恢复自身规则。作者指出允许模型交换内部状态的系统必须同时测试归属与迁移。
arXiv NLP6 天前
★ 3
arXiv 提出 SLICE-Mem：轻量 LLM 智能体记忆框架
SLICE-Mem 结合显著性门控准入与谓词中心信息抽取，用小型分类器筛选值得保留的用户轮次，在线流程无需生成式 LLM 调用。在 Memora Weekly 与 LongMemEval-S 上，相比 MemOS 基线保持相近准确率的同时，LLM token 消耗分别降低 92.4% 与 99.5…
arXiv NLP6 天前
★ 3
arXiv 论文提出 RSD 指标，量化 LLM 智能体行为一致性
论文提出递归语义分歧（RSD），一种无需监督的轨迹级一致性指标，借鉴强化学习中的双模拟度量，用自然语言推理检测同一智能体两次独立运行的语义分歧。将 RSD 作为微调奖励信号后，tau2-bench 任务进度波动从 132% 降至 91%，toolsandbox 从 90% 降至 44%，且无需真值…
arXiv NLP6 天前
★ 3
研究：读者更偏爱用版权书籍训练的 AI 而非人类专家写作
一篇 arXiv 论文通过实验发现，读者在阅读偏好上更倾向于由受版权书籍训练的 AI 生成的内容，而非专家人类作者的作品。研究为版权数据训练与创作质量的争论提供了实证依据，也触及版权合规与内容价值的边界。
Hacker News – AI7 天前