研究揭示终端智能体训练数据生成与验证三类失败
论文指出,用 Claude Opus 等前沿模型作为元智能体生成终端任务与验证器用于强化学习训练虽已常见,但可运行的 Docker 镜像与测试套件并不保证端到端流程可靠。作者诊断出基准无效、测试框架脆弱、奖励错位三类失败,发现提示重设计与上下文扩展可将基线可解性提升 5.6 倍,但 9B 模型在 …
共 5 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文指出,用 Claude Opus 等前沿模型作为元智能体生成终端任务与验证器用于强化学习训练虽已常见,但可运行的 Docker 镜像与测试套件并不保证端到端流程可靠。作者诊断出基准无效、测试框架脆弱、奖励错位三类失败,发现提示重设计与上下文扩展可将基线可解性提升 5.6 倍,但 9B 模型在 …
研究推出NeMo Data Designer(NDD),一个开源通用多模态合成数据生成框架。NDD提供声明式配置格式,支持文本、代码、结构化输出、图像、嵌入及统计采样器等列类型,并可通过插件系统扩展。框架内置预览与修订循环,运行时解析依赖并调度模型端点调用,已用于Nemotron模型开发和企业生产…
论文提出一种不依赖任何真实数据集的生成器,仅凭行业、规模、商业模式、应用组合和随机种子即可生成完整虚构企业,包括员工、客户、销售、工单、通话与文档,并将同一实体图谱投射到66种业务产品格式中。由于没有真实对照,作者用引用统计构建真实感,并通过28项统计检查、对抗检测器和健全性检查进行无参考评估,2…
谷歌研究院发布ToolGrad,一种ACL 2026 Findings框架,通过先构建验证过的API链再生成用户查询,将工具使用数据生成通过率提升至99.8%。仅用500样本微调的Gemma-3-12B在BFCL上得分83.1,接近Gemini 2.5 Pro的83.2,代码与模型以Apache-…
论文提出 SPLICE,把验证与修复移出训练循环、放入离线数据生成:第二模型仅凭参考答案在推理轨迹生成时校验进度、截断失败步骤并拼接自适应提示。在 AIME 与奥数证明上,用 SPLICE 轨迹微调的模型优于用未编辑轨迹蒸馏的模型,并表现出更冒险的分支行为特征。