★ 3
Rubricon 自动生成评分细则提升 LLM 评测与训练效果
论文提出 Rubricon 流水线,无需人工偏好标注或评分细则注释即可自动生成有区分度的评分细则,通过采样、筛选、补充与剪枝迭代优化。在五个基准上其评分与专家细则的一致性比最佳替代方法高 9%,用其细则后训练 Qwen3.5-9B 在 HealthBench 上提升 4.5%。
arXiv cs.AI3 天前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文提出 Rubricon 流水线,无需人工偏好标注或评分细则注释即可自动生成有区分度的评分细则,通过采样、筛选、补充与剪枝迭代优化。在五个基准上其评分与专家细则的一致性比最佳替代方法高 9%,用其细则后训练 Qwen3.5-9B 在 HealthBench 上提升 4.5%。