★ 2
arXiv 论文提出 LLM 辅助标注的编码手册预审计方法
研究指出低 F1 分数可能源于标注系统、编码手册缺陷或参考标签不一致，而非单纯模型能力问题。作者提出部署前的编码手册审计流程，结合类别级指标、混淆矩阵、文档级结构化复核与针对性修订，并在两个不同领域的多类编码手册上验证修订可降低留出集错误。分析还显示部分边界问题与修订效果可跨模型迁移，另一些则与具…
arXiv cs.AI9 小时前
共 1 篇相关资讯，按重要度与时间排序，每 3 小时更新。
研究指出低 F1 分数可能源于标注系统、编码手册缺陷或参考标签不一致，而非单纯模型能力问题。作者提出部署前的编码手册审计流程，结合类别级指标、混淆矩阵、文档级结构化复核与针对性修订，并在两个不同领域的多类编码手册上验证修订可降低留出集错误。分析还显示部分边界问题与修订效果可跨模型迁移，另一些则与具…