★ 3
研究：无标注评分标准澄清提升 LLM 评审共识但未贴近人类
论文提出一种无标注流程，将 LLM 评审团的分歧转化为评分标准修订，在 SummEval 上将评审间一致性提升 0.069，但与专家评分的一致性无显著变化。在 HealthBench 与 USR 上，评审间一致性与人类一致性均未达到预注册效应标准。
arXiv NLP21 天前
共 1 篇相关资讯，按重要度与时间排序，每 3 小时更新。
论文提出一种无标注流程，将 LLM 评审团的分歧转化为评分标准修订，在 SummEval 上将评审间一致性提升 0.069，但与专家评分的一致性无显著变化。在 HealthBench 与 USR 上，评审间一致性与人类一致性均未达到预注册效应标准。