★ 2
JSFactCheckBench 发布:日文基准重估 LLM 事实核查
研究者推出 JSFactCheckBench,一个明确指定问题归属、判定条件与证据来源三项设计的日文事实核查基准,含 1913 条来自日本社交媒体误导信息的 LLM 回答声明。测试 6 个 LLM 发现,模型核查直接回答问题的声明准确率低于补充性声明,且需在长文或多源中定位内容时得分下降。
arXiv NLP10 天前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
研究者推出 JSFactCheckBench,一个明确指定问题归属、判定条件与证据来源三项设计的日文事实核查基准,含 1913 条来自日本社交媒体误导信息的 LLM 回答声明。测试 6 个 LLM 发现,模型核查直接回答问题的声明准确率低于补充性声明,且需在长文或多源中定位内容时得分下降。