★ 3
研究审计 AI 文本人性化工具的事实保真与检测效果
作者用规则检查器审计 11 款商业人性化工具,发现全部工具在 35%-65% 含可核查细节的文档中改动或删除了数字、日期、人名或引文。开源 12B 工具保留 97% 数字与人名但改写 67%-78% 引文;通用判定模型 Jev 区分原文与改写文本的 AUROC 达 0.864,优于多个专用检测器。
arXiv NLP10 小时前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
作者用规则检查器审计 11 款商业人性化工具,发现全部工具在 35%-65% 含可核查细节的文档中改动或删除了数字、日期、人名或引文。开源 12B 工具保留 97% 数字与人名但改写 67%-78% 引文;通用判定模型 Jev 区分原文与改写文本的 AUROC 达 0.864,优于多个专用检测器。