技术
faithfulness(忠实性)
Faithfulness(忠实性)指模型生成内容与输入或事实依据的一致程度,是评估生成文本可靠性的关键指标。它解决模型产生幻觉或偏离源信息的问题,典型应用于摘要生成和对话系统,代表工作如FactCC和基于蕴含的评估方法。
详细解释
忠实性衡量生成文本是否忠实于源文档或事实,避免添加未提及或矛盾的信息。背景:随着生成模型广泛应用,幻觉问题凸显,忠实性成为评估重点。技术说明:常用方法包括基于自然语言推理的蕴含判断、基于问答的一致性检查以及人工评估。例如,FactCC使用BERT判断摘要是否被源文档支持。忠实性不同于流畅性,强调信息准确性,是可信AI的重要维度。
别名与相关写法
faithfulness
相关术语
on-policy distillation共现 1 篇
Chain-of-thought共现 1 篇
Explainable AI共现 1 篇
misalignment共现 1 篇
在线策略蒸馏共现 1 篇
低资源语言共现 1 篇
相关公司
相关资讯
CRoS 用打乱思维链的因果奖励提升推理准确性与忠实度2026/11/2
研究提出依赖假说:低资源语言中思维链更忠实2026/10/19
门控衰减在线策略蒸馏提升OCR忠实度2026/10/1
测试时移除法提升LLM解释忠实度2026/9/7
XAI 忠实性度量论文:指出五大缺陷2026/10/12