概念
事实一致性
衡量模型输出与检索到的知识是否一致的指标,用于区分问题根源是基模能力不足还是召回排序策略需要优化
时间轴 (近 90 天)
10月23日
事实一致性评估摘要是否保留了原始信息的含义和语境,科学结论常带有条件限定,摘要剥离限定可能导致结论被错误表述
待验证50%
10月14日
忠实度对应自然语言生成评估中的事实一致性(Faithfulness / Factual Consistency)概念,与真实性(Truthfulness)有微妙区别:真实性指回答是否符合客观世界事实,忠实度只要求回答不超出给定上下文;因此忠实度是更可度量、更可控的指标,而真实性还依赖检索源本身的可靠性。
待验证50%