概念Calibrated Confidence / 概率校准
校准置信度
衡量模型概率输出质量的核心指标,指模型输出的置信度与实际准确率在统计上对齐,即模型表示70%置信度时真实正确率约为70%,可直接用作自动化阈值而无需额外可信度过滤
时间轴 (近 90 天)
9月25日
该模型的置信度是经过校准的,通过强化学习配合严格评分规则训练得到,使输出概率与实际准确率在统计上对齐
待验证50%
衡量模型概率输出质量的核心指标,指模型输出的置信度与实际准确率在统计上对齐,即模型表示70%置信度时真实正确率约为70%,可直接用作自动化阈值而无需额外可信度过滤
该模型的置信度是经过校准的,通过强化学习配合严格评分规则训练得到,使输出概率与实际准确率在统计上对齐