待验证50% 置信基准精确时间

当训练窗口、门控窗口和报告窗口未严格分离时，PR-AUC达到0.72到0.76，严格分离后骤降至约0.51接近随机水平，这是数据泄漏的表现

1

来源数

50%

置信度

长期有效

时效性

2026/8/14

首次发现

来源

34次模型迭代实录：多数问题竟出在评估环节

相关事实

待验证在一个396个文件的大型混合职责项目上测试时，召回率几乎跌到零65% 相似待验证实验采用8:2比例划分数据，20%作为内部测试集，训练集内部使用5折交叉验证，并移除重复记录以避免数据泄漏63% 相似待验证实验数据显示，经过5-10轮迭代训练后，模型在低频词汇和长尾知识上的覆盖率下降超过40%，而输出文本在表面流畅性上几乎没有可察觉的退化62% 相似待验证对LLaMA-7B所有注意力层应用r=8的LoRA，可训练参数量从70亿降至约400万，压缩比超过1750倍61% 相似待验证当正负样本比例极端时，PR曲线下的面积（AUPRC）往往比AUC更能揭示真实性能60% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/746397

API

curl https://kongchang.com/api/v1/knowledge/claims/746397

MCP

get_claim(id=746397)