基准Normalized Discounted Cumulative Gain / 归一化折损累计增益
NDCG
信息检索排序质量评测指标,综合考虑多个相关文档的排名位置与相关性程度,是衡量检索系统排序质量的主流指标之一
时间轴 (近 90 天)
10月26日
IDM更擅长提升召回率,说明重建物品分布有助于模型覆盖更多相关物品;CMM在排序质量(NDCG)上表现更好,表明编码边际匹配能更精细地优化排序。
待验证50%
10月19日
召回率衡量所有相关文档中被系统实际检索出来的比例,排序质量关注相关文档在结果列表中的位置分布,常用指标包括MRR和NDCG。
待验证50%
10月16日
成功标准是提前约定的量化门槛,例如召回率、MRR或NDCG达到某个阈值。
待验证50%
10月5日
项目引入三项标准检索评测指标:Hit Rate(命中率)、MRR(平均倒数排名)、NDCG(归一化折损累计增益)
待验证50%
9月20日
RAG 评估中常用的检索指标包括命中率(Hit Rate)、平均倒数排名(MRR)和归一化折损累积增益(NDCG)
待验证50%
9月11日
离线排序质量用NDCG、MAP、MRR衡量,分类预测准确度用AUC、LogLoss衡量,线上效果需通过A/B测试验证
待验证50%
全部知识事实 (6)
待验证
IDM更擅长提升召回率,说明重建物品分布有助于模型覆盖更多相关物品;CMM在排序质量(NDCG)上表现更好,表明编码边际匹配能更精细地优化排序。
50%待验证召回率衡量所有相关文档中被系统实际检索出来的比例,排序质量关注相关文档在结果列表中的位置分布,常用指标包括MRR和NDCG。
50%待验证成功标准是提前约定的量化门槛,例如召回率、MRR或NDCG达到某个阈值。
50%待验证项目引入三项标准检索评测指标:Hit Rate(命中率)、MRR(平均倒数排名)、NDCG(归一化折损累计增益)
50%待验证RAG 评估中常用的检索指标包括命中率(Hit Rate)、平均倒数排名(MRR)和归一化折损累积增益(NDCG)
50%待验证离线排序质量用NDCG、MAP、MRR衡量,分类预测准确度用AUC、LogLoss衡量,线上效果需通过A/B测试验证
50%