已验证70% 置信事实时间未知

LLM-as-Judge方法与人类专家评分的一致性可达80%以上

4

来源数

70%

置信度

长期有效

时效性

2026/6/1

首次发现

来源

Agent评估五维体系：AI产品经理面试必考题全解析

bilibili果果姐讲AI

涉及实体

LLM-as-Judgeconcept

相关事实

待验证研究表明LLM裁判与人类评分的一致率约为80%，接近但尚未超越人类自身一致性水平（约81%）82% 相似待验证研究表明经过良好校准的LLM裁判与人工标注的一致性可达80%以上81% 相似待验证2023年学术界研究发现，顶级大模型作为评判者与人类专家的判断一致性可达80%以上81% 相似待验证研究表明LLM裁判与人类专家的一致性在许多任务上可达80%以上80% 相似待验证研究发现强大的LLM在评估开放式问答质量方面与人类评分者的一致性可达80%以上80% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/24752

API

curl https://kongchang.com/api/v1/knowledge/claims/24752

MCP

get_claim(id=24752)