待验证60% 置信事实精确时间
单一LLM评判者存在位置偏见(倾向于给出现在前面的答案更高评分)和自我增强偏见(倾向于给自家风格的输出打高分)
2
来源数
60%
置信度
长期有效
时效性
2026/7/15
首次发现
来源
相关事实
待验证单一评判模型存在位置偏见、长度偏见和自我偏见等已知偏差84% 相似已验证LLM-as-a-Judge方法存在位置偏差、冗长偏差和自我偏好偏差等已知系统性偏差80% 相似待验证多评判者投票系统在多个存在不同偏差的评判者独立评分时偏差方向相互抵消,聚合结论可靠性高于单一评判者79% 相似待验证LLM 裁判存在位置偏见:成对比较时,裁判倾向于偏爱某个位置上的答案,通常是第一个;仅交换候选答案的顺序就能翻转排名(Wang et al.)。79% 相似待验证裁判模型存在系统性偏差:偏爱与自身训练分布相似的输出风格、对更长回答给出更高分(verbosity bias)、对答案在提示中出现位置敏感(position bias)74% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/513810API
curl https://kongchang.com/api/v1/knowledge/claims/513810MCP
get_claim(id=513810)