待验证50% 置信事实精确时间

GPT早期在同等参数量下不如BERT，直到GPT-3参数量大幅提升后，scaling law开始显现威力。

1

来源数

50%

置信度

长期有效

时效性

2026/10/31

首次发现

来源

LLM大模型零基础入门：从原理到实战的完整学习路径

bilibili数据拾光屋2026/10/20

涉及实体

GPT-3model BERTmodel scaling lawconcept

相关事实

待验证规模定律的发现直接催生了GPT-3、GPT-4、PaLM等超大规模模型77% 相似已验证从GPT-1到GPT-3，模型架构本身并没有发生根本性变化，主要提升来自参数规模的扩大和训练数据的增加，印证了规模定律（Scaling Law）76% 相似待验证代码推理能力的质变在 GPT-3 到 GPT-4 的代际跨越中被系统性观察到，符合规模化定律的涌现现象76% 相似待验证GPT-2到GPT-3参数量从15亿提升到1750亿，是Scaling Law驱动的代际突破76% 相似待验证为权威输出命名可使三个GPT模型在普通检索基础上提升6.3至7.9个百分点。74% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/1121464

API

curl https://kongchang.com/api/v1/knowledge/claims/1121464

MCP

get_claim(id=1121464)