待验证70% 置信事实精确时间
谷歌于2018年推出BERT预训练语言模型，2022年推出拥有5400亿参数的PaLM模型
2
来源数
70%
置信度
长期有效
时效性
2026/9/7
首次发现
来源
涉及实体
相关事实
已验证BERT由Google于2018年提出，是基于Transformer架构的预训练语言模型78% 相似待验证SentencePiece由Google于2018年推出，支持无监督训练，无需预先进行空格分词，Google的T5、LLaMA等模型均采用其Unigram语言模型算法77% 相似已验证BERT由Google于2018年推出，是预训练语言模型的开山之作，首次采用双向编码器架构，在11项NLP基准测试中刷新纪录76% 相似待验证mBERT和PaLM 2是谷歌的多语言预训练模型76% 相似待验证BERT于2018年由Google发布，采用双向预训练，通过掩码语言模型随机遮盖15%的词并要求还原75% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/873255API
curl https://kongchang.com/api/v1/knowledge/claims/873255MCP
get_claim(id=873255)