待验证60% 置信事实精确时间
Google的Gemma系列分词器采用SentencePiece框架实现，支持BPE和Unigram两种算法
2
来源数
60%
置信度
长期有效
时效性
2026/8/11
首次发现
来源
相关事实
待验证Google的Gemini采用SentencePiece框架配合Unigram语言模型算法进行分词78% 相似待验证谷歌专业Gemma模型包括：EmbeddingGemma用于文本嵌入和语义搜索，FunctionGemma用于工具调用，PaliGemma侧重视觉，ShieldGemma侧重安全77% 相似待验证Google推出了Gemma 2B小语言模型75% 相似待验证不同模型的Token化方式存在差异，OpenAI使用BPE算法，Google使用SentencePiece74% 相似待验证谷歌词典框属于知识面板和精选摘要体系的一部分，由谷歌自2012年起构建的知识图谱驱动70% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/729925API
curl https://kongchang.com/api/v1/knowledge/claims/729925MCP
get_claim(id=729925)