已验证65% 置信事实时间未知
Google于2017年发表论文'Outrageously Large Neural Networks',推动MoE架构在深度学习领域崭露头角
3
来源数
65%
置信度
中期 (~90 天)
时效性
2026/7/2
首次发现
有效期至:2026/9/30
来源
微软Tutel:MoE模型加速库深度解析,支持FP4/FP8低精度计算
githubmicrosoft
相关事实
待验证神经网络架构搜索(NAS)自2017年由谷歌提出以来已成为深度学习研究的重要分支77% 相似待验证现代MoE的复兴可追溯到2017年Google Brain团队发表的论文《Outrageously Large Neural Networks: The Sparsely-Gated Mixture-of-Experts Layer》,首次将稀疏MoE层集成进大型序列模型75% 相似待验证Google Brain于2017年在《Outrageously Large Neural Networks》论文中将MoE规模化应用于Transformer框架74% 相似已验证Google在2017年的Sparsely-Gated MoE论文中系统化了混合专家架构设计73% 相似待验证2011年吴恩达在Google创建了Google Brain项目,该项目利用16000个CPU核心构建了一个深度神经网络,成功实现了无监督学习识别猫的图像71% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/61128API
curl https://kongchang.com/api/v1/knowledge/claims/61128MCP
get_claim(id=61128)