模型DeepSeek-V2
DeepSeek V2
DeepSeek推出的大规模MoE语言模型,在MoE负载均衡机制上有所创新,是DeepSeek系列高效大模型的代表之一
核心事实
时间轴 (近 90 天)
10月31日
MLA技术由DeepSeek在V2中首次提出,核心是将KV缓存投影到低维潜在向量以压缩显存占用。
待验证50%
10月23日
2024年5月发布的DeepSeek V2采用自研MLA注意力机制,将推理成本压到原来的十分之一。
待验证50%
10月4日
在DeepSeek V2与V3的prefill尺寸上,FlyDSL Flex Attention实现了接近2倍的提升
待验证50%
9月11日
国内大模型API价格战始于2024年5月DeepSeek V2的发布,其API定价大幅低于行业平均水平并引发字节、阿里、百度等厂商跟进降价
待验证50%