[控场AI]
概念Mamba / SSM / 状态空间模型

Mamba 架构

基于状态空间模型(SSM)的序列建模架构,以随序列长度近似线性增长的递归状态替代标准注意力的二次复杂度,在长上下文场景下显著降低显存与计算开销

来源文章