GLM-5.3-Flash融合Kimi与DeepSeek注意力架构

发生了什么

据雷锋网分析，GLM-5.3-Flash模型采用了混合注意力架构，融合了此前由Kimi和DeepSeek分别推进的Linear与Sparse路线。该45层模型中，34层采用KDA，另外11层采用KPool-DSA。这种设计让Linear负责以低成本维持长历史，Sparse负责按需检索具体信息，标志着Attention架构从寻找单一机制转向多机制分工。