Kimi K3.1 Pro 的 Gated DSA: 百万 上下文 怎样 少读 历史
从官方模型卡和配置出发,分析 69 层 KDA 与 24 层 Gated DSA 如何协作,解释索引、Top-k、缓存驻留与长上下文成本,并区分候选缩减和整模型加速。
Model architecture9 min · 3.6K characters
Topic index
1 post
从官方模型卡和配置出发,分析 69 层 KDA 与 24 层 Gated DSA 如何协作,解释索引、Top-k、缓存驻留与长上下文成本,并区分候选缩减和整模型加速。