2026-03-24"将注意力旋转 90°":深入浅出解读 Kimi 最新出圈成果↗提出注意力残差机制,将注意力从序列轴转向深度轴,解决标准残差逐层稀释与隐状态爆炸问题;分块注意力残差在块数 N=8 时效果接近全注意力残差且开销可控。