标签：#线性注意力

回顾传统注意力 这节讲的是注意力变体，先回顾一下传统注意力计算开销随上下文窗口是平方量级增长的，也就是O(n)O(n)O(n)上下文...