Transformer 原理入门：用直觉理解 Attention 在做什么
这篇文章不堆公式，先用直觉讲清楚 Query、Key、Value 和多头注意力的意义。
主题标签
Transformer
这里聚合了该主题下的全部相关文章。
Transformer 训练与推理：为什么训练快、生成却慢
同样是 Transformer，训练和推理的计算模式差异很大。本文解释其背后的原因与工程影响。
主题标签
这里聚合了该主题下的全部相关文章。
这篇文章不堆公式，先用直觉讲清楚 Query、Key、Value 和多头注意力的意义。
同样是 Transformer，训练和推理的计算模式差异很大。本文解释其背后的原因与工程影响。