PyTorch 性能分析（第三部分）：注意力机制全都给你剖析

这是“Profiling in PyTorch”系列教程的第三篇，发布于 2026 年 7 月 10 日。系列目标是训练读者阅读 profiler 轨迹与表格的能力；前两部分别分析基础数学运算和由多个线性层堆叠成的多层感知机，本篇转向 Transformer 中的注意力算法，并提及注意力的平方级复杂度及若干缓解技巧。适合想学习 PyTorch profiler 使用的读者。