SOURCE / dao-flashattention-2022

Tri Dao 等, FlashAttention: Fast and Memory-Efficient Exact Attention with IO-Awareness, 2022

固定 tiling 减少 HBM 与 on-chip SRAM 之间的 reads / writes，且保持 exact attention；说明较少 FLOPs 不自动等于更短 wall-clock time，不能把算法写成新硬件架构；定位：PDF pp. 1-4，Abstract、Figure 1、§2.1

打开原始来源快照说明

来源类型: published-record
发布者: Tri Dao 等
作者: 未署名
发布日期: 原始发布日期未知
获取日期: 2026年8月21日
公开模式: original-file

权利说明

被引用位置

C-012-025 / “冯·诺依曼架构”：从 EDVAC 到大语言模型

supports

数据库执行计划类比解释计算重排与减少往返，明确算法和结果边界。

返回逐字稿段落 attention-query-plan

C-012-027 / “冯·诺依曼架构”：从 EDVAC 到大语言模型

context

三步路线是证据约束下的工程综合，不给出普遍语言或硬件性能排名。

返回逐字稿段落 measure-before-descending

C-012-028 / “冯·诺依曼架构”：从 EDVAC 到大语言模型

context

结尾只收束三条主张，明确排除 EDVAC 到大语言模型的直接因果。

返回逐字稿段落 three-claims-finale