跳到主要内容

稠密注意力的算术量会不会因为上了 FlashAttention 就变成随 n 线性增长?

模型选型与微调中级模型选型与微

题目​

稠密注意力的算术量会不会因为上了 FlashAttention 就变成随 n 线性增长?

参考答案​