模型选型与微调Decoder-only 架构为何是主流?本页总览Decoder-only 架构为何是主流?模型选型与微调中级模型选型与微 题目 Decoder-only 架构为何是主流? 参考答案 点击展开参考答案 Decoder-only 以统一因果语言建模覆盖多种生成任务,训练可并行、解码可复用 KV Cache,工程扩展简单,但不在所有任务上优于其他架构。 追问方向:prefill/decode 的复杂度、PagedAttention 或 GQA 如何缓解缓存瓶颈。