微调 7B 模型实需 112 GB 显存，LoRA 与 QLoRA 为何有效

2026 年 10 月 3 日，DEV Community 的一篇文章算了一笔微调显存的账。文章提出，被问到微调一个 7B 模型需要多少显存时，很多人的直觉回答是 fp16 下模型本身占 14 GB，所以比这多一点就够了；但文章给出的实际数字约为 112 GB。在这笔账里，模型权重只占 14 GB，其余约 98 GB 来自梯度、优化器状态和激活值。

文章称这套账目来自 ZeRO 论文。文中没有把 LoRA 和 QLoRA 描述成技巧，而是说看清这部分显存去向之后，它们更像顺理成章的选择。原文片段在开头把 112 GB 说成「还没存下任何一个激活值」之前的数字，随后又把激活值列入那 98 GB 的构成，两处表述略有出入。

截至目前，这件事只有这一篇报道，没有其他来源给出不同数字或补充说明。