24G 显存有哪些卡
这一档站内共 10 张卡，按带宽从高到低排。点一张卡看它的完整结论：能跑哪些模型、什么量化、能开多大上下文、大概多快。
先演一个算例：Qwen3.8-27B（26.9B）在 NVIDIA RTX 4090 24G 上能整卡装下——能跑但紧
| 权重（Q5_K_M） | 18.8 GB |
|---|---|
| KV 缓存（4K 上下文） | 0.25 GB |
| 框架开销 | 1 GB |
| 合计需要 | 20.1 GB / 可用 21.1 GB（Windows 桌面口径） |
| 结论 | 余量 1 GB，还能把上下文开到约 20,480 token（估算 ±30%） |
| 估算速度 | 32–45 tok/s（decode，4K 上下文，单流） |
这只是粗算，和全站推算页同一个公式、同一个口径（估算值 ±30%，非实测）。看完整数字：量化档 × 上下文档位全表 → Qwen3.8-27B × NVIDIA RTX 4090 24G
NVIDIA RTX 4090 24G英伟达 · 1008 GB/s（二手 ¥21,694·11-10 / 价 ¥12,000·03-11）NVIDIA RTX 3090 Ti 24G英伟达 · 1008 GB/sNVIDIA RTX 4090D 24G英伟达 · 1008 GB/s（二手 ¥22,000 起·09-03 / 价 ¥16,380·07-06 / 全新 ¥17,000–18,800·06-24）AMD RX 7900 XTX 24GAMD · 960 GB/s（二手 ¥5,500·11-05）NVIDIA RTX 3090 24G英伟达 · 936 GB/s（二手 ¥8,488–10,000·11-12 / 价 ¥8,000–12,000·01-02）NVIDIA RTX A5000 24G英伟达 · 560 GB/sNVIDIA Tesla P40 24G（数据卡）英伟达 · 480 GB/s（二手 ¥1,150·11-03）Intel Arc Pro B60 24G（工作站）英特尔 · 456 GB/sNVIDIA RTX 3060 24G（魔改）魔改 · 336 GB/s · 魔改（风险见卡页）NVIDIA RTX Pro 4000 Blackwell SFF 24G英伟达 · 288 GB/s（全新 ¥20,999·09-13）
相关条目
上下文（ctx）到底是什么？8K 能装多少字？上下文是模型一次能『看见』的总字数预算，输入和它的回答共用这个预算。8K token 大约相当于中文 4000–5500 字。我该配多大的显存？给一条按容量而不是按型号的阶梯8G 只能玩 4B–8B 且上下文紧；16G 是本地第一台最省事的容量点；24G 能认真用 32B；48G 起才谈得上 70B。别买 8G 新卡。16G 显存到底能干什么？（最常被问的一档）能舒服跑 8B Q8 / 14B Q6_K / 12B Q6_K，能勉强跑 27B–36B 的 Q3 但上下文几乎没有，用 MoE 放内存可以跑 30B 级还很流畅。『小模型跑 Q8、大模型跑 Q4、再大跑 Q3』这个说法对不对？方向对，但要按显存档位落地。4B–9B 跑 Q8 确实合适；12B–14B 在 16G 上 Q8 会把上下文挤光，Q6_K 才是甜点；27B+ 在 16G 上 Q4 根本塞不进去。Windows 还是 Linux？差别有多大？同样硬件下 Linux 大约能多用 10% 显存（没有桌面合成器吃那块），驱动/权限要额外折腾。新手建议先 Windows 跑通，再决定值不值得换。