CanRun

EXAONE 4.0 1.2B 硬件要求

模型信息

参数量
1.28B
注意力机制
全注意力
最大上下文
65,536 个 token
发布日期
2025-07-11

同系列的其他规格

各模型在基准量化、8k 上下文下所需的显存,以及在常见显卡上的判定,按模型从小到大排列
模型参数量基准量化所需显存(8k)GeForce RTX 4060GeForce RTX 5060 Ti 16GBGeForce RTX 3090
EXAONE 4.0 1.2B当前模型1.28BQ4_K_M1.9 GB运行流畅运行流畅运行流畅
EXAONE 4.0 32B32BQ4_K_M20.2 GB无法运行运行较慢运行流畅

GGUF 文件

收录的 EXAONE 4.0 1.2B 量化文件,从小到大排列
量化文件大小质量发布者
IQ4_XS0.75 GB均衡官方 GGUF · LGAI-EXAONE
Q4_K_M基准0.81 GB均衡官方 GGUF · LGAI-EXAONE
Q6_K1.05 GB近乎无损官方 GGUF · LGAI-EXAONE
Q8_01.36 GB近乎无损官方 GGUF · LGAI-EXAONE

不同量化和上下文所需的显存

显存(GB):载入 GPU 的权重 + f16 KV 缓存 + 计算缓冲区。如果在 Windows 上这块显卡还负责显示输出,再加约 0.6 GB。
量化4k8k16k32k64k
IQ4_XS1.51.82.43.65.9
Q4_K_M1.61.92.53.65.9
Q6_K1.82.12.73.96.2
Q8_02.12.43.04.26.5

哪些 GPU 能跑 EXAONE 4.0 1.2B?

判定说明

运行流畅
全部载入显卡,且达到 20 tok/s 及以上
运行良好
全部载入显卡且为 8–20 tok/s;MoE 专家放在系统内存且达到 20 tok/s 及以上;或至少 90% 载入显卡且达到 8 tok/s 及以上
运行较慢
2–8 tok/s;纯 CPU;载入显卡不足 90%;或 MoE 专家放在系统内存且低于 20 tok/s
无法运行
内存装不下,或低于 2 tok/s

在计算器中按预算、类型和上下文筛选这份列表

左右滑动可查看所有列。

56 款 GPU、Mac 和 CPU 配置,基于 Q4_K_M 量化、8k 上下文,按判定和速度排序
硬件判定速度量化显存/内存运行方式上下文备注价格
GeForce RTX 5090
运行流畅
估算 955.1 tok/s840.5–1,069.8校准估算 ±12%
Q4_K_M2.5 / 32.0 GB全部载入显卡最长 64k—市场价 US$4,200(截至 2026-08-09)
Radeon RX 7900 XTX
运行流畅
估算 555.5 tok/s488.9–622.2校准估算 ±12%
Q4_K_M2.5 / 24.0 GB全部载入显卡最长 64k—首发价 US$999
GeForce RTX 3090 Ti
运行流畅
估算 537.3 tok/s472.8–601.7校准估算 ±12%
Q4_K_M2.5 / 24.0 GB全部载入显卡最长 64k—首发价 US$1,999
GeForce RTX 4090
运行流畅
估算 537.3 tok/s472.8–601.7校准估算 ±12%
Q4_K_M2.5 / 24.0 GB全部载入显卡最长 64k—市场价 US$2,755(截至 2026-08-09)
Apple M5 Ultra · 96 GB
运行流畅
估算 533.0 tok/s426.4–639.6校准估算 ±20%
Q4_K_M1.9 / 67.2 GB统一内存最长 64k——
GeForce RTX 5080
运行流畅
估算 511.7 tok/s450.3–573.1校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k—市场价 US$1,256(截至 2026-08-09)
GeForce RTX 3090
运行流畅
估算 498.9 tok/s439.0–558.8校准估算 ±12%
Q4_K_M2.5 / 24.0 GB全部载入显卡最长 64k—市场价 US$1,050(截至 2026-08-09)
GeForce RTX 3080 12GB
运行流畅
估算 486.1 tok/s427.8–544.4校准估算 ±12%
Q4_K_M2.5 / 12.0 GB全部载入显卡最长 64k—首发价 US$799
GeForce RTX 5070 Ti
运行流畅
估算 477.6 tok/s420.3–534.9校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k—市场价 US$949(截至 2026-08-09)
GeForce RTX 5080 Laptop
运行流畅
估算 477.6 tok/s420.3–534.9校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k——
GeForce RTX 5090 Laptop
运行流畅
估算 477.6 tok/s420.3–534.9校准估算 ±12%
Q4_K_M2.5 / 24.0 GB全部载入显卡最长 64k——
Radeon RX 7900 XT
运行流畅
估算 463.0 tok/s407.4–518.5校准估算 ±12%
Q4_K_M2.5 / 20.0 GB全部载入显卡最长 64k—首发价 US$899
GeForce RTX 3080 10GB
运行流畅
估算 405.1 tok/s356.5–453.7校准估算 ±12%
Q4_K_M2.5 / 10.0 GB全部载入显卡最长 64k—首发价 US$699
GeForce RTX 4080 Super
运行流畅
估算 392.3 tok/s345.2–439.4校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k—首发价 US$999
GeForce RTX 4080
运行流畅
估算 382.2 tok/s336.3–428.0校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k—首发价 US$1,199
Radeon RX 9070
运行流畅
估算 373.3 tok/s328.5–418.0校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k—市场价 US$639(截至 2026-08-09)
Radeon RX 9070 XT
运行流畅
估算 373.3 tok/s328.5–418.0校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k—市场价 US$689(截至 2026-08-09)
Radeon RX 7800 XT
运行流畅
估算 361.1 tok/s317.8–404.4校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k—首发价 US$499
GeForce RTX 4070 Ti Super
运行流畅
估算 358.2 tok/s315.2–401.2校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k—首发价 US$799
GeForce RTX 5070
运行流畅
估算 358.2 tok/s315.2–401.2校准估算 ±12%
Q4_K_M2.5 / 12.0 GB全部载入显卡最长 64k—市场价 US$629(截至 2026-08-09)
GeForce RTX 5070 Ti Laptop
运行流畅
估算 358.2 tok/s315.2–401.2校准估算 ±12%
Q4_K_M2.5 / 12.0 GB全部载入显卡最长 64k——
Apple M3 Ultra · 96 GB
运行流畅
估算 355.5 tok/s284.4–426.6校准估算 ±20%
Q4_K_M1.9 / 67.2 GB统一内存最长 64k——
Apple M5 Max (40-core GPU) · 48 GB
运行流畅
估算 355.3 tok/s284.3–426.4校准估算 ±20%
Q4_K_M1.9 / 33.6 GB统一内存最长 64k——
Apple M2 Ultra · 64 GB
运行流畅
估算 347.2 tok/s277.8–416.7校准估算 ±20%
Q4_K_M1.9 / 44.8 GB统一内存最长 64k——
GeForce RTX 2080 Ti
运行流畅
估算 328.3 tok/s288.9–367.7校准估算 ±12%
Q4_K_M2.5 / 11.0 GB全部载入显卡最长 64k—首发价 US$999
Apple M4 Max (40-core GPU) · 48 GB
运行流畅
估算 316.0 tok/s252.8–379.2校准估算 ±20%
Q4_K_M1.9 / 33.6 GB统一内存最长 64k——
GeForce RTX 4090 Laptop
运行流畅
估算 307.0 tok/s270.2–343.9校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k——
GeForce RTX 4070
运行流畅
估算 268.6 tok/s236.4–300.9校准估算 ±12%
Q4_K_M2.5 / 12.0 GB全部载入显卡最长 64k—首发价 US$599
GeForce RTX 4070 Super
运行流畅
估算 268.6 tok/s236.4–300.9校准估算 ±12%
Q4_K_M2.5 / 12.0 GB全部载入显卡最长 64k—首发价 US$599
Apple M5 Max (32-core GPU) · 36 GB
运行流畅
估算 266.2 tok/s213.0–319.4校准估算 ±20%
Q4_K_M1.9 / 25.2 GB统一内存最长 64k——
GeForce GTX 1080 Ti
运行流畅
估算 258.0 tok/s180.6–335.4理论估算 ±30%
Q4_K_M2.5 / 11.0 GB全部载入显卡最长 64k—首发价 US$699
GeForce RTX 3070
运行流畅
估算 238.8 tok/s210.1–267.4校准估算 ±12%
Q4_K_M2.5 / 8.0 GB全部载入显卡最长 64k—首发价 US$499
GeForce RTX 5060
运行流畅
估算 238.8 tok/s210.1–267.4校准估算 ±12%
Q4_K_M2.5 / 8.0 GB全部载入显卡最长 64k—市场价 US$339(截至 2026-08-09)
GeForce RTX 5060 Ti 16GB
运行流畅
估算 238.8 tok/s210.1–267.4校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k—市场价 US$569(截至 2026-08-09)
GeForce RTX 5060 Ti 8GB
运行流畅
估算 238.8 tok/s210.1–267.4校准估算 ±12%
Q4_K_M2.5 / 8.0 GB全部载入显卡最长 64k—市场价 US$429(截至 2026-08-09)
Apple M4 Max (32-core GPU) · 36 GB
运行流畅
估算 237.3 tok/s189.8–284.7校准估算 ±20%
Q4_K_M1.9 / 25.2 GB统一内存最长 64k——
GeForce RTX 4080 Laptop
运行流畅
估算 230.3 tok/s202.6–257.9校准估算 ±12%
Q4_K_M2.5 / 12.0 GB全部载入显卡最长 64k——
Intel Arc B580
运行流畅
估算 204.9 tok/s163.9–245.8校准估算 ±20%
Q4_K_M2.5 / 12.0 GB全部载入显卡最长 64k—市场价 US$290(截至 2026-08-09)
GeForce RTX 3060 12GB
运行流畅
估算 191.9 tok/s168.9–214.9校准估算 ±12%
Q4_K_M2.5 / 12.0 GB全部载入显卡最长 64k—市场价 US$250(截至 2026-08-09)
Radeon RX 9060 XT 16GB
运行流畅
估算 186.3 tok/s164.0–208.7校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k—市场价 US$449(截至 2026-08-09)
Apple M5 Pro · 24 GB
运行流畅
估算 177.7 tok/s142.1–213.2校准估算 ±20%
Q4_K_M1.9 / 16.8 GB统一内存最长 64k——
NVIDIA DGX Spark · 64 GB
运行流畅
估算 162.1 tok/s129.7–194.6校准估算 ±20%
Q4_K_M1.9 / 48.2 GB统一内存最长 64k—首发价 US$3,999(128 GB)
Ryzen AI Max+ 395 (Strix Halo) · 32 GB
运行流畅
估算 159.8 tok/s127.9–191.8校准估算 ±20%
Q4_K_M1.9 / 22.4 GB统一内存最长 64k—首发价 US$1,999(128 GB)
Apple M4 Pro · 24 GB
运行流畅
估算 158.0 tok/s126.4–189.6校准估算 ±20%
Q4_K_M1.9 / 16.8 GB统一内存最长 64k——
GeForce RTX 4060 Ti 16GB
运行流畅
估算 153.5 tok/s135.1–171.9校准估算 ±12%
Q4_K_M2.5 / 16.0 GB全部载入显卡最长 64k—首发价 US$499
GeForce RTX 4060 Ti 8GB
运行流畅
估算 153.5 tok/s135.1–171.9校准估算 ±12%
Q4_K_M2.5 / 8.0 GB全部载入显卡最长 64k—首发价 US$399
GeForce RTX 4060
运行流畅
估算 145.0 tok/s127.6–162.4校准估算 ±12%
Q4_K_M2.5 / 8.0 GB全部载入显卡最长 64k—首发价 US$299
GeForce RTX 4060 Laptop
运行流畅
估算 136.4 tok/s120.1–152.8校准估算 ±12%
Q4_K_M2.5 / 8.0 GB全部载入显卡最长 64k——
GeForce RTX 4070 Laptop
运行流畅
估算 136.4 tok/s120.1–152.8校准估算 ±12%
Q4_K_M2.5 / 8.0 GB全部载入显卡最长 64k——
GeForce RTX 3050 8GB
运行流畅
估算 119.4 tok/s105.1–133.7校准估算 ±12%
Q4_K_M2.5 / 8.0 GB全部载入显卡最长 64k—首发价 US$249
Apple M5 · 16 GB
运行流畅
估算 88.9 tok/s71.1–106.7校准估算 ±20%
Q4_K_M1.9 / 11.2 GB统一内存最长 32k——
Apple M6 · 16 GB
运行流畅
估算 88.9 tok/s71.1–106.7校准估算 ±20%
Q4_K_M1.9 / 11.2 GB统一内存最长 32k——
Apple M4 · 16 GB
运行流畅
估算 69.4 tok/s55.6–83.3校准估算 ±20%
Q4_K_M1.9 / 11.2 GB统一内存最长 32k——
DDR5-6000 双通道 CPU · 16 GB
运行较慢
估算 36.5 tok/s29.2–43.9校准估算 ±20%
Q4_K_M1.3 GB 内存纯 CPU最长 64k
  • CPU 推理:最高只能判为“运行较慢”
—
DDR5-5600 双通道 CPU · 16 GB
运行较慢
估算 34.1 tok/s27.3–40.9校准估算 ±20%
Q4_K_M1.3 GB 内存纯 CPU最长 64k
  • CPU 推理:最高只能判为“运行较慢”
—
DDR4-3200 双通道 CPU · 16 GB
运行较慢
估算 19.5 tok/s15.6–23.4校准估算 ±20%
Q4_K_M1.3 GB 内存纯 CPU最长 64k
  • CPU 推理:最高只能判为“运行较慢”
—

带思考模式的模型会额外花 token 来思考,所以速度门槛按 1.5 倍从严设定(30 / 12 / 3 tok/s)。关闭思考模式后,判定可能会高一级。

能运行它的最便宜 GPU

  • 运行流畅GeForce RTX 3060 12GB市场价 US$250(截至 2026-08-09),估算 191.9 tok/s(168.9–214.9,校准估算 ±12%)。

EXAONE 4.0 1.2B 的实测结果

这个模型暂无公开基准测试结果。

常见问题

EXAONE 4.0 1.2B 需要多少显存?

Q4_K_M 文件为 0.81 GB;在 8k 上下文下,显卡约需 1.9 GB(权重 0.81 GB、KV 缓存 0.5 GB、计算缓冲区 0.6 GB)。已收录的最小文件(IQ4_XS)约需 1.8 GB。

能让 EXAONE 4.0 1.2B 运行良好的最便宜 GPU 是哪款?

运行流畅的最便宜选择:GeForce RTX 3060 12GB,US$250(2026-08-09 市场价),估算 191.9 tok/s(168.9–214.9,校准估算 ±12%)。

EXAONE 4.0 1.2B 能在 8 GB、16 GB 或 24 GB 的 GPU 上运行吗?

Q4_K_M、8k 上下文下:GeForce RTX 4060:运行流畅,估算 145.0 tok/s(127.6–162.4,校准估算 ±12%); GeForce RTX 5060 Ti 16GB:运行流畅,估算 238.8 tok/s(210.1–267.4,校准估算 ±12%); GeForce RTX 3090:运行流畅,估算 498.9 tok/s(439.0–558.8,校准估算 ±12%)。

速度是根据内存带宽得出的估算值,并用公开基准测试结果校准,每个数值都附有误差范围和可信度标签。实际结果会因驱动、后端、上下文长度和散热情况而有所不同。