MiniCPM5 1B 硬件要求
模型信息
- 参数量
- 1.08B
- 注意力机制
- 全注意力
- 最大上下文
- 131,072 个 token
- 发布日期
- 2026-05-21
同系列的其他规格
| 模型 | 参数量 | 基准量化 | 所需显存(8k) | GeForce RTX 4060 | GeForce RTX 5060 Ti 16GB | GeForce RTX 3090 |
|---|---|---|---|---|---|---|
| MiniCPM5 1B当前模型 | 1.08B | Q4_K_M | 1.3 GB | 运行流畅 | 运行流畅 | 运行流畅 |
| MiniCPM5 2B | 2.52B | Q4_K_M | 2.3 GB | 运行流畅 | 运行流畅 | 运行流畅 |
GGUF 文件
| 量化 | 文件大小 | 质量 | 发布者 |
|---|---|---|---|
| Q4_K_M基准 | 0.69 GB | 均衡 | 官方 GGUF · openbmb |
| Q8_0 | 1.15 GB | 近乎无损 | 官方 GGUF · openbmb |
不同量化和上下文所需的显存
| 量化 | 4k | 8k | 16k | 32k | 64k | 128k |
|---|---|---|---|---|---|---|
| Q4_K_M | 1.2 | 1.3 | 1.6 | 2.2 | 3.3 | 5.5 |
| Q8_0 | 1.6 | 1.7 | 2.0 | 2.5 | 3.6 | 5.9 |
哪些 GPU 能跑 MiniCPM5 1B?
判定说明
- 运行流畅
- 全部载入显卡,且达到 20 tok/s 及以上
- 运行良好
- 全部载入显卡且为 8–20 tok/s;MoE 专家放在系统内存且达到 20 tok/s 及以上;或至少 90% 载入显卡且达到 8 tok/s 及以上
- 运行较慢
- 2–8 tok/s;纯 CPU;载入显卡不足 90%;或 MoE 专家放在系统内存且低于 20 tok/s
- 无法运行
- 内存装不下,或低于 2 tok/s
左右滑动可查看所有列。
| 硬件 | 判定 | 速度 | 量化 | 显存/内存 | 运行方式 | 上下文 | 备注 | 价格 |
|---|---|---|---|---|---|---|---|---|
| GeForce RTX 5090 | 运行流畅 | 估算 1,407.3 tok/s1,238.5–1,576.2校准估算 ±12% | Q4_K_M | 1.9 / 32.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$4,200(截至 2026-08-09) |
| Radeon RX 7900 XTX | 运行流畅 | 估算 818.6 tok/s720.3–916.8校准估算 ±12% | Q4_K_M | 1.9 / 24.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$999 |
| GeForce RTX 3090 Ti | 运行流畅 | 估算 791.6 tok/s696.6–886.6校准估算 ±12% | Q4_K_M | 1.9 / 24.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$1,999 |
| GeForce RTX 4090 | 运行流畅 | 估算 791.6 tok/s696.6–886.6校准估算 ±12% | Q4_K_M | 1.9 / 24.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$2,755(截至 2026-08-09) |
| Apple M5 Ultra · 96 GB | 运行流畅 | 估算 785.3 tok/s628.2–942.4校准估算 ±20% | Q4_K_M | 1.5 / 67.2 GB | 统一内存 | 最长 128k | — | — |
| GeForce RTX 5080 | 运行流畅 | 估算 753.9 tok/s663.5–844.4校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$1,256(截至 2026-08-09) |
| GeForce RTX 3090 | 运行流畅 | 估算 735.1 tok/s646.9–823.3校准估算 ±12% | Q4_K_M | 1.9 / 24.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$1,050(截至 2026-08-09) |
| GeForce RTX 3080 12GB | 运行流畅 | 估算 716.2 tok/s630.3–802.2校准估算 ±12% | Q4_K_M | 1.9 / 12.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$799 |
| GeForce RTX 5070 Ti | 运行流畅 | 估算 703.7 tok/s619.2–788.1校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$949(截至 2026-08-09) |
| GeForce RTX 5080 Laptop | 运行流畅 | 估算 703.7 tok/s619.2–788.1校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | — |
| GeForce RTX 5090 Laptop | 运行流畅 | 估算 703.7 tok/s619.2–788.1校准估算 ±12% | Q4_K_M | 1.9 / 24.0 GB | 全部载入显卡 | 最长 128k | — | — |
| Radeon RX 7900 XT | 运行流畅 | 估算 682.1 tok/s600.3–764.0校准估算 ±12% | Q4_K_M | 1.9 / 20.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$899 |
| GeForce RTX 3080 10GB | 运行流畅 | 估算 596.9 tok/s525.2–668.5校准估算 ±12% | Q4_K_M | 1.9 / 10.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$699 |
| GeForce RTX 4080 Super | 运行流畅 | 估算 578.0 tok/s508.7–647.4校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$999 |
| GeForce RTX 4080 | 运行流畅 | 估算 563.1 tok/s495.5–630.7校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$1,199 |
| Radeon RX 9070 | 运行流畅 | 估算 550.0 tok/s484.0–616.0校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$639(截至 2026-08-09) |
| Radeon RX 9070 XT | 运行流畅 | 估算 550.0 tok/s484.0–616.0校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$689(截至 2026-08-09) |
| Radeon RX 7800 XT | 运行流畅 | 估算 532.1 tok/s468.2–595.9校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$499 |
| GeForce RTX 4070 Ti Super | 运行流畅 | 估算 527.8 tok/s464.4–591.1校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$799 |
| GeForce RTX 5070 | 运行流畅 | 估算 527.8 tok/s464.4–591.1校准估算 ±12% | Q4_K_M | 1.9 / 12.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$629(截至 2026-08-09) |
| GeForce RTX 5070 Ti Laptop | 运行流畅 | 估算 527.8 tok/s464.4–591.1校准估算 ±12% | Q4_K_M | 1.9 / 12.0 GB | 全部载入显卡 | 最长 128k | — | — |
| Apple M3 Ultra · 96 GB | 运行流畅 | 估算 523.7 tok/s419.0–628.5校准估算 ±20% | Q4_K_M | 1.5 / 67.2 GB | 统一内存 | 最长 128k | — | — |
| Apple M5 Max (40-core GPU) · 48 GB | 运行流畅 | 估算 523.5 tok/s418.8–628.2校准估算 ±20% | Q4_K_M | 1.5 / 33.6 GB | 统一内存 | 最长 128k | — | — |
| Apple M2 Ultra · 64 GB | 运行流畅 | 估算 511.6 tok/s409.3–613.9校准估算 ±20% | Q4_K_M | 1.5 / 44.8 GB | 统一内存 | 最长 128k | — | — |
| GeForce RTX 2080 Ti | 运行流畅 | 估算 483.8 tok/s425.7–541.8校准估算 ±12% | Q4_K_M | 1.9 / 11.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$999 |
| Apple M4 Max (40-core GPU) · 48 GB | 运行流畅 | 估算 465.6 tok/s372.4–558.7校准估算 ±20% | Q4_K_M | 1.5 / 33.6 GB | 统一内存 | 最长 128k | — | — |
| GeForce RTX 4090 Laptop | 运行流畅 | 估算 452.4 tok/s398.1–506.6校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | — |
| GeForce RTX 4070 | 运行流畅 | 估算 395.8 tok/s348.3–443.3校准估算 ±12% | Q4_K_M | 1.9 / 12.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$599 |
| GeForce RTX 4070 Super | 运行流畅 | 估算 395.8 tok/s348.3–443.3校准估算 ±12% | Q4_K_M | 1.9 / 12.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$599 |
| Apple M5 Max (32-core GPU) · 36 GB | 运行流畅 | 估算 392.2 tok/s313.8–470.7校准估算 ±20% | Q4_K_M | 1.5 / 25.2 GB | 统一内存 | 最长 128k | — | — |
| GeForce GTX 1080 Ti | 运行流畅 | 估算 380.1 tok/s266.1–494.1理论估算 ±30% | Q4_K_M | 1.9 / 11.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$699 |
| GeForce RTX 3070 | 运行流畅 | 估算 351.8 tok/s309.6–394.1校准估算 ±12% | Q4_K_M | 1.9 / 8.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$499 |
| GeForce RTX 5060 | 运行流畅 | 估算 351.8 tok/s309.6–394.1校准估算 ±12% | Q4_K_M | 1.9 / 8.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$339(截至 2026-08-09) |
| GeForce RTX 5060 Ti 16GB | 运行流畅 | 估算 351.8 tok/s309.6–394.1校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$569(截至 2026-08-09) |
| GeForce RTX 5060 Ti 8GB | 运行流畅 | 估算 351.8 tok/s309.6–394.1校准估算 ±12% | Q4_K_M | 1.9 / 8.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$429(截至 2026-08-09) |
| Apple M4 Max (32-core GPU) · 36 GB | 运行流畅 | 估算 349.6 tok/s279.7–419.5校准估算 ±20% | Q4_K_M | 1.5 / 25.2 GB | 统一内存 | 最长 128k | — | — |
| GeForce RTX 4080 Laptop | 运行流畅 | 估算 339.3 tok/s298.6–380.0校准估算 ±12% | Q4_K_M | 1.9 / 12.0 GB | 全部载入显卡 | 最长 128k | — | — |
| Intel Arc B580 | 运行流畅 | 估算 301.8 tok/s241.5–362.2校准估算 ±20% | Q4_K_M | 1.9 / 12.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$290(截至 2026-08-09) |
| GeForce RTX 3060 12GB | 运行流畅 | 估算 282.7 tok/s248.8–316.7校准估算 ±12% | Q4_K_M | 1.9 / 12.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$250(截至 2026-08-09) |
| Radeon RX 9060 XT 16GB | 运行流畅 | 估算 274.6 tok/s241.6–307.5校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | 市场价 US$449(截至 2026-08-09) |
| Apple M5 Pro · 24 GB | 运行流畅 | 估算 261.8 tok/s209.4–314.1校准估算 ±20% | Q4_K_M | 1.5 / 16.8 GB | 统一内存 | 最长 128k | — | — |
| NVIDIA DGX Spark · 64 GB | 运行流畅 | 估算 238.9 tok/s191.1–286.7校准估算 ±20% | Q4_K_M | 1.5 / 48.2 GB | 统一内存 | 最长 128k | — | 首发价 US$3,999(128 GB) |
| Ryzen AI Max+ 395 (Strix Halo) · 32 GB | 运行流畅 | 估算 235.5 tok/s188.4–282.6校准估算 ±20% | Q4_K_M | 1.5 / 22.4 GB | 统一内存 | 最长 128k | — | 首发价 US$1,999(128 GB) |
| Apple M4 Pro · 24 GB | 运行流畅 | 估算 232.8 tok/s186.2–279.3校准估算 ±20% | Q4_K_M | 1.5 / 16.8 GB | 统一内存 | 最长 128k | — | — |
| GeForce RTX 4060 Ti 16GB | 运行流畅 | 估算 226.2 tok/s199.0–253.3校准估算 ±12% | Q4_K_M | 1.9 / 16.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$499 |
| GeForce RTX 4060 Ti 8GB | 运行流畅 | 估算 226.2 tok/s199.0–253.3校准估算 ±12% | Q4_K_M | 1.9 / 8.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$399 |
| GeForce RTX 4060 | 运行流畅 | 估算 213.6 tok/s188.0–239.2校准估算 ±12% | Q4_K_M | 1.9 / 8.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$299 |
| GeForce RTX 4060 Laptop | 运行流畅 | 估算 201.0 tok/s176.9–225.2校准估算 ±12% | Q4_K_M | 1.9 / 8.0 GB | 全部载入显卡 | 最长 128k | — | — |
| GeForce RTX 4070 Laptop | 运行流畅 | 估算 201.0 tok/s176.9–225.2校准估算 ±12% | Q4_K_M | 1.9 / 8.0 GB | 全部载入显卡 | 最长 128k | — | — |
| GeForce RTX 3050 8GB | 运行流畅 | 估算 175.9 tok/s154.8–197.0校准估算 ±12% | Q4_K_M | 1.9 / 8.0 GB | 全部载入显卡 | 最长 128k | — | 首发价 US$249 |
| Apple M5 · 16 GB | 运行流畅 | 估算 131.0 tok/s104.8–157.2校准估算 ±20% | Q4_K_M | 1.5 / 11.2 GB | 统一内存 | 最长 64k | — | — |
| Apple M6 · 16 GB | 运行流畅 | 估算 131.0 tok/s104.8–157.2校准估算 ±20% | Q4_K_M | 1.5 / 11.2 GB | 统一内存 | 最长 64k | — | — |
| Apple M4 · 16 GB | 运行流畅 | 估算 102.3 tok/s81.9–122.8校准估算 ±20% | Q4_K_M | 1.5 / 11.2 GB | 统一内存 | 最长 64k | — | — |
| DDR5-6000 双通道 CPU · 16 GB | 运行较慢 | 估算 53.9 tok/s43.1–64.6校准估算 ±20% | Q4_K_M | 0.9 GB 内存 | 纯 CPU | 最长 128k |
| — |
| DDR5-5600 双通道 CPU · 16 GB | 运行较慢 | 估算 50.3 tok/s40.2–60.3校准估算 ±20% | Q4_K_M | 0.9 GB 内存 | 纯 CPU | 最长 128k |
| — |
| DDR4-3200 双通道 CPU · 16 GB | 运行较慢 | 估算 28.7 tok/s23.0–34.5校准估算 ±20% | Q4_K_M | 0.9 GB 内存 | 纯 CPU | 最长 128k |
| — |
带思考模式的模型会额外花 token 来思考,所以速度门槛按 1.5 倍从严设定(30 / 12 / 3 tok/s)。关闭思考模式后,判定可能会高一级。
能运行它的最便宜 GPU
- 运行流畅GeForce RTX 3060 12GB市场价 US$250(截至 2026-08-09),估算 282.7 tok/s(248.8–316.7,校准估算 ±12%)。
MiniCPM5 1B 的实测结果
这个模型暂无公开基准测试结果。
常见问题
MiniCPM5 1B 需要多少显存?
Q4_K_M 文件为 0.69 GB;在 8k 上下文下,显卡约需 1.3 GB(权重 0.57 GB、KV 缓存 0.2 GB、计算缓冲区 0.6 GB)。 文件的一部分不会放到显卡上:llama.cpp 把输入嵌入表保留在系统内存中。Mac 按整个文件计算,所以需要的内存稍多一些。
能让 MiniCPM5 1B 运行良好的最便宜 GPU 是哪款?
运行流畅的最便宜选择:GeForce RTX 3060 12GB,US$250(2026-08-09 市场价),估算 282.7 tok/s(248.8–316.7,校准估算 ±12%)。
MiniCPM5 1B 能在 8 GB、16 GB 或 24 GB 的 GPU 上运行吗?
Q4_K_M、8k 上下文下:GeForce RTX 4060:运行流畅,估算 213.6 tok/s(188.0–239.2,校准估算 ±12%); GeForce RTX 5060 Ti 16GB:运行流畅,估算 351.8 tok/s(309.6–394.1,校准估算 ±12%); GeForce RTX 3090:运行流畅,估算 735.1 tok/s(646.9–823.3,校准估算 ±12%)。
速度是根据内存带宽得出的估算值,并用公开基准测试结果校准,每个数值都附有误差范围和可信度标签。实际结果会因驱动、后端、上下文长度和散热情况而有所不同。