CanRun

Ryzen AI Max+ 395 (Strix Halo) 能跑哪些本地大模型?

统一内存:默认设置下 GPU 大约可以使用其中的 70%

按 8k 上下文和 f16 KV 缓存计算。判定按内存容量分别列出。

规格

内存配置
32 GB · 64 GB · 128 GB
内存带宽
256.0 GB/s
FP16 算力
29.7 TFLOPS
发布年份
2025
价格
首发价 US$1,999(128 GB)
其他写法
Strix Halo, Ryzen AI Max 395, Framework Desktop, 8060S, Radeon 8060S

判定一览

基于 Q4_K_M(或最接近的可用量化)、8k 上下文。

  • 32 GB运行流畅27 个模型运行良好9 个模型运行较慢12 个模型无法运行10 个模型另有 1 个模型可以用更低的量化运行。
  • 64 GB运行流畅31 个模型运行良好9 个模型运行较慢10 个模型无法运行8 个模型另有 2 个模型可以用更低的量化运行。
  • 128 GB运行流畅34 个模型运行良好12 个模型运行较慢9 个模型无法运行3 个模型另有 2 个模型可以用更低的量化运行。

判定说明

运行流畅
全部载入显卡,且达到 20 tok/s 及以上
运行良好
全部载入显卡且为 8–20 tok/s;MoE 专家放在系统内存且达到 20 tok/s 及以上;或至少 90% 载入显卡且达到 8 tok/s 及以上
运行较慢
2–8 tok/s;纯 CPU;载入显卡不足 90%;或 MoE 专家放在系统内存且低于 20 tok/s
无法运行
内存装不下,或低于 2 tok/s

Ryzen AI Max+ 395 (Strix Halo) 上的全部模型

左右滑动可查看所有列。

58 个模型,内存 128 GB,按判定和速度排序
模型判定速度量化显存/内存运行方式上下文备注
MiniCPM5 1B
运行流畅
估算 235.5 tok/s188.4–282.6校准估算 ±20%
Q4_K_M1.5 / 89.6 GB统一内存最长 128k
  • 思考模式
Llama 3.2 1B
运行流畅
估算 194.7 tok/s155.7–233.6校准估算 ±20%
Q4_K_M1.7 / 89.6 GB统一内存最长 128k—
EXAONE 4.0 1.2B
运行流畅
估算 159.8 tok/s127.9–191.8校准估算 ±20%
Q4_K_M1.9 / 89.6 GB统一内存最长 64k
  • 思考模式
Ling-3.0 Tiny
运行流畅
估算 154.3 tok/s108.0–200.5理论估算 ±30%
Q4_K_M5.5 / 89.6 GB统一内存最长 128k
  • 思考模式
LFM2.5 2.6B
运行流畅
估算 116.3 tok/s81.4–151.3理论估算 ±30%
Q4_K_M2.4 / 89.6 GB统一内存最长 128k
  • 思考模式
HyperCLOVA X SEED 1.5B
运行流畅
估算 115.6 tok/s92.5–138.8校准估算 ±20%
Q4_K_M2.4 / 89.6 GB统一内存最长 16k—
MiniCPM5 2B
运行流畅
估算 109.8 tok/s87.8–131.7校准估算 ±20%
Q4_K_M2.5 / 89.6 GB统一内存最长 64k
  • 思考模式
Gemma 4 E2B
运行流畅
估算 109.5 tok/s76.6–142.3理论估算 ±30%
Q4_K_M3.7 / 89.6 GB统一内存最长 128k
  • 思考模式
Mellum2.1 12B-A2.5B Thinking
运行流畅
估算 93.1 tok/s74.5–111.7校准估算 ±20%
Q4_K_M8.8 / 89.6 GB统一内存最长 128k
  • 思考模式
Spark-X2.5 4B
运行流畅
估算 72.3 tok/s57.9–86.8校准估算 ±20%
Q4_K_M3.5 / 89.6 GB统一内存最长 64k
  • 思考模式
Llama 3.2 3B
运行流畅
估算 70.9 tok/s56.7–85.1校准估算 ±20%
Q4_K_M3.5 / 89.6 GB统一内存最长 64k—
gpt-oss-20b
运行流畅
估算 68.6 tok/s54.8–82.3校准估算 ±20%
MXFP412.9 / 89.6 GB统一内存最长 128k
  • 思考模式
Qwen3.5 4B
运行流畅
估算 67.8 tok/s54.2–81.3校准估算 ±20%
Q4_K_M3.7 / 89.6 GB统一内存最长 64k
  • 思考模式
MiniCPM-V 4.7 35B-A3B
运行流畅
估算 67.5 tok/s54.0–81.1校准估算 ±20%
Q4_K_M21.9 / 89.6 GB统一内存最长 128k
  • 思考模式
Nemotron 3.5 Lightning 30B-A3B
运行流畅
估算 65.9 tok/s46.1–85.7理论估算 ±30%
Q4_K_M26.1 / 89.6 GB统一内存最长 256k
  • 思考模式
Qwen3.5 35B-A3B
运行流畅
64.8 tok/s8k 估算 56.0 tok/s(44.8–67.2,校准估算 ±20%)实测(1 次,512 上下文)
Q4_K_M23.4 / 89.6 GB统一内存最长 128k
  • 思考模式
Qwen3.6 35B-A3B
运行流畅
63.8 tok/s8k 估算 63.1 tok/s(50.5–75.7,校准估算 ±20%)实测(1 次,512 上下文)
Q4_K_M23.0 / 89.6 GB统一内存最长 128k
  • 思考模式
Gemma 4 E4B
运行流畅
估算 59.3 tok/s41.5–77.1理论估算 ±30%
Q4_K_M5.7 / 89.6 GB统一内存最长 128k
  • 思考模式
Kanana 1.5 15.7B-A3B
运行流畅
估算 57.2 tok/s45.8–68.6校准估算 ±20%
Q4_K_M12.1 / 89.6 GB统一内存最长 32k—
Gemma 4 26B-A4B
运行流畅
54.3 tok/s8k 估算 48.1 tok/s(38.5–57.7,校准估算 ±20%)实测(2 次,512 上下文)
Q4_K_M17.7 / 89.6 GB统一内存最长 128k
  • 思考模式
Qwen3 30B-A3B (2507)
运行流畅
估算 54.2 tok/s43.3–65.0校准估算 ±20%
Q4_K_M19.9 / 89.6 GB统一内存最长 64k—
gpt-oss-120b
运行流畅
50.2 tok/s8k 估算 48.5 tok/s(38.8–58.1,校准估算 ±20%)实测(1 次,512 上下文)
MXFP464.3 / 89.6 GB统一内存最长 64k
  • 思考模式
Ling-3.0 Flash
运行流畅
估算 48.4 tok/s33.9–62.9理论估算 ±30%
Q4_K_M77.7 / 89.6 GB统一内存最长 256k
  • 思考模式
Kolibri 1
运行流畅
估算 48.0 tok/s38.4–57.6校准估算 ±20%
Q4_K_M50.5 / 89.6 GB统一内存最长 128k
  • 思考模式
Qwen3 8B
运行流畅
43.6 tok/s8k 估算 33.7 tok/s(26.9–40.4,校准估算 ±20%)实测(1 次,512 上下文)
Q4_K_M6.8 / 89.6 GB统一内存最长 8k
  • 思考模式
Qwen3.5 9B
运行流畅
37.2 tok/s8k 估算 34.2 tok/s(27.4–41.0,校准估算 ±20%)实测(1 次,4k 上下文)
Q4_K_M6.7 / 89.6 GB统一内存最长 32k
  • 思考模式
K2-Horizon MoVA 36B-A4B
运行流畅
估算 35.1 tok/s24.5–45.6理论估算 ±30%
Q4_K_M24.6 / 89.6 GB统一内存最长 8k
  • 思考模式
DeepSeek R1 Distill Llama 8B
运行流畅
估算 35.0 tok/s28.0–42.0校准估算 ±20%
Q4_K_M6.6 / 89.6 GB统一内存最长 8k
  • 思考模式
Kanana 1.5 8B
运行流畅
估算 35.0 tok/s28.0–42.0校准估算 ±20%
Q4_K_M6.6 / 89.6 GB统一内存最长 32k—
Llama 3.1 8B
运行流畅
估算 35.0 tok/s28.0–42.0校准估算 ±20%
Q4_K_M6.6 / 89.6 GB统一内存最长 32k—
Nanbeige4.2 3B
运行流畅
估算 34.3 tok/s24.0–44.5理论估算 ±30%
Q4_K_M4.7 / 89.6 GB统一内存最长 8k
  • 思考模式
DeepSeek R1 0528 Qwen3 8B
运行流畅
估算 33.7 tok/s26.9–40.4校准估算 ±20%
Q4_K_M6.8 / 89.6 GB统一内存最长 8k
  • 思考模式
K2-Horizon 7B
运行流畅
估算 30.9 tok/s24.7–37.1校准估算 ±20%
Q4_K_M7.4 / 89.6 GB统一内存最长 8k
  • 思考模式
Gemma 3 12B
运行流畅
估算 26.8 tok/s21.4–32.1校准估算 ±20%
Q4_K_M8.4 / 89.6 GB统一内存最长 32k—
Laguna S 2.1
运行良好
估算 26.4 tok/s21.1–31.7校准估算 ±20%
Q4_K_M68.6 / 89.6 GB统一内存最长 128k
  • 思考模式
Gemma 4 12B
运行良好
24.4 tok/s8k 估算 28.9 tok/s(23.2–34.7,校准估算 ±20%)实测(1 次,512 上下文)
Q4_K_M7.8 / 89.6 GB统一内存最长 256k
  • UD-Q2_K_XL(质量损失大):运行流畅
  • 思考模式
Solar Open 100B
运行良好
估算 21.6 tok/s17.3–26.0校准估算 ±20%
Q4_K_M64.4 / 89.6 GB统一内存最长 32k
  • 思考模式
Qwen3.5 122B-A10B
运行良好
20.9 tok/s8k 估算 22.7 tok/s(18.2–27.2,校准估算 ±20%)实测(1 次,512 上下文)
Q4_K_M79.0 / 89.6 GB统一内存最长 256k
  • UD-Q2_K_XL(质量损失大):运行流畅
  • 思考模式
HyperCLOVA X SEED Think 14B
运行良好
估算 20.6 tok/s14.4–26.8理论估算 ±30%
Q4_K_M10.8 / 89.6 GB统一内存最长 32k
  • 思考模式
Qwen3 14B
运行良好
估算 20.3 tok/s16.2–24.4校准估算 ±20%
Q4_K_M10.9 / 89.6 GB统一内存最长 32k
  • 思考模式
DeepSeek R1 Distill Qwen 14B
运行良好
估算 19.8 tok/s15.8–23.8校准估算 ±20%
Q4_K_M11.2 / 89.6 GB统一内存最长 32k
  • 思考模式
Phi-4
运行良好
估算 19.6 tok/s15.7–23.5校准估算 ±20%
Q4_K_M11.3 / 89.6 GB统一内存最长 16k—
Mistral Small 3.2 24B
运行良好
估算 13.4 tok/s10.7–16.1校准估算 ±20%
Q4_K_M16.2 / 89.6 GB统一内存最长 64k
  • Q2_K(质量损失大):运行流畅
Gemma 3 27B
运行良好
估算 12.2 tok/s9.8–14.6校准估算 ±20%
Q4_K_M17.8 / 89.6 GB统一内存最长 64k—
Qwen3.6 27B
运行良好
估算 12.1 tok/s9.7–14.5校准估算 ±20%
Q4_K_M17.9 / 89.6 GB统一内存最长 8k
  • 思考模式
Muse Glimmer 30B
运行良好
估算 12.1 tok/s9.6–14.5校准估算 ±20%
Q4_K_M18.0 / 89.6 GB统一内存最长 8k
  • 思考模式
Qwen3.5 27B
运行较慢
估算 11.9 tok/s9.5–14.3校准估算 ±20%
Q4_K_M18.2 / 89.6 GB统一内存最长 256k
  • 改用 IQ4_XS:运行良好
  • 思考模式
Qwen3.8 27B
运行较慢
估算 11.7 tok/s9.3–14.0校准估算 ±20%
Q4_K_M18.6 / 89.6 GB统一内存最长 256k
  • 改用 IQ4_XS:运行良好
  • 思考模式
Gemma 4 31B
运行较慢
估算 11.1 tok/s8.8–13.3校准估算 ±20%
Q4_K_M19.6 / 89.6 GB统一内存最长 256k
  • 改用 IQ4_XS:运行良好
  • 思考模式
Granite 4.2 30B
运行较慢
估算 10.6 tok/s8.5–12.7校准估算 ±20%
Q4_K_M20.4 / 89.6 GB统一内存最长 128k
  • Q2_K(质量损失大):运行良好
  • 思考模式
EXAONE 4.0 32B
运行较慢
估算 10.6 tok/s8.4–12.7校准估算 ±20%
Q4_K_M20.5 / 89.6 GB统一内存最长 128k
  • 思考模式
EXAONE 4.5 33B
运行较慢
估算 10.2 tok/s8.2–12.2校准估算 ±20%
Q4_K_M21.2 / 89.6 GB统一内存最长 256k
  • 思考模式
Qwen3 32B
运行较慢
10.2 tok/s8k 估算 9.6 tok/s(7.7–11.5,校准估算 ±20%)实测(2 次,512 上下文)
Q4_K_M22.5 / 89.6 GB统一内存最长 32k
  • Q2_K(质量损失大):运行良好
  • 思考模式
DeepSeek R1 Distill Qwen 32B
运行较慢
估算 9.5 tok/s7.6–11.5校准估算 ±20%
Q4_K_M22.6 / 89.6 GB统一内存最长 128k
  • Q2_K(质量损失大):运行良好
  • 思考模式
Llama 3.3 70B
运行较慢
估算 4.6 tok/s3.7–5.6校准估算 ±20%
Q4_K_M45.8 / 89.6 GB统一内存最长 128k—
DeepSeek V4 Flash 0731
无法运行改用 Q2_K(质量损失大):运行较慢
估算 19.1 tok/s13.4–24.9理论估算 ±30%
Q2_K117.4 GB 内存纯 CPU最长 256k
  • CPU 推理:最高只能判为“运行较慢”
  • 思考模式
Solar Open 2 250B
无法运行改用 Q2_K(质量损失大):运行较慢
估算 18.0 tok/s12.6–23.4理论估算 ±30%
Q2_K95.8 GB 内存纯 CPU最长 256k
  • CPU 推理:最高只能判为“运行较慢”
  • 思考模式
GLM-5.3 Flash
无法运行
—Q4_K_M需要 182.1 GB——
  • 约需 182.1 GB;可用内存 124.0 GB(其中 GPU 可用 89.6 GB)
  • 思考模式

带思考模式的模型会额外花 token 来思考,所以速度门槛按 1.5 倍从严设定(30 / 12 / 3 tok/s)。关闭思考模式后,判定可能会高一级。

不同内存容量下的判定

各内存配置下的 Q4_K_M 判定,速度请打开模型页面查看
模型32 GB64 GB128 GB
MiniCPM5 1B运行流畅运行流畅运行流畅
Llama 3.2 1B运行流畅运行流畅运行流畅
EXAONE 4.0 1.2B运行流畅运行流畅运行流畅
Ling-3.0 Tiny运行流畅运行流畅运行流畅
LFM2.5 2.6B运行流畅运行流畅运行流畅
HyperCLOVA X SEED 1.5B运行流畅运行流畅运行流畅
MiniCPM5 2B运行流畅运行流畅运行流畅
Gemma 4 E2B运行流畅运行流畅运行流畅
Mellum2.1 12B-A2.5B Thinking运行流畅运行流畅运行流畅
Spark-X2.5 4B运行流畅运行流畅运行流畅
Llama 3.2 3B运行流畅运行流畅运行流畅
gpt-oss-20b运行流畅运行流畅运行流畅
Qwen3.5 4B运行流畅运行流畅运行流畅
MiniCPM-V 4.7 35B-A3B运行流畅运行流畅运行流畅
Nemotron 3.5 Lightning 30B-A3B运行较慢运行流畅运行流畅
Qwen3.5 35B-A3B运行较慢运行流畅运行流畅
Qwen3.6 35B-A3B运行较慢运行流畅运行流畅
Gemma 4 E4B运行流畅运行流畅运行流畅
Kanana 1.5 15.7B-A3B运行流畅运行流畅运行流畅
Gemma 4 26B-A4B运行流畅运行流畅运行流畅
Qwen3 30B-A3B (2507)运行流畅运行流畅运行流畅
gpt-oss-120b无法运行无法运行运行流畅
Ling-3.0 Flash无法运行无法运行运行流畅
Kolibri 1无法运行运行较慢运行流畅
Qwen3 8B运行流畅运行流畅运行流畅
Qwen3.5 9B运行流畅运行流畅运行流畅
K2-Horizon MoVA 36B-A4B运行较慢运行流畅运行流畅
DeepSeek R1 Distill Llama 8B运行流畅运行流畅运行流畅
Kanana 1.5 8B运行流畅运行流畅运行流畅
Llama 3.1 8B运行流畅运行流畅运行流畅
Nanbeige4.2 3B运行流畅运行流畅运行流畅
DeepSeek R1 0528 Qwen3 8B运行流畅运行流畅运行流畅
K2-Horizon 7B运行流畅运行流畅运行流畅
Gemma 3 12B运行流畅运行流畅运行流畅
Laguna S 2.1无法运行无法运行运行良好
Gemma 4 12B运行良好运行良好运行良好
Solar Open 100B无法运行无法运行运行良好
Qwen3.5 122B-A10B无法运行无法运行运行良好
HyperCLOVA X SEED Think 14B运行良好运行良好运行良好
Qwen3 14B运行良好运行良好运行良好
DeepSeek R1 Distill Qwen 14B运行良好运行良好运行良好
Phi-4运行良好运行良好运行良好
Mistral Small 3.2 24B运行良好运行良好运行良好
Gemma 3 27B运行良好运行良好运行良好
Qwen3.6 27B运行良好运行良好运行良好
Muse Glimmer 30B运行良好运行良好运行良好
Qwen3.5 27B运行较慢运行较慢运行较慢
Qwen3.8 27B运行较慢运行较慢运行较慢
Gemma 4 31B运行较慢运行较慢运行较慢
Granite 4.2 30B运行较慢运行较慢运行较慢
EXAONE 4.0 32B运行较慢运行较慢运行较慢
EXAONE 4.5 33B运行较慢运行较慢运行较慢
Qwen3 32B运行较慢运行较慢运行较慢
DeepSeek R1 Distill Qwen 32B运行较慢运行较慢运行较慢
Llama 3.3 70B无法运行运行较慢运行较慢
DeepSeek V4 Flash 0731无法运行无法运行无法运行
Solar Open 2 250B无法运行无法运行无法运行
GLM-5.3 Flash无法运行无法运行无法运行

Ryzen AI Max+ 395 (Strix Halo) 的实测结果

我们用于校准的公开基准测试。它们的测试条件(上下文、后端、运行参数)可能与上方的估算不同。

Ryzen AI Max+ 395 (Strix Halo) 的实测结果
模型量化后端上下文提示词处理(tok/s)生成(tok/s)运行参数来源测量日期
gpt-oss-120bMXFP4llama.cpp512707.050.2ROCm 7.0.2, no mmapquozul.dev2025-10-27
Gemma 4 26B-A4BQ4_K_Mllama.cpp5121,327.055.5Vulkangithub.com2026-06-30
Gemma 4 26B-A4BQ4_K_Mllama.cpp5121,209.053.0Vulkangithub.com2026-08-18
Gemma 4 26B-A4BUD-Q4_K_XLllama.cpp5121,325.054.7Vulkangithub.com2026-05-18
Gemma 4 31BUD-Q4_K_XLllama.cpp512302.011.5Vulkangithub.com2026-05-18
Gemma 4 12BIQ4_XSllama.cpp512680.025.7Vulkangithub.com2026-06-04
Gemma 4 12BQ4_K_Mllama.cpp512685.024.4Vulkangithub.com2026-06-04
Qwen3.6 35B-A3BQ8_0llama.cpp512—50.6Vulkan, FA offgithub.com2026-06-10
Qwen3.6 35B-A3BUD-Q8_K_XLllama.cpp5121,046.046.2Vulkangithub.com2026-04-26
Qwen3.6 35B-A3BQ4_K_Mllama.cpp5121,064.063.8Vulkangithub.com2026-04-26
Qwen3.5 35B-A3BQ4_K_Mllama.cpp5121,077.064.8Vulkangithub.com2026-04-26
Qwen3.5 9BQ4_K_Mllama.cpp4k969.037.2Vulkanlocalmaxxing.com2026-04-26
Qwen3.5 122B-A10BQ4_K_Mllama.cpp512315.020.9KV q8_0github.com2026-07-19
Qwen3 8BQ4_K_Mllama.cpp5121,238.043.6Vulkangithub.com2026-09-08
Qwen3 32BQ4_K_Mllama.cpp512256.09.9ROCmblog.tosukui.xyz2025-07-13
Qwen3 32BQ4_K_Mllama.cpp512140.010.4Vulkanblog.tosukui.xyz2025-05-16
Qwen3 32BQ8_0llama.cpp51277.06.4ROCmllm-tracker.info2025-05-11

常见问题

能完全在 Ryzen AI Max+ 395 (Strix Halo) 上运行的最大模型是什么?

Ling-3.0 Flash Q4_K_M(77.01 GB 文件)在 8k 上下文下可完整装入 128 GB 统一内存,估算 48.4 tok/s(33.9–62.9,理论估算 ±30%)。

Ryzen AI Max+ 395 (Strix Halo) 上有多少本地大模型能运行良好?

按 Q4_K_M、8k 上下文计算,内存 128 GB,在 58 个已收录的模型中,34 个运行流畅、12 个运行良好、9 个运行较慢,3 个无法运行。

Ryzen AI Max+ 395 (Strix Halo) 能运行 Llama 3.3 70B 这样的 70B 模型吗?

运行较慢——统一内存,Q4_K_M:估算 4.6 tok/s(3.7–5.6,校准估算 ±20%)。

速度是根据内存带宽得出的估算值,并用公开基准测试结果校准,每个数值都附有误差范围和可信度标签。实际结果会因驱动、后端、上下文长度和散热情况而有所不同。

将 Ryzen AI Max+ 395 (Strix Halo) 与以下设备对比