CanRun

Ling-3.0 Flash 필요 사양: VRAM과 돌아가는 GPU

Ling-3.0 Flash, 어떤 모델인가요

Ling-3.0 Flash는 앤트그룹 산하 inclusionAI가 2026년 8월 공개한 큰 MoE 모델입니다. 토큰마다 5.1B만 쓰지만, 가중치 전체는 VRAM이나 시스템 RAM에 있어야 합니다. 코딩과 에이전트 작업을 겨냥했고, 컨텍스트는 256k까지 지원합니다. 생각 모드는 기본으로 켜져 있고, 라이선스는 MIT입니다.

모델 카드

모델 정보

파라미터
총 127.49B · 활성 5.1B (MoE)
어텐션
하이브리드 어텐션(일부 층만 풀 어텐션)
최대 컨텍스트
262,144 토큰
공개일
2026-08-02

같은 계열의 다른 크기

기준 양자화·8k 컨텍스트에서 모델마다 필요한 그래픽카드 메모리와, 많이 쓰는 그래픽카드에서의 판정을 작은 모델부터 정리했습니다
모델파라미터기준 양자화필요 메모리(8k)GeForce RTX 4060GeForce RTX 5060 Ti 16GBGeForce RTX 3090
Ling-3.0 Tiny총 7.89B · 활성 1.3B (MoE)Q4_K_M5.3GB쾌적쾌적쾌적
Ling-3.0 Flash지금 보는 모델총 127.49B · 활성 5.1B (MoE)Q4_K_M75.4GB불가불가불가

GGUF 파일

등록된 Ling-3.0 Flash 양자화 파일(작은 파일부터)
양자화파일 크기품질배포처
Q4_K_M기준77.01GB균형공식 GGUF · inclusionAI
Q8_0135.62GB준무손실공식 GGUF · inclusionAI

양자화·컨텍스트별 필요 메모리

그래픽카드 메모리(GB): 그래픽카드에 올라가는 가중치 + f16 KV 캐시 + 연산 버퍼. Windows에서 GPU가 화면 출력도 맡는다면 약 0.6GB를 더하세요. 파일 일부는 그래픽카드에 올라가지 않습니다. llama.cpp는 입력 임베딩 표를 시스템 RAM에 두고, 이 모델의 MTP(다중 토큰 예측) 블록은 아직 쓰지 않아 불러오지 않습니다. 맥은 파일 전체로 계산해서 조금 더 필요합니다.
양자화4k8k16k32k64k128k256k
Q4_K_M75.475.475.675.976.577.780.1
Q8_0132.5132.6132.7133.0133.6134.8137.2

Ling-3.0 Flash, 어떤 GPU에서 돌아갈까?

판정 읽는 법

쾌적
GPU에 전부 올라가고 20 tok/s 이상
원활
GPU에 전부 올라가고 8~20 tok/s, MoE 전문가를 시스템 RAM에 두고 20 tok/s 이상, 또는 GPU에 90% 이상 올라가고 8 tok/s 이상
겨우 가능
2~8 tok/s, CPU 전용, GPU에 90% 미만, 또는 MoE 전문가를 RAM에 두고 20 tok/s 미만
불가
메모리에 안 들어가거나 2 tok/s 미만

계산기에서 예산·종류·컨텍스트로 걸러 보기

옆으로 밀면 모든 열을 볼 수 있습니다.

Q4_K_M·8k 컨텍스트 기준 GPU·맥·CPU 56종을 판정·속도 순으로 정렬했습니다
하드웨어판정속도양자화메모리실행 방식컨텍스트참고가격
Apple M5 Ultra · 256GB
쾌적
추정 106.3 tok/s74.4–138.2이론 추정 ±30%
Q4_K_M77.7 / 179.2GB통합 메모리최대 256k——
Apple M5 Max (40-core GPU) · 128GB
쾌적
추정 96.3 tok/s67.4–125.2이론 추정 ±30%
Q4_K_M77.7 / 89.6GB통합 메모리최대 256k——
Apple M4 Max (40-core GPU) · 128GB
쾌적
추정 88.6 tok/s62.0–115.2이론 추정 ±30%
Q4_K_M77.7 / 89.6GB통합 메모리최대 256k——
Apple M3 Ultra · 256GB
쾌적
추정 84.6 tok/s59.2–110.0이론 추정 ±30%
Q4_K_M77.7 / 179.2GB통합 메모리최대 256k——
Apple M2 Ultra · 128GB
쾌적
추정 83.4 tok/s58.4–108.4이론 추정 ±30%
Q4_K_M77.7 / 89.6GB통합 메모리최대 256k——
NVIDIA DGX Spark · 128GB
쾌적
추정 52.8 tok/s36.9–68.6이론 추정 ±30%
Q4_K_M77.7 / 116.9GB통합 메모리최대 256k—128GB 구성 출시가 US$3,999(약 530만 원)
Ryzen AI Max+ 395 (Strix Halo) · 128GB
쾌적
추정 48.4 tok/s33.9–62.9이론 추정 ±30%
Q4_K_M77.7 / 89.6GB통합 메모리최대 256k—128GB 구성 출시가 US$1,999(약 265만 원)
DDR5-6000 듀얼채널 CPU · 96GB
겨우 가능
추정 13.1 tok/s9.2–17.0이론 추정 ±30%
Q4_K_MRAM 77.1GBCPU 전용최대 256k
  • CPU로만 추론하므로 겨우 돌아가는 수준을 넘지 못합니다.
—
DDR5-5600 듀얼채널 CPU · 96GB
겨우 가능
추정 12.2 tok/s8.5–15.9이론 추정 ±30%
Q4_K_MRAM 77.1GBCPU 전용최대 256k
  • CPU로만 추론하므로 겨우 돌아가는 수준을 넘지 못합니다.
—
Apple M4 · 32GB
불가
—Q4_K_M77.7GB 필요——
  • 약 77.7GB가 필요한데, 여유 메모리는 28.0GB입니다(GPU가 쓸 수 있는 양 22.4GB).
—
Apple M4 Max (32-core GPU) · 36GB
불가
—Q4_K_M77.7GB 필요——
  • 약 77.7GB가 필요한데, 여유 메모리는 32.0GB입니다(GPU가 쓸 수 있는 양 25.2GB).
—
Apple M4 Pro · 64GB
불가
—Q4_K_M77.7GB 필요——
  • 약 77.7GB가 필요한데, 여유 메모리는 60.0GB입니다(GPU가 쓸 수 있는 양 44.8GB).
—
Apple M5 · 32GB
불가
—Q4_K_M77.7GB 필요——
  • 약 77.7GB가 필요한데, 여유 메모리는 28.0GB입니다(GPU가 쓸 수 있는 양 22.4GB).
—
Apple M5 Max (32-core GPU) · 36GB
불가
—Q4_K_M77.7GB 필요——
  • 약 77.7GB가 필요한데, 여유 메모리는 32.0GB입니다(GPU가 쓸 수 있는 양 25.2GB).
—
Apple M5 Pro · 64GB
불가
—Q4_K_M77.7GB 필요——
  • 약 77.7GB가 필요한데, 여유 메모리는 60.0GB입니다(GPU가 쓸 수 있는 양 44.8GB).
—
Apple M6 · 32GB
불가
—Q4_K_M77.7GB 필요——
  • 약 77.7GB가 필요한데, 여유 메모리는 28.0GB입니다(GPU가 쓸 수 있는 양 22.4GB).
—
Intel Arc B580
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
2026-08-09 기준 실거래가 US$290(약 38만 원)
DDR4-3200 듀얼채널 CPU · 64GB
불가
—Q4_K_M77.1GB 필요——
  • 약 77.1GB가 필요한데, 여유 RAM은 60.0GB입니다.
—
GeForce GTX 1080 Ti
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 10.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
출시가 US$699(약 93만 원)
GeForce RTX 2080 Ti
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 10.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
출시가 US$999(약 132만 원)
GeForce RTX 3050 8GB
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
출시가 US$249(약 33만 원)
GeForce RTX 3060 12GB
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
2026-08-09 기준 실거래가 US$250(약 33만 원)
GeForce RTX 3070
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
출시가 US$499(약 66만 원)
GeForce RTX 3080 10GB
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 9.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
출시가 US$699(약 93만 원)
GeForce RTX 3080 12GB
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
출시가 US$799(약 106만 원)
GeForce RTX 3090
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 23.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 원활
2026-08-09 기준 실거래가 US$1,050(약 139만 원)
GeForce RTX 3090 Ti
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 23.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 원활
출시가 US$1,999(약 265만 원)
GeForce RTX 4060
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
출시가 US$299(약 40만 원)
GeForce RTX 4060 Laptop
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
—
GeForce RTX 4060 Ti 16GB
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
출시가 US$499(약 66만 원)
GeForce RTX 4060 Ti 8GB
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
출시가 US$399(약 53만 원)
GeForce RTX 4070
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
출시가 US$599(약 79만 원)
GeForce RTX 4070 Laptop
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
—
GeForce RTX 4070 Super
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
출시가 US$599(약 79만 원)
GeForce RTX 4070 Ti Super
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
출시가 US$799(약 106만 원)
GeForce RTX 4080
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
출시가 US$1,199(약 159만 원)
GeForce RTX 4080 Laptop
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
—
GeForce RTX 4080 Super
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
출시가 US$999(약 132만 원)
GeForce RTX 4090
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 23.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 원활
2026-08-09 기준 실거래가 US$2,755(약 365만 원)
GeForce RTX 4090 Laptop
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
—
GeForce RTX 5060
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
2026-08-09 기준 실거래가 US$339(약 45만 원)
GeForce RTX 5060 Ti 16GB
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
2026-08-09 기준 실거래가 US$569(약 75만 원)
GeForce RTX 5060 Ti 8GB
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
2026-08-09 기준 실거래가 US$429(약 57만 원)
GeForce RTX 5070
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
2026-08-09 기준 실거래가 US$629(약 83만 원)
GeForce RTX 5070 Ti
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
2026-08-09 기준 실거래가 US$949(약 126만 원)
GeForce RTX 5070 Ti Laptop
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
—
GeForce RTX 5080
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
2026-08-09 기준 실거래가 US$1,256(약 166만 원)
GeForce RTX 5080 Laptop
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
—
GeForce RTX 5090
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 31.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 원활
2026-08-09 기준 실거래가 US$4,200(약 557만 원)
GeForce RTX 5090 Laptop
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 23.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 원활
—
Radeon RX 7800 XT
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
출시가 US$499(약 66만 원)
Radeon RX 7900 XT
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 19.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
출시가 US$899(약 119만 원)
Radeon RX 7900 XTX
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 23.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 원활
출시가 US$999(약 132만 원)
Radeon RX 9060 XT 16GB
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 겨우 가능
2026-08-09 기준 실거래가 US$449(약 60만 원)
Radeon RX 9070
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
2026-08-09 기준 실거래가 US$639(약 85만 원)
Radeon RX 9070 XT
불가
—Q4_K_M75.4GB 필요——
  • 약 75.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 96GB라면: 원활
2026-08-09 기준 실거래가 US$689(약 91만 원)

생각 모드가 있는 모델은 생각하는 데 토큰을 더 쓰기 때문에 속도 기준을 1.5배 엄격하게 잡습니다(30 / 12 / 3 tok/s). 생각 모드를 끄고 쓰면 실제로는 한 단계 위일 수 있습니다.

원화 금액은 미국 달러 가격을 2026-10-21 환율(1달러 1,326원)로 단순 환산한 참고값이라 국내 판매가와 다를 수 있습니다.

가장 싸게 돌릴 수 있는 GPU

실거래가가 확인된 GPU 가운데 Q4_K_M 기준으로 쾌적하거나 원활하게 돌리는 GPU는 없습니다. 맥, 통합 메모리 PC, CPU 구성은 위 표에서 확인하세요.

Ling-3.0 Flash 벤치마크 결과

이 모델로 잰 공개 벤치마크 결과는 아직 없습니다.

자주 묻는 질문

Ling-3.0 Flash 실행에 VRAM이 얼마나 필요한가요?

Q4_K_M 파일은 77.01GB입니다. 8k 컨텍스트로 그래픽카드에 올리면 약 75.4GB가 필요합니다(가중치 74.79GB, KV 캐시 0.1GB, 연산 버퍼 0.6GB). 파일 일부는 그래픽카드에 올라가지 않습니다. llama.cpp는 입력 임베딩 표를 시스템 RAM에 두고, 이 모델의 MTP(다중 토큰 예측) 블록은 아직 쓰지 않아 불러오지 않습니다. 맥은 파일 전체로 계산해서 조금 더 필요합니다.

Ling-3.0 Flash, 원활하게 돌아가는 가장 싼 GPU는 무엇인가요?

실거래가가 확인된 GPU 가운데 Q4_K_M 기준으로 쾌적하거나 원활하게 돌리는 GPU는 없습니다. 그중 가장 나은 선택은 Apple M5 Ultra · 256GB입니다(판정: 쾌적).

Ling-3.0 Flash, 8GB·16GB·24GB GPU에서 돌아가나요?

Q4_K_M·8k 컨텍스트 기준 카드별 판정입니다. GeForce RTX 4060: 불가; GeForce RTX 5060 Ti 16GB: 불가; GeForce RTX 3090: 불가.

속도는 메모리 대역폭으로 계산한 추정치를 공개 벤치마크로 보정한 값입니다. 모든 수치에는 오차 범위와 신뢰 라벨을 함께 표시합니다. 실제 속도는 드라이버, 백엔드, 컨텍스트 길이, 발열에 따라 달라집니다.