Solar Open 100B 필요 사양: VRAM과 돌아가는 GPU

모델 정보

파라미터
총 102.65B · 활성 12B (MoE)
어텐션
풀 어텐션
최대 컨텍스트
131,072 토큰
공개일
2025-12-10

GGUF 파일

등록된 Solar Open 100B 양자화 파일(작은 파일부터)
양자화파일 크기품질배포처
Q2_K37.69GB손실 큼커뮤니티 GGUF · mradermacher
IQ4_XS55.53GB균형커뮤니티 GGUF · mradermacher
Q4_K_M기준62.26GB균형커뮤니티 GGUF · mradermacher
Q8_0109.15GB준무손실커뮤니티 GGUF · mradermacher

양자화·컨텍스트별 필요 메모리

가중치 + f16 KV 캐시 + 연산 버퍼(GB). Windows에서 GPU가 화면 출력도 맡는다면 약 0.6GB를 더하세요.
양자화4k8k16k32k64k128k
Q2_K39.039.941.644.951.765.2
IQ4_XS56.957.759.462.869.583.0
Q4_K_M63.664.466.169.576.289.7
Q8_0110.5111.3113.0116.4123.1136.6

Solar Open 100B, 어떤 GPU에서 돌아갈까?

판정 읽는 법

쾌적
GPU에 전부 올라가고 20 tok/s 이상
원활
GPU에 전부 올라가고 8~20 tok/s, MoE 전문가를 시스템 RAM에 두고 20 tok/s 이상, 또는 GPU에 90% 이상 올라가고 8 tok/s 이상
겨우 가능
2~8 tok/s, CPU 전용, GPU에 90% 미만, 또는 MoE 전문가를 RAM에 두고 20 tok/s 미만
불가
메모리에 안 들어가거나 2 tok/s 미만

옆으로 밀면 모든 열을 볼 수 있습니다.

Q4_K_M·8k 컨텍스트 기준 GPU·맥·CPU 54종을 판정·속도 순으로 정렬했습니다
하드웨어판정속도양자화메모리실행 방식컨텍스트참고가격
Apple M3 Ultra · 96GB
쾌적
추정 26.7 tok/s21.4–32.1보정된 추정 ±20%
Q4_K_M64.4 / 67.2GB통합 메모리최대 16k——
Apple M2 Ultra · 128GB
쾌적
추정 26.1 tok/s20.9–31.3보정된 추정 ±20%
Q4_K_M64.4 / 89.6GB통합 메모리최대 16k——
Apple M5 Max (40-core GPU) · 128GB
쾌적
추정 20.7 tok/s16.6–24.9보정된 추정 ±20%
Q4_K_M64.4 / 89.6GB통합 메모리최대 8k——
Apple M4 Max (40-core GPU) · 128GB
원활
추정 18.4 tok/s14.7–22.1보정된 추정 ±20%
Q4_K_M64.4 / 89.6GB통합 메모리최대 64k
  • IQ4_XS: 쾌적
—
Ryzen AI Max+ 395 (Strix Halo) · 128GB
원활
추정 15.3 tok/s12.2–18.3보정된 추정 ±20%
Q4_K_M64.4 / 89.6GB통합 메모리최대 32k
  • Q2_K (품질 손실 큼): 쾌적
출시가 US$1,999
NVIDIA DGX Spark · 128GB
원활
추정 12.3 tok/s9.8–14.7보정된 추정 ±20%
Q4_K_M64.4 / 89.6GB통합 메모리최대 16k—출시가 US$3,999
DDR5-6000 듀얼채널 CPU · 96GB
겨우 가능
추정 4.6 tok/s3.7–5.6보정된 추정 ±20%
Q4_K_MRAM 63.9GBCPU 전용최대 64k——
DDR5-5600 듀얼채널 CPU · 96GB
겨우 가능
추정 4.3 tok/s3.5–5.2보정된 추정 ±20%
Q4_K_MRAM 63.9GBCPU 전용최대 32k——
Apple M5 Max (32-core GPU) · 48GB
불가Q2_K (품질 손실 큼): 겨우 가능
추정 22.9 tok/s16.1–29.8이론 추정 ±30%
Q2_KRAM 39.3GBCPU 전용최대 16k
  • CPU로만 추론하므로 겨우 돌아가는 수준을 넘지 못합니다.
—
Apple M4 Max (32-core GPU) · 48GB
불가Q2_K (품질 손실 큼): 겨우 가능
추정 20.4 tok/s14.3–26.6이론 추정 ±30%
Q2_KRAM 39.3GBCPU 전용최대 16k
  • CPU로만 추론하므로 겨우 돌아가는 수준을 넘지 못합니다.
—
Apple M5 Pro · 64GB
불가IQ4_XS: 겨우 가능
추정 11.4 tok/s8.0–14.8이론 추정 ±30%
IQ4_XSRAM 57.1GBCPU 전용최대 16k
  • CPU로만 추론하므로 겨우 돌아가는 수준을 넘지 못합니다.
  • Q2_K (품질 손실 큼): 원활
—
Apple M4 Pro · 64GB
불가IQ4_XS: 겨우 가능
추정 10.1 tok/s7.1–13.1이론 추정 ±30%
IQ4_XSRAM 57.1GBCPU 전용최대 16k
  • CPU로만 추론하므로 겨우 돌아가는 수준을 넘지 못합니다.
  • Q2_K (품질 손실 큼): 원활
—
DDR4-3200 듀얼채널 CPU · 64GB
불가IQ4_XS: 겨우 가능
추정 2.7 tok/s2.2–3.3보정된 추정 ±20%
IQ4_XSRAM 57.1GBCPU 전용최대 16k——
Apple M4 · 32GB
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 여유 메모리는 28.0GB입니다(GPU가 쓸 수 있는 양 22.4GB).
—
Apple M5 · 32GB
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 여유 메모리는 28.0GB입니다(GPU가 쓸 수 있는 양 22.4GB).
—
Intel Arc B580
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$290 (2026-08-09 기준)
GeForce GTX 1080 Ti
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 10.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$699
GeForce RTX 2080 Ti
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 10.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$999
GeForce RTX 3050 8GB
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$249
GeForce RTX 3060 12GB
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$250 (2026-08-09 기준)
GeForce RTX 3070
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$499
GeForce RTX 3080 10GB
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 9.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$699
GeForce RTX 3080 12GB
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$799
GeForce RTX 3090
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 23.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$1,050 (2026-08-09 기준)
GeForce RTX 3090 Ti
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 23.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$1,999
GeForce RTX 4060
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$299
GeForce RTX 4060 Laptop
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
—
GeForce RTX 4060 Ti 16GB
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$499
GeForce RTX 4060 Ti 8GB
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$399
GeForce RTX 4070
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$599
GeForce RTX 4070 Laptop
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
—
GeForce RTX 4070 Super
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$599
GeForce RTX 4070 Ti Super
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$799
GeForce RTX 4080
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$1,199
GeForce RTX 4080 Laptop
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
—
GeForce RTX 4080 Super
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$999
GeForce RTX 4090
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 23.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$2,755 (2026-08-09 기준)
GeForce RTX 4090 Laptop
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
—
GeForce RTX 5060
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$339 (2026-08-09 기준)
GeForce RTX 5060 Ti 16GB
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$569 (2026-08-09 기준)
GeForce RTX 5060 Ti 8GB
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 7.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$429 (2026-08-09 기준)
GeForce RTX 5070
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$629 (2026-08-09 기준)
GeForce RTX 5070 Ti
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$949 (2026-08-09 기준)
GeForce RTX 5070 Ti Laptop
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 11.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
—
GeForce RTX 5080
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$1,256 (2026-08-09 기준)
GeForce RTX 5080 Laptop
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
—
GeForce RTX 5090
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 31.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$4,200 (2026-08-09 기준)
GeForce RTX 5090 Laptop
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 23.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
—
Radeon RX 7800 XT
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$499
Radeon RX 7900 XT
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 19.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$899
Radeon RX 7900 XTX
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 23.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
출시가 US$999
Radeon RX 9060 XT 16GB
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$449 (2026-08-09 기준)
Radeon RX 9070
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$639 (2026-08-09 기준)
Radeon RX 9070 XT
불가
—Q4_K_M64.4GB 필요——
  • 약 64.4GB가 필요한데, 쓸 수 있는 VRAM은 15.4GB, 여유 RAM은 28.0GB입니다.
  • RAM 64GB라면: 겨우 가능
실거래가 US$689 (2026-08-09 기준)

가장 싸게 돌릴 수 있는 GPU

실거래가가 확인된 GPU 가운데 Q4_K_M 기준으로 쾌적하거나 원활하게 돌리는 GPU는 없습니다. 맥, 통합 메모리 PC, CPU 구성은 위 표에서 확인하세요.

Solar Open 100B 벤치마크 결과

이 모델로 잰 공개 벤치마크 결과는 아직 없습니다.

자주 묻는 질문

Solar Open 100B 실행에 VRAM이 얼마나 필요한가요?

Q4_K_M 기준으로 가중치가 62.26GB이고, 8k 컨텍스트까지 더하면 약 64.4GB가 필요합니다(KV 캐시 1.6GB, 연산 버퍼 0.6GB). 가장 작은 파일(Q2_K (품질 손실 큼))은 약 39.9GB가 필요합니다.

Solar Open 100B, 원활하게 돌아가는 가장 싼 GPU는 무엇인가요?

실거래가가 확인된 GPU 가운데 Q4_K_M 기준으로 쾌적하거나 원활하게 돌리는 GPU는 없습니다. 그중 가장 나은 선택은 Apple M3 Ultra · 96GB입니다(판정: 쾌적).

Solar Open 100B, 8GB·16GB·24GB GPU에서 돌아가나요?

Q4_K_M·8k 컨텍스트 기준 카드별 판정입니다. GeForce RTX 4060: 불가; GeForce RTX 5060 Ti 16GB: 불가; GeForce RTX 3090: 불가.

속도는 메모리 대역폭으로 계산한 추정치를 공개 벤치마크로 보정한 값입니다. 모든 수치에는 오차 범위와 신뢰 라벨을 함께 표시합니다. 실제 속도는 드라이버, 백엔드, 컨텍스트 길이, 발열에 따라 달라집니다.