3090의 95%인데 용량만 4GB 적습니다. 같은 보드에 용량만 줄인 카드가 LLM에서 얼마나 다른지가 여기서 갈립니다.
이 카드에 올라가는 모델 (16종 전수 중)
| 모델 | tok/s (M5 Max 기준) |
VRAM | TTFT | 출처 |
|---|---|---|---|---|
llama3.1:8b |
100.8 | 4.9GB | 0.1s | 실측 |
deepseek-r1:8b |
79.7 | 5.2GB | 44.4s | 실측 |
qwen3.5:9b |
73.0 | 6.6GB | 0.1s | 실측 |
phi4:14b |
45.8 | 9.1GB | 14.8s | 실측 |
16종 중 12종 탈락. 위 표는 M5 Max 실측 기준이며, VRAM 용량 판정은 NVIDIA에서도 동일하게 적용됩니다.
스펙으로 보는 체감
- 메모리 대역폭 912 GB/s → 8B Q4 예상 약 104 tok/s (대역폭 기준 추정, 실측 아님)
- TDP 350W → 8시간/일 돌리면 전기세 월 약 12,600원
- VRAM 12GB → 실전 한계: 14B급 Q4까지
실거래가
이 카드는 우리 시세 추적 대상이 아닙니다 — 매수 전 다나와에서 오늘치 확인을 권합니다.
시리즈 전체 — RTX 3050~5090 전 모델 · VRAM Fit Matrix
기준
VRAM·대역폭·TDP는 NVIDIA 공개 스펙, 적합표의 tok/s·TTFT는 M5 Max 128GB(MLX/Ollama) 실측값입니다. “올라가는가”는 VRAM 용량으로, “얼마나 빠른가”는 대역폭으로 결정됩니다. 전기세는 8시간/일 × kWh당 150원 근사. 카드 간 교차 비교는 VRAM Fit Matrix.
댓글 남기기