EXAONE 4.5 33B çalıştırabilir miyim?
LG AI Research imzalı EXAONE 4.5 33B, önerilen 4-bit nicemlemede yaklaşık 32 GB RAM ister (20.0 GB indirme). Donanımın aşağıda anında test ediliyor — hiçbir şey tarayıcından çıkmaz. Apple M-series Max üzerinde yaklaşık ~17 tok/s bekleyebilirsin.
Donanım sinyallerin okunuyor…
Gerçek dünya notları
EXAONE 4.5 33B, LG AI Research'ün görsel ve akıl yürütme odaklı modeli; 33B yoğun (dense) parametresiyle kendi sunucunuzda barındırabileceğiniz modeller arasında üst segmentte yer alıyor. 4-bit niceleme (quant) yaklaşık 20 GB tutuyor, dolayısıyla RTX 3060 gibi 12 GB'lık bir karta kesinlikle sığmaz; 4090 gibi 24 GB'lık bir GPU ya da bol birleşik belleğe sahip bir Mac gerekiyor. Mantıklı şekilde çalıştırmak için en az 32 GB RAM şart. Bu sıradan bir dizüstü modeli değil. Yetenekli, çok kipli (multimodal) bir asistan isteyen ve buna uygun donanımı olan kullanıcılar için.
Günlük kullanımda 4090 üzerinde 4-bit'te saniyede yaklaşık 43 token üretiyor; sohbet ve görsel okuma için rahat bir hız, ancak küçük bir 8B modele göre belirgin biçimde daha ağır. Apple M Max'te saniyede kabaca 17 token'a iniyorsunuz; kullanılabilir ama daha ölçülü ilerliyor. DDR5'li CPU üzerinde ise saniyede yaklaşık 3 token'a düşüyor ki bu sabır sınayan bir tempo. 256K bağlam penceresi büyük, fakat asıl mesele bellek: 128K bağlamda bile toplam ayak izi yaklaşık 51.7 GB'a tırmanıyor, yani 24 GB'lık bir kart çalışma bağlamınızı mütevazı tutmanızı zorunlu kılıyor.
Sınıfındaki en yakın rakibi Qwen3-VL 32B ile karşılaştırıldığında EXAONE genelde üstünlük kurmaktan çok başa baş gidiyor; Qwen3-VL'in araç desteği ve quant seçenekleri daha geniş olma eğiliminde, yalnızca metin akıl yürütmesi gerekiyorsa Qwen 3 32B daha hafif tercih. EXAONE'in öne çıkan yanı, büyük bir laboratuvardan tek pakette gerçekten güçlü bir görsel artı akıl yürütme modeli olması. Önemli uyarı lisansta: EXAONE License altında geliyor ve bu lisans ticari değil (non-commercial), dolayısıyla onu üretimde ya da herhangi bir ticari üründe kullanamazsınız. Araştırma, prototipleme ve kişisel kullanımla sınırlı tutun.
Teknik özellikler
Nicemlemeye göre boyut
| Nicemleme | Bit/ağırlık | İndirme | Min RAM | Kalite |
|---|---|---|---|---|
| Q2_K | 3.35 | 13.8 GB | 24 GB | Belirgin kayıp |
| Q4_K_MÖnerilen | 4.85 | 20.0 GB | 32 GB | Önerilen |
| Q5_K_M | 5.65 | 23.3 GB | 32 GB | Yüksek |
| Q8_0 | 8.5 | 35.1 GB | 48 GB | Orijinale yakın |
| F16 | 16 | 66.0 GB | 96 GB | Orijinal |
Boyutlar parametre sayısı × ağırlık başına bit üzerinden tahmindir; gerçek GGUF sürümleri biraz farklı olabilir. · Veri güncellemesi: 2026-06-11 · Bu sayıları nasıl hesaplıyoruz? →
Bağlam uzunluğuna göre bellek ihtiyacı
| Bağlam | KV önbelleği (tahmini) | Toplam bellek (Q4) |
|---|---|---|
| 4K token | ~1.0 GB | ~21.0 GB |
| 8K token | ~2.0 GB | ~22.0 GB |
| 32K token | ~7.9 GB | ~27.9 GB |
| 128K token | ~31.7 GB | ~51.7 GB |
KV önbelleği bağlam uzunluğuyla büyür — 4K'da sığan model 32K'da belleği doldurabilir. Tahminler grouped-query attention ile FP16 önbellek varsayar; gerçek kullanım çalışma ortamına göre değişir.
Donanıma göre tahmini hız
| Donanım | Bant genişliği | ~Hız |
|---|---|---|
| NVIDIA RTX 3060 12GB | 360 GB/s | VRAM'e sığmaz |
| NVIDIA RTX 4090 24GB | 1008 GB/s | ~43 tok/s |
| Apple M-series (base) | 100 GB/s | ~4 tok/s |
| Apple M-series Pro | 270 GB/s | ~11 tok/s |
| Apple M-series Max | 410 GB/s | ~17 tok/s |
| CPU only (dual-channel DDR5) | 60 GB/s | ~3 tok/s |
Token üretimi bellek bant genişliğiyle sınırlıdır: tok/s ≈ bant genişliği × 0,85 ÷ Q4 model boyutu. Gerçek değerler çalışma ortamına ve bağlam uzunluğuna göre değişir.