Posso rodar o EXAONE 4.5 33B?
O EXAONE 4.5 33B, da LG AI Research, precisa de cerca de 32 GB de RAM na quantização recomendada de 4 bits (download de 20.0 GB). Seu hardware é verificado abaixo — na hora, nada sai do seu navegador. Espere cerca de ~17 tok/s em um Apple M-series Max.
Lendo os sinais do seu hardware…
Notas do mundo real
O EXAONE 4.5 33B é o modelo de visão e raciocínio da LG AI Research e, com 33B de parâmetros densos, está firmemente na categoria peso-pesado do que dá para rodar localmente. Um quant de 4-bit fica em torno de 20 GB, então ele simplesmente não cabe numa placa de 12 GB como uma RTX 3060; você precisa de uma GPU de 24 GB, como uma 4090, ou de um Mac com bastante memória unificada. O mínimo para carregá-lo de forma sensata é cerca de 32 GB de RAM. Não é um modelo casual de notebook. É para quem quer um assistente multimodal capaz e tem o hardware para sustentar isso.
No uso diário em uma 4090, ele roda em torno de 43 tokens por segundo em 4-bit, confortável para chat e leitura de imagens, embora bem mais pesado que um modelo pequeno de 8B. Em um Apple M Max, você fica em aproximadamente 17 tokens por segundo, utilizável, mas mais lento, e na CPU com DDR5 cai para cerca de 3 tokens por segundo, o que testa a paciência. A janela de contexto de 256K é grande, mas a memória é a pegadinha: mesmo em 128K de contexto, o consumo total sobe para cerca de 51.7 GB, então uma placa de 24 GB obriga você a manter o contexto de trabalho modesto.
Contra o Qwen3-VL 32B, a comparação mais próxima na sua classe, o EXAONE geralmente troca golpes em vez de dominar; o Qwen3-VL costuma ter ferramental e disponibilidade de quants mais amplos, enquanto o Qwen 3 32B é a escolha mais leve se você só precisa de raciocínio em texto. O grande diferencial do EXAONE é ser um modelo genuinamente forte de visão mais raciocínio em um único pacote, vindo de um laboratório de peso. A ressalva importante é a licença: ele vem sob a EXAONE License, que é não comercial, então você não pode usá-lo em produção nem em nenhum produto comercial. Limite-se a pesquisa, prototipagem e uso pessoal.
Especificações
Tamanho por quantização
| Quantização | Bits/peso | Download | RAM mínima | Qualidade |
|---|---|---|---|---|
| Q2_K | 3.35 | 13.8 GB | 24 GB | Perda perceptível |
| Q4_K_MRecomendada | 4.85 | 20.0 GB | 32 GB | Recomendada |
| Q5_K_M | 5.65 | 23.3 GB | 32 GB | Alta |
| Q8_0 | 8.5 | 35.1 GB | 48 GB | Quase original |
| F16 | 16 | 66.0 GB | 96 GB | Original |
Os tamanhos são estimativas de número de parâmetros × bits por peso; builds GGUF reais variam um pouco. · Dados atualizados: 2026-06-11 · Como calculamos esses números →
Memória necessária por tamanho de contexto
| Contexto | Cache KV (est.) | Memória total (Q4) |
|---|---|---|
| 4K tokens | ~1.0 GB | ~21.0 GB |
| 8K tokens | ~2.0 GB | ~22.0 GB |
| 32K tokens | ~7.9 GB | ~27.9 GB |
| 128K tokens | ~31.7 GB | ~51.7 GB |
O cache KV cresce com o tamanho do contexto — um modelo que cabe em 4K pode ficar sem memória em 32K. As estimativas assumem cache em FP16 com grouped-query attention; o uso real varia conforme o runtime.
Velocidade estimada por hardware
| Hardware | Largura de banda | ~Velocidade |
|---|---|---|
| NVIDIA RTX 3060 12GB | 360 GB/s | Não cabe na VRAM |
| NVIDIA RTX 4090 24GB | 1008 GB/s | ~43 tok/s |
| Apple M-series (base) | 100 GB/s | ~4 tok/s |
| Apple M-series Pro | 270 GB/s | ~11 tok/s |
| Apple M-series Max | 410 GB/s | ~17 tok/s |
| CPU only (dual-channel DDR5) | 60 GB/s | ~3 tok/s |
A geração de tokens é limitada pela largura de banda da memória: tok/s ≈ largura de banda × 0,85 ÷ tamanho do modelo em Q4. Os números reais variam conforme o runtime e o tamanho do contexto.