¿Puedo ejecutar Ministral 3 8B?
Ministral 3 8B, de Mistral AI, necesita alrededor de 8 GB de RAM con la cuantización recomendada de 4 bits (descarga de 4.9 GB). Tu hardware se comprueba abajo — al instante, nada sale de tu navegador. Espera alrededor de ~63 tok/s en un NVIDIA RTX 3060 12GB.
Leyendo las señales de tu hardware…
Notas del mundo real
Ministral 3 8B es la apuesta de Mistral de finales de 2025 por el modelo local pequeño que sirve para todo, y resuelve tanto chat como visión en el mismo paquete de 8B. En cuantización de 4 bits ocupa alrededor de 4.9 GB, así que entra en una GPU de 8 GB con margen de sobra y corre sin problemas dentro de la memoria unificada de cualquier Mac con Apple Silicon. La cifra de 8 GB de RAM mínima es honesta solo para los pesos, lo que lo convierte en una opción realista para un portátil o una GPU barata de segunda mano, sin necesidad de una estación de trabajo para alojarlo.
En el día a día se siente rápido. En una RTX 3060 puedes esperar unos 63 tokens por segundo en 4 bits, una 4090 lo lleva a aproximadamente 177, y un M-series Max ronda los 72, todos más veloces de lo que alcanzas a leer una respuesta en streaming. El gran titular es la ventana de contexto de 256K, pero trátala como un techo, no como un valor por defecto. Con 128K de contexto, el consumo total de memoria sube a unos 21.7 GB, muy por encima de lo que aguanta una tarjeta de 8 GB, así que mantén el contexto de trabajo en unos pocos miles de tokens salvo que tengas la VRAM para sostener la ventana larga.
Frente a sus hermanos, se queda en un punto intermedio: Mistral Nemo 12B suele tener más holgura para razonamientos difíciles si puedes permitirte el modelo más grande, mientras que Mistral 7B es la alternativa más ligera cuando la memoria escasea. El rasgo que distingue a Ministral 3 8B es que la visión cabe en el mismo tamaño reducido, así que obtienes comprensión de imágenes sin saltar a un modelo multimodal más pesado. Se distribuye bajo Apache 2.0, lo que significa que puedes usarlo de forma comercial y en producción sin ataduras específicas del proveedor: una licencia realmente limpia para un modelo tan capaz.
Especificaciones
Tamaño por cuantización
| Cuantización | Bits/peso | Descarga | RAM mínima | Calidad |
|---|---|---|---|---|
| Q2_K | 3.35 | 3.4 GB | 6 GB | Pérdida notable |
| Q4_K_MRecomendada | 4.85 | 4.9 GB | 8 GB | Recomendada |
| Q5_K_M | 5.65 | 5.7 GB | 12 GB | Alta |
| Q8_0 | 8.5 | 8.5 GB | 16 GB | Casi original |
| F16 | 16 | 16.0 GB | 24 GB | Original |
Los tamaños son estimaciones de número de parámetros × bits por peso; las builds GGUF reales varían un poco. · Datos actualizados: 2026-06-11 · Cómo calculamos estos números →
Memoria necesaria según la longitud de contexto
| Contexto | Caché KV (est.) | Memoria total (Q4) |
|---|---|---|
| 4K tokens | ~0.5 GB | ~5.4 GB |
| 8K tokens | ~1.0 GB | ~5.9 GB |
| 32K tokens | ~4.2 GB | ~9.1 GB |
| 128K tokens | ~16.8 GB | ~21.7 GB |
La caché KV crece con la longitud del contexto — un modelo que cabe a 4K puede quedarse sin memoria a 32K. Las estimaciones asumen una caché en FP16 con grouped-query attention; el uso real varía según el runtime.
Velocidad estimada según el hardware
| Hardware | Ancho de banda | ~Velocidad |
|---|---|---|
| NVIDIA RTX 3060 12GB | 360 GB/s | ~63 tok/s |
| NVIDIA RTX 4090 24GB | 1008 GB/s | ~177 tok/s |
| Apple M-series (base) | 100 GB/s | ~18 tok/s |
| Apple M-series Pro | 270 GB/s | ~47 tok/s |
| Apple M-series Max | 410 GB/s | ~72 tok/s |
| CPU only (dual-channel DDR5) | 60 GB/s | ~11 tok/s |
La generación de tokens está limitada por el ancho de banda de la memoria: tok/s ≈ ancho de banda × 0,85 ÷ tamaño del modelo en Q4. Las cifras reales varían según el runtime y la longitud del contexto.
Ejecútalo en local
El camino más fácil es Ollama — un comando y ya estás chateando:
ollama run ministral-3:8b