← Alle ModelleMODELL-CHECK

Kann ich Mistral 7B lokal ausführen?

Mistral 7B von Mistral AI benötigt bei der empfohlenen 4-Bit-Quantisierung rund 8 GB RAM (4.4 GB Download). Ihre Hardware wird unten geprüft — sofort, und nichts verlässt Ihren Browser.

Hardware-Signale werden ausgelesen…

Technische Daten

Parameter7.2B
Kontextfenster32K Token
AnbieterMistral AI
LizenzApache 2.0
Veröffentlicht2023-09
Am besten fürChat

Größe nach Quantisierung

QuantisierungBits/GewichtDownloadMin. RAMQualität
Q2_K3.353.0 GB6 GBSpürbarer Verlust
Q4_K_MEmpfohlen4.854.4 GB8 GBEmpfohlen
Q5_K_M5.655.1 GB8 GBHoch
Q8_08.57.7 GB12 GBNahezu Original
F161614.4 GB24 GBOriginal

Die Größen sind Schätzungen aus Parameterzahl × Bits pro Gewicht; echte GGUF-Builds weichen leicht ab.

Lokal ausführen

Der einfachste Weg ist Ollama — ein Befehl und Sie chatten:

ollama run mistral

Häufig gestellte Fragen