← Alle ModelleMODELL-CHECK

Kann ich Llama 3.1 8B lokal ausführen?

Llama 3.1 8B von Meta benötigt bei der empfohlenen 4-Bit-Quantisierung rund 8 GB RAM (4.9 GB Download). Ihre Hardware wird unten geprüft — sofort, und nichts verlässt Ihren Browser.

Hardware-Signale werden ausgelesen…

Technische Daten

Parameter8B
Kontextfenster128K Token
AnbieterMeta
LizenzLlama Community
Veröffentlicht2024-07
Am besten fürChat

Größe nach Quantisierung

QuantisierungBits/GewichtDownloadMin. RAMQualität
Q2_K3.353.4 GB6 GBSpürbarer Verlust
Q4_K_MEmpfohlen4.854.9 GB8 GBEmpfohlen
Q5_K_M5.655.7 GB12 GBHoch
Q8_08.58.5 GB16 GBNahezu Original
F161616.0 GB24 GBOriginal

Die Größen sind Schätzungen aus Parameterzahl × Bits pro Gewicht; echte GGUF-Builds weichen leicht ab.

Lokal ausführen

Der einfachste Weg ist Ollama — ein Befehl und Sie chatten:

ollama run llama3.1

Häufig gestellte Fragen

Llama 3.1 8B Systemanforderungen — Kann ich es lokal ausführen?