← Tüm modellerMODEL TESTİ

Llama 3.1 8B çalıştırabilir miyim?

Meta imzalı Llama 3.1 8B, önerilen 4-bit nicemlemede yaklaşık 8 GB RAM ister (4.9 GB indirme). Donanımın aşağıda anında test ediliyor — hiçbir şey tarayıcından çıkmaz.

Donanım sinyallerin okunuyor…

Teknik özellikler

Parametre8B
Bağlam penceresi128K token
SağlayıcıMeta
LisansLlama Community
Çıkış2024-07
En iyi olduğu alanSohbet

Nicemlemeye göre boyut

NicemlemeBit/ağırlıkİndirmeMin RAMKalite
Q2_K3.353.4 GB6 GBBelirgin kayıp
Q4_K_MÖnerilen4.854.9 GB8 GBÖnerilen
Q5_K_M5.655.7 GB12 GBYüksek
Q8_08.58.5 GB16 GBOrijinale yakın
F161616.0 GB24 GBOrijinal

Boyutlar parametre sayısı × ağırlık başına bit üzerinden tahmindir; gerçek GGUF sürümleri biraz farklı olabilir.

Yerel çalıştır

En kolay yol Ollama — tek komutla sohbete başla:

ollama run llama3.1

Sık sorulan sorular