← Все моделиПРОВЕРКА МОДЕЛИ
Могу ли я запустить Mistral 7B?
Модели Mistral 7B от Mistral AI нужно около 8 GB RAM при рекомендуемой 4-битной квантизации (загрузка 4.4 GB). Проверка вашего железа — ниже: мгновенно, ничего не покидает ваш браузер.
Считываем характеристики вашего железа…
Характеристики
Параметры7.2B
Контекстное окно32K токенов
РазработчикMistral AI
ЛицензияApache 2.0
Дата выхода2023-09
Лучше всего дляЧат
Размер по квантизации
| Квантизация | Бит/вес | Загрузка | Мин. RAM | Качество |
|---|---|---|---|---|
| Q2_K | 3.35 | 3.0 GB | 6 GB | Заметная потеря |
| Q4_K_MРекомендуется | 4.85 | 4.4 GB | 8 GB | Рекомендуется |
| Q5_K_M | 5.65 | 5.1 GB | 8 GB | Высокое |
| Q8_0 | 8.5 | 7.7 GB | 12 GB | Почти оригинал |
| F16 | 16 | 14.4 GB | 24 GB | Оригинал |
Размеры рассчитаны как число параметров × бит на вес; реальные сборки GGUF немного отличаются.
Запустите локально
Проще всего через Ollama — одна команда, и можно общаться:
ollama run mistralИсточники и загрузки
Ollama Library
Скачайте и запустите модель одной командой.
ollama.comHugging Face
Веса модели, файлы и подробности лицензии.
huggingface.coОфициальный репозиторий на GitHub
Исходный код, релизы и issues от Mistral AI.
github.comMistral AI — официальная страница
Официальная страница и документация от Mistral AI.
mistral.ai