Aller au contenu principal
Moteur local prêt

Mixtral 8x7B

5 GPUs grand public peuvent exécuter Mixtral 8x7B en Q4 nativement. Seuils VRAM précis et benchmarks ci-dessous.

5 GPUs compatibles
16 avec offloading
46.7B paramètres
33K contexte
Meilleur choix
RTX 5090 · 32 GB VRAM Q4 natif

Prix et disponibilité peuvent changer · lien affilié

Javier Morales
Javier Morales Spécialiste matériel IA — 8 ans d’expérience
GitHub: github.com/javier-morales-ia

llama.cpp 0.2.x · CUDA 12 · ROCm 6 · mis à jour mensuellement · méthodologie →

Contexte d’exécution

ARCHITECTURE TRANSFORMER
CONTEXTE 33K TOKENS
QUANTIFICATION 4-BIT GGUF
FOURNISSEUR Mistral AI
LICENCE Apache-2.0
BESOIN VRAM
26 GB
4GB 8GB 12GB 16GB 24GB+
Décision matérielle

Ce modèle nécessite unGPU flagship (48 GB+ VRAM)

Minimum

RTX 5090

Fonctionne en Q4 — utilisable avec un peu d’attente

32 GB VRAM
Voir config compatible
Équilibré

M4 Max 48GB

Meilleur équilibre valeur/performance au quotidien

48 GB VRAM
Voir config compatible
Optimal

RTX 5090

Qualité maximale, inférence la plus rapide

32 GB VRAM
Voir config compatible

GPUs compatibles pour Mixtral 8x7B

Meilleures options par compatibilité, marge VRAM et valeur — prix et disponibilité peuvent varier.

RTX 5090
32 GB VRAM · Q4 natif Amazon

RTX 5090

0.0 (0 avis)

Points forts

  • Exécute Mixtral 8x7B en Q4 natif
  • 32 GB VRAM — marge suffisante
M4 Ultra
128 GB VRAM · Q4 natif Amazon

M4 Ultra

0.0 (0 avis)

Points forts

  • Exécute Mixtral 8x7B en Q4 natif
  • 128 GB VRAM — marge suffisante
M3 Ultra
192 GB VRAM · Q4 natif Amazon

M3 Ultra

0.0 (0 avis)

Points forts

  • Exécute Mixtral 8x7B en Q4 natif
  • 192 GB VRAM — marge suffisante
Voir M3 Ultra sur Amazon →

Certains liens sont des liens d'affiliation Amazon. Nous pouvons toucher une commission sans coût supplémentaire pour vous. Le cookie Amazon peut durer jusqu'à 24 heures après votre clic.

*Les prix et la disponibilité peuvent changer. Certains liens sont affiliés.

Configuration requise

VRAM GPU 26 GB GPU haut de gamme
RAM système 39 GB 64 GB ou plus
Stockage 26 GB Q4 · SSD recommandé
CPU Tout CPU moderne GPU requis

VRAM par quantification

Quantification VRAM nécessaire Espace disque Qualité
FP16 (qualité maximale) 93 GB 93 GB Maximum
Q8 (haute qualité) 47 GB 47 GB Quasi sans perte
Q4 (recommandé) Meilleur équilibre 26 GB 26 GB Recommandée
Q2 (minimum) 14 GB 14 GB Perte de qualité

Détails du modèle

Développeur Mistral AI
Paramètres 46.7B
Fenêtre de contexte 32,768 tokens
Licence Apache-2.0
Cas d’usage chat, coding, reasoning, analysis
Sortie 2023-12

Installer avec Ollama

ollama run mixtral:8x7b

Hugging Face

mistralai/Mixtral-8x7B-Instruct-v0.1
Voir sur HF →
Exigences techniques

Votre GPU peut-il exécuter Mixtral 8x7B ?

Mixtral 8x7B nécessite <strong class="text-primary-container">26 GB de VRAM</strong> en Q4. 5 GPUs grand public atteignent ce seuil. En dessous de 8 GB ou 24 GB, la latence d’offload augmente fortement.

14GB Minimum critique
26GB Optimal Q4
47GB Haute qualité Q8
93GB Max FP16

Matrice de performance matérielle

5 Q4 natif · 16 offload

GPU VRAM Compatibilité Vitesse estimée Action
RTX 5090 32GB Optimal Calculer →
M4 Ultra 128GB Optimal 33 tok/s Calculer →
M3 Ultra 192GB Optimal 27 tok/s Calculer →
M4 Max 48GB 48GB Optimal 16 tok/s Calculer →
M4 Max 36GB 36GB Optimal Calculer →
RTX 4090 24GB Offload Calculer →
RTX 5080 16GB Offload Calculer →
RTX 4080 Super 16GB Offload Calculer →
RTX 5070 Ti 16GB Offload Calculer →
RTX 3090 24GB Offload Calculer →
RX 7900 XTX 24GB Offload Calculer →
RTX 4070 Ti Super 16GB Offload Calculer →
RX 7900 XT 20GB Offload Calculer →
M4 Pro 24GB Offload Calculer →
RX 7800 XT 16GB Offload Calculer →
RX 6800 XT 16GB Offload Calculer →
RTX 4060 Ti 16GB 16GB Offload Calculer →
M3 Pro 18GB Offload Calculer →
M2 Pro 16GB Offload Calculer →
Arc A770 16GB 16GB Offload Calculer →
M1 Pro 16GB Offload Calculer →

GPUs recommandés pour Mixtral 8x7B

Benchmarks réels
Sans avis sponsorisés
Sélection éditoriale
Basé sur les données

Meilleurs choix selon compatibilité, marge VRAM et valeur; prix et disponibilité peuvent varier.

Certains liens sont des liens d'affiliation Amazon. Nous pouvons toucher une commission sans coût supplémentaire pour vous. Le cookie Amazon peut durer jusqu'à 24 heures après votre clic.

Mixtral 8x7B — Guide de compatibilité

Mixtral 8x7B nécessite un GPU haut de gamme comme la RTX 4090 ou un Mac avec M2 Ultra (ou mieux). La version Q4 demande 26 GB de VRAM. Consultez le calculateur VRAM pour vos options.

Comparez les GPUs pour Mixtral 8x7B

Quel GPU vaut le coup ? Spécifications et benchmarks réels côte à côte.

Matériel compatible

GPUs qui exécutent Mixtral 8x7B en Q4, triés par score de performance IA.

Benchmarks réels
Sans avis sponsorisés
Basé sur les données
RTX 5090

NVIDIA · 32 GB VRAM

Q4 OK
> $1000
M4 Ultra

Apple · 128 GB VRAM

Q4 OK
33 tok/s > $1000
M3 Ultra

Apple · 192 GB VRAM

Q4 OK
27 tok/s > $1000
M4 Max 48GB

Apple · 48 GB VRAM

Q4 OK
16 tok/s > $1000
M4 Max 36GB

Apple · 36 GB VRAM

Q4 OK
> $1000

Certains liens sont des liens d'affiliation Amazon. Nous pouvons toucher une commission sans coût supplémentaire pour vous. Le cookie Amazon peut durer jusqu'à 24 heures après votre clic.

Alternatives plus pratiques

Modèles similaires dans la catégorie chat avec des besoins VRAM comparables.

Vous ne savez pas quel GPU il vous faut pour Mixtral 8x7B ?

Le calculateur VRAM vous indique exactement quelle quantification votre matériel peut supporter.

RTX 5090

Voir disponibilité

Prix mis à jour quotidiennement