Passer au contenu

Meilleur GPU pour Qwen3.8-27B en local

Prix en temps réel et recommandations matérielles mises à jour pour août 2026.

27B
27B
dense

Qwen3.8-27B est un modèle dense : ses 27 milliards de paramètres s'activent à chaque token, la vitesse de génération dépend donc de la rapidité avec laquelle votre carte peut lire l'ensemble des poids.

Pour exécuter Qwen3.8-27B en local, il vous faut environ 19.7 Go de VRAM en quantification Q4_K_M avec un contexte de 128k tokens. La carte offrant le meilleur rapport qualité-prix est la GeForce RTX 3090 (24 Go), qui devrait générer environ 11 tokens par seconde.

Ajuster la longueur du contexte

Glissez vers les tailles courantes ou saisissez une valeur manuellement.

k tokens
8k
16k
32k
64k
128k
256k
Entrée de gammeQ3_K_M quant
11.6 GB
4.1 GB
VRAM totale :15.8 GB

Matériel recommandé

Radeon RX 9060 XT 16GB
160 tok/sprefill
6 tok/sgénération
CAD 689.99·16Go de VRAM
Voir la fiche
GeForce RTX 5060 Ti 16GB
256 tok/sprefill
10 tok/sgénération
CAD 949.99·16Go de VRAM
Voir la fiche

Q3 weights are ~12 GB. Because ~three-quarters of the layers use linear attention, the KV cache barely grows with context — even a 128k window adds only ~4 GB, so a 16 GB card holds the whole thing. This hybrid attention is why a 27B model runs long context on mainstream hardware.

Équilibre parfaitQ4_K_M quant
15.5 GB
4.1 GB
VRAM totale :19.7 GB

Matériel recommandé

GeForce RTX 3090
369 tok/sprefill
11 tok/sgénération
CAD 2199.99·24Go de VRAM
Voir la fiche
GeForce RTX 4090
502 tok/sprefill
16 tok/sgénération
CAD 6137.99·24Go de VRAM
Voir la fiche

Q4 weights (~15.5 GB) plus the small hybrid-attention KV cache stay under 20 GB at 128k context. A 24 GB card runs it at the balanced quant with room to push toward the native 262k window.

Quasi sans perteQ8_0 quant
31 GB
4.1 GB
VRAM totale :35.2 GB

Matériel recommandé

RTX PRO 5000 Blackwell
588 tok/sprefill
15 tok/sgénération
CAD 11190.7·48Go de VRAM
Voir la fiche
RTX A6000
218 tok/sprefill
5 tok/sgénération
CAD 11399·48Go de VRAM
Voir la fiche

Near-lossless Q8 weights are ~31 GB. A 48 GB workstation card holds the full precision model with headroom for the extended 262k-1M context this model supports.

Autres modèles ayant les mêmes besoins en VRAM

Comme les poids de Qwen3.8-27B tiennent sur une carte de 24 Go, d'autres modèles de taille similaire fonctionnent sur le même GPU. La vitesse de génération varie — les modèles Mixture-of-Experts sont plus rapides, les modèles denses plus lents — mais tous se chargent dans la même VRAM :

DiffusionGemma 26B-A4B25.2BNemotron-3-Nano-30B-A3B30BNorth-Mini-Code-1.030BGLM-4.7-Flash30.5BQwen3-30B-A3B30.5BQwen3-Coder-30B-A3B30.5B · Qwen3-30B-A3B

Configuration optimale pour Qwen3.8-27B

Recommandations de quantification

Pour le codage et le raisonnement au quotidien, la Q4_K_M (quantification 4 bits) offre le meilleur équilibre entre qualité et efficacité mémoire — elle réduit les besoins en mémoire de plus de 70 % avec une perte de qualité minimale par rapport au FP16. Les préréglages Q8 et supérieurs préservent davantage de fidélité au prix d'une utilisation VRAM nettement plus élevée, ce qui peut forcer le déchargement des couches et nuire au débit.

Logiciel local recommandé

Nous recommandons Ollama comme exécuteur principal pour l'inférence locale grâce à son découpage automatique des modèles GPU et ses optimisations du cache de contexte. Pour les réglages avancés ou les fractionnements de quantification, llama.cpp avec Flash Attention compilé nativement offre le meilleur contrôle granulaire.

Exécuter Qwen3.8-27B en local — FAQ

De combien de VRAM ai-je besoin pour exécuter Qwen3.8-27B ?

Avec un contexte de 128k et la quantification du cache KV activée, Qwen3.8-27B nécessite environ 19.7 Go de VRAM en Q4_K_M — la quantification à privilégier dans la plupart des cas. En Q3_K_M, ce chiffre descend à environ 15.8 Go au prix d'une certaine qualité, tandis que Q8_0 demande environ 35.2 Go pour la meilleure qualité possible avec ce modèle.

Sur quelle taille de carte graphique Qwen3.8-27B tient-il ?

Qwen3.8-27B nécessite environ 19.7 Go en Q4_K_M : une carte de 24 Go est donc la plus petite taille courante qui le conserve entièrement en VRAM. En dessous, il faut décharger des couches vers la RAM système, ce qui vous coûte généralement l'essentiel de votre vitesse de génération.

Quelle quantification choisir pour Qwen3.8-27B ?

Utilisez Q4_K_M sauf si vous avez de la VRAM en réserve. Il demande environ 19.7 Go et ne perd presque rien face à la pleine précision. Q8_0 exige environ 35.2 Go pour un gain de qualité que peu de gens perçoivent en programmation ou en conversation. Consacrez plutôt la VRAM restante à un contexte plus long.

Quel est l'impact de la longueur de contexte sur la VRAM requise par Qwen3.8-27B ?

Les poids du modèle sont fixes, mais le cache KV croît linéairement avec le contexte. Pour Qwen3.8-27B avec un contexte de 128k, le cache pèse environ 4.1 Go ; en doublant à 256k, il atteint environ 8.3 Go. Désactiver la quantification du cache KV double encore ces valeurs.

Le même GPU peut-il exécuter d'autres modèles similaires à Qwen3.8-27B ?

Oui. Qwen3.8-27B nécessite environ 19.7 Go en Q4_K_M, et tout modèle dont les poids tiennent sur la même carte fonctionne dessus — y compris DiffusionGemma 26B-A4B (25.2B), Nemotron-3-Nano-30B-A3B (30B), North-Mini-Code-1.0 (30B), GLM-4.7-Flash (30.5B), Qwen3-30B-A3B (30.5B), Qwen3-Coder-30B-A3B (30.5B, basé sur Qwen3-30B-A3B). Les poids tiennent dans le même GPU ; la vitesse de génération varie (les modèles Mixture-of-Experts sont plus rapides, les modèles denses plus lents).

Comment les vitesses de tokens sont estimées

Deux métriques sont affichées par GPU : Lecture tok/s (la vitesse à laquelle le modèle ingère votre prompt) et Décodage tok/s (la vitesse à laquelle il renvoie les tokens). Elles modélisent des goulots d'étranglement fondamentalement différents.

📖

Lecture (Prefill)

Le prompt est traité en un seul passage parallèle. Il est limitée par le calcul : il sature les tensor cores du GPU.

lecture tok/s ≈ TFLOPS × readFactor × 400 ÷ activeParams

Décodage (Génération)

Chaque nouveau token nécessite de charger l'intégralité des poids actifs du modèle depuis la VRAM. Ce processus est limitée par la bande passante mémoire : le GPU attend les données, il ne calcule pas.

décodage tok/s ≈ bande passante × decodeFactor ÷ (poids + kv_cache)

Poids = (activeParams × bits ÷ 8) × 1,15 de surcharge. Cache KV par étape = activeParams × multiplicateur × contextK.

Facteurs d'utilisation par architecture

Architecture
Décodage
Lecture
Blackwell, Xe2
0.45
0.55
Ada Lovelace, RDNA 4, Battlemage
0.38
0.48
Ampere, Turing, RDNA 3, Xe-HPG
0.28
0.38
Volta, RDNA 1/2
0.2
0.25
Pré-tensor-core (Pascal, Maxwell, Kepler, GCN, Alchemist)
0.12
0.15

Gauche : facteur de décodage — Droite : facteur de lecture

Sources des données

Les TFLOPS et la bande passante mémoire proviennent de la base de données GPU. En leur absence, la bande passante se rabat sur un dictionnaire codé en dur.

Limites

Il s'agit d'estimations analytiques, pas de résultats de benchmarks. Utilisez-les comme une comparaison relative, pas comme une garantie de performance absolue.