RTX PRO 6000 Blackwell Workstation Edition
NVIDIA
ExcellentFait tourner Qwen3 235B-A22B Q4_K_M entièrement en mémoire
Modèle · Alibaba Qwen
Qwen3 235B-A22B : VRAM et matériel nécessaires
En Q4_K_M avec un contexte de 8K, Qwen3 235B-A22B demande environ 143 Go : un GPU de – ou plus le fait tourner entièrement en VRAM.
- Paramètres235B
- Actifs22B
- Contexte max128K
- LicenceApache-2.0
Caractéristiques
- Organisation
- Alibaba Qwen
- Architecture
- qwen3_moe
- Sortie
- avril 2025
- Couches
- 94
- Dimension cachée
- 4096
- Têtes d'attention
- 64
- Têtes KV
- 4
- Dimension par tête
- 128
- Vocabulaire
- 151 936
- Cache KV pour 1K tokens (f16)
- 0,184 Go
- Dépôt
- Qwen/Qwen3-235B-A22B
Spécification officielleDonnées mises à jour il y a 24 joursSource: Hugging Face config.json + model card
Quantifications et mémoire
| Quantification | Taille du fichier | Mémoire nécessaire | Mémoire GPU minimale | Qualité |
|---|---|---|---|---|
| BF16 | 438 Go | ~462 Go | – | Référence (non quantifié) |
| Q8_0 | 233 Go | ~247 Go | – | Quasi sans perte |
| Q6_K | 180 Go | ~191 Go | – | Quasi sans perte |
| Q5_K_M | 155 Go | ~166 Go | – | Très bonne |
| Q4_K_MLa plus utilisée | 132 Go | ~143 Go | – | Bonne — le choix courant |
| IQ4_XS | 117 Go | ~131 Go | – | Bonne — le choix courant |
| Q3_K_M | 105 Go | ~117 Go | – | Perte perceptible |
| Q2_K | 79,8 Go | ~93,4 Go | 96 Go | Perte importante |
Tailles de fichier : non disponibles tant qu'elles ne sont pas importées du dépôt du modèle. Mémoire = poids (estimés d'après les bits par poids) + cache KV + surcoût runtime + marge de sécurité. (BF16 ≈ 16 bpw, Q8_0 ≈ 8,5 bpw, Q6_K ≈ 6,57 bpw, Q5_K_M ≈ 5,7 bpw, Q4_K_M ≈ 4,9 bpw, IQ4_XS ≈ 4,46 bpw, Q3_K_M ≈ 4 bpw, Q2_K ≈ 3,17 bpw)
Q4, Q5 ou Q8 : comment choisir sa quantification
Les GPU qui font tourner Qwen3 235B-A22B
| RTX 509032 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
|---|---|
| RTX 409024 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RTX 309024 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RX 7900 XTX24 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RTX 5060 Ti 16 GB16 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RTX 5070 Ti16 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RTX 508016 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RTX 4060 Ti 16 GB16 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RTX 4070 Ti SUPER16 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RX 9070 XT16 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RTX 3060 12 GB12 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RTX 407012 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RTX 507012 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
| RTX 40608 Go · 64 Go RAM~141 Go · Pas de données | Incompatible |
Les Mac qui font tourner Qwen3 235B-A22B
| M3 Ultra (80-core GPU) · 512 GoMac Studio~141 Go · 20–32 tok/s estimation | Excellent |
|---|---|
| M4 Max (40-core GPU) · 128 GoMacBook Pro 14, MacBook Pro 16~141 Go · Pas de données | Incompatible |
| M3 Max (40-core GPU) · 128 GoMacBook Pro 14, MacBook Pro 16~141 Go · Pas de données | Incompatible |
| M4 Pro (20-core GPU) · 64 GoMac mini, MacBook Pro 14~141 Go · Pas de données | Incompatible |
| M4 Max (32-core GPU) · 36 GoMacBook Pro 14, MacBook Pro 16~141 Go · Pas de données | Incompatible |
| M4 · 32 GoMacBook Air, MacBook Pro 14~141 Go · Pas de données | Incompatible |
| M5 · 32 GoMacBook Pro 14~141 Go · Pas de données | Incompatible |
| M3 · 24 GoMacBook Air, MacBook Pro 14~141 Go · Pas de données | Incompatible |
EstimationDonnées mises à jour il y a 24 joursSource: moteur Run LLM Locally
Les limites en clair
Qwen3 235B-A22B est un modèle à mélange d'experts : ses 235 Md de paramètres doivent tous être en mémoire, mais seuls 22 Md sont lus par token ; il génère donc bien plus vite qu'un modèle dense de même taille.
Le cache KV grandit avec le contexte : à 32K, il ajoute environ 5,9 Go aux poids.
Avec moins de 8 Go de VRAM, choisissez une quantification plus petite ou un modèle plus petit de la même famille.
Où acheter
Les prix et les liens suivent le marché choisi.
Mac Studio M3 Ultra
Apple Silicon
ExcellentFait tourner Qwen3 235B-A22B Q4_K_M entièrement en mémoire
Aucune offre importée pour ce marché : le lien ouvre une recherche sur la boutique.
Questions fréquentes
Combien de VRAM faut-il pour Qwen3 235B-A22B ?
Environ 143 Go en Q4_K_M avec un contexte de 8K, cache KV et surcoût compris. En Q8_0, il faut environ 247 Go. Un contexte plus long ajoute davantage : environ 5,9 Go de cache KV à 32K.
Qwen3 235B-A22B tourne-t-il sur Mac ?
Oui, sur un Mac dont le GPU peut utiliser au moins 141 Go, par exemple M3 Ultra (80-core GPU) 512 Go. Par défaut, macOS laisse le GPU utiliser environ deux tiers à trois quarts de la mémoire unifiée.