Famille GLM · 7B paramètres

GLM 5.3 7B

GLM 5.3 (Zhipu) : dense 7B spécialisé code et raisonnement, 128k contexte, ~4,1 Go VRAM Q4. Léger, tourne sur GPU 6-8 Go, licence MIT.

🇨🇳 Zhipu AI·Licence MIT·Contexte 125k tokens·Sortie 2026-08← Catalogue

01Ce qu'il sait faire

Points forts
  • Dense 7B : tient sur GPU 6-8 Go en Q4 (~4,1 Go)
  • Spécialisé code et raisonnement
  • Licence MIT permissive
  • 128k contexte natif
Limites à connaître
  • Poids gated sur Hugging Face (acceptation requise)
  • Modèle 7B : en retrait des flagships code de plus grande taille
Architecture
Transformer dense · 7B paramètres · 128k contexte · code & raisonnement
Entraînement
GLM 5.3 de Zhipu AI / THUDM en variante dense 7B, orientée génération de code et raisonnement. Licence MIT (famille GLM).
Idéal pour
Complétion de codeRaisonnement localGPU 6-8 Go

02Mémoire requise

VRAM GPU approximative pour faire tourner ce modèle, overhead contexte de 4k tokens inclus. Pour un contexte plus long, ajoutez ~1 Go par tranche de 8k tokens.

Q4_K_M
Le plus léger, ~5% de perte
4.1 Go
Q5_K_M
Bon compromis qualité/taille
5 Go
Q8_0
Quasi-indistinguable de FP16
7 Go
FP16
Pleine précision — usage serveur
14 Go
Fallback CPU · Si vous n'avez pas de GPU, comptez 9 Go de RAM minimum pour faire tourner ce modèle à vitesse réduite.

Quel GPU pour faire tourner GLM 5.3 7B ?

Pour exécuter GLM 5.3 7B en local en quantification Q4, il faut environ 4.1 Go de VRAM. Le meilleur rapport prix/performance : un RTX 5060 (8 Go de VRAM).

Où acheter le RTX 5060
DartyVoir RTX 5060AmazonVoir RTX 5060

Liens affiliés — commission possible sans surcoût pour vous, reco indépendante. En tant que Partenaire Amazon, QuelLLM réalise un bénéfice sur les achats remplissant les conditions requises.

En mobilité : GLM 5.3 7B tourne aussi sur un PC portable RTX (16 Go de VRAM) →

03Vitesse attendue

Tokens générés par seconde en Q4_K_M, contexte 4k. Au-delà de 20 t/s, la lecture est confortable. En dessous de 10 t/s, c'est juste pour tester.

Entrée de gamme
~32t/s
GTX 1650, RX 6600, MBA M2 8Go
Milieu de gamme
~50t/s
RTX 4060, 4070, MBP M3 Pro
Haut de gamme
~75t/s
RTX 4090, M4 Max, Radeon 7900

04Installer

Le chemin le plus court : Ollama. Une commande, le modèle est téléchargé et lancé.

$ollama pull glm-5.3
Premier téléchargement : entre 2 et 40 Go selon la quantization choisie. Espace disque à prévoir, connexion stable recommandée. Les relances suivantes sont instantanées.