Alibaba
Qwen2.5 Coder
code
Choisissez une taille : la mémoire vidéo indiquée correspond au fichier Q4_K_M (la quantisation du protocole) plus environ 1,5 Go pour un contexte de 4 000 tokens.
0.5B
carte 8 Go- Paramètres
- 0,5 Md
- Fichier Q4_K_M
- 0,4 Go
- VRAM conseillée
- ≥ 1,9 Go
- Contexte max
- 32 768
Pas encore mesuré
1.5B
carte 8 Go- Paramètres
- 1,5 Md
- Fichier Q4_K_M
- 0,9 Go
- VRAM conseillée
- ≥ 2,4 Go
- Contexte max
- 32 768
Pas encore mesuré
3B
carte 8 Go- Paramètres
- 3,1 Md
- Fichier Q4_K_M
- 1,8 Go
- VRAM conseillée
- ≥ 3,3 Go
- Contexte max
- 32 768
Pas encore mesuré
7B
carte 8 Go- Paramètres
- 7,6 Md
- Fichier Q4_K_M
- 4,4 Go
- VRAM conseillée
- ≥ 5,9 Go
- Contexte max
- 32 768
Pas encore mesuré
14B
carte 12 Go- Paramètres
- 14,8 Md
- Fichier Q4_K_M
- 8,4 Go
- VRAM conseillée
- ≥ 9,9 Go
- Contexte max
- 32 768
Pas encore mesuré
32B
carte 24 Go- Paramètres
- 32,8 Md
- Fichier Q4_K_M
- 18,5 Go
- VRAM conseillée
- ≥ 20,0 Go
- Contexte max
- 32 768
Pas encore mesuré
MoE (« 30B-A3B ») : toute la mémoire d'un 30B, mais la vitesse d'un modèle de 3 Md de paramètres actifs. « > 32 Go » : plusieurs cartes, ou une partie du modèle en mémoire système (bien plus lent).