Microsoft

Phi-4

Choisissez une taille : la mémoire vidéo indiquée correspond au fichier Q4_K_M (la quantisation du protocole) plus environ 1,5 Go pour un contexte de 4 000 tokens.

mini 3.8B

carte 8 Go
Paramètres
3,8 Md
Fichier Q4_K_M
2,3 Go
VRAM conseillée
≥ 3,8 Go
Contexte max
131 072

Pas encore mesuré

14B

carte 12 Go
Paramètres
14,7 Md
Fichier Q4_K_M
8,4 Go
VRAM conseillée
≥ 9,9 Go
Contexte max
16 384

Pas encore mesuré

MoE (« 30B-A3B ») : toute la mémoire d'un 30B, mais la vitesse d'un modèle de 3 Md de paramètres actifs. « > 32 Go » : plusieurs cartes, ou une partie du modèle en mémoire système (bien plus lent).