Google

Gemma 3n

petites machines

Choisissez une taille : la mémoire vidéo indiquée correspond au fichier Q4_K_M (la quantisation du protocole) plus environ 1,5 Go pour un contexte de 4 000 tokens.

E2B

carte 8 Go
Paramètres
5,4 Md
Fichier Q4_K_M
2,6 Go
VRAM conseillée
≥ 4,1 Go
Contexte max
32 768

Pas encore mesuré

E4B

carte 8 Go
Paramètres
7,8 Md
Fichier Q4_K_M
3,9 Go
VRAM conseillée
≥ 5,4 Go
Contexte max
32 768

Pas encore mesuré

MoE (« 30B-A3B ») : toute la mémoire d'un 30B, mais la vitesse d'un modèle de 3 Md de paramètres actifs. « > 32 Go » : plusieurs cartes, ou une partie du modèle en mémoire système (bien plus lent).