Liquid AI · Hugging Face
LFM2.5
petites machinesMoE
Choisissez une taille : la mémoire vidéo indiquée correspond au fichier Q4_K_M (la quantisation du protocole) plus environ 1,5 Go pour un contexte de 4 000 tokens.
1.2B
carte 8 Go- Paramètres
- 1,2 Md
- Fichier Q4_K_M
- 0,7 Go
- VRAM conseillée
- ≥ 2,2 Go
- Contexte max
- 128 000
Pas encore mesuré
2.6B
carte 8 Go- Paramètres
- 2,7 Md
- Fichier Q4_K_M
- 1,6 Go
- VRAM conseillée
- ≥ 3,1 Go
- Contexte max
- 131 072
Pas encore mesuré
8B-A1B
carte 8 Go- Paramètres
- 8,5 Md · 1 Md actifs
- Fichier Q4_K_XL
- 5,0 Go
- VRAM conseillée
- ≥ 6,5 Go
- Contexte max
- 128 000
Pas encore mesuré
MoE (« 30B-A3B ») : toute la mémoire d'un 30B, mais la vitesse d'un modèle de 3 Md de paramètres actifs. « > 32 Go » : plusieurs cartes, ou une partie du modèle en mémoire système (bien plus lent).