Aller au contenu

Phi-4 14B

MicrosoftMicrosoft · 14,7B · Dense

Phi-4 14B est un modèle de 14,7B de Microsoft avec un contexte de 16K tokens. En Q4_K_M avec 8K de contexte, il demande environ 10,1 Go ; 14 Go laissent de la marge pour les longues conversations.

Hugging Face GGUF

Options de quantification

Quant.MémoireSur votre matériel
Q2_K—…
Q3_K_M—…
Q4_K_M—…
Q5_K_M—…
Q6_K—…
Q8_0—…
F16—…

Mémoire selon le contexte

En Q4_K_M. Le cache du contexte grandit à chaque token que le modèle garde en tête.

ContexteCache de contexteTotal
4K0,8 GB9,4 GB
8K1,6 GB10,1 GB

Partager une vitesse mesurée

Lancez l’une de ces commandes et collez toute la sortie ci-dessous (ou seulement les tokens par seconde) :

llama-bench -m model.gguf
ollama run model --verbose

Publié anonymement et conservé. Aucun compte ni adresse stockés, seulement une empreinte qui change chaque jour pour limiter à dix envois par jour.

Pour aller plus loin

Alternatives plus légères

Des modèles qui demandent moins de mémoire que Phi-4 14B et obtiennent un score proche ou meilleur.

Puis-je faire tourner Phi-4 14B en local ?

Puis-je faire tourner Phi-4 14B en local ?

Oui, si votre GPU ou votre Mac dispose d'environ 10,1 Go libres en Q4_K_M. Ouvrez cette page sur cet ordinateur pour voir la note de votre matériel, puis lancez-le avec llama.cpp, Ollama ou LM Studio.

De combien de mémoire Phi-4 14B a-t-il besoin ?

Environ 10,1 Go en Q4_K_M avec 8K de contexte et 16,4 Go en Q8_0. Les quantifications plus basses tiennent sur des cartes plus petites avec une perte de qualité ; les longs contextes s'ajoutent au total.