Saltar al contenido

DeepSeek V4 Pro

MoE

DeepSeekDeepSeek · 1,6T (49B activos) · Mezcla de expertos

DeepSeek V4 Pro es un modelo de 1,6T de DeepSeek con un contexto de 1M tokens. En Q4_K_M con 8K de contexto necesita unos 886,8 GB; con 1110 GB tienes margen para conversaciones largas.

Hugging Face GGUF

Mezcla de expertos

Parámetros: 1,6T · Activos: 49B

Los 1,6T parámetros se cargan en memoria, pero sólo 49B trabajan en cada token, así que va a la velocidad de un modelo mucho más pequeño.

Opciones de cuantización

Cuant.MemoriaEn tu hardware
Q2_K—…
Q3_K_M—…
Q4_K_M—…
Q5_K_M—…
Q6_K—…
Q8_0—…
F16—…

Memoria según el contexto

En Q4_K_M. La caché del contexto crece con cada token que el modelo recuerda.

ContextoCaché de contextoTotal
4K0,5 GB886,4 GB
8K1 GB886,8 GB
32K3,8 GB889,7 GB
128K15,3 GB901,1 GB
256K30,5 GB916,4 GB

Comparte una velocidad medida

Ejecuta uno de estos y pega abajo la salida completa (o sólo los tokens por segundo):

llama-bench -m model.gguf
ollama run model --verbose

Se publica de forma anónima y se conserva. No guardamos cuenta ni dirección, sólo un hash que cambia cada día para limitar a diez envíos diarios.

Siguiente paso

El hardware mínimo donde va bien

Equipos de escritorio con la menor memoria que dan a DeepSeek V4 Pro nota A o S en Q4_K_M.

Ningún equipo de escritorio del catálogo lo ejecuta con nota A o mejor.

¿Puedo ejecutar DeepSeek V4 Pro en local?

¿Puedo ejecutar DeepSeek V4 Pro en local?

Sí, si tu GPU o tu Mac tiene unos 886,8 GB libres para él en Q4_K_M. Abre esta página en ese ordenador para ver la nota de tu hardware exacto y arráncalo con llama.cpp, Ollama o LM Studio.

¿Cuánta memoria necesita DeepSeek V4 Pro?

Unos 886,8 GB en Q4_K_M con 8K de contexto y 1583,5 GB en Q8_0. Las cuantizaciones más bajas caben en tarjetas más pequeñas con algo de pérdida de calidad; los contextos largos suman al total.