Los mejores modelos de IA en local para 48 GB de VRAM
39 modelos abiertos caben en 48 GB de memoria gráfica en Q4_K_M con contexto de 8K; 16 tienen puntuación de inteligencia independiente. Aquí están clasificados, con el contexto más largo que admite cada uno.
Las mejores elecciones para 48 GB
#1 · ECI 149,4
Qwen3.8 27B
- Memoria
- 17 GB
- Contexto máx.
- 256K
- Velocidad
- ~28 t/s
#2 · ECI 146,5
Qwen3.6 27B
- Memoria
- 16,5 GB
- Contexto máx.
- 256K
- Velocidad
- ~29 t/s
#3 · ECI 143,9
Qwen3.6 35B A3B
- Memoria
- 21,2 GB
- Contexto máx.
- 256K
- Velocidad
- ~259 t/s
Velocidades en RTX A6000, la tarjeta NVIDIA más reciente con esta memoria. El contexto máximo es el más largo que aún carga sin desbordar a la RAM.
Todos los modelos puntuados que caben en 48 GB
| # | Modelo | ECI | Memoria | Contexto máx. |
|---|---|---|---|---|
| 1 | 149,4 | 17 GB | 256K | |
| 2 | 146,5 | 16,5 GB | 256K | |
| 3 | 143,9 | 21,2 GB | 256K | |
| 4 | 142,7 | 18,8 GB | 256K | |
| 5 | 142,5 | 21 GB | 256K | |
| 6 | 141,9 | 16,5 GB | 256K | |
| 7 | 139,6 | 18,3 GB | 256K | |
| 8 | 139,5 | 5,8 GB | 256K | |
| 9 | 137,8 | 11,3 GB | 128K | |
| 10 | 137,4 | 18,3 GB | 256K | |
| 11 | 133,2 | 14,9 GB | 32K | |
| 12 | 131,7 | 14,9 GB | 128K | |
| 13 | 131,4 | 14,9 GB | 128K | |
| 14 | 130,4 | 10,1 GB | 16K | |
| 15 | 127,3 | 42,4 GB | 16K | |
| 16 | 116,6 | 5,9 GB | 128K |
23 más que caben pero aún no tienen puntuación independiente
Los más grandes primero, con el contexto más largo que admite cada uno.
Qwen3 Coder Next79,7B · 64K
Kimi Linear 48B A3B49,1B · 1M
Olmo 3.1 32B Think32,2B · 64K
Nemotron 3.5 Lightning 30B A3B31,6B · 256K
GLM 4.7 Flash31,2B · 128K
North Mini Code 1.030,5B · 256K
Granite 4.2 30B29,3B · 64K
Devstral Small 2 24B24B · 128K
Ministral 3 14B14B · 128K
Gemma 4 12B12B · 256K
Ministral 3 8B8,9B · 256K
Granite 4.2 8B8,8B · 128K
Gemma 4 E4B8B · 128K
Olmo 3 7B7,3B · 64K
Gemma 4 E2B5,1B · 128K
Qwen3.5 4B4,7B · 256K
Ministral 3 3B3,9B · 256K
Granite 4.2 3B3,7B · 128K
Llama 3.2 3B3,2B · 128K
SmolLM3 3B3,1B · 64K
LFM2.5 2.6B2,7B · 128K
Qwen3.5 2B2,3B · 256K
Qwen3.5 0.8B0,9B · 256K
Memoria en Q4_K_M con contexto de 8K, incluidos los búferes del propio programa. Una cuantización menor cabe en menos; un contexto más largo necesita más.