Granite 4.1 8B

Apache 2.0

IBM · 8B · Densa

Balanced general-purpose enterprise model Comprueba si tu GPU o Mac puede ejecutar Granite 4.1 8B localmente — 4.5 GB mínimo, 7.5 GB recomendado.

2026-04128K contexto

Opciones de cuantización

CuantBitsVRAMCalidadEstado
Q2_K23.1 GBlow
Q3_K_M34.1 GBmoderate
Q4_K_M44.6 GBgood
Q5_K_M55.6 GBgood
Q6_K66.6 GBexcellent
Q8_088.7 GBexcellent
F161616.9 GBlossless

¿Puedo ejecutar Granite 4.1 8B localmente?

¿Puedo ejecutar Granite 4.1 8B localmente?
Granite 4.1 8B necesita alrededor de 4.5 GB de memoria como mínimo y 7.5 GB recomendados. Abre esta página para evaluarlo con tu GPU o Mac, y luego ejecútalo con runai, Ollama o LM Studio.
¿Cuánta VRAM necesita Granite 4.1 8B?
En Q4_K_M, Granite 4.1 8B usa aproximadamente 4.6 GB de VRAM. Cuantizaciones más altas necesitan más memoria; las más bajas caben en tarjetas más ajustadas con una pérdida de calidad.