Granite 4.1 3B

Apache 2.0

IBM · 3B · Densa

Compact enterprise model for edge and constrained environments Comprueba si tu GPU o Mac puede ejecutar Granite 4.1 3B localmente — 1.7 GB mínimo, 2.8 GB recomendado.

2026-04128K contexto

Opciones de cuantización

CuantBitsVRAMCalidadEstado
Q2_K21.5 GBlow
Q3_K_M31.8 GBmoderate
Q4_K_M42 GBgood
Q5_K_M52.4 GBgood
Q6_K62.8 GBexcellent
Q8_083.6 GBexcellent
F16166.6 GBlossless

¿Puedo ejecutar Granite 4.1 3B localmente?

¿Puedo ejecutar Granite 4.1 3B localmente?
Granite 4.1 3B necesita alrededor de 1.7 GB de memoria como mínimo y 2.8 GB recomendados. Abre esta página para evaluarlo con tu GPU o Mac, y luego ejecútalo con runai, Ollama o LM Studio.
¿Cuánta VRAM necesita Granite 4.1 3B?
En Q4_K_M, Granite 4.1 3B usa aproximadamente 2 GB de VRAM. Cuantizaciones más altas necesitan más memoria; las más bajas caben en tarjetas más ajustadas con una pérdida de calidad.