Skip to main content

Mistral Nemo 12B con M4 Max 36GB: ¿Compatible?

12B parámetros · 36GB VRAM (Unified Memory) · Apple

Compatible — la M4 Max 36GB puede ejecutar Mistral Nemo 12B

Calidad máxima disponible. La M4 Max 36GB tiene suficiente VRAM para FP16 completo.

Análisis de VRAM por cuantización

Cuantización VRAM requerida Tu GPU ¿Funciona?
FP16 (máxima calidad) 24 GB 36 GB ✓ Sí
Q8 (alta calidad) 12 GB 36 GB ✓ Sí
Q4 (recomendado) Recomendado 7 GB 36 GB ✓ Sí
Q2 (mínimo) 3.5 GB 36 GB ~ Parcial

Instalar con Ollama

Ejecuta este comando en tu terminal para descargar y correr Mistral Nemo 12B:

ollama run mistral-nemo:12b

Requiere Ollama instalado. Descárgalo gratis en ollama.ai

Rendimiento estimado

Velocidad estimada ~76 tok/s (muy rápida (tiempo real))
Margen de VRAM en Q4 +29 GB
Mejor cuantización disponible FP16
Ancho de banda de memoria 546 GB/s

Comprar M4 Max 36GB

La M4 Max 36GB es una opción premium para ejecutar Mistral Nemo 12B.

Aviso de afiliado: Este enlace es patrocinado. Podemos recibir una comisión sin coste adicional para ti.

Ver M4 Max 36GB en Amazon →