Skip to main content

Mixtral 8x7B con M4 Max 36GB: ¿Compatible?

46.7B parámetros · 36GB VRAM (Unified Memory) · Apple

Compatible — la M4 Max 36GB puede ejecutar Mixtral 8x7B

Cuantización Q4 recomendada. 10GB de margen disponible.

Análisis de VRAM por cuantización

Cuantización VRAM requerida Tu GPU ¿Funciona?
FP16 (máxima calidad) 93 GB 36 GB ✗ No
Q8 (alta calidad) 47 GB 36 GB ✗ No
Q4 (recomendado) Recomendado 26 GB 36 GB ✓ Sí
Q2 (mínimo) 14 GB 36 GB ~ Parcial

Instalar con Ollama

Ejecuta este comando en tu terminal para descargar y correr Mixtral 8x7B:

ollama run mixtral:8x7b

Requiere Ollama instalado. Descárgalo gratis en ollama.ai

Rendimiento estimado

Velocidad estimada ~21 tok/s (rápida (cómoda para uso diario))
Margen de VRAM en Q4 +10 GB
Mejor cuantización disponible Q4
Ancho de banda de memoria 546 GB/s

Comprar M4 Max 36GB

La M4 Max 36GB es una opción ajustada para ejecutar Mixtral 8x7B.

Aviso de afiliado: Este enlace es patrocinado. Podemos recibir una comisión sin coste adicional para ti.

Ver M4 Max 36GB en Amazon →