Skip to main content

Mistral Small 3.2 con RX 7900 XTX: ¿Compatible?

24B parámetros · 24GB VRAM (GDDR6) · AMD

Compatible — la RX 7900 XTX puede ejecutar Mistral Small 3.2

Cuantización Q4 recomendada. 10.8GB de margen disponible.

Análisis de VRAM por cuantización

Cuantización VRAM requerida Tu GPU ¿Funciona?
FP16 (máxima calidad) 52.8 GB 24 GB ✗ No
Q8 (alta calidad) 26.4 GB 24 GB ✗ No
Q4 (recomendado) Recomendado 13.2 GB 24 GB ✓ Sí
Q2 (mínimo) 6.6 GB 24 GB ~ Parcial

Instalar con Ollama

Ejecuta este comando en tu terminal para descargar y correr Mistral Small 3.2:

ollama run mistral-small3.2:24b

Requiere Ollama instalado. Descárgalo gratis en ollama.ai

Rendimiento estimado

Velocidad estimada ~71 tok/s (muy rápida (tiempo real))
Margen de VRAM en Q4 +10.8 GB
Mejor cuantización disponible Q4
Ancho de banda de memoria 960 GB/s

Comprar RX 7900 XTX

La RX 7900 XTX es una opción ajustada para ejecutar Mistral Small 3.2.

Aviso de afiliado: Este enlace es patrocinado. Podemos recibir una comisión sin coste adicional para ti.

Ver RX 7900 XTX en Amazon →