Skip to main content

Mistral 7B con RX 7700 XT: ¿Compatible?

7B parámetros · 12GB VRAM (GDDR6) · AMD

Compatible — la RX 7700 XT puede ejecutar Mistral 7B

Alta calidad disponible. 7.5GB de margen sobre Q4.

Análisis de VRAM por cuantización

Cuantización VRAM requerida Tu GPU ¿Funciona?
FP16 (máxima calidad) 14 GB 12 GB ✗ No
Q8 (alta calidad) 7 GB 12 GB ✓ Sí
Q4 (recomendado) Recomendado 4.5 GB 12 GB ✓ Sí
Q2 (mínimo) 2.5 GB 12 GB ~ Parcial

Instalar con Ollama

Ejecuta este comando en tu terminal para descargar y correr Mistral 7B:

ollama run mistral:7b

Requiere Ollama instalado. Descárgalo gratis en ollama.ai

Rendimiento estimado

Velocidad estimada ~94 tok/s (muy rápida (tiempo real))
Margen de VRAM en Q4 +7.5 GB
Mejor cuantización disponible Q8
Ancho de banda de memoria 432 GB/s

Comprar RX 7700 XT

La RX 7700 XT es una opción sólida para ejecutar Mistral 7B.

Aviso de afiliado: Este enlace es patrocinado. Podemos recibir una comisión sin coste adicional para ti.

Ver RX 7700 XT en Amazon →