Skip to main content

Magistral Small 24B con RTX 5080: ¿Compatible?

24B parámetros · 16GB VRAM (GDDR7) · NVIDIA

Compatible — la RTX 5080 puede ejecutar Magistral Small 24B

Cuantización Q4 recomendada. 2.8000000000000007GB de margen disponible.

Análisis de VRAM por cuantización

Cuantización VRAM requerida Tu GPU ¿Funciona?
FP16 (máxima calidad) 52.8 GB 16 GB ✗ No
Q8 (alta calidad) 26.4 GB 16 GB ✗ No
Q4 (recomendado) Recomendado 13.2 GB 16 GB ✓ Sí
Q2 (mínimo) 6.6 GB 16 GB ~ Parcial

Instalar con Ollama

Ejecuta este comando en tu terminal para descargar y correr Magistral Small 24B:

ollama run magistral:24b

Requiere Ollama instalado. Descárgalo gratis en ollama.ai

Rendimiento estimado

Velocidad estimada ~71 tok/s (muy rápida (tiempo real))
Margen de VRAM en Q4 +2.8000000000000007 GB
Mejor cuantización disponible Q4
Ancho de banda de memoria 960 GB/s

Comprar RTX 5080

La RTX 5080 es una opción ajustada para ejecutar Magistral Small 24B.

Aviso de afiliado: Este enlace es patrocinado. Podemos recibir una comisión sin coste adicional para ti.

Ver RTX 5080 en Amazon →