Skip to main content

Phi-3 Medium con RTX 5090: ¿Compatible?

14B parámetros · 32GB VRAM (GDDR7) · NVIDIA

Compatible — la RTX 5090 puede ejecutar Phi-3 Medium

Calidad máxima disponible. La RTX 5090 tiene suficiente VRAM para FP16 completo.

Análisis de VRAM por cuantización

Cuantización VRAM requerida Tu GPU ¿Funciona?
FP16 (máxima calidad) 28 GB 32 GB ✓ Sí
Q8 (alta calidad) 14 GB 32 GB ✓ Sí
Q4 (recomendado) Recomendado 8 GB 32 GB ✓ Sí
Q2 (mínimo) 4.5 GB 32 GB ~ Parcial

Instalar con Ollama

Ejecuta este comando en tu terminal para descargar y correr Phi-3 Medium:

ollama run phi3:medium

Requiere Ollama instalado. Descárgalo gratis en ollama.ai

Rendimiento estimado

Velocidad estimada ~219 tok/s (muy rápida (tiempo real))
Margen de VRAM en Q4 +24 GB
Mejor cuantización disponible FP16
Ancho de banda de memoria 1792 GB/s

Comprar RTX 5090

La RTX 5090 es una opción premium para ejecutar Phi-3 Medium.

Aviso de afiliado: Este enlace es patrocinado. Podemos recibir una comisión sin coste adicional para ti.

Ver RTX 5090 en Amazon →