Skip to main content

Phi-3 Mini con RTX 4060: ¿Compatible?

3.8B parámetros · 8GB VRAM (GDDR6) · NVIDIA

Compatible — la RTX 4060 puede ejecutar Phi-3 Mini

Calidad máxima disponible. La RTX 4060 tiene suficiente VRAM para FP16 completo.

Análisis de VRAM por cuantización

Cuantización VRAM requerida Tu GPU ¿Funciona?
FP16 (máxima calidad) 7.6 GB 8 GB ✓ Sí
Q8 (alta calidad) 4 GB 8 GB ✓ Sí
Q4 (recomendado) Recomendado 2.5 GB 8 GB ✓ Sí
Q2 (mínimo) 1.5 GB 8 GB ~ Parcial

Instalar con Ollama

Ejecuta este comando en tu terminal para descargar y correr Phi-3 Mini:

ollama run phi3:mini

Requiere Ollama instalado. Descárgalo gratis en ollama.ai

Rendimiento estimado

Velocidad estimada ~106 tok/s (muy rápida (tiempo real))
Margen de VRAM en Q4 +5.5 GB
Mejor cuantización disponible FP16
Ancho de banda de memoria 272 GB/s

Comprar RTX 4060

La RTX 4060 es una opción premium para ejecutar Phi-3 Mini.

Aviso de afiliado: Este enlace es patrocinado. Podemos recibir una comisión sin coste adicional para ti.

Ver RTX 4060 en Amazon →