Skip to main content

Phi-3 Mini con RTX 3070 Ti: ¿Compatible?

3.8B parámetros · 8GB VRAM (GDDR6X) · NVIDIA

Compatible — la RTX 3070 Ti puede ejecutar Phi-3 Mini

Calidad máxima disponible. La RTX 3070 Ti tiene suficiente VRAM para FP16 completo.

Análisis de VRAM por cuantización

Cuantización VRAM requerida Tu GPU ¿Funciona?
FP16 (máxima calidad) 7.6 GB 8 GB ✓ Sí
Q8 (alta calidad) 4 GB 8 GB ✓ Sí
Q4 (recomendado) Recomendado 2.5 GB 8 GB ✓ Sí
Q2 (mínimo) 1.5 GB 8 GB ~ Parcial

Instalar con Ollama

Ejecuta este comando en tu terminal para descargar y correr Phi-3 Mini:

ollama run phi3:mini

Requiere Ollama instalado. Descárgalo gratis en ollama.ai

Rendimiento estimado

Velocidad estimada ~238 tok/s (muy rápida (tiempo real))
Margen de VRAM en Q4 +5.5 GB
Mejor cuantización disponible FP16
Ancho de banda de memoria 608 GB/s

Comprar RTX 3070 Ti

La RTX 3070 Ti es una opción premium para ejecutar Phi-3 Mini.

Aviso de afiliado: Este enlace es patrocinado. Podemos recibir una comisión sin coste adicional para ti.

Ver RTX 3070 Ti en Amazon →