Skip to main content

Llama 3.2 3B con RX 6700 XT: ¿Compatible?

3B parámetros · 12GB VRAM (GDDR6) · AMD

Compatible — la RX 6700 XT puede ejecutar Llama 3.2 3B

Calidad máxima disponible. La RX 6700 XT tiene suficiente VRAM para FP16 completo.

Análisis de VRAM por cuantización

Cuantización VRAM requerida Tu GPU ¿Funciona?
FP16 (máxima calidad) 7.2 GB 12 GB ✓ Sí
Q8 (alta calidad) 3.6 GB 12 GB ✓ Sí
Q4 (recomendado) Recomendado 1.8 GB 12 GB ✓ Sí
Q2 (mínimo) 0.9 GB 12 GB ~ Parcial

Instalar con Ollama

Ejecuta este comando en tu terminal para descargar y correr Llama 3.2 3B:

ollama run llama3.2:3b

Requiere Ollama instalado. Descárgalo gratis en ollama.ai

Rendimiento estimado

Velocidad estimada ~208 tok/s (muy rápida (tiempo real))
Margen de VRAM en Q4 +10.2 GB
Mejor cuantización disponible FP16
Ancho de banda de memoria 384 GB/s

Comprar RX 6700 XT

La RX 6700 XT es una opción premium para ejecutar Llama 3.2 3B.

Aviso de afiliado: Este enlace es patrocinado. Podemos recibir una comisión sin coste adicional para ti.

Ver RX 6700 XT en Amazon →