Skip to main content

StarCoder 2 3B con Arc A770 16GB: ¿Compatible?

3B parámetros · 16GB VRAM (GDDR6) · Intel

Compatible — la Arc A770 16GB puede ejecutar StarCoder 2 3B

Calidad máxima disponible. La Arc A770 16GB tiene suficiente VRAM para FP16 completo.

Análisis de VRAM por cuantización

Cuantización VRAM requerida Tu GPU ¿Funciona?
FP16 (máxima calidad) 6 GB 16 GB ✓ Sí
Q8 (alta calidad) 3 GB 16 GB ✓ Sí
Q4 (recomendado) Recomendado 1.9 GB 16 GB ✓ Sí
Q2 (mínimo) 1 GB 16 GB ~ Parcial

Instalar con Ollama

Ejecuta este comando en tu terminal para descargar y correr StarCoder 2 3B:

ollama run starcoder2:3b

Requiere Ollama instalado. Descárgalo gratis en ollama.ai

Rendimiento estimado

Velocidad estimada ~288 tok/s (muy rápida (tiempo real))
Margen de VRAM en Q4 +14.1 GB
Mejor cuantización disponible FP16
Ancho de banda de memoria 560 GB/s

Comprar Arc A770 16GB

La Arc A770 16GB es una opción premium para ejecutar StarCoder 2 3B.

Aviso de afiliado: Este enlace es patrocinado. Podemos recibir una comisión sin coste adicional para ti.

Ver Arc A770 16GB en Amazon →