Skip to main content

StarCoder 2 3B con M1 Pro: ¿Compatible?

3B parámetros · 16GB VRAM (Unified Memory) · Apple

Compatible — la M1 Pro puede ejecutar StarCoder 2 3B

Calidad máxima disponible. La M1 Pro tiene suficiente VRAM para FP16 completo.

Análisis de VRAM por cuantización

Cuantización VRAM requerida Tu GPU ¿Funciona?
FP16 (máxima calidad) 6 GB 16 GB ✓ Sí
Q8 (alta calidad) 3 GB 16 GB ✓ Sí
Q4 (recomendado) Recomendado 1.9 GB 16 GB ✓ Sí
Q2 (mínimo) 1 GB 16 GB ~ Parcial

Instalar con Ollama

Ejecuta este comando en tu terminal para descargar y correr StarCoder 2 3B:

ollama run starcoder2:3b

Requiere Ollama instalado. Descárgalo gratis en ollama.ai

Rendimiento estimado

Velocidad estimada ~103 tok/s (muy rápida (tiempo real))
Margen de VRAM en Q4 +14.1 GB
Mejor cuantización disponible FP16
Ancho de banda de memoria 200 GB/s

Comprar M1 Pro

La M1 Pro es una opción premium para ejecutar StarCoder 2 3B.

Aviso de afiliado: Este enlace es patrocinado. Podemos recibir una comisión sin coste adicional para ti.

Ver M1 Pro en Amazon →