Por Javier Morales · Actualizado: 31 de marzo de 2026 · Alibaba

Cómo correr Qwen2.5 3B en local con Ollama

Transparencia: Algunos enlaces de hardware son de afiliado (Amazon). Esto no afecta nuestra evaluación.

Correr Qwen2.5 3B en local es más sencillo de lo que parece. Con Ollama puedes tener este modelo de 3B parámetros funcionando en tu PC en menos de 5 minutos. Solo necesitas 1.9 GB de VRAM para la versión Q4 y conexión a internet para la descarga inicial.

En esta guía cubrimos los requisitos exactos de hardware, el proceso de instalación paso a paso, los comandos necesarios y ejemplos de uso para sacarle el máximo partido a Qwen2.5 3B desde tu propio hardware.

Requisitos de hardware para Qwen2.5 3B

Cuantización	VRAM necesaria	Notas
FP16 (máxima calidad)	6 GB	Calidad de referencia. Solo GPUs con mucha VRAM.
Q8 (alta calidad)	3 GB	Recomendado si tienes suficiente VRAM.
Q4 (equilibrado)	1.9 GB (recomendado)	El mejor equilibrio calidad/VRAM. Recomendado.
Q2 (mínimo)	1 GB	Solo si tu VRAM es muy limitada. Pérdida notable.

Sin GPU (solo CPU): Qwen2.5 3B puede correr en CPU con velocidad de aproximadamente 20 tokens/segundo en un Intel Core i7. Funcional pero lento para uso intensivo.

Especificaciones de Qwen2.5 3B

Parámetros

1.9 GB

VRAM Q4

131K

Contexto

Alibaba

Proveedor

Chat general Programación edge

Paso 1: Instalar Ollama

Ollama es la forma más sencilla de correr Qwen2.5 3B en local. Disponible para Windows, macOS y Linux.

1 Descarga Ollama desde ollama.com (Windows, macOS o Linux)
2 Ejecuta el instalador y sigue las instrucciones (tarda menos de 1 minuto)
3 Verifica la instalación abriendo una terminal y ejecutando: ollama --version

Paso 2: Ejecutar Qwen2.5 3B

Una vez instalado Ollama, abre una terminal y ejecuta el siguiente comando. Ollama descargará el modelo automáticamente la primera vez:

Terminal Descarga automática


ollama run qwen2.5:3b

La primera ejecución descargará el modelo (~1.9 GB en Q4). Las ejecuciones posteriores son instantáneas. Una vez descargado, puedes chatear directamente en la terminal o usar la API local.

Paso 3: Ejemplos de uso de Qwen2.5 3B

Uso con la API REST local

Ollama expone una API en http://localhost:11434 compatible con OpenAI:

curl http://localhost:11434/api/generate -d '{
  "model": "qwen2.5:3b",
  "prompt": "Explica qué es la IA local en 2 párrafos",
  "stream": false
}'

Integración con Python (API OpenAI)

Si tienes instalado el cliente OpenAI de Python:

from openai import OpenAI

client = OpenAI(
    base_url="http://localhost:11434/v1",
    api_key="ollama",
)

response = client.chat.completions.create(
    model="qwen2.5:3b",
    messages=[{"role": "user", "content": "Hola, ¿cómo puedes ayudarme?"}]
)
print(response.choices[0].message.content)