Vai al contenuto principale
Motore locale pronto

Yi 1.5 34B

10 GPU consumer possono eseguire Yi 1.5 34B in Q4 nativamente. Soglie VRAM precise e benchmark qui sotto.

10 GPU compatibili
19 con offloading
34B parametri
4K contesto
Top pick
RTX 5090 · 32 GB VRAM runs Q4 natively

Prices and availability may change · affiliate link

Javier Morales
Javier Morales Specialista hardware IA — 8 anni di esperienza
GitHub: github.com/javier-morales-ia

llama.cpp 0.2.x · CUDA 12 · ROCm 6 · aggiornato mensilmente · metodologia →

Contesto di esecuzione

ARCHITETTURA TRANSFORMER
CONTESTO 4K TOKENS
QUANTIZZAZIONE 4-BIT GGUF
FORNITORE 01.AI
LICENZA Apache-2.0
REQUISITO VRAM
20 GB
4GB 8GB 12GB 16GB 24GB+
Decisione hardware

Questo modello richiede unaGPU fascia alta (24 GB VRAM)

Minimo

RX 7900 XT

Funziona in Q4 — utilizzabile, con qualche attesa

20 GB VRAM
Vedi configurazione compatibile
Bilanciato

M4 Max 48GB

Miglior rapporto valore/prestazioni per uso quotidiano

48 GB VRAM
Vedi configurazione compatibile
Ottimale

RTX 5090

Qualita massima, inferenza piu rapida

32 GB VRAM
Vedi configurazione compatibile

Compatible GPUs for Yi 1.5 34B

Le migliori opzioni per compatibilita, margine VRAM e valore: prezzi e disponibilita possono cambiare.

RTX 5090
32 GB VRAM · Q4 nativo Amazon

RTX 5090

0.0 (0 recensioni)

Pro

  • Runs Yi 1.5 34B at Q4 natively
  • 32 GB VRAM — adequate headroom
RTX 4090
24 GB VRAM · Q4 nativo Amazon

RTX 4090

4.8 (2,100 recensioni)

Pro

  • Runs Yi 1.5 34B at Q4 natively
  • 24 GB VRAM — adequate headroom
M4 Ultra
128 GB VRAM · Q4 nativo Amazon

M4 Ultra

0.0 (0 recensioni)

Pro

  • Runs Yi 1.5 34B at Q4 natively
  • 128 GB VRAM — adequate headroom

Alcuni link sono link di affiliazione Amazon. Potremmo ricevere una commissione senza costi aggiuntivi per te. Il cookie Amazon puo durare fino a 24 ore dopo il clic.

*Prezzi e disponibilita possono cambiare. Alcuni link sono affiliati.

Requisiti di sistema

VRAM GPU 20 GB GPU fascia alta
RAM di sistema 30 GB 32 GB recommended
Archiviazione 20 GB Q4 · SSD consigliato
CPU Qualsiasi CPU moderna GPU richiesta

VRAM per quantizzazione

Quantizzazione VRAM necessaria Spazio su disco Qualita
FP16 (qualita massima) 68 GB 68 GB Massima
Q8 (alta qualita) 34 GB 34 GB Quasi senza perdita
Q4 (consigliato) Miglior equilibrio 20 GB 20 GB Consigliata
Q2 (minimo) 10 GB 10 GB Perdita di qualita

Dettagli modello

Sviluppatore 01.AI
Parametri 34B
Finestra di contesto 4,096 token
Licenza Apache-2.0
Casi d uso chat, coding, reasoning, analysis
Rilasciato 2024-05

Installa con Ollama

ollama run yi:34b

Hugging Face

01-ai/Yi-1.5-34B-Chat
Vedi su HF →
Requisiti tecnici

La tua GPU puo eseguire Yi 1.5 34B?

Yi 1.5 34B richiede <strong class="text-primary-container">20 GB di VRAM</strong> in Q4. 10 GPU consumer raggiungono questa soglia. Sotto 8 GB o 18 GB incontrerai una latenza di offload significativa.

10GB Minimo critico
20GB Ottimale Q4
34GB Alta qualita Q8
68GB Massimo FP16

Matrice prestazioni hardware

10 Q4 nativo · 19 offload

Unita GPU VRAM Compatibilita Velocita stimata Azione
RTX 5090 32GB Ottimale Calcola →
RTX 4090 24GB Ottimale Calcola →
M4 Ultra 128GB Ottimale 27 tok/s Calcola →
M3 Ultra 192GB Ottimale 21 tok/s Calcola →
RTX 3090 24GB Ottimale Calcola →
M4 Max 48GB 48GB Ottimale 14 tok/s Calcola →
RX 7900 XTX 24GB Ottimale Calcola →
M4 Max 36GB 36GB Ottimale Calcola →
RX 7900 XT 20GB Ottimale Calcola →
M4 Pro 24GB Ottimale Calcola →
RTX 5080 16GB Offload Calcola →
RTX 4080 Super 16GB Offload Calcola →
RTX 5070 Ti 16GB Offload Calcola →
RTX 4070 Ti Super 16GB Offload Calcola →
RTX 3080 Ti 12GB Offload Calcola →
RTX 5070 12GB Offload Calcola →
RTX 3080 10GB Offload Calcola →
RX 7800 XT 16GB Offload Calcola →
RX 6800 XT 16GB Offload Calcola →
RTX 4070 12GB Offload Calcola →
RTX 4060 Ti 16GB 16GB Offload Calcola →
RX 7700 XT 12GB Offload Calcola →
RX 6700 XT 12GB Offload Calcola →
M3 Pro 18GB Offload Calcola →
RTX 2080 Ti 11GB Offload Calcola →
RTX 3060 12GB Offload Calcola →
M2 Pro 16GB Offload Calcola →
Arc A770 16GB 16GB Offload Calcola →
M1 Pro 16GB Offload Calcola →

GPU consigliate per Yi 1.5 34B

Benchmark reali
Nessuna recensione a pagamento
Scelta editoriale
Basato sui dati

Le migliori opzioni per compatibilita, margine VRAM e valore: prezzi e disponibilita possono cambiare.

Alcuni link sono link di affiliazione Amazon. Potremmo ricevere una commissione senza costi aggiuntivi per te. Il cookie Amazon puo durare fino a 24 ore dopo il clic.

Yi 1.5 34B — Guida compatibilita

Yi 1.5 34B richiede una GPU di fascia alta come RTX 4090 o un Mac con M2 Ultra o superiore. La versione Q4 richiede 20 GB di VRAM. Consulta il calcolatore VRAM per valutare le opzioni.

Confronta le GPU per Yi 1.5 34B

Quale GPU conviene? Specifiche reali e benchmark a confronto.

Componenti compatibili

GPU che eseguono Yi 1.5 34B in Q4, ordinate per punteggio di prestazioni IA.

Benchmark reali
Nessuna recensione a pagamento
Basato sui dati
RTX 5090

NVIDIA · 32 GB VRAM

Q4 OK
> $1000
RTX 4090

NVIDIA · 24 GB VRAM

Q4 OK
> $1000
M4 Ultra

Apple · 128 GB VRAM

Q4 OK
27 tok/s > $1000
M3 Ultra

Apple · 192 GB VRAM

Q4 OK
21 tok/s > $1000
RTX 3090

NVIDIA · 24 GB VRAM

Q4 OK
$600–1000
M4 Max 48GB

Apple · 48 GB VRAM

Q4 OK
14 tok/s > $1000

Alcuni link sono link di affiliazione Amazon. Potremmo ricevere una commissione senza costi aggiuntivi per te. Il cookie Amazon puo durare fino a 24 ore dopo il clic.

Alternative piu pratiche

Modelli simili nella categoria chat con requisiti VRAM comparabili.

Non sai quale GPU ti serve per Yi 1.5 34B?

Il calcolatore VRAM ti dice esattamente quale quantizzazione puo gestire il tuo hardware.

RTX 5090

Controlla disponibilita

Prezzi aggiornati ogni giorno