32 GB VRAM · Q4 nativo Amazon
RTX 5090
Pro
- Runs Phi-3 Small at Q4 natively
- 32 GB VRAM — adequate headroom
Modello pronto per CPU
Phi-3 Small
40 GPU consumer possono eseguire Phi-3 Small in Q4 nativamente. Soglie VRAM precise e benchmark qui sotto.
40 GPU compatibili
7B parametri
128K contesto
Top pick
RTX 5090 · 32 GB VRAM runs Q4 natively
Prices and availability may change · affiliate link
Javier Morales Specialista hardware IA — 8 anni di esperienza
GitHub: github.com/javier-morales-ia
llama.cpp 0.2.x · CUDA 12 · ROCm 6 · aggiornato mensilmente · metodologia →
Contesto di esecuzione
ARCHITETTURA TRANSFORMER
CONTESTO 128K TOKENS
QUANTIZZAZIONE 4-BIT GGUF
FORNITORE Microsoft
LICENZA MIT
Decisione hardware
Questo modello richiede unaGPU entry-level (8 GB VRAM)
Minimo
GTX 1660 Super
Funziona in Q4 — utilizzabile, con qualche attesa
6 GB VRAM
Vedi configurazione compatibile Bilanciato
RTX 4060 Ti 16GB
Miglior rapporto valore/prestazioni per uso quotidiano
16 GB VRAM
Vedi configurazione compatibileCompatible GPUs for Phi-3 Small
Le migliori opzioni per compatibilita, margine VRAM e valore: prezzi e disponibilita possono cambiare.
24 GB VRAM · Q4 nativo Amazon
RTX 4090
Pro
- Runs Phi-3 Small at Q4 natively
- 24 GB VRAM — adequate headroom
128 GB VRAM · Q4 nativo Amazon
M4 Ultra
Pro
- Runs Phi-3 Small at Q4 natively
- 128 GB VRAM — adequate headroom
Alcuni link sono link di affiliazione Amazon. Potremmo ricevere una commissione senza costi aggiuntivi per te. Il cookie Amazon puo durare fino a 24 ore dopo il clic.
Come eseguire questo modello
CPU vs GPU per Phi-3 Small →
Calcolatore VRAM — verifica compatibilita immediata
RTX 5090
32 GB · Esegue Q4 nativamente · Controlla disponibilita
*Prezzi e disponibilita possono cambiare. Alcuni link sono affiliati.
Requisiti di sistema
VRAM GPU 4.5 GB GPU entry-level
RAM di sistema 16 GB
DDR4/DDR5
Archiviazione 4.1 GB Q4 · SSD consigliato
CPU i7 → 8 tok/s Funziona senza GPU
VRAM per quantizzazione
| Quantizzazione | VRAM necessaria | Spazio su disco | Qualita |
|---|---|---|---|
| FP16 (qualita massima) | 14 GB | 14 GB | Massima |
| Q8 (alta qualita) | 7 GB | 7 GB | Quasi senza perdita |
| Q4 (consigliato) Miglior equilibrio | 4.5 GB | 4.1 GB | Consigliata |
| Q2 (minimo) | 2.5 GB | 2.2 GB | Perdita di qualita |
Dettagli modello
| Sviluppatore | Microsoft |
| Parametri | 7B |
| Finestra di contesto | 128,000 token |
| Licenza | MIT |
| Casi d uso | chat, coding, reasoning |
| Rilasciato | 2024-04 |
Installa con Ollama
ollama run phi3:small Hugging Face
microsoft/Phi-3-small-128k-instruct Requisiti tecnici
La tua GPU puo eseguire Phi-3 Small?
Phi-3 Small richiede <strong class="text-primary-container">4.5 GB di VRAM</strong> in Q4. 40 GPU consumer raggiungono questa soglia. Sotto 8 GB o 2.5 GB incontrerai una latenza di offload significativa.
2.5GB Minimo critico
4.5GB Ottimale Q4
7GB Alta qualita Q8
14GB Massimo FP16
Matrice prestazioni hardware
40 Q4 nativo · 0 offload
| Unita GPU | VRAM | Compatibilita | Velocita stimata | Azione |
|---|---|---|---|---|
| RTX 5090 | 32GB | Ottimale | 155 tok/s | Calcola → |
| RTX 4090 | 24GB | Ottimale | 95 tok/s | Calcola → |
| M4 Ultra | 128GB | Ottimale | 110 tok/s | Calcola → |
| RTX 5080 | 16GB | Ottimale | 88 tok/s | Calcola → |
| M3 Ultra | 192GB | Ottimale | 95 tok/s | Calcola → |
| RTX 4080 Super | 16GB | Ottimale | 72 tok/s | Calcola → |
| RTX 5070 Ti | 16GB | Ottimale | 75 tok/s | Calcola → |
| RTX 3090 | 24GB | Ottimale | 65 tok/s | Calcola → |
| M4 Max 48GB | 48GB | Ottimale | 64 tok/s | Calcola → |
| RX 7900 XTX | 24GB | Ottimale | 80 tok/s | Calcola → |
| M4 Max 36GB | 36GB | Ottimale | 62 tok/s | Calcola → |
| RTX 4070 Ti Super | 16GB | Ottimale | 60 tok/s | Calcola → |
| RTX 3080 Ti | 12GB | Ottimale | 60 tok/s | Calcola → |
| RX 7900 XT | 20GB | Ottimale | 65 tok/s | Calcola → |
| RTX 5070 | 12GB | Ottimale | 58 tok/s | Calcola → |
| RTX 3080 | 10GB | Ottimale | 45 tok/s | Calcola → |
| M4 Pro | 24GB | Ottimale | 45 tok/s | Calcola → |
| RX 7800 XT | 16GB | Ottimale | 48 tok/s | Calcola → |
| RX 6800 XT | 16GB | Ottimale | 32 tok/s | Calcola → |
| RTX 4070 | 12GB | Ottimale | 40 tok/s | Calcola → |
| RTX 4060 Ti 16GB | 16GB | Ottimale | 35 tok/s | Calcola → |
| RX 7700 XT | 12GB | Ottimale | 30 tok/s | Calcola → |
| RTX 3070 Ti | 8GB | Ottimale | 42 tok/s | Calcola → |
| RTX 4060 Ti | 8GB | Ottimale | 35 tok/s | Calcola → |
| RTX 3070 | 8GB | Ottimale | 34 tok/s | Calcola → |
| RX 6700 XT | 12GB | Ottimale | 22 tok/s | Calcola → |
| M3 Pro | 18GB | Ottimale | 32 tok/s | Calcola → |
| RTX 3060 Ti | 8GB | Ottimale | 32 tok/s | Calcola → |
| RTX 2080 Ti | 11GB | Ottimale | 33 tok/s | Calcola → |
| RTX 3060 | 12GB | Ottimale | 30 tok/s | Calcola → |
| M2 Pro | 16GB | Ottimale | 28 tok/s | Calcola → |
| RTX 4060 | 8GB | Ottimale | 26 tok/s | Calcola → |
| Arc A770 16GB | 16GB | Ottimale | 19 tok/s | Calcola → |
| M1 Pro | 16GB | Ottimale | 22 tok/s | Calcola → |
| RX 7600 | 8GB | Ottimale | 22 tok/s | Calcola → |
| RX 6600 XT | 8GB | Ottimale | 21 tok/s | Calcola → |
| Arc A750 8GB | 8GB | Ottimale | 16 tok/s | Calcola → |
| RX 6600 | 8GB | Ottimale | 18 tok/s | Calcola → |
| RTX 3050 8GB | 8GB | Ottimale | 16 tok/s | Calcola → |
| GTX 1660 Super | 6GB | Ottimale | 20 tok/s | Calcola → |
GPU consigliate per Phi-3 Small
Benchmark reali
Nessuna recensione a pagamento
Scelta editoriale
Basato sui dati
Le migliori opzioni per compatibilita, margine VRAM e valore: prezzi e disponibilita possono cambiare.
RTX 5090
32 GB VRAM
Q4 nativo
Controlla disponibilita →
RTX 4090
24 GB VRAM
Q4 nativo
Controlla disponibilita →
M4 Ultra
128 GB VRAM
Q4 nativo
Controlla disponibilita →
Alcuni link sono link di affiliazione Amazon. Potremmo ricevere una commissione senza costi aggiuntivi per te. Il cookie Amazon puo durare fino a 24 ore dopo il clic.
Phi-3 Small — Guida compatibilita
Phi-3 Small puo funzionare su CPU senza GPU dedicata, cosa rara per un modello da 7B. Su un i7-13700K con llama.cpp Q4 raggiunge 8 tok/s (funzionale per uso occasionale). Con una GPU ottieni da 4 a 6 volte piu velocita; usa il calcolatore VRAM per i dettagli.
Confronta le GPU per Phi-3 Small
Quale GPU conviene? Specifiche reali e benchmark a confronto.
Componenti compatibili
GPU che eseguono Phi-3 Small in Q4, ordinate per punteggio di prestazioni IA.
Benchmark reali
Nessuna recensione a pagamento
Basato sui dati
Alcuni link sono link di affiliazione Amazon. Potremmo ricevere una commissione senza costi aggiuntivi per te. Il cookie Amazon puo durare fino a 24 ore dopo il clic.
Alternative piu pratiche
Modelli simili nella categoria chat con requisiti VRAM comparabili.
Non sai quale GPU ti serve per Phi-3 Small?
Il calcolatore VRAM ti dice esattamente quale quantizzazione puo gestire il tuo hardware.
RTX 5090
Controlla disponibilita
Prezzi aggiornati ogni giorno