Aller au contenu principal
Modèle prêt pour CPU

Hermes 3 8B

40 GPUs grand public peuvent exécuter Hermes 3 8B en Q4 nativement. Seuils VRAM précis et benchmarks ci-dessous.

40 GPUs compatibles
8B paramètres
131K contexte
Meilleur choix
RTX 5090 · 32 GB VRAM Q4 natif

Prix et disponibilité peuvent changer · lien affilié

Javier Morales
Javier Morales Spécialiste matériel IA — 8 ans d’expérience
GitHub: github.com/javier-morales-ia

llama.cpp 0.2.x · CUDA 12 · ROCm 6 · mis à jour mensuellement · méthodologie →

Contexte d’exécution

ARCHITECTURE TRANSFORMER
CONTEXTE 131K TOKENS
QUANTIFICATION 4-BIT GGUF
FOURNISSEUR Nous Research
LICENCE llama-3.1-community
Décision matérielle

Ce modèle nécessite unGPU d’entrée (8 GB VRAM)

Minimum

GTX 1660 Super

Fonctionne en Q4 — utilisable avec un peu d’attente

6 GB VRAM
Voir config compatible
Équilibré

RTX 4060 Ti 16GB

Meilleur équilibre valeur/performance au quotidien

16 GB VRAM
Voir config compatible
Optimal

RTX 5090

Qualité maximale, inférence la plus rapide

32 GB VRAM
Voir config compatible

GPUs compatibles pour Hermes 3 8B

Meilleures options par compatibilité, marge VRAM et valeur — prix et disponibilité peuvent varier.

RTX 5090
32 GB VRAM · Q4 natif Amazon

RTX 5090

0.0 (0 avis)

Points forts

  • Exécute Hermes 3 8B en Q4 natif
  • 32 GB VRAM — marge suffisante
RTX 4090
24 GB VRAM · Q4 natif Amazon

RTX 4090

4.8 (2,100 avis)

Points forts

  • Exécute Hermes 3 8B en Q4 natif
  • 24 GB VRAM — marge suffisante
M4 Ultra
128 GB VRAM · Q4 natif Amazon

M4 Ultra

0.0 (0 avis)

Points forts

  • Exécute Hermes 3 8B en Q4 natif
  • 128 GB VRAM — marge suffisante

Certains liens sont des liens d'affiliation Amazon. Nous pouvons toucher une commission sans coût supplémentaire pour vous. Le cookie Amazon peut durer jusqu'à 24 heures après votre clic.

*Les prix et la disponibilité peuvent changer. Certains liens sont affiliés.

Configuration requise

VRAM GPU 5 GB GPU d’entrée
RAM système 16 GB DDR4/DDR5
Stockage 4.7 GB Q4 · SSD recommandé
CPU i7 → 7 tok/s Fonctionne sans GPU

VRAM par quantification

Quantification VRAM nécessaire Espace disque Qualité
FP16 (qualité maximale) 16 GB 16 GB Maximum
Q8 (haute qualité) 8 GB 8 GB Quasi sans perte
Q4 (recommandé) Meilleur équilibre 5 GB 4.7 GB Recommandée
Q2 (minimum) 3 GB 2.5 GB Perte de qualité

Détails du modèle

Développeur Nous Research
Paramètres 8B
Fenêtre de contexte 131,072 tokens
Licence llama-3.1-community
Cas d’usage agent, function-calling, reasoning, chat, roleplay
Sortie 2024-08

Installer avec Ollama

ollama run hermes3:8b

Hugging Face

NousResearch/Hermes-3-Llama-3.1-8B
Voir sur HF →
Exigences techniques

Votre GPU peut-il exécuter Hermes 3 8B ?

Hermes 3 8B nécessite <strong class="text-primary-container">5 GB de VRAM</strong> en Q4. 40 GPUs grand public atteignent ce seuil. En dessous de 8 GB ou 3 GB, la latence d’offload augmente fortement.

3GB Minimum critique
5GB Optimal Q4
8GB Haute qualité Q8
16GB Max FP16

Matrice de performance matérielle

40 Q4 natif · 0 offload

GPU VRAM Compatibilité Vitesse estimée Action
RTX 5090 32GB Optimal 84 tok/s Calculer →
RTX 4090 24GB Optimal 47 tok/s Calculer →
M4 Ultra 128GB Optimal 51 tok/s Calculer →
RTX 5080 16GB Optimal 45 tok/s Calculer →
M3 Ultra 192GB Optimal 37 tok/s Calculer →
RTX 4080 Super 16GB Optimal 34 tok/s Calculer →
RTX 5070 Ti 16GB Optimal 42 tok/s Calculer →
RTX 3090 24GB Optimal 44 tok/s Calculer →
M4 Max 48GB 48GB Optimal 25 tok/s Calculer →
RX 7900 XTX 24GB Optimal 45 tok/s Calculer →
M4 Max 36GB 36GB Optimal 25 tok/s Calculer →
RTX 4070 Ti Super 16GB Optimal 31 tok/s Calculer →
RTX 3080 Ti 12GB Optimal 33 tok/s Calculer →
RX 7900 XT 20GB Optimal 37 tok/s Calculer →
RTX 5070 12GB Optimal 31 tok/s Calculer →
RTX 3080 10GB Optimal 35 tok/s Calculer →
M4 Pro 24GB Optimal 13 tok/s Calculer →
RX 7800 XT 16GB Optimal 29 tok/s Calculer →
RX 6800 XT 16GB Optimal 20 tok/s Calculer →
RTX 4070 12GB Optimal 20 tok/s Calculer →
RTX 4060 Ti 16GB 16GB Optimal 13 tok/s Calculer →
RX 7700 XT 12GB Optimal 18 tok/s Calculer →
RTX 3070 Ti 8GB Optimal 23 tok/s Calculer →
RTX 4060 Ti 8GB Optimal 19 tok/s Calculer →
RTX 3070 8GB Optimal 19 tok/s Calculer →
RX 6700 XT 12GB Optimal 13 tok/s Calculer →
M3 Pro 18GB Optimal 7 tok/s Calculer →
RTX 3060 Ti 8GB Optimal 18 tok/s Calculer →
RTX 2080 Ti 11GB Optimal 16 tok/s Calculer →
RTX 3060 12GB Optimal 17 tok/s Calculer →
M2 Pro 16GB Optimal 9 tok/s Calculer →
RTX 4060 8GB Optimal 14 tok/s Calculer →
Arc A770 16GB 16GB Optimal 8 tok/s Calculer →
M1 Pro 16GB Optimal 9 tok/s Calculer →
RX 7600 8GB Optimal 12 tok/s Calculer →
RX 6600 XT 8GB Optimal 12 tok/s Calculer →
Arc A750 8GB 8GB Optimal 9 tok/s Calculer →
RX 6600 8GB Optimal 10 tok/s Calculer →
RTX 3050 8GB 8GB Optimal 9 tok/s Calculer →
GTX 1660 Super 6GB Optimal 11 tok/s Calculer →

GPUs recommandés pour Hermes 3 8B

Benchmarks réels
Sans avis sponsorisés
Sélection éditoriale
Basé sur les données

Meilleurs choix selon compatibilité, marge VRAM et valeur; prix et disponibilité peuvent varier.

Certains liens sont des liens d'affiliation Amazon. Nous pouvons toucher une commission sans coût supplémentaire pour vous. Le cookie Amazon peut durer jusqu'à 24 heures après votre clic.

Hermes 3 8B — Guide de compatibilité

Hermes 3 8B peut s’exécuter sur CPU sans GPU dédié, ce qui est rare pour un modèle de 8B. Sur un i7-13700K avec llama.cpp Q4, il atteint 7 tok/s (lent mais exploitable). Avec un GPU, vous obtenez 4 à 6 fois plus de vitesse; consultez le calculateur VRAM pour les détails.

Comparez les GPUs pour Hermes 3 8B

Quel GPU vaut le coup ? Spécifications et benchmarks réels côte à côte.

Matériel compatible

GPUs qui exécutent Hermes 3 8B en Q4, triés par score de performance IA.

Benchmarks réels
Sans avis sponsorisés
Basé sur les données
RTX 5090

NVIDIA · 32 GB VRAM

Q4 OK
84 tok/s > $1000
RTX 4090

NVIDIA · 24 GB VRAM

Q4 OK
47 tok/s > $1000
M4 Ultra

Apple · 128 GB VRAM

Q4 OK
51 tok/s > $1000
RTX 5080

NVIDIA · 16 GB VRAM

Q4 OK
45 tok/s $600–1000
M3 Ultra

Apple · 192 GB VRAM

Q4 OK
37 tok/s > $1000
RTX 4080 Super

NVIDIA · 16 GB VRAM

Q4 OK
34 tok/s $600–1000

Certains liens sont des liens d'affiliation Amazon. Nous pouvons toucher une commission sans coût supplémentaire pour vous. Le cookie Amazon peut durer jusqu'à 24 heures après votre clic.

Alternatives plus pratiques

Modèles similaires dans la catégorie agent avec des besoins VRAM comparables.

Vous ne savez pas quel GPU il vous faut pour Hermes 3 8B ?

Le calculateur VRAM vous indique exactement quelle quantification votre matériel peut supporter.

RTX 5090

Voir disponibilité

Prix mis à jour quotidiennement