Voter dans Free Arena

GPU › Centre de données

Meilleurs modèles d'IA gratuits pour H200

H200 : 141 GB de mémoire vidéo, 4800 GB/s. Voici les modèles gratuits qu'il fait tourner, classés par votes Arena, avec la vitesse à laquelle vous pouvez vous attendre.

Simulez votre configuration · Comparer tous les GPU

Meilleur modèle voté qui tientGemma 4 31BArena 1443 · ~150 tokens/s
Plus gros modèle dense~218 Ben 4 bits, contexte de 8K, entièrement sur le GPU
Mémoire141 GB4800 GB/s de bande passante
Avec deux cartesGLM-5.3-Flash282 GB · ~140 tokens/s

Modèles votés qui tiennent entièrement sur le GPU

ModèleScore ArenaTailleFichier 4 bitsTokens/s
Gemma 4 31B
google
144331.3 B20 GB150
Qwen3.8-27B
alibaba
144127.8 B18 GB177
Gemma 4 26B A4B
google · MoE, 4 B actifs
143425.8 B17 GB278
Qwen3.5-122B-A10B
alibaba · MoE, 10 B actifs
1417125.1 B77 GB224
Qwen3.5-27B
alibaba
140927.8 B18 GB177
GLM-4.6V
zai · MoE, 14.3 B actifs
1376107.7 B66 GB181
gemma-3-27b-it
google
135827.4 B18 GB174
GLM-4.5V
zai · MoE, 14.3 B actifs
1333107.7 B66 GB181

Des modèles plus gros grâce à 64 GB de RAM système

Une partie du modèle réside dans la mémoire système, bien plus lente que la mémoire vidéo.

ModèleScore ArenaTailleFichier 4 bitsTokens/s
MiMo-V2.6-Flash
xiaomi · MoE, 17.4 B actifs
1455310.8 B190 GB25
Hy3
tencent · MoE, 24.4 B actifs
1438298.8 B182 GB19
DeepSeek-V4-Flash (High)
deepseek · MoE, 20.4 B actifs
1432290.9 B177 GB26
MiMo-V2.5
xiaomi · MoE, 17.4 B actifs
1428310.8 B190 GB25
Qwen3-VL-235B-A22B-Instruct
alibaba · MoE, 22 B actifs
1420235.7 B144 GB87
qwen3-235b-a22b-instruct-2507
alibaba · MoE, 22 B actifs
1419235.1 B144 GB90

Petits modèles populaires

Petits modèles officiels sans vote Arena pour l'instant, classés par nombre de téléchargements sur Hugging Face (popularité, pas qualité).

ModèleTéléchargements/moisTailleFichier 4 bitsTokens/s
Qwen3-0.6B
Qwen
28.6M0.8 B1.7 GB724
Qwen3-4B
Qwen
11.7M4 B3.6 GB508
Qwen3-8B
Qwen
8.8M8.2 B6.2 GB377
Qwen3-14B
Qwen
8.7M14.8 B10 GB266
Qwen3.5-4B
Qwen
7.8M4.7 B4.0 GB546
Qwen3.5-9B
Qwen
7.3M9.7 B7.1 GB379

Estimations en 4 bits (Q4_K_M) avec un contexte de 8K, calibrées sur 44 tests llama.cpp réels (erreur typique d'environ ±10 %). Tokens par seconde : environ 10 correspond à la vitesse de lecture.

Questions

Quel est le meilleur modèle d'IA gratuit pour H200 ?

Gemma 4 31B (score Arena 1443) est le modèle ouvert le mieux voté qui tient entièrement dans 141 GB de mémoire vidéo en 4 bits, avec environ 150 tokens par seconde.

Quelle taille de modèle peut-on faire tourner sur H200 ?

Environ 218 milliards de paramètres pour un modèle dense en 4 bits avec un contexte de 8K, entièrement sur le GPU. Les modèles à mélange d'experts peuvent être plus gros, et avec 64 GB de RAM système, des modèles encore plus grands tournent, mais plus lentement.

H200 convient-il aux LLM locaux ?

Il dispose de 141 GB de mémoire et de 4800 GB/s de bande passante. La mémoire détermine quels modèles tiennent ; la bande passante détermine leur vitesse d'écriture. Avec 24 GB ou plus, il fait tourner des modèles de 27–32 B, le meilleur compromis de qualité pour un usage à domicile.

Cartes similaires

Partager cette page :XLinkedInRedditWhatsApp