FreeLLMGPU › データセンター
H100 SXM向けの最高の無料AIモデル
H100 SXM：ビデオメモリ80 GB、3350 GB/s。このカードで動く無料モデルを、Arenaの投票順に、期待できる速度とともに紹介します。
収まる中で投票された最高のモデルGemma 4 31BArena 1443 · 約110トークン/秒
最大の密モデル約123 B4ビット、8Kコンテキスト、GPUに完全に載せた場合
メモリ80 GB帯域 3350 GB/s
GPUに完全に収まる、投票のあるモデル
| モデル | Arenaスコア | サイズ | 4ビットのファイル | トークン/秒 |
|---|---|---|---|---|
| Gemma 4 31B |
1443 | 31.3 B | 20 GB | 110 |
| Qwen3.8-27B alibaba |
1440 | 27.8 B | 18 GB | 131 |
| Gemma 4 26B A4B google · MoE、アクティブ 4 B |
1434 | 25.8 B | 17 GB | 254 |
| Qwen3.5-122B-A10B alibaba · MoE、アクティブ 10 B |
1417 | 125.1 B | 77 GB | 192 |
| Qwen3.5-27B alibaba |
1409 | 27.8 B | 18 GB | 131 |
| GLM-4.6V zai · MoE、アクティブ 14.3 B |
1376 | 107.7 B | 66 GB | 149 |
| GLM-4.5V zai · MoE、アクティブ 14.3 B |
1333 | 107.7 B | 66 GB | 149 |
人気の小型モデル
Arenaでまだ投票のない公式の小型モデルを、Hugging Faceのダウンロード数順に並べています（人気であって、品質ではありません）。
| モデル | 月間ダウンロード数 | サイズ | 4ビットのファイル | トークン/秒 |
|---|---|---|---|---|
| Qwen3-0.6B Qwen |
28.2M | 0.8 B | 1.7 GB | 647 |
| Qwen3-4B Qwen |
11.6M | 4 B | 3.6 GB | 418 |
| Qwen3-14B Qwen |
9.0M | 14.8 B | 10 GB | 202 |
| Qwen3-8B Qwen |
8.6M | 8.2 B | 6.2 GB | 297 |
| Qwen3.5-4B Qwen |
7.8M | 4.7 B | 4.0 GB | 456 |
| Qwen3.5-9B Qwen |
7.3M | 9.7 B | 7.1 GB | 298 |
4ビット（Q4_K_M）、8Kコンテキストでの推定値で、44件の実際の llama.cpp テストで補正しています（典型的な誤差は約±10%）。1秒あたりのトークン数：約10が読む速さの目安です。
質問
H100 SXMで使える最高の無料AIモデルは？
Gemma 4 31B（Arenaスコア1443）は、4ビットで80 GBのビデオメモリに完全に収まる、最も投票を集めたオープンモデルで、毎秒約110トークンで出力します。
H100 SXMではどれくらいの大きさのモデルが動きますか？
4ビット、8Kコンテキストで、GPUに完全に載せた場合、密モデルで約123 Bパラメータです。Mixture of Experts モデルはもっと大きくでき、システムRAMが64 GBあれば、遅くなりますがさらに大きなモデルも動きます。
H100 SXMはローカルLLMに向いていますか？
メモリは80 GB、帯域は3350 GB/s。メモリで入るモデルが決まり、帯域で書く速さが決まります。24 GB以上あれば27～32 Bのモデルが動き、家庭用として品質面で最適なサイズです。
似たカード
- A100 80 GB 80 GB · 2039 GB/s
- RTX PRO 6000 Blackwell 96 GB · 1792 GB/s
- Mac mini M4 Pro 64 GB 64 GB · 273 GB/s
- RTX 6000 Ada 48 GB · 960 GB/s
- RTX A6000 48 GB · 768 GB/s
- RTX 5090 32 GB · 1792 GB/s
このページを共有：XLinkedInRedditWhatsApp
数字の誤りやリンク切れを見つけましたか？間違いを報告