FreeLLMGPU › NVIDIA
RTX 5070向けの最高の無料AIモデル
RTX 5070：ビデオメモリ12 GB、672 GB/s。このカードで動く無料モデルを、Arenaの投票順に、期待できる速度とともに紹介します。
収まる中で投票された最高のモデルGranite 4.2 8BArena 1319 · 約73トークン/秒
最大の密モデル約16 B4ビット、8Kコンテキスト、GPUに完全に載せた場合
メモリ12 GB帯域 672 GB/s
2枚構成の場合Gemma 4 31B24 GB · 約23トークン/秒
GPUに完全に収まる、投票のあるモデル
| モデル | Arenaスコア | サイズ | 4ビットのファイル | トークン/秒 |
|---|---|---|---|---|
| Granite 4.2 8B ibm |
1319 | 8.8 B | 6.5 GB | 73 |
| Granite 4.2 3B ibm |
1294 | 3.7 B | 3.4 GB | 152 |
| Granite 4.1 8B ibm |
1290 | 8.8 B | 6.5 GB | 73 |
システムRAM 64 GBの助けで動く、より大きなモデル
モデルの一部がシステムメモリに置かれます。ビデオメモリよりもずっと遅くなります。
| モデル | Arenaスコア | サイズ | 4ビットのファイル | トークン/秒 |
|---|---|---|---|---|
| Gemma 4 31B |
1443 | 31.3 B | 20 GB | 6.7 |
| Qwen3.8-27B alibaba |
1440 | 27.8 B | 18 GB | 9.9 |
| Gemma 4 26B A4B google · MoE、アクティブ 4 B |
1434 | 25.8 B | 17 GB | 60 |
| Qwen3-Next-80B-A3B-Instruct alibaba · MoE、アクティブ 3 B |
1417 | 81.3 B | 50 GB | 45 |
| Qwen3.5-27B alibaba |
1409 | 27.8 B | 18 GB | 9.9 |
| Qwen3.5-35B-A3B alibaba · MoE、アクティブ 3 B |
1395 | 36 B | 23 GB | 61 |
人気の小型モデル
Arenaでまだ投票のない公式の小型モデルを、Hugging Faceのダウンロード数順に並べています（人気であって、品質ではありません）。
| モデル | 月間ダウンロード数 | サイズ | 4ビットのファイル | トークン/秒 |
|---|---|---|---|---|
| Qwen3-0.6B Qwen |
28.2M | 0.8 B | 1.7 GB | 269 |
| Qwen3-4B Qwen |
11.6M | 4 B | 3.6 GB | 126 |
| Qwen3-14B Qwen |
9.0M | 14.8 B | 10 GB | 48 |
| Qwen3-8B Qwen |
8.6M | 8.2 B | 6.2 GB | 78 |
| Qwen3.5-4B Qwen |
7.8M | 4.7 B | 4.0 GB | 144 |
| Qwen3.5-9B Qwen |
7.0M | 9.7 B | 7.1 GB | 79 |
4ビット（Q4_K_M）、8Kコンテキストでの推定値で、44件の実際の llama.cpp テストで補正しています（典型的な誤差は約±10%）。1秒あたりのトークン数：約10が読む速さの目安です。FreeLLMArena は Amazon アソシエイトとして適格販売により収入を得ています。リンクがランキングに影響することはありません。
質問
RTX 5070で使える最高の無料AIモデルは？
Granite 4.2 8B（Arenaスコア1319）は、4ビットで12 GBのビデオメモリに完全に収まる、最も投票を集めたオープンモデルで、毎秒約73トークンで出力します。
RTX 5070ではどれくらいの大きさのモデルが動きますか？
4ビット、8Kコンテキストで、GPUに完全に載せた場合、密モデルで約16 Bパラメータです。Mixture of Experts モデルはもっと大きくでき、システムRAMが64 GBあれば、遅くなりますがさらに大きなモデルも動きます。
RTX 5070はローカルLLMに向いていますか？
メモリは12 GB、帯域は672 GB/s。メモリで入るモデルが決まり、帯域で書く速さが決まります。16 GB未満では小型モデルが快適に動きます。大型モデルはシステムRAMが必要で、遅くなります。
似たカード
- RTX 4070 / 4070 Super 12 GB · 504 GB/s
- Arc B580 12 GB · 456 GB/s
- RX 7700 XT 12 GB · 432 GB/s
- RTX 3060 12 GB 12 GB · 360 GB/s
- RTX 3080 10 GB 10 GB · 760 GB/s
- RTX 5080 16 GB · 960 GB/s
このページを共有：XLinkedInRedditWhatsApp
数字の誤りやリンク切れを見つけましたか？間違いを報告