FreeLLMGPU › NVIDIA
RTX 4060向けの最高の無料AIモデル
RTX 4060：ビデオメモリ8 GB、272 GB/s。このカードで動く無料モデルを、Arenaの投票順に、期待できる速度とともに紹介します。
収まる中で投票された最高のモデルGranite 4.2 8BArena 1319 · 約31トークン/秒
最大の密モデル約10 B4ビット、8Kコンテキスト、GPUに完全に載せた場合
メモリ8 GB帯域 272 GB/s
GPUに完全に収まる、投票のあるモデル
| モデル | Arenaスコア | サイズ | 4ビットのファイル | トークン/秒 |
|---|---|---|---|---|
| Granite 4.2 8B ibm |
1319 | 8.8 B | 6.5 GB | 31 |
| Granite 4.2 3B ibm |
1294 | 3.7 B | 3.4 GB | 68 |
| Granite 4.1 8B ibm |
1290 | 8.8 B | 6.5 GB | 31 |
システムRAM 64 GBの助けで動く、より大きなモデル
モデルの一部がシステムメモリに置かれます。ビデオメモリよりもずっと遅くなります。
| モデル | Arenaスコア | サイズ | 4ビットのファイル | トークン/秒 |
|---|---|---|---|---|
| Gemma 4 31B |
1443 | 31.3 B | 20 GB | 4.7 |
| Qwen3.8-27B alibaba |
1440 | 27.8 B | 18 GB | 6.0 |
| Gemma 4 26B A4B google · MoE、アクティブ 4 B |
1434 | 25.8 B | 17 GB | 36 |
| Qwen3-Next-80B-A3B-Instruct alibaba · MoE、アクティブ 3 B |
1417 | 81.3 B | 50 GB | 40 |
| Qwen3.5-27B alibaba |
1409 | 27.8 B | 18 GB | 6.0 |
| Qwen3.5-35B-A3B alibaba · MoE、アクティブ 3 B |
1395 | 36 B | 23 GB | 45 |
人気の小型モデル
Arenaでまだ投票のない公式の小型モデルを、Hugging Faceのダウンロード数順に並べています（人気であって、品質ではありません）。
| モデル | 月間ダウンロード数 | サイズ | 4ビットのファイル | トークン/秒 |
|---|---|---|---|---|
| Qwen3-0.6B Qwen |
28.2M | 0.8 B | 1.7 GB | 130 |
| Qwen3-4B Qwen |
11.6M | 4 B | 3.6 GB | 55 |
| Qwen3-8B Qwen |
8.6M | 8.2 B | 6.2 GB | 33 |
| Qwen3.5-4B Qwen |
7.8M | 4.7 B | 4.0 GB | 64 |
| Qwen3.5-9B Qwen |
7.0M | 9.7 B | 7.1 GB | 33 |
| NVIDIA-Nemotron-3-Nano-4B-BF16 nvidia |
2.3M | 4 B | 3.6 GB | 52 |
4ビット（Q4_K_M）、8Kコンテキストでの推定値で、44件の実際の llama.cpp テストで補正しています（典型的な誤差は約±10%）。1秒あたりのトークン数：約10が読む速さの目安です。FreeLLMArena は Amazon アソシエイトとして適格販売により収入を得ています。リンクがランキングに影響することはありません。
質問
RTX 4060で使える最高の無料AIモデルは？
Granite 4.2 8B（Arenaスコア1319）は、4ビットで8 GBのビデオメモリに完全に収まる、最も投票を集めたオープンモデルで、毎秒約31トークンで出力します。
RTX 4060ではどれくらいの大きさのモデルが動きますか？
4ビット、8Kコンテキストで、GPUに完全に載せた場合、密モデルで約10 Bパラメータです。Mixture of Experts モデルはもっと大きくでき、システムRAMが64 GBあれば、遅くなりますがさらに大きなモデルも動きます。
RTX 4060はローカルLLMに向いていますか？
メモリは8 GB、帯域は272 GB/s。メモリで入るモデルが決まり、帯域で書く速さが決まります。16 GB未満では小型モデルが快適に動きます。大型モデルはシステムRAMが必要で、遅くなります。
似たカード
- RTX 5060 8 GB · 448 GB/s
- RX 7600 8 GB · 288 GB/s
- RTX 3080 10 GB 10 GB · 760 GB/s
- RTX 5070 12 GB · 672 GB/s
- RTX 4070 / 4070 Super 12 GB · 504 GB/s
- Arc B580 12 GB · 456 GB/s
このページを共有：XLinkedInRedditWhatsApp
数字の誤りやリンク切れを見つけましたか？間違いを報告