GPU › ワークステーション
RTX 6000 Ada向けの最高の無料AIモデル
RTX 6000 Ada:ビデオメモリ48 GB、960 GB/s。このカードで動く無料モデルを、Arenaの投票順に、期待できる速度とともに紹介します。
GPUに完全に収まる、投票のあるモデル
| モデル | Arenaスコア | サイズ | 4ビットのファイル | トークン/秒 |
|---|---|---|---|---|
| Gemma 4 31B |
1443 | 31.3 B | 20 GB | 34 |
| Qwen3.8-27B alibaba |
1440 | 27.8 B | 18 GB | 41 |
| Gemma 4 26B A4B google · MoE、アクティブ 4 B |
1434 | 25.8 B | 17 GB | 148 |
| Qwen3.5-27B alibaba |
1409 | 27.8 B | 18 GB | 41 |
システムRAM 64 GBの助けで動く、より大きなモデル
モデルの一部がシステムメモリに置かれます。ビデオメモリよりもずっと遅くなります。
| モデル | Arenaスコア | サイズ | 4ビットのファイル | トークン/秒 |
|---|---|---|---|---|
| Qwen3.5-122B-A10B alibaba · MoE、アクティブ 10 B |
1417 | 125.1 B | 77 GB | 26 |
| GLM-4.6V zai · MoE、アクティブ 14.3 B |
1376 | 107.7 B | 66 GB | 21 |
| GLM-4.5V zai · MoE、アクティブ 14.3 B |
1333 | 107.7 B | 66 GB | 21 |
人気の小型モデル
Arenaでまだ投票のない公式の小型モデルを、Hugging Faceのダウンロード数順に並べています(人気であって、品質ではありません)。
| モデル | 月間ダウンロード数 | サイズ | 4ビットのファイル | トークン/秒 |
|---|---|---|---|---|
| Qwen3-0.6B Qwen |
28.2M | 0.8 B | 1.7 GB | 345 |
| Qwen3-4B Qwen |
11.6M | 4 B | 3.6 GB | 171 |
| Qwen3-14B Qwen |
9.0M | 14.8 B | 10 GB | 68 |
| Qwen3-8B Qwen |
8.6M | 8.2 B | 6.2 GB | 108 |
| Qwen3.5-4B Qwen |
7.8M | 4.7 B | 4.0 GB | 194 |
| Qwen3.5-9B Qwen |
7.3M | 9.7 B | 7.1 GB | 109 |
4ビット(Q4_K_M)、8Kコンテキストでの推定値で、44件の実際の llama.cpp テストで補正しています(典型的な誤差は約±10%)。1秒あたりのトークン数:約10が読む速さの目安です。FreeLLMArena は Amazon アソシエイトとして適格販売により収入を得ています。リンクがランキングに影響することはありません。
質問
RTX 6000 Adaで使える最高の無料AIモデルは?
Gemma 4 31B(Arenaスコア1443)は、4ビットで48 GBのビデオメモリに完全に収まる、最も投票を集めたオープンモデルで、毎秒約34トークンで出力します。
RTX 6000 Adaではどれくらいの大きさのモデルが動きますか?
4ビット、8Kコンテキストで、GPUに完全に載せた場合、密モデルで約73 Bパラメータです。Mixture of Experts モデルはもっと大きくでき、システムRAMが64 GBあれば、遅くなりますがさらに大きなモデルも動きます。
RTX 6000 AdaはローカルLLMに向いていますか?
メモリは48 GB、帯域は960 GB/s。メモリで入るモデルが決まり、帯域で書く速さが決まります。24 GB以上あれば27~32 Bのモデルが動き、家庭用として品質面で最適なサイズです。
似たカード
- RTX A6000 48 GB · 768 GB/s
- RTX 5090 32 GB · 1792 GB/s
- Mac mini M4 Pro 64 GB 64 GB · 273 GB/s
- RTX 3090 Ti 24 GB · 1008 GB/s
- RTX 4090 24 GB · 1008 GB/s
- RX 7900 XTX 24 GB · 960 GB/s
このページを共有:XLinkedInRedditWhatsApp
数字の誤りやリンク切れを見つけましたか?間違いを報告