FreeLLMGPUs › Estação de trabalho
Melhores modelos de IA grátis para a RTX A6000
RTX A6000: 48 GB de memória de vídeo, 768 GB/s. Estes são os modelos grátis que ela roda, classificados pelos votos da Arena, com a velocidade que você pode esperar.
Simule a sua configuração · Veja o preço na Amazon ↗ · Compare todas as GPUs
Modelos votados que cabem inteiros na GPU
| Modelo | Pontuação Arena | Tamanho | Arquivo de 4 bits | Tokens/s |
|---|---|---|---|---|
| Gemma 4 31B |
1443 | 31.3 B | 20 GB | 28 |
| Qwen3.8-27B alibaba |
1441 | 27.8 B | 18 GB | 33 |
| Gemma 4 26B A4B google · MoE, 4 B ativos |
1434 | 25.8 B | 17 GB | 129 |
| Qwen3.5-27B alibaba |
1409 | 27.8 B | 18 GB | 33 |
| gemma-3-27b-it |
1358 | 27.4 B | 18 GB | 33 |
Modelos maiores com a ajuda de 64 GB de RAM do sistema
Parte do modelo fica na memória do sistema, que é muito mais lenta que a memória de vídeo.
| Modelo | Pontuação Arena | Tamanho | Arquivo de 4 bits | Tokens/s |
|---|---|---|---|---|
| Qwen3.5-122B-A10B alibaba · MoE, 10 B ativos |
1417 | 125.1 B | 77 GB | 26 |
| GLM-4.6V zai · MoE, 14.3 B ativos |
1376 | 107.7 B | 66 GB | 20 |
| GLM-4.5V zai · MoE, 14.3 B ativos |
1333 | 107.7 B | 66 GB | 20 |
Modelos pequenos populares
Modelos pequenos oficiais ainda sem votos na Arena, ordenados por downloads no Hugging Face (popularidade, não qualidade).
| Modelo | Downloads/mês | Tamanho | Arquivo de 4 bits | Tokens/s |
|---|---|---|---|---|
| Qwen3-0.6B Qwen |
28.6M | 0.8 B | 1.7 GB | 296 |
| Qwen3-4B Qwen |
11.7M | 4 B | 3.6 GB | 142 |
| Qwen3-8B Qwen |
8.8M | 8.2 B | 6.2 GB | 88 |
| Qwen3-14B Qwen |
8.7M | 14.8 B | 10 GB | 55 |
| Qwen3.5-4B Qwen |
7.8M | 4.7 B | 4.0 GB | 161 |
| Qwen3.5-9B Qwen |
7.3M | 9.7 B | 7.1 GB | 89 |
Estimativas com 4 bits (Q4_K_M) e contexto de 8K, calibradas em 44 testes reais com llama.cpp (erro típico de cerca de ±10%). Tokens por segundo: cerca de 10 é a velocidade de leitura. Como Associada da Amazon, o FreeLLMArena ganha com compras qualificadas; os links não alteram os rankings.
Perguntas
Qual é o melhor modelo de IA grátis para a RTX A6000?
Gemma 4 31B (pontuação Arena 1443) é o modelo aberto mais votado que cabe inteiro em 48 GB de memória de vídeo com 4 bits, escrevendo cerca de 28 tokens por segundo.
Que tamanho de modelo a RTX A6000 consegue rodar?
Cerca de 73 bilhões de parâmetros para um modelo denso com 4 bits e contexto de 8K, totalmente na GPU. Modelos de mistura de especialistas podem ser maiores e, com 64 GB de RAM do sistema, modelos ainda maiores rodam, só que mais devagar.
A RTX A6000 é boa para LLMs locais?
Ela tem 48 GB de memória e 768 GB/s de largura de banda. A memória decide quais modelos cabem; a largura de banda decide a rapidez com que escrevem. Com 24 GB ou mais, roda modelos de 27 a 32 B, o ponto ideal de qualidade para uso doméstico.
Placas parecidas
- RTX 6000 Ada 48 GB · 960 GB/s
- RTX 5090 32 GB · 1792 GB/s
- Mac mini M4 Pro 64 GB 64 GB · 273 GB/s
- RTX 3090 Ti 24 GB · 1008 GB/s
- RTX 4090 24 GB · 1008 GB/s
- RX 7900 XTX 24 GB · 960 GB/s
Compartilhe esta página:XLinkedInRedditWhatsApp
Viu um número errado ou um link quebrado? Informe um erro