FreeLLMTutti i modelli › alibaba
Dove usarlo gratis
- La chat del laboratorio: chat.qwen.ai (gratis con limiti giornalieri)
- Scaricalo e usalo a casa: pesi ufficiali · file GGUF per Ollama e LM Studio
Punteggi Arena
| Arena | Punteggio | Posizione | Voti |
|---|---|---|---|
| Chat | 1409 | #142 su 416 | 29K |
| Programmazione | 1358 | #114 su 148 | 8K |
| Visione | 1241 | #72 su 167 | 30K |
Posizione tra tutti i modelli, anche quelli a pagamento. Fonte: dataset della classifica Arena.
Velocità sull'hardware più diffuso
| Hardware | Memoria GPU | Ci sta? | Velocità |
|---|---|---|---|
| RTX 3060 12 GB | 12 GB | GPU + 64 GB di RAM | 7.1 tok/s |
| RTX 4060 Ti 16 GB | 16 GB | GPU + 64 GB di RAM | 8.6 tok/s |
| RTX 3090 | 24 GB | Entra nella GPU | 37 tok/s |
| RTX 4090 | 24 GB | Entra nella GPU | 40 tok/s |
| RTX 5090 | 32 GB | Entra nella GPU | 69 tok/s |
| RX 7900 XTX | 24 GB | Entra nella GPU | 38 tok/s |
| 2 × RTX 3090 | 48 GB | Entra nella GPU | 36 tok/s |
| 4 × RTX 3090 | 96 GB | Entra nella GPU | 34 tok/s |
| Mac M4 Max 128 GB | 96 GB | Entra nella GPU | 21 tok/s |
| Ryzen AI Max+ 395 128 GB | 96 GB | Entra nella GPU | 10 tok/s |
| 8 × H100 SXM | 640 GB | Entra nella GPU | 100 tok/s |
Stima a 4 bit con contesto da 32K e 64 GB di DDR5 per lo scarico in RAM. Velocità ≈ banda di memoria × 78% ÷ dati letti per token, più un costo fisso per token, calibrata su 44 test reali con llama.cpp; errore tipico di circa ±10%. Confronta tutte le GPU.
Memoria GPU necessaria
| Livello | Contesto da 8K | Contesto da 32K | Contesto da 128K | Qualità rispetto al modello completo |
|---|---|---|---|---|
| Q3_K_M | 15 GB | 17 GB | 23 GB | +7.2% perdita evidente |
| Q4_K_M | 18 GB | 20 GB | 26 GB | +1.9% piccola perdita |
| Q5_K_M | 21 GB | 23 GB | 29 GB | +0.6% perdita minima |
| Q6_K | 24 GB | 26 GB | 32 GB | +0.2% quasi senza perdita |
| Q8_0 | 31 GB | 32 GB | 39 GB | ≈ 0% uguale al completo |
| F16 | 57 GB | 58 GB | 65 GB | ≈ 0% uguale al completo |
Pesi + cache del contesto (dall'architettura del modello) + runtime. Qualità: aumento di perplexity rispetto al modello completo, dai test con llama.cpp, scalato in base alla dimensione del modello. Simula la tua configurazione.
Punteggio Chat nel tempo
Punteggio Arena dal 17 apr 2026 al 15 ott 2026.
Punteggio Coding nel tempo
Punteggio Arena dal 20 apr 2026 al 19 ott 2026.
Modelli gratis simili in Chat
Condividi questa pagina:XLinkedInRedditWhatsApp
Hai visto un numero sbagliato o un link rotto? Segnala un errore