Vota in Free Arena

Tutti i modelli › google

gemma-3-27b-it

google · licenza Gemma · su Arena dal 11 mar 2025

Chat del laboratorio Download
Punteggio Arena1358#199 su 416 in Chat, modelli a pagamento inclusi
Dimensione27.4 Bparametri
Download a 4 bit17 GBsolo pesi, Q4_K_M
Contesto massimo128Ktoken, dalla configurazione del modello

Dove usarlo gratis

Punteggi Arena

ArenaPunteggioPosizioneVoti
Chat1358#199 su 41647K

Posizione tra tutti i modelli, anche quelli a pagamento. Fonte: dataset della classifica Arena.

Velocità sull'hardware più diffuso

HardwareMemoria GPUCi sta?Velocità
RTX 3060 12 GB12 GBGPU + 64 GB di RAM6.5 tok/s
RTX 4060 Ti 16 GB16 GBGPU + 64 GB di RAM7.7 tok/s
RTX 309024 GBEntra nella GPU35 tok/s
RTX 409024 GBEntra nella GPU38 tok/s
RTX 509032 GBEntra nella GPU65 tok/s
RX 7900 XTX24 GBEntra nella GPU36 tok/s
2 × RTX 309048 GBEntra nella GPU34 tok/s
4 × RTX 309096 GBEntra nella GPU32 tok/s
Mac M4 Max 128 GB96 GBEntra nella GPU20 tok/s
Ryzen AI Max+ 395 128 GB96 GBEntra nella GPU9.9 tok/s
8 × H100 SXM640 GBEntra nella GPU96 tok/s

Stima a 4 bit con contesto da 32K e 64 GB di DDR5 per lo scarico in RAM. Velocità ≈ banda di memoria × 78% ÷ dati letti per token, più un costo fisso per token, calibrata su 44 test reali con llama.cpp; errore tipico di circa ±10%. Confronta tutte le GPU.

Memoria GPU necessaria

LivelloContesto da 8KContesto da 32KContesto da 128KQualità rispetto al modello completo
Q3_K_M15 GB18 GB27 GB+7.2% perdita evidente
Q4_K_M18 GB21 GB29 GB+1.9% piccola perdita
Q5_K_M21 GB23 GB32 GB+0.6% perdita minima
Q6_K24 GB26 GB35 GB+0.2% quasi senza perdita
Q8_031 GB33 GB42 GB≈ 0% uguale al completo
F1657 GB59 GB68 GB≈ 0% uguale al completo

Pesi + cache del contesto (dall'architettura del modello) + runtime. Qualità: aumento di perplexity rispetto al modello completo, dai test con llama.cpp, scalato in base alla dimensione del modello. Simula la tua configurazione.

Punteggio Chat nel tempo

gemma-3-27b-it 1358Miglior modello a pagamento

Punteggio Arena dal 17 apr 2026 al 15 ott 2026.

Condividi questa pagina:XLinkedInRedditWhatsApp