Vota in Free Arena

Tutti i modelli › zai

GLM-4.5V

zai · licenza MIT · su Arena dal 14 ago 2025

Chat del laboratorio Download
Punteggio Arena1333#223 su 416 in Chat, modelli a pagamento inclusi
Dimensione107.7 B14.3 B attivi per token (mixture of experts)
Download a 4 bit65 GBsolo pesi, Q4_K_M
Contesto massimo64Ktoken, dalla configurazione del modello

Dove usarlo gratis

Punteggi Arena

ArenaPunteggioPosizioneVoti
Chat1333#223 su 4165K
Visione1154#118 su 1673K

Posizione tra tutti i modelli, anche quelli a pagamento. Fonte: dataset della classifica Arena.

Velocità sull'hardware più diffuso

HardwareMemoria GPUCi sta?Velocità
RTX 3060 12 GB12 GBNon entra—
RTX 4060 Ti 16 GB16 GBNon entra—
RTX 309024 GBGPU + 64 GB di RAM10 tok/s
RTX 409024 GBGPU + 64 GB di RAM10 tok/s
RTX 509032 GBGPU + 64 GB di RAM13 tok/s
RX 7900 XTX24 GBGPU + 64 GB di RAM10 tok/s
2 × RTX 309048 GBGPU + 64 GB di RAM16 tok/s
4 × RTX 309096 GBEntra nella GPU40 tok/s
Mac M4 Max 128 GB96 GBEntra nella GPU24 tok/s
Ryzen AI Max+ 395 128 GB96 GBEntra nella GPU13 tok/s
8 × H100 SXM640 GBEntra nella GPU97 tok/s

Stima a 4 bit con contesto da 32K e 64 GB di DDR5 per lo scarico in RAM. Velocità ≈ banda di memoria × 78% ÷ dati letti per token, più un costo fisso per token, calibrata su 44 test reali con llama.cpp; errore tipico di circa ±10%. Confronta tutte le GPU.

Memoria GPU necessaria

LivelloContesto da 8KContesto da 32KQualità rispetto al modello completo
Q3_K_M56 GB61 GB+4.7% perdita evidente
Q4_K_M67 GB72 GB+1.2% perdita minima
Q5_K_M79 GB83 GB+0.4% quasi senza perdita
Q6_K90 GB95 GB+0.2% quasi senza perdita
Q8_0117 GB121 GB≈ 0% uguale al completo
F16218 GB222 GB≈ 0% uguale al completo

Pesi + cache del contesto (dall'architettura del modello) + runtime. Qualità: aumento di perplexity rispetto al modello completo, dai test con llama.cpp, scalato in base alla dimensione del modello. Simula la tua configurazione.

Punteggio Chat nel tempo

GLM-4.5V 1333Miglior modello a pagamento

Punteggio Arena dal 17 apr 2026 al 15 ott 2026.

Condividi questa pagina:XLinkedInRedditWhatsApp