Vota en Free Arena

Todos los modelos › zai

GLM-4.6V

zai · licencia MIT · en Arena desde el 27 ene 2026

Chat del laboratorio Descargar
Puntuación de Arena1376n.º 178 de 416 en Chat, incluidos los modelos de pago
Tamaño107.7 B14.3 B activos por token (mezcla de expertos)
Descarga a 4 bits65 GBsolo los pesos, Q4_K_M
Contexto máximo128Ktokens, según la configuración del modelo

Dónde usarlo gratis

Puntuaciones de Arena

ArenaPuntuaciónPuestoVotos
Chat1376n.º 178 de 4163K
Visión1164n.º 113 de 1672K

Puesto entre todos los modelos, incluidos los de pago. Fuente: conjunto de datos de la clasificación de Arena.

Velocidad en hardware popular

HardwareMemoria de GPU¿Cabe?Velocidad
RTX 3060 12 GB12 GBNo cabe—
RTX 4060 Ti 16 GB16 GBNo cabe—
RTX 309024 GBGPU + 64 GB de RAM10 tok/s
RTX 409024 GBGPU + 64 GB de RAM10 tok/s
RTX 509032 GBGPU + 64 GB de RAM13 tok/s
RX 7900 XTX24 GBGPU + 64 GB de RAM10 tok/s
2 × RTX 309048 GBGPU + 64 GB de RAM16 tok/s
4 × RTX 309096 GBCabe en la GPU40 tok/s
Mac M4 Max 128 GB96 GBCabe en la GPU24 tok/s
Ryzen AI Max+ 395 128 GB96 GBCabe en la GPU13 tok/s
8 × H100 SXM640 GBCabe en la GPU97 tok/s

Estimación a 4 bits con contexto de 32K y 64 GB de DDR5 para el volcado a RAM. Velocidad ≈ ancho de banda de memoria × 78 % ÷ datos leídos por token, más un coste fijo por token, calibrada con 44 pruebas reales de llama.cpp; error típico de unos ±10 %. Compara todas las GPU.

Memoria de GPU necesaria

NivelContexto de 8KContexto de 32KContexto de 128KCalidad frente al modelo completo
Q3_K_M56 GB61 GB79 GB+4.7 % pérdida notable
Q4_K_M67 GB72 GB91 GB+1.2 % pérdida muy pequeña
Q5_K_M79 GB83 GB102 GB+0.4 % casi sin pérdida
Q6_K90 GB95 GB114 GB+0.2 % casi sin pérdida
Q8_0117 GB121 GB140 GB≈ 0 % igual que el completo
F16218 GB222 GB241 GB≈ 0 % igual que el completo

Pesos + caché de contexto (según la arquitectura del modelo) + entorno de ejecución. Calidad: aumento de perplexity respecto al modelo completo, según pruebas de llama.cpp, ajustado al tamaño del modelo. Simula tu propia configuración.

Puntuación en Chat a lo largo del tiempo

GLM-4.6V 1376Mejor modelo de pago

Puntuación de Arena del 17 abr 2026 al 15 oct 2026.

Comparte esta página:XLinkedInRedditWhatsApp