Vota en Free Arena

Todos los modelos › nvidia

NVIDIA-Nemotron-3.5-Super-VL-120B-A12B-BF16

nvidia · lanzado el 12 oct 2026

API gratuita Chat del laboratorio Descargar Nuevo · esperando votos de Arena
Puntuación de Arena—Aún sin votos en Arena
Tamaño124.5 B12 B activos por token (mezcla de expertos)
Descarga a 4 bits75 GBsolo los pesos, Q4_K_M
Contexto máximo1024Ktokens, según la configuración del modelo

Dónde usarlo gratis

Nuevo: esperando votos de Arena

Lanzado el 12 oct 2026. Arena aún no ha votado este modelo. En cuanto lo haga, el modelo pasará a la clasificación automáticamente, normalmente la noche siguiente. Mientras tanto, puedes consultar abajo su tamaño, la memoria que necesita y su velocidad, y probarlo gratis.

Velocidad en hardware popular

HardwareMemoria de GPU¿Cabe?Velocidad
RTX 3060 12 GB12 GBNo cabe—
RTX 4060 Ti 16 GB16 GBNo cabe—
RTX 309024 GBNo cabe—
RTX 409024 GBNo cabe—
RTX 509032 GBGPU + 64 GB de RAM16 tok/s
RX 7900 XTX24 GBNo cabe—
2 × RTX 309048 GBGPU + 64 GB de RAM21 tok/s
4 × RTX 309096 GBCabe en la GPU70 tok/s
Mac M4 Max 128 GB96 GBCabe en la GPU41 tok/s
Ryzen AI Max+ 395 128 GB96 GBCabe en la GPU25 tok/s
8 × H100 SXM640 GBCabe en la GPU145 tok/s

Estimación a 4 bits con contexto de 32K y 64 GB de DDR5 para el volcado a RAM. Velocidad ≈ ancho de banda de memoria × 78 % ÷ datos leídos por token, más un coste fijo por token, calibrada con 44 pruebas reales de llama.cpp; error típico de unos ±10 %. Compara todas las GPU.

Memoria de GPU necesaria

NivelContexto de 8KContexto de 32KContexto de 128KCalidad frente al modelo completo
Q3_K_M63 GB63 GB64 GB+4.7 % pérdida notable
Q4_K_M76 GB76 GB77 GB+1.2 % pérdida muy pequeña
Q5_K_M89 GB89 GB90 GB+0.4 % casi sin pérdida
Q6_K103 GB103 GB104 GB+0.2 % casi sin pérdida
Q8_0133 GB133 GB134 GB≈ 0 % igual que el completo
F16250 GB250 GB251 GB≈ 0 % igual que el completo

Pesos + caché de contexto (según la arquitectura del modelo) + entorno de ejecución. Calidad: aumento de perplexity respecto al modelo completo, según pruebas de llama.cpp, ajustado al tamaño del modelo. Simula tu propia configuración.

Comparte esta página:XLinkedInRedditWhatsApp