Vota en Free Arena

Todos los modelos › LiquidAI

LFM2-1.2B

LiquidAI · licencia abierta · lanzado el 10 jul 2025

Descargar Sin votos en Arena
Puntuación de Arena—Aún sin votos en Arena
Tamaño1.2 Bparámetros
Descarga a 4 bits0.7 GBsolo los pesos, Q4_K_M
Contexto máximo125Ktokens, según la configuración del modelo

Dónde usarlo gratis

Aún sin votos en Arena

Arena no ha votado este modelo. Aparece porque es un modelo pequeño popular en la página oficial de su laboratorio en Hugging Face (42K descargas al mes).

Velocidad en hardware popular

HardwareMemoria de GPU¿Cabe?Velocidad
RTX 3060 12 GB12 GBCabe en la GPU135 tok/s
RTX 4060 Ti 16 GB16 GBCabe en la GPU111 tok/s
RTX 309024 GBCabe en la GPU288 tok/s
RTX 409024 GBCabe en la GPU304 tok/s
RTX 509032 GBCabe en la GPU437 tok/s
RX 7900 XTX24 GBCabe en la GPU294 tok/s
2 × RTX 309048 GBCabe en la GPU280 tok/s
4 × RTX 309096 GBCabe en la GPU265 tok/s
Mac M4 Max 128 GB96 GBCabe en la GPU129 tok/s
Ryzen AI Max+ 395 128 GB96 GBCabe en la GPU100 tok/s
8 × H100 SXM640 GBCabe en la GPU489 tok/s

Estimación a 4 bits con contexto de 32K y 64 GB de DDR5 para el volcado a RAM. Velocidad ≈ ancho de banda de memoria × 78 % ÷ datos leídos por token, más un coste fijo por token, calibrada con 44 pruebas reales de llama.cpp; error típico de unos ±10 %. Compara todas las GPU.

Memoria de GPU necesaria

NivelContexto de 8KContexto de 32KCalidad frente al modelo completo
Q3_K_M1.5 GB2.3 GB+10.5 % pérdida notable
Q4_K_M1.6 GB2.4 GB+2.8 % pérdida pequeña
Q5_K_M1.7 GB2.5 GB+0.9 % pérdida muy pequeña
Q6_K1.9 GB2.7 GB+0.3 % casi sin pérdida
Q8_02.1 GB2.9 GB≈ 0 % igual que el completo
F163.3 GB4.1 GB≈ 0 % igual que el completo

Pesos + caché de contexto (según la arquitectura del modelo) + entorno de ejecución. Calidad: aumento de perplexity respecto al modelo completo, según pruebas de llama.cpp, ajustado al tamaño del modelo. Simula tu propia configuración.

Comparte esta página:XLinkedInRedditWhatsApp