In der Free Arena abstimmen

Alle Modelle › LiquidAI

LFM2.5-VL-3B

LiquidAI · offene Lizenz · veröffentlicht am 11. Aug. 2026

Download Keine Arena-Stimmen
Arena-Wertung—In der Arena noch nicht bewertet
Größe3.1 BParameter
4-Bit-Download1.9 GBnur Gewichte, Q4_K_M
Max. Kontext32KTokens, laut Modellkonfiguration

Wo du es kostenlos nutzen kannst

Noch keine Arena-Stimmen

Die Arena hat über dieses Modell noch nicht abgestimmt. Es steht in der Liste, weil es ein beliebtes kleines Modell auf der offiziellen Hugging-Face-Seite seines Labors ist (28K Downloads im Monat).

Geschwindigkeit auf gängiger Hardware

HardwareGPU-SpeicherPasst es?Geschwindigkeit
RTX 3060 12 GB12 GBPasst in die GPU104 tok/s
RTX 4060 Ti 16 GB16 GBPasst in die GPU85 tok/s
RTX 309024 GBPasst in die GPU232 tok/s
RTX 409024 GBPasst in die GPU246 tok/s
RTX 509032 GBPasst in die GPU367 tok/s
RX 7900 XTX24 GBPasst in die GPU237 tok/s
2 × RTX 309048 GBPasst in die GPU225 tok/s
4 × RTX 309096 GBPasst in die GPU213 tok/s
Mac M4 Max 128 GB96 GBPasst in die GPU109 tok/s
Ryzen AI Max+ 395 128 GB96 GBPasst in die GPU76 tok/s
8 × H100 SXM640 GBPasst in die GPU429 tok/s

Schätzung bei 4-Bit mit 32K Kontext, 64 GB DDR5 zum Auslagern. Geschwindigkeit ≈ Speicherbandbreite × 78 % ÷ pro Token gelesene Daten, plus feste Kosten pro Token, kalibriert an 44 echten llama.cpp-Tests; typische Abweichung etwa ±10 %. Alle Grafikkarten vergleichen.

Benötigter GPU-Speicher

Stufe8K Kontext32K KontextQualität im Vergleich zum Original
Q3_K_M2.3 GB2.7 GB+10.5 % spürbarer Verlust
Q4_K_M2.6 GB3.0 GB+2.8 % kleiner Verlust
Q5_K_M2.9 GB3.3 GB+0.9 % sehr kleiner Verlust
Q6_K3.3 GB3.7 GB+0.3 % nahezu verlustfrei
Q8_04.0 GB4.4 GB≈ 0 % wie das Original
F166.9 GB7.3 GB≈ 0 % wie das Original

Gewichte + Kontext-Cache (aus der Architektur des Modells) + Laufzeit. Qualität: Anstieg von perplexity gegenüber dem vollen Modell, aus llama.cpp-Tests, skaliert nach Modellgröße. Simuliere dein eigenes Setup.

Diese Seite teilen:XLinkedInRedditWhatsApp