In der Free Arena abstimmen

Alle Modelle › alibaba

qwen3-235b-a22b-instruct-2507

alibaba · Apache-2.0-Lizenz · in der Arena seit 1. Aug. 2025

Chat des Labors Download
Arena-Wertung1419Platz 119 von 416 im Chat, kostenpflichtige Modelle eingeschlossen
Größe235.1 B22 B aktiv pro Token (Mixture of Experts)
4-Bit-Download142 GBnur Gewichte, Q4_K_M
Max. Kontext256KTokens, laut Modellkonfiguration

Wo du es kostenlos nutzen kannst

Arena-Wertungen

ArenaWertungRangStimmen
Chat1419Platz 119 von 41698K

Rang unter allen Modellen, auch den kostenpflichtigen. Quelle: Arena-Leaderboard-Datensatz.

Geschwindigkeit auf gängiger Hardware

HardwareGPU-SpeicherPasst es?Geschwindigkeit
RTX 3060 12 GB12 GBPasst nicht—
RTX 4060 Ti 16 GB16 GBPasst nicht—
RTX 309024 GBPasst nicht—
RTX 409024 GBPasst nicht—
RTX 509032 GBPasst nicht—
RX 7900 XTX24 GBPasst nicht—
2 × RTX 309048 GBPasst nicht—
4 × RTX 309096 GBPasst nicht—
Mac M4 Max 128 GB96 GBPasst nicht—
Ryzen AI Max+ 395 128 GB96 GBPasst nicht—
8 × H100 SXM640 GBPasst in die GPU80 tok/s

Schätzung bei 4-Bit mit 32K Kontext, 64 GB DDR5 zum Auslagern. Geschwindigkeit ≈ Speicherbandbreite × 78 % ÷ pro Token gelesene Daten, plus feste Kosten pro Token, kalibriert an 44 echten llama.cpp-Tests; typische Abweichung etwa ±10 %. Alle Grafikkarten vergleichen.

Benötigter GPU-Speicher

Stufe8K Kontext32K Kontext128K KontextQualität im Vergleich zum Original
Q3_K_M120 GB124 GB143 GB+4.7 % spürbarer Verlust
Q4_K_M145 GB149 GB168 GB+1.2 % sehr kleiner Verlust
Q5_K_M169 GB174 GB193 GB+0.4 % nahezu verlustfrei
Q6_K195 GB200 GB219 GB+0.2 % nahezu verlustfrei
Q8_0252 GB257 GB276 GB≈ 0 % wie das Original
F16472 GB477 GB496 GB≈ 0 % wie das Original

Gewichte + Kontext-Cache (aus der Architektur des Modells) + Laufzeit. Qualität: Anstieg von perplexity gegenüber dem vollen Modell, aus llama.cpp-Tests, skaliert nach Modellgröße. Simuliere dein eigenes Setup.

Chat-Wertung im Zeitverlauf

qwen3-235b-a22b-instruct-2507 1419Bestes kostenpflichtiges Modell

Arena-Wertung vom 17. Apr. 2026 bis 15. Okt. 2026.

Ähnliche kostenlose Modelle im Chat

Diese Seite teilen:XLinkedInRedditWhatsApp