Voter dans Free Arena

Tous les modèles › RecursiveSI

Flint

RecursiveSI · sorti le 21 oct. 2026

Free API Download New · waiting for Arena votes
Score Arena—Pas encore de vote sur Arena
Taille39.8 B2.5 B actifs par token (mélange d'experts)
Téléchargement en 4 bits24 GBpoids seuls, Q4_K_M
Contexte max.256Ktokens, d'après la configuration du modèle

Où l'utiliser gratuitement

Nouveau : en attente de votes Arena

Sorti le 21 oct. 2026. Arena n'a pas encore voté pour ce modèle. Dès que ce sera le cas, le modèle rejoindra le classement automatiquement, en général la nuit suivante. D'ici là, vous pouvez déjà consulter ci-dessous sa taille, ses besoins en mémoire et sa vitesse, et l'essayer gratuitement.

Vitesse sur du matériel courant

MatérielMémoire GPUÇa tient ?Vitesse
RTX 3060 12 GB12 GBGPU + 64 GB de RAM50 tok/s
RTX 4060 Ti 16 GB16 GBGPU + 64 GB de RAM52 tok/s
RTX 309024 GBGPU + 64 GB de RAM134 tok/s
RTX 409024 GBGPU + 64 GB de RAM139 tok/s
RTX 509032 GBTient dans le GPU218 tok/s
RX 7900 XTX24 GBGPU + 64 GB de RAM136 tok/s
2 × RTX 309048 GBTient dans le GPU156 tok/s
4 × RTX 309096 GBTient dans le GPU148 tok/s
Mac M4 Max 128 GB96 GBTient dans le GPU81 tok/s
Ryzen AI Max+ 395 128 GB96 GBTient dans le GPU65 tok/s
8 × H100 SXM640 GBTient dans le GPU220 tok/s

Estimation en 4 bits avec un contexte de 32K et 64 GB de DDR5 pour le déchargement. Vitesse ≈ bande passante mémoire × 78 % ÷ données lues par token, plus un coût fixe par token, calibrée sur 44 tests llama.cpp réels ; erreur typique d'environ ±10 %. Comparer tous les GPU.

Mémoire GPU nécessaire

NiveauContexte de 8KContexte de 32KContexte de 128KQualité vs original
Q3_K_M21 GB21 GB24 GB+6.2% perte sensible
Q4_K_M25 GB26 GB29 GB+1.6% faible perte
Q5_K_M29 GB30 GB33 GB+0.5% quasi sans perte
Q6_K34 GB34 GB37 GB+0.2% quasi sans perte
Q8_043 GB44 GB47 GB≈ 0% identique à l'original
F1680 GB81 GB84 GB≈ 0% identique à l'original

Poids + cache de contexte (d'après l'architecture du modèle) + runtime. Qualité : hausse de perplexity par rapport au modèle complet, d'après les tests llama.cpp, ajustée selon la taille du modèle. Simulez votre propre configuration.

Partager cette page :XLinkedInRedditWhatsApp

Appuyez sur / ou Ctrl+K pour rechercher depuis n’importe quelle page.