Voter dans Free Arena

GPU › AMD

Meilleurs modèles d'IA gratuits pour RX 7600

RX 7600 : 8 GB de mémoire vidéo, 288 GB/s. Voici les modèles gratuits qu'il fait tourner, classés par votes Arena, avec la vitesse à laquelle vous pouvez vous attendre.

Simulez votre configuration · Voir le prix sur Amazon ↗ · Comparer tous les GPU

Meilleur modèle voté, avec l'aide de la RAMGemma 4 31BArena 1443 · ~4.7 tokens/s avec 64 GB de RAM
Plus gros modèle dense~10 Ben 4 bits, contexte de 8K, entièrement sur le GPU
Mémoire8 GB288 GB/s de bande passante

Des modèles plus gros grâce à 64 GB de RAM système

Une partie du modèle réside dans la mémoire système, bien plus lente que la mémoire vidéo.

ModèleScore ArenaTailleFichier 4 bitsTokens/s
Gemma 4 31B
google
144331.3 B20 GB4.7
Qwen3.8-27B
alibaba
144127.8 B18 GB6.1
Gemma 4 26B A4B
google · MoE, 4 B actifs
143425.8 B17 GB36
Qwen3.5-27B
alibaba
140927.8 B18 GB6.1
gemma-3-27b-it
google
135827.4 B18 GB5.9

Petits modèles populaires

Petits modèles officiels sans vote Arena pour l'instant, classés par nombre de téléchargements sur Hugging Face (popularité, pas qualité).

ModèleTéléchargements/moisTailleFichier 4 bitsTokens/s
Qwen3-0.6B
Qwen
28.6M0.8 B1.7 GB136
Qwen3-4B
Qwen
11.7M4 B3.6 GB58
Qwen3-8B
Qwen
8.8M8.2 B6.2 GB35
Qwen3.5-4B
Qwen
7.8M4.7 B4.0 GB67
Qwen3.5-9B
Qwen
7.3M9.7 B7.1 GB35
NVIDIA-Nemotron-3-Nano-4B-BF16
nvidia
1.7M4 B3.6 GB55

Estimations en 4 bits (Q4_K_M) avec un contexte de 8K, calibrées sur 44 tests llama.cpp réels (erreur typique d'environ ±10 %). Tokens par seconde : environ 10 correspond à la vitesse de lecture. En tant que Partenaire Amazon, FreeLLMArena réalise un bénéfice sur les achats remplissant les conditions requises ; les liens ne modifient pas les classements.

Questions

Quel est le meilleur modèle d'IA gratuit pour RX 7600 ?

Aucun modèle voté ne tient entièrement dans 8 GB en 4 bits. Les petits modèles sans vote Arena, si, et les plus gros tournent avec l'aide de la RAM système, plus lentement.

Quelle taille de modèle peut-on faire tourner sur RX 7600 ?

Environ 10 milliards de paramètres pour un modèle dense en 4 bits avec un contexte de 8K, entièrement sur le GPU. Les modèles à mélange d'experts peuvent être plus gros, et avec 64 GB de RAM système, des modèles encore plus grands tournent, mais plus lentement.

RX 7600 convient-il aux LLM locaux ?

Il dispose de 8 GB de mémoire et de 288 GB/s de bande passante. La mémoire détermine quels modèles tiennent ; la bande passante détermine leur vitesse d'écriture. Avec moins de 16 GB, il fait bien tourner les petits modèles ; les plus gros ont besoin de RAM système et deviennent lents.

Cartes similaires

Partager cette page :XLinkedInRedditWhatsApp