Vota in Free Arena

GPU › NVIDIA

I migliori modelli AI gratis per RTX 5060

RTX 5060: 8 GB di memoria video, 448 GB/s. Questi sono i modelli gratis che riesce a usare, in ordine di voti su Arena, con la velocità che puoi aspettarti.

Simula la tua configurazione · Controlla il prezzo su Amazon ↗ · Confronta tutte le GPU

Miglior modello votato, con l'aiuto della RAMGemma 4 31BArena 1443 · ~5.0 token/s con 64 GB di RAM
Modello denso più grande~10 Ba 4 bit, contesto da 8K, tutto sulla GPU
Memoria8 GB448 GB/s di banda

Modelli più grandi con l'aiuto di 64 GB di RAM di sistema

Una parte del modello resta nella memoria di sistema, che è molto più lenta della memoria video.

ModelloPunteggio ArenaDimensioneFile a 4 bitToken/s
Gemma 4 31B
google
144331.3 B20 GB5.0
Qwen3.8-27B
alibaba
144127.8 B18 GB6.6
Gemma 4 26B A4B
google · MoE, 4 B attivi
143425.8 B17 GB40
Qwen3.5-27B
alibaba
140927.8 B18 GB6.6
gemma-3-27b-it
google
135827.4 B18 GB6.4

Modelli piccoli diffusi

Modelli piccoli ufficiali senza ancora voti su Arena, in ordine di download su Hugging Face (conta la popolarità, non la qualità).

ModelloDownload al meseDimensioneFile a 4 bitToken/s
Qwen3-0.6B
Qwen
28.6M0.8 B1.7 GB197
Qwen3-4B
Qwen
11.7M4 B3.6 GB88
Qwen3-8B
Qwen
8.8M8.2 B6.2 GB54
Qwen3.5-4B
Qwen
7.8M4.7 B4.0 GB101
Qwen3.5-9B
Qwen
7.3M9.7 B7.1 GB54
NVIDIA-Nemotron-3-Nano-4B-BF16
nvidia
1.7M4 B3.6 GB84

Stime a 4 bit (Q4_K_M) con contesto da 8K, calibrate su 44 test reali con llama.cpp (errore tipico di circa ±10%). Token al secondo: circa 10 è la velocità di lettura. Come affiliati Amazon, FreeLLMArena guadagna dagli acquisti idonei; i link non cambiano le classifiche.

Domande

Qual è il miglior modello AI gratis per RTX 5060?

Nessun modello votato entra interamente in 8 GB a 4 bit. Ci entrano i modelli piccoli senza voti su Arena, mentre quelli più grandi girano con l'aiuto della RAM di sistema, più lentamente.

Che dimensione di modello regge RTX 5060?

Circa 10 miliardi di parametri per un modello denso a 4 bit con contesto da 8K, tutto sulla GPU. I modelli mixture-of-experts possono essere più grandi e, con 64 GB di RAM di sistema, girano anche modelli più grossi, ma più lentamente.

RTX 5060 va bene per gli LLM in locale?

Ha 8 GB di memoria e 448 GB/s di banda. La memoria decide quali modelli ci stanno; la banda decide quanto velocemente scrivono. Con meno di 16 GB fa girare bene i modelli piccoli; quelli più grandi hanno bisogno della RAM di sistema e diventano lenti.

Schede simili

Condividi questa pagina:XLinkedInRedditWhatsApp