Famiglia DeepSeek · 1.5B parametri

DeepSeek R1 Distill Qwen 1.5B

Ragionamento R1 distillato in 1.5B. MATH-500 83.9. MIT. Funziona su qualsiasi laptop.

🇨🇳 DeepSeek·Licenza MIT·Contesto 128k tokens·Data di uscita gennaio 2025·Sta nei 128 GB di l'AI TOP ATOM di GIGABYTE (link affiliato)← Catalogo

01Cosa sa fare

Punti di forza
  • Ultraleggero (1 GB di VRAM in Q4)
  • Ragionamento CoT visibile
  • MIT
  • Contesto da 128k in 1,5B
Limiti da conoscere
  • —1.5B — capacità di ragionamento molto limitata nonostante CoT
  • —Molto verboso
Architettura
Distillazione da DeepSeek R1 a Qwen 2.5 1.5B · chain-of-thought
Addestramento
Distillato da R1 671B. Versione ultracompatta da 1,5B con ragionamento CoT.
Ideale per
Laptop per le matematicheRagionamento edge

05Installare

Installa Ollama per il tuo OS. Verifica il modello e la sua quantizzazione prima del download. Inizia con 4096 token di contesto, poi controlla l'allocazione con ollama ps. Un comando qui sotto non dimostra che sia stato eseguito un test sulla tua macchina.

$ollama run deepseek-r1:1.5b
⚠
Primo download: tra 2 e 40 GB a seconda della quantizzazione scelta. Occorre prevedere spazio su disco; è consigliata una connessione stabile. Gli avvii successivi sono istantanei.

02Memoria richiesta

VRAM GPU approssimativa per far girare questo modello, overhead del contesto di 4k token incluso. Per un contesto più lungo, aggiungi ~1 GB per ogni blocco di 8k token.

Q4_K_M
Il più leggero, ~5% di perdita
1 GB
Q5_K_M
Buon compromesso qualità/dimensione
1.2 GB
Q8_0
Quasi indistinguibile da FP16
2 GB
FP16
Piena precisione — uso server
3 GB
Fallback CPU · Se non hai una GPU, considera 3 GB di RAM minimo per far girare questo modello a velocità ridotta.

Quale hardware serve per DeepSeek R1 Distill Qwen 1.5B?

Per eseguire DeepSeek R1 Distill Qwen 1.5B in locale con quantizzazione Q4, servono circa 1 GB di VRAM. Un’opzione da confrontare: RTX 5060 Ti 16 GB — lascia un margine per il sistema e il contesto; verifica la compatibilità del motore con la GPU.

Offerta attuale: RTX 5060 Ti 16 GB
AmazonVedi il prezzo →

Link affiliati — possibile commissione senza costi aggiuntivi per te, raccomandazione indipendente. In qualità di Partner Amazon, QualeLLM realizza un profitto sugli acquisti idonei.

In mobilità: DeepSeek R1 Distill Qwen 1.5B funziona anche su un Portatile RTX (16 GB di VRAM) →

Questo modello nel tuo ChatGPT privato, senza cloud

Il tuo ChatGPT privato e gratuito sulla tua macchina in 1 ora — LM Studio, Ollama, Open WebUI, i tuoi documenti, senza cloud.

  • Spazio online a vita
  • PDF + file
  • Aggiornamenti a vita

03Velocità prevista

Token generati al secondo in Q4_K_M, contesto 4k. Oltre 20 t/s, la lettura è confortevole. Al di sotto di 10 t/s, va bene solo per fare delle prove.

Entry-level
~50t/s
GTX 1650, RX 6600, MBA M2 8 GB
Fascia media
~150t/s
RTX 4060, 4070, MBP M3 Pro
Fascia alta
~300t/s
RTX 4090, M4 Max, Radeon 7900

04Benchmark pubblici

Punteggi ripresi dalle model card o da MMLU-Pro / fonti della community. Unità: % di risposte corrette.

MATH-500
83.9