Famiglia Phi · 3.8B parametri

Phi-4 Mini 3.8B

3,8B MIT con function calling. MMLU 67,3, HumanEval 74,4. 200k vocab, LongRoPE.

🇺🇸 Microsoft·Licenza MIT·Contesto 125k tokens·Data di uscita febbraio 2025·Sta nei 128 GB di l'AI TOP ATOM di GIGABYTE (link affiliato)← Catalogo

01Cosa sa fare

Punti di forza
  • Function calling nativo
  • 128k ctx
  • Licenza MIT
Limiti da conoscere
  • —Anglais-first
Architettura
Dense 3.8B · GQA · LongRoPE · embedding condivisi · 200k vocab
Addestramento
Corpus Phi di alta qualità.
Ideale per
Assistente per laptopTool calling

05Installare

Installa Ollama per il tuo OS. Verifica il modello e la sua quantizzazione prima del download. Inizia con 4096 token di contesto, poi controlla l'allocazione con ollama ps. Un comando qui sotto non dimostra che sia stato eseguito un test sulla tua macchina.

$ollama run phi4-mini:3.8b
⚠
Primo download: tra 2 e 40 GB a seconda della quantizzazione scelta. Occorre prevedere spazio su disco; è consigliata una connessione stabile. Gli avvii successivi sono istantanei.

02Memoria richiesta

VRAM GPU approssimativa per far girare questo modello, overhead del contesto di 4k token incluso. Per un contesto più lungo, aggiungi ~1 GB per ogni blocco di 8k token.

Q4_K_M
Il più leggero, ~5% di perdita
3 GB
Q5_K_M
Buon compromesso qualità/dimensione
3.5 GB
Q8_0
Quasi indistinguibile da FP16
5 GB
FP16
Piena precisione — uso server
8 GB
Fallback CPU · Se non hai una GPU, considera 6 GB di RAM minimo per far girare questo modello a velocità ridotta.

Quale hardware serve per Phi-4 Mini 3.8B?

Per eseguire Phi-4 Mini 3.8B in locale con quantizzazione Q4, servono circa 3 GB di VRAM. Un’opzione da confrontare: RTX 5060 Ti 16 GB — lascia un margine per il sistema e il contesto; verifica la compatibilità del motore con la GPU.

Offerta attuale: RTX 5060 Ti 16 GB
AmazonVedi il prezzo →

Link affiliati — possibile commissione senza costi aggiuntivi per te, raccomandazione indipendente. In qualità di Partner Amazon, QualeLLM realizza un profitto sugli acquisti idonei.

In mobilità: Phi-4 Mini 3.8B funziona anche su un Portatile RTX (16 GB di VRAM) →

Questo modello nel tuo ChatGPT privato, senza cloud

Il tuo ChatGPT privato e gratuito sulla tua macchina in 1 ora — LM Studio, Ollama, Open WebUI, i tuoi documenti, senza cloud.

  • Spazio online a vita
  • PDF + file
  • Aggiornamenti a vita

03Velocità prevista

Token generati al secondo in Q4_K_M, contesto 4k. Oltre 20 t/s, la lettura è confortevole. Al di sotto di 10 t/s, va bene solo per fare delle prove.

Entry-level
~22t/s
GTX 1650, RX 6600, MBA M2 8 GB
Fascia media
~65t/s
RTX 4060, 4070, MBP M3 Pro
Fascia alta
~150t/s
RTX 4090, M4 Max, Radeon 7900

04Benchmark pubblici

Punteggi ripresi dalle model card o da MMLU-Pro / fonti della community. Unità: % di risposte corrette.

MMLU
67.3
HumanEval
74.4
MATH
71.5