Phi-4

Phi-4 ni modeli ya lugha iliyoundwa na Microsoft Research (Marekani), iliyotolewa 12 Desemba 2024.

Uzito wake (weights) uko wazi: mtu yeyote anaweza kuipakua, kuiendesha na kuitumia hata kibiashara.

Ina vigezo (parameters) bilioni 14.

Naweza kuiendesha mwenyewe?

Ndiyo, kwenye kompyuta mpakato au kifaa chenye uwezo mkubwa zaidi.

  1. SimuRAM ya GB 6–8
  2. Kompyuta mpakatoRAM ya GB 16
  3. Kompyuta yenye uwezo mkubwaGB 24 hadi 64 (kadi ya michoro au Mac yenye uwezo mkubwa)
  4. Sevazaidi ya GB 64

Inahitaji takriban GB 9.4 za kumbukumbu (RAM) ikibanwa hadi biti 4.

Programu kama Ollama au LM Studio zinapakua na kuendesha modeli kwenye kompyuta yako, bila intaneti.

Matokeo ya majaribio

129ECI

Nafasi ya 161 kati ya modeli 258 zilizopimwa.

Kipimo cha Uwezo cha Epoch (ECI) kinajumlisha matokeo ya majaribio mengi kuwa alama moja, kama alama ya mtihani mkuu. Alama ya juu zaidi ndiyo bora.

Sayansi ngumu (GPQA Diamond)Maswali ya biolojia, fizikia na kemia ya kiwango cha shahada ya uzamivu. Ukibahatisha unapata 25%.
56.1%
Mashindano ya hesabu (AIME)Maswali ya mashindano ya hesabu ya wanafunzi wa sekondari ya juu.
13.8%
Maarifa ya jumla (MMLU)Maswali ya kuchagua jibu katika masomo 57, kutoka historia hadi sheria. Kipimo maarufu cha modeli za zamani.
84.8%

Modeli nyingine za Microsoft Research

  1. Grounding Dino LChinese University of Hong Kong (CUHK), Hong Kong University of Science and Technology (HKUST), International Digital Economy Academy, Microsoft Research, South China University of Technology na Tsinghua UniversityJul 2024Utambuzi wa picha
    Wazi341MSimu
  2. CARPMicrosoft ResearchFeb 2024Biolojia
    Wazi643M
  3. HiFi - NNBasecamp Research, Microsoft Research, Molecular Institute of Biology na Technical University of MunichDes 2023Biolojia
    Wazi3M
  4. Orca 2-13BMicrosoft ResearchNov 2023Lugha
    Wazi, si kwa biashara13BKompyuta mpakato
  5. LLaVA 1.5Microsoft Research na University of Wisconsin MadisonNov 2023Data mseto, Lugha
    Wazi, kwa masharti13BKompyuta mpakato
  6. CODEFUSION (Python)Microsoft na Microsoft ResearchOkt 2023Lugha
    Haijatolewa75M