GPT-4o mini
GPT-4o mini ni modeli ya lugha, kutambua picha na uchakataji wa data mseto iliyoundwa na OpenAI (Marekani), iliyotolewa 18 Julai 2024.
Ni funge: unaitumia kupitia tovuti, programu au API ya kampuni iliyoiunda. Uzito wake haujatolewa.
Inatumiwa na watu au makampuni mengi.
Naweza kuiendesha mwenyewe?
Hapana. Ni modeli funge.
Uzito wake hauwezi kupakuliwa, kwa hivyo haiwezi kuendeshwa kwenye kifaa chako.
Matokeo ya majaribio
124ECI
Nafasi ya 179 kati ya modeli 258 zilizopimwa.
Kipimo cha Uwezo cha Epoch (ECI) kinajumlisha matokeo ya majaribio mengi kuwa alama moja, kama alama ya mtihani mkuu. Alama ya juu zaidi ndiyo bora.
- Sayansi ngumu (GPQA Diamond)Maswali ya biolojia, fizikia na kemia ya kiwango cha shahada ya uzamivu. Ukibahatisha unapata 25%.
- 37.7%
- Hisabati za utafiti (FrontierMath)Mafumbo mapya ya hisabati yaliyoandikwa na wanahisabati; mengi humchukua mtaalamu saa kadhaa au siku.
- 0.7%
- Mafumbo mapya (ARC-AGI-2)Mafumbo ya picha ambayo binadamu huyatatua kwa urahisi, lakini modeli inapaswa kugundua kanuni mpya kutoka kwenye mifano michache.
- 0%
- Ukweli wa majibu (SimpleQA Verified)Maswali mafupi ya ukweli: hupima kama modeli inajua jibu badala ya kubuni.
- 8.3%
- Mashindano ya hesabu (AIME)Maswali ya mashindano ya hesabu ya wanafunzi wa sekondari ya juu.
- 6.9%
- Maarifa ya jumla (MMLU)Maswali ya kuchagua jibu katika masomo 57, kutoka historia hadi sheria. Kipimo maarufu cha modeli za zamani.
- 81.8%