Mistral Large 2 (Jul 2024)
Mistral Large 2 (Jul 2024) ni modeli ya lugha iliyoundwa na Mistral AI (Ufaransa), iliyotolewa 24 Julai 2024.
Uzito wake uko wazi kwa utafiti na matumizi binafsi, lakini si kwa biashara.
Naweza kuiendesha mwenyewe?
Uzito wake uko wazi, lakini ukubwa wake haujulikani.
Bila idadi ya vigezo hatuwezi kukadiria kifaa kinachohitajika. Angalia ukurasa wa walioiunda.
Matokeo ya majaribio
126ECI
Nafasi ya 171 kati ya modeli 258 zilizopimwa.
Kipimo cha Uwezo cha Epoch (ECI) kinajumlisha matokeo ya majaribio mengi kuwa alama moja, kama alama ya mtihani mkuu. Alama ya juu zaidi ndiyo bora.
- Sayansi ngumu (GPQA Diamond)Maswali ya biolojia, fizikia na kemia ya kiwango cha shahada ya uzamivu. Ukibahatisha unapata 25%.
- 49%
- Mashindano ya hesabu (AIME)Maswali ya mashindano ya hesabu ya wanafunzi wa sekondari ya juu.
- 8.5%
- Maarifa ya jumla (MMLU)Maswali ya kuchagua jibu katika masomo 57, kutoka historia hadi sheria. Kipimo maarufu cha modeli za zamani.
- 80%