A
A
Le chonk: The Mistral Large 4 Thoroughly Tested

Le chonk: The Mistral Large 4 Thoroughly Tested

Lejátszás
  • Angol
  • Magyar
  • 9 perc

Mistrol Large 4: az új mesterséges intelligencia tesztelése és eredményei

Az ML4 mesterséges intelligencia-modell képességeit változatos teszteken vizsgálják: kódhibák, logikai okfejtés, társadalmi helyzetek és többnyelvűség is fókuszba kerül.

A Mistrol Large 4, vagyis ML4 érkezését egyedi névvel és pixelcicával ünnepelték, amivel a fejlesztőcsapat saját magát előzte meg a hivatalos arculat megteremtésében. Ez a modell mintegy egymilliárd paraméterrel rendelkezik, és saját európai adatközpontban tanították. A közönség számára előnézeti verzió érhető el, valamint API-n keresztül is elérhető, és hamarosan az open weights kiadását is ígérik.

A tesztek között szerepelt HTML-generálás képalapú prompt alapján, valamint érdekes logikai és tudományos érvelési feladatok is. Például négy ember elektromos áramütésének esélyét kellett kiszámolnia képek alapján, ahol a modell lépésről lépésre okfejtette ki a helyes válaszokat.

Az ML4 különféle benchmark teszteken is bemutatkozott, például szoftvermérnöki feladatokat, parancssoros kihívásokat és biztonsági sebezhetőségeket vizsgálva. Különösen jól teljesített a kódhibák feltárásában és a „cyber indexben”, ahol még a konkurens kínai modellekkel is felvette a versenyt.

További izgalmas kihívásokat jelentett a közösségi helyzetértelmezés, ahol WhatsApp-üzenetek valódi szándékainak felismerése, valamint egy tamil újság címlapjának hetvenöt nyelvre történő fordítása is szerepelt. Kiderült, hogy az ML4 főleg a nagyobb, magasabb erőforrású nyelvekkel boldogul jól, míg az alacsony erőforrású nyelvekkel nehezebben birkózik meg.