A
A
  • Angol
  • Magyar
  • 11 perc

Új kompakt AI-modell lenyűgöző teljesítménnyel: MiniCPM5-1B a gyakorlatban

Lokálisan futó kompakt mesterséges intelligenciát tesztelnek, amely valós feladatok során lep meg teljesítményével és egyedi funkcióival.

Egy új, 1 milliárd paraméteres lokális mesterséges intelligencia modellt mutatnak be, amely meglepően jól teljesít mind programozási, mind érvelési feladatokban. Felmerül a kérdés: hogyan képes egy ilyen kompakt modell vetekedni nagyobb társai eredményeivel?

A bemutatóban a telepítés, konfiguráció és használat lépésről lépésre történik, beleértve, hogy mely platformokra és szoftverekre kompatibilis a MiniCPM5-1B. Különösen érdekes, ahogy a videó kitér a modell VRAM-felhasználására és gyakorlati futtatására, akár fogyasztói GPU-n vagy CPU-n is.

A videóban tesztelik a modell válaszait különböző típusú feladatokra: nyelvi kreativitás, diétás receptek, kódírás, etikai érvelés és többnyelvű fordítás is előkerül. Fókuszba kerül, mennyire képes a modell alkalmazkodni összetett vagy ravasz felhasználói kérésekhez, és mennyire koherens, hasznos vagy találékony válaszokat ad különböző szituációkban.

Szintén szó esik a modell betanítási és finomhangolási folyamatáról, valamint arról, milyen egyedi architektúrával és funkciókkal (pl. hibrid értelmezési mód, ‘enable thinking’ kapcsoló) próbál kitűnni más nyílt forráskódú modellek közül. Felvetődik, hogy a többnyelvűséggel mennyire tud megbirkózni, illetve milyen gyakorlati kompromisszumokat kell kötnie egy ekkora méretű MI-nek.