A
A
  • Angol
  • Magyar
  • 26 perc

Zenei AI teszt: YuE2 modell helyi kipróbálása és tapasztalatok

A YuE2 zenei generáló modellt helyben tesztelik különböző nyelveken, kiemelve a szerkeszthetőségét és a mesterséges vokál korlátait.

A YuE2 egy kisméretű, teljesen nyílt forráskódú zenei generáló modell, amely lenyűgöző pontszámokat ért el a különböző teszteken. Az összehasonlítás során kiemelkedő eredményeket mutatott, sőt, meghaladta a piacon lévő zárt modelleket is, például a SonoV6-ot. Mindez annak ellenére történt, hogy a valós teljesítményt nemcsak a benchmarkok alapján ítélik meg, hanem valódi tesztek során is vizsgálják a felhasználók.

A szoftver használata során saját gépen, helyben lehet kipróbálni a modellt, amely 3 milliárd paraméteres méretével mégis képes futni átlagos GPU-kon is. Érdekesség, hogy a generált zenék szerkeszthető kottát is létrehoznak, így a dallam, akkordok, szöveg szabadon módosíthatóak – akár újrarendereléssel is.

Kiemelt figyelmet kap, hogyan alakítja át a szöveget zenévé: először szimbolikus kottát generál (ABC notációban), majd ebből audioreprezentációt, végül 48 kHz-es hanghullámokat. Ez az architektúra rugalmas szerkesztést és újragenerálást tesz lehetővé, ami különösen előnyös zeneszerzőknek.

A bemutató során különböző nyelvű dalokat hoztak létre, többek között angol, mandarin, orosz, lengyel, hindi, arab, francia, német, portugál és más nyelveken is. Minden esetben megfigyelhető volt a zenei színvonal, azonban a vokál életszerűsége, emberiessége még további fejlesztést igényel – ezt a nézők visszajelzései is segíthetik.

Végül, a videó kérdéseket vet fel a modellek valódi életképességéről: vajon valóban felismerhető-e a mesterségesen generált zene, mennyire támogatja a modellezett rendszer a szerzői kreativitást, és hogyan áll helyt különböző stílusokban vagy anyanyelveken?