Milyen új kihívások jelennek meg, amikor mesterséges intelligencia ügynököket állítunk munkába? Miként formálja át az ügynökök megjelenése a termék- és felhasználói analitikát? Ez a videó egy korszakváltás lehetőségeiről szól, amelyben nem csupán a felhasználók viselkedése, hanem az ügynökök által végzett munka is hangsúlyossá válik.
Az előadó kifejti, hogy a megszokott elemzési módszerek — például kattintások, felhasználói munkamenetek, chattevékenység — már nem feltétlenül elegendőek az ügynök-alapú környezetekben. Olyan kérdések kerülnek előtérbe, mint: mire utasították az ügynököt, milyen eszközöket használt, hol hibázott, hogyan reagált a felhasználó a válaszokra, és mikor kellett közbelépnie vagy módosítania a folyamaton?
Külön figyelmet kap az ügynökök tevékenységének részletezése — például, hogyan történik az elfogadás vagy megszakítás, sikeres volt-e a munkafolyamat, mely események jelzik, ha valami rossz irányba halad? A videó kitér arra, miért kulcsfontosságú követni az úgynevezett agent run-okat, illetve, hogy a hagyományos mérőszámok helyett mik az ügynök-alapú rendszerek új metrikái.
Felmerülnek olyan, a termékfejlesztés szempontjából égetően fontos feladatok is, mint az adatvédelem, a folyamatok átláthatósága és az ügynökök autonómiájának helyes kalibrálása. Ezek nélkül könnyen előfordulhat, hogy egy AI-ügynök hibája komoly károkat okoz — ahogy az a bemutatott példában is megtörtént, amikor egy ügynök pillanatok alatt törölt egy teljes produkciós adatbázist.
