Az ismertetett videó középpontjában egy olyan mesterséges intelligencia alapú eszköz áll, amely képes minden egyes képpontot követni mozgókép-sorozatban. A szerző részletesen bemutatja, hogyan telepíthető a rendszer egy saját gépre, és hogyan lehet egy egyszerű példán keresztül kipróbálni az eszköz képességeit.
A jelenlegi videókockák követésére használt hagyományos módszerek több korláttal küzdenek, például pontatlanságok halmozódhatnak fel idővel egy hosszabb klip elemzése során. Egy másik kihívás, hogy a legtöbb eljárás csak egyes, kiválasztott pontokat tud hosszabb távon követni, nem pedig az egész képet. Ez a szoftver teljesen új szemlélettel közelíti meg a problémát: minden egyes pixel útját képes meghatározni, még a videó teljes tartamán keresztül is.
A rendszer architektúrája ötvözi az optikai áramlás és pontkövetés területének technikáit, miközben hatékonyan feldolgozza a képsorozatokat. Az eszköz változatos alkalmazási lehetőségeket kínál: felhasználható például önvezető autókban, videószerkesztésben, vizuális effektek készítésénél, robotikában vagy sportelemzések során egyaránt. Felmerül a kérdés, hogy pontosan milyen új távlatokat nyithat meg ez a technológia a számítógépes látás és animáció területén.
A tesztpéldák között egy pillangós és egy AI által generált macskás jelenet is szerepel, ezek segítségével szemléltetik, miként működik valós környezetben a követési folyamat, mennyire részletesen és pontosan képes kezelni a különféle videók tartalmát az algoritmus.
