A
A
  • Angol
  • Magyar
  • 17 perc

4D Gaussian splatting többkamerás rögzítéssel: praktikus munkafolyamat bemutató

A videó lépésről lépésre mutatja be, hogyan dolgozhatunk fel több kameraállásból származó képsorozatokat volumetrikus, 4D Gaussian szekvenciává, kiemelve a praktikus munkafolyamatot eszközszűkös körülmények között is.

Az anyag középpontjában a 4D Gaussian splatting módszer munkafolyamatának bemutatása áll, amely során többkamerás rögzítési technikák segítségével készítenek volumetrikus videót. A szerző hangsúlyozza, hogy bár nincs saját professzionális stúdiófelszerelése, egy Berlinben élő kollégától, Nicktől kapott nyersanyagokat, amelyek lehetővé tették számára a folyamat fejlesztését. Nick 14 DSLR kamerából épített hordozható, könnyen szállítható kamerariggel vette fel saját mozgását félkörívben elrendezett kamerákkal, majd a felvételeket képsorozatokra bontotta, és átadta feldolgozásra.

A bemutatott munkafolyamat főleg nyílt forráskódú segédszoftverek és egyedi szkriptek használatára támaszkodik, ugyanakkor kiemelt szerepet kap benne a Postshot Studio szoftver, amely a kameraállások és pontfelhők koordinátáit biztosítja. Az összes kameraállásból származó képek precízen szinkronizálva kerülnek egy szervezett könyvtárstruktúrába, majd referenciakép-feldolgozással meghatározzák az alapbeállításokat.

A cropbox és ROI (Region Of Interest) box funkciók segítségével szűkítik a feldolgozandó térfogatot, ezáltal csökkentve a fájlméreteket és optimalizálva a munkafolyamatot. A megfelelő koordináták és méretek megadásával mindegyik képre vonatkozóan elkészülhet a végső PLY szekvencia, amelyet további tesztelés és elemzés követ.

Kitérnek arra is, hogy a folyamathoz szükséges szkriptek és programok nagy része ingyenesen elérhető, de a legfontosabb lépéshez, a Postshot Studio CLI licencére van szükség. A szerző megosztja tapasztalatait a nem ideális körülmények miatt keletkező zajokról, artefaktumokról és a fájlméretek kezeléséről. Felvetődik, hogy ezen problémák egy része utófeldolgozással – például After Effects rotoscopinggal – csökkenthető lenne, de ez már egy másik témakör, amely további kísérletezést igényel.