A Netflix speciális rendszere megváltoztathatja a filmgyártást, olvasható egy új tanulmányban. A cég által fejlesztett mesterséges intelligencia a fizikai törvényszerűségeket figyelembe véve módosítja a jeleneteket.
Egy film utómunkája során számos eszköz áll a stáb rendelkezésére, amelyek segítségével el tudnak távolítani a felvételről eszközöket vagy embereket. Ez a technológia azonban korlátozott: ha például egy széket szeretnének egy színész alól eltávolítani, a karakter továbbra is ülve marad, csak a levegőben.
Erre a problémára találtak ki megoldást a Netflix szakemberei: Tehát a szék nélküli színész már nem lebegne, hanem a padlón üldögélne.
Hogyan működik?
Azért, hogy egy objektum eltávolítása realisztikusnak tűnjön, ne pedig fizikai értelemben lehetetlennek, a VOID a fizikai törvényszerűségeket figyelembe véve működik. Egy három lépéses folyamat segíti átgondolni az adott jelenetet.
Először azonosítja a változásokat érintő területeket, majd létrehoz egy speciális térképet, vagyis egy quadmaszkot. Ez az a terület, ahol az objektumok eltérően mozoghatnak és eltűnnek az árnyékok. Ezután létrehoz egy új videóverziót, amely figyelembe veszi ezeket a változásokat, végül másodszorra is átfuttatja a jelenetet, hogy finomítsa a mozgást és hogy az objektumok ne veszítsék el alakjukat mozgás közben.
A rendszert több ezer digitális szekvencián képezték ki, hogy megértse az ok-okozati összefüggéseket. A szimulált cselekmények megfigyelésével a mesterséges intelligenciának sikerült megtanulnia, hogy jellemzően hogyan viselkednek a tárgyak ha eltűnnek a támaszok, ha ütköznek és amikor akadállyal találkoznak.
A projekt oldalán rengeteg példavideót osztottak meg a fejlesztők, például képes egy tekéző csapatot és a golyót törölni, ezért a bábuk állva maradnak. A rendszer átlagosan néhány másodperces felvételeket képes még csak manipulálni, de a mérnökök bíznak abban, hogy a jövőben hosszabb videókon is használható lesz majd.
