[ad_1]
Netflix-Forscher haben eine neue Art von KI-gestützter Greenscreen-Technologie entwickelt, die in Echtzeit realistische visuelle Effekte für Film und Fernsehen erzeugen kann.
Greenscreen-Technologie wird routinemäßig verwendet, um Filmmaterial von Schauspielern aufzunehmen, das dann in den Vordergrund virtueller oder zuvor aufgezeichneter Szenen eingefügt werden kann. Dazu werden Schauspieler vor einem hellgrünen Hintergrund gefilmt, der sich leicht isolieren und digital entfernen lässt.
Dieser Vorgang kann automatisch mit angemessener Genauigkeit durchgeführt werden, beispielsweise bei Wettervorhersagen im Fernsehen, kann jedoch durch grüne Kleidungsstücke oder durch transparente oder feine Objekte wie Haarsträhnen verursacht werden. Wenn bei Filmen oder Fernsehserien eine höhere Genauigkeit erforderlich ist, optimieren Fachbediener die Einstellungen manuell, wobei es manchmal Stunden dauert, eine Aufnahme zu perfektionieren.
Um eine Technik zu entwickeln, die sowohl schnell als auch genau ist, hat Netflix eine Methode namens Magenta Green Screen (MGS) entwickelt. Schauspieler werden vor einem Hintergrund aus hellgrünen LEDs gefilmt, während sie von vorne mit roten und blauen LEDs beleuchtet werden, die zusammen ein magentafarbenes Leuchten erzeugen (siehe Video oben).
Da Digitalkameras für jedes Pixel einen individuellen Rot-, Grün- und Blauwert verwenden, erzeugt diese Technik einen grünen Kanal, der nur den Hintergrund aufzeichnet, während der Vordergrund schwarz erscheint, und rote und blaue Kanäle, die nur den Vordergrund aufzeichnen , sodass der Hintergrund schwarz aussieht. Zusammen ergeben diese das Magenta und grüner Look.
Filmeditoren können den grünen Kanal in Echtzeit ersetzen und die Schauspieler realistisch und sofort in den Vordergrund einer anderen Szene platzieren, wobei selbst potenziell knifflige Bereiche wie transparente Flaschen oder der Bereich um Haarsträhnen problemlos funktionieren.
„Computer verfügen bereits über so leistungsstarke Werkzeuge, die viele Dinge einfacher machen“, sagt er Paul Debevec, einer der beteiligten Netflix-Forscher. „[This is] Eine weitere Sache, die wir einfacher machen können, damit sich die talentierten Künstler, die wir haben, auf die Kunst konzentrieren und die Dinge tatsächlich besser aussehen lassen können.“
Es gibt jedoch ein Problem mit der Methode. Da der Vordergrund nur in Blau und Rot aufgenommen wird, wirken die Schauspieler magentafarben. Um dieses Problem zu lösen, setzt Netflix künstliche Intelligenz ein, um die gesamte Farbpalette wieder in den Vordergrund zu rücken und nutzt ein Foto der normal beleuchteten Schauspieler als Referenz, um einen realistisch wirkenden grünen Kanal zu erstellen. Diese KI arbeitet schnell, aber noch nicht in Echtzeit, obwohl schnelle Techniken wie die Mittelung der roten und blauen Kanäle, um eine Annäherung an einen grünen Kanal zu erzeugen, effektiv genug funktionieren, damit der Regisseur sie während der Dreharbeiten überwachen kann.
Drew Lahat von der Videoproduktionsfirma Geiger Post in Kalifornien sagt, die Branche begrüße immer neue Methoden, die Technik beinhalte jedoch viele komplexe Schritte, die der Schnelllebigkeit von Film- und Fernsehaufnahmen möglicherweise noch nicht förderlich seien.
„Es gibt eine Reihe von Aspekten dieser Technologie, die mich aus praktischer Sicht fragen lassen, ob sie sich lohnt“, sagt er. „Soweit ich weiß, scheitert diese Technik schnell, es sei denn, Sie haben einen hervorragenden Greenscreen in einem vollständig kontrollierten Raum.“
Themen:
[ad_2]
Source link
