Der schwedische Film „Watch the Skies“ wird in den USA mit KI-Synchronisation veröffentlicht

Der schwedische UFO-Film „ Watch the Skies“ kommt im Mai in die US-amerikanischen Kinos. Obwohl der Film bereits etwas Aufmerksamkeit erregt hat, rückt ein Detail ihn nun ins Rampenlicht: Berichten zufolge werden die Zuschauer nach dem Kinostart nicht merken, dass der Film nicht auf Englisch gedreht wurde.

Berichten zufolge wird der Film mithilfe generativer künstlicher Intelligenz (KI) ins Englische synchronisiert. Dank KI wird der Film vorab aufgenommene englische Dialoge enthalten, die mit der schauspielerischen Leistung der Darsteller synchronisiert werden. Die Produzenten gaben an, dass der Film eine „visuelle Dubbing“-Technologie des KI-Unternehmens Flawless nutzt. Diese Technologie ermöglicht die digitale Lippensynchronisation der schauspielerischen Leistungen mit der fremdsprachigen Synchronisation.

Watch the Skies wird KI-gestützte visuelle Synchronisation bieten

„Watch the Skies“ erzählt die Geschichte der rebellischen Teenagerin Denise, die sich einem Club von UFO-Beobachtern anschließt, um das Rätsel um ihren verschwundenen Vater zu lösen. Der Film wurde ursprünglich mit schwedischen Schauspielern unter dem Titel „UFO Sweden“ gedreht. Für die Veröffentlichung in den USA nutzte Flawless jedoch seine TrueSync-Technologie, um die Lippenbewegungen digital zu synchronisieren und so perfekt an den englischen Dialog anzupassen. Die Darsteller haben ihre Rollen zudem vorab auf Englisch aufgenommen, um eine perfekte Synchronisation zu gewährleisten.

Regisseur und Drehbuchautor Victor Danelle lobte den Einfluss von Flawless auf den Film und betonte, dass dies zu einer größeren Reichweite beitragen werde. „Dank Flawless und ihrer Technologie können wir den Film einem deutlich größeren Publikum zugänglich machen“, so Danelle. Die Filmemacher erwähnten, dass der Einsatz der Technologie und des Verfahrens die volle Unterstützung der SAG (Sex Actors Guild) genieße. Die SAG war 2023 aufgrund von Bedenken hinsichtlich der Bedrohung des Schauspielberufs durch KI in den Streik getreten.

Danell erwähnte, dass die Technologie viele Schauspieler verunsichern und beim Publikum auf Ablehnung stoßen könnte, sie aber vollständig vom Team kontrolliert werde. Er fügte hinzu, dass sie sich für eine englische Synchronisation des Films entschieden hätten und betonte, dass es sich weiterhin um denselben Film und dieselben Schauspieler handle, nur eben in einer anderen Sprache. „Viele Filmemacher und Schauspieler werden dieser Technologie zunächst skeptisch gegenüberstehen, aber wir haben die kreative Kontrolle, und die Dreharbeiten auf Englisch waren eine wirklich aufregende Erfahrung. Es ist immer noch unser Film, es ist immer noch die Leistung der Schauspieler, und das ist der entscheidende Punkt“, sagte er.

Die TrueSync-Technologie und die Unzufriedenheit mit KI in Filmen

Laut Scott Mann, Mitbegründer von Flawless, nutzt die TrueSync-Technologie des Unternehmens in einer Präsentation von 2023 Deep Learning, um eine volumetrische 3D-Darstellung der Gesichter der Schauspieler während eines Films zu erstellen. Anschließend werden die Gesichter mithilfe dieser Technologie an die gewünschte Synchronisationssprache angepasst. TrueSync kam bereits 2022 im Film „ Fall“, wo die Produktion die Technologie nutzte, um Schimpfwörter für eine PG-13-Fassung zu entfernen.

Das Unternehmen hat auch an anderen Produkten mitgewirkt, die der Schauspielbranche zugutekommen könnten. So wird beispielsweise DeepEditor von Editoren verwendet, umtracdie Performance eines Schauspielers aus einer Szene „Lola rennt“ die kommenden Filme „The Light“ der Horrorfilm „Vincent Must Die“ und der südkoreanische Film „Smugglers“.

Während diese Funktion bei den meisten Zuschauern Anklang zu finden scheint, stößt der Einsatz von KI in Filmen auf breitere Kritik . Jüngstes Beispiel dafür ist die Dokumentarserie „American Murder: Gabby Petito“, die Netflix letzten Monat veröffentlichte. Die Plattform sah sich Kritik ausgesetzt, weil sie KI zur Generierung der Stimme der verstorbenen Protagonistin einsetzte, was in der Öffentlichkeit Empörung auslöste. Selbst die Eltern der Verstorbenen gaben damals an, es sei befremdlich gewesen, die KI-generierte Stimme ihrer Tochter zu hören, betonten aber, Netflix die Erlaubnis zur Veröffentlichung der Serie gegeben zu haben.