Schwedischer Film ‚Watch the Skies‘ wird in den USA mit KI-Synchronisation veröffentlicht

Schwedischer UFO-Film Watch the Skies ist für eine Veröffentlichung in Kinos in den gesamten Vereinigten Staaten im Mai geplant. Während der Film bereits etwas Aufmerksamkeit erregt hat, bringt ein bestimmtes Detail ihn ins Rampenlicht. Berichten zufolge werden die Zuschauer den Film bei seiner Veröffentlichung nicht daran erkennen können, dass er nicht in englischer Sprache produziert wurde.

Berichten zufolge wird der Film mit generativer künstlicher Intelligenz (KI) ins Englische synchronisiert. Der Film wird einen vorab aufgenommenen englischen Dialog mit der Bildschirmdarstellung der Schauspieler kombinieren, dank KI. Die Macher erwähnten, dass der Film eine Technologie des „visuellen Dubbing“ der KI-Firma Flawless nutzt. Diese Technologie ermöglicht es, die Darstellungen der Schauspieler digital mit fremdsprachigen Synchronisationen zu lippen-synchronisieren.

Watch the Skies wird KI-gestützte visuelle Synchronisation enthalten

Watch the Skies folgt der Geschichte des rebellischen Teenagers Denise, die sich mit einem Club von UFO-Beobachtern zusammenarbeitet, um das Rätsel um ihren verschollenen Vater zu lösen. Der Film wurde ursprünglich von schwedischen Schauspielern unter dem Titel UFO Sweden. gedreht. Für seine Veröffentlichung in den Vereinigten Staaten hat Flawless seine True-Sync-Maschinenlern-Technologie verwendet, um ihre Lippenbewegungen digital so zu verändern, dass sie mit dem englischen Dialog synchron sind. Die Besetzung hat ihre Darstellungen auch vorab auf Englisch aufgenommen, um sicherzustellen, dass es perfekt ist.

Der Regisseur und Drehbuchautor des Films, Victor Danelle, lobte die Auswirkungen von Flawless auf den Film und merkte an, dass dies dem Film helfen wird, ein größeres Publikum zu erreichen. „Flawless und ihre Technologie ermöglichen es uns, den Film für ein viel größeres Publikum zu veröffentlichen“, sagte Danelle. Die Filmemacher gaben an, dass die Nutzung der Technologie und der Technik die volle Unterstützung und Billigung der SAG hat. Die SAG ist die Schauspielergewerkschaft, die 2023 in den Streik trat, aufgrund von Bedenken hinsichtlich der Bedrohung des Schauspielberufs durch KI.

Danell erwähnte, dass die Technologie viele Schauspieler erschrecken und bei der allgemeinen Öffentlichkeit auf Unmut stoßen könnte, aber sie wird vollständig vom Team kontrolliert. Er fügte hinzu, dass sie sich entschieden haben, den Film auf Englisch zu synchronisieren, und betonte, dass es immer noch derselbe Film und dieselben Schauspieler sind, nur in anderen Sprachen. „Viele Filmemacher und Schauspieler werden diese Technologie anfangs fürchten, aber wir haben die kreative Kontrolle, und die Darstellung des Films auf Englisch war eine wirklich aufregende Erfahrung. Es ist immer noch unser Film, es ist immer noch die Performance der Schauspieler, und das ist der entscheidende Punkt“, sagte er.

TrueSync-Technologie und die Unzufriedenheit über KI in Filmen

Laut dem Co-Gründer von Flawless, Scott Mann, in einer Präsentation aus dem Jahr 2023, nutzt die TrueSync-Technologie der Firma Deep Learning, um eine volumetrische 3D-Darstellung des Gesichts der Schauspieler während eines gesamten Films zu erstellen. Die Technologie wird anschließend verwendet, um ihre Gesichter so anzupassen, dass sie zur Sprache passen, in die synchronisiert werden soll. TrueSync wurde bereits im Film Fall von 2022 eingesetzt, wobei die Produktion die Technologie nutzte, um Schimpfwörter für eine FSK-12-Fassung zu entfernen.

Das Unternehmen war auch an anderen Produkten beteiligt, die der Schauspielerei zugutekommen könnten. Eines seiner Produkte, DeepEditor, wird von Schnittstellen verwendet, um die Performance eines Schauspielers aus einer Szene zu extrahieren und auf eine andere Szene anzuwenden, ohne dass die Szene neu gedreht werden muss. Das Unternehmen ging auch eine Partnerschaft mit dem Distributor XYZ Films ein, um weitere mit TrueSync lokalisierte Filme zu veröffentlichen, darunter die kommenden Filme des Regisseurs von Run Lola Run, Tom Tykwer, The Light, den Horrorfilm Vincent Must Die, und den südkoreanischen Film Smugglers.

Während diese Funktion bei den meisten Menschen gut ankommt, gibt es eine breitere Unzufriedenheit über den Einsatz von KI in Filmen, wobei der jüngste Fall in der Docuserie „American Murder: Gabby Petito“ auftrat, die Netflix letzten Monat veröffentlichte. Die Plattform wurde dafür kritisiert, die Stimme der verstorbenen Figur, die in der Serie dargestellt wurde, mit KI generiert zu haben, was zu einer öffentlichen Empörung führte. Zu diesem Zeitpunkt erwähnten sogar die Eltern der Verstorbenen, dass es seltsam war, eine KI-generierte Stimme ihrer Tochter zu hören, gaben Netflix aber dennoch die Erlaubnis für die Serie.