Le film suédois « Watch the Skies » sortira aux États-Unis avec un doublage IA

Film suédois sur les OVNIs Watch the Skies est prévu pour une sortie dans les salles de cinéma à travers les États-Unis en mai. Bien que le film ait un peu attiré l'attention, un détail le place sous les projecteurs. Selon les rapports, lorsque le film sera sorti, les spectateurs ne pourront pas dire qu'il n'a pas été réalisé en anglais.

Selon les rapports, le film sera doublé en anglais en utilisant l'intelligence artificielle générative (IA). Le film présentera un dialogue en anglais préenregistré synchronisé avec la performance à l'écran des acteurs, grâce à l'IA. Les réalisateurs ont mentionné que le film utilise une technologie de « doublage visuel » de l'entreprise Flawless. Cette technologie permet de synchroniser numériquement les mouvements des lèvres des acteurs avec les doublages dans des langues étrangères.

Watch the Skies présentera un doublage visuel par IA

Watch the Skies raconte l'histoire d'une adolescente rebelle, Denise, qui s'allie à un club d'amateurs d'OVNI pour résoudre le mystère de la disparition de son père. Le film a été initialement tourné par des acteurs suédois sous le titre UFO Sweden. Cependant, pour sa sortie aux États-Unis, Flawless a utilisé sa technologie d'apprentissage automatique True Sync pour modifier numériquement leurs mouvements des lèvres afin qu'ils soient synchronisés avec le dialogue en anglais. Les acteurs ont également préenregistré leurs performances en anglais, s'assurant ainsi de la perfection.

Le réalisateur-scénariste du film, Victor Danelle, a salué l'impact de Flawless sur le film, notant qu'il aidera le film à atteindre un public plus large. « Flawless et leur technologie nous permettent de sortir le film pour un public beaucoup plus large », a déclaré Danelle. Les réalisateurs ont mentionné que l'utilisation de la technologie et de la technique bénéficie du soutien et de l'approbation complets de la SAG. La SAG est le syndicat des acteurs qui est entré en grève en 2023 en raison des préoccupations liées à la menace de l'IA pour la profession d'acteur.

Danell a mentionné que la technologie pourrait effrayer beaucoup d'acteurs et susciter du mécontentement dans le grand public, mais qu'elle est entièrement contrôlée par l'équipe. Il a ajouté qu'ils ont décidé de doubler le film en anglais, précisant que c'est toujours le même film et les mêmes acteurs, juste dans différentes langues. « Beaucoup de réalisateurs et d'acteurs auront peur de cette technologie au début, mais nous avons le contrôle créatif, et jouer le film en anglais a été une expérience vraiment excitante. C'est toujours notre film, c'est toujours la performance des acteurs, et c'est là la partie clé », a-t-il dit.

La technologie TrueSync et le mécontentement face à l'IA dans les films

Selon Scott Mann, cofondateur de Flawless, lors d'une présentation en 2023, la technologie TrueSync de l'entreprise utilise l'apprentissage profond pour créer une représentation volumétrique 3D du visage des acteurs tout au long du film. La technologie est ensuite utilisée pour modifier leurs visages afin qu'ils correspondent à la langue dans laquelle ils souhaitent être doublés. TrueSync a déjà été utilisé dans le film de 2022 Fall, la production ayant utilisé la technologie pour supprimer les jurons afin d'obtenir une classification PG-13.

L'entreprise a également été impliquée dans d'autres produits susceptibles de bénéficier à l'industrie du cinéma, dont l'un d'eux, DeepEditor, est utilisé par les monteurs pour extraire la performance d'un acteur d'une scène et l'appliquer à une autre scène sans avoir besoin de refaire le tournage. L'entreprise a également conclu un partenariat avec le distributeur XYZ Films pour sortir d'autres films localisés à l'aide de TrueSync, y compris les prochains films du réalisateur de Run Lola Run, Tom Tykwer, The Light, le film d'horreur Vincent Must Die, et le film sud-coréen Smugglers.

Bien que cette fonctionnalité semble plaire à la plupart des gens, il existe une plus large mécontentement concernant l'utilisation de l'IA dans les films, le cas récent étant celui de la docu-série « American Murder: Gabby Petito », sortie le mois dernier sur Netflix. La plateforme a été critiquée pour avoir utilisé l'IA pour générer la voix du personnage décédé représenté dans la série, provoquant un tollé dans la population. À l'époque, même les parents de la défunte ont mentionné que c'était étrange d'entendre une voix générée par l'IA de leur fille, mais ils ont indiqué qu'ils avaient donné leur accord à Netflix pour la série.