Google dévoile des fonctionnalités vidéo IA en temps réel avec la mise à jour Gemini

Google a annoncé qu’elle déployait les capacités d’IA en temps réel de Gemini, qui permettront au système d’IA d’analyser instantanément les écrans de smartphone et les flux de caméra. Ces fonctionnalités seront accessibles aux abonnés sélectionnés de Google One AI Premium.

La nouvelle fonctionnalité fait suite à la première démonstration de « Project Astra » de Google il y a près d’un an, apportant des capacités de caméra et de partage d’écran alimentées par IA à Gemini Live. Google a révélé que la nouvelle fonctionnalité de vidéo en direct permettrait à Gemini d’interpréter le flux des caméras de smartphone des utilisateurs en temps réel et de répondre aux questions.

L’entreprise technologique a publié un vidéo plus tôt ce mois-ci démontrant l’utilisation de la fonctionnalité vidéo en direct de Gemini pour choisir une couleur de peinture pour de la céramique fraîchement émaillée .

Google déploie les fonctionnalités vidéo IA en temps réel de Gemini

La nouvelle fonctionnalité permettrait également aux utilisateurs d’avoir une conversation aller-retour avec Gemini basée sur le flux de l’écran en temps réel. Un de X sur Reddit a accédé au « Share screen with Live » en appuyant sur le bouton au-dessus du champ de texte « Ask Gemini » sur la superposition Gemini. 

L’utilisateur de Reddit a également a publié une vidéo ci-dessous démontrant la nouvelle capacité de lecture d’écran de Gemini. Il s’agit de l’une des deux fonctionnalités l'entreprise technologique a déclaré qui « commenceront à être déployées auprès des abonnés Gemini Advanced dans le cadre du plan Google One AI Premium » plus tard ce mois-ci. Les capacités de caméra en temps réel peuvent être accessibles en ouvrant l’interface complète de Gemini Live et en démarrant un flux vidéo. 

Google a maintenu que Gemini Live utiliserait une nouvelle notification de style appel téléphonique et une interface plein écran plus compacte, bien qu’elles n’aient pas encore été largement déployées. L’entreprise technologique a également reconnu en janvier que les propriétaires de Pixel (et de la série Galaxy S25) seraient « parmi les premiers à obtenir les capacités de Project Astra comme le partage d’écran et le streaming vidéo en direct. » 

Google déploie les fonctionnalités Canvas et audio overview

Nous introduisons Canvas et accueillons Audio Overview sur l’@GeminiApp aujourd’hui. Transformez des documents, des diapositives et des rapports Deep Research en podcasts avec Audio Overview. Ou créez un document ou un projet de codage avec Canvas – il génère des prototypes très rapidement et vous pouvez éditer avec Gemini en temps réel. pic.twitter.com/tEdlZoSqeS

— Sundar Pichai (@sundarpichai) mars 18, 2025

Google a également a publié une autre nouvelle fonctionnalité Gemini le 18 mars appelée « Canvas », qui permet aux utilisateurs d’affiner leurs documents et leur code. L’entreprise a reconnu que les utilisateurs pouvaient sélectionner « Canvas » dans leur barre de prompt, où ils peuvent écrire et éditer des documents ou du code, avec des modifications apparaissant en temps réel. 

L’entreprise technologique a souligné que Canvas rationalisera le processus de transformation des idées de codage en prototypes fonctionnels pour les applications web, les scripts Python, les jeux, les simulations et autres applications interactives. Google a également déclaré que la nouvelle fonctionnalité permettra aux utilisateurs de se concentrer sur la création, l’édition et le partage de leur code et de leur design en un seul endroit, sans la corvée de passer d’une application à l’autre. L’entreprise technologique a déployé Canvas pour Gemini et les abonnés Gemini Advanced dans le monde entier, dans toutes les langues.

Google a également introduit Audio Overview, qui transforme les documents, les diapositives et même les rapports Deep Research des utilisateurs en discussions engageantes de style podcast entre deux hôtes IA.