Google Photos obtiendra la fonctionnalité « Ask Photos » alimentée par l’IA avec l’intégration de Gemini

Google commence désormais à intégrer davantage son IA Gemini dans de nombreux produits, et la prochaine étape de ses plans concerne Photos. Lors de sa conférence développeurs I/O hier, le PDG de l’entreprise, Sundar Pichai, a annoncé une fonctionnalité appelée Ask Photos, conçue pour vous aider à trouver les images spécifiques de votre galerie en parlant à Gemini.

Recherche photo Gemini IA

Les Photos demandées se trouveront dans un nouvel onglet en bas de l’application Google Photos. Elle sera initialement disponible pour un abonné, commencera en anglais et sera basée aux États-Unis au cours des prochains mois. Lorsque vous appuyez sur le panneau, vous verrez l’icône étoile de Gemini et un message de bienvenue au-dessus d’une barre vous demandant de « rechercher ou demander des Photos ».

Google affirme que vous pouvez poser des questions comme « Montrez-moi la meilleure photo de chaque parc national que j’ai visité », ce qui dépend de votre GPS et nécessite que l’IA décide ce qui est « le meilleur ». Le PDG de l’entreprise, Mme Shimrit Ben-Yair pour Photos, a déclaré à Engadget que vous pouvez donner votre avis à l’IA et lui faire savoir quelles images vous aimez le plus. L’apprentissage est crucial, a déclaré Ben-Yair.

Déploiement progressif prévu

Photos peut vous aider à localiser vos meilleures photos de vos dernières vacances et à créer une légende pour les raconter afin que vous puissiez facilement les publier sur les réseaux sociaux. Encore une fois, si la sélection de Gemini n’a pas été appréciée, vous pouvez également apporter des ajustements plus tard.

Jusqu’à présent, vous devrez taper votre requête pour Ask Photos, mais la saisie vocale n’est pas encore prise en charge. À mesure que la fonctionnalité émerge enfin, ceux qui décident de l’utiliser verront leur fonctionnalité de recherche actuelle « améliorée » en Ask. Néanmoins, Google a déclaré que les fonctionnalités de recherche essentielles, telles que les groupes de visages ou la vue carte, ne disparaîtront pas. 

L’entreprise a expliqué trois parties du processus Ask Photos : comprendre votre question, former une réponse, être prudent et ne pas oublier les corrections, qui représentent la même chose. Bien que la sécurité ne soit discutée que dans la dernière étape du projet, elle devrait être considérée tout au long du processus. L’entreprise a déclaré : « Les informations dans vos photos sont très privées, et nous sommes prêts à les protéger car elles sont prises très au sérieux. »

Par conséquent, les requêtes ne sont stockées nulle part, même si elles sont traitées dans le cloud (pas sur l’appareil). Les non-personnes ne traverseront pas les conversations ou les données personnelles dans Ask Photos, sauf dans de rares cas où nous devons traiter des abus ou des dommages. Google dit qu’elle n’entraîne aucun « produit d’IA générative en dehors de Google Photos sur ces données personnelles, y compris d’autres modèles et produits Gemini.

Garanties de confidentialité des données

Les médias restent sécurisés et privés grâce aux mêmes mesures de sécurité et de confidentialité utilisées par Google Photos. C’est un moyen parfait d’utiliser Ask Photos car vous pouvez obtenir des informations telles que les dates d’expiration de passeport ou de permis à partir de photos que vous avez peut-être prises il y a des années. L’application utilise également les fonctionnalités multimodales de Gemini pour lire le texte dans les images et trouver des réponses.

Indéniablement, l’IA dans Google Photos n’était pas nouvelle. En utilisant les algorithmes de reconnaissance faciale et d’objets de l’entreprise, vous avez toujours pu rechercher dans l’application des éléments tels qu’une « carte de crédit » ou un ami spécifique. Bien qu’il puisse sembler que Photos ne puisse livrer que des images contenant certaines personnes ou objets, Gemini IA introduit le traitement génératif. Ainsi, les photos peuvent faire beaucoup plus.

Outre les autres applications, il existe d’autres utilisations de Photos pour vous indiquer quels thèmes vous avez peut-être utilisés lors des dernières fêtes d’anniversaire que vous avez organisées pour votre partenaire ou votre enfant. Provenant de Gemini IA, vous pouvez voir vos photos, et elle analysera les thèmes que vous avez déjà adoptés.

De nombreuses applications réussies existent pour Ask Photos, qui est désormais une fonctionnalité expérimentale qui commence à être déployée bientôt. Comme les autres outils Photos, cela pourrait d’abord être une fonctionnalité premium pour les abonnés One et les propriétaires de Pixel, puis devenir progressivement disponible pour tous ceux qui utilisent l’application gratuite. À ce moment, personne n’a officiellement abordé la question de savoir quand ou si cela se produira.