Google stellt Echtzeit-KI-Videofunktionen mit Gemini-Update vor

Google hat angekündigt, die Echtzeit-KI-Fähigkeiten von Gemini einzuführen, die es dem KI-System ermöglichen, Smartphone-Bildschirme und Kameraaufnahmen sofort zu analysieren. Diese Funktionen stehen ausgewählten Google One AI Premium-Abonnenten zur Verfügung.

Die neue Funktion folgte auf Googles erste Demonstration von „Project Astra“ vor fast einem Jahr, die mit Gemini Live leistungsstarke Kamera- und Bildschirmfreigabefunktionen einführte. Google enthüllte, dass die neue Live-Videofunktion Gemini ermöglichen würde, den Feed der Smartphone-Kameras der Nutzer in Echtzeit zu interpretieren und Fragen zu beantworten.

Das Technologieunternehmen veröffentlichte ein Video Anfang dieses Monats, das die Nutzung der Live-Videofunktion von Gemini zur Auswahl einer Farbe für frisch glasierte Keramik demonstrierte.

Google rollt Echtzeit-KI-Videofunktionen von Gemini aus

Die neue Funktion würde es Nutzern auch ermöglichen, in Echtzeit einen hin- und hergehenden Dialog mit Gemini basierend auf dem Bildschirm-Feed zu führen. Ein Benutzer auf Reddit griff auf „Bildschirm mit Live teilen“ zu, indem er auf die Schaltfläche über dem Textfeld „Ask Gemini“ im Gemini-Overlay tippte. 

Der Reddit-Nutzer hat auch postete ein Video unten veröffentlicht, das die neue Bildschirmlesefähigkeit von Gemini demonstriert. Es ist eine der zwei Funktionen produziert das Technologieunternehmen sagte die „ab Ende dieses Monats als Teil des Google One AI Premium Plans an Gemini Advanced-Abonnenten ausgerollt werden“ sollen. Die Echtzeit-Kamerafunktionen können accessed werden, indem man die vollständige Gemini Live-Schnittstelle öffnet und einen Videostream startet. 

Google behauptete, Gemini Live würde eine neue Benachrichtigung im Stil eines Telefonats und eine kompaktere Vollbildschnittstelle verwenden, obwohl diese noch nicht weit verbreitet ausgerollt wurden. Das Technologieunternehmen erkannte auch im Januar an, dass Pixel- (und Galaxy S25-Serie-)Besitzer „zu den ersten gehören werden, die Project-Astra-Funktionen wie Bildschirmfreigabe und Live-Video-Streaming erhalten.“ 

Google rollt Canvas- und Audio-Overview-Funktionen aus

Wir führen Canvas ein und begrüßen Audio Overview in der @GeminiApp heute. Verwandeln Sie Dokumente, Folien und Deep Research-Berichte mit Audio Overview in Podcasts. Oder erstellen Sie ein Dokument oder ein Coding-Projekt mit Canvas – es startet Prototypen extrem schnell und Sie können in Echtzeit mit Gemini bearbeiten. pic.twitter.com/tEdlZoSqeS

— Sundar Pichai (@sundarpichai) März 18, 2025

Google hat auch veröffentlichte eine weitere neue Gemini-Funktion am 18. März namens „Canvas“, die es Nutzern ermöglicht, ihre Dokumente und ihren Code zu verfeinern. Das Unternehmen erkannte an, dass Nutzer „Canvas“ in ihrer Eingabezeile auswählen können, wo sie Dokumente oder Code schreiben und bearbeiten können, wobei Änderungen in Echtzeit erscheinen. 

Das Technologieunternehmen hob hervor, dass Canvas den Prozess der Umwandlung von Coding-Ideen in funktionierende Prototypen für Web-Apps, Python-Skripte, Spiele, Simulationen und andere interaktive Apps vereinfachen wird. Google sagte auch, die neue Funktion werde es Nutzern ermöglichen, sich auf das Erstellen, Bearbeiten und Teilen ihres Codes und Designs an einem Ort zu konzentrieren, ohne den Aufwand, zwischen mehreren Anwendungen zu wechseln. Das Technologieunternehmen hat Canvas für Gemini und Gemini Advanced-Abonnenten weltweit in allen Sprachen ausgerollt.

Google führte auch Audio Overview ein, das Dokumente, Folien und sogar Deep Research-Berichte der Nutzer in ansprechende Podcast-ähnliche Diskussionen zwischen zwei KI-Hosts verwandelt.