Google svela le funzionalità video AI in tempo reale con l'aggiornamento di Gemini

Google ha annunciato l'implementazione delle capacità AI in tempo reale di Gemini, che consentiranno al sistema AI di analizzare istantaneamente gli schermi degli smartphone e i flussi della fotocamera. Queste funzionalità saranno accessibili a una selezione di abbonati a Google One AI Premium.

La nuova funzionalità segue la prima dimostrazione di "Project Astra" di Google di quasi un anno fa, che ha portato capacità di fotocamera potenziata e condivisione dello schermo a Gemini Live. Google ha rivelato che la nuova funzionalità video live permetterà a Gemini di interpretare il flusso dalle fotocamere degli smartphone degli utenti in tempo reale e di rispondere alle domande.

L'azienda tecnologica ha rilasciato un video all'inizio di questo mese dimostrando l'uso della funzionalità video live di Gemini per scegliere un colore di vernice per la ceramica appena smaltata.

Google distribuisce le funzionalità video AI in tempo reale di Gemini

La nuova funzionalità permetterebbe anche agli utenti di avere una conversazione interattiva con Gemini basata sul flusso dello schermo in tempo reale. deposito complementare utente su Reddit ha accesso alla funzione "Condividi schermo con Live" toccando il pulsante sopra il campo di testo 'Chiedi a Gemini' nell'overlay di Gemini. 

L'utente di Reddit ha anche ha pubblicato un video qui sotto che dimostra la nuova capacità di lettura dello schermo di Gemini. È una delle due funzionalità l'azienda tecnologica ha che "inizierà a essere distribuita agli abbonati di Gemini Advanced come parte del piano Google One AI Premium" alla fine di questo mese. Le capacità della fotocamera in tempo reale possono essere accessibili aprendo l'interfaccia completa di Gemini Live e avviando uno stream video. 

Google ha mantenuto che Gemini Live utilizzerà una nuova notifica di stile chiamata telefonica e un'interfaccia a schermo intero più compatta, sebbene non siano state ancora distribuite ampiamente. L'azienda tecnologica ha anche riconosciuto a gennaio che i proprietari di Pixel (e della serie Galaxy S25) saranno "tra i primi a ottenere le funzionalità di Project Astra come la condivisione dello schermo e lo streaming video live." 

Google distribuisce le funzionalità Canvas e audio overview

Stiamo introducendo Canvas e dando il benvenuto ad Audio Overview su @GeminiApp oggi. Trasforma documenti, presentazioni e report di Deep Research in podcast con Audio Overview. Oppure crea un documento o un progetto di coding con Canvas: avvia prototipi super velocemente e puoi modificare in tempo reale con Gemini. pic.twitter.com/tEdlZoSqeS

— Sundar Pichai (@sundarpichai) March 18, 2025

Google ha anche ha rilasciato un'altra nuova funzionalità di Gemini il 18 marzo chiamata "Canvas", che permette agli utenti di perfezionare i propri documenti e codice. L'azienda ha riconosciuto che gli utenti possono selezionare "Canvas" nella barra dei prompt, dove possono scrivere e modificare documenti o codice, con le modifiche che appaiono in tempo reale. 

L'azienda tecnologica ha sottolineato che Canvas semplificherà il processo di trasformazione delle idee di coding in prototipi funzionanti per app web, script Python, giochi, simulazioni e altre app interattive. Google ha anche detto che la nuova funzionalità permetterà agli utenti di concentrarsi sulla creazione, modifica e condivisione del proprio codice e design in un unico posto, senza la seccatura di passare tra più applicazioni. L'azienda tecnologica ha distribuito Canvas per Gemini e gli abbonati a Gemini Advanced a livello globale in tutte le lingue.

Google ha anche introdotto Audio Overview, che trasforma i documenti, le presentazioni e persino i report di Deep Research degli utenti in coinvolgenti discussioni in stile podcast tra due host AI.