Google представляет функции видеосъемки в реальном времени с ИИ с обновлением Gemini

Google объявил о развертывании возможностей ИИ в реальном времени Gemini, которые позволят системе ИИ мгновенно анализировать экраны смартфонов и видеопотоки с камер. Эти функции будут доступны избранным подписчикам Google One AI Premium.

Новая функция последовала за первой демонстрацией «Project Astra» Google почти год назад, которая добавила возможности камеры и совместного использования экрана в Gemini Live. Google раскрыл, что новая функция видеосъемки в реальном времени позволит Gemini интерпретировать поток с камер смартфонов пользователей в реальном времени и отвечать на вопросы.

Технологическая компания выпустила видео в начале этого месяца, демонстрирующую использование функции видеосъемки в реальном времени Gemini для выбора цвета краски для недавно глазированной керамики.

Google развертывает функции видеосъемки в реальном времени с ИИ Gemini

Новая функция также позволит пользователям вести диалог с Gemini на основе потока с экрана в реальном времени. ополнительная заявка пользователь на Reddit получил доступ к функции «Поделиться экраном с Live», нажав на кнопку над текстовым полем «Ask Gemini» на оверлее Gemini. 

Пользователь Reddit также опубликовал опубликовал видео ниже, демонстрирующее новую способность Gemini читать экран. Это одна из двух функций технологическая компания заявил которая «начнет развертываться для подписчиков Gemini Advanced в рамках плана Google One AI Premium» в конце этого месяца. Возможности камеры в реальном времени можно получить, открыв полный интерфейс Gemini Live и начав видеопоток. 

Google сохранил, что Gemini Live будет использовать новое уведомление в стиле телефонного звонка и более компактный полноэкранный интерфейс, хотя они еще не были широко развернуты. Технологическая фирма также признала в январе, что владельцы Pixel (и серии Galaxy S25) будут «среди первых, кто получит возможности Project Astra, такие как совместное использование экрана и потоковая передача видео в реальном времени». 

Google развертывает функции Canvas и Audio Overview

Сегодня мы представляем Canvas и приветствуем Audio Overview в @GeminiApp. Превращайте документы, слайды и отчеты Deep Research в подкасты с помощью Audio Overview. Или создавайте документы или проекты с кодом с помощью Canvas — он быстро создает прототипы, и вы можете редактировать их с Gemini в реальном времени. pic.twitter.com/tEdlZoSqeS

— Sundar Pichai (@sundarpichai) марта 18, 2025

Google также опубликовала еще одну новую функцию Gemini под названием «Canvas», представленную 18 марта, которая позволяет пользователям дорабатывать свои документы и код. Компания признала, что пользователи могут выбрать «Canvas» в строке запроса, где они могут писать и редактировать документы или код, при этом изменения появляются в реальном времени. 

Технологическая компания подчеркнула, что Canvas упростит процесс преобразования идей кодирования в рабочие прототипы для веб-приложений, скриптов Python, игр, симуляций и других интерактивных приложений. Google также заявил, что новая функция позволит пользователям сосредоточиться на создании, редактировании и обмене своим кодом и дизайном в одном месте без необходимости переключаться между несколькими приложениями. Технологическая компания развернула Canvas для подписчиков Gemini и Gemini Advanced по всему миру на всех языках.

Google также представил Audio Overview, который превращает документы, слайды и даже отчеты Deep Research в увлекательные подкасты в формате дискуссии между двумя ИИ-ведущими.