Google обновил Gemini Live: теперь с ним можно разговаривать и сразу выполнять задачи в приложениях компании. Сервис работает прямо в чате, переключаться между голосом и текстом можно без разрыва разговора. Поддерживаются Gmail, Google Drive, календарь, заметки, карты и другие сервисы.
В Gemini Live появились визуальные подсказки в реальном времени. Во время разговора ассистент может показывать карты, погодные карты и фотографии, когда они нужны по ходу беседы. Google также добавляет работу с камерой и Nano Banana: пользователю достаточно показать объект и сказать «Gestalte das neu», чтобы получить новый креативный вариант сцены.
Google описывает Gemini Live как разговорного ИИ-ассистента, который принимает голосовые команды и текстовые запросы в одном потоке. Начать можно с ввода текста, а затем перейти в голосовой чат, если, например, пользователь уже вышел из дома. Контекст, инструменты и история разговора сохраняются в одном треде.
Ассистент также может искать информацию о рейсах и гостиницах, подсказывать полезные ролики, а также управлять устройствами умного дома и настройками телефона. Google отдельно подчёркивает, что Gemini Live умеет запоминать важные детали из прошлых разговоров, например привычки, семейные даты и хобби, чтобы не заставлять пользователя повторять одно и то же.
При этом не все возможности доступны внутри активного Live-диалога. В этом режиме Gemini Live не работает с Gems и Notebooks, а также не поддерживает Omni и Lyria. Если нужно воспользоваться этими функциями, нужно выйти из голосового режима и вернуться к стандартному окну ввода. Для части возможностей также могут понадобиться настройки и подписка, а доступность и возрастные ограничения зависят от региона и функции.
В июне Google открыла Gemini Live доступ к чатам и YouTube и добавила обращение к данным из подключённых сервисов, включая Google Workspace и инструменты генерации изображений. Теперь этот же ассистент получил прямые действия в Gmail и Google Drive, а также новые функции внутри голосового режима.