Модель ИИ Gemini реализует функции поворота камеры и живого реагирования

(CLO) Компания Google начала внедрять новые функции искусственного интеллекта в Gemini Live, позволяющие технологии «видеть» экран или окружающую обстановку через камеру телефона и давать ответы в режиме реального времени.

Алекс Джозеф, представитель Google, подтвердил эту новость. Эти функции появились почти через год после того, как Google впервые представила Project Astra — платформу искусственного интеллекта, лежащую в основе Gemini Live.

Функция видеосъемки в реальном времени с помощью искусственного интеллекта в Gemini. Фото: chromeunboxed

Пользователь Reddit сообщил, что новая функция появилась на его телефоне Xiaomi. В опубликованном сегодня видео он продемонстрировал новые возможности чтения с экрана в Gemini — одну из двух основных функций, которые Google анонсировала для подписчиков Gemini Advanced в конце марта в рамках своего тарифного плана Google One AI Premium.

Другая важная функция — это живое видео, которое позволяет Gemini анализировать поток изображений с камеры телефона и отвечать на вопросы пользователей в режиме реального времени. В демонстрационном видеоролике, опубликованном Google ранее в марте, пользователь протестировал функцию, попросив Gemini дать совет по выбору подходящего цвета краски для своего нового глазурованного керамического изделия.

Запуск этих функций ИИ показывает, что Google лидирует в гонке за разработку интеллектуальных виртуальных помощников.

Amazon готовится запустить Alexa Plus, но сервис всё ещё находится в стадии раннего бета-тестирования. Apple отложила обновление Siri, что делает его неспособным конкурировать с Gemini. Samsung всё ещё использует Bixby, но Gemini теперь является помощником по умолчанию на последних моделях Samsung.

На MWC 2025 компания Google взяла на себя обязательство интегрировать Project Astra в Gemini Live и в настоящее время поэтапно внедряет эту функцию. 9to5Google сообщает, что обнаружила, что функции совместного использования экрана и камеры начинают появляться на нескольких отдельных устройствах Android.

Кроме того, расширены возможности анализа живого видео. Пользователи могут открыть интерфейс Gemini Live, начать прямую трансляцию, а затем нажать кнопку переключения камеры в правом углу, чтобы Gemini мог напрямую взаимодействовать с окружающей средой.

«По сути, эта функция помогает Gemini «видеть» мир в реальном времени», — сказал технологический эксперт.

Хотя Google не опубликовала конкретный список поддерживаемых устройств, в январском заявлении компания заявила, что линейка Pixel и Galaxy S25 станут первыми устройствами, которые получат обновления Project Astra. Однако в настоящее время нет технических ограничений, которые могли бы ограничить Astra конкретными устройствами.

В будущем Google может расширить возможности Gemini Live на устройства iOS, но пока эта функция доступна только на Android. Эксперты считают, что Project Astra может полностью изменить взаимодействие людей с искусственным интеллектом, открыв новую эру более мощного искусственного интеллекта в реальном времени.

Цао Фонг (по данным TheVerge, Google, 9to5Google)