Google Ассистент здорового человека: Project Astra отвечает на звонки и управляет вашим смартфоном

Google продемонстрировала, как работает Project Astra — новая технология, которая лежит в основе работы камеры и совместного использования экрана в Gemini Live. Сейчас она доступна в виде приложения для Android для ограниченного круга тестировщиков. Принцип работы Project Astra показали на примере работы с Pixel 9 Pro.

ПОДПИШИСЬ НА НАШ ТЕЛЕГРАМ-КАНАЛ, ЧТОБЫ НЕ ПРОПУСТИТЬ САМЫЕ ВАЖНЫЕ НОВОСТИ

Google представила реально умного голосового помощника под рабочим названием Project Astra. Именно о таком вы мечтали всегда, а Apple пытается воплотить в жизнь прямо сейчас. Он умеет все и реально помогает в повседневных делах. Взгляните сами на принцип работы — вот ссылка!

В ходе ролика человек вёл живую беседу, занимаясь ремонтом велосипеда. Технология нашла ему руководство в формате PDF в интернете, а затем свернулась в плавающий пузырь с краю экрана. Project Astra умеет открывать YouTube, прокручивать страницы и воспроизводить видео, а также искать информацию в Gmail. Технология может выделять нужные объекты на экране, например, нужную деталь среди нескольких корзин с запчастями.

Ещё одна возможность ИИ — выполнение звонков для поиска определённой информации от имени пользователя. Например, можно позвонить в магазин и спросить, доступна ли нужная деталь. Технология умеет реагировать на прерывания: когда говорит другой человек, Astra автоматически ставит ответ на паузу, а затем продолжает его по запросу пользователя.

Google называет это Action Intelligence («Интеллектуальное действие»). В рамках Project Astra Gemini использует различные функции, такие как извлечение контента, управление интерфейсом, помощь при вызове, запоминание контекста в разговоре, персонализированные покупки и собственный аудиодиалог. Цель Google — создать универсального ИИ-помощника на каждый день, который будет управлять телефоном без вашего участия.