ИИ-помощник Google Astra способен самостоятельно управлять смартфоном
На конференции для разработчиков I/O 2024 компания Google продемонстрировала возможности мультимодального ИИ-помощника Astra. Система способна самостоятельно наблюдать, анализировать происходящее и вмешиваться без запроса пользователя, если считает это уместным. Например, во время выполнения задания Astra может заметить ошибку и сразу указать на нее. Сейчас расскажу, что еще она умеет.
Помощник интегрирован с сервисами Google: получает доступ к календарю, почте и другой информации, что позволяет ему заранее напоминать о предстоящих делах, доставать нужные данные и действовать по ситуации. Также он учится управлять Android-устройствами — запускать приложения, переключать настройки и выполнять разные команды в интерфейсе. В ходе демонстрации было показано, как Astra подключил к смартфону Bluetooth-наушники без участия пользователя.
Astra использует камеру, микрофон и экран устройства для постоянного анализа окружения. Проактивность стала главным отличием от существующих виртуальных помощников: система сама выбирает, когда и как вмешаться, и делает это без активации голосом.
Сейчас доступ к Astra есть только у ограниченного числа тестировщиков, а массовый запуск технологии не планируется. Проект рассматривается скорее как тестовая площадка, а успешные решения в дальнейшем могут появиться в Google Gemini и Android.
Google также представила новый сервис генерации и редактирования видео Flow. Он объединяет возможности моделей Veo 3, Imagen 4 и Gemini. С его помощью можно создавать клипы в разрешении 2K по текстовому описанию, использовать собственные материалы, управлять движением камеры и редактировать сцены с помощью встроенных инструментов. А главное — это первый генератор видео с возможностью создавать не только картинку, но также звуки, включая речь и фоновые шумы.
Доступ к Flow пока что есть только у пользователей из США с подпиской на Google AI Pro или Ultra.