Что такое Проект Астра? Объяснение футуристического универсального помощника Google

Почти все, кто занимается технологиями, сейчас вкладывают значительные средства в искусственный интеллект, и Google входит в число тех, кто больше всего привержен будущему ИИ. Проект Астра, представил на Google I/O 2024 — это большая часть этого процесса, и в конечном итоге оно может стать одним из самых важные инструменты ИИ.

Astra позиционируется как «универсальный ИИ-агент, полезный в повседневной жизни». По сути, это что-то вроде сочетания Google Ассистент и Google Gemini с дополнительными функциями и расширенными возможностями для естественного общения.

Здесь мы собираемся объяснить все, что вам нужно знать о Проекте Астра – как он работает, на что он способен, когда вы сможете его получить и как он может повлиять на будущее.

Что такое проект Астра?

В некотором смысле Project Astra ничем не отличается от чат-ботов с искусственным интеллектом, которые у нас уже есть: вы задаете вопрос о том, что изображено на картинке, или о том, как что-то сделать, или запрашиваете создание креативного текста, и Астра с этим справляется.

Что выделяет этот конкретный проект искусственного интеллекта, так это его мультимодальная функциональность (способ объединения текста, изображений, видео и аудио), скорость, с которой работает бот, и то, насколько он разговорчив. Цель Google, как мы уже упоминали, — создать «универсальный ИИ-агент», который сможет делать всё и всё понимать.

Вспомните бота Hal 9000 из фильма Кубрик «2001: Космическая одиссея» или помощницу Саманту в фильме Она: разговаривать с ними — все равно, что разговаривать с человеком. и они мало что могут сделать. (Оба этих ИИ в конечном итоге стали слишком большими, чтобы их создатели могли их контролировать, но давайте пока проигнорируем это.)

Проект Astra был создан для того, чтобы понимать контекст и предпринимать действия, иметь возможность работать в режиме реального времени и запоминать разговоры из прошлого. Судя по демо-версиям, которые мы видели до сих пор, оно работает на телефонах и умных очках и основано на моделях искусственного интеллекта Google Gemini, поэтому в конечном итоге оно может стать частью приложения Gemini, а не чем-то отдельным и автономным.

Когда выйдет Project Astra?

Проект Астра находится на ранней стадии: это не то, что будет доступно массам, по крайней мере, в течение нескольких месяцев. Тем не менее, Google заявляет, что «некоторые из этих возможностей агента появятся в продуктах Google, таких как приложение Gemini, позднее в этом году», поэтому похоже, что элементы Astra будут постепенно появляться в приложениях Google в течение 2024 года.

Когда нам дали некоторое время для практической работы с Project Astra на I/O 2024, эти сеансы были ограничены четырьмя минутами каждый — так что это дает вам некоторое представление насколько это далеко от того, чем может воспользоваться кто угодно и где угодно. Более того, комплект Astra не выглядел особенно портативным, и представители Google осторожно называли его прототипом.

Собирая все это вместе, у нас складывается впечатление, что некоторые из трюков Project Astra, которые мы видели в демоверсии, могут рано или поздно появиться в приложении Google Gemini. В то же время полная версия Astra – возможно, с использованием специального оборудования – вероятно, не будет реализована самое раннее до 2025 года.

Теперь, когда Google рассказал, что такое Project Astra и на что он способен, вполне вероятно, что в ближайшие месяцы мы услышим о нем гораздо больше. Имейте в виду, что ChatGPT и разработчик Dall-E OpenAI занят выпускает собственные крупные обновления, и Google не собирается оставаться позади.

Что я могу делать с Project Astra?

В одной из демонстраций Google показана Astra, работающая на телефоне. , используя вход камеры и естественно разговаривая с пользователем: его просят отметить что-то в поле зрения, что может воспроизводить звуки, и правильно идентифицирует говорящего. Когда на экране рисуется стрелка, Astra распознает компонент динамика, выделенный стрелкой, и рассказывает о нем.

В еще одной демонстрации мы видим Astra правильно определение достопримечательностей мира по рисункам в альбоме для рисования. Он также способен запоминать порядок объектов в списке, идентифицировать окрестности по изображению, понимать назначение отображаемых ему разделов кода и решать записанные математические задачи.

Большое внимание уделяется распознаванию объектов, рисунков, текста и многого другого с помощью системы камер, одновременно понимая человеческую речь и генерируя соответствующие ответы. Это мультимодальная часть Project Astra в действии, которая делает его шагом вперед по сравнению с тем, что у нас уже есть – с улучшениями в кэшировании, записи и обработке, обеспечивающими оперативность реагирования в реальном времени.

В поработав над проектом Астра, мы смогли заставить его рассказывать историю на основе объектов, которые мы показывали камере, и адаптировать история, как мы пошли дальше. В дальнейшем нетрудно представить, как Astra применяет эти навыки, когда вы исследуете город в отпуске, решаете физическую задачу на доске или предоставляете подробную информацию о том, что показано в спортивной игре.

Какие устройства будут включать Project Astra?

В демонстрациях проекта Astra, которые Google до сих пор демонстрировал, ИИ работает на неопознанном смартфоне и неопознанных умных очках, что позволяет предположить, что мы, возможно, не услышали последнее о Google Glass пока.

Google также намекнул, что Project Astra выйдет на устройства в других форм-факторах. Мы уже упоминали фильм Она, и вполне возможно, что мы в конечном итоге увидим бота Astra, встроенного в беспроводные наушники (при условии, что у них достаточно надежное соединение Wi-Fi). .