Проект Google Astra может улучшить Pixel 9 и помочь Google Glass вернуться
15 мая 2024 г.Я не ожидал Google Glass< /a>, чтобы немного вернуться в Google I/O 2024, но это произошло благодаря Project Astra.
Так Google называет новый прототип агентов искусственного интеллекта, основанный на Gemini мультимодальный искусственный интеллект, который может анализировать видео и речевые данные, а также разумно реагировать на то, на что человек эффективно смотрит, и отвечать на вопросы об этом. .
Проект Астра, описываемый как «универсальный ИИ», который может «действительно помочь в повседневной жизни», призван быть активным, обучаемым и способным понимать естественный язык. И в видео Google продемонстрировал это с человеком, использующим что-то вроде Pixel 8 Pro с работающим на нем Astra AI.
Направив камеру телефона на комнату, человек мог попросить Астру «сказать мне, когда вы увидите что-то, издающее звук», на что ИИ пометит динамик, который он может видеть в пределах комнаты. видоискатель камеры. После этого человек мог спросить, что представляет собой определенная часть динамика, на что ИИ ответил, что эта часть является твитером и обрабатывает высокие частоты.
Но Astra делает гораздо больше: она может идентифицировать код на мониторе и объяснить, что он делает, а также определить, где кто-то находится в городе, и предоставить описание этой области. Черт возьми, при повышении уровня он может даже составить аллитерирующее предложение вокруг набора мелков в стиле доктора Зевса.
Он может даже вспомнить, где пользователь оставил пару очков. , поскольку ИИ запоминает, где он видел их в последний раз. Он смог сделать последнее, поскольку ИИ предназначен для кодирования видеокадров того, что он видел, объединения этого видео с речевыми данными и объединения всего этого во временную шкалу событий, кэширования этой информации, чтобы он мог быстро восстановить ее позже. .
Затем, обратившись к человеку в «умных очках» Google Glass, Астра увидела, что человек смотрит на диаграмму системы на доске, и выяснила, где можно провести оптимизацию, когда ее спросят об этом.
Подобные возможности внезапно делают Glass действительно полезным, а не слегка жутким и, возможно, бестолковым устройством, каким оно было несколько лет назад; возможно, после этого мы увидим возвращение Google на арену умных очков.
Проект Астра может сделать все это благодаря использованию мультимодального искусственного интеллекта, который, проще говоря, представляет собой сочетание моделей нейронных сетей, которые могут обрабатывать данные и входные данные из нескольких источников; подумайте о сочетании информации с камер и микрофонов со знаниями, которым уже обучен ИИ.
Google не сказал, когда Project Astra превратится в продукты или даже в руки разработчиков, но Google не сказал, когда Генеральный директор DeepMind Демис Хассабис заявил, что «некоторые из этих возможностей появятся в продуктах Google, например в приложении Gemini, позднее в этом году». Я был бы очень удивлен, если бы это не означало Google Pixel 9, который мы ожидаем позднее в этом году.
Теперь стоит иметь в виду, что проект Astra был продемонстрирован в очень эффектном видеоролике, и реальность таких встроенных агентов ИИ заключается в том, что они могут страдать от задержек. Но это многообещающий взгляд на то, как Google, вероятно, будет интегрировать действительно полезные инструменты искусственного интеллекта в свои будущие продукты.
Вам также может понравиться
- Google I/O 2024: новости об искусственном интеллекте Gemini, Pixel, Android 15 и более
- Android 15: последние новости, слухи и все такое пока мы знаем
Оригинал