WWDC 2023: Apple запускает Vision Pro и множество продуктов на базе новых чипсетов

WWDC 2023: Apple запускает Vision Pro и множество продуктов на базе новых чипсетов

7 июня 2023 г.
На конференции Worldwide Developers компания Apple представила возможности супервычислений на мобильных и настольных устройствах, но центральное место заняла гарнитура Vision Pro AR.

Apple объявила в понедельник на WWDC 2023 о своем долгожданном устройстве дополненной реальности Vision Pro, которое, как пообещал генеральный директор Тим Кук, станет революционным достижением.

Apple рассказала о том, как Vision Pro повышает продуктивность удаленной работы, перенося совместные взаимодействия и рабочий процесс из чисто двухмерной экранной среды в трехмерную пространственную среду. Подразумевается, что вместо того, чтобы поместить пользователя в какое-то виртуальное представление офиса или среды для совместной работы, Vision Pro доставляет задачи, информацию, инструменты повышения производительности и сотрудников в любое пространство, в котором он находится, будь то их реальный офис, их дом или где-нибудь еще.

Во время основного доклада Apple также анонсировала iOS 17, macOS 14 Sonoma, iPadOS 17, новые функции Apple Watch и ряд аппаратных обновлений. Узнайте, кого я считаю настоящей звездой WWDC 2023.

Перейти к:

    Большие новости ОС об iOS 17, iPadOS 17, watchOS 10 Vision Pro: умопомрачительные очки дополненной реальности Суперкомпьютеры стимулируют новые выпуски Apple Инновации Apple Silicon способствуют совершенствованию продуктов

Большие новости ОС об iOS 17, iPadOS 17, watchOS 10

На WWDC 2023 Apple анонсировала iOS 17 и новые возможности, которые она обеспечивает для iPhone, FaceTime, Messages и AirDrop. Мобильная ОС также включает в себя функцию ведения журнала и новый способ просмотра времени и другой информации, когда iPhone установлен и заряжается (рис. A).

Рисунок А

iOS 17 предоставляет новые возможности обмена для iPhone. Изображение: яблоко

Кроме того, Apple рекламировала достоинства iPadOS 17, в том числе переработанный интерактивный экран блокировки; виджеты; и новые функции в PDF-файлах и заметках, FaceTime и Safari.

Apple объявила о функциях, ориентированных на образ жизни, для Apple Watch, доступных в watchOS 10, включая отображение топографии, функции фитнеса и здоровья.

Vision Pro: умопомрачительные очки дополненной реальности

Виртуальное представление Apple Vision Pro, которое поступит в продажу в начале 2024 года по цене 3499 долларов, включало в себя множество новых технологий, обеспечивающих очень компактную архитектуру. К ним относятся два поля зрения размером с почтовую марку с миллионами пикселей, предназначенные для создания полностью захватывающего опыта работы, развлечений и коммерции без сенсорной изоляции.

Кук охарактеризовал Vision Pro как первый продукт Apple, созданный для того, чтобы на него смотрели, а не смотрели на него.

«Точно так же, как Mac познакомил нас с персональными компьютерами, а iPhone — с мобильными компьютерами, Apple Vision Pro познакомит нас с пространственными вычислениями», — сказал Кук во время основного выступления. Внимание было сосредоточено не на том, как очки откроют для пользователей мир аватаров в мета-недвижимости, расположенной на скалах Мауи, а на том, как эта новая гарнитура обладает универсальностью для дополненной реальности и традиционных приложений, захватывая их с 2D-экрана и бросая их в пространство и позволяя вашим глазам и пальцам ходить вместо мыши.

Компания быстро заметила, что Vision Pro может заменить реальность, продемонстрировав, как устройство может превратить сенсорное испытание дальнего полета в полностью захватывающий кинематографический опыт — например, с вершины Пайкс-Пик.

Алан Дай, вице-президент Apple по человеческому интерфейсу, сказал во время WWDC 2023, что ключ не в том, чтобы изолировать пользователей от окружающих, поскольку устройство использует оптическое волшебство для отображения глаз пользователей, когда кто-то находится поблизости. Он сказал: «Это открывает ваши глаза, давая сигналы другим, поэтому это помогает вам оставаться на связи».

Руководители Apple продемонстрировали, как в Vision Pro есть встроенные технологии, которые достигают этих целей, обеспечивая при этом защиту и защиту конфиденциальности, возникающие на основе захваченных данных о лицах и жестах: многочисленные датчики, вычисления и искусственный интеллект, современные схемы, шифрование и кэширование данных. .

Среди множества сенсорных возможностей — LiDAR. Он создает 3D-карты окружения для аудио- и визуальной оптимизации, высокопроизводительного отслеживания взгляда и мощности суперкомпьютера с использованием технологии Apple Silicon в двухчиповой конструкции с новым чипом M2 в основе. Этот чип работает параллельно с совершенно новым специально разработанным чипом под названием R1, который предназначен для обработки датчиков в реальном времени с использованием данных с 12 камер гарнитуры, пяти датчиков и шести микрофонов.

Низкая задержка, отсутствие укачивания

Проблема с гарнитурами VR заключалась в том, что они вызывали тошноту из-за задержки доставки изображения. Майк Роквелл, вице-президент группы разработки технологий Apple, сказал во время основного доклада WWDC, что система доставляет изображения за 12 миллисекунд, устраняя тошноту из-за задержки. «Поэтому кажется, что события происходят вживую», — сказал он.

Функция EyeSight, которая позволяет другим видеть глаза пользователей и наоборот, использует изогнутую OLED-панель. Роквелл объяснил, что при использовании FaceTime система создает представление пользователей во время первоначальной настройки.

Машинное обучение для создания визуального аватара для FaceTime

Рокуэлл сказал, что разработка аватара пользователя имеет решающее значение для функциональности видеоконференций, поскольку никакая камера на устройстве не может запечатлеть лицо пользователя. Компания прибегла к помощи ИИ.

«Мы использовали машинное обучение для создания нового решения», — сказал он, пояснив, что в процессе регистрации пользователя модель машинного обучения, обученная на изображениях лиц, создает представление на основе первоначального сканирования лица пользователя. Модель машинного обучения отслеживает движения и выражения лиц пользователей, чтобы создать реалистичное представление, удобное для видеоконференций, для FaceTime и платформ для конференций сторонних производителей.

По словам Роквелла, VisionOS, новая операционная система для Vision Pro, является первой такой системой, разработанной с нуля для пространственных вычислений. «Ничто другое не похоже на это. Это больше, чем новый продукт — это начало новой платформы».

Optic ID: визуализация конфиденциальности и безопасности

Некоторые эксперты опасаются, что устройства расширенной реальности создают проблемы с конфиденциальностью, поскольку они собирают физиологическую информацию о пользователях, такую ​​как движение глаз и головы, которую можно использовать для получения информации об индивидуальных предпочтениях или предубеждениях.

Apple заявила, что с Vision Pro таких проблем не будет, потому что он блокирует движение глаз и физическое поведение, а гарнитура AR делает то же самое с данными о глазах пользователя, полученными из системы разблокировки устройства под названием Optic ID, которая аутентифицирует пользователя, сканируя его ирисы.

Компания заявила, что Optic ID зашифрован, никогда не покидает устройство и работает с такими функциями, как покупки в Apple Pay и App Store.

«В Apple Vision Pro то, куда вы смотрите, остается конфиденциальным», — сказал Роквелл, пояснив, что данные хранятся в отдельном фоновом процессе. «Данные камеры обрабатываются на системном уровне, поэтому приложения не могут видеть ваше окружение», — сказал он.

Кинематографический опыт, сделка с Disney

Эн Келли, старший менеджер инженерной программы Apple, сказал, что платформа Vision Pro включает в себя первую 3D-камеру Apple с пространственным звуком, обеспечивающую трехмерное погружение или пространственное видео. «Это также доставляет невероятные впечатления от развлечений», — сказала она, объяснив, что поворотный циферблат позволяет контролировать поле зрения и окружающие настройки, как упоминалось выше.

«Вы можете превратить любую комнату в кинотеатр», — сказала она. «Он создан, чтобы дать вам фантастические впечатления от просмотра. 3D-фильмы… такое ощущение, что вы смотрите фильм. Никакое другое устройство не может этого сделать».

Apple заявила, что в первый день запуска Vision Pro будет доступно более 100 аркадных игр. Генеральный директор Disney Боб Айгер сказал, что Disney будет создавать впечатления, «чтобы сблизить наших поклонников с персонажами, которых они любят, способами, которые раньше были невозможны». Он добавил, что Disney+ будет доступен в первый день запуска.

Суперкомпьютеры стимулируют новые выпуски Apple

Несмотря на то, что Apple так же хорошо известна своей эстетикой и пользовательским опытом, как и универсальностью вычислений, настоящей звездой мероприятия Apple WWDC стала невидимая для пользователя линейка сверхбыстрых платформ Apple Silicon System-on-a-Chip, продвигающихся под эгидой M2, а теперь и R1 — первое используется для новых MacBook, представленных во время мероприятия, а второе — для вычислительной мощности Vision Pro.

Инновации Apple Silicon способствуют совершенствованию продуктов

В дополнение к анонсу Vision Pro Apple представила множество аппаратных и программных продуктов, включая новый Mac Pro (6999 долларов) и новый 15-дюймовый MacBook Air (1299 долларов).

Кейт Бержерон, вице-президент по разработке аппаратного обеспечения в Apple, рекламировала последний как самый тонкий ноутбук в мире, его толщина составляет 11,5 мм сверху вниз, отметив, что новый компьютер на базе M2 — это анимационный центр, поддерживающий палитру примерно из миллиарда цветов. Она сказала, что компьютер в 12 раз быстрее, чем самый быстрый MacBook Air.

По словам Дженнифер Манн, директора по управлению инженерными программами в Apple, ранее в этом году Apple выпустила чипы M2 Pro и M2 Max. Но «чип-монстр», который питает новый компьютер Mac Pro, — это новый M2 Ultra, который, по ее словам, является самым мощным чипом, когда-либо созданным для персонального компьютера. По сути, это пара сопряженных чипов M2 Max с 24-ядерным процессором, производительность которого на 20% выше, чем у M1 Ultra (рис. B).

Рисунок Б

Apple заявила, что колористы, использующие DaVinci Resolve на Mac Studio с M2 Ultra, увидят, что обработка видео будет на 50% быстрее, чем в предыдущем поколении. Изображение: яблоко

Оригинал
PREVIOUS ARTICLE
NEXT ARTICLE