Я попробовал новую функцию пространственного видео iPhone 15 Pro, и это будет потрясающее приложение для Vision Pro.
11 ноября 2023 г.У меня было ровно два опыта использования Apple Visio Pro: один шесть месяцев назад, в тот день, когда Apple анонсировала свою гарнитуру смешанной реальности, а другой всего несколько часов назад. И если при первом опыте я чувствовал, что плыву по поверхности возможностей гарнитуры, то сегодня я чувствую, что имею квалификацию дайвера Vision Pro. Я имею в виду, что еще я буду чувствовать после того, как не только посмотрю пространственное видео на Vision Pro, но и сниму такое видео для гарнитуры с помощью стандартного iPhone 15 Pro?
К настоящему моменту вы, вероятно, знаете, что iOS Версия 17.2, которую Apple выпустила сегодня в качестве общедоступной бета-версии, станет первой версией, в которой большинство из нас получит опыт работы с пространственным видео. Конечно, изначально это будет только половина опыта. Ваш iPhone 15 Pro а iPhone 15 Pro Max с обновлением iOS 17 добавит новую опцию видеосъемки. который вы можете переключить в разделе «Форматы камеры» в настройках. Как только Vision Pro выйдет в продажу, где-то в следующем году, этот формат автоматически включится для владельцев Vision Pro, которые подключили устройство смешанной реальности к своим учетным записям iCloud.
Я смог взглянуть не только на возможности нового iPhone 15 Pro, но и на то, как выглядит реалистичный контент, просматриваемый на гарнитуре Apple Vision Pro за 3499 долларов, — и теперь я понимаю, что пространственное видео может стать убийственным приложением Vision Pro.
Важное изменение дизайна iPhone
Чтобы понять, как Apple ведет долгую игру при разработке своих продуктов, вам нужно всего лишь взглянуть на свой iPhone 15 Pro или iPhone 15 Pro Max, где вы обнаружите тонкие изменения в дизайне и функциональности, которые вы, вероятно, пропустили, но которые, очевидно, все о еще неизданном Vision Pro. Оказывается, Apple разработала iPhone 15 Pro и Pro Max с учетом пространственных потребностей Vision Pro, взяв сверхширокоугольную камеру 13 мм и переместив ее из положения (на iPhone 14 Pro) по диагонали напротив основной камеры 48 МП в нужное место. вертикально внизу с основной камерой, которую на 14 Pro занимал телеобъектив; телеобъектив перемещается в старое гнездо сверхширокого объектива.
Перемещая эти два объектива, Apple позволяет снимать стереоскопическое или пространственное видео, но только тогда, когда вы держите iPhone 15 Pro и iPhone 15 Pro Max в ландшафтном режиме.
Я узнал, что дело не только в записи видео двумя объективами одновременно и съемке одной и той же сцены под разными углами для создания виртуального 3D-эффекта. Поскольку сверхширокоугольная камера 13 мм снимает кадр гораздо большего размера, вычислительная фотография Apple должна обрезать и масштабировать сверхширокоугольное видео, чтобы оно соответствовало кадрам, поступающим с основной камеры.
Чтобы упростить ситуацию, Apple записывает только два видеопотока 1080p/30fps в формате HEVC (высокоэффективное кодирование видео). Из-за двойного потока размер файла немного больше: файл размером 130 МБ рассчитан примерно на одну минуту видео.
Несмотря на то, что эти пространственные файлы якобы представляют собой новый медиаформат, они будут выглядеть как любой другой 2D-видеофайл на вашем iPhone или Mac. Однако будут ограничения. Вы можете обрезать одно из этих видео, но не можете применять какие-либо другие изменения, чтобы не нарушить идеальную синхронизацию между двумя потоками.
Съемка
Для своего теста я использовал стандартный iPhone 15 Pro с бета-версией iOS 17 для разработчиков. Мы уже включили пространственное видео для Apple Vision Pro в разделе «Настройки» в разделе «Камера/Форматы». В режиме видеозахвата приложения камеры я мог выбрать крошечный значок, который, естественно, выглядит так же, как Vision Pro, для съемки в режиме пространственного видео.
Когда я выбрал это, телефон посоветовал мне повернуть телефон на 90 градусов, чтобы он был в альбомной ориентации (значок Vision Pro вращается, как только вы нажимаете на него). Я также заметил, что инструмент уровня изображения, который является необязательным для всех форматов, включен по умолчанию, когда вы используете пространственное видео. Это связано с тем, что пространственное видео лучше всего получается на одном уровне. На самом деле, снимать их в ситуациях, когда вы знаете, что не сможете удерживать телефон ровно, например, при съемке в движении, может быть плохой идеей. В основном речь идет о том, каково будет смотреть готовый продукт в гарнитуре Vision Pro — большое количество движений в 3D-видео в нескольких сантиметрах от вашего лица может вызвать дискомфорт.
Точно так же я обнаружил, что лучше всего держаться на расстоянии от трех до восьми футов от объекта съемки, чтобы в конечном пространственном видео он не выглядел гигантом.
Я снял пару коротких пространственных видеороликов, где женщина готовит суши. Я попытался разместить суши на переднем плане, а ее на заднем, чтобы придать сцене некоторую глубину. Съемка этого видео не отличалась от любых других, которые я снимал, хотя я, вероятно, немного переусердствовал, пытаясь создать пару интересных пространственных видеороликов.
Несмотря на то, что iPhone преодолевает множество вычислительных трудностей, чтобы создать пространственное видео из того, что вы снимаете, вы сможете мгновенно воспроизвести видео. Мы передали наши телефоны и через несколько минут были готовы просматривать видео на Vision Pro.
Привет, мой старый друг
Хотя я беспокоился, что после всех этих месяцев я не вспомню, как использовать Vision Pro, на самом деле мне потребовалось всего мгновение или два, чтобы переориентироваться на его коллекцию взглядов, жестов и элементов управления на основе Digital Crown. Это остается потрясающе интуитивно понятной передовой технологией. Мне все еще нужно было сдать очки для измерения по рецепту, чтобы мы могли убедиться, что Apple вставила правильные линзы Zeiss (при использовании гарнитуры вы не носите очки). Напоминаем, что, в отличие от iPhone, Vision Pro будет особенным.
Во время второго сеанса ношения у меня не было дополнительного ремня, надеваемого через голову, а это означало, что я впервые почувствовал весь вес головного убора. Я приложил все усилия, чтобы отрегулировать оголовье с помощью ручки управления на задней части гарнитуры, стараясь не затянуть его слишком сильно, но я не уверен, что когда-либо нашел эту золотую середину (на заметку: приобретите дополнительное оголовье, когда наконец-то вы сможете сделать обзор одной из этих гарнитур).
С тех пор, как я последний раз пробовал Vision Pro, появилось несколько новых элементов управления — например, теперь я мог изменять размер окон, посмотрев на край окна, а затем виртуально сжимая и потянув белую кривую, которая появляется прямо под ним. У меня это получилось со второй попытки, а потом это стало моей второй натурой.
Наконец-то я хорошенько рассмотрел приложение Vision Pro Photos, в котором было легко ориентироваться, используя взгляд и касания пальцами — вы зажимаете и тянете любой рукой, чтобы пролистывать фотографии и галереи. При выполнении этих жестов я обычно держал руки на коленях или рядом с ними. Я посмотрел фотографии, снятые на iPhone 15 Pro с разрешением 24 МП и 48 МП. Было весело увеличивать эти фотографии, чтобы они заполняли мое поле зрения, а затем сжимать и перетаскивать их, чтобы перемещаться по изображениям и видеть некоторые изысканные детали, например, кружева на красном платье.
Я посмотрел несколько невероятных панорамных снимков, в том числе один из Долины Монументов в Аризоне и другой из Исландии, на котором был изображен замерзший водопад, который практически полностью окружал меня. Как я уже отмечал в моем первоначальном опыте работы с Vision Pro, наконец-то появился повод сделать панорамные фотографии на iPhone.
Пространственное положение головы
В приложении Vision Pro Photos появилась новая медиа-категория под названием «Пространственные». Здесь я просмотрел несколько готовых пространственных видеороликов и, наконец, пару пространственных видеороликов, снятых на iPhone 15 Pro. Во время моего участия в WWDC 2023 я видел сцену у костра, празднование дня рождения, интимную сцену. семейный поход, еще одна семья, готовящая на кухне, и, что мне больше всего нравится, мать и ребенок, играющие с пузырьками.
Вы можете просматривать эти пространственные видеоролики в окне или в полноэкранном режиме, где края сливаются либо с вашим сквозным видом, либо с вашей иммерсивной средой (новая среда — «Дерево Джошуа»), которая заменяет ваш реальный мир 360-градусным изображением. В видео с пузырьками казалось, что пузыри плавают как в сцене, так и ближе к моему лицу; У меня возникло желание протянуть руку и прикоснуться к ним.
В сцене на кухне, где семья сидит вокруг кухонного острова и ест, а отец на заднем плане готовит, 3D-эффект изначально делает отца похожим на крошечного человечка. Когда он повернулся и приблизился к своей семье, странный эффект исчез.
Неясно, как пространственное видео, снятое на iPhone 15 Pro, обрабатывает фокусные точки, и используется ли по умолчанию большая глубина резкости или что-то другое для 3D-эффекта. Вы можете, коснувшись экрана своего iPhone во время съемки пространственного видео, установить точку фокусировки, но вы не можете изменить ее при редактировании.
Два моих коротких видео произвели впечатление, если я так говорю. Во время съемки я приложил все усилия, чтобы положить на передний план один кусок суши, который повар протянул мне, и в конечном результате я получил именно тот эффект, на который надеялся. Глубина интересная, не навязчивая и не раздражающая. Вместо этого сцена выглядит точно так, как я ее помню, с той реалистичной глубиной. Это невозможно при традиционной видеосъемке.
Чего я не сделал, так это встал и подошёл поближе к пространственным видео. Точно так же это не те видеоролики, на которые можно зайти и передвигаться. Вы по-прежнему снимаете только два немного разных видео, чтобы создать иллюзию глубины.
Если вам интересно, звук тоже записывается, и это звучало совершенно нормально. Я не заметил какого-либо пространственного эффекта, но эти видео не были сняты с источниками звука, расположенными на расстоянии комнаты.
Что дальше?
Поскольку после установки общедоступной бета-версии iOS 17.2 у вас появятся возможности съемки пространственного видео, вы сможете снимать много пространственного видео до того момента, когда Apple наконец начнет продавать Vision Pro потребителям. Эти видео будут выглядеть совершенно нормально, но представьте, что у вас есть библиотека пространственного видео, которую можно пролистать, когда вы наконец купите Vision Pro. Это, а также тот факт, что ваши панорамы будут выглядеть потрясающе на устройстве, может, наконец, стать причиной, по которой вы купите гарнитуру Apple.
Естественно, большим камнем преткновения здесь является цена. Apple планирует взимать 3499 долларов (около 2800 фунтов стерлингов / 5300 австралийских долларов) за Vision Pro, не включая аксессуар для ремня, который, как уже упоминалось, вам, вероятно, понадобится. Это означает, что миллионы людей могут владеть iPhone 15 Pro и снимать пространственное видео, но лишь немногие смогут смотреть его на Vision Pro.
Возможно, Apple включит Vision Pro в один из своих планов финансирования, чтобы люди могли оплачивать его ежемесячной платой. Также могут быть скидки, если вы купите iPhone 15 Pro. Возможно, нет. Что бы ни делала Apple, пространственное видео может стать наиболее убедительным аргументом в пользу если и не владения Vision Pro, то, по крайней мере, желания его иметь.
Вам также может понравиться
- Практическое занятие: Apple Vision Pro: я только что носил будущее
- Обзор обзора Apple Vision Pro: все ранние вердикты на данный момент
- Первые фильмы Apple Vision Pro 3D скоро могут появиться в App Store
- Vision Pro станет самым дорогим бортовым аксессуаром в мире
- Apple Vision Pro: 12 вещей, которые вам нужно знать
Оригинал