Как отслеживание всего тела совершает революцию в социальной виртуальной реальности

Изображение предоставлено: трекеры HaritoraX от Shiftall

Погружение — один из наиболее важных компонентов виртуальной реальности. Поскольку компании рекламируют свои VR-продукты, подчеркивая их погружение, ожидания потребителей выше, чем когда-либо. Виртуальная реальность, индустрия стоимостью 16,8 миллиарда долларов, может создавать нереальные впечатления, которые невозможно воспроизвести ни в какой другой среде. . Однако чем менее естественным это кажется, тем больше это отвлекает их от этого опыта. Среди наиболее важных аспектов погружения в виртуальную реальность — наше собственное тело. Вот тут-то и пригодится отслеживание всего тела. Давайте поговорим о том, как отслеживание и оценка всего тела меняют наше восприятие социального VR и что нас ждет на горизонте.

Где мои ноги?

Несколько лет назад, во время ажиотажа вокруг Meta, погружение было широко обсуждаемой темой. Маркетинговый толчок к прыжку Meta в виртуальную реальность обещал мир, в который потребители смогут полностью погрузиться. После субсидирования стоимости Quest 2, чтобы передать его в руки 14,8 миллиона человек к июню 2022 года быстро наступила волна разочарования от погружения.

Опрос Steam по оборудованию виртуальной реальности с декабря 2023 года показывает, что Oculus Quest 2 является наиболее часто используемой гарнитурой для платформы виртуальной реальности для ПК.

Помимо мультяшной графики, необходимой для поддержки автономного оборудования Quest 2, наиболее важной деталью для многих людей была их отсутствие ног. Имея только информацию от камер гарнитуры и положения контроллера, оценка позы может дать лишь ограниченный результат. Однако потребители, естественно, жаждали большего.

Данные Google Trends показывают, что за последние пять лет интерес к отслеживанию всего тела значительно возрос. С 2022 года он неоднократно повышался и стабилизировался, показывая, что потребители интересуются этой темой. Поскольку трекеры IMU, такие как SlimeVR, только сейчас начинают поставляться спонсорам, настал решающий момент для стартапов, чтобы опередить конкурентов, разрабатывая и выпуская трекеры для поддержки пользователей социальных сетей VR. Но что такое отслеживание всего тела и почему люди так этого хотят?

Что такое отслеживание всего тела?

Если энтузиасты виртуальной реальности хотят точно отслеживать ноги, они могут быть удивлены, узнав, что это доступно потребителям уже много лет. Vive выпустила свои первые трекеры с поддержкой базовой станции в 2017 году. Первоначально они продавались для отслеживания реальных объектов в виртуальной реальности, игроки вскоре стали использовать его для отслеживания частей своего тела, таких как ноги, колени, локти и грудь.

Полное отслеживание тела (FBT) позволяет пользователям виртуальной реальности и художникам по захвату движений отслеживать как можно большую часть своего тела. В обоих случаях пользователи переводят реальные движения своего тела в движения аватара. FBT обеспечивает гораздо больше выражений и языка тела, чем могли бы получить пользователи виртуальной реальности в противном случае. Отслеживание всего тела чрезвычайно популярно на социальных платформах виртуальной реальности, таких как VRChat.

Отслеживание всего тела делает такие занятия, как танцы, гораздо более динамичными в VRChat. Источник изображения.

Если цель — обеспечить большую свободу передвижения и погружение в виртуальную реальность, есть три подхода:

* Отслеживание на основе маяка: трекеры Vive, Tundra, измерения с помощью внешних базовых станций. * Отслеживание инерциального измерительного блока (IMU): все измерения выполняются внутри бортовых датчиков. * Оценка всего тела: альтернатива отслеживанию всего тела, которая вычисляет наиболее вероятные положения тела на основе ограниченной информации.

Давайте рассмотрим каждый пример глубже, чтобы увидеть плюсы и минусы, а также их потенциал.

| | Отслеживание маяков | Отслеживание IMU | Оценка всего тела | |----|----|----|----| | Плюсы | Повышенная точность. Более простая настройка | Более портативные и дешевые датчики не нуждаются в прямой видимости. | Самый дешевый вариант. Никаких датчиков, кроме существующей гарнитуры и контроллеров, не требуется. | | Минусы | Дорого, особенно для пользователей, у которых еще нет базовых станций. Датчики не могут быть закрыты от базовых станций. | Склонны к дрейфу и проблемам с калибровкой. Трудно настроить. Зарядка каждого датчика может оказаться непростой задачей. | Не настоящее отслеживание всего тела. Не так точно, как два других варианта. Такие жесты, как удар ногой, не работают. | | Профиль клиента | Энтузиасты виртуальной реальности, существующие владельцы базовых станций | Пользователи виртуальной реальности с более ограниченным бюджетом или желающие иметь более портативный FBT. | Пользователи виртуальной реальности с очень ограниченным бюджетом или хотят попробовать отслеживание тела, прежде чем делать более серьезные инвестиции. |

Отслеживание маяков

Самым популярным и точным решением для отслеживания всего тела на потребительском уровне в виртуальной реальности является отслеживание маяков. При помощи базовых станций положение трекеров, прикрепленных к вашему телу, измеряется по прямой видимости. Vive и Tundra — основные производители в этой области, известные своей надежностью и простотой использования.

Однако отслеживание с помощью маяков обходится дорого. Потребителям не только приходится покупать трекеры по сотни долларов за штуку, но им также нужны дорогие базовые станции и полки для их установки. Отслеживание с помощью маяка может стать жертвой проблем с окклюзией, поэтому трекеры не могут быть закрыты одеждой или другими объектами, например одеялами.

Отслеживание инерционного измерительного блока (IMU)

Популярность технологии виртуальной реальности – отслеживание IMU. Трекеры IMU, работающие от отдельных датчиков, не требуют для работы базовых станций. Они могут быть полностью беспроводными и работать от аккумулятора. Однако их сложнее устанавливать и эксплуатировать. Трекеры IMU сложнее настроить, они склонны к дрейфу и требуют время от времени повторной калибровки во время сеансов.

Преимущество трекеров IMU заключается в том, что им не нужна прямая видимость. Это означает, что они могут быть закрыты одеждой или другими предметами. Эта технология отслеживания дешевле, но вариантов не так много. Трекеры Sony Mocopi уже доступны, но стоят довольно дорого. Несмотря на это, трекеры Mocopi по-прежнему дешевле, чем решения для отслеживания на базе маяков.

SlimeVR имеет доступную прошивку для ESP-32/8266 и множества различных аппаратных средств IMU.

Восходящей звездой отслеживания IMU является SlimeVR, проект с открытым исходным кодом для отслеживания всего тела. С помощью SlimeVR каждый может создать свой собственный трекер IMU, если у него есть подходящее оборудование. Благодаря успешной краудфандинговой кампании клиенты могут заказать готовые трекеры SlimeVR прямо сейчас. Однако сроки доставки длительны и могут занять месяцы. Есть несколько альтернатив, использующих протокол SlimeVR. owoTrack – это приложение для Android, которое использует датчики вашего телефона Android в качестве устройства отслеживания всего тела.

Оценка всего тела (FBE)

Хотя оценка всего тела не является настоящим «отслеживанием всего тела», она является альтернативой двум предыдущим вариантам. Вместо того, чтобы использовать специальные трекеры для каждой части вашего тела, FBE вычисляет положение вашего тела на основе данных, которые уже есть в программе. Обычно это делается с использованием положения вашей гарнитуры VR и контроллеров. Однако в других подходах может использоваться что-то вроде сенсора Xbox Kinect или веб-камеры.

Standable — один из самых популярных проектов для оценки всего тела, совместимый со SteamVR. Хотя это и не проект с открытым исходным кодом, его совместимость и простота использования пользуются популярностью среди пользователей: 74% отзывов в Steam являются положительными. Это отличный вариант для тех, кто не может позволить себе более дорогие решения для отслеживания или просто хочет попробовать что-то более точное для измерения своего тела в виртуальной реальности.

Meta также применила этот подход в Quest 3 с функцией «отслеживания всего тела изнутри наружу», которая на самом деле является просто FBE.

Какое будущее у отслеживания всего тела?

Поскольку интерес потребителей к отслеживанию всего тела растет и стабилизируется, очевидно, что потребительский спрос на отслеживание всего тела растет. Менее ясно, как отреагирует рынок. Есть три переменные, которые повлияют на выбор клиентов при покупке с помощью FBT:

* Сложность установки * Расходы * Точность и производительность

VR как индустрия начинает оправляться от разочарования. Однако для энтузиастов виртуальной реальности технология отслеживания всего тела существует уже давно, но не в той форме, которая была бы наиболее доступна для потребителей. Самые простые и эффективные трекеры требуют значительных инвестиций.

Однако рост количества решений IMU с открытым исходным кодом, таких как SlimeVR, предполагает будущий переворот рынка. Если бы на рынок вышло больше предприятий и стало бы продавать решения для отслеживания IMU по конкурентоспособным ценам, обладающие высокой производительностью и удобством, можно было бы заработать много денег. То же самое можно сказать, если компании удастся придумать, как снизить стоимость отслеживания с помощью маяков.

Помимо решений IMU, совершенствуются методы оценки всего тела. Возможно, самым простым и лучшим вариантом для большинства людей будет полное отсутствие трекеров. Хотя FBE несовершенен, он является отличной отправной точкой для улучшения качества и погружения в виртуальную реальность для большинства пользователей.

Время покажет, как изменится рынок, но с появлением краудфандинговых трекеров SlimeVR мне определенно любопытно, как компании отреагируют на растущий спрос на возможность ударить кого-нибудь по лицу или потанцевать в виртуальной реальности.

:::совет Спасибо за чтение! Надеюсь, вам понравилось это произведение. Как вы думаете, куда в дальнейшем пойдет рынок систем отслеживания всего тела? Дайте мне знать в комментариях ниже.

:::