Как Mawari производит революцию в доставке 3D-контента

Ишан Пандей: Привет, Луис, добро пожаловать в нашу серию интервью. Миссия Mawari — демократизировать пространственные вычисления с помощью технологии облачного стриминга. Можете ли вы рассказать историю основания Mawari и как ваше видение развивалось с 2017 года?

Луис Оскар Рамирес:Спасибо, Ишан. С многочисленными патентами на наше имя, более 40 коммерческими активациями по всему миру и признанием как первого в мире пространственного потокового решения и сети доставки контента, может показаться, что Mawari — это мгновенный успех. Но давайте проясним ситуацию: это путешествие началось в Сибуе еще в 2017 году, и оно было совсем не легким. То, что сегодня кажется мгновенным прорывом, на самом деле является кульминацией многих лет неустанных исследований и разработок, неустанных инноваций и непоколебимой преданности делу.

Мы представляли себе будущее до того, как оно наступило. Наш основополагающий принцип был простым, но радикальным: «фреймированные» медиа — контент, заключенный в экраны — превратятся в «безрамочные» медиа, бесшовно интегрирующие виртуальные объекты, которые взаимодействуют с реальным миром и с вами. Это не просто концепция; это смена парадигмы в том, как мы взаимодействуем как с физическим, так и с цифровым миром — «фиджитал»-революция. Mawari, что означает «ваше окружение» или «оглянитесь вокруг» на японском языке, идеально передает нашу миссию по разрушению этих рамок и переосмыслению того, что возможно. Однако настоящее вдохновение пришло в 2016 году с соучредителем MUTEK Japan.

Это был не просто фестиваль цифрового искусства; это был рубеж для экспериментов с новыми, передовыми медиа. В 2017 году мы наблюдали, как художники исследовали зарождающуюся область виртуальной реальности, раздвигая границы возможного. Но мы также увидели огромные проблемы, с которыми они столкнулись: интенсивность данных, требуемая вычислительная мощность и сложность масштабирования этих впечатлений. Стало ясно, что следующему поколению развлечений нужен кто-то, кто преодолеет эти барьеры. Мы решили стать этим кем-то. С самого первого дня наша миссия была предельно ясна: сделать 3D/пространственные вычислительные медиа доступными для всех. В 2018 году наше видение нашло свою определяющую задачу.

Телекоммуникационный гигант KDDI разработал одного из первых цифровых людей с искусственным интеллектом по имени Айко, визуализированного с захватывающим реализмом с помощью Unreal Engine 4. Она была разработана для общения в реальном времени, цифровой консьерж, предназначенный для жизни в очках дополненной реальности и смартфонах. Но вот в чем загвоздка: ни одно существующее мобильное устройство не могло справиться с огромной вычислительной мощностью, необходимой для ее реального времени, 3D-рендеринга и взаимодействий с искусственным интеллектом. Это была проблема, требующая решения, идеальный вариант использования пространственной потоковой передачи. KDDI выпустил запрос предложений на потоковую передачу Айко в полном 3D на умные очки, вызов, который мог бы напугать даже крупнейшие технологические компании. И он справился — за исключением Mawari, стартапа из 3 человек.

Несмотря ни на что, мы победили. Соревнуясь с крупными игроками в сфере технологий, мы, Давид в этой истории, превзошли Голиафа мира технологий. Это был наш момент «Ага». Мой соучредитель Александр Борисов и я поняли, что можем достичь того, что другие считали невозможным. Интегрировав и адаптировав несколько современных технологий, мы транслировали Aiko в реальном времени, в полном 3D. Но вскоре мы осознали суровую реальность: современный технологический стек и инфраструктура были тупиком для наших амбиций.

Мы были предоставлены сами себе, чтобы решить проблемы с задержкой и пропускной способностью. Без внешней помощи нам пришлось переосмыслить все — от рендеринга до кодирования, потоковой передачи и декодирования 3D-контента — не традиционными средствами, а с помощью нового, инновационного подхода. Это привело к созданию нашей основной технологии: Mawari Engine и его Spatial Streaming SDK, родного для пространственных вычислений и дополненной реальности.

Когда мы начали коммерческое развертывание, мы увидели быстрое принятие, но также наткнулись на другую стену — масштабируемость. Даже самые мощные гиперскейлеры, такие как AWS, не могли помочь нам достичь необходимого нам масштаба. Существующие центры обработки данных и сети доставки контента не были созданы для пространственной потоковой передачи в реальном времени.

К 2021 году мы столкнулись с еще одним важным решением: ждать, пока гиперскейлеры в конце концов догонят нас, или прокладывать свой собственный путь вперед. Мы выбрали последнее. Мы построили Mawari Network — первую и единственную в мире DePIN (Decentralized Physical Infrastructure Network), которая организует хранение, пропускную способность и рендеринг в реальном времени для пространственных вычислений. Работая на блокчейне, она позволяет глобальному сообществу партнеров по дистрибуции участвовать в этом видении.

Наша миссия никогда не колебалась. Мы беремся за каждое техническое узкое место, чтобы реализовать ее. А наше видение? Оно кристально ясное и смелое, как никогда, мы не просто развиваемся вместе с отраслью; мы определяем ее путь вперед.

Ишан Пандей:Запатентованная технология 3D-раздельного рендеринга Mawari и 3D Streaming CODEC решают серьезные проблемы в области пространственных вычислений. Не могли бы вы объяснить, как работают эти технологии и почему они имеют решающее значение для будущего опыта XR?

Луис Оскар Рамирес:Почему пространственная потоковая передача имеет значение? Подумайте об этом: когда вы нажимаете кнопку воспроизведения на Netflix, фильм в формате 4K появляется на вашем телевизоре или смартфоне почти мгновенно. Мы даже не думаем об этом больше; это стало частью нашей повседневной жизни. Но вот суровая реальность: до Mawari пространственный контент не мог быть доставлен в масштабе с качеством и оперативностью, которые мы привыкли ожидать от таких сервисов, как Netflix или YouTube. Это слон в комнате. Технология Mawari делает что-то необычное. Мы привносим тот же самый бесшовный опыт в пространственный контент — без загрузок, без ожидания, без ограничений по хранению. Так же, как вы слушаете музыку или смотрите фильм сегодня — легко, мгновенно.

Мы устраняем трение, делая динамическую потоковую передачу пространственных впечатлений доступной в любое время, в любом месте и для всех. Как это работает? Как я уже упоминал ранее, технология Mawari разработана как родная для пространственных вычислений, области, которая представляет уникальные проблемы и возможности. Сначала давайте рассмотрим природу пространственных вычислений: они объединяют 2D и 3D контент. Хотя мы усовершенствовали искусство потоковой передачи 2D контента с помощью эффективных технологий и кодеков, то же самое не относится к 3D. Вот тут-то и появляется Mawari. Мы создали новаторскую технологию, специально разработанную для эффективной потоковой передачи 3D / иммерсивного контента, бесшовно интегрируя его в пространственные впечатления с помощью нашего запатентованного формата.

Теперь давайте перейдем к сути проблемы: если вы хотите транслировать весь пространственный опыт, вы имеете дело не только с 2D- и 3D-контентом. Вы также имеете дело с пространственными вычислительными элементами — вычислениями в реальном времени, которые устройство выполняет для позиционирования вас и контента в реальном мире. Поскольку эти устройства по сути выступают в качестве области просмотра для ваших глаз, они требуют сверхнизкой задержки. Потоковая передача этих элементов по сети делает их крайне восприимчивыми к задержкам. Когда происходит сбой, вы не просто получаете значок буферизации. Вы получаете блокировку экрана, и это не просто раздражает; это может привести к укачиванию и некачественному опыту. С 2D-контентом буферизация — это просто неудобство. Но в пространственных вычислениях это критическая проблема, которая влияет на пользователя физически.

Вот почему мы считаем, что определенные элементы должны обрабатываться или отображаться непосредственно на устройстве: пространственные вычислительные расчеты и базовые 2D-элементы, такие как компоненты пользовательского интерфейса — кнопки, меню и т. п. И вот здесь наша технология раздельного рендеринга имеет значение. Мы позволяем отображать эти критически важные элементы на самом устройстве, в то время как насыщенный, динамичный 3D-контент транслируется из сети Mawari. Подумайте об этом так: с Netflix вы загружаете фреймворк приложения, но транслируете контент. Мы применяем здесь ту же логику, устраняя трение и обеспечивая бесперебойный опыт. Такой подход устраняет традиционные препятствия — никаких загрузок, никаких проблем с хранением, только бесперебойная потоковая передача в реальном времени. Подводя итог: мы транслируем 3D / иммерсивный контент в пространственный опыт, работающий на устройстве, оснащенном технологией раздельного рендеринга Mawari.

Вот как эти две технологии работают рука об руку, чтобы создать безупречный пользовательский опыт. И есть еще один аспект, который меняет правила игры в нашей технологии раздельного рендеринга: контекстно-зависимая потоковая передача. Эта функция, называемая окклюзией, позволяет вам размещать потоковый контент точно в реальном мире. Представьте себе помощника ИИ, сидящего напротив вас за столом; вы ожидаете увидеть только верхнюю половину его тела, как у реального человека. Если бы мы транслировали весь опыт, достижение этого уровня контекстуального реализма было бы невозможным. Это было бы похоже на устаревшую накладку, напоминающую старые игрушки View-Master — далекая от иммерсивного будущего, которое мы строим.

Ишан Пандей: Сеть Mawari #DePIN использует узлы на базе графических процессоров для эффективной потоковой передачи 3D-контента в реальном времени. Чем этот децентрализованный подход отличается от традиционных сетей доставки контента и какие преимущества он предлагает?

Луис Оскар Рамирес:Mawari Network была DePIN с самого начала, поскольку централизованные подходы и традиционные сети доставки контента не подходили для масштабирования нашего решения Spatial Streaming, это то, что я определил как «Purpose Driven DePIN». Точнее, традиционные сети доставки контента распределяют контент по своим узлам, этот контент не требует вычислений после обработки исходного источника, однако, когда дело доходит до 3D-потока в реальном времени, нам необходимо распределить вычисления и хранилище (исходный файл) по узлам сети.

Это означает, что нам нужен достаточно распределенный парк узлов GPU с близостью к конечному пользователю, чтобы обеспечить оптимальную задержку в обоих направлениях к устройству конечного пользователя. Вдобавок к этому мы можем взаимодействовать с программируемыми сетями последней мили, чтобы гарантировать QoS. Эта оркестровка должна происходить практически в реальном времени, и это не то, что предлагают сегодня централизованные/традиционные сети.

Что еще важнее, гиперскейлеры вложили миллиарды долларов в свою текущую инфраструктурную архитектуру, и ни один финансовый директор этих организаций не одобрит новые, специально построенные объекты для пространственной потоковой передачи, пока не наступит расчетный период окупаемости — другими словами, пока не появится достаточный спрос, чтобы оправдать миллиарды, если не триллионы, инвестиций в эту новую инфраструктуру — это классический Web2.

С новой архитектурой и использованием DePIN в качестве подхода - Mawari снимает бремя CaPex, используя огромное количество существующих узлов GPU по всему миру и создавая глобальное сообщество партнеров, которые вносят ресурсы для быстрого масштабирования глобальной сети доставки контента, которая, опять же, в отличие от традиционных CDN и облачных сервисов, работает не на бумажных контрактах, а на Blockchain - технологии 21-го века, позволяющей совершить революцию 21-го века в иммерсивном контенте и опыте. Blockchain обеспечивает не только надежное отслеживание производительности, но и программное управление производительностью и автоматическое распределение справедливых финансовых вознаграждений всем партнерам.

Ишан Пандей: Вы упомянули, что потребители приучены ожидать, что мультимедийный контент будет транслироваться надежно, как в случае с Netflix. Как Mawari работает над тем, чтобы привнести этот уровень бесшовной трансляции в пространство XR?

Луис Оскар Рамирес:Это отличный вопрос, Ишан. На техническом фронте мы заложили основу — создали технологию и распределили ресурсы, необходимые для удовлетворения высоких ожиданий сегодняшних потребителей. Мы остаемся сосредоточенными на непрерывных инновациях по мере развития пространственных вычислительных устройств. Но давайте проясним: мы не создаем контент сами. Вот где вступает в дело наше сотрудничество с разработчиками и создателями контента.

Мы тесно сотрудничаем с визионерами, владельцами интеллектуальной собственности, предпринимателями и брендами. Это партнерство — сотрудничество, в котором мы объединяем наши передовые технологии и практический опыт с их творческим видением. Наша миссия ясна: дать разработчикам и создателям возможность создавать впечатляющие пространственные впечатления, которые очаровывают их аудиторию. Почему? Потому что мы считаем, что первое знакомство потребителя с пространственными технологиями должно быть не чем иным, как волшебством — оно должно создать тот самый момент «вау», который приведет к волновому эффекту восторга и принятия. Что касается масштабирования, мы видим траекторию, похожую на траекторию видеоигр.

Помните, как видеоигры сначала получили популярность в игровых залах с привязкой к местоположению, а затем переместились в дома и в конечном итоге превратились в массовую онлайн-культуру с киберспортом и стримерами? Мы считаем, что пространственные вычисления пойдут по тому же пути. Вот почему мы призываем наших партнеров изначально запускать свои опыты в игровых залах LBX (привязка к местоположению), где люди могут испытать эту технологию на собственном опыте.

Возьмите, к примеру, наше выступление XR в Mutek Japan. Это было не просто очередное шоу — это был завораживающий опыт. Известный хореограф Хироаки Умеда объединился с MXR, инструментом для создания 3D-графики в реальном времени на базе Unreal Engine 5. Интегрировав наш SDK для пространственной потоковой передачи, MXR воплотил в жизнь нечто действительно необычное — выступление, которое плавно синхронизировало проекционное отображение, звук и пространственный контент в реальном времени.

Анализ случая → Mawari x MXR представляет: Ассимилирование XR Хироаки Умеды

И результаты говорят сами за себя.

Пространственные впечатления готовы к премьере — больше никаких уловок.

Публика жаждет нового, увлекательного контента. Билеты на это шоу были распроданы менее чем за день, цена билета составляла 20 долларов за 7-минутное представление. 96% посетителей остались довольны, а 71% впервые посетивших его пользователей нашли значительную ценность и сказали, что порекомендуют его друзьям и семье. Вот как вы запускаете эффект маховика. Вы создаете незабываемые впечатления, вдохновляете больше творцов и создаете импульс для всей экосистемы пространственных вычислений.

Ишан Пандей: Mawari разработала как Spatial Streaming SDK для разработчиков, так и Mawari Network для доставки контента. Как эти два элемента работают вместе, чтобы создать более захватывающие и отзывчивые XR-опыты?

Луис Оскар Рамирес:Подумайте об этом как об инь и ян. Spatial Streaming SDK и Mawari Network — две неотъемлемые части мощной экосистемы. Без SDK создатели и разработчики контента не смогут транслировать высококачественный, захватывающий контент на пространственные устройства. А без Mawari Network они не смогут масштабировать этот опыт, чтобы охватить глобальную аудиторию.

Вот как это работает: SDK — это инструмент, который мы предоставляем разработчикам и создателям контента — шлюз для раскрытия их креативности и создания впечатляющих впечатлений. За эти годы мы усвоили одну ключевую вещь: создатели должны сосредоточиться на том, что у них получается лучше всего — быть креативными. Наша технология позаботится обо всем остальном, устранив любые препятствия на их пути и оптимизировав процесс.

Мы не просим разработчиков менять способ работы. Наш SDK напрямую интегрируется с их существующими рабочими процессами, независимо от того, используют ли они Unity или Unreal Engine. Это простой плагин — не нужно изучать новые инструменты или менять то, что уже работает. Что касается оркестровки в облаке, то все так же просто. Все, что нужно сделать создателям, — это загрузить свой проект Unity или Unreal Engine в Mawari Network. Оттуда мы управляем всем на бэкэнде, как это делают сегодня традиционные сети доставки 2D-контента.

Этот подход — это эффективность и расширение прав и возможностей. Он устраняет необходимость для разработчиков изучать новые инструменты или нанимать специализированный персонал для потоковой передачи в облаке, DevOps или управления бэкэндом. То, что раньше требовало недель или месяцев на освоение и дней на развертывание, теперь сводится к простой загрузке. Вот как мы даем разработчикам возможность раскрыть свой творческий потенциал и воплотить свои идеи в жизнь быстрее и эффективнее, чем когда-либо прежде.

Ишан Пандей: Индустрия XR стремительно развивается. Какие, по вашему мнению, наиболее существенные проблемы и возможности для пространственных вычислений и потоковой передачи XR в ближайшие 5-10 лет?

Луис Оскар Рамирес:Индустрия пространственных вычислений стремительно развивается, и с этим развитием в течение следующих 5–10 лет возникают как значительные проблемы, так и огромные возможности. Одной из самых больших проблем, с которыми мы сталкиваемся сегодня, является низкий уровень проникновения пространственных устройств. Хотя это может показаться препятствием, на самом деле это уникальная возможность. Прямо сейчас рынок широко открыт — чистый холст, ожидающий заполнения. Пока нет доминирующего игрока, нет «убойного приложения», которое определило бы это пространство. Это наш шанс освободиться от традиционных монополий и демократизировать создание и распространение контента. Настал момент для инноваций, когда мы можем исследовать новые идеи, разрабатывать новаторские приложения и устанавливать стандарты того, какими на самом деле могут быть пространственные вычисления.

Вот почему сотрудничество и подход, основанный на сообществе, так важны. Будущее пространственной индустрии не будет построено одной компанией или горсткой игроков — для этого потребуется сообщество. Так же, как движение за открытый исходный код изменило правила игры для программного обеспечения, подход, основанный на сообществе, будет иметь ключевое значение для процветания пространственных вычислений. Вот где появляется Mawari DePIN Network. В отличие от других рынков, где сети DePIN борются с устоявшимися гигантами, пространственные вычисления — это чистый холст. Это дает Mawari DePIN Network редкую возможность стать стандартом для децентрализованной пространственной потоковой передачи и доставки иммерсивного контента.

Но мы не можем игнорировать вопрос монетизации для разработчиков. По мере развития пространственных вычислений разработчикам нужны четкие пути превращения своих инноваций в доход. В Mawari мы не просто поддерживаем экосистему; мы активно направляем наших партнеров к эффективным стратегиям монетизации. Это немалый подвиг — это монументальные усилия, которые закладывают основу для надежной, устойчивой экосистемы, которая поддерживает как создателей, так и потребителей. Создавая новые бизнес-модели и потоки доходов, мы прокладываем путь к более широкой, более инклюзивной пространственной экосистеме.

Заглядывая вперед, хотя есть проблемы, возможности еще больше. Низкое проникновение устройств, отсутствие убойного приложения и необходимость в совместном подходе — это не просто препятствия. Это условия, которые позволяют появляться новым лидерам, укореняться новым идеям и устанавливать новые стандарты. Мавари здесь, чтобы воспользоваться этими возможностями, возглавить движение и сформировать будущее пространственных вычислений.

Ишан Пандей: Mawari уже сотрудничал с такими компаниями, как KDDI, для активации AR. Можете ли вы поделиться некоторыми идеями из этих реальных приложений вашей технологии и тем, как они сформировали ваш подход к масштабированию опыта XR?

Луис Оскар Рамирес:Самые ценные идеи, которые мы получили, были получены в результате коммерческого внедрения нашей технологии в более чем 40 различных проектах. Этот реальный опыт стал нашим лучшим учителем. Он показал нам, что действительно очаровывает потребителей — что заставляет их говорить: «Ух ты!» Он также научил нас, как уменьшить трение, которое часто возникает при принятии новых технологий, и помог нам понять, какие бизнес-модели на самом деле процветают в этой новой отрасли. Во-вторых, внедряя нашу собственную технологию, мы узнали, что нужно разработчикам для оптимизации их процессов и раскрытия их креативности. Речь идет о предоставлении им правильных инструментов для инноваций без головной боли.

Наш ранний доступ к сетям 5G и их API через партнерство с KDDI, T-Mobile, Deutsche Telekom и Telefónica стал переломным моментом. Он позволил нам увидеть, что работает в реальных условиях последней мили. Этот опыт подтолкнул нас к совершенствованию нашей технологии за пределами контролируемой среды лаборатории, обращаясь к сложным реалиям потребительского развертывания, где нет терпимости к ошибкам.

Не менее важным было наше сотрудничество с Qualcomm, Xreal и Magic Leap. Получение раннего доступа к пространственным устройствам позволило нам понять более тонкие детали, которые заставляют все работать вместе без сбоев. Именно это глубокое понимание, рожденное из практического опыта, позволяет нам создавать гармоничные, новаторские решения, которые переопределяют возможности пространственных вычислений.

Не забудьте поставить лайк и поделиться историей!