Новый конкурент Runway OpenAI Sora показывает, что видео с искусственным интеллектом становится пугающе реалистичным
18 июня 2024 г.Всего через неделю с момента прибытия Машина мечты Luma AI, еще один большой OpenAI Sora только что появился – и новейший видеогенератор Runway с искусственным интеллектом может оказаться самым лучшим впечатляющий еще.
Компания Runway была одним из первых пионеров преобразования текста в видео, запустив его модель второго поколения, выпущенная в марте 2023 года. Но его новая модель Gen-3 Alpha, которая, очевидно, будет «доступна для всех в ближайшие дни», поднимает ситуацию на несколько ступеней благодаря новым фотореалистичным возможностям и обещаниям реальной физики.
Демонстрационные видеоролики (которые вы можете увидеть ниже) демонстрируют, насколько универсальна новая модель искусственного интеллекта Runway, с клипами, включающими реалистичные человеческие лица, снимки с дронов, симуляции ручных камер и атмосферные фантастические пейзажи. Runway утверждает, что все они были созданы с помощью Gen-3 Alpha «без каких-либо модификаций».
Судя по всему, Gen-3 Alpha также является «первой из будущей серии моделей», прошедших обучение «на новой инфраструктуре, созданной для крупномасштабного мультимодального обучения». Интересно, что Runway добавил, что новый инструмент искусственного интеллекта «представляет собой значительный шаг на пути к нашей цели по созданию общих моделей мира», которые могут создать возможности для игр и многого другого.
«Общая модель мира» - это тот, который эффективно моделирует окружающую среду, включая ее физику, - поэтому в одном из примеров видеороликов показаны отражения на лице женщины, когда она смотрит в окно поезда.
Эти инструменты предназначены не только для того, чтобы повысить уровень наших GIF-игр: Runway заявляет, что «сотрудничает и сотрудничает с ведущими развлекательными и медиа-организациями для создания индивидуальных версий Gen-3 Alpha», что означает адаптированные версии модель для определенных образов и стилей. Так что ожидайте увидеть эту технологическую рекламу, короткометражки и многое другое очень скоро.
Когда вы сможете это попробовать?
На прошлой неделе прибыла машина мечты Luma AI, чтобы предоставить нам бесплатный генератор видео AI, с которым мы можем побаловаться, но модель Gen-3 Alpha от Runway больше ориентирована на другой конец шкалы видео AI.
Он был разработан в сотрудничестве с профессиональными создателями видео с учетом этой аудитории, хотя Runway заявляет, что он «будет доступен для всех в ближайшие дни». Вы можете создать бесплатную учетную запись, чтобы опробовать инструменты искусственного интеллекта Runway. , однако вам придется платить ежемесячную подписку (начиная с 12 долларов США в месяц или около 10 фунтов стерлингов / 18 австралийских долларов в месяц), чтобы получить больше кредитов.
Вы можете создавать видеоролики с помощью текстовых подсказок — клип выше, например, был создан с использованием подсказки «грустный лысый мужчина средних лет становится счастливым, когда на его голову внезапно падает парик вьющихся волос и солнцезащитные очки». Альтернативно вы можете использовать неподвижные изображения или видео в качестве отправной точки.
Реализм на выставке одновременно впечатляет и немного пугает, но Runway заявляет, что модель будет выпущена с новым набором мер защиты от неправильного использования, включая «внутреннюю систему визуальной модерации» и происхождение C2PA (Коалиция по происхождению и аутентичности контента). стандарты. Пусть начнутся видеосражения ИИ.