Новое видео OpenAI Sora — это полет дрона с видом от первого лица во время самого странного выступления TED, которое вы когда-либо видели — и мне нужно прилечь
23 апреля 2024 г.Новый инструмент OpenAI для преобразования текста в видео Sora не будет общедоступен до конца этого года, но тем временем он дает несколько заманчивых сведений о том, на что он способен, включая новое умопомрачительное видео (ниже). ), показывающее, как могут выглядеть выступления TED через 40 лет.
Для создания видео в стиле FPV-дрона TED Talks работала с OpenAI и режиссером Полом Трилло, который использует Sora с февраля. Результатом является впечатляющий, хотя и немного сбивающий с толку, полет футуристических конференций, странных лабораторий и подводных туннелей.
Видео снова демонстрирует невероятный потенциал OpenAI Sora и его ограничения. Эффект FPV-дрона стал популярным для ярких видеороликов в социальных сетях, но он традиционно требует продвинутых навыков пилотирования дрона и дорогого комплекта, который выходит далеко за рамки нового DJI Avata 2.
Новое видео Соры показывает, что такого рода эффекты могут быть открыты для новых создателей, потенциально с гораздо меньшими затратами – хотя это связано с оговоркой, что мы пока не знаем, сколько будет стоить сам новый инструмент OpenAI и кому это будет доступно.
Что как будет выглядеть TED через 40 лет? Для #TED2024 мы работали с художником @PaulTrillo и @OpenAI над созданием этого эксклюзивного видео с использованием Sora, их неизданной модели преобразования текста в видео. Оставайтесь с нами, чтобы узнать больше о новаторских ИИ — скоро они появятся на https://t.co/YLcO5Ju923! pic.twitter.com/lTHhcUm4Fi19 апреля 2024 г.
Но видео (выше) также показывает, что Sora все еще далека от того, чтобы стать надежным инструментом для создания полноценных фильмов. Люди на кадрах появляются на экране всего пару секунд, а на заднем плане много кошмарного топлива жуткой долины.
В результате вы получаете волнующий опыт, но в то же время оставляете у вас ощущение странной неустойчивости - как будто снова приземляетесь после прыжка с парашютом. Тем не менее, мне определенно хотелось бы увидеть больше образцов по мере того, как мы приближаемся к публичному запуску Соры позднее в 2024 году.
Как было сделано видео?
OpenAI и TED Talks не вдавались в подробности того, как было сделано это конкретное видео, но его создатель Пол Трилло недавно более подробно рассказал о своем опыте работы в качестве одного из альфа-тестеров Соры.
Трилло рассказал Business Insider о видах подсказок, которые он использует, в том числе о "коктейле слов, который я использую, чтобы сделать это не похожим на видеоигру, а на что-то более кинематографическое". Очевидно, они включают в себя такие подсказки, как «35 миллиметров», «анаморфотный объектив» и «виньетка объектива с глубиной резкости», которые необходимы, иначе Сора «по умолчанию будет использовать этот очень цифровой результат».
Прямо сейчас каждое приглашение должно проходить через OpenAI, чтобы оно могло пройти строгую защиту по таким вопросам, как авторское право. Одно из самых интересных наблюдений Трилло заключается в том, что Сора в настоящее время «похож на игровой автомат, в котором вы что-то просите, и он смешивает идеи вместе, и у него нет настоящего физического движка».
Это означает, что ему еще далеко до полной совместимости с людьми и состояниями объектов, что OpenAI признал в более раннем запись в блоге. OpenAI заявила, что Sora «в настоящее время демонстрирует многочисленные ограничения как симулятор», включая тот факт, что «он неточно моделирует физику многих основных взаимодействий, таких как разбитие стекла».
Эти несоответствия, вероятно, на какое-то время ограничат работу Sora в качестве инструмента для создания коротких видеороликов, но мне все равно не терпится опробовать его.
Вам также может понравиться
- OpenAI только что предоставил художникам доступ к Sora и доказал, что инструмент AI для видео более странный и мощный, чем мы думали < li>Новый синтезатор голоса OpenAI может скопировать ваш голос всего из 15 секунд аудио
- Илон Маск может быть прав насчет OpenAI, но это не значит, что он должен победить
Оригинал