Посмотрите это: Adobe показывает, как Sora от OpenAI навсегда изменит Premiere Pro и редактирование видео
16 апреля 2024 г.Сора OpenAI дала нам представление ранее в этом году о том, как генеративный искусственный интеллект изменит редактирование видео, и теперь Adobe продемонстрировала, как это будет происходить, представив несколько интересных новых инструментов Premiere Pro.
Новые функции искусственного интеллекта на базе Adobe Firefly эффективно примените трюки, которые мы видели в Magic Editor от Google, ориентированный на фотографии – удаляет ненужные объекты, добавляет объекты и расширяет сцены – на видео. И хотя это не первое программное обеспечение, которое делает это, очень важно увидеть эти инструменты в стандартном отраслевом приложении, которое используют профессионалы.
Чтобы получить представление о том, что будет «в этом году» в Premiere Pro и других приложениях для редактирования видео, посмотрите видео ниже. На новой Генеративной панели появился новый пункт «Добавить объект». опция, позволяющая ввести объект, который вы хотите добавить на сцену. Похоже, это предназначено для статичных объектов, а не для таких вещей, как скачущая лошадь, но выглядит удобно для роликов и фона.
Возможно, еще более полезным является «удаление объекта», которое использует интеллектуальную маскировку Firefly на основе искусственного интеллекта, чтобы помочь вам быстро выбрать объект для удаления, а затем заставить его исчезнуть одним щелчком мыши. В качестве альтернативы вы можете просто объединить эти два инструмента, например, заменить часы, которые кто-то носит, на альтернативу другой марки.
Одна из самых мощных новых функций редактирования фотографий на основе искусственного интеллекта — это расширение фона, называемое Генераторная заливка в Photoshop – и Premiere Pro скоро будет иметь аналогичную функцию для видео. Вместо того, чтобы увеличивать размер кадра, Generative Extend позволит вам добавлять кадры к видео, чтобы помочь вам, например, немного дольше задержаться на лице вашего персонажа.
Хотя Adobe не назвала точную дату выпуска этих инструментов, а только сообщила, что они появятся «позже в этом году», похоже, что они будут изменить рабочие процессы Premiere Pro несколькими основными способами. Но большие изменения в видео с использованием искусственного интеллекта, возможно, еще впереди…
Будет ли Adobe действительно подключаться к Sora OpenAI?
Самым большим анонсом Premiere Pro, а также самым туманным, был предварительный просмотр Adobe сторонних моделей для приложения для редактирования. Короче говоря, Adobe планирует предоставить вам возможность подключать к Premiere Pro инструменты генеративного искусственного интеллекта, включая Sora, Runway и Pika Labs от OpenAI, чтобы добавлять к вашим видео их эффекты.
В теории это звучит здорово. Adobe продемонстрировала пример Sora OpenAI, генерирующей b-roll с подсказкой преобразования текста в видео, и Pika, использующего Generative Extend. Но эти «ранние примеры» «исследовательских работ» Adobe и ее «друзей» из числа таких, как OpenAI, все еще омрачены неопределенностью.
Во-первых, Adobe не взяла на себя обязательство запускать сторонние плагины так же, как свои собственные инструменты на базе Firefly. Это показывает, что на самом деле эта часть предварительного просмотра Premiere Pro только пробует почву. Кроме того, интеграция немного противоречит текущей позиции Adobe в отношении инструментов генеративного искусственного интеллекта.
Adobe стремилась выделиться среди подобных Midjourney и Stable Diffusion, подчеркивая, что Adobe Firefly обучается только на библиотеке изображений Adobe Stock, которая, очевидно, не содержит коммерческих изображений, фирменных изображений и изображений товарных знаков. «Мы используем сотни миллионов ресурсов, все они обучены и модерируются, чтобы не иметь IP», — вице-президент Adobe по генеративному искусственному интеллекту Александру Костин, рассказал нам ранее в этом году .
И все же новый отчете Bloomberg утверждается, что Firefly частично обучался на изображениях, сгенерированных Midjourney (при этом Adobe предполагает, что это может составлять 5% от Firefly' данные обучения). И эти предварительные обзоры новых альянсов с генеративными видео-моделями искусственного интеллекта, которые так же непрозрачны, когда дело касается обучающих данных, снова не соответствуют позиции Adobe.
Потенциальным выходом Adobe здесь является Content Credentials, своего рода метка питания, которая также появится в Premiere Pro и будет добавлять водяные знаки, чтобы уточнить, когда ИИ использовался в видео и с какой моделью. Достаточно ли этого для Adobe, чтобы сбалансировать создание коммерчески удобного профессионального видеоредактора и не отставать от гонки ИИ, еще неизвестно.
Вам также может понравиться
- Что такое Sora OpenAI? Объяснение инструмента преобразования текста в видео и описание того, когда вы сможете его использовать
- 5 способов, которыми новые AI-инструменты Firefly в Premiere Pro могут изменить ваш рабочий процесс редактирования
- Adobe объявляет о новых сервисах на базе Firefly которые позволяют вам обучать собственные модели ИИ
Оригинал