Adobe представила новый инструмент генеративного ИИ для преобразования текста в видео

Компания Adobe представила некоторые из своих генерирующих видео-инструментов с ИИ, в том числе новую функцию, позволяющую создавать видеоклипы из изображений. Последняя предварительная версия основана на разрабатываемой видео-модели Firefly, которую Adobe продемонстрировал в апреле и которая должна стать основой для функций редактирования видео и аудио с помощью искусственного интеллекта в приложениях Adobe Creative Cloud.

В новом рекламном тизере показаны кадры, созданные с помощью функции «текст в видео» Firefly, которую Adobe анонсировала (но не продемонстрировала) в начале этого года. Инструмент позволяет пользователям генерировать видеоклипы с использованием текстовых описаний и корректировать результаты с помощью различных «элементов управления камерой», которые имитируют углы наклона камеры, движение и расстояние съемки. Также была продемонстрирована функция преобразования изображения в видео для видео-модели Firefly, которая позволяет генерировать клипы по определенным исходным изображениям.

Качество сгенерированного видео выглядит на одном уровне с тем, что мы уже видели в модели Sora от OpenAI, которую Adobe также «изучает» в качестве сторонней интеграции для Premiere Pro. Однако продолжительность видео ограничена. Вице-президент Adobe по генеративному ИИ Александр Костин сообщил, что видео, созданные с помощью функций «текст в видео» и «изображение в видео», имеют максимальную длину пять секунд.

Одним из преимуществ собственной модели Adobe перед Sora является обещание, что Firefly «коммерчески безопасен», поскольку ИИ модель обучается на контенте с открытой лицензией и Adobe Stock, что может уменьшить некоторые опасения по поводу нарушения авторских прав.

Функции преобразования текста в видео и изображения в