Adobe представила ИИ-модель для генерации видео по тексту и изображениям

Компания Adobe выпустила новую генеративную нейросеть — Firefly Video Model, которая стала частью Premiere Pro и была анонсирована в сентябре 2024 года. 

Основные возможности Firefly Video Model

Firefly Video Model открывает перед пользователями широкий спектр возможностей, включая создание 2D- и 3D-анимации и имитацию «реальной» съемки. Пользователи могут настраивать такие параметры, как угол обзора, движение камеры, а также соотношение сторон кадра, что делает инструмент гибким для создания различных типов контента.

Максимальная продолжительность генерируемого видео составляет четыре секунды, а на его создание требуется всего от полутора минут. В ближайших обновлениях Adobe планирует внедрить «турбо-режим», который значительно ускорит процесс генерации.

Generative Extend — расширение возможностей видео

Одна из ключевых функций модели — Generative Extend — позволяет расширять существующие видеоматериалы, добавляя до двух секунд к продолжительности. Это особенно полезно при необходимости редактирования видео для устранения мелких дефектов или улучшения переходов между сценами, что избавляет от необходимости повторных съемок.

Ограниченные возможности редактирования звука

Хотя Firefly Video Model предлагает возможности для редактирования звука, они пока ограничены. Например, инструмент может лишь увеличивать продолжительность существующих звуковых эффектов до 10 секунд, но не способен сгенерировать новые звуки или продлить такие элементы, как музыка или диалоги. Однако это может оказаться полезным при создании коротких анимационных видеороликов или клипов.

Публичная бета-версия и будущее обновлений

На текущий момент Firefly Video Model доступна в публичной бета-версии в Adobe Premiere Pro. Adobe планирует дальнейшее развитие этой технологии, что может привести к ещё большему числу функций и улучшений для профессиональных пользователей.

Заключение

С запуском Firefly Video Model Adobe делает большой шаг вперед в использовании искусственного интеллекта для генерации видео. Это открывает новые возможности для творческих проектов, позволяя пользователям создавать профессиональные ролики с минимальными усилиями. Мы продолжим следить за развитием этой технологии и обновлять информацию о её новых функциях.