Подробности о системе Adobe Firefly. ИИ делает раскадровки, аниматики, черновой монтаж

На текущий момент Adobe Firefly позволяет создавать изображения из текста, а также добавлять эффекты по текстовому описанию.

Известно, что часть функций все еще находятся в стадии активной разработки. Например, генерации музыки для клипов с помощью текстового описания или цветокоррекция в один клик.

В официальном пресс-релизе Adobe Firefly указано, что система позволяет загрузить свой сценарий и проанализировать текст. После чего ИИ сам создаст основу для раскадровки. Вот так компания Adobe демонстрирует результат этой работы:

При нажатии на кнопку «сделать превиз» система Adobe Firefly сформирует предварительную анимацию фильма прямо на таймлайне. Выглядеть она будет следующим образом:

Adobe Firefly позволит ускорить рабочий процесс в ряде областей, где требуется создание контента с малым количеством доступного время и технических возможностей.

Интересная функция — быстрой ИИ-цветокоррекции. Она позволит менять цветовые схемы, время суток и даже время года в уже готовых видеороликах. От пользователя требуется написать текстовую подсказку, которую реализует Adobe Firefly:

В Adobe Firefly доступны и другие более продвинутые инструменты. Например, расшифровка интервью, которая также поможет ускорить процессы создания контента, в т.ч, документальных фильмов.

Систему можно попросить определить ключевые слова в контенте — после чего она предложит даже клипы для би-роллов.

Adobe предусматривает возможность интеграции Firefly в свои стандартные приложения. Компания уточняет, что в будущем система сможет создавать шрифты, логотипы и анимированные заставки.

Система сможет работать и с аудио. Например, сгенерировать специальный трек. Опять же, по текстовому запросу. При этом разработчики сообщают, что вся сгенерированная музыка будет бесплатной — и ее можно будет без проблем добавить в свое видео.