Adobe Firefly Video: Новая глава для видео с генеративным AI
Adobe представила Firefly Video Model — инструмент, который поможет создавать видео с помощью текстовых запросов. Эта модель была анонсирована как часть генеративных AI решений Adobe, уже применяемых для фото и дизайна, и теперь она будет доступна и для видеомонтажа.
Что умеет Firefly Video?
Теперь можно сгенерировать видео буквально за несколько минут, просто описав его. Например, захотелось дрон-видео над песками пустыни или макросъёмку одуванчика — вводите запрос, и Firefly создаёт нужный ролик. И хотя пока модель лучше справляется с абстрактными сценами или пейзажами, она может стать отличным помощником для заполнения пробелов в проектах, добавления эффектов или создания анимаций.
Ключевые функции:
- Генерация B-roll по запросу: Например, если в съёмках не хватает нужных кадров для переходов.
- Эффекты: Генерация огня, дыма или воды на зелёном фоне для последующего наложения.
- Generative Extend: Возможность "растянуть" видео на таймлайне, заполняя пробелы между кадрами.
- Настройки камеры: Выбор угла, движения, фокуса и даже FPS.
На что пока стоит обратить внимание?
Пока что Firefly Video не идеально справляется с реалистичными персонажами и лицами — они всё ещё выглядят слегка "синтетически". Но Adobe не планирует конкурировать на этом поле — скорее, они фокусируются на создании инструментов для визуальных эффектов и анимации.
Когда ждать?
Firefly Video появится в бета-версии Premiere Pro уже к концу 2024 года, а пока Adobe делится первыми примерами работы модели. Несмотря на то, что это ещё только начало, инструмент может значительно упростить жизнь видеооператоров и монтажёров, особенно когда времени на съёмки не хватает.
______________________________________
Сегодня компания Adobe сообщила, что ее ИИ-модель для генерации видео Firefly теперь находится в открытой бета-версии. Модель обучена только на полностью лицензированном контенте, что делает ее гораздо более безопасным вариантом в условиях постоянно растущей конкуренции генераторов видео на базе ИИ.
Эта история началась полтора года назад, летом 2023 года, когда вышла пятая версия MidJourney, стал доступен Gen-2 от Runway, а в дискорде появились генеративные боты Pika и Suno. Таким образом, сформировался полноценный набор инструментов для создания AI-видео, в котором и картинка, и анимация, и музыка создавались бы нейросетями.
Adobe представила новый инструмент с искусственным интеллектом под названием TransPixar, который обещает изменить подход к созданию визуальных эффектов (VFX) в кино и видеоиграх. Разработанный совместно с Гонконгским университетом науки и технологий, TransPixar позволяет генерировать видео с прозрачными фонами, что значительно упрощает интеграцию т…
Кто бы мог подумать, что производители оружия, лапши и зубной пасты однажды станут лидерами в мире бритв, телевизоров и пылесосов? Многие известные сегодня компании начинали свою деятельность в совершенно иных сферах, прежде чем стать лидерами в своих нынешних отраслях. Загляните вместе с Хайсом — банком для ИП — в прошлое этих компаний и узнайте,…
Мы уже видели модели генерации видео, и не одну. А вот модель для редактирования оригнального видео — это что-то новенькое. Расскажу подробнее об инструменте.