ИСКУССТВЕННЫЕ ВИДЕО (ИЛИ НЕТ?)

Человек будущего от Lay's
Человек будущего от Lay's

Привет! На связи Таня, и сегодня мы поговорим с вами о генерации видео с помощью нейронок. Я креатор и автор подкаста «Таня говори!»: пишу много тут и тут , снимаю красиво!

Думаю, вы уже видели сотни статей на тему нейросетей и искусственного интеллекта, но сейчас мне хотелось поделиться с вами, как этот самый интеллект «приручить» и «заставить» работать на вас и быть верным помощником в создании контента (да-да того самого контента).

Начнем, пожалуй, с самого понятного: я протестировала несколько нейросетей и покажу вам результат. Спойлер: видео не всегда получаются такими, какими вы хотите их видеть. Final cut вас может удивить и порадовать одновременно. Например, как в рекламе Lay''s ИИ решил самостоятельно увеличить количество пальцев на руке.

Итак, какие же бывают нейросети для создания видео?

Есть разные типы нейросетей, некоторые могут обрабатывать видеореференсы, но в первую очередь рассмотрим модели, работающие на текстовых запросах.

1. Модели, создающие видео по тексту. Примеры таких моделей: сервисы Sora (OpenAI), Runway ML, Pika и другие. Эти системы умеют создавать видео на основе текстовых запросов. Например, если написать «анимационная сцена заката над морем», то получится готовый видеоролик, созданный искусственным интеллектом.

2. Улучшение уже готовых видео, Есть инструменты, повышающие качество ваших записей. Такие программы улучшают разрешение, устраняют шумы, стабилизируют картинку, корректируют цвет. Примеры: Topaz Video Enhance AI, Adobe Firefly, DaVinci Resolve.

3. Deepfake-технологии и замена лиц. Нейросети научились менять лица в кадрах на лица реальных людей, создавать героев, которые выглядят естественно. Эти технологии используют в кино, рекламе, играх, а иногда для обмана и шантажа людей.

4. Автоматический монтаж видео. С помощью онлайн-сервисов можно быстро собирать презентации, фильмы или рекламу по готовым сценариям. Пользователь выбирает шаблон, добавляет нужные материалы и получает готовое видео. Пример сервисов: Synthesia, Lumen5, Animoto.

Я протестировала разные нейронки и больше всех мне понравилась эта https://hailuoai.video

К сожалению, сейчас эта нейронка больше не дает возможности работать в ней бесплатно. Результат был близок к тому, что я хотела бы видеть. Что внутри:

Основные возможности Hailuo AI:

· Генерация видео по текстовому промту.

· Оживление статичных изображений.

· Создание сцен по заданному сценарию с участием персонажа.

· Синтез речи.

· Клонирование голоса.

· Удаление фоновых шумов из аудиозаписи.

· От большинства аналогов отличается простотой использования и наличием уникальной опции Subject Reference, позволяющей создавать ролики с конкретным персонажем.

Видео, которое я сгенерировала в Hailuo AI, смонтировала в Capcut

Эти нейронки также заслуживают вашего внимания:

PixVerse AI — лучшая альтернатива Hailuo AI для готовых шаблонов видео

Pollo AI — лучшая альтернатива Hailuo AI в целом

Runway — лучшая альтернатива Hailuo AI для широкого спектра видеофункций

Luma AI — лучшая альтернатива Hailuo AI для быстрой генерации видео

Kling AI — лучшая альтернатива Hailuo AI для использования в социальных сетях

Pika — лучшая альтернатива Hailuo AI для интуитивного дизайна интерфейса

Vidu AI — лучшая альтернатива Hailuo AI для широких возможностей настройки

Sora — лучшая альтернатива Hailuo AI для создания длинных видео с помощью AI

Haiper AI — лучшая альтернатива Hailuo AI для функции пакетной генерации

Krea — лучшая альтернатива Hailuo AI для свободного творческого самовыражения

Давайте же посмотрим несколько примеров

Удачное исполнение от Kling
Полустатичное видео от Pixverse
Гель для губ по версии Pixverse. Смеемся и проверяем промт
Вполне рабочий кадр от Runway

А теперь к базе: инструкции к генерации видео. По сути, ты тут и за сценариста, и за монтажера (за всех)

Погнали по шагам:

· Прописываешь подробно промт: пишешь сценарий, в котором один кадр=один промт.

· Генеришь с помощью нейронки. А потом монтируешь в Captcut.

· Обязательно прописывайте движения камеры. Инструкции тут

Движения камеры
Движения камеры

· Прописывайте подробно, как мы видим объекты

· Не забудьте про цвет, детали – чем подробнее вы опишите, тем лучше и точнее будет сгенерировано видео.

· Иногда нейросети шалят- у человека могут появиться дополнительные пальцы, а у рыбы- плавник вместо головы, соответственно, смотрим на результат и переделываем его, если нужно.

· Не забудьте, какое будет видео: горизонтальное или вертикальное

Немного подушню о том, как писать промты

Промт — это набор инструкций, на который нейросеть ориентируется, чтобы создать видео, которое вам нужно. Чем детальнее промт, тем выше вероятность получить задуманное. Важно, что любая нейросеть настроена на то, чтобы дать ответ. То есть, если написать в промте всего одно слово, она все равно что-то сделает и не будет переспрашивать и задавать дополнительные вопросы, если ее не попросить.

Промт тоже можно написать с помощью нейросетей, например, популярного ChatGPT, либо самостоятельно. Лучше перевести текст на английский, чтобы нейросеть не переводила самостоятельно с русского и поняла контекст.

Что важно учесть при написании промта:

1. Главный объект. Кто или что будет в центре внимания?

2. Действие или движение (если нужно). Что делает главный персонаж или что происходит в сцене?

3. Фон и окружение. Где происходит событие? В каком контексте?

4. Свет и атмосфера (освещение, настроение). Какие эмоции или визуальный стиль нужно передать?

5. Камера и стиль съемки (по желанию). Как должна двигаться камера? Какой тип кадра использовать?

6. Желаемый стиль (реализм, мультфильм, арт и т. д.).

Мои выводы

Вы получаете видео без исходника. БЕЗ ИСХОДНИКА, Карл! Это в любом случае классно. Это возможность создать видео для бренда или рекламы без большого продакшена и людей. Экономия ресурсов тут понятна.

Однако, есть много моментов, которые перетекают в минусы:

Качество: иногда ролики получаются размытыми или с ошибками, например, когда ИИ добавляет сгенерированным изображениям людей больше пяти пальцев на руке. Ограниченность сюжетов: хорошо получается простая анимация, но сложно сделать фильм. Этические вопросы: подделка лиц вызывает сомнения в достоверности и безопасности.

Авторское право: непонятно, кому принадлежат права на ролики, сделанные ИИ.

И последний пункт в этом списке – это стоимость. Если хотите использовать зарубежные нейронки , будет недешево.

Подводим итоги: поделитесь используете ли ИИ для видео или текста, а может быть для фото? Какое применение видите нейронкам в ближайшем будущем?

Используете ли нейронки для генерации текста, фото или видео?
Да!
Нет и не планирую
А что это?

Обязательно подписывайтесь на мои социальные сети и до встречи в новых выпусках моего подкаста "Таня,говори! "

Начать дискуссию