Разберем нейросеть Dream Machine от Luma AI

Привет! Сегодня разберем, как нейросеть Dream Machine от Luma AI может помочь в создании видео из фотографий и текста. Прежде чем погрузиться в детали, хочу показать на примере, как это работает.

Обзор на Dream Machine от Luma AI

Как пользоваться Luma AI

1. Переход на сайт: Перейдите на сайт Luma AI, нажмите “Try Now” и войдите через Google-аккаунт.

2. Выбор способа генерации: Выберите способ генерации: только по тексту или по тексту и картинке. Напишите текстовый запрос на английском языке. Для перевода можно использовать DeepL.

3. Enhance Prompt: Используйте функцию Enhance Prompt для автоматического улучшения запроса. Если не получилось, опишите сцену подробно сами.

4. Настройка движения камеры: Задайте движение камеры и детали сцены для лучшего результата.

5. Генерация видео: Нажмите на кнопку генерации. Сервис пишет, что обычно это занимает 120 секунд, но в действительности 40-50 минут. Готовое видео можно сохранить на вкладке “Your Creations”.

Ограничения и советы

❗ Помните, что Luma AI имеет ограничения: текст может быть с ошибками, движения некорректными, объекты деформироваться. На практике лучше генерировать видео на основе изображений – так нейросеть выдает результат лучше.

Примеры моих промптов и результаты

1. Фото меня

• Промпт: “speaker is speaking”

• Результат: Видео с человеком, который говорит.

2. Фото прыжка

• Промпт: “A person jumping into the air, seamlessly transforming into a majestic dragon with wings outstretched, during a beautiful sunset. The transformation starts from the person’s legs, morphing into dragon scales, and continues upward, with the wings unfolding and the head transforming last. The movement should be fluid and realistic, capturing the magic of the transformation. The scene should be set during a beautiful sunset, with a dramatic zoom in as the person transforms. The person is wearing casual clothes and transforms into a dragon with shimmering scales and large, outstretched wings, against the backdrop of a beautiful cloudy sunset near a scenic landscape.”

• Результат: Магическое превращение человека в дракона на фоне заката.

3. Фото лыжника

• Промпт: “A skilled skier descends a steep mountain slope with graceful movements. The snow flies up in a spectacular spray as the skier carves through the pristine snow. The scene captures the thrill and speed of the descent, with the surrounding pine trees and snow-covered peaks adding to the breathtaking backdrop. The skier wears a vibrant red suit that stands out against the white snow, and the sunlight glints off the ski poles and goggles, creating a dynamic and exhilarating visual.”

• Результат: Захватывающая сцена спуска лыжника с горы.

❓ Как думаете, через сколько лет мы сможем полностью доверять нейросетям создание видеоконтента?

Пишите свои мысли в комментариях!

Надеюсь, этот обзор был полезен. Завтра будет обзор на следующий сервис, не пропустите!