Luma AI: как бесплатно оживить фото или сделать видео из любимого мема. Luma представила Dream Machine - генератор видео с ИИ, которым можно реально пользоваться

Luma AI: как бесплатно оживить фото или сделать видео из любимого мема. Luma представила Dream Machine - генератор видео с ИИ, которым можно реально пользоваться

Не прошло и недели после того, как китайский стартап Kuaishou анонсировал свой впечатляющий ИИ-видеогенератор Kling, призванный составить конкуренцию долгожданному видеогенератору Sora от OpenAI, как появился новый конкурент.

Еще больше полезностей - в моем телеграм-канале про нейросети и канале про генерацию изображений Миджорниум.

Luma Labs запустила новую модель ИИ-генератора видео под названием Dream Machine.

В отличие от других ИИ-инструментов, вы можете попробовать Dream Machine уже сегодня, без всякого списка ожидания.

ChatGPT на русском - телеграм-бот с Chat GPT-4 Omni, который включает русскоязычный Midjourney, Dall-e и Stable Diffusion, а также бесплатный upscale. В нём предусмотрены различные роли, такие как генерация промптов и логотипов, что может значительно упростить задачи по созданию контента.

Что такое «Dream Machine»?

Dream Machine от Luma Labs - это ИИ-видеогенератор нового поколения, способный создавать высококачественные, реалистичные видео на основе текстовых промптов и изображений.

Ключевые особенности:

  • Быстрая генерация. Dream Machine - невероятно быстрый генератор видео! 120 кадров за 120 с.
  • Реалистичные и последовательные движения. Усовершенствованное моделирование обеспечивает высокую реалистичность и плавность движений.
  • Высокая согласованность персонажей. Сохраняет целостность персонажей, моделируя реальные физические характеристики, обеспечивая целостность и реалистичность ваших видео.
  • Естественные движения камеры. Плавные, естественные движения камеры идеально соответствуют эмоциональному тону каждой сцены.

Эти возможности действительно впечатляют, но нам нужно протестировать их и убедиться в этом самим.

Пример генерации видео по текстовому промпту

Перейдите на страницу Dream Machine от Luma Lab и нажмите на кнопку «Try Now» в правом верхнем углу.

Luma AI: как бесплатно оживить фото или сделать видео из любимого мема. Luma представила Dream Machine - генератор видео с ИИ, которым можно реально пользоваться

Создайте свой аккаунт, и вы увидите текстовое поле, в котором опишите видео, которое вы хотите создать.

Luma AI: как бесплатно оживить фото или сделать видео из любимого мема. Luma представила Dream Machine - генератор видео с ИИ, которым можно реально пользоваться
Примечание: В связи с чрезвычайно высоким спросом, создание видео займет несколько минут.

Вот мое первое видео, созданное с помощью Dream Machine:

Промпт: A teddy bear in sunglasses playing electric guitar, dancing and headbanging in the jungle in front of a large beautiful waterfall

Полное видео можно посмотреть по этой ссылке.

В отличие от других конкурентов, таких как Stable Video, Runway и Pika, которые просто панорамируют и масштабируют 2D-изображения, Dream Machine действительно делает переходы между сценами и реалистично перемещает объекты.

Вот еще один пример:

Промпт: Low-angle shot of a majestic tiger prowling through a snowy landscape, leaving paw prints on the white blanket

Результат соответствует промпту, а качество видео выглядит хорошо. Однако тигр не оставил следов лап на снегу, что немного странно.

Пример преобразования изображения в видео

Теперь давайте попробуем статичное изображение, созданное с помощью MidJourney V6.

Промпт: Couple on gravel giant road bikes. Open road. Midday in 2025 Greece Desert landscape, dry river in the background, distant mountains, a diner sign. Wide shot, full body, side angle. In the style of wes anderson, Bright sunlight, dust trail, saturated colors.
Luma AI: как бесплатно оживить фото или сделать видео из любимого мема. Luma представила Dream Machine - генератор видео с ИИ, которым можно реально пользоваться

Вы можете перетащить изображение и добавить такой же промпт на Dream Machine.

Luma AI: как бесплатно оживить фото или сделать видео из любимого мема. Luma представила Dream Machine - генератор видео с ИИ, которым можно реально пользоваться

Вот конечный результат:

Вот изображение, созданной пользователем X Татьяной Цигулевой.

Эталонное изображение сгенерировано с помощью MidJourney:

Luma AI: как бесплатно оживить фото или сделать видео из любимого мема. Luma представила Dream Machine - генератор видео с ИИ, которым можно реально пользоваться

Видео, сгенерированное Dream Machine:

Посмотрите полный ролик здесь.

Это выглядит невероятно. Ребята из VFX, наверное, вспотели, когда увидели, что подобные сцены генерируются искусственным интеллектом менее чем за 2 минуты.

Безопасность и этические аспекты

Как и в случае с любым ИИ-инструментом, при использовании Dream Machine важно учитывать безопасность и этические аспекты. Видео, созданные ИИ, могут быть невероятно реалистичными, что открывает возможности для злоупотреблений.

Luma Labs, похоже, знает об этих опасениях.

Я попробовал воспользоваться приведенным ниже промптом, чтобы проверить, как их модель ИИ справляется с подобным содержанием.

Промпт: A gory 1980s war scene where soldiers are firing at each
Luma AI: как бесплатно оживить фото или сделать видео из любимого мема. Luma представила Dream Machine - генератор видео с ИИ, которым можно реально пользоваться

Dream Machine отклонила промпт и выдала ошибку «Не удалось создать генерацию для запрашиваемого промпта». Благодарим Luma за внедрение этих мер защиты.

Однако всегда найдутся пользователи, которые попытаются обмануть модель и найти способы генерировать небезопасный контент. В ближайшие дни мы увидим, насколько эффективны эти меры и нужны ли дополнительные меры предосторожности.

Лучше ли она, чем Sora или Kling?

Лучший способ судить - сравнить результаты между собой. Вот видео, на котором человек ест гамбургер, созданное Dream Machine, Kling и Sora.

Kling
Sora

Если посмотреть на эти видео, то Sora и Kling все равно превосходят Dream Machine. Но, учитывая, что последние видео - это тщательно отобранные примеры, кто знает, сколько попыток потребовалось, чтобы добиться такого качества?

Сколько стоит Dream Machine?

Прежде чем вы придете в восторг от бесплатного доступа к Dream Machine, важно отметить, что сервис работает по модели freemium. Это означает, что вы получаете только 30 бесплатных генераций в месяц, а если хотите создать больше AI-видео, вам придется заплатить за дополнительные кредиты.

Luma AI: как бесплатно оживить фото или сделать видео из любимого мема. Luma представила Dream Machine - генератор видео с ИИ, которым можно реально пользоваться

Вот информация о ценах:

  • Standard ($29,99): 120 генераций в месяц
  • Pro ($99,99): 400 генераций в месяц
  • Premier ($499,99): 2 000 генераций в месяц

В целом Luma проявляет невероятную щедрость, предоставляя общественности доступ к своему ИИ-генератору видео. Хотя 30 бесплатных генераций в месяц может показаться мало, этого достаточно, чтобы протестировать и оценить качество видео и согласованность результатов.

Теперь давайте поговорим о качестве. Находится ли оно на одном уровне с Sora от OpenAI? Близко, но не совсем. Dream Machine по-прежнему испытывает трудности с временной когерентностью. Однако она определенно лучше, чем Runway или Pika.

Luma знает об ограничениях Dream Machine. Они даже упомянули о них на своем сайте.

Luma AI: как бесплатно оживить фото или сделать видео из любимого мема. Luma представила Dream Machine - генератор видео с ИИ, которым можно реально пользоваться

Первые отзывы пользователей и созданные ими видеоролики должны предоставить ценные данные для дальнейшего обучения и настройки модели для достижения лучших результатов в следующей версии.

🔥 Телеграм-бот SYNTX предоставляет доступ к более чем 40 ИИ-инструментам. Без ВПН, оплата любой картой, запросы на любом языке, пробуй бесплатно!

🎙 Общайтесь в одном диалоговом окне с GPT4o/Gemini/Claude, выход в интернет, работа с файлами, неограниченное количество символов!

👨‍🎨 Создавайте изображения в MidJourney, DALL-E 3 и Ideogram

🆕 Любой образ, в любой локации с вашим фото сделает ФотоМастер

🎞 Генерируйте видео текстом или по картинке

🎵 Сочиняй мировые хиты с помощью Suno

🖼 Редактор с 12 различными ИИ-инструментами для ретуши фото

☝Это только часть функций, доступных в SYNTX!

Еще больше полезностей - в моем телеграм-канале про нейросети и канале про генерацию изображений Миджорниум.

Источник статьи на английском - здесь.

2424
11
22 комментария
3
1
Ответить

Прикольно!

Ответить

Вполне заслуживает уважения! С первого раза сделал достойный кадр. Только не нашел где можно выставить fps.

3
Ответить

Ну да, Павел, довольно неплохо.

Ответить

Можно смело фильм снимать ;) останется только диалогов напились с озвучкой Клинта Иствуда ;)

2
Ответить

Уже можно и фильмец забацать ).

Ответить

Доработать промт и будет помягче.

2
Ответить