PixVerse AI: как бесплатно оживить фото и сделать анимацию в нейросети

Сгенерировали драку Ильи Муромца с Князем Киевским.

Источник: app.pixverse.ai

PixVerse AI генерирует короткие видео по 5–8 секунд со звуком и умеет делать спецэффекты — превращать людей в супергероев и добавлять в кадр зомби. Можно бесплатно оживлять фотографии, анимировать готовые ролики или создавать видео по текстовому запросу. Ниже — подробная инструкция и примеры генераций с промптами.

Содержание:

С чего начать

  • На стартовой странице нажмите на кнопку «Вход» в правом верхнем углу.
  • Авторизуйтесь через аккаунт в Google, Apple, Discord или по почте.
  • Работать можно и в приложении: есть версия для iOS и для Android.
Источник: app.pixverse.ai
Источник: app.pixverse.ai

Перед началом работы можно полистать генерации других пользователей: они публикуются на стартовой странице в разделе «Исследовать». Просто кликнете на понравившийся ролик, и на экране появится вся информация о нём. А именно: промпт, модель, которую использовали при генерации, эффекты. Например, вот как удалось сгенерировать схватку между Эдвардом и Джейкобом из «Сумерек».

Источник: app.pixverse.ai
Источник: app.pixverse.ai

Как сделать анимацию

В разделе «Создать» над строкой для ввода промпта нужно выбрать один из восьми режимов: «Режим изображения/текста», «Эффект», «Переход», «Звуковой эффект», «Голос», «Изменить стиль», «Расширить», «Персонаж».

Источник: app.pixverse.ai
Источник: app.pixverse.ai
  • «Режим изображения/текста» — сгенерирует видео по референсу-изображению или текстовому запросу. Достаточно загрузить нужную картинку и текстом прописать, что должно происходить на видео.
Референс, сгенерировано через Leonardo AI
Референс, сгенерировано через Leonardo AI

Промпт: «Elephant in the snowy forest slowly rambles through the snow, detail, realistic, Full HD» («Слон в заснеженном лесу медленно бредет по снегу, детализация, реалистично, Full HD»).

Видео вышло неплохим: слон плавно движется, деревья не расплываются в кадре. Но существенный минус — низкое качество. За дополнительные 50 кредитов (подробнее о тарифах) его можно улучшить — для этого нажмите на кнопку «Масштабировать». Она появится под видео после генерации.

Источник: app.pixverse.ai 
Источник: app.pixverse.ai 

Улучшенный вариант кажется более нарисованным.

Вот такой результат получился при генерации только по промпту, без визуального референса:

Промпт: «Open space, spaceship flying slowly like in a science fiction movie, Full HD» («Открытый космос, космический корабль медленно летит, как в научно-фантастическом фильме, Full HD»).

Нейросеть чётко следует промпту, но качество снова подводит.

  • «Эффект» — использует для анимации картинок заготовленные пресеты. Среди них:

«Kungfu club» — герои на картинке начнут драку. Например, вот такое сражение получилось между Князем Киевским и Ильёй Муромцем.

«Lego Blast» — превратит любой объект в горстку кубиков лего.

Всего эффектов 49. С их помощью можно посмотреть на себя в роли Халка или превратить дедушкин автомобиль в трансформера. Ролики получаются забавными, но не особо реалистичными.

  • «Переход» — создаёт видео по первому и последнему кадру. Что будет происходить между ними, можно описать в строке для ввода запроса. Если промпт не прописать, то «наполнение» нейросеть додумает сама.

Источник: @neyrosetie 
  • «Звуковой эффект» — сгенерирует аудиодорожку для ролика. Загружаем видео и прописываем промпт. Например, «хруст снега под ногами».
  • «Голос» — добавит на видео озвучку и синхронизацию губ. Достаточно загрузить исходный ролик и прописать в промпте реплику, которую должен произнести герой.

Вышло очень неплохо. Единственный минус — полное отсутствие выразительной интонации: всё-таки девушка улыбается, но говорит безэмоционально. Настраивать эмоции и паузы между словами нельзя. Но можно выбрать одного из спикеров:

Источник: app.pixverse.ai 
Источник: app.pixverse.ai 

С русским языком нейросеть тоже справилась. Не без акцента, конечно, но к синхронизации губ вопросов нет.

  • «Изменить стиль» — полностью перерисует видео под заданный стиль. Выбрать подходящий можно слева от строки для ввода промпта.

Источник: app.pixverse.ai
Источник: app.pixverse.ai

Вот как нейросеть изменила ролик с девушкой в ковбойской шляпе с пистолетом под стиль анимационной студии Ghibli.

  • «Расширить» — сгенерирует продолжение загруженного ролика по текстовому запросу.

  • «Персонаж» — этот режим выручит, если нужно создать несколько роликов с одним и тем же человеком. Можно загрузить референс или ограничиться текстовым описанием.

Источник: app.pixverse.ai
Источник: app.pixverse.ai

Дополнительные настройки

Под строкой для ввода промпта есть меню расширенных настроек. С их помощью проще контролировать результат генерации:

Источник: app.pixverse.ai
Источник: app.pixverse.ai

Кнопка с ползунками поможет выбрать подходящее соотношение сторон, задать негативный промпт и сид.

Негативный промпт — описание того, чего на генерации быть не должно. Например, если нужно создать видео с ковбоем, но обязательно без шляпы. В обычном промпте распишем ковбоя, а в негативном — шляпу. Сид — цифровой код, который определяет стиль изображения. Если использовать сид понравившегося видео, то сгенерированный результат будет похож на него цветовой гаммой, настроением, ракурсами.

Также в меню расширенных настроек можно задавать направление движения камеры и скорость движений.

Источник: app.pixverse.ai
Источник: app.pixverse.ai

Сколько это стоит

У PixVerse есть бесплатный тариф, который предлагает 90 кредитов при регистрации и ещё 60 кредитов ежедневно. Кредиты — внутренняя валюта, которой расплачиваются за каждую отдельную генерацию. Например, создать ролик по текстовому промпту и референсу стоит 30 кредитов, изменить стиль видео — 60. Бесплатные кредиты можно получать бесконечно, если регулярно регистрировать новый аккаунт.

Платные пакеты стоят от $8 в месяц. В них входит от 1200 кредитов, более быстрые генерации роликов без водяного знака, доступ к HD-разрешению. Также отдельно можно разово купить кредиты: 500 штук обойдётся в $5.

Источник: app.pixverse.ai
Источник: app.pixverse.ai

PixVerse хорош своей многофункциональностью: редко генераторы видео предлагают тут же создать озвучку и подогнать под неё синхронизацию губ. Например, нейросеть Pika тоже работает с анимацией, но добавляет на все ролики одни и те же звуки в зависимости от эффекта. Из минусов PixVerse — низкое качество роликов (640×352) в бесплатном тарифе, мало кредитов.

Что думаете про PixVerse? Готовы платить за подписку или знаете альтернативы лучше?

20
15
6 комментариев