Гайд по созданию плавной анимации

Привет всем угарающим по нейросетям! Сегодня мы с вами пошагово сделаем крутую плавную анимацию с помощью midjourney и runway. Я покажу 2 способа работы с midjourney для создания похожих генерации, а затем мы используем runway для плавной анимации (интерполяции) кадров. Также вы познакомитесь с функцией remix и узнаете, что такое seed. Как обычно, никакой воды - только действия! Повторяй за мной →

Для создания похожих и последовательных изображений в midjourney можно использовать 2 способа:

1. применение одинакового seed + изменение 1 слова в подсказке

2. использование функции remix + изменение 1 слова в подсказке

Способ 1.

Начнем с того, что каждая генерация имеет уникальный seed. Эти номера генерируются случайным образом для каждого изображения, но их можно указать с помощью параметра --seed или --sameseed. Использование одного и того же номера seed и запроса приведет к получению одинаковых конечных изображений. С помощью этой функции мы добьемся нужных нам последовательных похожих результатов.

Начальный промпт:

portrait of a woman dressed in bokeh, bokeh, in the style of vray tracing, silver and bronze, delicate and intricate details, photo-realistic, barroco, cybergoth, --ar 2:3 --seed 534725908

Далее мы копируем промпт и вставляем дополнительное слово в конце подсказки. Это может быть настроение, цвет, атмосфера, стилистика и тд. Опытным путем я выяснила, что лучшие результаты для анимации достигаются при коротких подсказках и изменению слова именно в конце подсказки.

Второй промпт:

portrait of a woman dressed in bokeh, bokeh, in the style of vray tracing, silver and bronze, delicate and intricate details, photo-realistic, barroco, cybergoth, cute --ar 2:3 --seed 534725908

Третий:

portrait of a woman dressed in bokeh, bokeh, in the style of vray tracing, silver and bronze, delicate and intricate details, photo-realistic, barroco, cybergoth, furious --ar 2:3 --seed 534725908

Четвертый:

portrait of a woman dressed in bokeh, bokeh, in the style of vray tracing, silver and bronze, delicate and intricate details, photo-realistic, barroco, cybergoth, sad --ar 2:3 --seed 534725908

Пятый:

portrait of a woman dressed in bokeh, bokeh, in the style of vray tracing, silver and bronze, delicate and intricate details, photo-realistic, barroco, cybergoth, serious --ar 2:3 --seed 534725908

Изображение готовы, далее мы приступим к созданию анимации. Для этого нам понадобится ии-сервис runway.

Переходим в раздел"Generate videos" и находим "Frame Interpolation"

Интерполяция кадров (Frame Interpolation) создаст плавные переходы между нашими загруженными изображениями.

Далее загружаем изображения и расставляем их подходящем порядке для анимации. Выставляем время и жмякаем Сгенерировать (Generate). Вы можете поиграться и попробовать разные порядок изображений, чтобы добиться нужного результата. Это абсолютно бесплатно, я не заметила, что тратятся какие-то кредиты на эту функцию, что непременно плюс для нас. Для того, чтобы создать зацикленную анимацию, не забудьте добавить первое изображение в конец анимации.

Ждем пока Runway превратит наши изображения в видео и вуаля - наш клип готов. Для скачивания видео, необходимо нажать Export и найти его во вкладке assets на главной странице сервиса.

Способ 2.

Режим Remix позволяет изменять подсказки, параметры, версии моделей или соотношения сторон между вариантами. Ремикс берет общую композицию исходного изображения и использует ее как часть нового задания. Ремикс может помочь изменить обстановку или освещение изображения, изменить сюжет или добиться сложной композиции.

Для того, чтобы включить remix необходимо вызвать меню настроек командой /settings. В появившемся окне выбираем нужный режим. Для отключения нужно заново нажать на его иконку.

Начальный промпт:

robot covered with flowers, in the style of anime-inspired characters and Junji Ito and Yoshitaka Amano, bleached blue and silver, shiny eyes, layered portraits, close up, modern realism, cartoon realism, digital illustration --ar 4:5 --style raw

Делаем апскейл понравившегося изображения и жмякаем Make Variations, бот выдаст окошко для внесения правок в подсказку. Меняем цвет blue на pink.

Далее мы проделываем тоже самое (меняем цвет в ремикс режиме) с результатами апскейла.

Получившие изображения загоняем в нейросеть Runway и получаем такой результат. Кайф, правда?

Очень надеюсь, что данный гайд помог вам узнать новые фичи, которые вы сможете применить для воплощения своих идей. Ну и на последок атмосферная анимация глаза, промпт которого вы найдете в моей подборке в телеграм-канале.