Инструкция создания видеоклипа в ИИ - читаю рэп для своих деток...
Давно не был на VC, исправляюсь. Всё дело в том, что начал активно пользовать сервисами от ИИ. Это, конечно, кладезь для творческих людей. И мне тоже нравится заниматься такими штуками. Про такое творение сегодня вам я и расскажу. Особо строго не судите, не претендую ни на что, делюсь полученными знаниями, поэтому может быть, кто-то тоже окунется в эту сферу, и это тоже замечательно!
Сейчас в нейросетях можно сделать многое: писать код, создавая приложения и сайты, вести социальные сети, создавать себе ИИ помощников и многое чего еще.
Я первым делом начал сочинять песенки для поздравлений родственников, и чтобы не скучно было просто их слушать, добавлял какой-нибудь видеоряд. То есть это и получается своего рода готовый видеоклип.
Но я бы, конечно, до этого не дошёл, если бы однажды не зарегистрировался в сервисе чат-бота SYNTX , где я и наткнулся но великолепный создатель музыки и мелодий SUNO. Просто загружаем туда текст, и через пару минут получаем две готовых песни для захвата всех чартов в Интернете, ну или хотя бы у вас в семье дома :) Выбор стиля музыки вы определяете сами.
Не могу не нарадоваться этой возможностью, так быстро получать музыкальный результат! Отсюда и возникла мысль создать что-то настоящее.
Ниже поэтапно я опишу весь процесс.
Для начала, придумал такой текст (в нем, конечно, много гиперболизировано, но моим деткам иногда тоже достается, есть нам родителям над чем поработать, но если что, не забывайте, что это всего лишь художественное произведение):
В этом тексте где-то добавил лишние запятые, чтобы SUNO делал паузу (но возможно это не работает), также где непонятные ударения в словах для ИИ выделил ударные слоги заглавными буквами. Ну и перенос строк тоже, как мне кажется, даёт понять алгоритму, что у нас есть свой ритм.
SUNO предлагает два варианта мелодии, стоит одна мелодия 1,75 токенов SYNTX, цена очень хорошая на мой взгляд. Если что-то не нравится можно подправить стиль, изменить текст, или просто снова запустить процесс создания новой песни, чтобы было несколько вариантов. У меня сложилось мнение, что чем больше вариантов, тем труднее выбрать один лучший, они все хорошие получаются. Поэтому тут не стоит сильно заморачиваться.
Песня у нас готова, чтобы сильно себя не нагружать отправляем текст песни в любой удобный для вас чат с ИИ, где просим его создать промпты для картинок каждого четверостишья. Я использовал deepseek. При покупке тарифа в SYNTX вы получаете бесплатный доступ ко многим чатам ИИ: GPT, GEMINI, GROK, DEEPSEEK и другие.
Так как лучше делать все референсы в одном стиле, то мы и используем один стиль, к текстовому заданию для создания ИИ я добавлял такую запись: Style LEGO.
В SYNTX для создания изображений нам предоставляется также немало ИИ: Midjourney, Nanabanana, Seadream, Sora, Kling и другие. ИМХО Midjourney (1 токен - 4 варианта) - делает картинки с выдумкой, нужна хорошая проработка промпта, Nanabanana (1.5 токена - 1 вариант) - мастер для выполнения точных заданий, выдумывать, если не напишите, ничего не будет. Seedream (1.2 токена - 1 вариант), наверное, что-то среднее между ними. Через него я и делал картинки.
1. A satirical cartoon scene of a tired but enthusiastic rapping dad using a spoon as a microphone. He stands in front of a giant, comically large birdcage where his bored kids are trapped, one kid is trying to bend the bars. The dad strikes a playful rap pose. The kitchen is messy in the background. Dynamic, vibrant, and humorous. Style LEGO
2. A heartwarming yet funny scene. The same dad proudly shows his son a blueprint of a house, but the blueprint is clumsily drawn on a napkin. He has a kind but slightly confused expression, flexing his other arm muscle playfully. The little son looks up at him with a mix of hope and skepticism. Warm, afternoon lighting. Style LEGO
3 A chaotic and dramatic scene. The dad is trying to work on a laptop, surrounded by chaos. A fiery, cartoonish little devil kid (the son) is taunting him with a glowing smartphone. The dad is exasperated, shouting, with papers flying around. Comic book style with exaggerated expressions and action lines. Style LEGO
4 A dramatic role reversal scene. The dad now has a flashback: he himself as a little boy in a similar cage. He turns to his own son with a mischievous but tired smile, as if saying "now it's your turn". The style is a mix of memory (sepia tones for the flashback) and present (vibrant colors). Style LEGO
5 A different angle of the chaotic scene from the third prompt. Focus on the son's mischievous face as he defiantly holds the phone, with the overwhelmed dad in the background, completely buried in work and household clutter. Emphasis on the phone's glow lighting their faces. Style LEGO
6 A poignant flash-forward scene. The young son is now grown up ("Иван"), he has his own children. He stands with a tired but happy smile, watching his kids play. He has the same kind but exasperated expression his father had. The cycle continues. Warm, sunset lighting, nostalgic mood. Style LEGO
7 A hopeful, cosmic cartoon. The grown-up son Ivan smiles, looking at the stars. The constellations form playful shapes of fathers and children. A faint, glowing spiral of the universe (all-seemingaya) connects him to his own father looking down from a cloud. Magical realism, deep blues and gold colors, serene atmosphere. Style LEGO
Если посмотреть на картинки, то станет заметно, что третий слайд получился немного не в том стиле, поэтому я исправил его так. Загрузил два изображения, и написал запрос: Замени стиль второй картинки на первую
Получил нужную мне стилистику
Для этого выбираем видео ИИ, тут у нас тоже большой выбор. Думается, что самый крутой, конечно, VEO гугла, но и видео от него дорогое 119 токенов за 8 секунд, делает озвучку. Хорошо, что есть veo fast, он дешевле 19 токенов за 8 секунд, результат даёт тоже неплохой. Kling, Seedance, MidJourney, Runway , по моему скромному мнению, дают примерно одинаковые результаты. Я выбрал Kling, качество хорошее, и цена не такая большая 6 и 12 токенов за 5 и 10 секунд соответственно за разрешение 720.
Для создания видео из картинок я уже писал запросы на русском языке, в дальнейшем в ИИ уходит все-равно перевод, но если хотите всё контролировать, то лучше писать промпты на английском.
1. Читает рэп герой справа, герои в клетке не довольны. Камера медленно приближается
2. Показывает силу
3. Бумажки летят, слева персонаж стучит по столу, справа персонаж плачет
4. Левая сторона превращается в цветную, камера приближается к персонажу слева
5. Человечек сзади с бородой кричит на человечка впереди. Человечек впереди становится грустным, и роняет телефон
6. Персонаж справа кричит на детей слева
7. Персонаж слева кричит на других. Все становятся мрачными. Камера медленно приближается
После получения видео, нам остается любым удобным для нас способом сверстать клип из полученных материалов. По времени у меня это заняло часа три на всё. Результат мне нравится, теперь и вы его можете оценить. Пишите комментарии.
Еще отмечу, что у SYNTX есть web-версия, работает через обычный браузер, а не через телеграм, можете пользоваться и таким способом, для этого переходите по ссылке ниже:
SYNTX - это сервис, где собраны все нужные вам ИИ в одном месте, оплачивате подписку СБП или картой, и уже не думаете о бесконечных регистрациях и об оплате иностранных сервисов, это удобно!