Как оживить фото в ИИ-генераторе видео Kling в телеграм боте

В конце июля ИИ-генератор видео Kling, который является конкурентом Sora от OpenAI, стал доступен за пределами Китая. Изначально сервис требовал наличия китайского телефонного номера, но теперь регистрация открыта для всех желающих. Новые пользователи получают ежедневную возможность бесплатно создать до шести коротких видеороликов длительностью 5 секунд каждый.

Kling AI - это инновационный ИИ-генератор видео, созданный компанией Kuaishou из Пекина, которая соперничает с TikTok. Эта технология позволяет создавать видеоролики продолжительностью до двух минут с частотой 30 кадров в секунду и разрешением 1080P, при этом пользователи могут настраивать соотношение сторон.

Создатели Kling заявляют о высокой компетенции их ИИ в области физики и способности точно воспроизводить сложные движения.

Для сопоставления, конкурирующему ИИ-видеогенератору Sora требуется более трех часов работы восьми графических процессоров NVIDIA A100 (каждый стоимостью свыше 10 000 долларов) для создания минутного видео.

Исходя из этого, можно предположить, что для генерации двухминутного видео с помощью Kling потребуется примерно вдвое больше вычислительных ресурсов.

Чтобы начать работу с Kling AI, вы можете перейдите на этот сайт, создать учетную запись и начать работу с инструментом.

Но есть способ проще - как говорится, без регистрации и смс - перейти в телеграм-бота SYNTX и генерировать видео за пару минут. Как это сделать, я сейчас расскажу.

После того, как вы перейдете в бота и выберете язык, появится главное меню бота:

Выберите пукнкт "Видео будущего".

После этого кликните на пункт "Kling"

После этого можно либо ввести промпт, либо посмотреть инструкцию:

Попробую генерацию видео из фото:

Добавляю изображение

После этого можно настроить модель и запустить генерацию

Давайте настроим

В настройках можно ввести промпт и негативный промпт (чтобы описать то, чего в видео не должно быть), выбрать Креативность или Соответствие промпту, а также Стандартный режим - создание видео продолжительностью только 5 секунд и Профессиональный режим - создание видео продолжительностью 5 и 10 секунд в HD качестве.

Ввожу промпт "девушка танцует под быструю музыку", и вот что у меня получилось в профессиональном режиме (генерация заняла 4 минуты):

Пару склеек на быструю руку и добавление аудио, и небольшое видео готово:. При этом прямо в боте видео можно продлить.

Теперь попробую сгенерировать видео по промпту:

Close-up static shot, a chef uses a gold knife to carve a roast, and as the slices fall, they form the word “SYNTX”. Captures the succulent texture of the meat and the precision of the cuts, on a gold table.

В этом режиме можно также настроить движение камеры и соотношение сторон.

Вот результат генерации в KLING (по видео можете судить, как нейросеть следует промпту):

Вот для сравнения в RUNWAY:

Попробую другой промпт, без генерации текста:

An ultra-fast first-person POV hyper-lapse rapidly speeding through an arid desert into a cave with a wild rave

Вот что получилось в Runway:

Плюсы и минусы функции генерации в Kling в боте SYNTX

Удобная генерация
На генерацию уходит мало времени
Видео без водяных знаков
Возможность генерировать нужное количество видео, не покупая подписку

Минусы

В профессиональном режиме генерирует не так быстро, как в стандартном, но это, скорее всего, не вина разработчиков, а самого Kling.

Syntx AI - удобный бот, который очень активно развивается. В нем есть более 40 ИИ-инструментов, поэтому не нужно покупать подписки на нексколько ботов или сервисов. Но благодаря добавлению возможности генерации видео в Kling, LUMA, Runway Gen-3 у бота пока нет конкурентов (или я пока их не встречал).

Еще больше полезностей - в телеграм-канале про нейросети и канале про генерацию изображений Миджорниум.

#kling #генерациявидео