Kling AI: как генерировать видео в новой китайской нейросети
Крутой сервис с бесплатными возможностями.
Kling AI — нейросеть для генерации видео от компании Kuaishou, также известной как Kwai. Огромный плюс Kling AI в том, что ей реально пользоваться бесплатно: подводных камней в духе «создай одно видео, а за второе — заплати или приведи 100500 друзей» нет. Во всяком случае пока.
Раньше можно было зарегистрироваться только по китайскому номеру телефона, но 25 июля Kling AI стал доступен для всех. Нейросеть называют потенциальным конкурентом Sora AI. Пока первая уступает по качеству изображения и функциональности, но делать выводы рано: сервис работает в тестовом режиме.
Материал актуален на начало августа 2024 года. Некоторая информация может меняться: нейросеть часто обновляется, о чём разработчики рассказывают в своих аккаунтах на YouTube, X и Facebook (принадлежит компании Meta, запрещённой в России).
Как устроен Kling AI: самое важное
В Kling AI можно генерировать видео и фото, вскоре появится видеоредактор. К слову, фото создаются с помощью нейросети Kolors AI этого же разработчика.
Тезисно про Kling AI:
- Чтобы нейросеть генерировала желаемые видео, важно уметь создавать промты — небольшие технические задания. Идеальный результат — редкое явление, но получить релевантный ролик возможно. Об этом чуть ниже, в разделе «Учимся на ошибках: как составлять промты, чтобы нейросеть их поняла».
- Язык интерфейса — английский. Но можно писать и на русском.
Видео длиной 5 секунд генерируется примерно 5 минут. При этом есть возможность переключиться на другую вкладку: Kling AI всё доделает, пока вы занимаетесь другими делами.
Kling AI: сколько стоит и как пользоваться бесплатно
В Kling AI есть своя валюта для создания контента — credits (кредиты).
Про кредиты
- Создание одного видео стоит 10 кредитов.
- После регистрации пользователь получает 66 кредитов.
- Каждый день начисляется 66 кредитов на платном и бесплатном тарифах.
- Если на балансе пусто — не беда. Продолжить генерировать видео можно на следующий день. Но есть условие: кредиты дают только после входа в сервис. То есть, если за сутки ни разу не зайти в Kling AI, начислений не будет.
Есть бесплатный, платный тариф и возможность покупать кредиты без подписки. О каждом из способов — ниже.
Как пользоваться бесплатно
Можно тратить только те кредиты, которые начисляет Kling AI. Этого хватит на 6 видео в день с ограничениями:
- Длина роликов — до 5 секунд.
- Качество видео ниже, чем в платной подписке. Разница не критичная.
- Ограниченные функции.
- Нельзя убрать водяной знак Kling AI.
Как купить подписку
У Kling AI три вида платной подписки, оплата только через PayPal. Пополнить счёт российской картой нельзя, поэтому варианта два: открыть карту в зарубежном банке или найти посредника, который поможет с PayPal.
По платной подписке можно:
- Создавать видео до 3 минут.
- Генерировать контент более высокого качества, включая разрешение, детализацию и пр.
Использовать дополнительные функции. Например, приближение или отдаление от объекта, использование разных ракурсов. Здесь — видеообзор со сравнением качества одного и того же видео в бесплатной и платной версиях.
Убрать водяной знак Kling AI.
Приобрести подписку возможно на 1, 3 или 12 месяцев.
Как купить кредиты без подписки
Кредиты можно приобрести по необходимости. Оплата — только по PayPal.
Как зарегистрироваться в Kling AI
Первый шаг — официальный сайт Kling AI. Главное — не заплутать: пока что поисковики не ставят его на первое место в выдаче. Вот, например, результат в Google:
К счастью, это единственная путаница с сервисом. Дальше всё идёт по классическому сценарию.
1. Нужно кликнуть на Sign In на стартовой странице Kling AI. Ввести почту и придумать пароль.
2. Скопировать и вставить в поле ввода полученный на имейл код. Теперь можно пользоваться нейросетью.
Как пользоваться
Интерфейс дружелюбный: слева — меню с возможностями, которые дублируются на главной странице.
Внизу меню — раздел My Assets. Там находится сгенерированный контент, а также фото и видео со своими «лайками». Ещё в My Assets можно попасть через личный кабинет в правом верхнем углу.
Как генерировать видео
1. Кликнуть на All Videos в меню или на главной странице.
2. Написать промт и выставить настройки. Можно подробно написать, что должно быть на видео, или загрузить картинку как пример.
Теперь — подробнее про оба способа.
Как генерировать видео с помощью текста
- Составить промт. И записать его в поле Prompt. Например: «A cat sleeps. Close up shot» («Кот спит. Крупный план»).
Выставить настройки. Это опционально, можно вообще ничего не трогать.
Standard Mode / Professional Mode. В бесплатной версии есть только Standard Mode. Professional Mode улучшает качество видео и доступен по подписке.
Creativity/Relevance. Ползунок влево — нейросеть получит больше творческой свободы. Вправо — и у Kling AI появятся более жёсткие рамки ТЗ. Правда, разница видна не всегда: один и тот же промт может быть сгенерирован почти идентично, независимо от расположения ползунка. Возможно, эта функция будет лучше работать в будущем.
Length. Длительность — 5 или 10 секунд.
Frame Ratio. Тут нужно выбрать формат видео: 16:9, 9:16, 1:1.
Camera Movement. Если нужно задать движение камеры, заходим в эти настройки. Есть бесплатные «приёмы», например зум и панорама. А вот по платной подписке доступны действия посложнее: допустим, можно сделать так, чтобы камера сначала повернулась влево (или вправо), а затем приблизилась.
Negative Prompt. Когда нужно указать, чего точно не должно быть на видео. Например, если пользователь не хочет получить на выходе мультипликацию, он напишет об этом здесь.
Вот настройки для видео ниже: Standard Mode, в Creativity/Relevance ползунок посередине, длительность 5 секунд, формат 16:9, в Negative Prompt — слово cartoon (мультфильм).
3. Осталось кликнуть на Generate и оценить результат. Если нужно — подкорректировать промт и настройки, чтобы сгенерировать видео заново.
Чтобы сгенерировать видео на основе картинки, нужно кликнуть на Image to Video и загрузить изображение (разрешение минимум 300p, объём максимум 10 Мб). Там же (опционально) можно ввести промт.
Вот что вышло без текстового задания:
А здесь прописан промт «Zoom in» («приблизь»), но магии не случилось:
Чтобы не грузить нейросеть движением камеры, решено заменить ТЗ на «A dog yawns» («Собака зевает»). Результат: не очень похоже на зевок, но допустим.
Учимся на ошибках: как составлять промты, чтобы нейросеть их поняла
Или хотя бы сделала вид.
Подсказки
- Чем больше деталей, тем лучше. Нейросети своевольные: чем больше у них пространства для фантазии, тем более неожиданным получится контент. Поэтому нужно писать всё: кто на видео, что он делает, какой должен быть фон и так далее.
Ещё можно указать крупность плана, характеристики объектива и прочие технические детали. Пример: «A cartoon cat dances. It wears sunglasses. The background is blurred, drawing attention to the cat. Close up shot» «Мультяшный кот танцует. На нём солнечные очки. Фон размыт, чтобы всё внимание было на коте. Крупный план».
- Если не устраивают какие-то детали, можно дополнить промт и поэкспериментировать с настройками. Нужно, чтобы камера приблизилась? Клик по параметру в настройках. Получился чёрный кот вместо рыжего? Надо прописать цвет животного.
- Самая важная информация размещается в начале промта.
Вот наглядный пример для вышесказанного. Пусть будет видео, на котором девушки едят мороженое.
Промт: Young women eat ice cream in front of the Eiffel Tower. They wear red dresses. («Девушки едят мороженое рядом с Эйфелевой башней. Они в красных платьях»).
Creativity/Relevance: ползунок справа.
Camera Movement: zoom.
Что вышло: зум есть, но здесь он бесполезен, в остальном всё получилось.
Что, если убрать зум, а прочие вводные оставить?
Героинь теперь четыре. Неудивительно: изначально их количество не было указано.
Промт: Young women eat ice cream in front of the Eiffel Tower. They wear red dresses. («Девушки едят мороженое рядом с Эйфелевой башней. Они в красных платьях»).
Creativity/Relevance: ползунок справа.
Camera Movement: дефолтные настройки.
А что, если указать количество девушек и добавить парочку деталей? Пусть в этот раз будет ночь, а на героинях — красные платья в стиле балеткор.
Промт: Two young women eat ice cream in front of the Eiffel Tower. They wear red dresses, balletcore style. It’s dark outside. («Две девушки едят мороженое рядом с Эйфелевой башней. Они в красных балеткор-платьях. На улице темно»).
Creativity/Relevance: ползунок справа.
Что вышло: достаточно близко, на улице ночь, девушки — в красном, их двое, эстетика балеткора соблюдена, башня на месте.
А вот что произойдёт, если оставить промт, но сместить ползунок в Creativity/Relevance влево. Разницы почти никакой.
В интернете есть много материалов о создании промтов — эти знания помогут упростить процесс.
Можно ли создавать видео с реальными людьми
Сразу ответ: нет. А теперь пруф:
Промт: Elon Musk and Mark Zuckerberg eat ice cream in front of the Eiffel Tower. Close up shot, so we can see their faces («Илон Маск и Марк Цукерберг едят мороженое на фоне Эйфелевой башни. Крупный план, чтобы мы видели их лица»).
Creativity/Relevance: ползунок посередине.
Что вышло: даже хорошо, что роль Маска и Цукерберга исполняют статисты. Эйфелева башня, к слову, на месте.
А вот пример того, как Kling AI сходит с ума. Ради эксперимента решено оставить предыдущий промт, но видео нейросеть сгенерирует по фото Цукерберга. Теперь в качестве статистов-предпринимателей нейросеть подкинула middle-aged мужчину с предполагаемой girlfriend. Если вам удастся отследить логику, пишите в комментариях.
На каком языке лучше составлять промт: на русском или на английском
К примеру, вот всё те же Маск и Цукерберг:
Промт: Илон Маск и Марк Цукерберг едят мороженое на фоне Эйфелевой башни.
Промт: Elon Musk and Mark Zuckerberg eat ice cream in front of the Eiffel Tower.
Вывод: особой разницы нет. Да, на первом видео крупный план, на втором — общий, но эта настройка изначально не уточнялась в промте.
И ещё несколько примеров промтов для наглядности
Промт: A dog runs on the beach. Cinematic film shot in 35mm. Medium shot («Собака бежит по пляжу. Снято на плёнку 35 мм. Средний план»).
Что вышло: план не средний, а крупный. Можно ещё поработать над промтом, чтобы улучшить результат.
Промт: A cartoon lama dances («Мультяшная лама танцует»).
Что вышло: если это существо ощущает себя ламой и танцует в душе, тогда сойдёт.
Промт: A cat eats fish. Cinematic film shot in 35mm. («Кот ест рыбу. Снято на плёнку 35 мм»).
Что вышло: пожалуй, один из самых релевантных результатов.
Промт: A rainbow over a waterfall surrounded by lush vegetation. It’s a sunny day. Long shot. («Радуга над водопадом, окружённым пышной растительностью. Солнечный день. Общий план»).
Что вышло: и снова достаточно релевантно.
Коротко о главном
В Kling AI можно генерировать видео до 5 секунд при помощи текстового запроса (промта) или по картинке. На платных тарифах — до 3 минут.
Пока что нейросеть работает в тестовом режиме, поэтому некоторые опции недоступны. Например, нельзя редактировать видео.
Чтобы получить максимально релевантный результат, важно прописать в промте больше подробностей: кто на видео, что делает, во что одет, какой фон, какое освещение и так далее. Также есть смысл задать технические параметры, например указать характеристики объектива.
Интерфейс сайта англоязычный, но составлять промты можно и на русском.
Некоторые ролики выглядят вполне реалистично, но создавать видео с реально существующими людьми нельзя.
Как вам реакция Kling AI на промты? Или, может, у вас есть своя история про создание промтов? Поделитесь 🍿
Все, уже нет бесплатных токенов!
с другой спутала...
не могу зарегаться - капча зависает.
И у меня не получается((
Отвратительный. Генерация 10 сек видео — более 30 минут. И все еще продолжается. Комикс просто...
LOL. Какой пиздец. Это уровень, ниже GEN-2 от Runway.
Может на компе быстрее будет генерировать?
Уже 35 минут в ожидании,5 секундного видио,🫠