Kling Motion Control: как перенести движение из видео на изображение с помощью нейросети

Платформа Kling представила обновление — инструмент Kling Motion Control, который позволяет анимировать статичные изображения, используя видеореференсы. Технология переносит паттерны движений с реального видео на персонажа, сохраняя его оригинальный облик.

Как это работает

Пользователь загружает два файла:

1. Видео-референс — запись с необходимым движением (человек, животное).

2. Изображение — персонаж, на которого нужно перенести это движение.

Нейросеть анализирует видеоряд и генерирует новый ролик, где персонаж повторяет движения из референса. Для повышения точности можно добавить короткий текстовый запрос, описывающий действие.

Интерфейс и настройки

Чтобы воспользоваться функцией:

1. В главном меню выбрать раздел «Видео будущего» → Kling.

2. Загрузить видео с движением, затем — целевое изображение.

3. В разделе «Настройки» активировать Kling Motion Control, выбрать «Профессиональный» режим.

4. Указать короткий запрос на английском, описывающий движение (например, «person walking»).

Ограничения и рекомендации

Разработчики обращают внимание на несколько важных моментов:

· Работа с животными поддерживается только при условии, что животное в референсе стоит на двух конечностях. Четвероногие персонажи обрабатываются некорректно.

· Пропорции: чем ближе пропорции тела персонажа к пропорциям человека в видеореференсе, тем качественнее будет результат. Сильные расхождения могут привести к искажениям.

· Длительность референса: принимаются видео длительностью от 5 до 30 секунд. Итоговый ролик обычно совпадает по длине с исходным, но при сложных или резких движениях может быть сокращён до минимального валидного фрагмента (не менее 3 секунд).

Стоимость генерации

Тарификация построена на токенах:

· Стандартный режим: 1 секунда = 2,4 токена.

· Профессиональный режим: 1 секунда = 4 токена.

Профессиональный режим рекомендуется использовать для сцен с высокой динамикой, где важна плавность и точность движений.

Практическая ценность

Инструмент может быть полезен:

· создателям анимации и motion-дизайнерам;

· разработчикам игр и интерактивного контента;

· маркетологам для быстрого продакшна видео с персонажами;

· всем, кто экспериментирует с генеративными технологиями.

Kling Motion Control сокращает время на производство анимированного контента, избавляя от необходимости покадровой отрисовки или использования сложного оборудования для захвата движений.

Страхов Сергей CEO neirobro.ru