Сравниваем сервисы ИИ-липсинка (синхронизации губ с речью) и выбираем лучший. Более 15 видеопримеров внутри.

Цель сегодняшнего теста — выявить лучший сервис для липсинка и определить, как ии-сервисы по синхронизации губ с речью справляются со своей задачей и могут ли они создавать реалистичные видео.

Материал подготовлен для телеграм-канала "Нейронутые". Подписывайтесь, чтобы не пропустить самые интересные обзоры и новости из мира ИИ.

Dreamina (анимация статичного изображения)

Sync Labs (для озвучки загружено видео, сделанное в Veo2)

Hedra (для озвучки загружено то же видео, сделанное в Veo2)

Kling ---> Kling (загружена картинка, анимированная в Kling, после чего сделан липсинк получившегося видео)

Runway ---> Kling (загружена картинка, анимированная в Runway), после чего сделан липсинк получившегося видео в Kling)

Runway (Загружено видео, сделанное в Veo2)

А теперь возьмем китайский текст, сгенеренный в ElevenLabs и проверим как сервисы справляются с китайским

Dreamina

Hedra

Kling ---> Kling

Runway ---> Kling

Sync Labs

И финальный текст, сгенеренный в ElevenLabs, на русском языке. Уверен, вы узнаете этот голос.

Dreamina

Hedra

Sync Labs

Kling ---> Kling

Runway ---> Runway (анимировал статичное изображение в сервисе, после чего тут же сделал липсинк). И это настолько плохо, что даже и добавить нечего — единственный раз, когда я напишу, как отвратительно сделана генерация :-)

Я не буду писать, какой сервис лучше справился со своей задачей и предлагаю вам сделать свои выводы

Напишите в комментариях своего фаворита и также о том, что вы думаете о липсинке — способен ли он заменить живых актеров.

Этот разбор был сделан в рамках моего он-лайн курса "ИИ-кино 2.0", на котором я очень фундаментально рассказываю, как сделать ИИ-видео и ии-фильмы, которые зацепят внимание людей. Если вы хотите освоить процес создания ИИ-фильмов и ИИ-рекламы — этот курс поможет вам освоить этот навык.

Следите за обновлениями.