Нейросеть дня «HeyGen Video Translate»: переводите видео на другие языки с сохранением голоса

Интернетик захлестнула волна переозвученных мемов: идущий к реке и Данила Багров заговорили на английском, а Маск освоил испанский. Выглядит и звучит настолько хорошо, что сложно отличить оригинал от перевода. Давайте разберёмся, что за нейросеть такое вытворяет.

Video Translate от HeyGen — сервис на базе ИИ, позволяющий переозвучить видео с любого языка. Загружаете видеофайл, выбираете один из 8 языков, ждёте своей очереди примерно вечность и получаете профессиональный дубляж. Помимо перевода, нейросеть копирует голос и даже дорисовывает движения губ так, чтобы всё выглядело естественно. К сожалению, на русский пока не переводит.

Что умеет Video Translate от HeyGen:

Переводить видео на английский, француский, испанский, индийский, итальянский, немецкий, польский и португальский языки
Позволяет обрабатывать видео длительностью от 30 секунд до 5 минут и весом до 500мб
Работает с файлами в форматах MP4, WEBM и Quicktime

После регистрации вам будет бесплатно доступен 1 кредит (внутренняя валюта), что равняется 1 минуте видео. Потратьте его с умом)

За каждую последующую минуту (кредит) нужно будет отдать $2, минимальный пакет 15 минут или $29 долларов. Платить с российских карт нельзя.

На самом деле Video Translate — часть большой платформы по созданию видео HeyGen. Ребята разрабатывают нейросети, позволяющие из текста создавать полноценные видео с цифровым аватаром, копированием голоса, разными фонами и т.п. Чуть позже сделаю на HeyGen отдельный обзор.

-----

Авторские обзоры ИИ-инструментов несколько раз в неделю. Удобнее читать в Telegram — https://t.me/universe_ai