Подборка бесплатных нейросетей для дипфейка видео

выпустили в открытый доступ бесплатно нейросеть V-Express - это технология создания видео портретов, разработанная Tencent AI Lab и Нанкинским университетом. Она позволяет преобразовать одно изображение в видео, используя текст, аудио и другие сигналы для управления.

Технология полезна для анимации портретов в различных приложениях, таких как виртуальные ассистенты и развлекательные платформы.

Иными словами, позволяет оживить любое фото и создать по нему дипфейк. Аватар будет очень реалистичный и максимально повторять все движения за человеком.

Вам потребуются только фото и аудиофайл с речью, которую будет произносить персонаж.

Argil - нейросеть для создания качественных дипфейков, которая способна скопировать стиль общения, язык тела и голос, плюс очень хорошо имитирует движение губ.

Для создания дипфейков достаточно загрузить пару минут видео с аудио и добавить текст. Чтобы получить дипфейк, как внизу - Цукерберг, Андриссен и Обама полностью сгенерированы, хоть в это и сложно поверить.

Для создания дипфейков достаточно загрузить пару минут видео с аудио и добавить текст, чтобы получить дипфейк, как вверху - Цукерберг, Андриссен и Обама полностью сгенерированы, хоть в это и сложно поверить.

Вообще, изначально это сервис для создания своего AI клона, просто процедура такая же - загружаете видеоролик, где вы четко смотрите в камеру и говорите, на этом видео натренируют ии, чтоб вы могли уже без своего участия делать Shorts, Reels и другие видео с собой, просто написав текст. В случае с дипфейком нужно тогда загрузить короткое видео с персонажем в качестве референса. Озвучку так же можно сделать в сервисе

Короче, всем сервис хорош, кроме того, что нужно записаться в лист ожидания. Я уже записалась, там вообще коротенькая анкетка - имя, почта, зачем хотите потестить, где увидели - в основном, надо выбрать да/нет, у меня пол минуты, наверное, заняло

Проект VideoReTalking, представленный на конференции SIGGRAPH Asia 2022, предлагает систему для редактирования видео с говорящими головами в реальном времени на основе входного аудио.

VideoReTalking позволяет создавать видео высокого качества с синхронизацией движения губ даже при изменении эмоций, то есть так, чтобы человек на нём говорил заданный текст с учетом синхронизации движения губ и эмоций, соответствующих звучанию. Технология использует сложные алгоритмы машинного обучения и обработки изображений для достижения реалистичного результата без необходимости ручного вмешательства пользователя.

Процесс включает в себя три этапа: генерация видео лица с каноническим выражением, синхронизация движения губ с аудио и улучшение фотореалистичности лица. Все этапы выполняются автоматически без вмешательства пользователя с использованием обучаемых подходов

Достаточно загрузить речь нужного человека и на выходе получить видео, где он говорит ваш текст.

Код на GitHub

Репозиторий Rope на GitHub — это проект, направленный на создание реалистичных замен лиц в видео с использованием модели inswapper_128 из проекта InsightFace.

Главная особенность Rope — это удобный графический интерфейс (GUI), который упрощает процесс работы с заменой лиц для пользователей, не имеющих глубоких технических знаний.

Подробнее про Rope в этой статье

Хотите узнавать первыми о полезных сервисах с искусственным интеллектом для работы, учебы и облегчения жизни? Подпиcывайтесь на мой телеграм канал НейроProfit, там я рассказываю, как можно использовать нейросети для бизнеса.