реклама
разместить

EMO AI: конкурент Sora?

Пока мы все в ожидании Sora от OpenAI, группа исследователей компании Alibaba (известная нам по Aliexpress) представила свой искусcтвенный интеллект, который способен оживить изображение — EMO AI.

EMO AI: AI Lady from SORA  

EMO является аббревиатурой "Emote Portrait Alive" и представляет собой модель искусственного интеллекта cпособную генерировать видео на основе портретного изображения и аудио.

Принцип работы EMO AI (Источник: <a href="https://api.vc.ru/v2.8/redirect?to=https%3A%2F%2Fhumanaigc.github.io%2Femote-portrait-alive%2F&postId=1055866" rel="nofollow noreferrer noopener" target="_blank">https://humanaigc.github.io/emote-portrait-alive/</a>) 
Принцип работы EMO AI (Источник: https://humanaigc.github.io/emote-portrait-alive/

Для создания видеоролика пользователю достаточно загрузить изображение какого-нибудь персонажа и аудио дорожку (это может быть любая музыкальная композиция или записанный разговор), а нейросеть создаст реалистичный видео аватар.

Исследователи отмечают, что данная модель искусственного интеллекта была обучена на 250 часов видео- материала и 150 миллионов изображений. Стоит обратить внимание на то, что при создании анимации ИИ не использует 3D-модели, что позволяет воспроизводить плавные движения лица персонажа, делая его более естественным.

EMO AI cпособна генерировать следующие типы видео:

  • «Поющие» портреты

Загрузив портретное изображение и песню, нейросеть может создать видео персонажа, который поёт. Также она способна синхронизировать картинку под ритм и текст песни. Например с её помощью Леонардо ДиКаприо может читать рэп как Eminem (полное видео можно увидеть здесь).

EMO AI: Леонардо ДиКаприо + EMINEM - GODZILLA (FT. JUICE WRLD) COVER 
  • Персонаж говорящий на разных языках

Данный искусственный интеллект способен генерировать видео с аудио на различных языках — от английского до китайского. Это возможно благодаря распознанию языковой тональности и созданию на основе этого мимики персонажа.

Таким образом, EMO AI позволяет анимировать любой портрет (например, с любимым киногероем) с возможностью создания монолога или выступления в разных стилях. К примеру, с помощью фотографии Одри Хепбёрн и голосового аудио можно сгенирировать полноценное интервью (видео вы можете посмотреть здесь).

Чем же EMO AI отличается от остальных ИИ по созданию видео?

  • Высокое качество видео;
  • Реалистичность изображения;
  • Создание видео без ограничений по времени;
  • Поддержка многих языков.

На данный момент дата выхода EMO AI пока не известна, но можно смело утверждать, что нейросеть превосходит многих своих конкурентов. Данная технология может стать полезной для маркетинга, индустрии развлечений и даже в обучении.

Однако, не стоит забывать о возможных последствиях и использовании искусственного интеллекта в недобросовестных целях. Поэтому необходимо найти нужный баланс между его способностями и этичностью их применения.

По всем вопросам: @rpa_solutions

Поговорить с нашим умным ботом: @Airpa_bot

2929
11
реклама
разместить
6 комментариев

404 по ссылке на гитхаб(

1

Спасибо, исправили!

Есть готовый уже и бесплатный аналог, можно поиграть. Но не настолько крутая конечно) https://real3dportrait.github.io/

Достаточно интересная разработка, но всё же проигрывает EMO AI, так как не передаёт полноценно естественность движений лица. Но в качестве алтернативы можно использовать :)

1

лол, этой технологии примерно миллион лет, сообственно Тик-Ток с нее начался, когда в musical.ly этот фильтр добавили

Как мой сломанный копирайтинг принес клиенту 300% ROI за месяц, когда стандартные тексты не работали

Ненавижу копирайтинг. Тот самый "правильный" копирайтинг, которому учат на курсах за 50 тысяч. С его формулами AIDA, болевыми точками и призывами к действию.

Как мой сломанный копирайтинг принес клиенту 300% ROI за месяц, когда стандартные тексты не работали
2020
реклама
разместить
ДКП и рубль остаются жёсткими, инвесторы идут в недвижку, которая растёт, а акции, крипта и облигации на чиле. Воскресный инвестдайджест

ЦБ оставил ключевую ставку 21%, сигнал дал умеренно жёсткий, так что и вся неделя получилась жёсткой. Рубль тоже жёсткий, никак не обмякнет. В акциях, облигациях и крипте всё спокойно, а вот недвижка продолжает пробивать обратное дно. Новые максимумы рисует, ещё и льготные ипотеки расширяют. Из позитивного можно выделить новые дивиденды, ну и наш с…

ДКП и рубль остаются жёсткими, инвесторы идут в недвижку, которая растёт, а акции, крипта и облигации на чиле. Воскресный инвестдайджест
1111
11
Как попасть в «Колдунщик» Яндекса и обойти конурентов: немагическая инструкция

Колдунщик — это главный блок поисковой выдачи и мощный источник целевых клиентов для тех, кто продвигает компанию на Яндекс Картах. Как оказаться в Колдунщике и занять место на первых позициях — рассказал в статье.

Как попасть в «Колдунщик» Яндекса и обойти конурентов: немагическая инструкция
33
33
11
Управление проектами: дайджест публикаций
Управление проектами: дайджест публикаций
  • Сезон выгорания, гадости про скрам, матрицы ролей, 5 почему, кейсы от крупняков, тренды в управлении проектами и всё интересное, что писали на этой неделе про управление проектами
  • Мы прочитали все публикации и выбрали для вас самые крутые и полезные. Читайте, сохраняйте и применяйте!
  • Расширенные дайджесты, новости, обзоры книг и курсов для РП и анали…
55
Жители домов от застройщика ПИК остались без интернета из-за DDoS-атаки на единственного провайдера

Кроме того, не работает связь, а жильцы не могут открыть двери подъездов и попасть к себе домой.

100
4848
88
66
22
11
Цифровое рабство 21 века. Куда смотрит фас. Это позор конечно. Карманные УК гоняют других провайдеров. )
Точка красоты на Ленинском просп., д. 109 изуродовали меня и других

Посетила салон «Точка красоты» на Ленинском просп., д 109 (ТРЦ «РИО», 3 этаж) и получила обрубки на голове, хамство администраторов и игнорирование закона РФ от владельцев данного заведения. В статье расскажу, как я пыталась вернуть деньги за некачественную услугу и чем это закончилось.

Что же могло пойти не так?
77
11
11
Альфа-банк ответит за убытки клиента

Верховный суд рассмотрел спор о взыскании убытков с банка за неисполнение поручения клиента.

Альфа-банк ответит за убытки клиента
4141
99
55
Альфа банк худший банк для бизнеса (с)
Китайская Tencent выпустила «рассуждающую» ИИ-модель Hunyuan-T1

Она основана на базе сверхбольшой модели TurboS, которую Tencent выпустила в феврале 2025 года.

66
11
День 1123: российские застройщики начали привлекать рабочих из Индии

Собираем новости, события и мнения о рынках, банках и реакциях компаний.

Источник: DR
2222
22
22
11
Все лишь бы не поднимать зарплату для местных )
реклама
разместить
LinkedIn — не просто соцсеть для бизнеса. Это золотая жила для тех, кто умеет копать глубже (а ИИ умеет)

Линкедин — это не просто платформа, где все публикуют резюме, ищут сотрудников или хвастаются офисными кактусами. Это гигантская база данных, где каждый профиль — открытая дверь для холодных, но горячих сделок.

LinkedIn — не просто соцсеть для бизнеса. Это золотая жила для тех, кто умеет копать глубже (а ИИ умеет)
1010
33
22
11
Правительство разрешило добывать криптовалюту в регионах, где введён запрет на майнинг — но генерировать электричество надо самим

Майнинг запрещён в 13 регионах России.

Источник: Thegeekpub
2626
[]