YouTube показал ИИ-сервисы для генерации музыки — один имитирует стиль реальных музыкантов, другому можно напеть партию

Нейросети разрабатывает Google DeepMind, а тестируют сервисы в рамках проекта Music AI Incubator — в нём состоят авторы-исполнители и продюсеры.

  • С помощью инструмента Dream Track можно сгенерировать 30-секундную композицию в стиле одного из девяти исполнителей, которые захотели поучаствовать в эксперименте. Это Алек Бенджамин, Чарли Пут, Charli XCX, Деми Ловато, Джон Ледженд, Луи Бэлл, Papoose, Sia, T-Pain и Трой Сиван.
  • Инструмент можно использовать при создании коротких роликов Shorts, он уже доступен «небольшой группе блогеров из США». Достаточно дать нейросети текстовое описание — например, «солнечное утро во Флориде, жанр R&B» или «баллада о том, что противоположности притягиваются, акустика».
Как звучит сгенерированная мелодия, если за референс выбрать музыку Чарли Пута
Как звучит сгенерированная мелодия, если за референс выбрать музыку T-Pain
  • Другой сервис с общим названием Music AI Tools позволяет создавать композиции из напевов и детальных описаний. Некоторые авторы смогут протестировать его до конца 2023 года.
  • Судя по скриншоту интерфейса, можно будет загрузить предзаписанную заготовку или записать её через сам сервис, а ещё указать инструменты, эффекты и «интенсивность» каждого прописанного элемента: например, чтобы основу мелодии задавало пианино или, наоборот, электрогитара.
Интерфейс
Интерфейс
Аккорды, сыгранные на MIDI-клавиатуре, можно превратить в хоровое пение
Битбокс получится переделать в барабанную партию
Можно «на-на-на-кать» нужную мелодию, а ИИ преобразит её в оркестровую музыку, звучащую как саундтрек к фильму
Нейросети также смогут трансформировать любой другой напев в соло на конкретном инструменте — например, саксофоне, — и добавят к нему другие инструментальные партии
  • По словам компании, новые инструменты работают на основе «самой продвинутой модели для создания музыки» — Lyria от Google DeepMind. Она генерирует и текст, и инструментальные и вокальные партии. Все мелодии, которые она создаст, получат цифровой водяной знак — такой же дают изображениям, сгенерированным Vertex AI от Google Cloud.
  • Человек не сможет распознать наличие в аудиозаписи отличительных звуков, но наличие водяного знака можно будет проверить через специальные сервисы вроде SynthID самой Google — даже после множества изменений.
  • Когда инструменты будут доступны широкой аудитории — не уточнили. Пока компания тестирует новые возможности.
1414
62 комментария

Для создателей игр и другого контента конечно шик -напел, подтюнил и готов OST без затрат.
Молодым композиторам и актерам озвучки соболезную.

11
Ответить

Ну не знаю. В тех же играх, думаю, OST создаётся продумано, как для кино.

2
Ответить

ты сможешь напеть "В лесу родилась ёлочка" хотя б?

Ответить

Не подумал бы еще год назад, что будущее так близко

6
Ответить

Сегодня еще вчера было завтра. А уже сегодня.

6
Ответить

Комментарий недоступен

6
Ответить

Мечта жизни напеть мелодию, чтобы тебе нашли песню наконец

4
Ответить