YouTube показал ИИ-сервисы для генерации музыки — один имитирует стиль реальных музыкантов, другому можно напеть партию

Нейросети разрабатывает Google DeepMind, а тестируют сервисы в рамках проекта Music AI Incubator — в нём состоят авторы-исполнители и продюсеры.

С помощью инструмента Dream Track можно сгенерировать 30-секундную композицию в стиле одного из девяти исполнителей, которые захотели поучаствовать в эксперименте. Это Алек Бенджамин, Чарли Пут, Charli XCX, Деми Ловато, Джон Ледженд, Луи Бэлл, Papoose, Sia, T-Pain и Трой Сиван.
Инструмент можно использовать при создании коротких роликов Shorts, он уже доступен «небольшой группе блогеров из США». Достаточно дать нейросети текстовое описание — например, «солнечное утро во Флориде, жанр R&B» или «баллада о том, что противоположности притягиваются, акустика».

Как звучит сгенерированная мелодия, если за референс выбрать музыку Чарли Пута

Как звучит сгенерированная мелодия, если за референс выбрать музыку T-Pain

Другой сервис с общим названием Music AI Tools позволяет создавать композиции из напевов и детальных описаний. Некоторые авторы смогут протестировать его до конца 2023 года.
Судя по скриншоту интерфейса, можно будет загрузить предзаписанную заготовку или записать её через сам сервис, а ещё указать инструменты, эффекты и «интенсивность» каждого прописанного элемента: например, чтобы основу мелодии задавало пианино или, наоборот, электрогитара.

Аккорды, сыгранные на MIDI-клавиатуре, можно превратить в хоровое пение

Битбокс получится переделать в барабанную партию

Можно «на-на-на-кать» нужную мелодию, а ИИ преобразит её в оркестровую музыку, звучащую как саундтрек к фильму

Нейросети также смогут трансформировать любой другой напев в соло на конкретном инструменте — например, саксофоне, — и добавят к нему другие инструментальные партии

По словам компании, новые инструменты работают на основе «самой продвинутой модели для создания музыки» — Lyria от Google DeepMind. Она генерирует и текст, и инструментальные и вокальные партии. Все мелодии, которые она создаст, получат цифровой водяной знак — такой же дают изображениям, сгенерированным Vertex AI от Google Cloud.
Человек не сможет распознать наличие в аудиозаписи отличительных звуков, но наличие водяного знака можно будет проверить через специальные сервисы вроде SynthID самой Google — даже после множества изменений.
Когда инструменты будут доступны широкой аудитории — не уточнили. Пока компания тестирует новые возможности.

#музыка #youtube #новости