«ChatGPT для музыки»: нейросети для генерации музыки

Да, есть и такие, и их уже как минимум три. Сервисы создают музыку самых разных жанров по текстовым описаниям (промптам). И не только музыку, но и стихи, то есть могут написать композицию с нуля. Уже можно попробовать минимум три сервиса: Udio, Suno, Sonauto. Расскажу о них подробнее.

Подписывайтесь на мой канал Продуктовые штучки

Они действительно создают (новую) музыку?

Создатели уверенно говорят об этом, и это не противоречит нашим знаниям о возможностях нейросетей. Модель делает что-то новое из своих обучающих данных.

К слову, этот аргумент также использует OpenAI, когда утверждает, что в недалеком будущем ИИ сможет делать научные открытия. Некоторые недоверчивые пользователи проводят эксперименты, чтобы это проверить. И да, они убеждаются в этом.

Что в этом примечательного?

Еще совсем недавно многие эксперты полагали, что ИИ еще нескоро будет способен генерить полноценные, высококачественные песни из текстовых подсказок. И вот мы уже видим целых три инструмента для создания музыки.

Udio

Появился последним, совсем недавно. Нейросеть может создавать трек на ваши слова или придумать текст самостоятельно. Возможно, компания также выпустить сервис по клонированию голоса (такой инструмент уже есть у OpenAI)

Udio подает себя как инструмент для профессионалов (так, он умеет генерировать музыку в стерео-формате, где левый и правый каналы реально отличаются).

Сервис может создавать музыку в разных стилях. Можно попробовать уже сейчас, и создать до 1200 (!!) песен в месяц. Доступ открывается сразу, без листа ожидания. Пользователи отмечают, что у Udio композиции на английском языке получаются "выразительными и запоминающимися".

Композиция, созданная Udio.

Сервис произвел большой фурор (о нем написал, к примеру, «Rolling Stone» — известный американский журнал, посвящённый музыке и поп-культуре), поэтому сервис испытывает перегрузки и не может генерить музыку так быстро, как хотелось бы, о чем предупреждает.

Дисклеймер на <a href="https://api.vc.ru/v2.8/redirect?to=https%3A%2F%2Fwww.udio.com%2F&postId=1125454" rel="nofollow noreferrer noopener" target="_blank">сайте Udio</a>, что сервис временно из-за нагрузки работает медленно<br />
Дисклеймер на сайте Udio, что сервис временно из-за нагрузки работает медленно

Стартап Udio создан выходцем из Сколтеха и экс-исследователями Google DeepMind Ярославом Ганиным (но не только, у стартапа 4 сооснователя). Udio собрал $10 млн от венчурных фондов и инвесторов, таких как сооснователь и технический директор Instagram Майк Кригер. Также в списке инвесторов Udio есть несколько известных музыкальных имен. Продукт появился очень быстро: сооснователи создали компанию в декабре 2023 года.

Стили, в которых можно создавать музыку на <a href="https://api.vc.ru/v2.8/redirect?to=https%3A%2F%2Fwww.udio.com%2F&postId=1125454" rel="nofollow noreferrer noopener" target="_blank">Udio</a><br />
Стили, в которых можно создавать музыку на Udio

Suno

Ранее, в декабре появился сервис Suno AI. Он больше рассчитан на массовую аудиторию пользователей. Suno генерирует двухминутные музыкальные клипы из подсказок, у сервиса есть подписка. Модель Suno v3 была представлена всего несколько недель назад и стала настоящим прорывом, особенно в области реалистичного, человеческого вокала. Блюзовая песня AI, созданная Rolling Stone с помощью Suno v3, в прошлом месяце стала вирусной.

На сайте сервиса есть композиции в том числе и на русском языке - Трава у дома и Владимирский централ. Вернее, это вольные каверы нейросети на слова этих песен.

В топе <a href="https://api.vc.ru/v2.8/redirect?to=https%3A%2F%2Fsuno.com%2F&postId=1125454" rel="nofollow noreferrer noopener" target="_blank">сервиса</a> (по крайней мере, для русскоязычной аудитории), хорошо известные всем хиты. <br />
В топе сервиса (по крайней мере, для русскоязычной аудитории), хорошо известные всем хиты.

По отзывам, звучание музыки Udio чуть более четкое и реалистичное, чем у Suno, меньше выдает машинное происхождение треков.

Sonauto

Третий сервис - Sonauto. Позволяет генерировать песни в стиле известных музыкантов.

В подсказке для промпта <a href="https://api.vc.ru/v2.8/redirect?to=https%3A%2F%2Fsonauto.ai%2F&postId=1125454" rel="nofollow noreferrer noopener" target="_blank">Sonauto</a> упоминается Фрэнк Синатра. <br />
В подсказке для промпта Sonauto упоминается Фрэнк Синатра.

Так, в топе мелодий - композиция в стиле Кэти Перри:

Топовая композиция на сайте <a href="https://api.vc.ru/v2.8/redirect?to=https%3A%2F%2Fsonauto.ai%2FHome&postId=1125454" rel="nofollow noreferrer noopener" target="_blank">Sonauto</a>.<br />
Топовая композиция на сайте Sonauto.

Пожалуйста, поддержите меня, поставьте лайк!

33