Google создал ИИ, который может генерировать музыку из текстовых описаний, но пока не выпускает его

Новая система искусственного интеллекта MusicLM от Google может генерировать музыку в любом жанре по текстовому описанию. Но компания, опасаясь рисков, не планирует выпускать его в ближайшее время.

Google разработал новый ИИ <a href="https://api.vc.ru/v2.8/redirect?to=https%3A%2F%2Fgoogle-research.github.io%2Fseanet%2Fmusiclm%2Fexamples%2F&postId=594297" rel="nofollow noreferrer noopener" target="_blank">MusicLM</a>
Google разработал новый ИИ MusicLM

Названная MusicLM от Google безусловно не первая система генеративного искусственного интеллекта для песни. Были и другие попытки, включая Riffusion, ИИ, который сочиняет музыку, визуализируя ее, а также Dance Diffusion, собственный AudioML от Google и Jukebox от OpenAI. Но из-за технических ограничений и ограниченных данных для обучения ни один из них не смог создать песни особенно сложные по композиции или с высокой точностью воспроизведения.

Композиции к картинам от MusicLM
Композиции к картинам от MusicLM

MusicLM, пожалуй, первая система, которая может.

Как подробно описано в академической статье, MusicLM был обучен на наборе данных из 280 000 часов музыки, чтобы научиться генерировать связные песни для описания — как выразились создатели — «значительной сложности» (например, «очаровательная джазовая песня с запоминающимся саксофонным соло и сольный певец» или «берлинское техно 90-х с низким басом и сильным ударом». Его песни, что примечательно, звучат примерно так, как может сочинять человек-артист, хотя и не обязательно столь же изобретательно или музыкально связно.

Как вам? Как по мне, очень хорошее начало.

22
2 комментария

Едут в последнем вагоне, столбят тему. Хайперы)

в эту статью добавили три нуля