Hitech logo

Тренды

ИИ-модель MusicLM от Google сочиняет музыку по текстовому описанию

TODO:
Екатерина Смирнова30 января 2023 г., 17:35

Google представила исследование о системе MusicLM, которая создает музыку в любом жанре по текстовым описаниям. Это не первый музыкальный генератор ИИ — такие проекты как AudioML от Google и Jukebox от OpenAI уже занимались этой темой. MusicLM использует обширную обучающую базу данных из 280 000 часов музыки и умеет писать композиции по абстрактным описаниям. Но ИИ-модель недоступна для пользователей из-за сложностей с авторскими правами.

Самые интересные технологические и научные новости выходят в нашем телеграм-канале Хайтек+. Подпишитесь, чтобы быть в курсе.

MusicLM может не только комбинировать жанры и инструменты, но и писать треки, используя абстрактные концепции, которые обычно трудно понять компьютерам. В одном из примеров модель создала трек, сочетающий танцевальную музыку с реггетоном, обладающий «космической, потусторонней» мелодией, которая вызывает «чувство трепета и благоговения». В качестве задания может выступать описание картины, еще желаемую композицию можно напеть или просвистеть. В режиме истории можно объединить несколько текстовых описаний для создания диджейского сета или саундтрека.

Но MusicLM, как и многие ИИ-алгоритмы, не лишена проблем. Некоторые композиции звучат странно, а вокал неразборчив. Кроме того, исследователи не публикуют MusicLM из-за авторского права. Около 1% музыки, созданной на момент публикации, было скопировано непосредственно с обучающих песен. При это нередко достаточно буквально нескольких нот, чтобы объявить композицию плагиатом и выдвинуть претензии.

Между тем ИИ уже нашел место в музыке — некоторые артисты использовали алгоритмы для создания альбомов и музейных саундтреков. А в 2019 году звукозаписывающая компания Warner Music впервые в истории заключила контракт не с реальным исполнителем, а с музыкальным алгоритмом — Endel.