Google представила нейросеть MusicLM, которая генерирует музыку по текстовому описанию
Компания Google представила на GitHub нейросеть MusicLM, способную создавать полноценные музыкальные композиции, исходя из текстовых запросов пользователя. Для обучения MusicLM использовалась медиатека, аудиофайлы которой имеют общий хронометраж 280 тыс. часов.
Утверждается, что MusicLM может генерировать композиции, исходя как из конкретных запросов с перечислением, например, музыкальных инструментов, так и из абстрактных описаний настроения или чувства.
В качестве демонстрации возможностей нейросети Google опубликовала в презентации несколько десятков треков. В их число вошли «Музыка для аркадной игры», «Музыка «для потери в космосе», «Мелодия для медитации», саундтреки к картине Винсента Ван Гога «Звездная ночь» и полотну «Постоянство памяти» Сальвадора Дали.
Google не планирует обеспечивать MusicLM публичным доступом. Одной из причин является вероятность нарушения авторских прав. Примерно 1% композиций, созданных нейросетью, полностью повторяет лицензионную музыку из медиатеки для обучения.