Meta представила искусственный интеллект MusicGen, превращающий текст в музыку

На днях компания Марка Цукерберг Meta представила новый инструмент с искусственным интеллектом MusicGen, который превращает текстовое описание во фрагмент музыкальной композиции. Редакция MC.today пересказывает детали.

Keen on his work. Confident composer sitting in semi position wearing headphones using laptop while writing new composition

По информации представителей техногиганта, инженеры использовали для обучения искусственного интеллекта около 20 тыс. часов записей. В состав этой библиотеки также вошли 10 тыс. часов «высококачественной» лицензированной музыки и примерно 390 тыс. инструментальных треков.

В компании заверили, что не нарушали права собственности гигантов музыкальной индустрии вроде Universal Music Group. Учебную базу создавали из так называемых стоковых медиабиблиотек и согласовывали с правообладателями.

MusicGen могут протестировать все желающие. Для этого достаточно перейти к демоверсии программы по этой ссылке. Программа может генерировать короткие треки по текстовому описанию. Чем точнее подсказки, тем интереснее результат.

В одном из примеров разработчики попросили ИИ сгенерировать бодрый танцевальный трек с легко запоминающимися мелодиями, идеальный для отдыха на тропическом пляже. Затем программа создала медленную композицию для расслабления и мелодию для оркестра, достойную для озвучивания сцен эпических сражений в кино.

Источник: © FelixKreuk / Twitter

Также MusicGen может экспериментировать с треками пользователей. Нужно просто загрузить аудиодорожку и подсказать нейросети, что с ней сделать.

Источник: © FelixKreuk / Twitter

Разработчики признают, что этот инструмент не совершенен, поскольку его обучали на музыке преимущественно в «западном» стиле. Также они не исключают, что некоторые артисты могут считать искусственный интеллект угрозой и инструментом, который приведет к недобросовестной конкуренции. Впрочем, инженеры планируют создать дополнительные элементы управления ИИ, которые помогут защитить права музыкантов и разработать четкие механизмы лицензирования композиций.

• Напомним, вскоре именно благодаря искусственному интеллекту Пол Маккартни выпустит песню с вокалом Джона Леннона, которую поклонники рок-группы The Beatles до сих пор не слышали. Также предлагаем вам почитать, почему против таких технологий выступил Стинг.