Нейромережа Spawn переспівує світові хіти. Чим вона цікава та як нею скористатися

Авангардна композиторка та саунд-дизайнерка Голлі Герндон випустила незвичний кліп-кавер на пісню Доллі Партон Jolene, в якому насправді співає не сама дівчина, а нейромережа Spawn. Про це повідомляє The Byte. Редакція MC.today переказує найцікавіші деталі.

Holly Herndon Jolene

Останнім часом багато уваги привертають до себе продукти на основі штучного інтелекту. Вони можуть малювати ілюстрації та картини за текстовим або й голосовим описом, створювати аватари з фото та багато іншого. Тепер модель машинного навчання Spawn заспівала людським голосом.

Її в співавторстві з Метом Драйхерстом створила Голлі Герндон. Вона ж «дала» їй свій голос. Дівчина багато років працює з нейронними мережами. Вона навчалася в Центрі комп’ютерних досліджень музики та акустики й провела багато експериментів із взаємодії штучного інтелекту з людським голосом.

Щоби озвучити Spawn, Голлі зробила чимало записів свого співу, використала інструменти перетворення тексту на мову та обробки аудіо.

Нещодавно Герндон випустила кліп на одну зі своїх композицій, де головна героїня – цифровий аватар дівчини, а єдиний соліст – та сама нейромережа Spawn. Цей кавер на пісню Доллі Партон Jolene звучить доволі реалістично.

Звісно, якщо прислухатися, можна помітити неправильну вимову деяких слів та не надто природні паузи в місцях, де аватар робить черговий «вдих». Але загалом композиція вийшла цілісною. Це говорить про те, що штучний інтелект можна інтегрувати практично в будь-який різновид творчості.

Дівчина також створила платформу Holly+, яку кожен музикант може використати для того, щоби прослухати свою композицію у виконанні Голлі. Точніше, нейромережі Spawn. Заради розваги можна завантажити будь-який аудіофайл (наприклад, улюблену пісню) довжиною до п’яти хвилин, і штучний інтелект переспіває його. 

Нагадаємо, раніше ми розповідали, що завдяки нейромережі в TikTok можна створювати картини за україномовним описом, а також публікували гайд по роботі з популярним інструментом для творчості Midjourney.