Фанаты Lil Uzi Vert и Juice WRLD создают песни из сниппетов с помощью нейросетей

Они берут записи из соцсетей артистов, где часть композиции может играть даже на заднем фоне, но благодаря нейросетям быстро поднимают качество аудио. 17-летний музыкальный продюсер Sable является большим фанатом Juice WRLD. После своей смерти артист оставил несколько тысяч невыпущенных треков, но когда подросток переслушал большинство песен, гуляющих по сети, он захотел дополнять сниппеты рэпера. Для этого фанат объединился с другими пользователями, Shadow и 999Scythe. Ключевой принцип работы искусственного интеллекта — обучение за счет использования потребляемой информации. Экспериментаторы «скормили» программе десятки часов чистого вокала Juice WRLD, чтобы он сохранил и обработал все интонации, частотный диапазон и прочие детали. Для своего творчества продюсеры используют нейросеть DiffSVC.

По словам Sable, некоторые энтузиасты даже слишком много тренируют свой ИИ. Он рассказал, что пользователь Ridoraki загрузил в программу около 70 студийных сессий Juice WRLD, хотя было бы достаточно и 5. Для некоторых треков музыкальные новаторы лишь поднимают качество звучания, не дополняя их куплетами. Но другие композиции требуют буквального создания текста с нуля, и для этого у продюсеров есть кавер-артисты с похожими голосами.

После этого процесса ИИ обрабатывает голос и делает его похожим на вокал рэпера. Sable заявляет, что они стараются не переступать творческую грань и не используют нейросеть, чтобы создавать песни на темы, которые не свойственны Juice WRLD. Также он отметил, что является противником использования искусственного интеллекта для создания голосовых записей рэпера, в которых он делает провокационные заявления и рассказывает о других исполнителях. Такой контент вводит людей в заблуждение.

Shadow создает несуществующие композиции Lil Uzi Vert в коллаборации с артистом Uziclone. ИИ воссоздает голос рэпера, используя вокал «двойника» как фундамент. На данный момент кавер уже звучит почти неотличимо от реального произведения, но продюсеры утешают (слушателей или самих себя): до доминирования нейросетей в музыке еще далеко. Интернет-преступники уже используют искусственный интеллект для обмана поклонников Juice WRLD. 999Scythe рассказал, что его знакомый заплатил 2 000 долларов за «неизданный трек» рэпера, который оказался фальшивкой. И далеко не все фанаты разделяют ажиотаж вокруг ремастеров треков с помощью нейросети. Пользователи интернета поделились на два лагеря, а видео с такими композициями часто заваливают дизлайками.

Если энтузиасты продолжат развивать искусственный интеллект в подобном темпе, скоро даже профессионалы музыкальной индустрии не смогут отличить фейк от оригинала. Как и сами современные рэперы, которые записывают сотни песен в месяц и вряд ли помнят все до единой.