Holly+ — цифровой “близнец” экспериментальной исполнительницы Холли Херндон (Holly Herndon) из США. Она выпустила необычный клип-кавер на песню Долли Партон Jolene, в котором на самом деле поет не сама Херндон, а ее дипфейк-двойник Holly+ с помощью нейросети Spawn.
Генераторы визуального контента на основе искусственного интеллекта в последнее время получили огромную популярность. Они могут рисовать иллюстрации и картины по текстовому или голосовому описанию, а также создавать дипфейк-аватары. Технологии пошли еще дальше. И теперь нейросеть Spawn может петь человеческим голосом. В авангарде нового движения стоит Холли Херндон — она буквально подарила свой голос нейросети! И теперь искусственный интеллект вправе распоряжаться им “по своему усмотрению”.
Чтобы озвучить Spawn, Холли сделала немало записей своего голоса, использовала инструменты для преобразования текста в речь и обработки аудио. Результатом усердной работы стал кавер на песню Долли Партон Jolene в исполнении ИИ.
Исполнение Holly+ звучит довольно “плоско” при первом прослушивании. Некоторые фразы немного неестественны, и иногда встречаются цифровые артефакты, если вы внимательно прислушаетесь. Можно заметить неправильное произношение некоторых слов и неестественные паузы в местах, в которых аватар делает “вдох”. Но композиция получилась довольно целостной. Цифровой двойник Холли Херндон впечатляет способностью достаточно точно имитировать своего создателя.
Это говорит о том, что искусственный интеллект можно интегрировать практически в любой вид творчества.
Херндон создала платформу “Holly+” Здесь любой желающий музыкант может прослушать свою композицию в исполнении цифрового двойника Холли, нейросети Spawn. Забавы ради можно загрузить любой аудиофайл (например, любимую песню) длиной до пяти минут, и искусственный интеллект перепоет его.