Виртуальные музыкальные исполнители

Сетевое искусство не только визуальное, но и музыкальное вносит новые понятия и технологии в современное общество. С развитием виртуальной реальности и компьютерной графики в реальном мире, искусство дополнилось новым пространством для самовыражения и артисты начали использовать её в разных видах творчества. Большее распространение получило в художественной сфере и сфере видео. Такие виды графики стали дополняться синтезом речи, который начал появляться еще в 1930-х годах, мощное развитие пришлось на конец ХХ века и начало XXI.

С начала 2000-х стало активно развиваться направление в музыке, в котором музыкальные исполнители являются вымышленными персонажами, а их работы выходят в виде мультипликационных клипов. Данное явление получило название «виртуальные музыкальные исполнители». Хотя исторически оно начинается еще в середине XX века, подробного рассмотрения в науке оно не получило. Так с начала 00-х в музыкальной индустрии начали развиваться виртуальные исполнители и целые группы, за которыми, в основном, стоят голоса реальных людей или синтез их речи.

Эти технологии используются как любителями, так и популярными артистами или компаниями для создания имиджа их бренда или продвижения какого-либо продукта, также, существую самостоятельные исполнители, которые выступают, пишут песни и снимают клипы от лица своего персонажа. Средства и способы, с помощью которых создаются такие исполнители, что стоит в их основе, как авторы идеи воплощают это в реальность и весь процесс от моделирования до «живых выступлений» и написания музыки интересно рассмотреть и изучить.

Чтобы подробнее разобраться в этой теме нужно было обратиться к литературным источникам из Интернета, которые занимаются изучением этой темы и авторов. которые работают в этой или близкой сфере. В качестве визуального ряда было выбрано использовать скриншоты выступлений и музыкальных клипов, а также дополнительные материалы, которые производят для продвижения проекта компании или фанаты. Для примеров были отобраны наиболее яркие и популярные виртуальные исполнители, хотя существую и другие.

Структурирование информации производилось по хронологическому порядку, а также, если смотреть на карту Мира, по регионам слева направо. Таким образом получилось выстроить логичное исследование темы виртуальных исполнителей и рубрикатор:

Хотя в то время этот термин еще не был придуман, в 1958 году появились «Элвин и бурундуки», они были первой виртуальной группой, получившей широкую известность. В группе используется четыре голоса: Элвин, его братья Саймон и Теодор и их менеджер/отец Дэйв Севилл; их голоса были созданы Россом Багдасаряном, который ускорил запись своего голоса, чтобы создать характерный звук.

Изначально «Элвин и бурундуки» были без визуального изображения и существовали только в качестве безликих имен и голосов, после появились куклы (похожие на театральные). И хотя сейчас мы больше знаем о Элвине и его братьях благодаря современным мультфильмам, их творчество и создание оказало большое внимание на музыкальное и сетевое творчество.

Первые изобретения, связанные с синтезом речи человека начали появляться в Японии, но именно песня, исполненная компьютером IBM 7094 синтезированным голосом, была создана и записана в Америке в 1974 году. Он исполнил песню Daisy Bell, которую написал Гарри Дэйкр в 1892 году. Вокал программировали Джон Келли и Кэрол Локбаум, а аккомпанемент — Макс Мэтьюс.

Современным примером и объемом виртуальных музыкальных групп может похвастаться американская компания и разработчик видеоигр Riot Games. Изначально у них появилась игра на основе движка и карты Worlds of Warcraft — League of Legends — которая принесла им популярность и верных фанатов-игроков. Вселенная League of Legends разнообразна на различные страны и миры, благодаря большой коллекцией линеек скинов, которые легли в основу появления музыкальных групп авторства Riot Games, главными исполнителями которых являются их персонажи.

Первой из появившихся групп стала Pentakil, которая исполняет хэви-метал рок-музыку, они появились в 2014 году и выпустили два альбома с камео некоторых известных исполнителей (Йорн Ланде — вокалист норвежской группы Masterplan и Зиппи Терт из британской группы DragonForce), на одну из песен вышел анимационный клип, позднее в 2021 году вышла обновленная линейка образов, клип и новый альбом группы.

Второй стала k-pop герл-группа K/DA, изначально во время своего дебюта в 2018 состояла из четырех участниц: Ари, Акали, Эвелинн и Кай’Сы, позднее в 2020 к ним присоединилась Серафина (в честь её выхода в игру она записала фит с группой). Голосами девушек стали известные реальные исполнительницы: Мэдисон Бир, Джейра Бёрнс, (G)I-DLE, Миён и Соён. В общей сумме группа выпустила один сингл и мини-альбом, к ним вышли анимационные клипы.

На чемпионатах мира по League of Legends в 2018 и 2020 годах группа появлялась в виде проекций и наложенной 3D VR графике, первое появление было лучше второго, что понятно по откликам фанатов и кадрам с концертов, это связывают с пандемией или нехваткой сотрудников.

Третья из групп Riot Games — «True Damage»в жанре хип-хоп. В ее состав вошли чемпионы той же игры: Киана, Сенна, Акали, Экко и Ясуо. Роль чемпионов исполнили музыканты: Бекки Джи, Кеке Палмер, SOYEON из (G)I-DLE, DUCKWRTH и Thutmose. True Damage исполнили свою первую песню под названием GIANTS с использованием голограммы и технологии дополненной реальности 10 ноября 2019 года, что совпало с открытием финального матча чемпионата мира по League of Legends 2019 года. Также, с ними была выпущена коллаборация с Louis Vuitton для престижного образа на Киану.

Одни из наиболее популярных примеров среди массового слушателя виртуальных исполнителей чаще встречаются в Европе.

Так, например, британская группа Gorillaz, созданная в 1998, которая породила целое анимационное явление среди музыкальных исполнителей. Вселенная Дэймона Албарна и Джейми Хьюлетта очень обширна и основывается на четырех основных персонажах, которые являются участниками группы. Для них вокал записывают и пишут люди, но именно 2-D, Нудл и другие являются героями клипов и появляются на концертах в виде голограмм. Их песни быстро стали чрезвычайно популярны, а сам коллектив попал в Книгу рекордов Гиннеса как «самая успешная виртуальная группа».

Еще одним очень популярным исполнителем в начале 2000-х был Crazy Frog (досл. «Безумный лягушонок», изначально известный как англ. The Annoying Thing — «надоедливая штука»), созданный шведским дизайнером Эриком Вернквистом, изначально подразумевался как анимация, которая сопровождает мелодию для рингтона, но позже из-за своей популярности стал полноценным персонажем с историей, от чьего имени выпускались треки.

Этот полуголый странный лягушонок нередко становился жертвой цензуры, на него часто подавали жалобу зрители телеэкранов, по которым шла реклама и клипы с его участием. При этом всем Crazy Frog был очень популярным, но вызывал у слушателей и зрителей различные чувства в отношении своего «творчества».

Относительно недавно в Европе появился новый виртуальный коллектив — финско-датско-британская группа Studio Killers, которые практически сразу завирусились с клипами на YouTube, состоят из главной вокалистки Черри, клавишницы Голди Фокс, ди-джея Дайны Минк и менеджера Bipolar Bear, при этом реальные основатели группы не раскрывают своих личностей. На концертах появляются только реальные копии Фокс и Минк в масках, а Черри присутствует только в виде проекции.

В России есть всем знакомый пример популярной виртуальной музыкальной исполнительницы Глюк’oZa. Несмотря на то, что прообразом для мультяшной героини, которую все в первую очередь представляют при упоминании исполнительницы, выступала сама певица Наталья Чистякова-Ионова, все равно образ выдуманной героини стал лицом как клипов, так и самих песен. Вселенная клипов многогранна и продолжает развиваться до настоящего времени, даже утратив специфичную ей компьютерную графику.

Еще один не столь популярный российский пример виртуальных исполнителей Dvar — анонимная виртуальная группа, играющая дарквейв и электронную музыку. Личности членов группы остаются неизвестными, в одном из интервью они заявили: «Двар — это то, что явилось во сне». Участники группы утверждают, что слышали во сне музыку, представленную им существом по имени Двар. Текст песен состоит из, будто, выдуманного языка, который некоторые принимают за некий древний язык.

На азиатском рынке представлено большое количество различных музыкальных исполнителей, которые сейчас имеют и виртуальные аватары, либо вообще создавались как персонажи. А развитие именно нереальных голосов и аватаров для них началось с ПО-синтезатора речи Vocaloid.

Изначально он был создан в 2000 году в Японии, а после при поддержке корпорации Yamaha было разработано программное обеспечение для коммерческого продукта «Vocaloid», выпущенного в 2004 году.

Программа состоит из двух частей: —Vocaloid Editor — редактор для работы с текстом и мелодией, собственно интерфейс программы в котором можно создать мелодию и использовать те или иные эффекты. —Голосовые банки — это набор звуковых сэмплов того или иного актера озвучки, на основании которого и происходит сам синтез пения. Голоса могут быть как мужские, так и женские, у некоторых вокалоидов они совмещены или вообще являются детскими. То есть сами голоса все равно состоят из реальных голосов людей или актеров озвучки, но программа подбирает различные звуки их записанного голоса и синтезирует их в общий файл. Работать с программой может любой желающий композитор, их песни могут звучать разными голосами вокалоидов.

Создавать для голосов синтезатора личности и внешность стало успешным ходом, который, благодаря культуре Японии, стал очень популярным и получил большое распространение. На данный момент существует более 80 вокалоидов, поющих не только на японском языках.

Самым популярным вокалоидом-персонажем стала Мику Хацуне (в некоторых адаптациях Хатсуне), она до сих пор конкурирует со многими реальными исполнителями в Японии. Она появилась в 2007 году как персонаж для продажи программ Crypton, но вскоре стала самостоятельной исполнительницей песен разных авторов. Движок Vocaloid 2, разработанный производителем музыкальной индустрии Yamaha, основан на аудиобиблиотеке, состоящей из записей вокальных песен актрисы озвучивания Фудзиты Саки, выступающей в виде анимационного персонажа.

К 2009 году популярность Хацуне Мику стала такой, что было решено выводить её на рынок реальных концертов, первое выступление было в рамках фестиваля Animelo Summer Live в сопровождении живых музыкантов, а уже в 2010 состоялся полноценный сольный концерт. После этого Мику объездила множество городов и стран с гастролями.

Для концертов была придумана схема как вывести виртуальную исполнительницу на реальную сцену. Она заключалась в двух экранах, на которые проецировалось изображение певицы. Это работало только с выключенным светом, поэтому до сих пор концерты вокалоидов проводятся без яркого освещения, чтобы не перебивать проекцию и создавалось впечатление реальности происходящего. При этом на первых концертах проекции иногда не было и использовался просто большой плазменный экран, но это оказалось непрактично, поэтому полностью перешли на технологию с проекцией на экраны.

Сейчас технологии развиваются и используются как шлемы и очки виртуальной реальности, так и метод дополненной реальности, который начали использовать изначально для спецэффектов в кинематографе. Суть метода в том, что компьютер, обрабатывая реальное видео, «вписывает» в него виртуального исполнителя. Но сейчас быстродействия компьютера хватает на то, чтобы воспроизводить такие проекции в режиме реального времени. Единственный минус этого метода заключается в том, что зритель в зале не видит этой проекции на сцене. (По этому же методу были показаны выступления K/DA и True Damage на Worlds разных годов, но в случае с последними применялись и проекции на экраны).

Выступления на концертах строятся на хореографии и танцах вокалоидов, которые записываются с помощью программы MikuMikuDance и сенсора захвата движений Kinnect. На танцора надеваются датчики для захвата движения, а после записывается и монтируется видео для модельки исполнителя.

Единственный минус этого подхода — отсутствие обратной связи со стороны вокалоида, потому что при системных сбоях на концерте сложно работать с такой картинкой. Недавно был проведен экспериментальный концерт, на котором Хацунэ Мику выступала в роли диджея и было испытание системы Li-VR, при котором проекция Мику управлялась живым человеком в реальном времени. В процессе шоу был сбой звука и живая реакция Мику была очень уместна.

В итоге исследования можно сказать, зачастую все виртуальное в музыкальных исполнителях — зачастую аватары, которые выступают от лица группы или используются в видеоклипах, а действительно полностью виртуальные исполнители немногочисленны и относятся больше к каким-то узким кругам увлечений (игры, аниме и другие).

В будущем, скорее всего, начнут появляться действительно виртуальные исполнители при помощи нейросетей без генерации голоса из базы данных реальных голосов, а проведение концертов таких представителей будут не только в виртуальной реальности, но и в реальной жизни. Технологии развиваются и на рынке появляются новые и интересные идеи, их использование продвигается и вызывает разнообразные мнения по этому поводу, но творчество и искусство будет продолжать экспериментировать с ними.