«Я думаю, что ключ к эпохе после короны — это то, насколько реально мы можем чувствовать себя в виртуальном мире».
Автор: Сэм Байфорд
Единственный «живой» концерт, который мне удалось посетить в этом году, прошёл в неожиданном месте. В пятницу вечером я смотрел перфоманс японской рок-звезды Мияви, который работает над своим проектом «Miyavi Virtual», в teamLab Planets, популярном туристическом месте в Токио. Miyavi Virtual 3.0 уже доступен для покупки в стриминговом сервисе — это живое выступление, в котором кадры с дронов сочетаются с великолепной цифровой графикой.
В какой-то момент Мияви, жизнерадостный, восторженный персонаж с сине-зелеными волосами и жилистым телом, покрытым черными татуировками, подошел ко мне, чтобы тронуть за локоть и спросить не чувствую ли я сонливость. Честно говоря, он был прав — оказывается, что запись блестящих прямых трансляций может потребовать долгого ожидания далеко за полночь.
Но именно так в 2020 всё и происходит. Поскольку пандемия коронавируса продолжает лишать музыкантов возможности играть перед живой аудиторией или даже записывать музыкальные клипы в традиционных студиях, Мияви и его команда прибегли к современным технологиям в необычные часы работы, дабы продолжать выступать перед фанатами.
Такамаса Исихара родился в Осаке в 1981 году. Мияви наиболее известен своей динамичной, запоминающейся электро-рок-музыкой и неистовой игрой на гитаре. Он начинал в группе Dué le Quartz, а затем запустил сольную карьеру, которая помимо музыки включает в себя съёмки в фильмах, в том числе и голливудских (Мияви можно увидеть в фильмах «Несломленный» и «Конг. Остров черепа»).
Другими словами, у него, как правило, календарь забит под завязку, и 2020 год не исключение. Мияви обычно базируется в Лос-Анджелесе, в начале этого года его приглашали в несколько фильмов, телепроектов и рекламную кампанию Gucci. В апреле планировался запуск сольного альбома Holy Nights с последующим туром. Но к началу марта музыкант снова оказался в Токио, и стало ясно, что планы придется изменить.
«Что касается нас, артистов, музыкантов, креаторов, мы не можем сейчас давать живые выступления» — рассказывал он мне ранее через Zoom. «Так что это действительно определяющее время, чтобы найти новый путь, новую форму».
Начнем с того, что необходимость для Мияви работать как в Японии, так и в США усложняет ситуацию. «Честно говоря, у нас было много путей и идей, и также много споров, потому что никто не знал, на что это будет похоже» — говорит он. «В каждой стране своя ситуация. Обычно у меня есть команда в Японии, в Токио, и команда в Америке, так что мы все общаемся. Но ситуации [с COVID-19], в которых мы находимся, разные. Так что мы часто слышали: «Сейчас не время снимать видеоклип». Мы учитывали это, но не останавливались, потому что в Японии даже такие времена магазины аудиозаписей не закрывались. Поэтому мы планировали проводить регулярную кампанию, и я даже принимал участие в сьёмках телепрограмм».
Но вскоре стало очевидно, что планы снять два музыкальных клипа в США пошли насмарку. «В Америке объявление о чрезвычайном положении уже произошло, и как только мы узнали, что Мияви не может вылететь в Штаты, нам пришлось переключиться на виртуальное творчество» — говорит Мияви (иногда он говорит от третьего лица.). «Вот почему мы начали снимать музыкальное видео на «Holy Nights» с нашими аниматорами, чтобы создать мир без меня».
10 мая Мияви выложил на YouTube клип «Holy Nights», созданный американской творческой командой, в котором чувствуется влияние аниме, провозгласив его стартом «Miyavi Virtual». Но музыкальное аниме-видео не равно реальному выступлению. Требовался новый технологический подход.
Режиссер Дэвид Чихелна обсудил с креативными директорами Мияви из США Дайаном Джонгом и Энни Столл использование объемного захвата видео для следующего сингла музыканта под названием «Need for Speed». Это метод, в котором одновременно используются несколько камер для захвата 3D-модели, которую можно использовать в визуализации CGI. Он позволяет снимать «виртуальное» видео, основанное на реальных характеристиках — и, конечно, сейчас это безопаснее практиковать, чем традиционную съемку.
«Единственная физическая съемка, которую мы сделали, происходила в студии объемного захвата в Японии» — рассказывает Чихелна. «участие принимало минимум людей — в основном Мияви, записывающий 3D-модели своих движений. Остальная часть команды присутствовала по Zoom, я руководил процессом удаленно».
«Эта технология на стыке VR, AR и реальности, поэтому я был действительно очарован» — говорит Мияви. «Тем более, что на ней запечатлены мои татуировки и прическа! Так что выбрать костюм было довольно сложно — мне не разрешалось надевать какие-либо зеленые вещи, потому что во время съемок меня окружал зеленый фон. Это все – фантазия. Это был действительно интересный опыт, и я чувствовал будущее. Думаю, что ключом к эпохе посткороны является то, насколько реально мы можем чувствовать себя в виртуальном мире».
«У студии захвата есть десятки камер, направленных на музыканта, записывающих видео, которое затем преобразуется в покадровые 3D-модели, воспроизводимые на компьютерном движке» — говорит Чихелна. «Съёмка заняла полдня. Остальное (99 процентов) полностью работа компьютера и движка Unity — движения камеры, освещение, декорации, визуальные эффекты, цвет. Я даже использовал дополненную реальность для записи снимков с камеры в своей гостиной».
«Объем данных огромен» — добавляет Мияви — «в клипе надо было уложиться в 7 минут — мы сняли больше, но Дэвид и его сотрудники должны были просмотреть все материалы, и отправить их из Токио в Лос-Анджелес, что также весьма непросто и трудозатратно. Я очень признателен всему персоналу, Дэвид и его команда проделали большую работу».
Результат — выглядит как видеоигра с Мияви в главной роли. Разрешение его модели, конечно, не такое высокое, как у обычной камеры или чего-то, что визуализировано в 3D вручную, но всё равно потрясает.
«Это было круто — я использую суперсилы, когда играю на гитаре!» — Мияви смеется, добавляя, что все эффекты были добавлены позже, в зависимости от его перфоманса. «Я знаю, что для них это действительно тяжелая работа, но для меня весело просто прыгать. Нам всем нравятся манга и аниме, Dragon Ball и Акира, у всех нас одни и те же отсылки, поэтому я думаю, что мы все связаны, даже если не понимаем язык».
Следующим шагом для Мияви было выяснить, как он может выступать вживую онлайн. Сначала он обратился к потоковой передаче на таких платформах, как Twitch, YouTube, Weibo и Line, организовал студию у себя дома и провел концерт «Virtual Live» за своим столом. Неудивительно, что результаты были не такими блестящими, как в случае видео «Need for Speed», хотя и весьма обнадёживающими.
«Это довольно сложно — настроить OBS, подключить звук внутри моего ПК, я самостоятельно занимался микшированием звука, освещением и всем остальным» — вспоминает Мияви. «Так что я на своей шкуре почувствовал, что не профессионал в подобных вещах. Но я просто не хотел останавливаться, потому что мы можем сделать что-то сделать в любой ситуации, и я не хотел сдаваться — просто [хотел] что-то найти, найти способ двигаться вперед. И я по-прежнему считаю, что это был правильный шаг, даже если он не был идеальным, по крайней мере, я мог быть на связи со своими поклонниками и проводить время с ними и со своим творчеством».
Затем Мияви хотел попробовать совместить эксперименты в области высоких технологий с прямой трансляцией. «Мы только что вели трансляцию из студии в Токио с помощью дронов» — говорит он. «Это было для меня самым главным приоритетом — я даже не знал, как долго дроны могут летать, понимаете? И это тот подход, который я пытаюсь применить в реальном мире».
Miyavi Virtual Live Level 2.0 представлял собой выступление с живым барабанщиком на социально дистанцированной сцене без присутствия публики, за исключением стайки дронов, летающих вокруг группы и снимающих ее выступление. «Вы можете делать что угодно с объемным захватом, но это требует времени для продакшена, и я хотел вести трансляцию, используя свое настоящее тело. Экспериментировать – это по-настоящему важно».
Я не видел законченную версию Miyavi Virtual 3.0, но из того, что мне удалось подсмотреть, это похоже на продашн CGI — только в гораздо более визуально впечатляющей обстановке. Большая часть видео снимается с помощью беспилотника, а зеркала и свет, окружающие Мияви, создают впечатление, что он выступает в зрелищной пустоте. Есть причина, по которой teamLab Planets была, пожалуй, самой популярной достопримечательностью в ленте Instagram Токио с тех пор, как она открылась пару лет назад.
Однако, в отличие от 2.0, Virtual 3.0 не будет транслироваться в прямом эфире — он был предварительно записан, и вам нужно купить билет за 30 долларов, чтобы посмотреть его в течение периода его доступности. В то время как первоначальный план предусматривал живое выступление, Мияви говорит, что решение о переходе на предварительную запись «связано с намерением создать и приоритизировать творчество с высоким качеством видео, потрясающим световым дизайном и т.д (я не уверен, попадут ли съемки, на которых я присутствовал, на самом деле в финальную постановку, но вы, по крайней мере, можете поверить в то, что он был там и выступал вживую).
Я хотел знать, куда, по мнению Мияви, он может зайти с этими виртуальными постановками. Еще до пандемии виртуальные концерты становились все более популярными, а в авангарде была игра Fortnite. Хотел бы он исследовать эту область?
«Да, я бы с удовольствием!» — отвечает музыкант. «Потому что теперь я действительно увлекаюсь Fortnite — я начал играть в 2018 году, когда снимал продолжение Maleficent в Лондоне, потому что у меня было много времени, ожидая своей очереди, и я играл со своими дочерьми. Теперь я играю с дочерьми еще до того, как они пойдут в школу — мы называем это «For-утром», встаём и играем 30 или 45 минут. Я чувствую, что моя музыка связана с этими играми. Взять, например «Need for Speed» — [моя жена] Мелоди связана с этой игрой! Она была одним из персонажей Need for Speed [EA] более 10 лет назад. Итак, Need for Speed, Fortnite, мы считаем, что музыка Мияви действительно работает с этими высокоэнергетическими концепциями. Но я всегда стараюсь не играть слишком много!».
Однако, что касается реальных игровых концертов в Fortnite, Мияви считает, что есть возможности для улучшения. «Это, безусловно, круто в качестве рекламы», — говорит он о недавнем мероприятии Трэвиса Скотта. «Людей было много — 10 или 20 миллионов, да? Это огромное количество, даже до этого это сделали Маршмелло, Стив Аоки и другие крупные игроки. Это круто, но я не знаю, насколько хорошо он выступил. Это творчество, и это круто. Но должна присутствовать химия связи между реальным и виртуальным мирами. Концерт был на 90 процентов виртуальным, а музыку создавали люди. Так что я не чувствовал себя настоящим в этом виртуальном мире. Конечно, это здорово, и я очень уважаю это, но я все же думаю, что надо стремиться к более тесному контакту с людьми в виртуальном мире».
Мияви осторожно отмечает, что это экспериментирование является прямым результатом отчаянного периода в истории человечества. «Я не утверждаю, что мне нравится это время» — говорит он. «В мире происходит множество безумных и печальных вещей, люди теряют работу. Политика становится действительно беспорядочной, особенно в Штатах. А затем, сразу после короны, начались [протесты] Black Lives Matter — рано или поздно это должно было произойти. Это проблема не только США, но и Японии в некотором роде».
Мияви считает, что глобальная ситуация побудит людей жить и работать по-новому даже после того, как ситуация улучшится – это касается в том числе его самого. «Я много путешествую, мне нравится смотреть на вещи своими глазами» — говорит он. «Очень важно почувствовать атмосферу. Но в то же время мир будет другим, несмотря ни на что. Я думаю, что даже если мы вернемся к нормальной жизни, наш образ жизни будет другим, и образ нашего творчества изменится. Потому что теперь мы знаем, что можем. Эта ситуация как бы подтолкнула нас вперед. Мы должны были найти ответы — что важно? Какова основная ценность? Каков смысл музыки, которую мы делаем?».
«Навык, который я приобрел в этой жизни — играть на гитаре этим физическим телом, поэтому я хочу найти способ сочетать его с виртуальными технологиями. Это моя ответственность как мост к следующему поколению».
Оригинал: TheVerge
