早在二十年前,流行音樂明星就有許多成熟的渠道培養(yǎng)聽眾群,,例如:銷售唱片,、電臺播放、音樂視頻和現(xiàn)場演出,。如今,,歌手和歌迷之間又有了一條激動人心的新紐帶——虛擬世界,。具有開拓精神的流行音樂明星正在擁抱數(shù)字領(lǐng)域,這不僅讓現(xiàn)有的支持者感到欣喜,,也使明星能夠接觸到全新的歌迷群體,。
Aya Nakamura正是這樣一位革新者。最近,,在《堡壘之夜》Soundwave系列演唱會(由世界各地歌手主打獻(xiàn)唱的一系列音樂體驗)中,這位稱霸音樂排行榜的法國籍馬里裔歌手擔(dān)任了主唱,。
最近,,《堡壘之夜》的玩家受邀參加一場完全使用《堡壘之夜》創(chuàng)意模式工具集構(gòu)建的活動。在這次活動中,,法國歌手首次在《堡壘之夜》中傾情獻(xiàn)唱,,帶來了一場開創(chuàng)性的音樂體驗。
Aya和她的唱片公司Rec. 118(隸屬于法國華納音樂)與XR工作室MADO XR合作,,在MetaHuman Creator的幫助下創(chuàng)造了這位明星的數(shù)字替身,,與此同時,他們還使用虛幻引擎5,,為將在體驗內(nèi)播放的音樂視頻構(gòu)建了虛擬環(huán)境,。
使用MetaHuman創(chuàng)造逼真的虛擬化身
“當(dāng)我聽到這個項目時,我立即意識到,,它具有巨大的突破性意義,。”MADO XR的創(chuàng)始人,、首席執(zhí)行官兼創(chuàng)意總監(jiān)Louis de Castro說,。
對De Castro來說,Aya Nakamura在Soundwave系列演唱會中的演出完美地詮釋了數(shù)字世界如何成為歌手的舞臺,?!拔覍⑺胂蟪梢粋€巨大的游樂場,它不僅可以激發(fā)我們的想象力,,也能夠讓我們從不同角度看待演出,。”他解釋說,,“能夠參與一個展現(xiàn)元宇宙所有力量的巨型項目,,我感覺自己成了一名開拓者。難道還有比這更讓人興奮的事嗎,?”
對Aya Nakamura和法國樂壇來說,,這場虛擬體驗代表了一座里程碑——Aya本人也深知這一點?!斑@次合作讓我有機會向世界各地的新老歌迷獻(xiàn)上我迄今為止最大規(guī)模的演出,,”她在活動前這樣說,,“我迫不及待地想與大家分享我的音樂,成為第一個與《堡壘之夜》合作的法國歌手,!”
法國華納音樂的總裁Alain Veille解釋說,,通過在《堡壘之夜》這樣的虛擬世界中舉辦音樂體驗,歌手取得了難得的機會,,讓他們能夠在歌迷所熟悉的地方與歌迷們相聚,。“通過進入《堡壘之夜》這類備受玩家喜愛的游戲,,歌手將直接與擁有共同興趣的歌迷們緊密聯(lián)系在一起,。”他說,,“我們從歌迷那里聽到,,他們對自己喜愛的歌手所做出的一種常見正面評價就是‘我竟然不知道他/她是《堡壘之夜》的粉絲’?!?/p>
除了以激動人心的新方式讓歌手與歌迷建立聯(lián)系外,,虛擬體驗也為繁忙的歌手們提供了一種切實可行的途徑,使他們能夠一次接觸到數(shù)百萬人,?!艾F(xiàn)場巡演需要跨州越郡,前往多個城市和場館,,相比之下,,這種方式為我們帶來了更大的靈活性,我們可以隨機應(yīng)變地安排歌手的日程,,處理好各種任務(wù),。”Veille說,。
Aya的團隊能夠在項目時間表中將這場活動納入考量,,這甚至啟發(fā)了團隊想到利用MetaHuman Creator創(chuàng)造歌手的虛擬化身,在活動過程中使用,?!芭c現(xiàn)場演唱會或巡演中需要真人演出的要求相比,虛擬演唱會的制作工作更加靈活,?!盫eille解釋說。
虛擬世界是樂壇的新前沿,。從唱片公司,、歌手到歌迷,所有人都在共同探究,,這些數(shù)字空間將對歌手和歌迷間的關(guān)系產(chǎn)生何種意義,。
正如華納音樂集團首席數(shù)字官Oana Ruxandra所解釋的那樣,,這意味著他們將與歌手、其團隊,、其歌迷以及平臺一起,,攜手學(xué)習(xí)?!霸谶@個與Aya共同完成的項目中,,我們試驗了新工具,使她能夠更全面地為自己建立愿景,?!彼f。
“例如,,這是我們第一次在虛幻引擎5環(huán)境中使用MetaHuman工具。無論是動畫保真度,,還是在虛擬空間中捕捉Aya真實動作的能力,,都使我們大開眼界,我們所有人都感到無比激動和振奮,?!?/p>
使用虛幻引擎5創(chuàng)造虛擬世界
MADO XR與音樂及數(shù)字行業(yè)的優(yōu)秀資深人士合作,設(shè)計了視覺概念,、劇本和歌手的虛擬化身,。
該團隊與導(dǎo)演二人組The Quiffs聯(lián)手打磨了音樂視頻的劇本。巴黎3D掃描工作室Scan Engine負(fù)責(zé)掃描Aya,,獲得數(shù)字?jǐn)?shù)據(jù),,然后,創(chuàng)意數(shù)字工作室Shape Shifters將利用這些數(shù)據(jù)為她制作虛擬化身,。Komet Xperience的法國美術(shù)師團隊也參與了合作,,為將在體驗屏幕上播放的音樂視頻開發(fā)虛擬環(huán)境。
開發(fā)過程的第一步就是掃描,。團隊拍攝了150多張Aya臉部和身體的照片,,用于創(chuàng)建高保真掃描,然后他們將掃描數(shù)據(jù)傳送到了MetaHuman Creator中,。通過虛幻引擎最新MetaHuman插件的“網(wǎng)格體轉(zhuǎn)MetaHuman”功能,,現(xiàn)在,任何人都可以完成這一流程,?!霸谶@個過程中,最具挑戰(zhàn)性的部分就是刻畫出使她有‘人味’的細(xì)節(jié)——調(diào)整唇色,、膚色和臉部陰影,,而我們可以在MetaHuman Creator中重現(xiàn)這一切,。”De Castro說,,“下一步是重新裝配面部綁定,,讓她能夠表露情緒。之后,,我們會通過動作捕捉制作動畫,。”
上面提到的面部綁定重新裝配過程現(xiàn)在可以自動完成,。De Castro認(rèn)為,,在創(chuàng)造數(shù)字人類方面,MetaHuman Creator引領(lǐng)了一場變革,?!白蠲畹牟糠质牵瑹o論是熟練的3D美術(shù)師,,還是初學(xué)者,,任何類型的創(chuàng)作者都可以利用它參與到虛擬化身的創(chuàng)作中?!彼f,,“它容易使用,界面直觀,,即使是以前對技術(shù)一無所知的人,,也能夠通過它提供的指南塑造一個相當(dāng)不錯的虛擬化身?!?/p>
在傳統(tǒng)管線中,,要模仿真實人類的面部表情,就必須重新制作面部綁定,、動畫和骨骼,。De Castro很早就接受了數(shù)字人類技術(shù),他見證了這項技術(shù)已在多大程度上超越了傳統(tǒng)管線,?!皬倪@種意義上說,MetaHuman Creator確實是一款‘一次性’工具,?!彼f。
歌手本人的反應(yīng)是檢驗團隊成功與否的最佳試金石,?!爱?dāng)我看到我的虛擬化身時,我真的很驚訝?!盇ya說,,“看起來如此真實——尤其是動作和姿態(tài)。我立刻就認(rèn)出了那是我自己,,這給我留下了深刻的印象,!”
Aya的演出已在《堡壘之夜》內(nèi)的虛擬環(huán)境中通過屏幕公映。經(jīng)過Atlas Creative Studios的開發(fā),,玩家能夠在探索這個虛擬世界的同時體驗Aya的音樂,。
Atlas的團隊盡心竭力,在玩家穿行的虛擬世界中重現(xiàn)了音樂視頻CG畫面的外觀和感覺,。見過音樂視頻中的數(shù)字Aya以及由UE5構(gòu)建的環(huán)境后,,通常來說,玩家會期待在《堡壘之夜》中看到的更加逼真的外觀,,因此,,團隊必須深入研究《堡壘之夜》創(chuàng)意模式的工具集,將兩者更好地匹配起來,。
“我們制作的很多東西看起來不一定像典型的《堡壘之夜》地圖,,因為我們必須大量調(diào)整光照以及各種不同的東西,使它們的外觀與視頻中相符,。”工作室聯(lián)合創(chuàng)始人兼首席執(zhí)行官Michael Herriger解釋說,,“這就是最酷的地方——你在《堡壘之夜》中,,但同時又感受到了不同于《堡壘之夜》的體驗,這真讓人興奮,?!?/p>
音樂體驗的未來
Ruxandra稱,華納音樂認(rèn)為,,未來將出現(xiàn)基于超薄頭盔設(shè)備的超真實元宇宙體驗,。“這些元宇宙體驗將具有持久性,、同步性和實時性,。”她說,,“它們將跨越數(shù)字世界和物理世界,,提供前所未有的互操作性,充滿由廣泛內(nèi)容貢獻(xiàn)者所提供的內(nèi)容,,并具備功能齊全的獨立經(jīng)濟機制,。”
Ruxandra繼續(xù)說,在這些元宇宙體驗中,,音樂將成為互動,、交流和消費的主要形式?!皩ξ覀兊母枋謥碚f,,能夠在身臨其境的環(huán)境中以可定制的實時方式與歌迷互動,將創(chuàng)造無窮的可能性,?!彼忉屨f,“此時此刻,,能夠在這些未來體驗的開始階段對其進行挖掘研究,,我們感到萬分激動。這將確保我們?yōu)楦枋痔峁┍匦璧墓ぞ?,使他們成為這些虛擬空間中的權(quán)威人物,。”
對De Castro來說,,《堡壘之夜》完美地詮釋了Ruxandra所描述的虛擬音樂體驗,。“承認(rèn)吧,,沒有誰能超越《堡壘之夜》團隊,,推出更精彩的虛擬表演?!彼f,,“沒有什么派對能與《堡壘之夜》的派對相媲美,當(dāng)提及制作最出色的游戲內(nèi)演唱會時,,Epic Games也借此樹立了‘具有前瞻思維的主辦方’這一形象,。
“這個平臺向我們證明了,如果想將游戲玩家,、歌手,、美術(shù)師和設(shè)計師聚集在一起,它將是首要選擇,。元宇宙已逐漸成為熱門話題,,而這正是展示數(shù)字化現(xiàn)實運作方式的最佳范例?!?/p>
本文轉(zhuǎn)自虛幻引擎官網(wǎng)~