科切拉音樂節(jié)使用虛幻引擎與AR技術(shù)，打造美輪美奐的舞臺(tái)效果
在觀看今年科切拉音樂節(jié)的YouTube直播時(shí),，如果你所見到的一切讓你震驚,，你絕不會(huì)是唯一一個(gè)有這種感覺的人。巨型鳳頭鸚鵡在舞臺(tái)上方展翅飛翔,，金色的花朵在人群上空盤旋,，F(xiàn)lume的焦點(diǎn)表演充滿了令人驚嘆的夢(mèng)幻視覺效果，讓歌迷不禁問道：“這是真實(shí)的嗎,？”
可答案是：不是,。
科切拉音樂節(jié)的組織方與&Pull、Six Degrees of Freedom及All of it Now的音樂家們攜手,，在他們的YouTube直播中融入了具有廣播節(jié)目質(zhì)量的增強(qiáng)現(xiàn)實(shí)（AR）效果,，為想要在表演中添加實(shí)時(shí)3D視覺效果的音樂家們開創(chuàng)了新時(shí)代。但與其他表演不同,，只有留在家中的人們才能享受到這些樂趣,，將原本“不過是又一場(chǎng)可看的節(jié)目”變成了必看的電視直播。
為主舞臺(tái)制作鳳頭鸚鵡
對(duì)于長(zhǎng)期關(guān)注科切拉音樂節(jié)的人來說,，這可能算不上是驚喜,。科切拉音樂節(jié)總是會(huì)為我們準(zhǔn)備一些特殊活動(dòng),。自從1999年以來,，該音樂節(jié)就以創(chuàng)造獨(dú)特體驗(yàn)而聞名，使人們津津樂道,，像是讓杰出樂隊(duì)的成員重聚在一起,；建造大型藝術(shù)裝置；讓圖帕克“重生”,。但今年,，科切拉音樂節(jié)的組織方想做一些不同的事情。
“我們的任務(wù)是在YouTube直播中創(chuàng)造印證AR概念的時(shí)刻,，讓數(shù)百萬(wàn)在家中觀看的人們感到特別而新鮮,?！笨魄欣魳饭?jié)創(chuàng)新負(fù)責(zé)人Sam Schoonover說。
雖然現(xiàn)場(chǎng)表演得到了大部分關(guān)注,，但科切拉音樂節(jié)幕后的無聲付出才是讓家庭觀眾觀看率上升的關(guān)鍵,。這一次，在家觀看科切拉音樂節(jié)的人數(shù)要多于該音樂節(jié)的往屆參加者（確切地說,，要多出幾百萬(wàn)人）,，這實(shí)際上將音樂節(jié)分成了兩個(gè)陣營(yíng)。對(duì)組織方來說,，這也是一場(chǎng)獨(dú)特的挑戰(zhàn),。如何讓每個(gè)“版本”的科切拉音樂節(jié)都能創(chuàng)造出特別的感覺，并且,，這是一場(chǎng)人們期望在其中看到大動(dòng)作的活動(dòng),，怎樣才能不負(fù)眾望？
Flume的團(tuán)隊(duì)樂于進(jìn)行嘗試,。通過與傳奇藝術(shù)家Jonathan Zawada,、Flume的創(chuàng)意團(tuán)隊(duì)以及節(jié)目設(shè)計(jì)師John McGuire展開合作，科切拉方面以Flume之前的巡演視效和音樂視頻為基礎(chǔ),，將所有節(jié)日活力和氛圍融入到了AR設(shè)計(jì)中,。
虛幻引擎在先進(jìn)的內(nèi)容創(chuàng)作管線中扮演了基礎(chǔ)角色。首先,，制作團(tuán)隊(duì)會(huì)從Blender,、Cinema 4D和3ds Max將動(dòng)畫模型導(dǎo)入到引擎中，這使團(tuán)隊(duì)能夠?qū)γ糠N視覺效果進(jìn)行測(cè)試,，并在演出前做出現(xiàn)場(chǎng)調(diào)整,。然后，經(jīng)過審批的圖像會(huì)被轉(zhuǎn)化成精細(xì)的最終像素序列,，借助運(yùn)行著虛幻引擎的媒體服務(wù)器、StypeLand的合成插件以及三臺(tái)真實(shí)廣播攝像機(jī)提供的stYpe追蹤數(shù)據(jù),，這些序列會(huì)被實(shí)時(shí)合成到Flume的直播表演中,。
“在虛幻引擎中使用著色器時(shí)，我們開發(fā)了一個(gè)3D對(duì)象遮蔽系統(tǒng),，幫助我們將3D模型擴(kuò)展到真實(shí)世界的尺寸,，并在幕后合成它們，”All of it Now的制作人Berto Mora說,，“然后,，我們創(chuàng)建了一個(gè)觸發(fā)器，這樣我們就可以根據(jù)樂隊(duì)的時(shí)間碼在虛幻引擎中自動(dòng)切換圖像,?！?/p>
意外驚喜和令人印象深刻的結(jié)果
結(jié)果令人印象深刻,！當(dāng)Flume在科切拉音樂節(jié)的主舞臺(tái)上表演著《Never Be Like You》、《Say Nothing》和《Tiny Cities》等歌曲時(shí),，他周圍華美而夢(mèng)幻的視覺效果也讓觀眾大為贊嘆,。除了演出中出現(xiàn)的巨型鳳頭鸚鵡和超現(xiàn)實(shí)花朵之外，還有引人注目的穿插效果,，包括舞臺(tái)上彈起的變形甜甜圈和從地面升起的光譜城彩虹塔,，它們?cè)谟^眾等待下一首歌曲時(shí)（對(duì)任何演唱會(huì)來說這都是最平淡的部分）出現(xiàn)，娛樂觀眾,。
“我們還遇到了一些意外驚喜,，”Six Degrees執(zhí)行制作人Juan Santillan回憶說，“例如,，我們不知道Beck會(huì)與Flume一起登臺(tái),，然而，花朵圖案在畫面中完美地圍繞著他,，就像專為他定做的一樣,。”
同時(shí),，在舞臺(tái)上,，所有視頻源首先會(huì)經(jīng)過現(xiàn)場(chǎng)色彩校正，然后進(jìn)入節(jié)目的AR卡車,，在那里,，AR視覺效果會(huì)被合成到現(xiàn)場(chǎng)廣播源中。感謝虛幻引擎的DMX集成,，合成效果非常逼真：團(tuán)隊(duì)甚至可以將所有虛擬光照同步到舞臺(tái)上,。合成之后，視頻源會(huì)被傳回到主要的廣播卡車中,，F(xiàn)lume的節(jié)目導(dǎo)演可以從AR攝像機(jī)中現(xiàn)場(chǎng)剪輯出最終結(jié)果,，這和他在傳統(tǒng)演出中所做的事情沒有區(qū)別。最終,，他們得到了一場(chǎng)無縫銜接,、時(shí)機(jī)完美的視覺體驗(yàn)，讓歌迷沉浸在音樂之中,。
“音樂節(jié)的體驗(yàn)就是要讓自己完全沉浸于音樂和氛圍中,，在這一刻沉醉，”科切拉音樂節(jié)現(xiàn)場(chǎng)AR制作人Eric Wagliardo補(bǔ)充說,，“通過現(xiàn)場(chǎng)AR,，我們將身處家中的歌迷帶到這個(gè)奇妙的地方，讓他們體驗(yàn)Flume和Zawanda超現(xiàn)實(shí)的想象力,。在這個(gè)地方,，有300英尺高的鳳頭鸚鵡夢(mèng)幻般地召喚著你,，也有超現(xiàn)實(shí)的花朵在空中盤旋?！?/p>
演唱會(huì)視效的未來
除了為Flume建造布景外,，科切拉音樂節(jié)的創(chuàng)新AR管線也開創(chuàng)了這樣一種未來：不僅能讓家中的歌迷看到增強(qiáng)現(xiàn)實(shí)的視覺效果，也可以讓現(xiàn)實(shí)世界的觀眾體驗(yàn)到,?！爱?dāng)鳥兒出現(xiàn)時(shí)，人們?cè)谥辈ブ械膮⑴c度瘋狂飆升,，”Schoonover回憶說,，“他們不確定那是真實(shí)存在的還是CG?！?/p>
對(duì)他來說,，這種參與度的上升代表著現(xiàn)場(chǎng)節(jié)目視效的一個(gè)轉(zhuǎn)折點(diǎn)：它為未來混合活動(dòng)和元宇宙節(jié)日提供了模板。
“隨著在線觀眾的增多,，數(shù)字活動(dòng)所帶來的獨(dú)特體驗(yàn)變得至關(guān)重要,。但是，思考新技術(shù)如何影響現(xiàn)場(chǎng)的體驗(yàn)也很重要,。我們希望這個(gè)項(xiàng)目能夠引領(lǐng)新時(shí)代,，通過AR眼鏡和虛擬世界讓歌迷體驗(yàn)到一種全新的音樂維度?！彼a(bǔ)充說,。
“對(duì)我們來說，從2D到3D的過渡將和從單聲道到立體聲的轉(zhuǎn)變一樣具有革命性,，虛幻引擎是實(shí)現(xiàn)這一過渡的關(guān)鍵,。虛幻引擎創(chuàng)造了一個(gè)環(huán)境，讓我們可以從始至終地測(cè)試想法,，迭代概念,，并為科切拉音樂節(jié)的歌迷提供難忘的體驗(yàn)，這也標(biāo)志著新未來的開始,。我們很期待來年能夠更進(jìn)一步,。”Wagliardo說,。
延伸科切拉宇宙
雖然AR可能占據(jù)了主要地位，但科切拉音樂節(jié)的組織方并沒有止步于此,，他們將實(shí)時(shí)技術(shù)的雄心延伸到了《堡壘之夜》,，為身處家中的歌迷提供了另一種挖掘科切拉音樂節(jié)體驗(yàn)的方式。受印地安人潮流啟發(fā)的服裝款式成為了《堡壘之夜》宇宙中的一部分,，同時(shí)還提供了與音樂聯(lián)動(dòng)的新配件,，展現(xiàn)了音樂節(jié)的有趣審美,。科切拉還通過官方的Icon Radio電臺(tái)接手了游戲內(nèi)的廣播,，播放30多位科切拉音樂家的歌曲,。科切拉宇宙誕生,！
打印本文
關(guān)閉窗口