你冰鎮(zhèn)了最愛的飲料,,點(diǎn)了披薩,,還邀請了朋友過來,。期待了數(shù)月之久,你打開了電視,。NFL新賽季開始了,和數(shù)百萬美國人一樣,,你可能會觀看《FOX NFL Sunday》,。三十年來,F(xiàn)OX Sports這檔賽前節(jié)目一直是比賽日不可或缺的一部分,,憑借預(yù)評,、分析和專題討論,它已四次獲得艾美獎,。
然而今年,,該節(jié)目令人印象深刻的廣播報道已在幕后悄然發(fā)生變化?!禙OX NFL Sunday》首次在由虛幻引擎驅(qū)動的全新LED虛擬制片設(shè)施中攝制,。為了完成該設(shè)施的建設(shè),全體員工總計投入了3萬小時,,前后耗費(fèi)了六個多月的時間,。它支持多機(jī)位拍攝,具有開創(chuàng)性意義,。
新時代的開始
對??怂贵w育臺的執(zhí)行副總裁兼創(chuàng)意總監(jiān)Gary Hartley來說,遷往新設(shè)施只是再次證實(shí)了FOX先天具備將敘事與獨(dú)特視效結(jié)合在一起的能力,?!绑w育部門創(chuàng)立之初是由DAVID Hill管理的,他采用了創(chuàng)新方法,?!盚artley解釋說,“他總會對一些事情提出質(zhì)疑,。他會問‘為什么我不知道比分是多少’,,然后讓廣播圖形部門幫忙將比分添加到屏幕上。那時,,我們的使命宣言是‘同樣的游戲,,全新的態(tài)度'。近30年來,,這一直是??怂贵w育臺的基本理念:不僅要展示比賽,還要突破體育廣播形式的極限?!?/p>
這一理念在2019年得到了明確體現(xiàn),,在NAB看到虛幻引擎的技術(shù)展示后,??怂贵w育臺成為了第一批深度利用游戲圖形技術(shù)的廣播公司,。后來,北卡羅來納州夏洛特市的虛擬納斯卡場景為該團(tuán)隊提供了難得的機(jī)會,,讓他們能夠?qū)?shí)時技術(shù)進(jìn)行實(shí)驗,。唯一的問題是什么?演播室是使用綠幕(而非LED墻)搭建的,。這意味著存在綠色溢出的問題,,而且出鏡者無法看到現(xiàn)場畫面并與之互動。
“不久之后,,我們注意到,,人們紛紛討論起LED和XR技術(shù)?!备,?怂贵w育臺的圖形技術(shù)與集成高級副總裁Zac Fields回憶說,“我們知道,,人們正在電影和電視劇領(lǐng)域使用LED墻,,但還沒有人在實(shí)時廣播中使用。我們看了一些早期演示,,知道自己必須嘗試這種新技術(shù),。通過使用LED墻,我們的團(tuán)隊可以輕松地將出鏡者帶入任何環(huán)境,,并在現(xiàn)場實(shí)現(xiàn)逼真的光照效果,,同時也無需為綠幕摳像或提前預(yù)渲染球員影像等復(fù)雜事項而擔(dān)憂?!?/p>
多機(jī)位制作
??怂贵w育臺的新虛擬制作演播室建在洛杉磯的福克斯攝制場,。它包含兩層樓,,擁有5130平方英尺的LED墻和地板,在25個虛幻引擎實(shí)例的驅(qū)動下,,可實(shí)現(xiàn)集群化渲染,,因此,畫面能夠以4K分辨率顯示?,F(xiàn)場有七臺為AR準(zhǔn)備的攝像機(jī),,其中四臺可以在LED棚中處理實(shí)時AR/XR,。所有追蹤、AR合成和色彩匹配都在StypeLand中處理,;而Erizos則用于在現(xiàn)場控制演播室,。還有11個Vizrt引擎實(shí)例用于驅(qū)動LED棚外的LED屏幕。
“不算地板,,新演播室LED墻的寬度就已達(dá)10000像素,。輸出4K分辨率是一個規(guī)模浩大的工程?!表椖渴紫夹g(shù)美術(shù)師Alex Seflinger說,,“整套裝置已經(jīng)非常復(fù)雜,但我們還希望再進(jìn)一步,。我們想讓LED棚支持多機(jī)位拍攝?!?/p>
然而,,實(shí)時廣播行業(yè)之前從未嘗試過在LED棚中構(gòu)建多機(jī)位拍攝功能?!霸谶^去的LED技術(shù)迭代中,,在LED墻顯示實(shí)時預(yù)覽之前,導(dǎo)演通常無法看到這些內(nèi)容,?!盨eflinger繼續(xù)說。為了使虛擬舞臺的表現(xiàn)更符合廣播節(jié)目的要求,,團(tuán)隊需要創(chuàng)建多個可預(yù)覽并且受控制的攝像機(jī)信號源,。每個攝像機(jī)信號源都必須在LED墻的任意角度提供優(yōu)秀的畫面效果,以便導(dǎo)演在實(shí)時廣播中切換不同的攝像機(jī),。
為此,,團(tuán)隊使用了MegaPixel的GhostFrame新技術(shù),它可以將四處不同的60赫茲視頻流整合到刷新率為240赫茲的LED墻上,。工程團(tuán)隊設(shè)置好各個鏡頭后,,導(dǎo)演就可以看到四個獨(dú)立的攝像機(jī)信號源,它們以互不相同的視角實(shí)時展示畫面,。
“第一次想到在虛擬制片中使用多機(jī)位時,,我們認(rèn)為這是不可能的?!盕ields說,,“幸運(yùn)的是,我們發(fā)現(xiàn)了GhostFrame技術(shù),。它是讓實(shí)時廣播成功的秘訣,?!?/p>
更動態(tài)的布景
團(tuán)隊成功部署GhostFrame后,下一步就是擴(kuò)展布景,,以便在各個鏡頭之上看到增強(qiáng)現(xiàn)實(shí)(AR)元素,。“這意味著,,除了驅(qū)動LED墻的16個虛幻引擎實(shí)例外,,我們另外還需要7個引擎實(shí)例執(zhí)行合成工作,將AR元素平鋪到各個場景上方,,顯示器上也需要應(yīng)用兩個實(shí)例,,以便顯示具有視差的不同場景?!备,?怂贵w育臺系統(tǒng)工程副總裁Daryl Moore補(bǔ)充說。
為了最大程度地減少大規(guī)模裝置中可能出現(xiàn)的延遲和多故障點(diǎn),,??怂贵w育臺團(tuán)隊以同樣的規(guī)格配置了每臺虛幻引擎機(jī)器,它們的內(nèi)部元件及顯卡完全相同,。唯一的區(qū)別是,,每臺虛幻引擎引擎機(jī)器負(fù)責(zé)為LED棚的不同部分提供信號源,具體取決于目標(biāo)是AR元素,,還是LED墻和地板,。
“我注意到虛幻引擎有一大優(yōu)點(diǎn),這個產(chǎn)品能夠日復(fù)一日地穩(wěn)定運(yùn)行,,”Moore補(bǔ)充說,,“我們能夠構(gòu)建豐富多彩的層次化場景,從地面到出鏡者上方的天空,,用虛擬圖形填滿整個場景,。這意味著我們可以講述更精彩、更有活力的故事,,同時,,我們也知道,我們可以相信虛幻引擎能夠渲染這一切,,不會在直播中崩潰,。”
改變體育廣播的未來
根據(jù)Seflinger的說法,,建立新的??怂固摂M制片演播室存在風(fēng)險,但他們最終得到了巨大的回報,?!绑w育廣播節(jié)目涉及太多東西,,尤其是像《FOX NFL Sunday》這樣的節(jié)目?!彼忉屨f,,“必須做到精準(zhǔn)控時,保持井然有序,。這檔節(jié)目已經(jīng)運(yùn)營了30年,,我們現(xiàn)在試著為它引入全新的虛擬元素,這在所有節(jié)目中開創(chuàng)了先河,?!?/p>
在節(jié)目首播后的一個月內(nèi),這個舞臺就取得了巨大的成功,,因此,,團(tuán)隊已籌劃將它用在棒球和籃球等其他體育節(jié)目中。他們還制定了計劃,,準(zhǔn)備更深入地嘗試互動AR,。“我們認(rèn)為自己是故事講述者,,而虛幻引擎為我們提供了工具,讓我們以全新的方式講述我們的故事,?!盕ields總結(jié)說,“五年前,,我們通過納斯卡舞臺看到了實(shí)時技術(shù)的潛力,。而現(xiàn)在,憑借新的LED棚,,我們幾乎可以做成任何事,。”
本文轉(zhuǎn)自虛幻引擎官網(wǎng)~