想象一下這樣一個畫面：你最喜歡的歌星正在表演，然后你注意到不僅只是歌迷在為音樂搖擺，舞臺背景同樣在伴隨著節(jié)奏起舞。這正是參加新西蘭Pharos音樂節(jié)的樂迷們的體驗。這場為期三天的活動糅合了動感十足的節(jié)拍，炫酷的高科技，以及身臨其境的效果。

于2018年11月在奧克蘭舉行的Pharos音樂節(jié)期間，格萊美獎得主唐納德·格洛沃（歌手藝名幼稚岡比諾；Childish Gambino）一共開唱三場。

演唱會是在一個160英尺高的圓頂舞臺。視覺效果以360度視角投影，而幼稚岡比諾則在中心舞臺演出。當(dāng)抬起頭時，粉絲可以看到不同的角色朝音樂方向移動，而五彩繽紛的圖像照亮了整個舞臺。

對于這個大型項目，紐約工作室2n Design與維塔數(shù)碼（Weta Digital）進(jìn)行了合作，并將交互式圖形集成到演唱會之中。

完整的系統(tǒng)由五臺機(jī)器組成，各自負(fù)責(zé)相應(yīng)的圓頂區(qū)域。具體來說，2n和維塔數(shù)碼利用強(qiáng)大的NVIDIA Quadro P6000顯卡將五臺機(jī)器布置成一個無縫的圓形渲染裝置。

為了確保為所有視點和角度帶來最優(yōu)秀的視覺效果，兩家公司在虛擬現(xiàn)實里面進(jìn)行內(nèi)容開發(fā)，而這允許他們在設(shè)置系統(tǒng)之前檢查并迭代設(shè)計。

維塔數(shù)碼的視覺特效總監(jiān)基思·米勒（Keith Miller）表示：“創(chuàng)建可以響應(yīng)唐納德的表演，以及響應(yīng)觀眾的情緒情感的交互式敘事體驗是一個絕佳的機(jī)會。我們能夠在圓頂內(nèi)進(jìn)行藝術(shù)指導(dǎo)，給予每個最佳視點一種特別的感覺，而且我們能夠通過實時VR工作空間預(yù)覽這個環(huán)境?！?/p>

2n Design的Pharos音樂節(jié)創(chuàng)意總監(jiān)亞歷贊德羅·克勞福德（Alejandro Crawford）回答道：“VR幫助我們圍繞360度進(jìn)行設(shè)計。我們可以判斷一棵樹是否過于靠近攝影機(jī)，或者一個數(shù)字生物是否需要以不同的方式移動。VR使得我們能夠以我們想要的方式設(shè)計鏡頭和表演。”

當(dāng)視覺效果準(zhǔn)備就緒后，團(tuán)隊必須同步圖形和表演，并確保整個系統(tǒng)可以同時地渲染。他們通過Unreal引擎開發(fā)了系統(tǒng)框架，其中圖像能夠通過英偉達(dá)圖形引擎的nDisplay技術(shù)實時渲染圖像。

克勞福德解釋說：“我們希望實現(xiàn)一個世界島另一個世界的無縫過渡，而不是淡入淡出。等待加載不是一種選擇。我們的策略是將所有內(nèi)容加載到內(nèi)存中，而Quadro GPU提供了足夠的視頻紋理內(nèi)存，可以做到這一點。”

然后，團(tuán)隊構(gòu)建了一個自定義引擎并用來接收Unreal引擎的內(nèi)容，同時實時拼接各個視頻源，最終以超過5K的分辨率生成了令人驚嘆的360度投影效果。

他們同時設(shè)計了音頻響應(yīng)參數(shù)并將其映射至系統(tǒng)，因此視覺效果可以根據(jù)幼稚岡比諾的表演進(jìn)行回應(yīng)。結(jié)果：一場栩栩如生的音樂盛會，炫美的圖形投影至圓頂，并且能夠?qū)崟r地響應(yīng)歌手演唱過程中的表演。

Unreal引擎的總經(jīng)理馬克·珀蒂特（Marc Petit）指出：“實時技術(shù)正在改變內(nèi)容的消費和創(chuàng)造方式。Epic和英偉達(dá)正在開創(chuàng)最新的技術(shù)，幫助藝術(shù)工作者能夠處理大型項目并構(gòu)建非凡的視覺環(huán)境。借助Unreal引擎中的渲染系統(tǒng)和Quadro GPU的強(qiáng)大功能，設(shè)計人員可以創(chuàng)建前所未有的沉浸式交互式體驗?！?/p>

值得一提的是，在上月舉行的第17屆年度VES大獎中，2n Design和Weta憑借這個項目獲得了Special Venue Project類別的杰出視覺效果獎（Outstanding Visual Effects ）。