陳丹
“念念不忘,必有回響,我們就是你們的回響。”3月27日晚,在THE9“虛實(shí)之城”沉浸式虛擬演唱會(huì)上,一位連線粉絲如此說道。在同時(shí)刻的社交媒體上,這句話觸動(dòng)了更多粉絲,他們紛紛留言表示自己看哭了。演唱會(huì)的高潮出現(xiàn)在《Promise》的合唱環(huán)節(jié),9位女孩“螺旋上升”至空中,眾多粉絲的合唱應(yīng)援視頻環(huán)繞著她們。在演唱會(huì)之前,不少粉絲雖然已經(jīng)購(gòu)票,但對(duì)于演唱會(huì)的價(jià)格、形式、內(nèi)容仍然心存疑慮,當(dāng)演唱會(huì)落幕,粉絲們紛紛在網(wǎng)上留言.希望演唱會(huì)能夠發(fā)行視頻版本,留作紀(jì)念。
投入億元級(jí)成本,通過XR技術(shù).虛擬制作,讓粉絲與偶像“跨時(shí)空互動(dòng)“,這次THE9的演唱會(huì)是愛奇藝在智能制作領(lǐng)域的一次試水。演唱會(huì)執(zhí)行制片人吳磊告訴《綜藝報(bào)》記者,這次演唱會(huì)直播有三個(gè)需要突破的技術(shù)核心:一是虛擬技術(shù)本身,二是票務(wù)系統(tǒng);三是與用戶的互動(dòng), “要保證內(nèi)容品質(zhì)和用戶的交互體驗(yàn),未來才能有更多商業(yè)變現(xiàn)空間”。
“這次演唱會(huì)是個(gè)亮相,未來愛奇藝在虛擬制作上會(huì)有很大投入,我們有一系列計(jì)劃?!皭燮嫠嚫笨偛脳詈榻B,除了演唱會(huì),虛擬制作技術(shù)未來還可能應(yīng)用在舞臺(tái)劇、影視制作等方面,其他相關(guān)項(xiàng)目正在研發(fā)中。
沉浸式“虛實(shí)之城”
“這場(chǎng)演唱會(huì)對(duì)團(tuán)隊(duì)來說,不僅是技術(shù)的考驗(yàn),也是腦力和想象力的考驗(yàn)?!笨倢?dǎo)演譚寅子說道。譚寅子參與過多場(chǎng)大型演唱會(huì)的策劃和導(dǎo)演工作。她以往的工作經(jīng)驗(yàn),是根據(jù)具體的演唱會(huì)場(chǎng)地設(shè)計(jì)舞美效果,在有限的空間內(nèi)做出最大化的舞臺(tái)效果。“這次就像是天降一筆巨款,可以隨便花,沒有空間和范圍的限制,考驗(yàn)我們腦子里能不能迸發(fā)出創(chuàng)意和內(nèi)容?!弊T寅子介紹,在與藝人溝通的基礎(chǔ)上,演唱會(huì)的歌曲舞美設(shè)計(jì)投入了更多的人力和制作周期。
演唱會(huì)開場(chǎng).THE9乘坐電梯在樓宇間穿梭,到達(dá)屬于她們的“虛實(shí)之城。《Dumb Dumb Bomb》以舞臺(tái)象征上升的陀螺形態(tài):《獵》的背景設(shè)置為原始叢林,表演者乘坐著卡車在叢林里穿梭; 《斯芬克斯》將埃及金字塔、獅身人面像等元素納入舞美之中……從霓虹閃爍的城市,到沙漠深處的金字塔,這場(chǎng)演唱會(huì)通過現(xiàn)代化技術(shù),帶給粉絲沉浸式的 虛擬之城”。
譚寅子介紹,與線下舞美帶給觀眾的氛圍不同,虛擬制作技術(shù)帶來了巨大想象空間和展示力。本場(chǎng)演唱會(huì)中使用了3個(gè)XR虛擬機(jī)位,以及影視級(jí)制作設(shè)備,可以實(shí)現(xiàn)實(shí)時(shí)渲染,將寫實(shí)化、風(fēng)
格化場(chǎng)景融合并呈現(xiàn)。為了給觀眾帶來更為沉浸式的體驗(yàn),設(shè)計(jì)團(tuán)隊(duì)關(guān)注到很多細(xì)節(jié)。譬如,在《獵》這首歌中,創(chuàng)作團(tuán)隊(duì)配合歌曲內(nèi)容設(shè)計(jì)了整片森林,什么時(shí)候會(huì)遇到懸崖?行車過程中周圍的樹木是怎樣的?需不需要設(shè)計(jì)些奇花異草?女孩們?cè)谲図斕钑r(shí),會(huì)不會(huì)有一些樹葉撩到她們的身體?譚寅子透露,除了設(shè)計(jì)整片森林場(chǎng)景,還需配合三個(gè)機(jī)位的不同渲染視角。在硬件和軟件的調(diào)控及節(jié)目編排上,都需要特別設(shè)計(jì),才能保證現(xiàn)場(chǎng)直播時(shí)帶給觀眾更為沉浸式的體驗(yàn),讓大家仿佛在虛擬場(chǎng)景中漫游,而非提醒你這是一個(gè)舞臺(tái)?!?/p>
將想象力落實(shí)到沉浸式畫面,需要技術(shù)支撐。早在2020年9月,虛擬直播演唱會(huì)的創(chuàng)意就提上日程,去年年底.愛奇藝開始搭建虛擬制作基地。這次演出呈現(xiàn)出無限延展的空間和畫面,一大關(guān)鍵在于屏幕。愛奇藝首席技術(shù)官兼基礎(chǔ)架構(gòu)和智能內(nèi)容分發(fā)事業(yè)群總裁劉文峰告訴《綜藝報(bào)》,這次演唱會(huì)的LED屏比普通屏精度高,像素和像素之間距離小。據(jù)悉,美劇《曼達(dá)洛人》拍攝用的屏幕,兩個(gè)像素點(diǎn)之間距離是2.84mm,愛奇藝此次使用的屏幕,兩個(gè)像素點(diǎn)之間的距離更加小。 “點(diǎn)距越近,觀眾越看不出它是由每個(gè)點(diǎn)組成的,會(huì)覺得是一張超高清的圖畫?!贝送?,屏幕亮度高、刷新速度快,保證了演出效果。
除了硬件,“虛實(shí)之城”的演唱會(huì)直播對(duì)軟件的挑戰(zhàn)同樣不小。傳統(tǒng)LED屏幕在節(jié)目制作中更多應(yīng)用于氛圍渲染;在虛擬拍攝中,LED屏顯示內(nèi)容是一個(gè)真實(shí)的三維場(chǎng)景,三維場(chǎng)景在屏幕上的渲染呈現(xiàn)需要符合透視原理。“由攝像機(jī)捕捉到的畫面,和人的眼睛看到的真實(shí)世界的畫面是一樣的,但真實(shí)世界顯然有更多深度信息,在屏幕上用平面展現(xiàn)出來,就意味著攝像機(jī)在有輕微位移的時(shí)候,屏幕里的所有像素都要立刻計(jì)算出。這時(shí)候由攝像機(jī)——把它當(dāng)成人的眼睛的話,它最新的位置在哪兒?它要經(jīng)過的所有屏幕顯示出來的內(nèi)容是什么?當(dāng)前攝像機(jī)的位置發(fā)生偏移后,新的位置和大小是怎樣的?這些是基于虛擬拍攝的套復(fù)雜的軟件系統(tǒng)和算法達(dá)成的?!眲⑽姆褰榻B,此次演唱會(huì)軟件系統(tǒng)類似于制作《曼達(dá)洛人》的系統(tǒng)。不同的是,《曼達(dá)洛人》是一個(gè)點(diǎn)播的場(chǎng)景,拍攝之后,經(jīng)過后期制作呈現(xiàn)完整的世界,“虛實(shí)之城”演唱會(huì)完全是直播場(chǎng)景,挑戰(zhàn)更為艱巨。
用戶互動(dòng)
在演唱會(huì)尊享套餐中,用戶權(quán)益包括彩排探班、THE9官方應(yīng)援棒、狂歡空間站扭蛋等,狂歡空間站扭蛋可以抽取視頻連線助演資格。每場(chǎng)演唱會(huì)開放了300余位視頻連線名額。在接受記者采訪的前一天,吳磊和譚寅子進(jìn)行了用戶連線測(cè)試有的粉絲特意化了精致的妝容;有的粉絲連線時(shí)剛剛下班,正狂奔回家……面對(duì)300多位年輕朝氣的面孔,吳磊和譚寅子非常興奮。
在演唱會(huì)現(xiàn)場(chǎng),從300余位助演觀眾中抽取幾位與THE9連線對(duì)話,構(gòu)成了演唱會(huì)的一大亮點(diǎn)。連線粉絲發(fā)言惹得THE9熱淚漣漣,也觸動(dòng)了屏幕前的粉絲,成為演唱會(huì)的共情時(shí)刻。一位粉絲告訴記者,旁人可能難以理解,但“偶像與粉絲確實(shí)存在羈絆”。她表示,“從《青春有你2》節(jié)目開始到九個(gè)女孩成團(tuán)出道,對(duì)于很多粉絲來說,THE9就像是自己的一群朋友,希望能用自己的目光和力量,照亮她們未來的道路,這次演唱會(huì)強(qiáng)化了這種羈絆?!?/p>
如何與用戶互動(dòng)、強(qiáng)化演唱會(huì)的儀式感是這次XR直播演唱會(huì)的一大難點(diǎn)。除了通過視頻連線的形式,打造THE9和粉絲間私密的溝通空間,愛奇藝團(tuán)隊(duì)還開發(fā)了其他形式,譬如AR彈幕、虛擬分身,以及愛奇藝云票系統(tǒng)等等。
云票系統(tǒng)之前曾運(yùn)用于愛奇藝超級(jí)影院。用戶線上購(gòu)票后,手機(jī)中會(huì)形成張電子票根。同物理門票一樣,用戶也可以將其轉(zhuǎn)贈(zèng)。不同價(jià)格門票包涵不同權(quán)益。其中一個(gè)創(chuàng)新型權(quán)益在于虛擬分身。用戶可以形成一個(gè)虛擬的形象,頭像、服裝、配飾都可以選擇。演唱會(huì)直播過程中,這些虛擬分身會(huì)投射到屏幕上,可以發(fā)彈幕,為自己的偶像打call,THE9官方應(yīng)援棒也是互動(dòng)形式之一。購(gòu)買尊享套餐的用戶可以在演唱會(huì)之前,兌換官方應(yīng)援棒。在直播中,通過手機(jī)藍(lán)牙,應(yīng)援棒將與演出燈光一同變換色彩。
商業(yè)變現(xiàn)
吳磊介紹,目前演唱會(huì)最大的收入來源為票務(wù),未來通過用戶互動(dòng),可以帶來更多增值空間?!斑@是面向下一代的娛樂產(chǎn)品,我們首先得保證用戶體驗(yàn),用戶體驗(yàn)好了,再去思考商業(yè)變現(xiàn)?!?/p>
據(jù)了解,這次虛實(shí)之城演唱會(huì)的投入成本達(dá)到了億元級(jí),包括LED屏軟件開發(fā)系統(tǒng)等軟硬件設(shè)施都是基礎(chǔ)投入。在愛奇藝副總裁、智能制作部負(fù)責(zé)人朱梁看來,這些都是可以重復(fù)使用的數(shù)字資產(chǎn)。 我們希望把這些數(shù)字資產(chǎn)留在未來,不管是其他節(jié)目使用,還是做一個(gè)不同的版本,如VR版、游戲版,或者下沉到線下,讓觀眾能夠進(jìn)入虛擬的環(huán)境中,跟偶像合影甚至同臺(tái)表演。這些可能性的前提是,我們?nèi)绾伪4婧眠@些虛擬資產(chǎn),提供新的玩法。”
楊海濤表示,愛奇藝面向下 代娛樂產(chǎn)品布局,包括XR虛擬技術(shù)。 “下一代娛樂和科技的進(jìn)步,以及我們所使用的屏幕變化緊密捆綁在一起?!彼治觯S著科技的發(fā)展,未來娛樂產(chǎn)品將會(huì)呈現(xiàn)如下趨勢(shì):第一,影視產(chǎn)品的規(guī)格更加多元化,如當(dāng)下的院線電影和網(wǎng)絡(luò)電影,第二,表現(xiàn)題材的空間大大拓展;第三,在消費(fèi)形式上,未來年輕用戶可能希望將社交內(nèi)容與娛樂產(chǎn)品更深度捆綁。
楊海濤告訴記者,雖然從單場(chǎng)演唱會(huì)來看,投入成本非常大,但這場(chǎng)演唱會(huì)只是開始,未來將會(huì)形成產(chǎn)業(yè)。隨著項(xiàng)目的增加,邊際成本將下降,一些軟硬件設(shè)施可以重復(fù)使用,當(dāng)產(chǎn)業(yè)成熟,商業(yè)化空間也將大大拓寬。
“所謂”一魚多吃,一個(gè)IP可以擁有多種貨幣化形式,多種貨幣化形式背后意味著多元消費(fèi)形態(tài),可以通過游戲、電影、綜藝、演唱會(huì)等種種形式呈現(xiàn),其背后是同一套數(shù)字資產(chǎn)。”在劉文峰看來,從這個(gè)角度來說,這場(chǎng)演唱會(huì)意義更大, “這意味著內(nèi)容制作的方式在不同的題材之間,得到了極大復(fù)用和效率提升。何為“XR”?
XR即擴(kuò)展現(xiàn)實(shí)(XR-Extended Reality),是一個(gè)概括性術(shù)語,簡(jiǎn)單來說,XR場(chǎng)景是基于現(xiàn)實(shí)場(chǎng)景,與后臺(tái)炫酷的AR內(nèi)容進(jìn)行結(jié)合交互而來。
虛擬現(xiàn)實(shí)技術(shù)(VR)利用頭戴設(shè)備模擬真實(shí)世界的3D互動(dòng)環(huán)境;增強(qiáng)現(xiàn)實(shí)技術(shù)( AR)通過電子設(shè)備(如手機(jī)、平板、眼鏡等),將各種信息和影像疊加到現(xiàn)實(shí)世界中;混合現(xiàn)實(shí)技術(shù)(MR)介于VR和AR之間,在虛擬世界、現(xiàn)實(shí)世界和用戶之間,利用數(shù)字技術(shù)實(shí)現(xiàn)實(shí)時(shí)交互的復(fù)雜環(huán)境;擴(kuò)展現(xiàn)實(shí)技術(shù)( XR)被稱為未來交互的終極形態(tài),囊括了增強(qiáng)現(xiàn)實(shí)( AR)、虛擬現(xiàn)實(shí)(VR)、混合現(xiàn)實(shí)( MR),以及介于兩者之間的所有內(nèi)容。
“星球大戰(zhàn)”真人劇集《曼達(dá)洛人》讓XR技術(shù)走進(jìn)大眾視野,該劇采用XR技術(shù)+LED屏幕完成制作,而非傳統(tǒng)式的綠幕拍攝手法。制作組搭建了LED+現(xiàn)實(shí)拍攝的場(chǎng)地,其中,LED會(huì)呈現(xiàn)虛擬場(chǎng)景,虛擬場(chǎng)景在XR技術(shù)下,會(huì)按照追蹤攝影機(jī)的運(yùn)動(dòng)軌跡進(jìn)行移動(dòng)變化。
超高清的屏幕能夠呈現(xiàn)以假亂真的場(chǎng)景,相比傳統(tǒng)綠幕,投射光線、反光等燈光問題也能迎刃而解。導(dǎo)演和演員能夠第一時(shí)間知道場(chǎng)景或劇情存在的問題,立即進(jìn)行修改和再創(chuàng)作。
隨著技術(shù)的成熟,越來越多的電影拍攝、演唱會(huì)、發(fā)布會(huì)等活動(dòng),開始運(yùn)用高科技感及逼真感的XR技術(shù),開辟出更多新玩法。XR技術(shù)的魅力,在于其讓人難辨現(xiàn)實(shí)與虛擬而產(chǎn)生的奇幻感、未來感,以及其所提供的“欺騙”感官的豐富體驗(yàn)。