VR/AR在戲劇中的應(yīng)用

【摘 要】 介紹虛擬現(xiàn)實技術(shù)和增強現(xiàn)實技術(shù)，闡述在戲劇中應(yīng)用方式和產(chǎn)生的不同藝術(shù)樣式，結(jié)合實例分析VR戲劇和 AR戲劇的呈現(xiàn)形式。

【關(guān)鍵詞】 虛擬現(xiàn)實；增強現(xiàn)實；混合現(xiàn)實；戲劇

文章編號： 10.3969/j.issn.1674-8239.2016.11.010

【Abstract】Based on the different application and artistic pattern of VR and AR， this paper discusses different presentation forms of VR dramas and AR dramas using example.

【Key Words】virtual reality； augmented reality； mixed reality； drama

1 引言

虛擬現(xiàn)實（Virtual Reality， 簡稱VR）最早可以追溯到1962年，一款名為“Sensorama”的虛擬現(xiàn)實設(shè)備，當(dāng)觀眾坐在椅子上把頭探進去，可以通過三面顯示屏顯示3D動畫影像來形成虛擬的空間，伴隨味覺、立體聲、座位的振動和頭頂上的風(fēng)等讓觀眾獲得一定的虛擬現(xiàn)實體驗[1]，如圖1所示。

直到20世紀80年代末，有“虛擬現(xiàn)實之父”之稱的VPL公司CEO：Jaron Lanier提出了VR的概念。但由于當(dāng)時虛擬現(xiàn)實設(shè)備笨重、功能單一和價格昂貴，虛擬現(xiàn)實內(nèi)容開發(fā)成本高，因此VR未得到廣泛關(guān)注和應(yīng)用推廣，可以說是處在概念性的階段。

而當(dāng)今進入互聯(lián)網(wǎng)、智能設(shè)備和智能平臺的普及的年代，一些追求創(chuàng)新的科技企業(yè)，為了滿足人們的需求，重拾虛擬現(xiàn)實的概念，一些Oculus Rift、HTC Vive、三星Gear VR、索尼Playstation VR和微軟Hololens等設(shè)備便應(yīng)運而生。更為關(guān)鍵的是，一個從基礎(chǔ)硬件（Infrastructure）到VR開發(fā)工具和內(nèi)容分發(fā)平臺再到VR 應(yīng)用和內(nèi)容開發(fā)者/機構(gòu)的VR生態(tài)系統(tǒng)建立并正在逐步完善，如圖2所示，由此VR才在近幾年得到廣泛關(guān)注和快速發(fā)展。

2 虛擬現(xiàn)實、增強現(xiàn)實與混合現(xiàn)實

有關(guān)虛擬現(xiàn)實術(shù)語定義，在不同階段不同的研究者有不同的觀點，主要聚焦兩個方面：技術(shù)硬件要素和人類體驗。

近20年來，從人類體驗的角度來定義虛擬現(xiàn)實這個概念要遠多于從設(shè)備定義的角度。其中，一種有代表性的觀點是，從理解用戶的物理和心理體驗出發(fā)，虛擬現(xiàn)實的“沉浸感”、“在場性”和“交互性”的三個要素非常重要[2]。為了研究三者間的關(guān)系和虛擬現(xiàn)實定義，先要理解其內(nèi)涵。

“沉浸感”：感受到被身處的空間包圍，還可以與很多存在的物體實時交互。

“在場性”：對于環(huán)境的感受。

“交互性”：可以參與實時改變媒介化環(huán)境的形式和內(nèi)容。

基于以上描述，虛擬現(xiàn)實定義為：通過一個使用交互性的軟件和硬件的計算機系統(tǒng)產(chǎn)生一個三維圖形空間，構(gòu)建一個模擬現(xiàn)實的環(huán)境；提供使用者關(guān)于視覺、聽覺、觸覺等感官的模擬，讓使用者如同身歷其境一般，可以及時、沒有限制地觀察三度空間內(nèi)的事物。使用者進行位置移動時，計算機可以立即進行復(fù)雜的運算，將精確的3D世界影像傳回產(chǎn)生在場感。

增強現(xiàn)實（Augmented Reality，簡稱 AR）是VR的衍生形式，將虛擬的信息疊加到真實世界上，使真實世界信息和虛擬世界信息“無縫”集成，從而達到超越現(xiàn)實的感官體驗。圖3（視頻效果見http：//v.qq.com/x/page/q03126544s3.html）、圖4（視頻效果見http：//v.qq.com/x/page/j0312odstx5.html）所示就是AR技術(shù)應(yīng)用的形態(tài)。

這兩個作品都是反映隨著現(xiàn)在城市不斷更新與變遷，生活中隨處可見的管道、建筑或家具等，都留有人類發(fā)展的偉績、失去的文明痕跡和美麗的自然生態(tài)。作品通過兩部分配合呈現(xiàn)，一部分是在墻上繪制的水泥或工業(yè)管道等繪畫或用建筑廢棄材料設(shè)計高樓一樣的裝置；另一部分就是在智能移動終端上開發(fā)APP，其利用AR技術(shù)，借助智能終端上的攝像頭觀看墻上的繪畫或裝置，觀眾可以看到繪畫或裝置這些現(xiàn)實場景上疊加了很多透明的虛擬動畫內(nèi)容，這時在APP上呈現(xiàn)的不僅僅是靜止的繪畫或裝置，還有靈動的生靈在其中。

混合現(xiàn)實（Mixed Reality，簡稱MR），是被人類感知的現(xiàn)實世界和由計算機產(chǎn)生的一個虛擬環(huán)境的組合體[2]。

VR、AR和MR三者間的相互關(guān)系如圖5所示。

3 VR實驗戲劇和AR實驗戲劇

當(dāng)下，VR已經(jīng)在很多藝術(shù)領(lǐng)域得到應(yīng)用，如谷歌的Tilt Brush VR繪畫軟件，通過VR頭盔和手柄讓使用者在360°立體空間中任意繪畫，體驗揮毫潑墨的自由繪畫藝術(shù)享受；2016草莓音樂節(jié)現(xiàn)場VR直播，讓人們通過VR設(shè)備就可以獲得臨場體驗；通過VR技術(shù)，打破了美術(shù)館或博物館的傳統(tǒng)時空界限，構(gòu)建全新的虛擬展覽空間；通過AR技術(shù)，在實物展品上疊加虛擬內(nèi)容，以全新的方式修復(fù)或還原珍貴文物或藏品原貌；360°全景拍攝的VR電影給創(chuàng)作者們提出了新敘事語言和創(chuàng)作方式的挑戰(zhàn)。VR的應(yīng)用導(dǎo)致各種藝術(shù)形式之間的交互融合，也將衍生出更多樣態(tài)的藝術(shù)新式和藝術(shù)語匯，VR在藝術(shù)領(lǐng)域的應(yīng)用是對藝術(shù)創(chuàng)作的一種重新的認知方式。

戲劇領(lǐng)域也不例外，新媒體技術(shù)涌入，互聯(lián)網(wǎng)的普及，使舞臺美術(shù)連同整個戲劇發(fā)生著深刻的變化，戲劇的呈現(xiàn)顯示出新的趨勢、新的形式和特點。舞臺出現(xiàn)了去物質(zhì)化的趨勢[3]，甚至可以使戲劇滲透在任何地點。

VR技術(shù)的應(yīng)用為戲劇藝術(shù)的創(chuàng)作帶來了很多前所未有的可能性。隨著VR技術(shù)的不斷發(fā)展，VR技術(shù)在戲劇創(chuàng)作中的應(yīng)用方法和產(chǎn)生的戲劇藝術(shù)形式也在不斷發(fā)展和變化。筆者根據(jù)VR技術(shù)應(yīng)用方式和產(chǎn)生的藝術(shù)樣式不同給出不同的分類，并舉例闡述，據(jù)此說明何謂“VR戲劇”。

3.1 混合VR實驗戲劇

混合VR實驗戲劇，在這類作品中虛擬現(xiàn)實技術(shù)的應(yīng)用，更多的都是在戲劇舞臺上添加一些由計算機圖像組成的虛擬元素。比如利用計算機生成的虛擬空間作為舞臺背景或者虛擬演員等；并在計算機建模的3D圖像中變化視角或透視，營造一種演員穿梭其中的幻覺，如圖6所示，實現(xiàn)了舞臺現(xiàn)實空間與計算機構(gòu)建的虛擬空間共存，虛擬空間可以理解為現(xiàn)實空間的延伸。

早在20世紀末，美國的Kansas大學(xué)的戲劇系就成立了一個研究虛擬現(xiàn)實戲劇藝術(shù)機構(gòu)（The Institue for the Exploration of Virtual Realities，簡稱i.e.VR），該機構(gòu)致力于展示如何將虛擬現(xiàn)實技術(shù)和其他相關(guān)技術(shù)應(yīng)用到戲劇作品和演出中，并推出了The Adding Machine混合VR技術(shù)的試驗戲劇[4]。

上海戲劇學(xué)院于2004年開始從事新媒體技術(shù)在舞臺藝術(shù)創(chuàng)作中的應(yīng)用研究與創(chuàng)作實驗，同年12月，正式成立了上海市多媒體虛擬空間合成重點實驗室。目前該實驗室已經(jīng)批準為文化部數(shù)字演藝集成創(chuàng)新重點實驗室。12年來也創(chuàng)作了多部新媒體舞臺藝術(shù)作品。其中就有大型多媒體音樂劇《觀音菩薩》（見圖7）和新媒體舞蹈詩《極境》（見圖8）。兩部舞臺藝術(shù)作品的共同點是，利用投影技術(shù)將數(shù)字化的虛擬影像內(nèi)容投射到舞臺空間中，替代傳統(tǒng)的舞臺布景，營造一個虛擬三維空間，演員在舞臺上表演，而從觀眾視覺猶如演員完全在一個虛擬的場景中進行表演，拓展了舞臺表演空間，增加和豐富了舞臺藝術(shù)表現(xiàn)力。在馬來西亞國家大劇院演出的《觀音菩薩》，不但在劇場舞臺上通過投影營造了一個三維的虛擬空間，同時還在劇院的大面積的穹頂上進行投影，讓整個劇院的觀眾沉浸在一個佛教氛圍的虛擬空間中，與舞臺虛擬空間遙相呼應(yīng)，讓觀眾感受到與演員同在一個佛法的虛擬空間之中，讓觀眾有很強的“在場”感。

3.2 頭盔VR實驗戲劇

頭盔VR實驗戲劇，在這類作品中虛擬現(xiàn)實技術(shù)的應(yīng)用，要求觀眾佩戴頭盔觀看，才能得到創(chuàng)作者所要表達的藝術(shù)效果，觀眾可以獲得強烈的沉浸感和在場感，有的VR戲劇中還有交互體驗。個人覺得這類VR實驗戲劇的典型代表有VR歌劇《Senza Peso》和《仙媛》（La Peri） 。

《Senza Peso》是Road to VR機構(gòu)出品的，歷經(jīng)5年打造的令人震驚的虛擬現(xiàn)實迷你歌劇。它包括畫面壯觀的短電影和通過Oculus Rift獲得令人稱贊的帶敘事性的虛擬現(xiàn)實體驗兩個部分。劇中的人物表演鏡頭畫面是采用電影敘事的方式拍攝成一個個短電影鏡頭，戲劇的場景是幻影（UE4）虛擬引擎制作的虛擬現(xiàn)實場景，將兩者合成一個具有敘事體驗的VR戲劇作品[5]，如圖9所示。

《仙媛》（La Peri）是由Innerspace VR創(chuàng)作，具有參與感和交互性強的一種敘事性體驗戲劇般的VR作品。觀眾參與到神話般的故事中，變身王子，有時去天寒地凍的深淵偷竊永生花，有時站在舞臺中央與仙女共舞，觀眾可以用手柄去“奪取”灼目的花朵，甚至可以選擇交還永生花或保留永生花，整個體驗既圍繞著“真實”的舞臺，又有虛幻的仙境[6]，如圖10所示。

3.3 AR實驗戲劇

AR實驗戲劇，在這類作品中增強現(xiàn)實技術(shù)的應(yīng)用，可以是在現(xiàn)實空的舞臺上疊加虛擬的演員表演內(nèi)容，虛擬的表演內(nèi)容是通過敘事性鏡頭表達方式進行事先錄像與制作，然后透明疊加到現(xiàn)實舞臺空間中；也可以是在現(xiàn)實的舞臺表演中實時疊加部分透明的虛擬元素，虛擬同時/同臺表演。

前面提到的i.e.VR也推出曾多次搬上舞臺的試驗戲劇《Wings》，演繹的是一位身患中風(fēng)、語言紊亂的女飛行員Emily的獨白。Wings采用的是具有AR眼鏡雛形的改良i-glasses（頭戴式顯示器），該顯示器上方有個半鍍銀鏡，觀眾水平視角處各有兩塊小LCD屏幕，既可以通過鏡子看到舞臺上的演員，又可以看到鏡子上反射的LCD圖像，從而達到一種疊加的效果；其耳機的聲音也混合了音效和舞臺上演員的真實聲音。導(dǎo)演希望采用這種特殊的觀演手段，讓觀眾走入Emily混亂的內(nèi)心世界，融入Emily的角色之中，感受她的焦慮和困惑[4]。

筆者參與創(chuàng)作的AR交互舞臺裝置《愛情書簡》作品，當(dāng)觀眾打開移動終端的“AR愛情書簡”APP后，將移動終端的前置攝像頭對著《愛情書簡》的舞臺裝置模型，觀眾可以點擊界面上的按鈕選擇不同的劇目場景，隨后虛擬演員出現(xiàn)在舞臺上表演，觀眾還可以選擇不同的燈光、虛擬背景和舞臺特效等，如圖11所示（視頻效果見http：//v.qq.com/x/page/s0312wux4yw.html）。

3.4 對“VR戲劇”的認知

VR戲劇還處在探索、實驗階段，就現(xiàn)狀看，VR戲劇是采用“VR的敘事”特性進行創(chuàng)作和演出的一種新的戲劇藝術(shù)形式，具有沉浸性和交互性特點。它具有敘事性的故事結(jié)局，只是呈現(xiàn)方式和觀眾的觀看形式有所改變，與傳統(tǒng)的戲劇、電影和戲劇文學(xué)劇本相比較，有其顯著特征，見表1。

4 結(jié)語

VR生態(tài)系統(tǒng)正在形成，有著良好的發(fā)展前景。筆者認為，大力發(fā)展VR智能終端的應(yīng)用技術(shù)研究，是VR發(fā)展的未來。但目前VR智能終端的顯示分辨率不夠高、時延眩暈問題以及渲染能力不強等難題有待解決，否則將會制約VR的快速發(fā)展。

伴隨VR技術(shù)的發(fā)展，VR戲劇興起，不同的發(fā)展階段，VR戲劇也呈現(xiàn)著不同的藝術(shù)樣式。VR技術(shù)在戲劇領(lǐng)域中的應(yīng)用，產(chǎn)生了新的戲劇樣式和戲劇語匯，給戲劇創(chuàng)作帶來了很多可能性。但目前VR戲劇仍處在初級的發(fā)展階段，VR技術(shù)仍不成熟，VR戲劇的敘事理論也有待在不斷的VR戲劇藝術(shù)實驗創(chuàng)作與探索中總結(jié)并完善，從而促進VR戲劇的進一步發(fā)展。

注釋：

① 圖片來自于http：//www.mortonheilig.com/。

② 圖片來自于http：//venturebeat.com/。

參考文獻：

[1]http：//www.mortonheilig.com/InventorVR.html，2016.7.

[2]http：//dictionary.reference.com/browse/virtual reality，2016.7.

[3]劉杏林. 舞臺美術(shù)新思維三題[J]. 戲劇藝術(shù)， 2015（3）：4-12.

[4]http：//www2.ku.edu/～ievr/ ，2016.7.

[5]http：//www.roadtovr.com/，2016.7.

[6]http：//innerspacevr.com/，2016.7.

[7]Chatman s. Story and discourse：narrative structure in fiction and film[M]. Crnell university，1978.

[8]Aylett，R. Narrative in virtual environments -towards emenrgent narrative.1999.

作者簡介：

張敬平，上海戲劇學(xué)院副教授，數(shù)字演藝集成創(chuàng)新文化部重點實驗室技術(shù)總監(jiān)。

（編輯 杜 青）