VR（虛擬現(xiàn)實(shí)）電影聲音制作流程探析

羅興

（江西財(cái)經(jīng)大學(xué)軟件與通信工程學(xué)院，江西 南昌 330032）

VR（虛擬現(xiàn)實(shí)）電影聲音制作流程探析

羅興

（江西財(cái)經(jīng)大學(xué)軟件與通信工程學(xué)院，江西 南昌 330032）

VR電影作為一種新型的觀影模式，越來(lái)越被大眾所熟知。要想實(shí)現(xiàn)最佳的觀影效果，電影制作過(guò)程中對(duì)于聲音的加工至關(guān)重要。VR電影的聲音加工和傳統(tǒng)的聲音編輯既有相同點(diǎn)又有不同點(diǎn)，簡(jiǎn)單來(lái)說(shuō)，VR電影的聲音加工要更加復(fù)雜，因?yàn)橐捎?D環(huán)繞聲的形式，同時(shí)觀影方式一般是采用穿戴式設(shè)備播放，這就要求聲音播放的時(shí)候需要配合觀影人員的動(dòng)作、視角等進(jìn)行調(diào)整，從而使觀影者如身臨其境。本文對(duì)VR電影聲音制作的整個(gè)流程進(jìn)行梳理，并且對(duì)常見(jiàn)的一些工具和適用范圍等做簡(jiǎn)要介紹。

VR電影；VR聲音制作流程；拾音；聲音編輯混錄；聲音導(dǎo)出

VR電影通過(guò)各種特效，讓觀影者如身臨其境。為了讓受眾有這種感受，一般采用的聲音制作方式為三維環(huán)繞聲格式，這能帶給觀影者最大程度接近現(xiàn)實(shí)生活的視聽(tīng)感受。其中，最為基礎(chǔ)的是耳機(jī)還放技術(shù)，采用兩聲道的虛擬環(huán)繞聲的形式進(jìn)行播放，通過(guò)結(jié)合頭部相關(guān)傳輸函數(shù)編碼，配合頭部跟蹤數(shù)據(jù)，實(shí)現(xiàn)不論觀眾頭部如何轉(zhuǎn)動(dòng)，聲音仍舊保持在原來(lái)的方位上，使觀眾產(chǎn)生聲音是獨(dú)立于耳機(jī)存在的幻覺(jué)。VR電影的聲音制作先要進(jìn)行前期錄音再進(jìn)行后期制作，然后將輸出的聲音母帶和畫(huà)面合成，才能獲得最終用來(lái)發(fā)行的電影母版。不同于傳統(tǒng)電影的是，在制作的過(guò)程中要考慮如何收錄三維聲場(chǎng)里的聲音，以及如何能夠確保實(shí)現(xiàn)耳機(jī)還放技術(shù)，如何使聲畫(huà)同步以及如何進(jìn)行聲音母帶輸出、選用哪種合適的輸出模式等。

1 拾音環(huán)節(jié)

拾音環(huán)節(jié)就是在電影聲音制作過(guò)程中，用于素材收集的環(huán)節(jié)。常見(jiàn)的包括同期聲錄音中對(duì)于對(duì)白的錄音、單獨(dú)對(duì)音響效果或環(huán)境聲的錄音，以及后期制作時(shí)的模擬音等。在VR電影中，聲音錄制主要采用以下三種形式：雙耳拾音技術(shù)中的人工頭或類(lèi)人工頭拾音，聲場(chǎng)合成技術(shù)的原場(chǎng)傳聲器拾音，以及記錄水平和高度信息的環(huán)繞傳聲器進(jìn)行拾音。這三種方式各有各的特點(diǎn)。

首先，雙耳拾音技術(shù)中的人工頭或類(lèi)人工頭拾音，主要是采用模擬人耳聽(tīng)覺(jué)的外部模型的方式進(jìn)行聲音素材的采集。其特點(diǎn)是便于操作，簡(jiǎn)單便攜且清晰明了［1］。這種技術(shù)比較適合于用耳機(jī)收聽(tīng)，如果是用揚(yáng)聲器收聽(tīng)聲音的話(huà)，會(huì)因?yàn)槠浼夹g(shù)局限性導(dǎo)致電影聲音HRTF信息不能完全匹配，導(dǎo)致聲音信息重現(xiàn)，從而出現(xiàn)誤差。

其次，聲場(chǎng)合成技術(shù)的原場(chǎng)傳聲器拾音，本質(zhì)上是一種球形三維環(huán)繞聲拾音技術(shù)。它的優(yōu)點(diǎn)是對(duì)于不同格式的揚(yáng)聲器設(shè)置都有很高的適應(yīng)性。這種技術(shù)分為一階原場(chǎng)系統(tǒng)和高階系統(tǒng)，一般情況下，階數(shù)越高代表通道數(shù)越多，可以輸出的數(shù)據(jù)量也就大大增加。因?yàn)槟軌驅(qū)β曇暨M(jìn)行全方位記錄，可以支持任何方向的視角轉(zhuǎn)換。相較于前種拾音方式，該方式的三維空間有更好的表現(xiàn)力。

最后，記錄水平和高度信息的環(huán)繞傳聲器進(jìn)行拾音，相較于前兩種拾音方式，聲場(chǎng)的整體性和連貫性有所欠缺，但是獲得的聲音聲道分離度較好，便于聲音后期加工制作。

2 聲音編輯與混錄環(huán)節(jié)

VR電影在聲音編輯和混錄環(huán)節(jié)和傳統(tǒng)電影存在很大不同，主要體現(xiàn)在以下三個(gè)方面。

2.1 3D視頻還放

為實(shí)現(xiàn)聲音編輯效果，要求3D視頻還放最好是可以實(shí)現(xiàn)球形視頻在電腦屏幕上的還放，并且可以使用鼠標(biāo)來(lái)調(diào)整觀看的角度，這就需要一些專(zhuān)業(yè)軟件的支持，傳統(tǒng)的頭戴式設(shè)備是不能實(shí)現(xiàn)的。

這里不得不提的是以下兩個(gè)軟件：Kolor Eyes軟件，可以支持上述還放模式；SpookSyncVR軟件，可以實(shí)現(xiàn)音視頻視聽(tīng)角度同步，從而可以讓聲音編輯師在編輯過(guò)程中實(shí)時(shí)掌握編輯情況，簡(jiǎn)化編輯過(guò)程，使編輯工作更加直觀、高效。

2.2 音頻工作站及空間處理插件

在完成聲音素材的收集后就需要對(duì)聲音素材進(jìn)行編輯，VR電影中的聲音編輯工具主要是能夠?qū)崿F(xiàn)多路母線(xiàn)輸出的音頻工作站和可以完成空間聲音處理的插件。原則上來(lái)說(shuō)，只要是可以實(shí)現(xiàn)多路母線(xiàn)輸出的音頻工作站都可以用來(lái)制作VR視頻，如常見(jiàn)的Nuendo、ProTools HD、Reaper，三者支持的母線(xiàn)輸出數(shù)量不同，分別為12路母線(xiàn)輸出、8路母線(xiàn)輸出、64路母線(xiàn)輸出。不同的VR電影需要的母線(xiàn)輸出數(shù)量也有所不同，所以具體聲音編輯的音頻工作站的選擇最后還是需要根據(jù)電影的實(shí)際情況進(jìn)行判定。

而VR聲音在三維空間感處理和三維空間內(nèi)聲音定位的操作，就需要用專(zhuān)門(mén)的全景聲制作軟件來(lái)完成。比如，用于VR的杜比全景聲軟件就包含四個(gè)工具，即用于實(shí)現(xiàn)3D聲像定位和元數(shù)據(jù)生成的Dolby Atmos Panner Plugin for Pro Tools，將音頻和輸出的元數(shù)據(jù)加工成可應(yīng)用于杜比的格式的VR Renderer，對(duì)所有聲音對(duì)象的空間定位等進(jìn)行監(jiān)看的Monitor Application和用于視頻還放的Video Player，每個(gè)環(huán)節(jié)都不可或缺。這些工具保證監(jiān)聽(tīng)時(shí)可以實(shí)現(xiàn)實(shí)時(shí)雙耳監(jiān)聽(tīng)，輸出的母版格式多樣，這樣就確保了文件的高適配性［2］。

2.3 監(jiān)聽(tīng)

VR電影一般采用的監(jiān)聽(tīng)方式為耳機(jī)監(jiān)聽(tīng)，這就需要對(duì)工作站的監(jiān)聽(tīng)信號(hào)進(jìn)行處理，實(shí)現(xiàn)雙耳實(shí)時(shí)渲染并同時(shí)輸出給耳機(jī)。這項(xiàng)技術(shù)的實(shí)現(xiàn)主要是依靠現(xiàn)有的用于VR聲音制作的插件，這些插件實(shí)現(xiàn)雙耳的渲染輸出，一般采用的方法是通過(guò)對(duì)元數(shù)據(jù)加入現(xiàn)有的HRTF函數(shù)從而達(dá)到一種仿真效果。這樣，呈現(xiàn)在耳機(jī)中的聲音就可以重現(xiàn)聲音在三維空間的位置，從而實(shí)現(xiàn)虛擬全景聲監(jiān)聽(tīng)和頭部跟蹤。

3 聲音導(dǎo)出環(huán)節(jié)

在對(duì)聲音素材完成編輯混錄等加工過(guò)程后，需要將聲音母版導(dǎo)出，再和視頻進(jìn)行合并，得到的文件再送往各個(gè)播放平臺(tái)，這才是最終能夠進(jìn)行播放的電影。

隨著科技的進(jìn)步，觀影體驗(yàn)要求的提升，相應(yīng)的VR電影聲音制作技術(shù)也會(huì)持續(xù)發(fā)展。市場(chǎng)上能夠用于VR電影聲音制作的各種工具也會(huì)不斷被開(kāi)發(fā)出來(lái)，原有的工具也會(huì)進(jìn)一步完善。專(zhuān)家也在不斷努力尋找從前期素材收集的拾音階段到后期的編輯混錄、母版輸出、監(jiān)聽(tīng)和播放一體化的解決方案。發(fā)展較早且相對(duì)成熟的游戲聲音制作工具和方式也為VR聲音的制作提供了很多思路和參考。未來(lái)的VR聲音制作較現(xiàn)在一定會(huì)更加進(jìn)步，在保證觀影者有良好體驗(yàn)的同時(shí)，也能實(shí)現(xiàn)操作加工過(guò)程的便捷性，這對(duì)于VR電影的推廣、發(fā)行也極為重要。

［1］李芳瑜.VR（虛擬）技術(shù)在電影制作中的實(shí)際應(yīng)用及影響研究［J］.藝術(shù)科技，2016（9）：45-46.

［2］姜荷.VR虛擬現(xiàn)實(shí)技術(shù)下影像表現(xiàn)形式的可行性分析及對(duì)電影產(chǎn)業(yè)格局的沖擊與挑戰(zhàn)［J］.當(dāng)代電影，2016（5）：134-137.

Analysis on the Production Process of VR Movie Sound

Luo Xing
（School of Software and Communication Engineering,Jiangxi University of Finance and Economics，Nanchang Jiangxi 330032）

VR film as a new mode of viewing,more and more known by the public.In order to achieve the best viewing effect,the film production process for the sound processing is also essential.VR film sound processing and traditional sound editing both have the same point and different points,simply VR film sound processing to be more complex,because to use the form of 3D surround sound,while viewing mode is generally used to wear Equipment playback,which requires the sound when playing the need to be able to achieve with the viewing staff of the action, perspective and so on to adjust,so as to maximize the viewers to achieve immersive perception.This paper summarized the whole process of VR film production,and give a brief introduction to some common tools and scope of application.

VR movie；VR soundproduction process；pickup sound；edit sound mixing

J933

A

1003-5168（2017）07-0017-02

2017-06-03

羅興（1995-），男，本科在讀，研究方向：軟件工程。