多媒體融合技術下的沉浸式新聞
——以《頭條里的青春中國》為例

□ 馬江梅

2019年被稱為5G元年。在5G技術的推動下，萬物互聯(lián)的時代已然到來，萬物皆媒的特質使得傳播的交互性特質更加多元、沉浸。新媒體時代，融合新聞體現(xiàn)出多種形態(tài)，沉浸式新聞隨著5G技術的出現(xiàn)發(fā)展迅速，受眾接受新聞的方式從傳統(tǒng)的聽、讀、看變成了現(xiàn)如今的多種感官匯集體驗。2010年，美國南加州大學安納伯格傳播與新聞學院的德·拉·佩娜（De La Pena）和她的團隊在MITJournal上發(fā)表的論文中首次提出了有關沉浸式新聞的相關概念：沉浸式新聞是讓受眾以第一人稱視角體驗新聞故事中的真實情景的新聞生產(chǎn)形式①。

一、案例分析

2019年，中國青年報社為致敬新中國成立70周年制作了微電影《頭條里的青春中國》。微電影選取《中國青年報》和《中國青年》雜志的若干頭條，以鄧稼先、袁隆平、張海迪、張瑞敏等頭條人物為依托，運用專業(yè)電影級的拍攝與制作模式，展現(xiàn)70年來中國人民不懈奮斗的光輝歷程②。電影推出之前，一則沉浸式新聞報道視頻首先在微博火了起來，這條新聞是“致敬70年微電影《頭條里的青春中國》9月27號正式上線”。沉浸式新聞通過這樣一種新媒體思維方式再次出現(xiàn)在大眾視野，但是，很多受眾在觀看完這條所謂的“沉浸式新聞”之后表示：這條視頻報道中的“沉浸式體驗”體現(xiàn)在什么地方，既沒有虛擬現(xiàn)實，又沒有VR等人機交互，只是一條非虛擬現(xiàn)實的視頻，這樣的報道算是沉浸式新聞嗎？

這段沉浸式新聞時長2分08秒，采用了2D拍攝效果，以第一人稱視角拍攝了影片制作的幕后故事，其沉浸式體驗體現(xiàn)在拍攝內(nèi)容、取景和選材上。它并不是傳統(tǒng)的電影宣傳片，觀眾所看到的畫面都是以第一人稱視角拍攝的，展示了拍攝者、工作人員、演員等的工作，他們都親身參與了電影的制作和拍攝；觀眾在觀看這個視頻的時候能夠身臨其境，仿佛是切身參與了微電影的拍攝制作，實現(xiàn)了一種身份沉浸式的體驗。所以這條沉浸式新聞是讓觀眾以親身參與的身份沉浸體驗視角揭秘了微電影拍攝的幕后故事?！额^條里的青春中國》時間跨度長達70年，有10余個場景、3個攝影棚，從場景搭建、道具準備、化妝的前期工作，到拍攝時的拍攝狀態(tài)、講戲、調(diào)光、表演，都進行了一些揭秘性的展示，讓觀眾能夠直接感受到電影的制作過程，由此產(chǎn)生對這部微電影的參與感。比如，微電影中雨中拔稻穗的那一幕，視頻報道里向大眾展示了實際的拍攝情況，雨是人工降雨，但是稻穗是真水稻，為了追求逼真的效果，工作人員一株一株種在地里。視頻報道還揭秘了影片中地震、房屋倒塌、暴風雪等震撼的鏡頭，從現(xiàn)場工作人員的視角帶大眾看這些效果背后的故事，實現(xiàn)沉浸式體驗的新聞報道。

二、沉浸式新聞的三種呈現(xiàn)方式

（一）數(shù)據(jù)可視化

數(shù)據(jù)可視化的沉浸式新聞是用數(shù)據(jù)圖表來創(chuàng)建新聞場景，用圖表、動畫來展示一些繁雜、抽象的專業(yè)數(shù)據(jù)，這種數(shù)據(jù)圖表精確清晰，充滿了藝術和設計思維。以直接清晰的方式讓受眾對復雜的數(shù)據(jù)一目了然，受眾不再排斥專業(yè)性較強的具有較多數(shù)據(jù)的新聞；數(shù)據(jù)不再冰冷枯燥，可以使受眾對新聞產(chǎn)生直觀的感受，有更準確的把握。比如，一些財經(jīng)新聞需要運用大量的數(shù)據(jù)，數(shù)據(jù)可視化可以將這些數(shù)據(jù)表達得更加生動，實現(xiàn)內(nèi)容上的沉浸式體驗。但是這種沉浸式新聞在畫面和觀感上的參與感較弱，沉浸體驗交叉，可以看成是沉浸式新聞的初級階段。

（二）多媒體融合技術

多媒體融合報道利用可視化技術將新聞圖片、視頻、文本等新聞元素結合在一起，創(chuàng)造了更具可讀性的新聞場景，增加了新聞信息的趣味性和生動性。一些涉及地理的區(qū)域報道也經(jīng)常會把衛(wèi)星技術和多媒體技術相結合。同時，多媒體技術能夠實現(xiàn)信息交互，受眾以一種參與和互動的形式與新聞信息進行對話，新聞的對話感和參與感增強，實現(xiàn)了新聞的沉浸式體驗；受眾在多媒體融合的沉浸式報道中可以自己選擇想要閱讀的內(nèi)容，以及閱讀時的速度、時間和順序，體現(xiàn)了受眾的主體性，而不是被控制的互動。前面提到的致敬70周年微電影《頭條里的青春中國》就是多媒體技術融合下的一個典型報道。

《衛(wèi)報》有一則關于解密美國國家安全局的報道，以美國中央情報局（CIA）原成員愛德華·斯諾登（Edward Snowden）披露美國國家安全局（NSA）的“棱鏡”監(jiān)聽計劃為基礎，對政府監(jiān)控進行報道和反思。該報道運用多媒體融合的方式，使受眾獲得了沉浸式的體驗③。該報告由6個部分組成，每個部分由一個文本報告、一個視頻和一個圖表組成。值得一提的是，在這個新聞中，所有的視頻都是對人物的采訪，人物被放置在非常簡單卻有很強沖擊力的白色背景中。報道開始時播放了一段27秒的視頻，一共有6名受訪者，其中兩人的采訪分別代表支持和反對政府的不同意見。根據(jù)報道的發(fā)展，6名受訪者的采訪視頻被剪輯成20秒左右的片段放置在相應的位置，連接整個報道。視頻的嵌入使得整個故事生動活潑，使得嚴肅沉重的信息更容易被接受。文本、視頻、圖片等不同的多媒體元素的組合，為讀者創(chuàng)造了生動的新聞場景，讓讀者在現(xiàn)場體驗新聞，獲得更豐富的信息。

（三）虛擬現(xiàn)實技術

虛擬現(xiàn)實新聞（Virtual Reality Journalism），又名VR新聞，以虛擬現(xiàn)實技術為載體制作新聞，通過VR終端的各類傳感系統(tǒng)模擬真實場景，給受眾營造“沉浸”（immerse）和“在場”（presence）的效果④。2016 年，虛擬現(xiàn)實新聞發(fā)展勢頭迅猛，隨著VR技術的日益成熟，非虛擬技術和沉浸式新聞的結合更加緊密。2012年，圣丹斯電影節(jié)最早出現(xiàn)虛擬現(xiàn)實新聞。紀錄片新聞記者德納·佩尼亞播放了《洛杉磯的饑民》，這是首部虛擬現(xiàn)實新聞紀錄片，講述了洛杉磯一些社區(qū)缺少食物的故事，觀眾只要戴上虛擬現(xiàn)實頭盔就可穿越到洛杉磯街區(qū)，親身體驗饑餓給人們帶來的無力感?！都~約時報》推出的VR新聞紀錄片《流離失所》以敘利亞、烏克蘭東部、南蘇丹三位流浪兒童的第一視角全面、真實地將戰(zhàn)爭的殘酷和無奈赤裸裸地重現(xiàn)在觀眾面前。2017年，《監(jiān)禁之后》采用了攝影測量、體視攝影技術和VR技術，報道了曾在緬因州監(jiān)獄長期被單獨監(jiān)禁的犯人肯尼·摩爾壓抑、黑暗的監(jiān)獄生活，以及被釋放后對生活的無望和心里的掙扎。該作品收集了大量的新聞信息，包括全景圖片、視頻、音頻等，并利用VR等技術為觀眾營造了一個監(jiān)獄“擬態(tài)環(huán)境”。觀眾可以觀看肯尼在監(jiān)獄里的生活，感受骯臟和混亂的監(jiān)禁環(huán)境，聽到監(jiān)獄里的噪音，并從肯尼的視角透過小鐵門看到警衛(wèi)制服不安分的囚犯的照片等。作品將監(jiān)獄現(xiàn)場的內(nèi)容和細節(jié)呈現(xiàn)在觀眾面前，讓觀眾在現(xiàn)場感受到監(jiān)獄里壓抑的環(huán)境和囚犯們的掙扎，充滿了視覺沖擊和情感震撼。國內(nèi)各大主流媒體也在VR+新聞領域做出了不少嘗試，2019年國慶閱兵、兩會報道等新聞事件中都可以看到虛擬現(xiàn)實新聞的身影。虛擬現(xiàn)實新聞因互動性更強、沉浸感更深入的優(yōu)勢發(fā)展迅猛。

三、多媒體融合技術新聞的優(yōu)勢

虛擬現(xiàn)實新聞也面臨著許多現(xiàn)實問題和挑戰(zhàn)，技術條件不夠成熟、VR設備的無法普及以及新聞倫理問題都讓虛擬現(xiàn)實新聞的發(fā)展障礙重重，導致很多人在批判虛擬現(xiàn)實新聞時，將虛擬現(xiàn)實新聞和沉浸式新聞混淆。僅僅將沉浸式體驗理解為VR/AR，是過于片面的認識。VR/AR只是一種實現(xiàn)沉浸式體驗效果的技術手段，需要借助設備實現(xiàn)人機交互。而沉浸式新聞《頭條里的青春中國》嘗試的是在不穿戴設備的情況下，實現(xiàn)受眾對沉浸式產(chǎn)品的所有想象：流動、交互、身臨其境的參與。雖然這種多媒體融合技術下的沉浸式新聞的呈現(xiàn)效果和虛擬現(xiàn)實技術下的沉浸式新聞相比，不如虛擬現(xiàn)實沖擊力強，無法自然互動和控制受眾知覺，但是這種拍攝思路和沉浸式體驗的運用為未來新聞業(yè)提供了一種新思路。多媒體融合技術以更加生動與多元的形式而非僅僅虛擬的技術創(chuàng)造了沉浸式的新聞場景，使受眾能夠在不穿戴設備的情況下獲得豐富的信息與多元的感知，應用多媒體融合技術來提供沉浸式新聞體驗能夠發(fā)揮虛擬現(xiàn)實新聞不具備的一些優(yōu)勢。

（一）受眾主體性增強

首先，多媒體融合技術下的沉浸式新聞是海量信息的聚集地。傳遞信息的方式多種多樣，可以通過圖片、音頻、視頻、動圖、H5等多種呈現(xiàn)方式整合新聞信息，增加了新聞的信息量。同時，多種感官的匯集讓新聞信息變得有趣、可讀，信息不再是枯燥的文字和數(shù)字的堆砌，多媒體的技術手段能夠讓受眾通過參與來實現(xiàn)沉浸式的體驗，體會新聞信息的知識性和趣味性。其次，信息的交互在多媒體融合技術中更具有主體性。受眾在融合新聞報道中有更強的參與權和選擇權，可以根據(jù)自己的需求選擇想讀的內(nèi)容，根據(jù)自己的參與情況來安排閱讀的時間、順序和速度。跟虛擬現(xiàn)實新聞相比，人的主體性得到了體現(xiàn)。虛擬現(xiàn)實新聞中，受眾更多的是被納入虛擬現(xiàn)實環(huán)境，其互動和參與受虛擬環(huán)境的控制和影響。多媒體融合的沉浸式新聞中，受眾可以根據(jù)自身需求選擇愿意深入了解的內(nèi)容，使信息價值被最大化利用和最有效傳播，既體現(xiàn)了互動性，也增強了新聞現(xiàn)場的參與感。

（二）非虛擬環(huán)境的沉浸式體驗

傳統(tǒng)新聞環(huán)境中，新聞工作者與受眾之間是較為簡單的傳播者和接收者的單向模式。進入萬物皆媒的時代，人人都有麥克風，這種傳播者和接收者之間的模式已經(jīng)無法適應高速發(fā)展的新媒體環(huán)境。沉浸式新聞中的讀者不再局限于單方面的信息接收，多媒體融合將“讀者”變?yōu)椤坝^眾”，強調(diào)信息接收者的參與和互動。虛擬現(xiàn)實技術為觀眾創(chuàng)造一個虛擬空間，讓其置身其中，對受眾進行物理環(huán)境的隔離，是一種“虛幻之身的沉浸體驗”；而多媒體融合技術下的新聞是結合非虛擬的圖片、視頻和其他新聞元素，打造一個浸入式的新聞場景。以第一人稱的視角將觀眾的多種感官結合，將主體的人融入到現(xiàn)實的新聞環(huán)境之中，是物理空間的打破融合而非隔離。

與此同時，多媒體融合技術的沉浸式新聞需要受眾的參與，在新聞信息的接收過程中需要受眾以第一人稱視角進入，親自參與到新聞場景中，感受故事的細節(jié)和發(fā)展，受眾具有接收和處理信息的主動權。這意味著新聞敘事主客體之間的界限更加模糊，甚至趨于消失。受眾不僅是敘事的對象，還是故事的創(chuàng)作者。沉浸式體驗新聞因參與式創(chuàng)作而帶來交互性。受眾是主角，傳播者和接收者共同創(chuàng)造內(nèi)容，體驗新聞的場景。這使得受眾能夠從第一人稱的角度深入感知新聞場景，身臨其境地體驗真實故事。

四、結語

隨著5G時代的到來，虛擬現(xiàn)實新聞的發(fā)展勢頭越來越迅猛，VR/AR等技術的日漸成熟會在人機交互上給沉浸式新聞注入新的活力。但是，新媒體技術融合下的沉浸式新聞或許可以變成主流?；谝陨戏治?，新媒體技術融合在技術層面比虛擬現(xiàn)實新聞實現(xiàn)起來更容易，而且能夠發(fā)揮受眾的主體性，用融合替代物理空間的隔離，可以在非虛擬的環(huán)境實現(xiàn)參與、對話和身臨其境。未來新聞業(yè)可以多用融合技術來替代虛擬現(xiàn)實，這種新媒體融合技術下的沉浸式新聞允許受眾參與程度更高，新聞工作者可以扮演信息整合者和把關人的角色，讓受眾真正參與到新聞信息的傳播中來。比如，在某一新聞事件現(xiàn)場，新聞工作者可以成為新聞的發(fā)起者，在現(xiàn)場的事件參與者可以發(fā)布多個視角的照片、視頻和資料，新聞工作者作為把關人將這些信息進行整合和編排，以沉浸式新聞的形式呈現(xiàn)；受眾可以參與到新聞的創(chuàng)作中來，在接收信息的同時也能夠根據(jù)自己的主體性來選擇想要看到的新聞信息。比如，受眾可以在一條新聞中選擇“當事人視角”“旁觀者視角”“監(jiān)控視角”“路人視角”等多角度來體驗新聞場景。未來的沉浸式新聞應該是新聞創(chuàng)作者和接收者邊界逐漸消失的一個過程，共同參與、交流對話將會在多媒體融合技術下實現(xiàn)新聞的非虛擬沉浸式體驗。

注釋：

①Nonny de la Pena，Weil P，Llobera J，et al.Immersive Journalism：Immersive Virtual Reality for the First-Person Experience of News[J].Presence Teleoperators&Virtual Environ ments，2010，19(04)：291-301.

②曹競，劉俞希.5G時代下的媒體融合發(fā)展 中國青年報沉浸式體驗新聞的探索與思考 [J].新聞與寫作，2020(03)：89-93.

③杭敏.融合新聞中的沉浸式體驗——案例與分析[J].新聞記者，2017(03)：76-83.

④de la Pena，N.，Weil，P.，Llobera，J.，Giannopoulos，E.，Pomes，A.，Spanlang，B.，Slater，M.： Immersive journalism：immersive virtual reality for the first-person experience of news.Presence 19，291-301（2010）.