XR技術(shù)和數(shù)字人技術(shù)在紀(jì)錄片中的應(yīng)用

［摘要］ 近年來(lái)，隨著科技的不斷發(fā)展，XR、數(shù)字人等新技術(shù)逐漸在紀(jì)錄片創(chuàng)作中得到應(yīng)用，為紀(jì)錄片的發(fā)展帶來(lái)了新的美學(xué)影響和價(jià)值補(bǔ)充。以紀(jì)錄片《風(fēng)起東方》中XR技術(shù)、數(shù)字人技術(shù)的應(yīng)用為例，述評(píng)新技術(shù)對(duì)紀(jì)錄片制作產(chǎn)生的美學(xué)、價(jià)值等方面的影響。

［關(guān)? 鍵? 詞］ 紀(jì)錄片；新技術(shù)；XR；數(shù)字人

在記錄與傳播的要求下，紀(jì)錄片需要尊重客觀事實(shí)，真實(shí)地保存文化現(xiàn)象。隨著紀(jì)錄片觀看人群的年輕化，觀眾對(duì)于紀(jì)錄片的需求也在不斷變化，不僅要求紀(jì)錄片具有真實(shí)性和教育性，還要求其具有觀賞性和娛樂(lè)性。XR、AI等新技術(shù)已經(jīng)成為影響紀(jì)錄片發(fā)展的重要因素，這些新技術(shù)不僅拓展了紀(jì)錄片的創(chuàng)作形式，還進(jìn)一步拓展了紀(jì)實(shí)影像的創(chuàng)作邊界和想象空間。

一、研究背景

新技術(shù)和新思維在紀(jì)錄片中的應(yīng)用已經(jīng)是時(shí)代趨勢(shì)。很多國(guó)際流媒體已經(jīng)推出了運(yùn)用虛擬制作技術(shù)的紀(jì)錄片，如《我們星球上的生命》等。許多中國(guó)紀(jì)錄片制作方也將重點(diǎn)轉(zhuǎn)向探索紀(jì)錄片與虛擬制作的結(jié)合，如2023年優(yōu)酷出品的紀(jì)錄片《風(fēng)起東方》以當(dāng)下為出發(fā)點(diǎn)，縱向溯源絲綢之路的“古”與“今”，運(yùn)用XR、AR、AI技術(shù)，融合“藝術(shù)+技術(shù)”，首次采用阿里大文娛超寫(xiě)實(shí)數(shù)字人“厘里”作為串聯(lián)線索，從“鑒古觀今”“兼收并蓄”“美美與共”“絲路味道”“和諧共生”“大道同行”六大主題出發(fā)，以數(shù)字人視角跨越四大洲，帶領(lǐng)觀眾感受千年絲路的厚重歷史以及“一帶一路”的十年變遷。

本文中提到的XR技術(shù)和數(shù)字人的概念如下：XR是“擴(kuò)展范圍（extended-range）”的縮寫(xiě)，虛擬現(xiàn)實(shí)（VR）、增強(qiáng)現(xiàn)實(shí)（AR）和混合現(xiàn)實(shí)（MR）這些技術(shù)統(tǒng)稱(chēng)為“擴(kuò)展現(xiàn)實(shí)”（XR）；數(shù)字人是一種由計(jì)算機(jī)程序驅(qū)動(dòng)的擁有自身意識(shí)和身份的人工人，可以在數(shù)字世界中展現(xiàn)出與真實(shí)人類(lèi)相同的生理、心理、社會(huì)表現(xiàn)。

二、新的美學(xué)體驗(yàn)：更沉浸的體驗(yàn)、更豐富的視聽(tīng)語(yǔ)言、更通順的敘事結(jié)構(gòu)

（一）XR技術(shù)的應(yīng)用：可互動(dòng)、立體化的視覺(jué)讓觀眾更沉浸

新的數(shù)字圖像技術(shù)，例如電腦動(dòng)畫(huà)、數(shù)字地圖、全景成像、虛擬現(xiàn)實(shí)、延時(shí)攝影等，都讓紀(jì)錄片對(duì)時(shí)間和空間的視覺(jué)表達(dá)更加多元［1］。

XR技術(shù)在題材內(nèi)容、敘事形態(tài)、視聽(tīng)語(yǔ)言、觀眾體驗(yàn)等方面對(duì)紀(jì)錄片產(chǎn)生了新的影響。在題材內(nèi)容上，題材的現(xiàn)實(shí)性和場(chǎng)景可表現(xiàn)性更加突出。在敘事形態(tài)上，XR的運(yùn)用使得紀(jì)錄片由傳統(tǒng)的線性敘事發(fā)展為互動(dòng)敘事。XR技術(shù)讓觀眾參與到對(duì)“真實(shí)”的建構(gòu)過(guò)程中，從“客觀真實(shí)”轉(zhuǎn)變?yōu)椤爸饔^真實(shí)”，從“旁觀真實(shí)”轉(zhuǎn)變?yōu)椤皡⑴c真實(shí)”［2］。例如在紀(jì)錄片《風(fēng)起東方》選集《錦繡萬(wàn)里》中，厘里望著背后的天空點(diǎn)動(dòng)手中按鈕，XR生成的虛擬荒漠中就升起了現(xiàn)代化的城市高樓，印證了文明誕生、共生和交流的主題。再如厘里轉(zhuǎn)動(dòng)手中充滿科技感的虛擬方塊，CG大石頭即從驛站地下出現(xiàn)，厘里與之形成了互動(dòng)。

此外，VR 場(chǎng)景中“媒介”的存在感被削弱?！拔覀兊奈幕认Ｍ麚碛卸喾N媒介，同時(shí)又想消除所有媒介化的痕跡：理想化地說(shuō)，它想要在增加媒介的同時(shí)消除媒介?！保?］在XR敘事場(chǎng)景里，沒(méi)有“畫(huà)框”將媒體里的虛擬世界和現(xiàn)實(shí)世界清晰地一分為二，整個(gè)視野范圍充滿真實(shí)的“現(xiàn)實(shí)事物”。在此場(chǎng)景下，導(dǎo)演無(wú)須擔(dān)心觀眾出戲的問(wèn)題，因?yàn)槌两降氖澜绾投鄻踊母兄w驗(yàn)?zāi)苁褂^眾“忘記媒介的存在”，更加深入地投入虛擬世界中。

觀眾可以通過(guò)XR技術(shù)感受更加真實(shí)的歷史場(chǎng)景。如在紀(jì)錄片《風(fēng)起東方》中，厘里借助科技感的生態(tài)電梯塔打開(kāi)不同的生態(tài)次元，觀眾可以跟隨她一起“回到”古絲綢之路上，看見(jiàn)絲綢、制香等技術(shù)如何傳承至今；“來(lái)到”老撾和英國(guó)，感受不同文化碰撞和交融。《風(fēng)起東方》橫向選取了最具代表性的多個(gè)側(cè)面，以點(diǎn)帶面、以面匯網(wǎng)，帶著觀眾見(jiàn)證昔日的繁榮景象和十年來(lái)的變革，歷史厚重感和現(xiàn)代生命力交相輝映。

（二）新技術(shù)拓展了視聽(tīng)語(yǔ)言：“藝術(shù)形式+”成為可能

虛擬現(xiàn)實(shí)空間對(duì)于紀(jì)錄片的最大改變還有敘事模式［4］?！讹L(fēng)起東方》在XR舞臺(tái)上融合了戲劇表演、民樂(lè)融合展、魔術(shù)互動(dòng)秀、詩(shī)歌朗誦等多種藝術(shù)形式，通過(guò)視聽(tīng)的雙重感受，豐富了紀(jì)錄片的表現(xiàn)力，立體展示了“一帶一路”十年建設(shè)成果。同時(shí)，數(shù)字人與演播廳現(xiàn)場(chǎng)真實(shí)人物的互動(dòng)使得整個(gè)節(jié)目更加流暢。本片總導(dǎo)演張偉表示：“XR與數(shù)字人物厘里的結(jié)合非常復(fù)雜，從XR素材制作到現(xiàn)場(chǎng)拍攝，需要精心調(diào)試，以確保畫(huà)面真實(shí)、具有科技感和立體感?！?/p>

在紀(jì)錄片《風(fēng)起東方》中，厘里與真實(shí)的新疆舞者共同演繹了一段舞蹈，通過(guò)交互融合技術(shù)的運(yùn)用，使得虛擬與現(xiàn)實(shí)完美融合，為觀眾帶來(lái)了一場(chǎng)震撼的視覺(jué)盛宴。這種技術(shù)難度極高，需要精確的捕捉和同步系統(tǒng)確保厘里與舞者之間的動(dòng)作協(xié)調(diào)一致。然而，正是通過(guò)這種技術(shù)的巧妙運(yùn)用，厘里成功地融入現(xiàn)實(shí)的場(chǎng)景中，與新疆舞者共同展現(xiàn)出絲綢之路的文化魅力。

（三）敘事方式連續(xù)性強(qiáng)：“厘里講述”的敘事主線結(jié)構(gòu)完整、邏輯通順

傳統(tǒng)的紀(jì)錄片敘事按照故事內(nèi)容結(jié)構(gòu)推進(jìn)，而以《風(fēng)起東方》為代表的新技術(shù)紀(jì)錄片在敘事形態(tài)上由傳統(tǒng)的線性敘事發(fā)展為互動(dòng)敘事。這種以“數(shù)字人講述”展開(kāi)的敘事方式連續(xù)性好、結(jié)構(gòu)完整、邏輯通順，豐富了紀(jì)錄片的表達(dá)方式。

《風(fēng)起東方》每集基本都遵照同一個(gè)模式：AI生成與實(shí)拍結(jié)合的固定片頭開(kāi)場(chǎng)，導(dǎo)入本期主題相關(guān)實(shí)拍快剪構(gòu)成的分集片頭，演播廳中數(shù)字人厘里入場(chǎng)，以她的“感受/體驗(yàn)”視角進(jìn)入正片。每集進(jìn)入正片之前的解說(shuō)和演播廳畫(huà)面的導(dǎo)入都是具有連續(xù)性的“相似”重復(fù)，而集與集之間又保持了相異性。

例如在紀(jì)錄片《風(fēng)起東方》選集《錦繡萬(wàn)里》中，厘里在三次轉(zhuǎn)場(chǎng)中橫跨古今兩千年，分別行走陸上、海上、空中三條絲路，從三個(gè)不同的視角展示了絲綢之路的古今發(fā)展；選集《和諧共生》中，厘里走過(guò)了三個(gè)相似的“動(dòng)靜結(jié)合”場(chǎng)景——非洲草原中獅子走過(guò)、海底世界中藍(lán)鯨游過(guò)、湖邊朱鹮飛過(guò)……接下來(lái)每集都選取了與主題契合的不同舞臺(tái)表現(xiàn)形式例如表演、朗誦等，以具有趣味性的方式導(dǎo)入紀(jì)錄片的主體：一個(gè)/多個(gè)主線人物的真實(shí)故事。接下來(lái)每集中都會(huì)配上對(duì)應(yīng)的干貨知識(shí)視頻，配以厘里的語(yǔ)音播報(bào)。最后以厘里工整而雅致的解說(shuō)主持作為結(jié)語(yǔ)升華主旨。

三、新的價(jià)值意義：更強(qiáng)的主體性視角、更自洽的敘事邏輯

除了為紀(jì)錄片帶來(lái)新的美學(xué)體驗(yàn)，數(shù)字人技術(shù)的應(yīng)用也為紀(jì)錄片的發(fā)展帶來(lái)了新的價(jià)值意義。從形式主義美學(xué)思想來(lái)看，數(shù)字人為主體的敘事確立了形式在藝術(shù)審美中的重要意義，將藝術(shù)手法提升到了單獨(dú)的本體地位。

作為《風(fēng)起東方》中的主要敘事角色，厘里代替了真人主持訴說(shuō)絲綢之路上的文化盛景，這樣的表達(dá)視角是對(duì)傳統(tǒng)紀(jì)錄片的顛覆和創(chuàng)新。數(shù)字人既不同于傳統(tǒng)的主持人，也不同于純粹的虛擬形象。其獨(dú)立主體性使紀(jì)錄片的觀點(diǎn)更抽離和獨(dú)立。她不僅僅是在講述歷史，更是在引導(dǎo)觀眾去思考和感受。這種敘事策略極大地拓展了紀(jì)錄片表達(dá)的空間范疇，是紀(jì)錄片自我呈現(xiàn)的新創(chuàng)舉。

（一）敘事的邏輯更為自洽的同時(shí)仍能夠“接上地氣”

斯圖亞特·霍爾將媒介看作一種表意工具?！熬幋a”過(guò)程即導(dǎo)演以電影語(yǔ)言為手段、以鏡頭為敘事單位，通過(guò)剪輯等方式組織成較為完整的影片的行為?！敖獯a”即文本到達(dá)受眾后“產(chǎn)生非常復(fù)雜的感知、認(rèn)知、情感、意識(shí)形態(tài)或者行為結(jié)果”［5］，即受眾對(duì)紀(jì)錄片觀看和理解的活動(dòng)。紀(jì)錄片作為一種文化文本，其觀看就是一種需要相應(yīng)能力才能獲取到其中意義的解碼活動(dòng)。在紀(jì)錄片的傳播過(guò)程中，由于受眾的文化結(jié)構(gòu)存在差異，對(duì)于紀(jì)錄片美學(xué)敘事、話語(yǔ)系統(tǒng)等的理解會(huì)出現(xiàn)差異。因此，如何降低受眾解碼過(guò)程的復(fù)雜性是紀(jì)錄片需要考慮的問(wèn)題。

XR紀(jì)錄片恰好降低了觀眾對(duì)于紀(jì)錄片文本符號(hào)的解碼難度。在編碼過(guò)程中，導(dǎo)演、攝影、剪輯三類(lèi)編碼者權(quán)力的削弱，大力去除了傳統(tǒng)紀(jì)錄片可能帶來(lái)的畫(huà)面意義的模糊性［6］。XR技術(shù)為紀(jì)錄片帶來(lái)故事發(fā)生現(xiàn)場(chǎng)的逼真再現(xiàn)，這種被制造出來(lái)的虛擬平行世界和觀眾所處的世界無(wú)限相似接近，VR紀(jì)錄片所制造的情感認(rèn)同和心理勸服優(yōu)勢(shì)更容易形成。

對(duì)于年輕受眾而言，紀(jì)錄片的價(jià)值體現(xiàn)在能夠滿足他們的學(xué)習(xí)和認(rèn)知需求。類(lèi)似于《風(fēng)起東方》的宣傳類(lèi)紀(jì)錄片是需要突出其教育意義的。在這里AI的“上帝視角”讓知識(shí)類(lèi)的解說(shuō)更加融洽，少了一些的“說(shuō)教”的意味。厘里本身作為“少女”的身份設(shè)定使其充滿活力和青春的氣息，其生動(dòng)可愛(ài)的語(yǔ)氣顯得易讓人親近。

例如在《風(fēng)起東方》選集《美美與共》中，厘里聽(tīng)到陌生的音樂(lè)便進(jìn)行了AI檢索并向觀眾播報(bào)，主動(dòng)提到“作為數(shù)字人我學(xué)習(xí)了人類(lèi)的感知模式”；又如選集《絲路味道》中厘里在虛擬果園中游覽，直接向AI云數(shù)據(jù)提問(wèn)，再由搜索到的結(jié)果進(jìn)行背景知識(shí)的補(bǔ)充——在數(shù)字人身份的鋪墊下，這些“百科式”道理輸出的敘事都發(fā)生得很自然。厘里和廚師亞當(dāng)提到地三鮮這道菜的時(shí)候開(kāi)玩笑地說(shuō)“您一定來(lái)自東北”；講到武術(shù)時(shí)，厘里舉了李小龍的例子，以打趣的形式展示……這些生活化的語(yǔ)言更拉近了與人們的距離。

（二）“藝術(shù)+技術(shù)”拓展創(chuàng)作空間，促成更廣泛的傳播推廣

真實(shí)再現(xiàn)的意義在于，其能通過(guò)虛擬的場(chǎng)景，真實(shí)地反映歷史某個(gè)時(shí)期的真實(shí)，從而使人們?nèi)菀桌斫膺^(guò)往的歷史或顯示現(xiàn)實(shí)已經(jīng)不存在的場(chǎng)景［7］。借助最先進(jìn)的虛擬現(xiàn)實(shí)技術(shù)，很多過(guò)去無(wú)法呈現(xiàn)的歷史事件、歷史場(chǎng)景和歷史人物也都可以通過(guò)XR進(jìn)行模擬。

傳統(tǒng)媒體在傳播信息過(guò)程中往往受制于時(shí)間、地點(diǎn)變化的影響，難以進(jìn)行完整全面的呈現(xiàn)。照相術(shù)的發(fā)明，為傳播帶來(lái)真切直接的效果。然而隨著特效合成等計(jì)算機(jī)技術(shù)的出現(xiàn)，“影像本體論”幾乎遭到瓦解。一些經(jīng)過(guò)處理的數(shù)字影像讓影像和真實(shí)的界限變得模糊，影像已經(jīng)無(wú)法保證其視覺(jué)的真實(shí)。經(jīng)過(guò)實(shí)際拍攝的VR紀(jì)錄片，創(chuàng)造出影史上前所未有的真實(shí)感。

攝影機(jī)不再需要將鏡頭對(duì)準(zhǔn)完全真實(shí)存在的世界，一套強(qiáng)大的特效制作系統(tǒng)就可以完成從千軍萬(wàn)馬的戰(zhàn)爭(zhēng)場(chǎng)面到玲瓏剔透的玩物珍寶的各種場(chǎng)景的制作。虛擬現(xiàn)實(shí)技術(shù)可以將所有文字的歷史形象化，也可以將歷史的遺跡或考古的現(xiàn)場(chǎng)進(jìn)行復(fù)原，這樣一來(lái)，數(shù)字技術(shù)使得歷史紀(jì)錄片非常富有表現(xiàn)力。借助XR媒介，人們可以多角度、全方位地獲取世界其他地方的真實(shí)情境狀況，跨越國(guó)界的同時(shí)，也克服了時(shí)空限制。例如在紀(jì)錄片《風(fēng)起東方》選集《鑒古觀今》中，在呈現(xiàn)陸上絲綢之路和當(dāng)今中歐班列的共生脈絡(luò)時(shí)，數(shù)字人厘里和安西大都護(hù)共同見(jiàn)證了運(yùn)用XR生成的“中歐班列”從“古城墻”中開(kāi)出。

此外，數(shù)字人的應(yīng)用還為紀(jì)錄片帶來(lái)了新的營(yíng)銷(xiāo)策略。數(shù)字人虛擬偶像IP可以增強(qiáng)觀眾黏性。虛擬偶像是一種自帶關(guān)系的新型傳播媒介，讓內(nèi)容在部分受眾中更容易被關(guān)注和認(rèn)可，更具影響力。例如本片中的數(shù)字人厘里，她作為AIGC打造的阿里文娛虛擬偶像數(shù)字人，此前已經(jīng)出演過(guò)《異人之下》等知名劇目，并且數(shù)字人演員相對(duì)于真人演員會(huì)更吸睛，關(guān)于她的大規(guī)模討論達(dá)到了“二次元人和紀(jì)錄片愛(ài)好者雙廚狂喜”的目的。

四、仍可改進(jìn)：升級(jí)技術(shù)手段，以技術(shù)賦能藝術(shù)

紀(jì)錄片《風(fēng)起東方》總監(jiān)制張偉介紹：“內(nèi)容層面，節(jié)目更聚焦文化視角，從不同維度呈現(xiàn)‘一帶一路國(guó)家的發(fā)展變化；形式層面的創(chuàng)新主要集中在技術(shù)和藝術(shù)的結(jié)合?！?雖然新技術(shù)在紀(jì)錄片中的應(yīng)用已經(jīng)取得了一定的成果和經(jīng)驗(yàn)，但仍存在待改進(jìn)之處。

首先，目前數(shù)字人和XR之間的結(jié)合仍有些生硬，雖然有些選段已經(jīng)很適配，但仍有些段落存在割裂感。例如在《風(fēng)起東方》選集《和諧共生》中萬(wàn)物共生之塔和非洲草原的俯視大全景十分逼真，但是選集《大道同行》中外國(guó)友人站在卷軸虛擬背景下朗誦就顯得有些違和。

其次，目前XR技術(shù)和數(shù)字人還局限在演播廳內(nèi)，或許可以參考借鑒Pokemon Go中AR的應(yīng)用，把虛擬生成的主體“放歸自然”，將它們真實(shí)地融入現(xiàn)場(chǎng)拍攝中，實(shí)現(xiàn)更多場(chǎng)景的互動(dòng)。

虛擬技術(shù)作為一種嶄新的媒介傳播技術(shù)，創(chuàng)造了全新的沉浸式的傳播交流方式，對(duì)推動(dòng)紀(jì)錄片的傳播發(fā)展、促進(jìn)主客體交互感受的作用毋庸置疑。但其嬗變過(guò)程所帶來(lái)的對(duì)真實(shí)性的考究、對(duì)職業(yè)倫理問(wèn)題的追問(wèn)、對(duì)本體與美學(xué)方面的權(quán)衡等一系列問(wèn)題都是亟待思考的新課題［8］。堅(jiān)持在多個(gè)維度上接近真實(shí)，才能讓紀(jì)錄片在整體上最大限度地還原真實(shí)。

虛擬影像的創(chuàng)造力所帶來(lái)的美感，為紀(jì)錄片創(chuàng)作提供了很多可能性，極大程度上豐富了紀(jì)錄片作品的類(lèi)型。在可以預(yù)見(jiàn)的未來(lái)，隨著技術(shù)的不斷發(fā)展完善，紀(jì)錄片的創(chuàng)作將會(huì)更加豐富多樣，實(shí)現(xiàn)更多的可能性，新技術(shù)在讓紀(jì)錄片更好看、更主流、更前沿的同時(shí)，也必將在產(chǎn)品傳播層面帶來(lái)更多變化，為觀眾帶來(lái)更好的觀影體驗(yàn)。

參考文獻(xiàn)：

［1］梁君健，楊茹珺.破壁與融合：當(dāng)代紀(jì)錄片創(chuàng)新發(fā)展的技術(shù)動(dòng)因研究［J］.中國(guó)電視，2021（12）：83-90.

［2］高天.技術(shù)及真實(shí)：VR紀(jì)錄片的身份探討［J］.當(dāng)代電視，2020（2）：75-80.

［3］瑪麗-勞瑞·瑞恩，徐亞萍.作為敘事的虛擬現(xiàn)實(shí)［J］.北京電影學(xué)院學(xué)報(bào)，2016（3）：28-36.

［4］丁艷華.“創(chuàng)新語(yǔ)言”講述“傳承精神”：虛擬影像在國(guó)產(chǎn)非遺紀(jì)錄片中的新式美學(xué)探析［J］.中國(guó)電視，2019（10）：52-55.

［5］劉怡伶，王哲.反思—建構(gòu)—價(jià)值：斯圖亞特·霍爾文化領(lǐng)導(dǎo)權(quán)理論的思想內(nèi)核與精神實(shí)質(zhì)［J］.西部學(xué)刊，2023（23）：17-22.

［6］劉玉.虛擬現(xiàn)實(shí)技術(shù)下的紀(jì)錄片創(chuàng)作與發(fā)展研究［D］.蘭州：西北師范大學(xué)，2017.

［7］汪磊.“真實(shí)再現(xiàn)”讓紀(jì)錄片不再“虛擬”：當(dāng)代技術(shù)對(duì)電視紀(jì)錄片帶來(lái)的影響［J］. 廣西大學(xué)學(xué)報(bào)（哲學(xué)社會(huì)科學(xué)版），2011（5）：98-101.

［8］李春雷，曹芝慧.虛擬現(xiàn)實(shí)技術(shù)對(duì)紀(jì)錄片功用的倫理沖突［J］.徐州工程學(xué)院學(xué)報(bào)（社會(huì)科學(xué)版），2017，32（4）：72-77.

作者簡(jiǎn)介：

顧彥君（2003—），女，漢族，江蘇南通人，本科在讀，研究方向：新聞與傳播。

作者單位：蘇州大學(xué)傳媒學(xué)院