清乾隆農(nóng)耕商貿(mào)圖外銷壁紙多媒體呈現(xiàn)研究

劉海颯，付常青

摘 要 通過探究清乾隆農(nóng)耕商貿(mào)圖外銷壁紙的多媒體視覺呈現(xiàn)，構(gòu)建多媒體呈現(xiàn)視閾下的文物保護傳承模式和科學(xué)方法。探索符合中國國情的文化遺產(chǎn)保護與可持續(xù)發(fā)展的載體和途徑，對于清代廣東外銷藝術(shù)文化內(nèi)涵的保護與傳承，以及建構(gòu)符合中國國情文化遺產(chǎn)的可持續(xù)發(fā)展開拓出新的研究領(lǐng)域和學(xué)術(shù)視野。

關(guān)鍵詞 多媒體；敘事架構(gòu)；文物數(shù)字化

中圖分類號 G2 文獻標識碼 A 文章編號 2096-0360（2020）21-0027-03

由于當代信息傳達呈現(xiàn)非物質(zhì)性的特質(zhì)，使得5G時代智慧博物館建設(shè)中的展陳設(shè)計從以往側(cè)重技術(shù)性層面的設(shè)計逐漸轉(zhuǎn)變?yōu)楦鶕?jù)人性需求，從觀眾的體驗和反饋出發(fā)，利用多媒體虛擬現(xiàn)實和增強現(xiàn)實技術(shù)以沉浸性、趣味性和交互性的視覺形態(tài)，將歷史文化由靜態(tài)的可知到動態(tài)的可感，幫助人們提升對文物背后人文景象的多重認知。

2011年廣東省博物館從海外回購的清乾隆農(nóng)耕商貿(mào)圖外銷壁紙，成為中國文博界唯一一套最大最完整的清代外銷手繪壁紙。作為國家一級文物，對其進行多媒體藝術(shù)呈現(xiàn)以及整體展示流程的創(chuàng)新，借助多媒體這種綜合性媒介技術(shù)的跨學(xué)科研究，分析不同媒介的形態(tài)要素和多模態(tài)呈現(xiàn)方式，及其形態(tài)的衍生特征，以原始數(shù)字圖像為核心，通過大數(shù)據(jù)、云計算、物聯(lián)網(wǎng)、人工智能等相關(guān)技術(shù)多維度的相互融合，從宏觀層面建立文物多媒體藝術(shù)呈現(xiàn)體系，將多維的信息可視化。借以進行18世紀中期經(jīng)廣州口岸外銷至歐洲的壁紙貿(mào)易的考釋研究，探索清代廣東外銷壁紙前期數(shù)字化保護與后期多媒體呈現(xiàn)的“耦合關(guān)系”，拓寬對于清代廣東外銷壁紙從單一保護向多元傳承的傳播路徑和傳播廣度，為構(gòu)建清代廣東外銷壁紙保護和傳承的可持續(xù)發(fā)展和文化價值的增值模式提供更多可能，從而讓更多人關(guān)注和共享嶺南優(yōu)秀的文化遺產(chǎn)。

1 運用多媒體技術(shù)構(gòu)建多維的敘事架構(gòu)體系

由于文物的多媒體呈現(xiàn)研究，涉及到歷史文化學(xué)、考古學(xué)、人類學(xué)、民俗學(xué)、設(shè)計藝術(shù)學(xué)、傳播學(xué)等交叉學(xué)科。為了塑造更有利于傳播的多維敘事情境，首先對清乾隆農(nóng)耕商貿(mào)圖外銷壁紙進行紅外線高精數(shù)據(jù)采集，即采用多個能透過不同波長的紅外濾鏡對壁紙進行同軸影像的信息采集，合成后可以得到壁紙中的更多細節(jié)。隨后將這些采集到的圖像信息建立數(shù)據(jù)檔案庫。后期運用計算機圖形學(xué)、知識圖譜信息技術(shù)等復(fù)合性技術(shù)的語義檢索、關(guān)聯(lián)挖掘和可視化呈現(xiàn)方式，全方位挖掘、詮釋清乾隆農(nóng)耕商貿(mào)圖外銷壁紙潛藏其后的歷史文化內(nèi)涵。同時，從數(shù)據(jù)端將散落的信息點進行語意數(shù)字化處理，構(gòu)建起完整的敘事框架和多重的敘事空間，對壁紙畫面內(nèi)容描繪的情景進行再造、重構(gòu)和深入拓展，將畫面上的50多個生活生產(chǎn)場景，分成農(nóng)耕、制茶等主題。每個主題均以完整的故事情節(jié)構(gòu)建起敘事的邏輯系統(tǒng)，生動展現(xiàn)手繪壁紙中的人物關(guān)系，并串聯(lián)起不同場景彼此之間的關(guān)聯(lián)。通過對壁紙畫面內(nèi)容全方面、多維度、深層次的情境再現(xiàn)，還原清代廣府地區(qū)的民風(fēng)民俗、市井生活。同時將前期經(jīng)過轉(zhuǎn)換的數(shù)字信息，借助不同媒介敘事的表達方式和多模態(tài)形式語言，運用多種傳感設(shè)備以及AR、VR、MR等輔助技術(shù)形成開放的“組聯(lián)”，實現(xiàn)數(shù)據(jù)的智慧融合。拓展壁紙的傳播的物化載體，將文字、圖像、音頻、視頻等信息集合成完整的交互系統(tǒng)，全方位訴諸于觀眾的“五感”（視覺、聽覺、觸覺、嗅覺、味覺）神經(jīng)中樞，將各種體感信息混合并重構(gòu)，模糊各種感知之間的界限，使得通感聯(lián)覺的多層級體驗的轉(zhuǎn)換進一步得以實現(xiàn)，增強敘事情境的真實感、敘事感染力和帶入感，讓壁紙背后的歷史內(nèi)容“復(fù)活”再生。

根據(jù)清乾隆農(nóng)耕商貿(mào)圖外銷壁紙預(yù)設(shè)的敘事架構(gòu)內(nèi)容，以及多媒體視覺呈現(xiàn)創(chuàng)造的“擬真”情境，將物理上的靜態(tài)圖像衍變成虛擬的四維影像，重現(xiàn)和還原清中期農(nóng)耕、桑織、制陶、制茶等傳統(tǒng)工藝造物中的繁瑣程序。實現(xiàn)人機的多模態(tài)即時交互。同時借助數(shù)字頭盔、數(shù)據(jù)手套等可穿戴智能設(shè)備帶來的空間信息定位，突破場地時空的限制，對真實空間進行擴增。復(fù)原手繪壁紙當時的歷史現(xiàn)場和生活場景，讓觀眾可以親歷，并細致觀察當時制茶、農(nóng)耕的整個動態(tài)流程，通過多重感官的審美體驗讓觀眾可以不受時空限制“浸入”到“真實”的情境空間中，讓手繪壁紙中的圖像仿若“觸手可及”。感受到更多層次的歷史情境以及手繪壁紙上的畫面細節(jié)。產(chǎn)生身臨其境的沉浸感和臨場感。

作為歷史信息物化的載體和傳播媒介，由于清乾隆農(nóng)耕商貿(mào)圖外銷壁紙整體信息內(nèi)容呈現(xiàn)碎片化的特征，根據(jù)當下觀眾體驗歷史文化的心理需求，建構(gòu)以觀眾體驗為核心的非線性敘事形態(tài)和多向性的行為交互模塊。以滿足個性化差異帶來的體驗需求。先期的敘事設(shè)計根據(jù)清乾隆農(nóng)耕商貿(mào)圖外銷壁紙中圖像所呈現(xiàn)的空間與時間、事物與人的結(jié)構(gòu)關(guān)系。預(yù)設(shè)出敘事結(jié)構(gòu)和敘事空間的多種可能性。為觀眾介入預(yù)留下更多想象、自主掌控的空間，同時，為不同年齡和文化背景的人群搭建不同的敘事鏈接入口，將敘事發(fā)展的選擇權(quán)交由觀眾，讓觀眾的個性化選擇產(chǎn)生不同的敘事發(fā)展走向，使外銷手繪壁紙的敘事過程不僅局限于固定的物理空間和不可逆的時間序列，而是以人機雙向互動產(chǎn)生的不確定性增強敘事的多層次表現(xiàn)。比如：觀眾的不同選擇或指令直接影響敘事的進程或者導(dǎo)致敘事不同的結(jié)果，以此增強故事的連貫性和趣味性。同時根據(jù)場景中預(yù)設(shè)的熱點鏈接，讓觀眾可以通過AR功能面板進行個性化操作，通過手勢點擊、平移、旋轉(zhuǎn)或者發(fā)出語音指令建立多維信息交互的空間，讓觀眾可以自主放大和增強物理環(huán)境中體驗的刺激效果，在虛擬現(xiàn)實的情境中始終處于 “在場”的狀態(tài)，通過創(chuàng)建沉浸體驗的不同層次空間和個性化的體驗區(qū)域，讓敘事的環(huán)節(jié)和情節(jié)設(shè)計更加流暢和自然。從中獲取到更加多元化的信息解讀和更為多維、豐富的身心體驗。

同時注重人機交互過程中的情感體驗，通過運用智能裝置的識別與定位、全息投影、仿真信息技術(shù)，切入清乾隆農(nóng)耕商貿(mào)圖外銷壁紙所描繪的“歷史現(xiàn)場”，還原歷史的真實感和臨場感。讓觀眾穿越到當時的歷史情境中，通過近距離觀看、觸摸，甚至參與其中進行同樣的生產(chǎn)勞作，獲得更深入的理解和體驗，從中感受到當時人們的生活方式與行為邏輯。進而獲得更為自然、真實的情境體驗，讓受眾在主動參與，促其“活化”的過程中實現(xiàn) “擬像”后的疊加，對清代廣州社會原貌的理解更加深刻、立體和全面，建立起與歷史情境緊密的情感鏈接和情感認同。

2 運用多媒體技術(shù)實現(xiàn)文物數(shù)字化的設(shè)計策略

2.1 擴展清乾隆農(nóng)耕商貿(mào)圖外銷壁紙多媒體呈現(xiàn)的沉浸式體驗設(shè)計

首先，運用編程技術(shù)，構(gòu)建圖像數(shù)據(jù)庫、網(wǎng)絡(luò)拓撲架構(gòu)等一系列模塊，將數(shù)字技術(shù)與藝術(shù)表現(xiàn)相互融合。同時實景造型復(fù)原清乾隆農(nóng)耕商貿(mào)圖外銷壁紙上的自然場景，通過幻影成像技術(shù)，多媒體投影沙盤，動感滑軌、360度環(huán)幕等多媒體技術(shù)，將壁紙上的圖像處理成360度首尾相連的環(huán)形畫面。將“景觀造型”與“虛擬影像”相結(jié)合，運用混合現(xiàn)實技術(shù)塑造“幻象”把清乾隆農(nóng)耕商貿(mào)圖外銷壁紙中的人物及其行為活動投射在模擬的現(xiàn)實場景中，實現(xiàn)在真實物理空間里中的“全息投影”。然后運用聲效、動效將虛擬時空與真實場景相互融合，打破了時間和空間等因素的限制，還原歷史的現(xiàn)場氛圍，將平面壁紙上靜態(tài)的歷史場景“復(fù)活”。使得壁紙上的景物借助全息數(shù)字媒體技術(shù)得以再生呈現(xiàn)在現(xiàn)實空間中，以多維度、深層次的情境重現(xiàn)壁紙場景和細部形象，帶給觀眾真實而深刻的沉浸感。并讓觀眾與清乾隆農(nóng)耕商貿(mào)圖外銷壁紙上的“人物”和歷史情境的“交流”更加直觀和完整。

其次，采集現(xiàn)場觀眾的眼動跟蹤數(shù)據(jù)，配合增強現(xiàn)實技術(shù)提供的各種靈活、生動的交互資源，通過動態(tài)圖文影像數(shù)字觸摸屏和數(shù)字筆，提高與觀眾的參與度和互動。同時以移動終端為媒介，借助社交媒體為觀眾提供定制化的服務(wù)。以超鏈接方式將清乾隆農(nóng)耕商貿(mào)圖外銷壁紙信息數(shù)據(jù)庫中的多維信息（地理位置、歷史背景等）通過關(guān)鍵字檢索、需求分析和邏輯設(shè)計進行分類，實現(xiàn)個性化內(nèi)容的發(fā)送。讓觀眾在現(xiàn)場與清乾隆農(nóng)耕商貿(mào)圖外銷壁紙中的虛擬人物、場景進行實時交互，并實時獲取相關(guān)文字介紹和視頻展示，便于深入解讀其相關(guān)人文背景信息。讓觀眾“走進歷史”并沉浸其中，將其背后的歷史感、美感和意蘊以更有效的方式傳遞給觀眾。最大化呈現(xiàn)其中的文化審美和歷史價值，拓展和提升觀眾獲取信息的層次和感知深度。

2.2 制定清乾隆農(nóng)耕商貿(mào)圖外銷壁紙多媒體呈現(xiàn)的共情互動策略

在符合人機交互行為的邏輯性和滿足觀眾觀賞歷史文物的心理、情感欲求的前提下，制定清代廣東外銷壁紙多媒體呈現(xiàn)的共情互動設(shè)計策略。通過體感交互游戲，虛擬場景漫游、虛擬劇場角色扮演等豐富靈活的人機交互模式，將清乾隆農(nóng)耕商貿(mào)圖外銷壁紙二維平面拓展到四維形態(tài)、突破時空的限制，從實物到虛擬、從無聲到有聲，借助多媒體虛擬現(xiàn)實技術(shù)提供的預(yù)設(shè)空間，營造與清代外銷文化相適應(yīng)的審美和情趣兼具的虛擬場景。

由于清乾隆農(nóng)耕商貿(mào)圖外銷壁紙的唯一性和不可復(fù)制性，以及當時歷史時期、文化形態(tài)等不確定性，讓觀眾穿戴智能設(shè)備通過手臂的動作，自主操控，同時運用攝像頭捕捉空間跟蹤點的實時定位功能和動態(tài)捕捉技術(shù)，引導(dǎo)觀眾在四維時空中通過手勢識別、語音控制等增強現(xiàn)實技術(shù)與清乾隆農(nóng)耕商貿(mào)圖外銷壁紙中的人物和場景隔空交互、共情互動。同時，通過虛擬漫游技術(shù)與系統(tǒng)編程軟件創(chuàng)制的虛擬空間進行實時協(xié)作，將獲取的觀眾表情信息實時映射到三維虛擬角色上，運用表情捕捉系統(tǒng)中的攝像校準模塊提升擬真性和在場感。讓觀眾通過全感官的沉浸式體驗，穿越歷史獲得身臨其境的真實感。同時開發(fā)《蒙面猜猜猜漫游農(nóng)耕圖》H5游戲，通過掃描游戲二維碼進入游戲界面開始漫游之旅，將計算機生成的虛擬場景疊加到現(xiàn)實世界的真實場景中，讓觀眾體驗虛實結(jié)合的增強現(xiàn)實技術(shù)生成的混合空間，并在其中扮演各種角色穿梭在多個場景和多條線路之間進行“虛擬漫游”：種水稻、制茶餅等。游戲中還可以根據(jù)清乾隆農(nóng)耕商貿(mào)圖外銷壁紙中的內(nèi)容建設(shè)，設(shè)定多條敘事主題線路，如觀光線路、冒險線路、制茶線路等，在“虛擬漫游”游覽線路的途中可以查看線路延展的歷史背景。同時還可以隨意切換到其他線路，通過敘事劇情的發(fā)展體驗穿越歷史。同時通過參與知識競答環(huán)節(jié)，答題贏積分，答題闖關(guān)解鎖等方式獲取成績證書，兌換地圖、明信片以及定制的周邊衍生品。最終以審美體驗為導(dǎo)向，打造更具感染力、親和力和更為生動的傳播路徑和更為人性化、立體化的傳播方式，增強感知的趣味性。多角度衍生和展現(xiàn)清乾隆農(nóng)耕商貿(mào)圖外銷壁紙的藝術(shù)價值和人文知識。讓觀眾從中獲取與其相關(guān)的歷史信息以及平面壁紙中隱藏的細節(jié)內(nèi)容，實現(xiàn)其文化內(nèi)涵的有效傳播。

3 結(jié)語

隨著信息時代的高速發(fā)展，物聯(lián)網(wǎng)、云計算、大數(shù)據(jù)等先進技術(shù)讓中國文博界面臨新的挑戰(zhàn)和機遇。通過探究清乾隆農(nóng)耕商貿(mào)圖外銷壁紙的多媒體視覺呈現(xiàn)，構(gòu)建多媒體呈現(xiàn)視閾下的文物保護傳承模式和科學(xué)方法。將更加尖端、前沿的科技運用到文物的數(shù)字化保護中和建設(shè)成長型的智慧博物館領(lǐng)域，賦能發(fā)展、擴大資源共享。探索符合中國國情的文化遺產(chǎn)保護與可持續(xù)發(fā)展的載體和途徑，為清代廣東外銷藝術(shù)文化內(nèi)涵的保護、傳承以及可持續(xù)增值新模式拓展出新的研究領(lǐng)域和學(xué)術(shù)視野。

參考文獻

[1]奧利弗·格勞.虛擬藝術(shù)[M].陳玲，譯.北京：清華大學(xué)出版社，2007.

[2]邁克爾·海姆.從界面到網(wǎng)絡(luò)——虛擬實在的形而上學(xué)[M].金吾侖，劉剛，譯.上海：上?？萍冀逃霭嫔纾?000.

[3]周詩巖.建筑物與像——遠程在場的影像邏輯[M].南京：東南大學(xué)出版社，2007.