新媒介互動(dòng)性繪本界面設(shè)計(jì)應(yīng)用研究

趙昕 劉群

摘 要：文化遺產(chǎn)數(shù)字化保護(hù)是文化遺產(chǎn)保護(hù)發(fā)展的一個(gè)趨勢。本文以皮亞杰的“操作式思維模式”理論為依托，運(yùn)用計(jì)算機(jī)圖形圖像、多媒體、數(shù)字動(dòng)畫等現(xiàn)代前沿技術(shù)為支撐，對二十四個(gè)節(jié)氣的文化內(nèi)涵重新審視與解讀，將現(xiàn)代審美特征融入符號中。以敘事性繪本為載體，以交互性傳播為手段，通過新媒介技術(shù)融入多感官交互的綜合性閱讀體驗(yàn)，探究新媒介技術(shù)下非物質(zhì)文化遺產(chǎn)展示與傳播的創(chuàng)新模式，以促進(jìn)文化科技融合發(fā)展和文化全球化與可持續(xù)發(fā)展的需要。

關(guān)鍵詞：新媒介;民俗符號;視覺化

一、二十四節(jié)氣保護(hù)現(xiàn)狀

二十四節(jié)氣文化形成于中國黃河流域，是中國古代訂立的用來指導(dǎo)農(nóng)事的歷法，作為農(nóng)耕文明的綜合性載體，二十四節(jié)氣包含了古時(shí)多個(gè)領(lǐng)域中科學(xué)人文智慧的集合體，體現(xiàn)了中國古人先進(jìn)的科學(xué)思想以及可持續(xù)發(fā)展理念，體現(xiàn)了人類與自然和諧相處的智慧和創(chuàng)造力，隨著社會(huì)的進(jìn)步和發(fā)展被賦予了新的價(jià)值和含義。

但與此同時(shí)，二十四節(jié)氣是農(nóng)業(yè)社會(huì)視角下作用于農(nóng)耕文化的時(shí)間計(jì)算方式，但隨著農(nóng)耕文明向工業(yè)化文明的轉(zhuǎn)變，帶動(dòng)著中國人的宇宙觀與思維方式的變化，二十四節(jié)氣在當(dāng)下的社會(huì)語境中“理解有限、體驗(yàn)不了、推廣困難”的現(xiàn)實(shí)困境也日益凸顯，亟待采用數(shù)字化技術(shù)與視覺設(shè)計(jì)相結(jié)合的方式，對二十四節(jié)氣的展示傳播發(fā)展進(jìn)行理論、實(shí)踐探索[1]。

并且我國地域遼闊，南北氣候差異大，各地對節(jié)氣感受都不同且風(fēng)俗都各具特色。例如“冬至吃餃子”這個(gè)習(xí)俗只在北方適用，所以很難進(jìn)行標(biāo)準(zhǔn)化統(tǒng)一的研究與傳播。本課題聚焦安徽地區(qū)下的二十四節(jié)氣研究，是將節(jié)氣與安徽特定的地方民俗文化相結(jié)合，以繪本為載體，傳播與推廣二十四節(jié)氣文化，打破文化傳播中地緣與空間的局限性，以此帶動(dòng)當(dāng)?shù)氐奈幕瘎?chuàng)意產(chǎn)業(yè)發(fā)展。并通過傳播喚起人們對以安徽民俗文化為范例的非文化遺產(chǎn)的關(guān)注和傳播，促進(jìn)安徽文創(chuàng)、旅游產(chǎn)業(yè)等多業(yè)態(tài)聯(lián)動(dòng)共同發(fā)展的態(tài)勢。

二、基于交互技術(shù)在繪本中的研究

呂敬人老師曾提出書籍設(shè)計(jì)要有“五感”，即通過書籍傳遞視感、將聽感、嗅感、觸感、味感接收到的信息傳遞至大腦，從而獲得體驗(yàn)式認(rèn)知;在日本繪本研究者松居的公式中，圖+文=插圖讀物，而圖X文=繪本;魯迅在《連環(huán)圖畫辯護(hù)》中寫道：“書籍的插圖，原意是在裝飾書籍，增加讀者的興趣的，但那力量，能補(bǔ)助文學(xué)之所不及，多以是一種宣傳畫?！边@說明繪本天然就比傳統(tǒng)書籍模式更注重傳遞多種感官信息，有著更為增強(qiáng)與綜合性的表達(dá)形式。

目前數(shù)字媒體技術(shù)的使用，改變了傳統(tǒng)繪本特定地點(diǎn)和特定閱讀行為的表現(xiàn)方式，VR與AR等虛擬現(xiàn)實(shí)技術(shù)實(shí)現(xiàn)了繪本從三維空間到四維空間的轉(zhuǎn)變，敘事的時(shí)空感由單線敘事到多時(shí)空沉浸式體驗(yàn)。手勢的交互也帶來了產(chǎn)品優(yōu)秀的用戶體驗(yàn)。

三、新媒介互動(dòng)性繪本總體設(shè)計(jì)框架研究

本課題以新媒介技術(shù)下的二十四節(jié)氣與安徽民俗文化展示傳播為基本分析框架，借鑒符號學(xué)、藝術(shù)設(shè)計(jì)學(xué)、新聞傳播學(xué)、交互設(shè)計(jì)等理論，采用文獻(xiàn)研究、交叉研究、田野調(diào)查、案例分析、應(yīng)用研究等方法，擬對二十四節(jié)氣與安徽民俗文化—新媒介互動(dòng)性繪本進(jìn)行系統(tǒng)的研究。具體研究思路與方法請參照下圖[3]。

基于以上理論研究框架，筆者設(shè)計(jì)了一套移動(dòng)端的二十四節(jié)氣的交互繪本，運(yùn)用計(jì)算機(jī)圖形圖像、多媒體、數(shù)字動(dòng)畫等現(xiàn)代前沿技術(shù)為支撐，對二十四個(gè)節(jié)氣的文化內(nèi)涵重新審視與解讀，將現(xiàn)代審美特征融入符號中，并把對二十四個(gè)節(jié)氣與安徽民俗文化相結(jié)合，以敘事性繪本為載體，以交互性傳播為手段，通過新媒介技術(shù)融入多感官交互的綜合性閱讀體驗(yàn)[4]。

四、二十四節(jié)氣交互繪本應(yīng)用研究

（一）二十四節(jié)氣圖形設(shè)計(jì)研究

筆者在查閱資料中發(fā)現(xiàn)，在各領(lǐng)域的史料典籍中有對“二十四節(jié)氣”不同方面的描述，如明清年間有《古微書》記載：“昔伏羲始造八卦，作三畫以象二十四氣”，在《呂氏春秋·音律》中，把音律與月份相結(jié)合，并以音律的節(jié)奏安排農(nóng)耕勞動(dòng)，而在《周易》六十四卦圖中也將節(jié)氣的變化與哲學(xué)思想結(jié)合在一起，崇尚“天人合一、合于四時(shí)”的觀點(diǎn)，中醫(yī)關(guān)于二十四節(jié)氣與生命節(jié)律和養(yǎng)生的理論表明了個(gè)人身體和宇宙自然節(jié)律之間的內(nèi)在關(guān)聯(lián)。在《候時(shí)而行》中，古人將二十四節(jié)氣與行車時(shí)間結(jié)合在一起，還有《詩經(jīng)·七月》《清明》《七絕·雨水時(shí)節(jié)》《淮南子·天文訓(xùn)》和《史記·夏本記》等都提到了二十四節(jié)氣文化，并且在古代的書畫中，也常常運(yùn)用節(jié)氣作為創(chuàng)造的內(nèi)容，比較出名的有《春牛圖》和《九九消寒圖》。綜上所述，二十四節(jié)氣文化已不是單純記錄農(nóng)耕文化下的行事指南，而是蘊(yùn)含著豐富的文化哲學(xué)和行為思辨，是古代文化智慧的綜合體。

那么對于如何全面的提取語義進(jìn)行圖形設(shè)計(jì)，以及如何在現(xiàn)代語境中理解，并與安徽獨(dú)特的民俗文化相結(jié)合，關(guān)系到中國人的文化傳承性與情感的鏈接。因此在進(jìn)行圖形元素設(shè)計(jì)時(shí)，要求設(shè)計(jì)者能夠?qū)⑦@些多語義的文字元素進(jìn)行整合，將元素提煉，根據(jù)節(jié)氣中對應(yīng)的“意”的內(nèi)涵和美的意蘊(yùn)引發(fā)聯(lián)想，創(chuàng)造出“意”影響下“形”的藝術(shù)表現(xiàn)，例如立秋中的麥田的寓意是豐收，吉祥，通過麥田的形象暗喻立秋是收獲的季節(jié)。并在設(shè)計(jì)時(shí)對二十四節(jié)氣圖形加入現(xiàn)代設(shè)計(jì)審美特征、并保有其獨(dú)特的地域文化審美特征，如：安徽民間有把羽毛和布料一起做成公雞的樣式縫在孩子的帽子上，表示祝愿“春吉（雞）”“吉（雞）祥如意”。因此，在設(shè)計(jì)“立春”時(shí)加入了年畫中的春雞形象，形成可理解易傳播的現(xiàn)代視覺符號。

（二）二十四節(jié)氣繪本的設(shè)計(jì)研究

繪本是一種敘事性圖像，在設(shè)計(jì)時(shí)應(yīng)遵從以下設(shè)計(jì)原則：

1.需求性設(shè)計(jì)原則：在設(shè)計(jì)中針對繪本的受眾人群進(jìn)行需求分析，設(shè)計(jì)出用戶畫像，明確用戶需求。研究者對其進(jìn)行了問卷調(diào)查，得出結(jié)果為：在對此繪本感興趣的群體中，兒童占46%，成人（多為對傳統(tǒng)文化感興趣的人群）占40%。針對這兩個(gè)主要的客戶群，研究者設(shè)計(jì)出兩款不同的版本，以便在界面中可以隨時(shí)根據(jù)自身的需求進(jìn)行切換。

針對兒童客戶群的需求，根據(jù)皮亞杰的認(rèn)知理論，兒童在4—6歲直覺思維階段對圖形的理解多以感性邏輯為主，開始有理解和繪制幾何圖形的能力，但更偏向于與自己生活周邊事物相關(guān)的圖形。對生動(dòng)活潑的擬人化圖形有著極大的認(rèn)可度，直到11—15歲形式運(yùn)算階段，才出現(xiàn)了對透視圖形的理解與認(rèn)知。所以筆者的圖形設(shè)計(jì)多為顏色鮮明的平面化圖形，并把抽象的語義與生活中的具象行為連接在一起，更容易得到觀看者的共鳴。

而對傳統(tǒng)文化感興趣的成人的需要上，研究者加入了動(dòng)態(tài)的文字小貼士進(jìn)行輔助，這個(gè)環(huán)節(jié)在兒童版的設(shè)計(jì)上，變成了兒童聲音的語音播放與互動(dòng)。通過故事語音引導(dǎo)提問的方式，兒童與故事線索的互動(dòng)推動(dòng)整個(gè)故事劇情的變化。

2.情感化設(shè)計(jì)原則：對其符號采用可視化、故事化、情境化的敘事手法，增加大眾對符號的文化內(nèi)涵及意蘊(yùn)理解。在二十四節(jié)氣互動(dòng)繪本中，筆者設(shè)計(jì)了一條故事的主線，通過不同人群不同文化的視角，以單向的時(shí)間線作為循環(huán)，以春夏秋冬四個(gè)季節(jié)作為坐標(biāo)，串聯(lián)起12個(gè)節(jié)氣去展現(xiàn)二十四節(jié)氣在農(nóng)耕文明中的重要作用，例如：春分時(shí)田里要耕翻土地、清明時(shí)要去祭拜祖先、大寒要喝臘八粥等。并在故事中加入大量交互的元素，如圖形元素中語義、色彩、聲效、觸控等元素，使用者與故事中的主角在交互繪本共同完成故事里的每一個(gè)事件單元，事件是分析體驗(yàn)生成的富有意義的微觀單元，事件里有人物、環(huán)境、工具，有起因、經(jīng)過、結(jié)果，每個(gè)事件的時(shí)間應(yīng)把控在15—20分鐘以內(nèi)，因?yàn)檫@段時(shí)間是人類有效認(rèn)知學(xué)習(xí)的最佳時(shí)間段。

通過這種多角度、多時(shí)空、沉浸式的敘事方法，更像是一部“交互式電影”通過圖畫的視角進(jìn)行“推拉搖移”根據(jù)故事的主線一步步引導(dǎo)讀者，將讀者帶入其中，使讀者停留在故事的世界，發(fā)揮想象力，通過閱讀去建立一個(gè)完整的邏輯框架，在框架下創(chuàng)造豐富的交互效果，，通過視覺反饋、聲音反饋和觸覺的反饋，達(dá)到多交際模態(tài)（如聲音、文字、圖像等）傳遞信息的多模態(tài)語境。去帶領(lǐng)不同類型的人到相同的‘地方，現(xiàn)實(shí)中的社會(huì)角色與‘場景地都變得模糊了。

（三）二十四節(jié)氣繪本的交互流程研究

本文基于數(shù)字媒體技術(shù)下，從多維、交叉的整體視角出發(fā)對現(xiàn)有市面上交互繪本的表現(xiàn)形式進(jìn)行分析研究并總結(jié)歸納，總結(jié)和歸納出符合繪本設(shè)計(jì)的交互式體驗(yàn)?zāi)繕?biāo)。在運(yùn)用的媒介方面，多數(shù)采用的移動(dòng)端屏幕與紙媒相互配合的方式去實(shí)現(xiàn)多感官交互的效果。移動(dòng)端屏幕的使靜態(tài)的紙媒加入了動(dòng)態(tài)與聲音，在“產(chǎn)品→商品→服務(wù)”的商業(yè)閉環(huán)的基礎(chǔ)上加入了體驗(yàn)的環(huán)節(jié)，達(dá)到多感官綜合性閱讀性體驗(yàn)。

在讀者觀看二十四節(jié)氣紙質(zhì)繪本時(shí)，可選擇用移動(dòng)設(shè)備進(jìn)行下載，進(jìn)入二十四節(jié)氣的APP界面中，并通過在與移動(dòng)端屏幕內(nèi)的角色互動(dòng)，變紙媒繪本的靜態(tài)化圖文方式像交互化圖文轉(zhuǎn)變，去獲得多感官體驗(yàn)的交互方式[5]。

人類感知和交互最常見的形式是多模態(tài)的，我們使用多個(gè)感官系統(tǒng)（觀看、觸摸、聆聽等）傳送到大腦中形成神經(jīng)信號，并用其來理解物理世界與之交互，在行為交互過程中形成認(rèn)知內(nèi)化建構(gòu)的過程。這是符合皮亞杰認(rèn)知中“操作式思維模式”的特點(diǎn)，即人類感知和交互是利用多感官結(jié)合的方式去獲取信息，從線性思維轉(zhuǎn)變?yōu)檎w關(guān)聯(lián)式思維。在繪本中，讀者通過交互設(shè)計(jì)和新媒介技術(shù)等手段，在觸摸操作的過程中產(chǎn)生交互的行為。如通過圖、形、色彩、聲效、動(dòng)畫、觸控等元素相來表現(xiàn)繪本內(nèi)容。并設(shè)計(jì)翻、拉、展開、關(guān)閉等行為動(dòng)作，通過感官層（產(chǎn)品外觀）、行為層（產(chǎn)品的使用感）、反思層面（產(chǎn)品勘探和思索）三個(gè)層面，達(dá)到人與文化以及人與人之間的交互[2]。

并且筆者根據(jù)人體工程學(xué)在交互繪本中設(shè)置了很多交互模塊，如：距離感應(yīng)系統(tǒng)、重力感知系統(tǒng)、以及環(huán)境感知系統(tǒng)，以保證讀者在使用過程中有良好的產(chǎn)品體驗(yàn)。距離傳感器是根據(jù)在人體閱讀時(shí)候，最舒適的閱讀應(yīng)該控制眼與設(shè)備間距離在30-56cm之間。所以筆者將距離傳感器的可控范圍設(shè)置為30-56cm之間，讀者所持電子設(shè)備的姿勢低于30cm的范圍之內(nèi)，交互繪本就會(huì)發(fā)出彈窗或語音提示。環(huán)境感知系統(tǒng)是筆者在繪本中設(shè)置了白天與夜晚模式，當(dāng)夜晚的時(shí)候，讀者可以手動(dòng)開啟夜晚模式，光線就會(huì)以柔和的暖光進(jìn)行切換[7]。

結(jié)語

二十四節(jié)氣代表著我們祖先曾經(jīng)創(chuàng)造的燦爛文化，它維系著我們民族精神的歸屬感，代表著我們民族核心認(rèn)同感。本文聚焦二十四節(jié)氣文化并與安徽民俗特色結(jié)合，運(yùn)用新媒介技術(shù)的優(yōu)勢給展示傳播帶來交互性、多感官體驗(yàn)等新的特征，結(jié)合插畫與交互設(shè)計(jì)兩學(xué)科，對二十四個(gè)節(jié)氣的文化內(nèi)涵重新審視與解讀，將現(xiàn)代審美特征融入符號中，以繪本為媒介，以期為非物質(zhì)文化遺產(chǎn)的展示傳播困局打開新思路。

參考文獻(xiàn)：

〔1〕余日季.AR技術(shù)與非物質(zhì)文化遺產(chǎn)數(shù)字化開發(fā)[M].北京：人民出版社，2017.

〔2〕林迅.新媒體藝術(shù)[M].上海：上海交通大學(xué)出版社，2011.

〔3〕師國偉.增強(qiáng)現(xiàn)實(shí)技術(shù)在文化遺產(chǎn)數(shù)字化保護(hù)中的應(yīng)用[J].系統(tǒng)仿真學(xué)報(bào)，2009，（08）.

〔4〕姜申.展示傳播在文化遺產(chǎn)數(shù)字化中的交互性及其應(yīng)用[J].科技導(dǎo)報(bào)，2006，（05）.

〔5〕汪楊珊.從紙媒到數(shù)字媒體的跨越——電子繪本中的交互設(shè)計(jì)研究[D].湖北美術(shù)學(xué)院，2015.

〔6〕黃若濤.繪本書的傳播功能研究[D].中國傳媒大學(xué)，2006.

〔7〕Fielding R. M.The Technique of Special Effects Cinematography[A]. Taylor， 1985.

〔8〕Van Eck W .J.The Augmented PaintingR[A].IEEE International Symposium on， 2012.

（責(zé)任編輯 賽漢其其格）