基于多模態(tài)信息的湖北省博物館交互文創(chuàng)設(shè)計(jì)研究

摘要：分析多模態(tài)信息交互理論下博物館文創(chuàng)設(shè)計(jì)的價(jià)值與方法，總結(jié)當(dāng)下博物館文創(chuàng)產(chǎn)品的市場(chǎng)現(xiàn)狀、設(shè)計(jì)趨勢(shì)，通過歸納博物館文創(chuàng)產(chǎn)品的特征并結(jié)合相關(guān)案例分析進(jìn)行深入研究，得出目前湖北省博物館文創(chuàng)產(chǎn)品存在的問題。多模態(tài)信息的融入為用戶體驗(yàn)形式提供多樣化的思路，運(yùn)用多模態(tài)信息交互技術(shù)探索傳統(tǒng)文化在設(shè)計(jì)形式上的現(xiàn)代化表達(dá)，體現(xiàn)多模態(tài)信息交互理念下博物館文創(chuàng)產(chǎn)品應(yīng)該具備的產(chǎn)品屬性。遵循設(shè)計(jì)原則，將設(shè)計(jì)要素與交互技術(shù)相結(jié)合設(shè)計(jì)一款能滿足用戶群體審美和體驗(yàn)愉悅的智能文創(chuàng)產(chǎn)品，為文化的保護(hù)和傳播起到了重要的作用。

關(guān)鍵詞：文創(chuàng)設(shè)計(jì)；古琴文化；交互設(shè)計(jì)；多模態(tài)信息；博物館文創(chuàng)

中圖分類號(hào)：TB472 文獻(xiàn)標(biāo)識(shí)碼：A文章編號(hào)：1003-0069（2025）01-0071-05

Abstract：This paper conducts an analysis of the value and approach of museum cultural creative design within the framework of multi-modal information interaction theory，summarizes the current market situation and design trend of museum cultural creative products，and concludes the existing issues of museum cultural creative products in Hubei Province by summarizing the characteristics of museum cultural creative products and conducting indepth research in combination with relevant case analysis. The integration of multi-modal information offers diversified notions for user experience forms，employs multi-modal information interaction technology to explore the modern expression of traditional culture in design forms，and reflects the product attributes that museum cultural creative products ought to possess under the concept of multi-modal information interaction. In accordance with the design principles，by combining the design elements and interactive technology，an intelligent cultural and creative product is designed that can satisfy the aesthetic demands and experience pleasure of the user group，playing a significant role in the protection and dissemination of culture.

Keywords：Cultural and creative design；Guqin culture；Interactive design；Multimodal information；Museum cultural and creative products

引言

隨著人們對(duì)于傳統(tǒng)文化多元化訴求的提出，博物館逐漸成為國(guó)家及部分地區(qū)的新文化地標(biāo)，是人們賞析傳統(tǒng)文化的重要場(chǎng)所之一[1]。交互技術(shù)應(yīng)用于博物館文創(chuàng)產(chǎn)品中能夠提高了用戶、環(huán)境、產(chǎn)品三者間的互動(dòng)能力，使用戶可以獲得更全面、更立體的感官體驗(yàn)為博物館的發(fā)展注入了新的活力。

文化與數(shù)字科技的深度融合形成眾多新的設(shè)計(jì)表現(xiàn)形式，文章的研究重點(diǎn)是基于已有的人機(jī)交互理論，在博物館文創(chuàng)設(shè)計(jì)中引入多模態(tài)信息交互技術(shù)，改變博物館目前在傳播形式上的單一以及體驗(yàn)上的枯燥乏味，對(duì)博物館文創(chuàng)產(chǎn)品的開發(fā)要點(diǎn)提出了針對(duì)性思考，探索多模態(tài)信息與文創(chuàng)產(chǎn)品的結(jié)合。

一、多模態(tài)信息理論概述

（一）“多模態(tài)”定義

“多模態(tài)”是一個(gè)交叉學(xué)科概念，不同學(xué)科對(duì)其的定義也有略微差別，例如在腦神經(jīng)科學(xué)中，感官模態(tài)系統(tǒng)包括視覺、嗅覺、觸覺、聽覺以及味覺，如模態(tài)系統(tǒng)中的聽覺模態(tài)就是由耳朵和處理聲音信號(hào)的感知神經(jīng)組成。單模態(tài)是指單個(gè)感官對(duì)于信息的處理，而多模態(tài)是指處理信息時(shí)啟用3個(gè)及以上的感官同時(shí)效力。當(dāng)我們接收信息源時(shí)將視覺、聽覺、觸覺3個(gè)感官同時(shí)啟用，大腦會(huì)自動(dòng)對(duì)3個(gè)感官獲得的模態(tài)信息進(jìn)行處理并輸出相應(yīng)行為指令，以確保人體獲得連貫的體驗(yàn)感受[2]。

隨著技術(shù)發(fā)展逐漸成熟，人機(jī)交互中融入多模態(tài)信息，可以幫助用戶以更為直觀和自然的方式與計(jì)算機(jī)系統(tǒng)互動(dòng)[3]。多模態(tài)信息的融入能夠打通多重感官間的壁障，確保交互過程的連續(xù)性，使得交互更為直觀、自然和高效[4]。

（二）多模態(tài)信息交互技術(shù)流程

多模態(tài)信息交互技術(shù)流程主要由感知、大腦和行動(dòng)3個(gè)模塊組成，多模態(tài)信息獲取主要依賴于多種先進(jìn)的傳感設(shè)備。感知模塊是系統(tǒng)獲取外界信息的重要手段，多樣化的信息源和接收方式，可以幫助系統(tǒng)更準(zhǔn)確地感知周圍環(huán)境。主要的信息來(lái)源包括視覺、聽覺等以及更為復(fù)雜的用戶輸入[5]。“大腦”模塊負(fù)責(zé)解析來(lái)自多樣化信息源的多模態(tài)信息，通過推動(dòng)機(jī)器的深度學(xué)習(xí)，在計(jì)算機(jī)視覺領(lǐng)域多模態(tài)信息的處理與分析得到了空前的發(fā)展[6]。行動(dòng)模塊會(huì)根據(jù)“大腦”模塊輸出的對(duì)多模態(tài)信息的決策指令作出相應(yīng)反饋。目前，交互的響應(yīng)類型以直接反饋為主，例如光效、聲音等形式。響應(yīng)形式和方法主要取決于用戶需求、任務(wù)性質(zhì)等因素，在初步執(zhí)行任務(wù)后，通過收集用戶意見的方式進(jìn)行優(yōu)化，這樣能夠獲得更好的用戶體驗(yàn)[6]。

二、博物館文創(chuàng)產(chǎn)品設(shè)計(jì)

（一）博物館文創(chuàng)產(chǎn)品概念界定

博物館文創(chuàng)產(chǎn)品是指在博物館館藏文化及館藏資源基礎(chǔ)上研發(fā)出來(lái)的創(chuàng)意消費(fèi)產(chǎn)品。李茗珠在《懷舊視角下的博物館文創(chuàng)設(shè)計(jì)研究》中，提出博物館文創(chuàng)產(chǎn)品的概念涉及“文化創(chuàng)意產(chǎn)品”和“博物館衍生品”這兩個(gè)有著不同側(cè)重點(diǎn)的名詞，基于博物館衍生品這個(gè)概念又分為有形產(chǎn)品和無(wú)形產(chǎn)品兩種類型[7]。從概念的歸屬范疇上看，博物館文創(chuàng)產(chǎn)品隸屬于博物館衍生品，特指博物館衍生品中的有形產(chǎn)品，經(jīng)由線下實(shí)體店以及線上購(gòu)物平臺(tái)進(jìn)行銷售。單一的文創(chuàng)衍生品無(wú)論在創(chuàng)意還是功能上都不能有力地吸引用戶，產(chǎn)品使用一定期限后，用戶可能會(huì)對(duì)文創(chuàng)衍生品單一枯燥的造型產(chǎn)生排斥。通過文化創(chuàng)意產(chǎn)品的概念配合有形產(chǎn)品作為載體，設(shè)計(jì)一款智能交互文創(chuàng)產(chǎn)品，將產(chǎn)品造型與其功能進(jìn)行關(guān)聯(lián)，提升體驗(yàn)感，讓用戶能夠在與產(chǎn)品交互的過程中，以視覺、觸覺、聽覺等多感官的形式感知文化，學(xué)習(xí)文化，如圖1。

（二）湖北省博物館文創(chuàng)產(chǎn)品存在的問題

1.產(chǎn)品類型同質(zhì)化嚴(yán)重。通過市場(chǎng)調(diào)研得出，多數(shù)消費(fèi)者購(gòu)買的文創(chuàng)產(chǎn)品均為館藏文物的復(fù)制衍生品，例如勾踐劍、虎座鳥架鼓等較有知名度的文物復(fù)制品如圖2。部分博物館的文創(chuàng)衍生品銷量低且沒有受到公眾的廣泛關(guān)注，歸其原因是文創(chuàng)市場(chǎng)魚龍混雜，多數(shù)文創(chuàng)產(chǎn)品缺乏創(chuàng)意，枯燥乏味的功能使產(chǎn)品與用戶之間相互獨(dú)立，兩者沒有構(gòu)建互動(dòng)系統(tǒng)，甚者部分產(chǎn)品僅具有美觀價(jià)值，淺層地運(yùn)用了館藏文物的紋樣或是造型進(jìn)行設(shè)計(jì)，且在文創(chuàng)產(chǎn)品載體上過于單一，如手機(jī)殼、雨傘、帆布包等衍生品。間接暴露出多數(shù)設(shè)計(jì)者對(duì)于館藏文物背后需要表達(dá)的文化內(nèi)涵理解不夠透徹，以至于文化深度不夠，缺少當(dāng)?shù)靥厣?。在設(shè)計(jì)表達(dá)上缺乏多模態(tài)信息的交互形式，難以區(qū)別市面上的文創(chuàng)產(chǎn)品性質(zhì)，使用戶體驗(yàn)興致相對(duì)較低，無(wú)法提起用戶的興趣難以產(chǎn)生認(rèn)同。

2.設(shè)計(jì)表達(dá)缺少創(chuàng)新思維，文化傳播形式單一。目前，國(guó)內(nèi)市場(chǎng)文創(chuàng)設(shè)計(jì)表現(xiàn)較為出色的博物館有故宮博物院、三星堆博物館、敦煌博物館，上述博物館在文創(chuàng)設(shè)計(jì)方面均采用了與目前科技同步的交互技術(shù)，如動(dòng)作捕捉、燈光投影等，產(chǎn)品一經(jīng)上市深受消費(fèi)者喜愛，如圖3展示的《妙頂金龍—彩畫之美》故宮文創(chuàng)產(chǎn)品，通過手機(jī)掃描守護(hù)令牌，激活身份便可邁進(jìn)故宮養(yǎng)心殿“紫禁妙境”元宇宙，在元宇宙中用戶可以化作修繕官，學(xué)習(xí)修繕知識(shí)。該文創(chuàng)產(chǎn)品在設(shè)計(jì)中融入了多模態(tài)信息，將用戶的多感官體驗(yàn)與玩法功能緊密結(jié)合，無(wú)論產(chǎn)品設(shè)計(jì)理念還是游戲場(chǎng)景搭建都極具故宮特色。就目前情況而言，湖北省博物館文創(chuàng)產(chǎn)品大部分都是小型家居用品，受眾群體有限、缺乏設(shè)計(jì)創(chuàng)新與科技應(yīng)用，不能突顯湖北地方特色，使消費(fèi)者很難產(chǎn)生認(rèn)同感，從而在傳達(dá)文化內(nèi)涵方面有所局限。

三、博物館文創(chuàng)設(shè)計(jì)中運(yùn)用多模態(tài)信息交互的必要性

（一）博物館文創(chuàng)產(chǎn)品消費(fèi)人群的需求轉(zhuǎn)變

1.層次需求高低的轉(zhuǎn)變。心理學(xué)家亞伯拉罕·馬斯洛（Abraham Maslow）提出了需求層次論，當(dāng)人們的低層次需求得到滿足之后，人們對(duì)于高層次需求的渴望將會(huì)化為人們行動(dòng)的動(dòng)力。物質(zhì)生活水平的提高使人們對(duì)于文化的需求更為迫切。博物館消費(fèi)者在購(gòu)買和使用文創(chuàng)產(chǎn)品時(shí)，追求的不僅僅是館藏文物的復(fù)刻和臨摹，更希望能通過使用文創(chuàng)產(chǎn)品衍生感受到博物館的文化內(nèi)涵[1]。與此同時(shí)，在這個(gè)以模態(tài)信息為主導(dǎo)的時(shí)代，公眾的審美需求得到全方位、多角度的提升，人們希望在參觀博物館時(shí)能展現(xiàn)出自己對(duì)于傳統(tǒng)文化的鑒賞品味。

2.追求表現(xiàn)形式的轉(zhuǎn)變。設(shè)計(jì)者通過了解當(dāng)代設(shè)計(jì)趨勢(shì)，巧妙地將博物館文化內(nèi)涵與現(xiàn)代藝術(shù)表現(xiàn)形式相結(jié)合，設(shè)計(jì)出能夠給予大眾愉悅情緒的產(chǎn)品，使其成為公眾之間的文化交流方式，將文化以普適的形式傳遞至公眾。事實(shí)上，在傳統(tǒng)印象中博物館以嚴(yán)肅端莊的形象特征出現(xiàn)，因此，趣味性的體驗(yàn)設(shè)計(jì)融入博物館文創(chuàng)中營(yíng)造出不同的情境氛圍能夠給予用戶新鮮的感受，強(qiáng)烈的反差感，使博物館藝術(shù)與用戶之間形成雙向交流的關(guān)系[1]。

3.文化獲取途徑的轉(zhuǎn)變。當(dāng)下博物館從以“物”為中心的保護(hù)功能正在轉(zhuǎn)變?yōu)橐浴叭恕睘橹行牡慕逃δ?，這也逐漸成為博物館的主要功能[7]。公眾對(duì)于博物館知識(shí)的獲取方式亦從參觀館藏文物轉(zhuǎn)變?yōu)樨S富多樣化的體驗(yàn)設(shè)計(jì)輔助公眾吸收文化。博物館文化調(diào)性不斷升級(jí)，文化展示形式逐漸向影視制作、數(shù)字化平臺(tái)展示進(jìn)步。同時(shí)，以輕松且有趣的體驗(yàn)方式作為媒介，把博物館文化和公眾生活進(jìn)行聯(lián)結(jié)，提高用戶的參與度，使之體驗(yàn)到寓教于樂、安全易用等愉悅的交互體驗(yàn)反饋，讓用戶得以認(rèn)可博物館的文化魅力[8]。

（二）基于多模態(tài)信息的文創(chuàng)產(chǎn)品設(shè)計(jì)原則

以產(chǎn)品用戶的需求為中心，將多模態(tài)信息交互技術(shù)融入至博物館文創(chuàng)產(chǎn)品中，進(jìn)一步加強(qiáng)人和產(chǎn)品、人和服務(wù)的情感聯(lián)結(jié)?；谥Z曼的情感三層次理論，結(jié)合用戶需求與行為，從本能層、行為層和反思層3個(gè)維度分析如何對(duì)用戶體驗(yàn)進(jìn)行提升如圖4。本能層的情感需求可以通過直接感官刺激得到滿足，激發(fā)用戶的本能驅(qū)動(dòng)性對(duì)產(chǎn)品產(chǎn)生興趣，第一感知印象對(duì)于引導(dǎo)用戶進(jìn)行下一步探索具有積極作用。行為層中以產(chǎn)品易用性為標(biāo)準(zhǔn)，通過簡(jiǎn)化信息結(jié)構(gòu)，清晰交互流程針對(duì)用戶的模態(tài)信息進(jìn)行合理反饋，提升產(chǎn)品與用戶之間的雙向交流能力。反思層是指用戶在體驗(yàn)后所產(chǎn)生的深層反應(yīng)，如文化價(jià)值觀及情感共鳴，往往當(dāng)產(chǎn)品設(shè)計(jì)理念與用戶文化價(jià)值觀契合時(shí)更容易激發(fā)情感深層反應(yīng)，產(chǎn)生認(rèn)同感與歸屬感[9]。通常來(lái)說(shuō)，產(chǎn)品的交互是指將設(shè)計(jì)者、產(chǎn)品和用戶三者關(guān)聯(lián)起來(lái)的互動(dòng)過程，因此博物館交互文創(chuàng)產(chǎn)品要考慮到其背后要傳達(dá)的傳統(tǒng)文化和情感因素，將產(chǎn)品的形狀、功能和用戶的使用環(huán)境都考慮進(jìn)去，提煉出既美觀又實(shí)用的產(chǎn)品，提高人們對(duì)文化的認(rèn)同感。

四、基于多模態(tài)信息的博物館交互文創(chuàng)設(shè)計(jì)策略

（一）增強(qiáng)互動(dòng)體驗(yàn)

基于市面上文創(chuàng)產(chǎn)品結(jié)構(gòu)單一、同質(zhì)化嚴(yán)重這一現(xiàn)狀，其突破方式之一是針對(duì)產(chǎn)品交互體驗(yàn)形式進(jìn)行創(chuàng)新，并適當(dāng)調(diào)整傳統(tǒng)意義上的文創(chuàng)產(chǎn)品載體運(yùn)用范圍。用戶對(duì)于文創(chuàng)產(chǎn)品的選擇主要取決于產(chǎn)品體驗(yàn)舒適度，可用性越強(qiáng)，越能引發(fā)用戶的購(gòu)買欲望[10]。具有交互體驗(yàn)的文創(chuàng)產(chǎn)品可以從內(nèi)在精神、情感需求出發(fā)與用戶進(jìn)行互動(dòng)，保證用戶低層次需求的同時(shí)亦能滿足后續(xù)的高層次需求，實(shí)現(xiàn)情感三層次理論中本能層向反思層的過渡，賦予產(chǎn)品“互動(dòng)功能”，進(jìn)而促使用戶與產(chǎn)品之間產(chǎn)生情感聯(lián)結(jié)，通過體驗(yàn)過程豐富情感達(dá)到寓教于樂的目的，因此，新奇的文創(chuàng)產(chǎn)品載體及豐富的可玩性功能是博物館交互文創(chuàng)設(shè)計(jì)的重要部分。

中國(guó)國(guó)家博物館推出了一款考古和食玩進(jìn)行結(jié)合的四羊方尊考古巧克力如圖5，“四羊方尊”由黑巧克力制成，紙質(zhì)禮盒中包括鏟勺、毛刷、一次性手套等“考古工具”，用戶可以在泥土質(zhì)感般的曲奇碎中，挖掘出由巧克力制成的四羊方尊，該產(chǎn)品對(duì)于用戶富有吸引力，產(chǎn)品聯(lián)合多模態(tài)信息的輸出對(duì)用戶進(jìn)行直接感官刺激，用戶的多感官并用既提升體驗(yàn)感，又豐富了產(chǎn)品的可玩性，將考古過程以更為普適的方式進(jìn)行詮釋，當(dāng)用戶翻開“泥土”目睹由巧克力制成的“文物”時(shí)，此刻用戶的興奮值臨近極點(diǎn)，本能反應(yīng)促使用戶迫切進(jìn)行下一步探索，從而引導(dǎo)用戶完成整個(gè)產(chǎn)品互動(dòng)流程。這款互動(dòng)型文創(chuàng)產(chǎn)品將考古、挖掘的動(dòng)作融入使用流程，通過讓用戶親自挖掘“國(guó)寶”的方式，增加了用戶的參與體驗(yàn)，滿足用戶“動(dòng)手”樂趣的同時(shí)又普及了考古文化，一定程度上激發(fā)了用戶的熱情及想象力。

（二）營(yíng)造情境氛圍

文創(chuàng)設(shè)計(jì)盲目跟風(fēng)，大量文創(chuàng)產(chǎn)品逐漸涌入市場(chǎng)，雖然博物館文創(chuàng)產(chǎn)品被重新拉回公眾視野，但也間接暴露了博物館文創(chuàng)產(chǎn)品中存在的問題，產(chǎn)品缺乏創(chuàng)新點(diǎn)使之難以持續(xù)發(fā)展，因此在創(chuàng)新方面需要融入“新的活力”，利用多模態(tài)信息交互技術(shù)實(shí)現(xiàn)傳統(tǒng)文創(chuàng)產(chǎn)品向智能化人機(jī)交互方向發(fā)展。當(dāng)文創(chuàng)技術(shù)運(yùn)用和表現(xiàn)形式發(fā)生變革，便可借助新興技術(shù)打破以往固有認(rèn)知形式的產(chǎn)品泡影，利用接受度較高的現(xiàn)代藝術(shù)表現(xiàn)形式營(yíng)造情境氛圍迎合大眾審美，拉近與公眾之間的距離，由此賦予了文創(chuàng)產(chǎn)品新的生命力。如光影繪畫、體感捕捉和虛擬現(xiàn)實(shí)等技術(shù)的快速發(fā)展及廣泛應(yīng)用，設(shè)計(jì)者將擁有更多的媒介來(lái)傳達(dá)藝術(shù)理念。通過新穎的藝術(shù)表達(dá)形式反饋于用戶，盡量減少用戶的信息獲取負(fù)荷，簡(jiǎn)化信息結(jié)構(gòu)，為用戶的情感需求化作動(dòng)力驅(qū)動(dòng)其持續(xù)與產(chǎn)品進(jìn)行交互提供重要作用，提升用戶情緒閾值。

三星堆博物館在數(shù)字化設(shè)計(jì)方面表現(xiàn)出色，2022年三星堆博物館開展了一場(chǎng)以《三星堆光繪集》為主題的光繪藝術(shù)秀，設(shè)計(jì)者結(jié)合新型技術(shù)用光繪的形式傳達(dá)藝術(shù)為參觀者營(yíng)造出精彩的視覺盛宴，當(dāng)文化與潮流進(jìn)行結(jié)合，從而吸引更多游客走進(jìn)三星堆。同樣，三星堆博物館還推出新文化體驗(yàn)“對(duì)話三星堆——互動(dòng)體驗(yàn)廳”，用藝術(shù)、科技對(duì)話古蜀文明，見圖6通過體感捕捉的技術(shù)，在參觀者進(jìn)入展廳后，能夠沉浸體驗(yàn)三星堆人的自然生活環(huán)境，參與三星堆人的制銅、治玉等展項(xiàng)，通俗易懂的交互形式使公眾逐漸走進(jìn)四千年前三星堆人的生活，從而潛移默化地了解了西蜀先民的自然社會(huì)知識(shí)、生活常識(shí)。三星堆博物館的文創(chuàng)設(shè)計(jì)不僅是博物館文物的延伸，更是藏品背后所代表的歷史文化以及古蜀先民的精神文化[11]。

（三）傳遞文化教育

博物館記錄著文化的發(fā)展，能讓公眾在不同的時(shí)空中，感受到博物館的文化內(nèi)涵，跨時(shí)空與館藏文物進(jìn)行“交流”。因此博物館文化的傳播方式應(yīng)該相對(duì)廣而泛，避免因?yàn)閭鞑サ木窒扌詫?dǎo)致部分群體無(wú)法獲得文化知識(shí)，利用多樣的形式去豐富公眾獲取知識(shí)的途徑傳播文化，始終以“人”為中心，為公眾獲取知識(shí)的效率提供便捷性和高效性。用戶的體驗(yàn)感深受文創(chuàng)產(chǎn)品背后的文化所影響，嘗試以用戶自身的情感變化作為動(dòng)機(jī)推動(dòng)用戶與產(chǎn)品進(jìn)行“交流”，讓用戶沉溺在情境氛圍中進(jìn)一步升華感情，避免體驗(yàn)枯燥導(dǎo)致用戶無(wú)法深層次融入。因此，文創(chuàng)設(shè)計(jì)的關(guān)鍵就是讓用戶能夠沉浸式感受文化，進(jìn)而實(shí)現(xiàn)文創(chuàng)產(chǎn)品的文化教育功能。

敦煌博物院在近年推出了一款“云游敦煌”的小程序，該設(shè)計(jì)集探索、游覽、保護(hù)敦煌石窟藝術(shù)功能于一體如圖7，通過數(shù)字化技術(shù)展現(xiàn)敦煌文化，希望全世界朋友可以在敦煌寶庫(kù)中獲取知識(shí)。在程序中除了包含許多具有美學(xué)價(jià)值的畫面以及壁畫背后的故事，同時(shí)還具有很強(qiáng)的互動(dòng)性，不僅可以定制專屬敦煌色彩及敦煌石窟主題內(nèi)容，通過筆者的體驗(yàn)，在云游敦煌動(dòng)畫劇中可以選擇不同的壁畫故事扮演自己喜歡的角色進(jìn)行配音，當(dāng)自身融入情境后，對(duì)于故事的想象及理解會(huì)更加透徹。敦煌博物館以動(dòng)畫劇的創(chuàng)新形式進(jìn)一步擴(kuò)大了自身文創(chuàng)的受眾群體，亦拉近了和公眾之間的距離，尤其是青年群體，作為文化傳播的主要人群之一，可以利用課下之余不受空間等因素影響進(jìn)行線上學(xué)習(xí)，使其在潛移默化中受到文化的熏陶。由此可知，在傳播文化的過程中因?yàn)槭鼙娙巳旱奶厥庑?，更?yīng)該注意對(duì)于館藏文化的保護(hù)，要避免過于追求文創(chuàng)產(chǎn)品的故事性和娛樂性而篡改部分歷史情節(jié)的情況，這樣也違背了文創(chuàng)產(chǎn)品傳達(dá)文化內(nèi)涵的初衷[12]。

五、基于多模態(tài)信息的湖北省博物館交互文創(chuàng)設(shè)計(jì)應(yīng)用

依據(jù)前文分析可知，針對(duì)目前湖北省博物館文創(chuàng)產(chǎn)品的發(fā)展現(xiàn)狀及問題，結(jié)合多模態(tài)信息交互技術(shù)，從上述設(shè)計(jì)策略中提出的博物館交互文創(chuàng)設(shè)計(jì)重點(diǎn)出發(fā)，下文將以湖北省博物館的《素漆十弦琴》文化藏品如圖8為例來(lái)闡述湖北省博物館交互文創(chuàng)產(chǎn)品的設(shè)計(jì)過程。

（一）基于多模態(tài)信息的博物館交互文創(chuàng)設(shè)計(jì)流程

根據(jù)大量文獻(xiàn)研究提出進(jìn)一步思考，針對(duì)如何提取傳統(tǒng)造物的設(shè)計(jì)元素并以恰當(dāng)?shù)男问饺谌朐O(shè)計(jì)中，筆者提出了基于多模態(tài)信息交互技術(shù)的文創(chuàng)產(chǎn)品設(shè)計(jì)流程，如圖9所示從傳統(tǒng)造物本體蘊(yùn)含的意象特征角度出發(fā)，闡述基于多模態(tài)信息下的交互文創(chuàng)產(chǎn)品設(shè)計(jì)方法，該流程指出了基于傳統(tǒng)造物的兩個(gè)層面的轉(zhuǎn)化方式，其一如何將傳統(tǒng)造物的基本意象特征解析并與文創(chuàng)產(chǎn)品的概念進(jìn)行緊密結(jié)合，其二如何使用多模態(tài)信息交互技術(shù)構(gòu)建場(chǎng)景傳達(dá)傳統(tǒng)文化載體要表達(dá)的文化意象。

（二）基于多模態(tài)信息的湖北省博物館交互文創(chuàng)設(shè)計(jì)方案

根據(jù)設(shè)計(jì)流程，首先對(duì)傳統(tǒng)造物意象特征進(jìn)行剖析、轉(zhuǎn)譯，提取設(shè)計(jì)中需要用到的傳統(tǒng)元素，由于十弦琴在歷史中未記錄具體的演奏方法，古琴初期為五弦，后商周時(shí)期變?yōu)榱似呦?，增加的兩根弦分別為文武。因此，為了簡(jiǎn)化信息結(jié)構(gòu)，便于用戶快速學(xué)習(xí)掌握，此處擬用古琴初期的五弦結(jié)構(gòu)。將設(shè)計(jì)元素匯集，以設(shè)計(jì)原則中的情感三層次理論為分類標(biāo)準(zhǔn)對(duì)其進(jìn)行再分類，整理得出設(shè)計(jì)要素如圖10所示。

1.交互場(chǎng)景構(gòu)建

本能層體現(xiàn)，將古琴文化中的五弦含義進(jìn)行拆解分析，五弦在外合音調(diào)上分別為宮、商、角、徵、羽，而在內(nèi)合五行中分別對(duì)應(yīng)土、金、木、火、水。以視覺設(shè)計(jì)的形式融入五弦之中，豐富用戶感官體驗(yàn)。將聽覺感官元素與視覺感官元素建立聯(lián)系，對(duì)五行元素進(jìn)行轉(zhuǎn)譯，通過情感化的設(shè)計(jì)方式，如解析五行元素并賦予其色彩和代名詞，并利用對(duì)代名詞的抽象理解設(shè)計(jì)出相應(yīng)圖案。其中宮弦對(duì)應(yīng)五行中的土，意為山吹，從山吹一詞代表的是棣棠花，棣棠花寓意頑強(qiáng)、堅(jiān)韌，通過此意象設(shè)計(jì)出類似于“山巒”的圖案象征堅(jiān)實(shí)穩(wěn)固；角弦對(duì)應(yīng)五行中的木，意為熏風(fēng)，熏風(fēng)一詞表達(dá)和風(fēng)、舒暢等含義，其意境呼應(yīng)角弦所代表的木，仿佛在萬(wàn)物生長(zhǎng)的春天，治愈人心，因此設(shè)計(jì)出基于“愛心”形狀的視覺圖案?jìng)鬟_(dá)治愈與意象相呼應(yīng)；商、徵、羽的設(shè)計(jì)形式亦是如此，具體表現(xiàn)如圖11所示。

行為層體現(xiàn)，傳統(tǒng)造物的中間層元素包含古琴用法以及撥動(dòng)琴弦的行為動(dòng)作，用戶撥弦的動(dòng)作滿足諾曼情感三層次理論中的行為層，用戶以撥弦作為產(chǎn)品觸發(fā)媒介，通過撥弦或是口述指令的方式對(duì)產(chǎn)品進(jìn)行模態(tài)信息輸入，體現(xiàn)產(chǎn)品的易用性。當(dāng)產(chǎn)品接收到用戶模態(tài)信息的相應(yīng)需求時(shí)并給予合理反饋，將用戶的本能反應(yīng)作為“觸點(diǎn)”簡(jiǎn)化信息輸入結(jié)構(gòu)，以上述視覺、聽覺融合的反饋形式吸引用戶引導(dǎo)其進(jìn)行下一步操作，實(shí)現(xiàn)多感官同時(shí)運(yùn)作的連鎖反應(yīng)，讓用戶可以沉浸式地進(jìn)行交互動(dòng)作。以上述形式激發(fā)用戶的情感投入，讓用戶內(nèi)心自發(fā)地產(chǎn)生認(rèn)同感，與產(chǎn)品建立聯(lián)系，感受產(chǎn)品所要傳達(dá)的文化背景及蘊(yùn)意。

反思層體現(xiàn)，山水的走勢(shì)形似音波的律動(dòng)從而挖掘出音樂、中式美學(xué)、山水之間的關(guān)聯(lián)?！案呱搅魉鲋簟钡牡涔收侵v述的以琴會(huì)友，產(chǎn)品以古琴的“姿態(tài)”借助文化形式的導(dǎo)入不僅能緩解人們對(duì)于科技的陌生感，當(dāng)山水即視氛圍與音樂趣味體驗(yàn)形成一種相輔相成的關(guān)系作用于用戶多感官時(shí)，能夠消除傳統(tǒng)意義上博物館文化嚴(yán)肅端莊的壓迫感，強(qiáng)烈的反差形式，更能引起用戶之間的情感共鳴，同時(shí)吸引用戶繼續(xù)探索產(chǎn)品背后所蘊(yùn)含的荊楚文化、古琴文化等，從而達(dá)到文化傳播的目的。

2.產(chǎn)品細(xì)節(jié)塑造

產(chǎn)品造型方面，產(chǎn)品外觀采用轉(zhuǎn)折較為硬朗的線條進(jìn)行勾勒，使整體形態(tài)宛若旋律起伏不定，給用戶以現(xiàn)代、律動(dòng)的視覺感受。琴身構(gòu)造結(jié)合傳統(tǒng)造物大音箱的特點(diǎn)，將音箱設(shè)于下方，以下寬上窄的形式進(jìn)行呈現(xiàn)，使產(chǎn)品的使用過程更加穩(wěn)定，避免誤觸導(dǎo)致磕碰。琴面的波紋造型則是比擬聲音傳播過程的具象化，側(cè)下表面的延伸豐富產(chǎn)品細(xì)節(jié)仿佛一潭湖水隨著音波進(jìn)行流動(dòng)。產(chǎn)品顏色參考山水元素的表層特征進(jìn)行運(yùn)用，敦實(shí)的黑棕色琴身搭配靈動(dòng)的青藍(lán)色琴面，體現(xiàn)出典雅高級(jí)的視覺屬性，使產(chǎn)品整體縈繞著山水琴韻的優(yōu)雅氣息。

產(chǎn)品尺寸方面，考慮到產(chǎn)品的受眾人群以青年為主體，青年群體是文化傳播的中心人群，生理特征發(fā)育成熟，身體各項(xiàng)尺寸數(shù)據(jù)變化幅度相對(duì)穩(wěn)定。因此，參考人機(jī)工程學(xué)中成年人的標(biāo)準(zhǔn)尺寸，考量坐姿狀態(tài)下人體手部觸碰范圍的距離區(qū)間及自然操作時(shí)兩手最舒適的距離范圍，適當(dāng)調(diào)整產(chǎn)品上的琴弦長(zhǎng)度及功能鍵位置，以達(dá)到舒適易用的效果。對(duì)產(chǎn)品整體尺寸進(jìn)行協(xié)調(diào)，滿足用戶易搬攜，節(jié)省使用空間等需求。

產(chǎn)品功能方面，以提升用戶體驗(yàn)感為目標(biāo)，利用多模態(tài)信息交互技術(shù)對(duì)用戶模態(tài)信息進(jìn)行處理并反饋，琴身各方向表面分別置有LED燈帶，用戶可以通過口述指令形式調(diào)節(jié)燈帶明暗，不同擋位的光亮呈現(xiàn)出的效果有所區(qū)別。當(dāng)用戶撥動(dòng)琴弦時(shí)，產(chǎn)品會(huì)根據(jù)用戶觸碰琴弦的類別向其所對(duì)應(yīng)的燈帶發(fā)出指令進(jìn)而投射出有色光，形式上將用戶的觸覺反饋與視覺進(jìn)行關(guān)聯(lián)。為了豐富產(chǎn)品可玩性，提升趣味，在產(chǎn)品的右端兩側(cè)分別置有以數(shù)個(gè)規(guī)律排布且大小一致的LED燈點(diǎn)構(gòu)成投影燈屏，通過閃動(dòng)投影屏中的LED燈點(diǎn)，以達(dá)到展示不同視覺圖案的效果，具體圖案樣式的顯示與撥動(dòng)的琴弦有所關(guān)聯(lián)，差異化的彈奏方式從而產(chǎn)生不同的玩法。若長(zhǎng)時(shí)間未使用產(chǎn)品時(shí)，產(chǎn)品便進(jìn)入休眠狀態(tài)，僅需快速撥動(dòng)從“宮”至“羽”的五根琴弦便可迅速啟動(dòng)產(chǎn)品，具體使用效果見圖12所示。

3.交互技術(shù)支持

產(chǎn)品基于多模態(tài)信息交互技術(shù)，對(duì)用戶信息進(jìn)行采集并給予相應(yīng)反饋，詳細(xì)技術(shù)流程如圖13所示。首先產(chǎn)品的感知模塊能夠利用麥克風(fēng)、壓力傳感器等模態(tài)采集工具獲取大量來(lái)自外部環(huán)境及用戶產(chǎn)生的多模態(tài)信息并輔助系統(tǒng)對(duì)輸入的模態(tài)信息進(jìn)行處理，多樣化的信息來(lái)源以及接收信息的方式有助于產(chǎn)品更準(zhǔn)確地對(duì)用戶動(dòng)作、行為進(jìn)行理解，通過用戶輸入的方式來(lái)獲取多模態(tài)信息，主要信息來(lái)源包括用戶使用產(chǎn)品時(shí)的行為動(dòng)作和語(yǔ)言指令等輸入形式。

其次，當(dāng)產(chǎn)品的模態(tài)采集工具感知到用戶的撥弦動(dòng)作以及口述指令時(shí)，此時(shí)大腦模塊會(huì)對(duì)這些模態(tài)信息進(jìn)行處理，例如濾除掉周圍的雜音，以及預(yù)處理用戶在撥動(dòng)琴弦時(shí)是否出現(xiàn)誤觸其他琴弦或是觸碰琴弦時(shí)間過短等情況，對(duì)于琴弦的觸碰時(shí)間這一區(qū)間進(jìn)行分段，標(biāo)準(zhǔn)化的分段使LED燈帶有充足的反應(yīng)時(shí)間，同時(shí)也利于產(chǎn)品可以更精確地判斷用戶的行為。

最后，行動(dòng)模塊會(huì)根據(jù)“大腦”輸出的模態(tài)信息處理指令及時(shí)向用戶提供反饋動(dòng)作，其中包括圖案、光亮、聲音等方式的變換來(lái)響應(yīng)用戶的操作行為，用戶可以通過自定義的操作方式使產(chǎn)品達(dá)到自身的需求，例如用戶使用產(chǎn)品的過程中，若感覺燈帶傳輸?shù)墓鈴?qiáng)亮度無(wú)法達(dá)到需求，此刻，用戶無(wú)需停下手中撥動(dòng)的琴弦，僅需通過口頭語(yǔ)言的形式對(duì)產(chǎn)品進(jìn)行模態(tài)信息輸入，產(chǎn)品便可根據(jù)指令調(diào)節(jié)至相應(yīng)的光帶亮度。另外，產(chǎn)品根據(jù)用戶的撥弦動(dòng)作反饋出音調(diào)不同的音效及琴弦的對(duì)應(yīng)圖案，重復(fù)上述流程，用戶便能在互動(dòng)中獲得持續(xù)反饋，激發(fā)用戶對(duì)于產(chǎn)品探索的主觀能動(dòng)性。

結(jié)語(yǔ)

博物館文創(chuàng)產(chǎn)品作為目前最受歡迎的博物館文化傳播載體，在當(dāng)下科技迅速發(fā)展的時(shí)代，公眾需求逐漸轉(zhuǎn)向的現(xiàn)狀促使人機(jī)交互方式向多模態(tài)信息主導(dǎo)的方向發(fā)展。本文主要探究多模態(tài)信息交互技術(shù)對(duì)博物館文創(chuàng)設(shè)計(jì)的影響，提出符合當(dāng)下大眾需求的設(shè)計(jì)策略，突顯多模態(tài)信息在交互體驗(yàn)中的優(yōu)化效果，多模態(tài)信息的融入對(duì)博物館文創(chuàng)的發(fā)展具有重要作用，不僅提升了文創(chuàng)產(chǎn)品信息表達(dá)效率，而且增強(qiáng)了用戶體驗(yàn)感。將多模態(tài)信息融洽地運(yùn)用于博物館文化傳播中，從而更好地滿足不同人群的需要，為傳統(tǒng)文化的保護(hù)和發(fā)揚(yáng)起到助力作用。在未來(lái)，交互這一模式將成為人與設(shè)計(jì)、人與技術(shù)溝通的重要橋梁。

基金項(xiàng)目：湖北工業(yè)大學(xué)博士科研啟動(dòng)基金項(xiàng)目《博物館中數(shù)字展陳的分眾交互設(shè)計(jì)方法》，項(xiàng)目編號(hào)：BSQD2020071

參考文獻(xiàn)

[1]張樺.新媒體時(shí)代博物館數(shù)字化文創(chuàng)產(chǎn)品設(shè)計(jì)研究[D].西安建筑科技大學(xué)，2023.

[2]顧日國(guó).多模態(tài)感官系統(tǒng)與語(yǔ)言研究[J].當(dāng)代語(yǔ)言學(xué)，2015，17（04）：448-469.

[3]張鳳軍，戴國(guó)忠，彭曉蘭.虛擬現(xiàn)實(shí)的人機(jī)交互綜述[J].中國(guó)科學(xué)：信息科學(xué)，2016，46（12）：1711-1736.

[4]許婧.基于多模態(tài)交互視角下的辦公產(chǎn)品設(shè)計(jì)研究[D].廣州美術(shù)學(xué)院，2022.

[5]XI Z，CHEN W，GUO X，et al. The Rise and Potential of Large LanguageModel based Agents：A Survey[J]. arXiv preprint arXiv：2309. 07864，2023.

[6]張軼，韓宇翃.基于多模態(tài)信息的交互景觀設(shè)計(jì)研究[J].包裝工程，2024，45（S1）：393-399.

[7]李茗珠.懷舊視角下的博物館文創(chuàng)設(shè)計(jì)研究[D].廣東工業(yè)大學(xué)，2022.

[8]陸芳圓，林竟路.鄉(xiāng)村振興背景下鹽官古鎮(zhèn)文創(chuàng)產(chǎn)品創(chuàng)新設(shè)計(jì)研究[J].設(shè)計(jì)，2024，37（12）：104-106.

[9]唐納德·A·諾曼. 情感化設(shè)計(jì)[M]. 北京：中信出版集團(tuán)，2015.

[10]聶虹，胡雨潔.新文創(chuàng)視域下博物館文創(chuàng)產(chǎn)品創(chuàng)新設(shè)計(jì)體系構(gòu)建探索[J].設(shè)計(jì)，2023，36（05）：35-39.

[11]劉宇，游斯琪.三星堆博物館藏品文創(chuàng)開發(fā)的創(chuàng)新設(shè)計(jì)研究[J].設(shè)計(jì)，2023，36（09）：10-13.

[12]王娟，張儒麟.“互聯(lián)網(wǎng)+”背景下的博物館文創(chuàng)產(chǎn)品研究[J].包裝工程，2020，41（12）：132-138.