多模態(tài)理論在數(shù)據(jù)可視化交互裝置設(shè)計(jì)中的應(yīng)用研究

羅保權(quán)　邢亞龍

關(guān)鍵詞：多模態(tài)理論 意象圖式 數(shù)據(jù)可視化 交互模型 裝置設(shè)計(jì)

中圖分類號(hào)：TP47 文獻(xiàn)標(biāo)識(shí)碼：A

文章編號(hào)：1003-0069（2022）01-0048-04

引言

隨著大數(shù)據(jù)與人工智能時(shí)代的來(lái)臨，數(shù)據(jù)可視化的需求和應(yīng)用已成為日常生活的基本內(nèi)容，在信息時(shí)代，大數(shù)據(jù)將會(huì)如同石油般寶貴的資源。

信息技術(shù)的發(fā)展導(dǎo)致海量的數(shù)據(jù)產(chǎn)生，讓數(shù)據(jù)可視化設(shè)計(jì)的呈現(xiàn)方式與載體都有了更多的可能性，同時(shí)也面臨不小的挑戰(zhàn)。單一的媒介與模態(tài)已不能滿足數(shù)據(jù)可視化設(shè)計(jì)展示的需求，更多的形式不斷涌現(xiàn)，如增強(qiáng)現(xiàn)實(shí)AR/虛擬現(xiàn)實(shí)VR、多屏幕互動(dòng)、手機(jī)程序、交互裝置等，都提高了其多樣性與復(fù)雜性。其中，“交互裝置”是綜合性最強(qiáng)的呈現(xiàn)方式，包含了展示與交互，從多模態(tài)的理論出發(fā)，挖掘數(shù)據(jù)可視化交互裝置設(shè)計(jì)的潛在價(jià)值，創(chuàng)造出令大眾能清晰理解，并能實(shí)現(xiàn)交互的可視化裝置設(shè)計(jì)，成為當(dāng)下研究的熱點(diǎn)。

一、數(shù)據(jù)可視化的多模態(tài)理論

（一）多模態(tài)的概念

模態(tài)（Modality）指的是交流的渠道和媒介 ，包括語(yǔ)言、技術(shù)、圖像、顏色和音樂等符號(hào)系統(tǒng)。針對(duì)人類的“模態(tài)”，一般指的是“感官”，即視覺、聽覺、觸覺、嗅覺和味覺等五感，同時(shí)在設(shè)計(jì)產(chǎn)品或事件的過(guò)程中，或多或少都會(huì)運(yùn)用多種符號(hào)資源建構(gòu)意義，因而產(chǎn)生了多模態(tài)的概念，進(jìn)而有了多感官融合的設(shè)計(jì)模型。

最早研究多模態(tài)的是在認(rèn)知語(yǔ)言學(xué)領(lǐng)域，專家在研究時(shí)發(fā)現(xiàn)，語(yǔ)言不單單是“語(yǔ)言”本身，人與人之間的交流除了話語(yǔ)以外，同時(shí)還包含多種非語(yǔ)言模態(tài)如表情、肢體動(dòng)作、身體特征、道具設(shè)備等。對(duì)于“多模態(tài)”概念，早期在社會(huì)符號(hào)學(xué)、教育學(xué)中都有大量的研究。國(guó)內(nèi)學(xué)者胡鴻等通過(guò)多模態(tài)交互理論結(jié)合學(xué)齡兒童教具設(shè)計(jì)，得出有多模態(tài)設(shè)置的教具更能提升課堂互動(dòng)性與參與感。國(guó)外學(xué)者Salway與Martinec則通過(guò)新舊媒體表達(dá)范式的對(duì)比，深入地從多模態(tài)角度分析了圖文關(guān)系理論。國(guó)內(nèi)外學(xué)者對(duì)于多模態(tài)的研究分析基本聚焦在社會(huì)符號(hào)學(xué)以及語(yǔ)言學(xué)范疇，這對(duì)于交互裝置如何達(dá)成與觀眾溝通，實(shí)現(xiàn)交互性有一定的理論借鑒意義。

同時(shí)，近年來(lái)在工程學(xué)、自然科學(xué)、設(shè)計(jì)學(xué)等領(lǐng)域，越來(lái)越多的專家開始關(guān)注“多模態(tài)”理論的應(yīng)用，形成了研究熱點(diǎn)。Andersen 等指出，想讓人們順利地完成計(jì)算機(jī)的各項(xiàng)功能任務(wù)，最好的方式是使用多模態(tài)隱喻的方式去設(shè)置功能符號(hào)，如垃圾桶隱喻刪除文件、文件夾隱喻管理文件、齒輪隱喻系統(tǒng)設(shè)置等，這使得計(jì)算機(jī)成為非常豐富的多模態(tài)媒體，媒介使用的便捷性與有效性，很大程度是因?yàn)槊浇榉?hào)設(shè)計(jì)源自于人們的生活經(jīng)驗(yàn)與認(rèn)知基礎(chǔ)。

盡管不同領(lǐng)域?qū)Α澳B(tài)”的定義與應(yīng)用存在差別，但本文站在數(shù)據(jù)可視化交互裝置設(shè)計(jì)的角度，將模態(tài)定義為：人機(jī)交互時(shí)，裝置設(shè)計(jì)傳達(dá)信息時(shí)所呈現(xiàn)的方式，是一種人機(jī)交互的媒介狀態(tài)，多模態(tài)就是利用多種感官模態(tài)作為媒介，實(shí)現(xiàn)多種人機(jī)信息交換的可達(dá)性。

（二）意象圖式與多模態(tài)感知

意象圖式作為認(rèn)知語(yǔ)言學(xué)中的重要概念之一，于1980年由美國(guó)語(yǔ)言學(xué)家馬克·約翰遜與萊考夫率先提出。指人在長(zhǎng)期的生活經(jīng)驗(yàn)當(dāng)中，其行為、心智、知覺都存在著一定的規(guī)律模式以及意義圖式，它使人們具備有意義且可認(rèn)知關(guān)聯(lián)的經(jīng)驗(yàn)，并能理解以及進(jìn)行推理學(xué)習(xí)。

意象圖式是人與環(huán)境反復(fù)交互經(jīng)驗(yàn)下，日積月累形成的抽象認(rèn)知結(jié)構(gòu)，其圖式?jīng)Q定了認(rèn)知的具身化表現(xiàn)以及隱喻化的語(yǔ)言系統(tǒng)形成。在口頭上的表達(dá)“他有很遠(yuǎn)大的夢(mèng)想”，體現(xiàn)了“性質(zhì)”圖式中的“大小”程度，程度雖然是相對(duì)抽象的概念，但它在潛意識(shí)中可以影響認(rèn)知理解與語(yǔ)言系統(tǒng)。在行為活動(dòng)中，我們看到“樓梯”就自然聯(lián)想到“上與下”的動(dòng)作，這對(duì)應(yīng)了“空間”圖式。所以，常見的意象圖式是已經(jīng)在人腦中形成的共同行為經(jīng)驗(yàn)?zāi)Ｊ健?/p>

“意象圖式”與“多模態(tài)”雖分屬不同的概念領(lǐng)域，但都圍繞人的認(rèn)知與心智習(xí)慣模型展開研究。意象圖式是論述語(yǔ)言如何受環(huán)境狀態(tài)影響，從而做出相應(yīng)的描述詞匯;多模態(tài)是論述行為感官如何受環(huán)境狀態(tài)影響，從而做出相應(yīng)的動(dòng)作交互，兩者都說(shuō)明了人與物、人與人的各種交互行為都來(lái)源于認(rèn)知，而認(rèn)知與環(huán)境狀態(tài)有密不可分的關(guān)系，把“多模態(tài)”與“意象圖式”的概念結(jié)合，可以為交互裝置設(shè)計(jì)提供關(guān)于“動(dòng)因”的理論解釋。

由此，結(jié)合多模態(tài)理論與意象圖式部分理論的借鑒，可以構(gòu)建數(shù)據(jù)可視化交互裝置設(shè)計(jì)的底層理論系統(tǒng)，為交互裝置的設(shè)計(jì)提供理論依據(jù)，如圖1。

二、多模態(tài)概念下的數(shù)據(jù)可視化交互裝置設(shè)計(jì)思路

（一）數(shù)據(jù)可視化藝術(shù)裝置的多模態(tài)應(yīng)用

以可交互裝置設(shè)計(jì)的形式去實(shí)現(xiàn)數(shù)據(jù)可視化，是數(shù)據(jù)可視化中最為復(fù)雜的呈現(xiàn)方式?；诙嗄B(tài)人機(jī)交互理念，以及現(xiàn)今大數(shù)據(jù)所表現(xiàn)出的“規(guī)模大、變化快、異構(gòu)性和非結(jié)構(gòu)性”等特點(diǎn)，對(duì)數(shù)據(jù)可視化交互裝置的設(shè)計(jì)提出了挑戰(zhàn)，數(shù)據(jù)可視化交互裝置設(shè)計(jì)從應(yīng)用的模態(tài)情景，可以分為多維度模態(tài)、在地性模態(tài)、游戲式模態(tài)、情感化模態(tài)四種，分別應(yīng)對(duì)不同的使用場(chǎng)景與目標(biāo)人群。

1.多維度模態(tài)：數(shù)據(jù)可視化交互裝置設(shè)計(jì)可以突破屏幕（二維）的限制，實(shí)現(xiàn)多維度的交互，像廣州美術(shù)學(xué)院學(xué)生創(chuàng)作的數(shù)據(jù)可視化交互裝置《云圖》，如圖2，利用9個(gè)可交互的全息投影展柜，把9個(gè)不同城市實(shí)時(shí)氣候數(shù)據(jù)通過(guò)動(dòng)態(tài)三維的方式進(jìn)行展示，觀眾通過(guò)掃二維碼進(jìn)入特定程序，使2個(gè)或多個(gè)城市的數(shù)據(jù)進(jìn)行比對(duì)展示，結(jié)果實(shí)時(shí)在裝置上反映出來(lái)，實(shí)現(xiàn)多個(gè)維度的立體觀察。

2.在地性模態(tài)：在藝術(shù)設(shè)計(jì)領(lǐng)域，“在地性”指的是為現(xiàn)場(chǎng)性以及利用地點(diǎn)的特殊性進(jìn)行藝術(shù)創(chuàng)作，將“在地”作為空間批判的策略和創(chuàng)作方法，而交互裝置的設(shè)立與其所處的空間載體有著非常密切的關(guān)系，在地性原則同樣適用。在數(shù)據(jù)可視化交互裝置“深圳脈動(dòng)”中，如圖3，裝置將深圳交通實(shí)時(shí)數(shù)據(jù)轉(zhuǎn)譯為光影運(yùn)動(dòng)，光影運(yùn)動(dòng)再轉(zhuǎn)化為機(jī)械運(yùn)動(dòng)，機(jī)械裝置的運(yùn)動(dòng)集合構(gòu)成了作品的模態(tài)效果，創(chuàng)造出符合用戶感知的運(yùn)動(dòng)模型。同時(shí)，裝置的六邊形與深圳9個(gè)行政區(qū)巧妙對(duì)應(yīng)，1300萬(wàn)深圳人各自獨(dú)立的交通行為在這里集體可視化，匯聚出城市的脈動(dòng)。

3.游戲式模態(tài)：以游戲的方式進(jìn)行數(shù)據(jù)可視化交互，可以增加用戶的黏性以及好感度，通過(guò)游戲的模態(tài)，讓觀眾通過(guò)身體的參與挖掘數(shù)據(jù)的有趣點(diǎn)，從而實(shí)現(xiàn)對(duì)數(shù)據(jù)價(jià)值的理解。全球首家以House of Innovation為概念的耐克上海001，空間中庭有一個(gè)大型的數(shù)據(jù)可視化交互裝置名為“核心中場(chǎng)”，如圖4，通過(guò)各類型體育游戲的模態(tài)交互，參與者可以實(shí)現(xiàn)身體狀況數(shù)據(jù)、運(yùn)動(dòng)能力數(shù)據(jù)、雙人或多人競(jìng)技數(shù)據(jù)、綜合排名數(shù)據(jù)等聯(lián)動(dòng)，深度捆綁數(shù)據(jù)與用戶的關(guān)系，實(shí)現(xiàn)沉浸式的游戲交互狀態(tài)。

4.情感化模態(tài)：情感模態(tài)是指利用帶有情感色彩的符號(hào)元素，以及帶有情感特征的行為模型進(jìn)行模態(tài)設(shè)計(jì)，諸如握手、擁抱、擊掌等行為的象征隱喻借用。Twitter委托Sosolimited團(tuán)隊(duì)設(shè)計(jì)的一個(gè)數(shù)據(jù)可視化交互裝置，如圖5，充分利用了情感化模態(tài)。參觀者可以使用平板電腦選擇8個(gè)熱點(diǎn)話題中的任意一個(gè)，來(lái)觀看這個(gè)話題當(dāng)前Twitter上的熱點(diǎn)度。談?wù)撨@個(gè)話題的人越多、越激烈，裝置上燈光閃爍的頻率越高，“心跳”越快。

（二）基于多模態(tài)的數(shù)據(jù)可視化交互裝置設(shè)計(jì)模型

在判斷數(shù)據(jù)可視化交互裝置的效果時(shí)，要以用戶體驗(yàn)結(jié)果為判斷依據(jù)，用戶體驗(yàn)的優(yōu)劣跟模態(tài)有著密切聯(lián)系。英國(guó)工程師WilliamPlayfair在其數(shù)據(jù)統(tǒng)計(jì)圖形繪制中，利用了人類認(rèn)知圖形模態(tài)的特點(diǎn)，較早地從用戶體驗(yàn)的角度去處理數(shù)據(jù)可視化，柱狀圖作為現(xiàn)今被應(yīng)用最廣泛的圖表類型，最早是由他設(shè)計(jì)的。Jesse James Garrett在其著作《用戶體驗(yàn)要素》中，首次提出了基于用戶體驗(yàn)要素的網(wǎng)站平臺(tái)設(shè)計(jì)模型，它從用戶認(rèn)知與體驗(yàn)感知的角度切入，進(jìn)行了詳盡的原因分析與過(guò)程拆解。模型基于網(wǎng)站交互體驗(yàn)層級(jí)的復(fù)雜與多樣、內(nèi)在邏輯的繁復(fù)與鏈接的特點(diǎn)，利用5個(gè)層級(jí)（戰(zhàn)略層、范圍層、結(jié)構(gòu)層、框架層、表現(xiàn)層）高度概括了整個(gè)設(shè)計(jì)過(guò)程，該模型對(duì)業(yè)界產(chǎn)生了巨大影響力。

基于上述多模態(tài)理論基礎(chǔ)，以及在借鑒用戶體驗(yàn)層級(jí)要素模型的基礎(chǔ)上，重新整合并改進(jìn)設(shè)計(jì)得出適用于數(shù)據(jù)可視化交互裝置設(shè)計(jì)的層級(jí)模型。從4個(gè)層級(jí)進(jìn)行設(shè)計(jì)過(guò)程推導(dǎo)，幫助設(shè)計(jì)師更有目標(biāo)和效率地進(jìn)行設(shè)計(jì)工作，也讓觀眾更能清晰理解交互裝置想要表達(dá)的意圖，滿足認(rèn)知期望，從而實(shí)現(xiàn)沉浸式的交互體驗(yàn)，如圖6所示。

1.戰(zhàn)略層級(jí)：戰(zhàn)略層是整體方案設(shè)計(jì)的基礎(chǔ)以及原點(diǎn)，如果沒有戰(zhàn)略層面的思考，設(shè)計(jì)則無(wú)法推演與定位，喪失了核心要素。在戰(zhàn)略層，用戶需求是推動(dòng)整個(gè)方案的源動(dòng)力，用戶通過(guò)數(shù)據(jù)想要了解什么，又是什么驅(qū)動(dòng)用戶與藝術(shù)裝置互動(dòng)等動(dòng)因問題，都需要在具體設(shè)計(jì)前研究清楚。

2.戰(zhàn)術(shù)層級(jí)：明確的戰(zhàn)略目標(biāo)后，接下來(lái)需要關(guān)注的是數(shù)據(jù)的內(nèi)容與邊界，數(shù)據(jù)的邊界決定了可視化的層級(jí)。收集回來(lái)的數(shù)據(jù)進(jìn)行解構(gòu)分析，厘清數(shù)據(jù)之間的鏈接與邏輯關(guān)系，梳理出數(shù)據(jù)的組織結(jié)構(gòu)、進(jìn)行數(shù)據(jù)去躁等，都能進(jìn)一步提純數(shù)據(jù)，增強(qiáng)用戶獲取數(shù)據(jù)的效率。還要進(jìn)行數(shù)據(jù)的特征挖掘，找出有特點(diǎn)的數(shù)據(jù)細(xì)節(jié)，甚至是具有沖突性、戲劇性的數(shù)據(jù)變化，讓最終的交互裝置設(shè)計(jì)內(nèi)容具有更強(qiáng)的吸引力。

3.結(jié)構(gòu)層級(jí)：結(jié)構(gòu)層是在整體范圍都確定后，從結(jié)構(gòu)層面進(jìn)行完善設(shè)計(jì)。數(shù)據(jù)映射把數(shù)據(jù)的狀態(tài)數(shù)值、三維空間信息、固定或時(shí)變數(shù)據(jù)邏輯、數(shù)據(jù)間的組織關(guān)系等，通過(guò)形（點(diǎn)線面體）跟色（色立體）的匹配，分別映射在不同的視覺路徑上，使用戶能清晰認(rèn)知。交互設(shè)計(jì)的重點(diǎn)在交互行為的設(shè)計(jì)與創(chuàng)意上，需要規(guī)劃用戶的操作手段、回饋模式等表現(xiàn)方式。好的交互設(shè)計(jì)可以瞬間吸引用戶，并在交互中感受到樂趣。

4.模態(tài)層級(jí)：最后的模態(tài)層是基于用戶體驗(yàn)以及感知的層面，把之前結(jié)構(gòu)層的交互設(shè)計(jì)、數(shù)據(jù)映射、裝置構(gòu)造等，以一種多感官模態(tài)的形式進(jìn)行最終呈現(xiàn)，讓觀眾除了視覺層面的感受外，還有其他感官的交互。同時(shí)，在模態(tài)層還要加入意象圖式的可視化考慮，讓觀眾能在最短時(shí)間內(nèi)辨認(rèn)裝置的操作方式，以及空間位置、長(zhǎng)寬高、形狀大小、色彩屬性等感知內(nèi)容，基于目標(biāo)用戶，將感知性高的模態(tài)元素應(yīng)用在交互裝置設(shè)計(jì)中。要特意指出的是，視覺界面的設(shè)計(jì)屬于多模態(tài)中的視覺模態(tài)范疇，所以對(duì)于一般（屏幕二維）數(shù)據(jù)可視化的圖形化界面設(shè)計(jì)，也是需要考慮的重點(diǎn)之一。

戰(zhàn)略層、戰(zhàn)術(shù)層、結(jié)構(gòu)層、模態(tài)層這四個(gè)層級(jí)間存在著層次漸進(jìn)的關(guān)系，每一個(gè)層級(jí)都基于上一個(gè)層級(jí)推導(dǎo)出來(lái)，即戰(zhàn)術(shù)層基于戰(zhàn)略層的目標(biāo)用戶需求以及數(shù)據(jù)收集的研究，結(jié)構(gòu)層基于戰(zhàn)術(shù)層的數(shù)據(jù)分析進(jìn)行交互設(shè)計(jì)與數(shù)據(jù)映射，模態(tài)層的多感官感知設(shè)計(jì)是基于結(jié)構(gòu)層的推導(dǎo)，這四個(gè)層級(jí)關(guān)系緊密相連而構(gòu)成整體。

三、設(shè)計(jì)實(shí)踐

在設(shè)計(jì)實(shí)踐研究中，筆者以成都?xì)夂驍?shù)據(jù)的可視化展示作為研究目的，并以交互式裝置設(shè)計(jì)的形式進(jìn)行實(shí)物測(cè)試。整個(gè)數(shù)據(jù)可視化交互裝置的設(shè)計(jì)，都嚴(yán)格按照上文論述的設(shè)計(jì)層級(jí)模型展開，重點(diǎn)在于以真實(shí)的設(shè)計(jì)實(shí)踐驗(yàn)證理論的可行性。

1.設(shè)計(jì)戰(zhàn)略目標(biāo)的定義：首先，設(shè)計(jì)從戰(zhàn)略層角度對(duì)目標(biāo)用戶需求以及相關(guān)數(shù)據(jù)進(jìn)行收集，并反復(fù)推敲戰(zhàn)略目標(biāo)與任務(wù)路徑，確定了目標(biāo)用戶想要了解的數(shù)據(jù)內(nèi)容，然后收集了成都2020過(guò)往一年全年每日的實(shí)時(shí)各地區(qū)平均濕度天氣數(shù)據(jù)（數(shù)據(jù)來(lái)源：中央氣象臺(tái)國(guó)家氣象數(shù)據(jù)網(wǎng)），作為基礎(chǔ)數(shù)據(jù)收集。

2.設(shè)計(jì)戰(zhàn)術(shù)制定的梳理：接著在戰(zhàn)術(shù)層中，通過(guò)把氣候?qū)?yīng)的地區(qū)數(shù)據(jù)特征作進(jìn)一步提取，將二維抽象數(shù)據(jù)轉(zhuǎn)換為思維坐標(biāo)系，能對(duì)應(yīng)時(shí)間軸與空間軸的三維模態(tài)。數(shù)據(jù)三維模態(tài)分析如圖7a所示，以不同的立體粒子形態(tài)去呈現(xiàn)數(shù)據(jù)，強(qiáng)化氣候變化與地理的關(guān)系，這種在地圖圖形符號(hào)上以帶顏色的三維立體方塊作為表達(dá)的數(shù)據(jù)圖式，能方便用戶迅速對(duì)整體變量做出判斷，由于有了“時(shí)空”維度的加入，令觀眾能更好地把握全局。背后獲得信息設(shè)計(jì)邏輯如圖7b所示，觀眾可以直觀感受氣候與地理分布的關(guān)系，并通過(guò)實(shí)時(shí)的變化感受不同時(shí)節(jié)成都?xì)夂虻奶攸c(diǎn)。

3.設(shè)計(jì)結(jié)構(gòu)方式的深化：在結(jié)構(gòu)層的設(shè)計(jì)分為兩個(gè)方面，一是用戶可以通過(guò)手機(jī)掃二維碼進(jìn)入定制程序，改變參數(shù)查看氣候與地理信息的數(shù)據(jù)聯(lián)系與變化;二是在裝置構(gòu)造上選擇LED立體陣列作為展示載體，以配合內(nèi)容與模態(tài)的需求。二級(jí)立體界面設(shè)計(jì)如圖7c所示，在數(shù)據(jù)映射層面把對(duì)應(yīng)的結(jié)構(gòu)信息，如空間地理位置，區(qū)域氣候變化、相對(duì)濕度等，利用顏色映射法、高度映射法、三維映射法進(jìn)行數(shù)據(jù)映射，提高用戶理解力，加快用戶認(rèn)知效率。

4.設(shè)計(jì)模態(tài)交互的設(shè)定：在最后的模態(tài)層設(shè)定上，綜合了此前理論模型的要點(diǎn)，一方面從行為感官模態(tài)交互入手，利用紅外線動(dòng)作感應(yīng)技術(shù)，識(shí)別觀眾所在位置與作品方位的對(duì)應(yīng)關(guān)系，把觀眾所在的方位與成都地圖的方位做了一個(gè)對(duì)應(yīng)模態(tài)，觀眾步隨景移可以圍繞作品觀察成都?xì)夂蛟诓煌貐^(qū)的變化三維圖像;另一方面從認(rèn)知識(shí)別符號(hào)的在地性入手，加入火鍋、熊貓、竹子等情感化符號(hào)以及文化符號(hào)的表達(dá)，使得原本抽象冰冷的數(shù)據(jù)有了“表情”與文化基因，更能讓觀眾產(chǎn)生共情，如圖8a所示。同時(shí)，在交互裝置中還加入了聲效的考慮，讓交互藝術(shù)裝置最后呈現(xiàn)的豐富多變的綜合模態(tài)效果，能根據(jù)用戶的交互產(chǎn)生實(shí)時(shí)的變化，如圖8b所示。

從最后的結(jié)果看，該數(shù)據(jù)可視化交互裝置的設(shè)計(jì)流程是嚴(yán)格按照前述的“數(shù)據(jù)可視化交互裝置設(shè)計(jì)層級(jí)模型”執(zhí)行的，從結(jié)果上是受到了當(dāng)?shù)孛癖姷臍g迎，有不少觀眾在體驗(yàn)后都能感受到當(dāng)?shù)貧夂驐l件與地理因素的關(guān)系，也體會(huì)到了氣候地理因素對(duì)社會(huì)文化的影響，得到不少正面回饋與多家媒體的報(bào)道，是數(shù)據(jù)可視化交互裝置設(shè)計(jì)模型的一次實(shí)踐驗(yàn)證。

結(jié)論

基于多模態(tài)理論的梳理與數(shù)據(jù)可視化交互裝置設(shè)計(jì)的實(shí)例分析，采用系統(tǒng)模型過(guò)程拆分的方法，提出數(shù)據(jù)可視化交互裝置的設(shè)計(jì)模型，該模型主要包含戰(zhàn)略層、戰(zhàn)術(shù)層、結(jié)構(gòu)層與模態(tài)層四個(gè)部分。每一個(gè)層級(jí)都是基于上一個(gè)層級(jí)推導(dǎo)，層級(jí)之間的邏輯關(guān)系緊密，其中多模態(tài)作為最終的層級(jí)考慮，是影響數(shù)據(jù)裝置與用戶是否達(dá)成真正交互的關(guān)鍵因素，也是豐富數(shù)據(jù)可視化裝置設(shè)計(jì)體驗(yàn)感的核心要素。

該模型的運(yùn)用可增加數(shù)據(jù)可視化交互裝置設(shè)計(jì)信息傳達(dá)的準(zhǔn)確性、豐富性、趣味性與交互性，使得數(shù)據(jù)可視化有了更為綜合的表達(dá)形式，也為交互裝置的設(shè)計(jì)創(chuàng)作提供了新的交互維度。

3266501908267