基于新媒體交互裝置的信息互動(dòng)方式探究

□楊 超 李 建

(山西傳媒學(xué)院動(dòng)畫與數(shù)字藝術(shù)學(xué)院，山西 晉中 030619)

隨著人類社會(huì)步入信息時(shí)代，數(shù)字技術(shù)及相關(guān)應(yīng)用以極快的速度融入人們的生活之中。根據(jù)2019年德勤發(fā)布的報(bào)告《超級(jí)智能城市2.0：人工智能引領(lǐng)新風(fēng)向》,預(yù)計(jì)到2050年全球70%的人口將居住在城市中[1]。因此，傳統(tǒng)媒體呈現(xiàn)出的線性單一的互動(dòng)方式很難滿足用戶訴求。新媒體時(shí)代用戶在接收信息內(nèi)容時(shí)的需求是基于一定情感交流的雙向互動(dòng)。加之近年來(lái)在國(guó)際局勢(shì)和各種綜合因素影響下，大量媒體資源向線上平臺(tái)遷移，進(jìn)一步推動(dòng)了互聯(lián)網(wǎng)與傳統(tǒng)媒體的深度融合，使流媒體及相關(guān)產(chǎn)業(yè)獲得了極為理想的發(fā)展窗口期，無(wú)形中推動(dòng)了信息媒介和信息交互方式的進(jìn)一步變革。

一、交互裝置的發(fā)展與特征

裝置藝術(shù)作品初期并不具備一般意義上的互動(dòng)性，創(chuàng)作者的本意只是想通過(guò)這種新穎的表現(xiàn)形式傳達(dá)其內(nèi)心的所思所感，在信息傳播的過(guò)程中是對(duì)用戶或觀者的單向輸出，用戶作為信息接收的一方對(duì)信息內(nèi)容本體并無(wú)處置權(quán)，用戶和作品之間不存在信息互動(dòng)。但隨著科技的逐步發(fā)展，技術(shù)對(duì)信息媒介持續(xù)不斷地進(jìn)行革新，技術(shù)和藝術(shù)在各個(gè)領(lǐng)域進(jìn)行融合創(chuàng)新，二者之間孤立的關(guān)系被打破，交互裝置及相關(guān)的產(chǎn)品乃至藝術(shù)形式應(yīng)運(yùn)而生[2]?，F(xiàn)代交互裝置以新媒體技術(shù)為構(gòu)架，將視覺(jué)、聽(tīng)覺(jué)、味覺(jué)、嗅覺(jué)、觸覺(jué)等多觀感互動(dòng)方式與信息傳播媒介相結(jié)合，通過(guò)多學(xué)科、多領(lǐng)域交叉融合，以新媒體藝術(shù)語(yǔ)言將信息內(nèi)容呈現(xiàn)給用戶，將用戶的行為變量轉(zhuǎn)化為控制裝置的數(shù)值變量，幫助用戶在體驗(yàn)的過(guò)程中意識(shí)到自身在獲得信息內(nèi)容的同時(shí)也對(duì)裝置媒介本體產(chǎn)生了影響，進(jìn)而產(chǎn)生興趣。所以，交互裝置是新媒體技術(shù)和裝置藝術(shù)的結(jié)合與創(chuàng)新，融合了這兩種內(nèi)容方式的特點(diǎn)，通過(guò)裝置媒介擴(kuò)充和延伸了人們的視聽(tīng)感官，在新媒體藝術(shù)的視聽(tīng)語(yǔ)言強(qiáng)化下，更為生動(dòng)有趣地將信息內(nèi)容傳達(dá)給用戶，并賦予用戶一定的處理權(quán)，實(shí)現(xiàn)雙向互動(dòng)。

(一)現(xiàn)代交互裝置的特征

新媒體可以通過(guò)計(jì)算機(jī)與網(wǎng)絡(luò)技術(shù)實(shí)現(xiàn)豐富多樣的信息呈現(xiàn)形式。其主要特征為——設(shè)計(jì)人員將相關(guān)技術(shù)視為興趣愛(ài)好，重視觀眾的參與度并對(duì)其進(jìn)行引導(dǎo)，在設(shè)計(jì)中融入聲、光、電等多感官體驗(yàn)方式，場(chǎng)景可以隨環(huán)境的變化而改變等。新媒體交互裝置藝術(shù)通常會(huì)結(jié)合傳統(tǒng)藝術(shù)特征和新穎的內(nèi)容表達(dá)方式，打破了科技與藝術(shù)的界限，實(shí)現(xiàn)了藝術(shù)與科技的深度融合[3]。正是由于交互裝置具備更強(qiáng)的互動(dòng)性和公共性，使相關(guān)的信息內(nèi)容更易被用戶所接受，所以新媒體技術(shù)和新型材料的研發(fā)也為信息媒介和互動(dòng)方式的創(chuàng)新創(chuàng)造了更多的可能性，由此引發(fā)的藝術(shù)創(chuàng)作和產(chǎn)品應(yīng)用也越來(lái)越多，創(chuàng)作者們開始希望用戶在感知信息內(nèi)容的過(guò)程中能與自己產(chǎn)生思想上的共鳴，進(jìn)而實(shí)現(xiàn)信息的雙向傳播與交流，這不僅能幫助用戶提升感知體驗(yàn)，同樣也能使創(chuàng)作者開闊思路，獲取更多靈感。

(二)交互裝置的技術(shù)應(yīng)用

隨著無(wú)線網(wǎng)絡(luò)、云計(jì)算和各種體感交互設(shè)備的出現(xiàn)，交互裝置開始嘗試與空間設(shè)計(jì)結(jié)合，將空間環(huán)境也納入到信息交流的過(guò)程中以提升用戶體驗(yàn)。伴隨著交互裝置的發(fā)展，用戶也逐漸從單純的信息接收者轉(zhuǎn)變?yōu)樾畔鞑フ?，甚至成為一些裝置媒介或藝術(shù)作品構(gòu)建過(guò)程中的組成部分，從單純的幫助用戶獲取信息轉(zhuǎn)變?yōu)閷?duì)人類真情實(shí)感的呈現(xiàn)以及對(duì)社會(huì)問(wèn)題的映射。在這一過(guò)程中，遠(yuǎn)程控制式交互和動(dòng)作感應(yīng)式交互是當(dāng)代信息傳播的主要實(shí)現(xiàn)方式。其中，遠(yuǎn)程控制式交互是通過(guò)無(wú)線信號(hào)和攝像機(jī)捕捉技術(shù)對(duì)觀眾和遠(yuǎn)端影像進(jìn)行實(shí)時(shí)控制，例如韓國(guó)麗水世博會(huì)的“世博數(shù)字藝術(shù)畫廊”裝置，就是通過(guò)遠(yuǎn)程控制技術(shù)借由LED屏幕動(dòng)態(tài)展示了一條由現(xiàn)場(chǎng)觀眾照片合成的在空中游動(dòng)的鯨魚，帶給了現(xiàn)場(chǎng)用戶極為逼真且震撼的臨場(chǎng)體驗(yàn)。而動(dòng)作感應(yīng)式交互的特點(diǎn)則是通過(guò)傳感器捕捉觀眾的動(dòng)作，進(jìn)而觸發(fā)裝置內(nèi)預(yù)置的影像素材，例如法國(guó)藝術(shù)家米古厄拉·契弗里埃(Miguel Chevalier)創(chuàng)作的《8 Ties》就是利用生活中常見(jiàn)的符號(hào)組成矩陣通過(guò)墻壁進(jìn)行投影，當(dāng)觀眾經(jīng)過(guò)墻面時(shí)矩陣圖像會(huì)隨之產(chǎn)生變化并觸發(fā)音樂(lè)，帶給觀眾非常新奇且有趣的互動(dòng)體驗(yàn)。隨著動(dòng)作捕捉技術(shù)和體感交互技術(shù)的發(fā)展和應(yīng)用，單純的觸控式影像裝置逐漸走向落寞，取而代之的是互動(dòng)性更強(qiáng)、沉浸感更逼真的動(dòng)作感應(yīng)式交互模式和相關(guān)應(yīng)用。

二、信息交互方式的變化

“交互性”是新媒體交互裝置中最重要的設(shè)計(jì)原則，創(chuàng)作者與用戶之間是平等的關(guān)系，在信息傳播過(guò)程中兩者都可以對(duì)信息進(jìn)行修改、創(chuàng)新并隨機(jī)進(jìn)行非點(diǎn)對(duì)點(diǎn)的傳播和發(fā)散。因此，創(chuàng)作者改變了傳統(tǒng)的單向線性的信息內(nèi)容設(shè)置與傳播互動(dòng)模式，通過(guò)創(chuàng)設(shè)相應(yīng)的藝術(shù)氛圍引導(dǎo)觀眾參與其中，并給出有效反饋。為滿足這一設(shè)計(jì)要求，創(chuàng)作者需要通過(guò)多樣的表現(xiàn)形式賦予其更多的互動(dòng)方式，這種互動(dòng)不僅僅局限在物質(zhì)層面，更應(yīng)體現(xiàn)在精神與思想層面，這需要?jiǎng)?chuàng)作者與觀眾之間能實(shí)現(xiàn)信息和情感的溝通和交流，觀眾在體驗(yàn)過(guò)裝置后獲取相關(guān)信息，可以發(fā)表自身的看法和建議，而創(chuàng)作者則能以此改進(jìn)和創(chuàng)新，最終實(shí)現(xiàn)信息的雙向互通。

(一)單向互動(dòng)

受限于硬件技術(shù)和成本等問(wèn)題，創(chuàng)作者大多從人們對(duì)視覺(jué)和聽(tīng)覺(jué)的習(xí)慣進(jìn)行探索，以“第四堵墻”作為切入點(diǎn)對(duì)作品的視聽(tīng)形式進(jìn)行探究[4]?！暗谒亩聣Α敝肝枧_(tái)前方邊緣正對(duì)觀眾的位置，臺(tái)下的觀眾和臺(tái)上的演員都察覺(jué)不到這面透明的墻。根據(jù)這一概念，現(xiàn)代的動(dòng)畫或影視作品會(huì)讓角色直視鏡頭畫面，使其主動(dòng)形成了一種與觀眾交流的狀態(tài)以提升觀眾和作品之間的互動(dòng)，增加觀眾的臨場(chǎng)感，力求讓用戶有身臨其境的體驗(yàn)。

(二)初級(jí)的互動(dòng)

隨著信息媒介的發(fā)展，用戶能在觀影或游戲體驗(yàn)中感受到更強(qiáng)的臨場(chǎng)感。但實(shí)際上觀眾和信息之間仍存在無(wú)形屏障，無(wú)法建立完整的交互關(guān)系，只具備有限的沉浸式效果，比如任天堂在3Ds上推出的裸眼3D成像技術(shù)和手游陰陽(yáng)師的AR抽卡功能。在此階段，信息交互功能側(cè)重于用戶的身體感知經(jīng)驗(yàn)，并通過(guò)控制虛擬影像對(duì)用戶的身體數(shù)據(jù)進(jìn)行模擬驗(yàn)算，再根據(jù)空間和位置信息的變化，通過(guò)屏幕對(duì)用戶的行為和動(dòng)作進(jìn)行識(shí)別和反饋，從而營(yíng)造出一種低延遲的“實(shí)時(shí)”互動(dòng)效果。

(三)完整的互動(dòng)

基于當(dāng)代數(shù)字媒體技術(shù)的進(jìn)一步革新，頭戴式VR設(shè)備和異形屏設(shè)備的誕生，以及影像技術(shù)的極大提升，催生了基于VR、AR技術(shù)的裝置和應(yīng)用。此類技術(shù)可以幫助用戶親身參與到作品中并直接接觸信息內(nèi)容，還能根據(jù)用戶的肢體動(dòng)作進(jìn)行互動(dòng)反饋，使用戶獲得較為真實(shí)的沉浸式體驗(yàn)，實(shí)現(xiàn)用戶與裝置之間的雙向互動(dòng)。此類設(shè)備從使用感受層面弱化了用戶對(duì)“屏幕”的認(rèn)知和感知，在人與信息間構(gòu)建出較為完整的封閉環(huán)境，成功實(shí)現(xiàn)了多感官互動(dòng)式體驗(yàn)。

三、信息交互路徑的變化

隨著網(wǎng)絡(luò)技術(shù)的發(fā)展，在互聯(lián)網(wǎng)空間內(nèi)任何人都能在任何節(jié)點(diǎn)產(chǎn)生和傳播信息，并以非線性的方式擴(kuò)散，打破了點(diǎn)對(duì)點(diǎn)的傳統(tǒng)線性傳播方式。以交互裝置作為信息媒介，主客體可以通過(guò)該媒介進(jìn)行情感互通。

(一)創(chuàng)作者視角

在科學(xué)與藝術(shù)融合的大背景下，新媒體的多重選擇和視覺(jué)信息的多維度呈現(xiàn)方式改變了創(chuàng)作者的固有認(rèn)知，創(chuàng)作者們開始主動(dòng)與用戶分享靈感、創(chuàng)意。所以創(chuàng)作者視角就是通過(guò)數(shù)字化的交互裝置引發(fā)用戶在視覺(jué)、聽(tīng)覺(jué)、觸感、想象等多維感知體驗(yàn)，進(jìn)而與用戶形成雙向互通的情感傳遞。

(二)用戶視角

隨著傳統(tǒng)信息媒介與數(shù)字技術(shù)的深度結(jié)合，用戶不僅可以自由選擇感興趣的信息內(nèi)容，還可以自由地表達(dá)觀點(diǎn)，甚至對(duì)其下載和修改，之后通過(guò)網(wǎng)絡(luò)將二次編輯的作品上傳并分享。所以用戶視角就是在信息媒介極大豐富的前提下，能自由選擇信息內(nèi)容，并與創(chuàng)作者進(jìn)行互動(dòng)和交流，實(shí)現(xiàn)靈感碰撞。

(三)多領(lǐng)域交叉創(chuàng)新

新媒體時(shí)代下，多層次、多方向“跨界”成為了通用方式。基于不同領(lǐng)域的學(xué)科內(nèi)容，結(jié)合數(shù)字媒體技術(shù)的特性，將傳統(tǒng)的信息內(nèi)容甚至藝術(shù)形式賦予新的呈現(xiàn)形式，通過(guò)多樣化的互動(dòng)裝置展現(xiàn)出不同的技術(shù)特點(diǎn)，給用戶提供更為新奇有趣的信息互動(dòng)體驗(yàn)，實(shí)現(xiàn)了藝術(shù)與科技的深度融合。

四、用戶對(duì)交互體驗(yàn)的認(rèn)知變化

(一)感官體驗(yàn)

感官體驗(yàn)基于人類的生理感官刺激，是用戶對(duì)外界事物的直觀印象。該層級(jí)是人的五官受神經(jīng)中樞控制所產(chǎn)生的淺層次感知體驗(yàn)，是誘發(fā)其他感官體驗(yàn)的基礎(chǔ)。作為人與外界接觸并獲得信息的接收器，各個(gè)器官接收不同刺激讓感知器官之間產(chǎn)生意象聯(lián)系[5]。在這種情況下人對(duì)外部事物的感覺(jué)能從一種感官傳達(dá)到另一種感官，最終形成多維度的立體感官體驗(yàn)。但這種通感體驗(yàn)僅局限于理性思維層面，用戶在初次使用裝置或產(chǎn)品后對(duì)其的第一印象或在親身體驗(yàn)之前的道聽(tīng)途說(shuō)，是用戶對(duì)相關(guān)裝置媒介和信息內(nèi)容進(jìn)行評(píng)價(jià)的主要依據(jù)，相對(duì)來(lái)說(shuō)更偏向于基礎(chǔ)層面的體驗(yàn)。

(二)探索體驗(yàn)

探索體驗(yàn)是用戶與交互裝置發(fā)生互動(dòng)行為后產(chǎn)生的情感波動(dòng)或情緒感受，強(qiáng)調(diào)互動(dòng)過(guò)程及對(duì)用戶需求的滿足程度。在多感官的認(rèn)知基礎(chǔ)上，利用想象、聯(lián)想等感性思維手段，針對(duì)外部事物產(chǎn)生的既存印象、記憶或經(jīng)驗(yàn)進(jìn)行總結(jié)、預(yù)測(cè)和模擬，最終將多感官的理性認(rèn)知與感性認(rèn)知進(jìn)行融合。在這一體驗(yàn)中，用戶會(huì)帶入一定的個(gè)人經(jīng)驗(yàn)或臨場(chǎng)感，在體驗(yàn)過(guò)程中實(shí)現(xiàn)角色扮演，將客觀外物和自身想法進(jìn)行結(jié)合，是一種更高層級(jí)的體驗(yàn)。

(三)思想體驗(yàn)

思想體驗(yàn)是交互裝置通過(guò)技術(shù)幫助用戶實(shí)現(xiàn)的思維層面的延伸和擴(kuò)展，是一種建立在情感之上的抽象的互動(dòng)體驗(yàn)，用戶的自身內(nèi)在情感與外部事物在某種刺激下產(chǎn)生了共鳴。既包括理性認(rèn)知、回憶和聯(lián)想等，又包括感官認(rèn)知的表象運(yùn)動(dòng)與意識(shí)及體驗(yàn)的進(jìn)一步綜合與升華。其特點(diǎn)在于對(duì)理性認(rèn)知進(jìn)行更為深入的抽象化和情感化加工，進(jìn)而產(chǎn)生外在與內(nèi)在共同的體驗(yàn)，幫助用戶在體驗(yàn)過(guò)程中能更多地進(jìn)行主動(dòng)思考和聯(lián)想，最終實(shí)現(xiàn)理性和感性的深度結(jié)合，這也是人對(duì)外部事物認(rèn)知的最高層次。

五、交互裝置的情感導(dǎo)向和強(qiáng)化認(rèn)知

根據(jù)用戶對(duì)交互裝置體驗(yàn)的情感反饋，可以將認(rèn)知體驗(yàn)歸納為工具型的認(rèn)知體驗(yàn)、審美型的認(rèn)知體驗(yàn)、社交型的認(rèn)知體驗(yàn)、驚喜型的認(rèn)知體驗(yàn)和興趣型的認(rèn)知體驗(yàn)等[6]。通常表現(xiàn)為——失望或滿意、喜歡或厭惡、有趣或無(wú)聊，來(lái)體現(xiàn)用戶對(duì)交互裝置體驗(yàn)后獲取信息的實(shí)際感受。創(chuàng)作者需要通過(guò)更為新穎且多樣化的信息媒介和互動(dòng)方式讓用戶在體驗(yàn)過(guò)程中保持新鮮感進(jìn)而產(chǎn)生興趣。由于每個(gè)人的生活背景、知識(shí)結(jié)構(gòu)、社會(huì)經(jīng)驗(yàn)等各方面存在差異，因此人的行為傾向是個(gè)性化的，且有不可預(yù)測(cè)性。因此對(duì)用戶感知進(jìn)行一定程度的引導(dǎo)是創(chuàng)造良好交互體驗(yàn)的內(nèi)在需求。通過(guò)用戶調(diào)研對(duì)數(shù)據(jù)進(jìn)行分析后，在裝置設(shè)計(jì)中進(jìn)行科學(xué)合理的軟件編排，引導(dǎo)用戶達(dá)到符合其預(yù)期的互動(dòng)效果。通過(guò)創(chuàng)作者視角對(duì)用戶的尊重，最終形成差異化的、有代入感的、內(nèi)容形式豐富的又個(gè)性化的交互體驗(yàn)。用戶感知是建立在個(gè)人經(jīng)驗(yàn)、情感等基礎(chǔ)上的初步體驗(yàn)，對(duì)于信息媒介和信息交互方式的發(fā)展有顯著影響。

在保證對(duì)用戶的個(gè)人引導(dǎo)之外，對(duì)環(huán)境的引導(dǎo)同樣重要。主要利用位置、聲音、光效等信息為用戶提供具有代入感的逼真環(huán)境，與交互裝置進(jìn)行配合，進(jìn)而引發(fā)用戶的情感共鳴。比如山東美術(shù)館展出的交互裝置《意識(shí)消融》，通過(guò)實(shí)時(shí)交互技術(shù)采集觀眾的運(yùn)動(dòng)數(shù)據(jù)，將數(shù)據(jù)轉(zhuǎn)化為可視化影像再進(jìn)行實(shí)時(shí)播放，觀眾的虛像就會(huì)出現(xiàn)在雨、雪、海底、風(fēng)暴等不同的自然環(huán)境中。該作品是在全球氣候變暖的背景下探討人與自然的關(guān)系，而這不僅僅是氣候問(wèn)題，也包含政治、經(jīng)濟(jì)等社會(huì)問(wèn)題。創(chuàng)作者通過(guò)新媒體信息交互方式讓觀者在作品中思考人與自然的關(guān)系，在沉浸感中提升用戶的認(rèn)知體驗(yàn)。

六、結(jié)語(yǔ)

隨著數(shù)字技術(shù)的不斷革新，信息交互方式也呈現(xiàn)出更為多元化的發(fā)展趨勢(shì)。交互裝置及相關(guān)應(yīng)用作為新媒體時(shí)代下的標(biāo)志性產(chǎn)物，已經(jīng)具有廣泛的用戶受眾。交互裝置不僅是對(duì)傳統(tǒng)媒介和傳統(tǒng)藝術(shù)的創(chuàng)新，更是一種傳承，是設(shè)計(jì)創(chuàng)作者們對(duì)“以人為本”理念的貫徹與實(shí)踐。將人文關(guān)懷和情感關(guān)懷融入信息媒介的發(fā)展中，對(duì)信息交互體驗(yàn)進(jìn)行持續(xù)不斷地探索和創(chuàng)新，相信未來(lái)的信息交互方式將呈現(xiàn)出更為豐富多樣的形態(tài)。