基于多感官體驗(yàn)的新媒體交互藝術(shù)

王超

摘 要：在數(shù)字媒體時(shí)代的語(yǔ)境下，數(shù)字技術(shù)與藝術(shù)的聯(lián)姻誕生了新媒體藝術(shù)這個(gè)時(shí)代寵兒。作為新媒體藝術(shù)分支之一的交互藝術(shù)改變了傳統(tǒng)媒體的線性秩序敘事方式，強(qiáng)調(diào)觀眾參與的積極性和能動(dòng)性，通過(guò)視、聽(tīng)、觸、嗅等多感官手段的結(jié)合建立起新的認(rèn)知體驗(yàn)，實(shí)現(xiàn)即時(shí)交互以達(dá)到全身心的融入、沉浸和交流。

關(guān)鍵詞：交互;多感官;參與度 ;體驗(yàn);沉浸感

藝術(shù)從本質(zhì)上講是一種信息傳達(dá)和情感交流的活動(dòng)。交互藝術(shù)作為新興的一門(mén)新媒體藝術(shù)形式， 特指觀眾能夠通過(guò)視、聽(tīng)、觸、嗅等感覺(jué)手段和智能化技術(shù)使藝術(shù)作品實(shí)現(xiàn)即時(shí)交互，得到多感官的沉浸式體驗(yàn)。

1 “互動(dòng)”到“交互”的延展

“互動(dòng)”原為社會(huì)學(xué)概念，自20世紀(jì)60年代以來(lái)成為計(jì)算機(jī)領(lǐng)域的專有名詞，譯為參與活動(dòng)的對(duì)象根據(jù)相應(yīng)的指令后而相應(yīng)地做出反應(yīng)的過(guò)程及行為。而“交互”也被認(rèn)定為新媒體藝術(shù)的核心和靈魂。

“互動(dòng)”是人與世界、自然，以及一切事物進(jìn)行交互活動(dòng)的一個(gè)過(guò)程，人類(lèi)是地球上最具交互性的動(dòng)物。在我們與他人面對(duì)面時(shí)，用視覺(jué)的、聽(tīng)覺(jué)的、嗅覺(jué)的、觸摸的方式從對(duì)方吸收各種不同信息，再經(jīng)消化反饋給對(duì)方。

在新媒體交互藝術(shù)領(lǐng)域，“交互”的意思就是通過(guò)多感官和動(dòng)覺(jué)紐帶，在觀賞者和藝術(shù)作品之間建立聯(lián)結(jié)，從而使觀賞者能夠參與到作品當(dāng)中，與藝術(shù)作品甚至創(chuàng)作者雙向交流，并能從作品中得到愉悅和共鳴。交互的目標(biāo)是要依靠交互技術(shù)達(dá)到人和虛擬對(duì)象自然和諧、即時(shí)雙向的交流方式，引導(dǎo)用戶更好地認(rèn)知所要傳達(dá)的信息并且做出反饋。交互技術(shù)融合了多感官體驗(yàn)，將我們對(duì)圖像的理解轉(zhuǎn)變?yōu)橐粋€(gè)基于時(shí)間空間框架的多感官交互空間。在這樣的虛擬空間中，環(huán)境也會(huì)與人產(chǎn)生互動(dòng)，觀眾還可以在某種程度內(nèi)調(diào)整他們所發(fā)現(xiàn)的環(huán)境，營(yíng)造最強(qiáng)的沉浸感。

交互藝術(shù)是以人機(jī)相互作用為基礎(chǔ)的藝術(shù)形式，它強(qiáng)調(diào)人與機(jī)器之間的相互影響，交互藝術(shù)還強(qiáng)調(diào)觀眾的積極性和能動(dòng)性，它要求觀眾參與到作品中來(lái)并通過(guò)這種互動(dòng)使作品本身發(fā)生可逆或不可逆的變化， 從而產(chǎn)生實(shí)時(shí)的、可變的藝術(shù)效果。

2 交互藝術(shù)的特性——基于感官的輸入輸出

交互藝術(shù)作品需要經(jīng)過(guò)“連結(jié)”、“融入”、“互動(dòng)”、“轉(zhuǎn)化”、“初入”五個(gè)階段實(shí)現(xiàn)。羅伊·阿斯柯特認(rèn)為新媒體藝術(shù)最鮮明的特征是它的“連結(jié)性”與 “互動(dòng)性”?！盎?dòng)”或者說(shuō)“交互”過(guò)程是參與對(duì)象之間的信息交流過(guò)程，其目的是實(shí)現(xiàn)某一特定的目標(biāo)。觀眾或者說(shuō)“人”的介入和參與是互動(dòng)藝術(shù)不可分割的一部分，觀眾角色被賦予了新的、積極的意義，“參與度”和“沉浸感”成為互動(dòng)藝術(shù)的重要衡量標(biāo)準(zhǔn)。

互動(dòng)藝術(shù)家探索如何能夠調(diào)動(dòng)人類(lèi)的五大感官、動(dòng)作和姿態(tài)借助于既有的技術(shù)資源從而使之主動(dòng)、深度參與互動(dòng)中來(lái)。其通常的形式是通過(guò)數(shù)字?jǐn)z像頭、遙控器、紅外線感應(yīng)等多種采集工具將觀眾的語(yǔ)言、表情、動(dòng)作或其他肢體語(yǔ)言進(jìn)行捕捉和數(shù)據(jù)分析，并根據(jù)計(jì)算機(jī)的程序處理，通過(guò)聲音、圖像、音樂(lè)、光線、數(shù)字視頻、動(dòng)畫(huà)和機(jī)械互動(dòng)裝置等給觀眾反饋信息，完成與觀眾即時(shí)的對(duì)話或情感交流。觸發(fā)形式往往多是聲音、觸合成摸或動(dòng)態(tài)動(dòng)作。如上海世博會(huì)德國(guó)館動(dòng)力之源大廳的互動(dòng)金屬球，金屬球的基座設(shè)有聲控及互動(dòng)控制裝置，能夠?qū)ν鈦?lái)聲音產(chǎn)生反應(yīng)，只要金屬球頂部的基座接收到輕微的震動(dòng)，就能將懸掛于其下的金屬球帶入擺動(dòng)狀態(tài)。當(dāng)觀眾齊聲高喊時(shí)，球內(nèi)的聲控驅(qū)動(dòng)裝置就能夠左右金屬球擺動(dòng)的方向，球體表面上不斷變化的影像和色彩也隨之投映至大廳。這種以聲音觸發(fā)的虛擬現(xiàn)實(shí)技術(shù)為沉浸式交互藝術(shù)的發(fā)展體。

圖1上海世博會(huì)德國(guó)館動(dòng)力之源大廳的互動(dòng)金屬球

在交互設(shè)計(jì)中，通過(guò)感官獲得的感知體驗(yàn)也顯得尤為重要?？{基梅隆大學(xué)設(shè)計(jì)學(xué)院前任院長(zhǎng) Dan Boyarski曾說(shuō)過(guò)，交互的目標(biāo)是用戶來(lái)體驗(yàn)，使用者有良好的體驗(yàn)。而“交互藝術(shù)”借助虛擬現(xiàn)實(shí)技術(shù)、 三維實(shí)境技術(shù)、多通道交互技術(shù)或機(jī)械數(shù)控裝置打 造出用戶體驗(yàn)的“沉浸”環(huán)境。但它是理解媒介發(fā)展的一個(gè)關(guān)鍵詞匯。沉浸是指精神的全神貫注，是一種精神狀態(tài)到另一種精神狀態(tài)的發(fā)展、變化和過(guò)渡的過(guò)程，增加對(duì)當(dāng)前事件的情感投入。

沉浸式交互藝術(shù)作品主要是在藝術(shù)場(chǎng)館、博物館、公共空間中展。這種藝術(shù)作品通過(guò)計(jì)算機(jī)捕捉人的多種感覺(jué)（如言語(yǔ)、眼神、臉部表情唇動(dòng)、觸 覺(jué)、嗅覺(jué)或味覺(jué)等）和動(dòng)作通道（如語(yǔ)音、手寫(xiě)、 姿勢(shì)、 視線、表情等），并實(shí)現(xiàn)即時(shí)反饋， 而觀眾則以并行或非精確的方式 “沉浸”于虛擬計(jì)算機(jī)交互環(huán)境中。沉浸式交互作品通常需要一個(gè)“相對(duì)封閉式的交互藝術(shù)空間”或“虛擬展廳”來(lái)實(shí)現(xiàn)觀眾的沉浸體驗(yàn)。此外也有利于電子屏幕、聲光電效果或其他模擬自然環(huán)境的效果干擾地反饋給觀眾，由此達(dá)到最佳的用戶體驗(yàn)效果。上海世博會(huì)沙特館（圖2） 就是一個(gè)懸浮在空中的封閉球面體，享受720度空間多媒體視聽(tīng)盛宴。封閉的空間內(nèi)四周布滿美輪美奐的畫(huà)面，就連腳底都有壯觀的影像。達(dá)到了沉浸式全面面影像，懸浮體驗(yàn)”的夢(mèng)幻效果。

圖2上海世博會(huì)沙特館

沉浸式交互藝術(shù)作品的反饋形式通常有直接反饋和間接反饋兩種：間接反饋型的交互藝術(shù)通過(guò)“環(huán)境交互”的方式使觀眾與作品進(jìn)行接觸和交互，觀眾對(duì)環(huán)境的沉浸體驗(yàn)是這些作品構(gòu)成的重要因素。其交互作品對(duì)參與者行為的反饋為間接的、環(huán)繞式的或“滯后”的。有的交互作品并不需要觀眾的直接接觸，而是通過(guò)“探測(cè)”的方式與觀眾進(jìn)行“互動(dòng)”。中國(guó)藝術(shù)家黃石、李敬峰創(chuàng)作的《空窗子》是通過(guò)分析觀眾腦電波來(lái)實(shí)現(xiàn)互動(dòng)的藝術(shù)裝置。如眨眼時(shí)竹葉落下。觀眾的注意力集中程度、眨眼頻率也會(huì)對(duì)畫(huà)面產(chǎn)生影響。直接反饋使觀眾通過(guò)較直接方式與作品進(jìn)行接觸和互動(dòng)， 對(duì)周?chē)h(huán)境的依賴相對(duì)較小，其接觸方式包括控制桿、遙控器、 語(yǔ)言、手勢(shì)或肢體動(dòng)作。如上海世博會(huì)園區(qū)內(nèi)加拿大館的“輪轉(zhuǎn)之都”觀眾腳蹬自行車(chē)前方屏幕上將不斷變換的城市風(fēng)景中穿越。這些交互作品普遍強(qiáng)調(diào)觀眾的“接觸”行為并可以直接體驗(yàn)到互動(dòng)的結(jié)果。這些互動(dòng)作品充分調(diào)動(dòng)觀眾的多感覺(jué)通道，普遍強(qiáng)調(diào)觀眾的體驗(yàn)行為， 并在沉浸環(huán)境中體驗(yàn)到互動(dòng)的藝術(shù)結(jié)果。

3 交互藝術(shù)在現(xiàn)實(shí)中的應(yīng)用

互動(dòng)藝術(shù)已逐漸走出藝術(shù)與科技的象牙塔， 滲透、參與到現(xiàn)實(shí)生活中的方方面面?，F(xiàn)如今，在廣告與品牌營(yíng)銷(xiāo)領(lǐng)域中、在互動(dòng)游戲裝置中、在各類(lèi)展覽會(huì)當(dāng)中都不難捕捉到互動(dòng)藝術(shù)裝置的身影，它以獨(dú)特的趣味性與互動(dòng)性吸引著公眾的注意力，帶給人們特有的驚喜。

凌仕機(jī)場(chǎng)互動(dòng)廣告，廣告凌仕香水在倫敦維多利亞機(jī)場(chǎng)里上演了與天使邂逅相逢的場(chǎng)面。 借助AR增強(qiáng)現(xiàn)實(shí)技術(shù)只要站在天使翅膀形狀的標(biāo)識(shí)物中，程序便可以檢測(cè)到，從而觸發(fā)播放特效，預(yù)先攝制好的美女模特扮演的天使就從天而降，并可以根據(jù)觀者的肢體動(dòng)作做出相應(yīng)的交互。

IKEA（宜家）是當(dāng)今時(shí)代令人人眩目的商業(yè)奇跡之一。宜家采用“生動(dòng)化營(yíng)銷(xiāo)”的方式。宜家把各種配套產(chǎn)品進(jìn)行家居組合，以充分展現(xiàn)每種產(chǎn)品的現(xiàn)場(chǎng)效果。為了使樣板間更加的生動(dòng)，宜家 極富創(chuàng)意地在床墊上放置互動(dòng)裝置，該裝置是用投影機(jī)在床墊上投下一個(gè)熟睡的男主人影像 ，他以一種熟睡的姿態(tài)睡覺(jué)，仿佛這里不是宜家的樣板間而是走進(jìn)了剛剛裝修好的房間。當(dāng)你用手拍拍床墊的時(shí)候，男主人將會(huì)翻身。攝像頭用來(lái)捕捉客人的動(dòng)作，然后軟件處理視頻的變化。這一互動(dòng)裝置制造強(qiáng)烈的真實(shí)情境還原，給觀眾一種體驗(yàn)上的沉浸感。

4 結(jié)語(yǔ)

隨著虛擬現(xiàn)實(shí)技術(shù)和多通道交互技術(shù)的進(jìn)一步發(fā)展，沉浸式交互藝術(shù)將以更加自然、和諧的交互方式、更新穎的藝術(shù)表現(xiàn)形式，拓展人人類(lèi)感官的體驗(yàn)，多維度的感知，互動(dòng)設(shè)計(jì)使我們的感官得到更加全面?；?dòng)設(shè)計(jì)將是人們感官體驗(yàn)釋放的加速器，它的逐漸完善必然會(huì)使得觀眾的愉悅、奇想、 領(lǐng)悟、發(fā)現(xiàn)的過(guò)程更加生動(dòng)。

參考文獻(xiàn)：

[1] 羅一平.走出“獨(dú)語(yǔ)”狀態(tài)[J].美術(shù)觀察.2005（06）：5-7.

[2] 段運(yùn)冬.新媒體藝術(shù)的語(yǔ)言品格探察[J].裝飾.2004（12）：24.

[3] 范迪安.從媒體變革到文化視線——在中國(guó)當(dāng)代藝術(shù)研討會(huì)開(kāi)幕式上的講話[J].美術(shù)研究.2002（03）：66.

[4] 張烈.虛擬體驗(yàn)設(shè)計(jì)的基本原則[J].裝飾.2008（09）：86-88.

[5]楊國(guó)杰.論現(xiàn)代博物館職能演化的進(jìn)程[J].中山大學(xué)學(xué)報(bào)論叢.2007

（08）：181-184.

[6] 桑瑞娟，李亞軍.源于感官的體驗(yàn)設(shè)計(jì)[J].鄭州輕工業(yè)學(xué)院學(xué)報(bào)： 社會(huì)科學(xué)版.2005（06）：38-40.

[7] 徐偉峰，付永民.利用感性工學(xué)原理設(shè)計(jì)產(chǎn)品造型[J].焦作工學(xué)院學(xué)報(bào)： 自然科學(xué)版.2003（05）：406-409.

[8] 榮國(guó)棟，孟祥旭.Inspeck 3D-DF三維掃描儀在數(shù)字博物館中的應(yīng)用[J].計(jì)算機(jī)工程與應(yīng)用.2002（16）：237-239.

[9] 李紅霞.基于網(wǎng)絡(luò)的虛擬三維環(huán)境中人機(jī)交互功能的實(shí)現(xiàn)[J].微型機(jī)與應(yīng)用.2002（04）：58-60.

[10]徐麗.藝術(shù)設(shè)計(jì)專業(yè)技能創(chuàng)新性實(shí)踐與研究—"星元素"視覺(jué)工作室實(shí)踐開(kāi)展紀(jì)實(shí)[J].工業(yè)設(shè)計(jì).2015（5）：141-142.

[11]李文杰."大空間"與設(shè)計(jì)的敘事性[J].工業(yè)設(shè)計(jì).2015（6）：101-102.

[12]李蕩.復(fù)合材料設(shè)計(jì)的回顧與方向[J].工業(yè)設(shè)計(jì).2015（8）：53-54 .

[13]楊曉荷.基于組織創(chuàng)新法的鏟式擔(dān)架的創(chuàng)新設(shè)計(jì)[J].工業(yè)設(shè)計(jì).

2015（2）：100-102.

[14]王靜.淺談中國(guó)民俗文化對(duì)現(xiàn)代藝術(shù)設(shè)計(jì)的影響[J].工業(yè)設(shè)計(jì).

2015（4）：69-70.

[15]趙立石.多維度理念下的城市視覺(jué)形象設(shè)計(jì)研究[J].工業(yè)設(shè)計(jì).

2015（2）：86-89.