交互媒體作品理念與設(shè)計(jì)的融合

石永琪

在科技應(yīng)用過(guò)程中，注入藝術(shù)及文化元素，讓技術(shù)的發(fā)展或推進(jìn)更具有內(nèi)容、內(nèi)涵和生命力。在傳統(tǒng)藝術(shù)的創(chuàng)作環(huán)節(jié)中，融入科技的形式或方式，提高作品的普及面，增強(qiáng)藝術(shù)文化的多元表達(dá)能力。交織趨勢(shì)下，使創(chuàng)作出的作品兼具文化、藝術(shù)、科技綜合性，對(duì)于弘揚(yáng)傳統(tǒng)文化藝術(shù)，推進(jìn)科技的進(jìn)步，都有現(xiàn)實(shí)意義。

純藝術(shù)是一種抽象，它本身表達(dá)的是一種理解、一種態(tài)度、一種思維，對(duì)其的理解需要一定的文化積累或沉淀；純技術(shù)是一種方法，它本身是用于解決某一類(lèi)特定的具體問(wèn)題，是單調(diào)而有規(guī)律的；將兩者進(jìn)行有機(jī)的整合，對(duì)于引導(dǎo)人們的生活觀念，打開(kāi)人們的思維邊界和維度，都有客觀的理論意義。

一、交互媒體分析

交互媒體作品的創(chuàng)作，將藝術(shù)家的想象力和科學(xué)家的創(chuàng)造力巧妙地結(jié)合起來(lái)，使作品在造型上和體驗(yàn)上，都呈現(xiàn)出恰如其分的視覺(jué)效果和感官效應(yīng)。

（一）作品創(chuàng)作與知行合一的關(guān)系

交互媒體是新媒體藝術(shù)領(lǐng)域的一個(gè)重要方向，這一領(lǐng)域的特點(diǎn)是以科技來(lái)完善并推進(jìn)純藝術(shù)，是屬于當(dāng)下活著的藝術(shù)。作品創(chuàng)作的目的，或者是帶給大眾一種對(duì)美的欣賞和體驗(yàn)，或者是喚醒大眾對(duì)社會(huì)及自我進(jìn)行反思，或者是引導(dǎo)大眾去解放思想、去認(rèn)知新的觀念。

圖1 “知行合一”關(guān)系圖

圖2 硬件連接

交互媒體方向的作品，最明顯的特征是其交互性。從交互的方式進(jìn)行分析，可以從三個(gè)角度來(lái)進(jìn)行理解；首先，人與作品之間行為上的直接互動(dòng)，該過(guò)程需要人的操作式參與，人是作品的指揮家；其次，作品本身呈現(xiàn)的帶入性，當(dāng)人置身于作品環(huán)境之中，互動(dòng)將以某種形式產(chǎn)生，該過(guò)程需要人進(jìn)行探索，人屬于作品的一部分；最后，人與作品以對(duì)話溝通的形式進(jìn)行互動(dòng)，體現(xiàn)出一種互聯(lián)互通的趨勢(shì)。

交互媒體作品創(chuàng)作可以分成四個(gè)階段，作者用王陽(yáng)明先生的“知”“行”“合”“一”來(lái)體現(xiàn)整個(gè)過(guò)程，如圖1所示。

首先‘知’，這個(gè)階段需要了解并掌握科學(xué)與技術(shù)的基本工具、設(shè)備等的使用方法以及操作流程。做到知己知彼。

其次‘行’，這個(gè)階段需要站在專(zhuān)業(yè)領(lǐng)域的角度，從專(zhuān)業(yè)的視角去思考如何利用這些基本工具進(jìn)行創(chuàng)作，在“行”即運(yùn)用的這個(gè)過(guò)程中，專(zhuān)業(yè)知識(shí)起主導(dǎo)作用。

再次‘合’，這個(gè)階段更多的是需要考慮如何充分利用藝術(shù)與技術(shù)的公共性及差異性，以雙向的視角去思考藝術(shù)與技術(shù)的融合貫通，在“合”即整合的這個(gè)過(guò)程中，是材料工藝文化共同在起主導(dǎo)作用。

最后‘一’這個(gè)階段圍繞著‘真’‘善’‘美’，站在天地、宇宙、萬(wàn)物的高度，直接打破技術(shù)與藝術(shù)的壁壘或邊界，將之看成一個(gè)對(duì)象，不分彼此，達(dá)到和諧的統(tǒng)一。

（二）硬件感知與圖形可視化

交互媒體作品創(chuàng)作實(shí)踐過(guò)程中，主要包含硬件感知和圖形可視化兩大部分。硬件感知的功能是捕捉環(huán)境中的數(shù)據(jù)并進(jìn)行傳輸，文中選用Arduino作為控制核心。圖形可視化的功能是按照需求生成或調(diào)用圖形圖像，文中選用Processing作為可視化的平臺(tái)。

Arduino是一個(gè)集成了眾多輸入輸出模塊的單片機(jī)控制器，借助Arduino可以實(shí)現(xiàn)電子設(shè)備和現(xiàn)實(shí)世界的互聯(lián)互通。它包含開(kāi)源硬件平臺(tái)和集成開(kāi)發(fā)環(huán)境兩部分。Arduino單片機(jī)能夠自由地連接各種開(kāi)關(guān)和傳感器模塊，還能連接其他物理設(shè)備，是開(kāi)發(fā)交互作品的利器。

圖2展示的是作者交互媒體課程中距離感應(yīng)的實(shí)物連接，基于Arduino開(kāi)源單片機(jī)和超聲波傳感器。

Processing是一種基于代碼的藝術(shù)創(chuàng)作工具，而代碼是人們借助計(jì)算機(jī)進(jìn)行表達(dá)的獨(dú)特的語(yǔ)言。近二十年來(lái)，西方數(shù)字藝術(shù)界一直對(duì)代碼這一創(chuàng)作工具保持深入關(guān)注。隨著物聯(lián)網(wǎng)、人工智能的興起，代碼越來(lái)越受到廣泛的應(yīng)用。對(duì)于數(shù)字藝術(shù)家而言，代碼在不知不覺(jué)中成為藝術(shù)設(shè)計(jì)創(chuàng)作的重要手段和靈感來(lái)源，激勵(lì)著藝術(shù)家去探索科技領(lǐng)域的美感。

圖3和圖4展示的是作者交互媒體課程中圖形可視化的學(xué)生作品，基于Processing編程語(yǔ)言，通過(guò)計(jì)算機(jī)語(yǔ)言可以實(shí)現(xiàn)對(duì)角色的不同層次的控制。

圖3 熊本熊

圖4 機(jī)器人

二、交互媒體作品設(shè)計(jì)與展示

一件作品的誕生，往往需要經(jīng)歷兩個(gè)階段，分別是：作品設(shè)計(jì)→作品實(shí)現(xiàn)。在創(chuàng)作過(guò)程中，每個(gè)階段都呈現(xiàn)出交替更迭的趨勢(shì)，周期性地細(xì)化或延伸作品的內(nèi)涵。

圖5 用戶與作品交互流程設(shè)計(jì)

圖6 Arduino與Sensor通信設(shè)計(jì)

（一）作品設(shè)計(jì)

經(jīng)過(guò)一段時(shí)間的學(xué)習(xí)和訓(xùn)練，學(xué)生逐步了解并掌握了交互媒體的基本框架。作者希望通過(guò)多樣化的結(jié)課形式來(lái)達(dá)到串聯(lián)知識(shí)主線和綜合應(yīng)用創(chuàng)新的雙重目的。結(jié)課作業(yè)要求學(xué)生在實(shí)踐創(chuàng)作過(guò)程中，呈現(xiàn)交互作品的三個(gè)要素：首先，視覺(jué)和聽(tīng)覺(jué)上具有一定沉浸感或帶入性；其次，交互方式上具有娛樂(lè)感或新穎性；最后，作品背后的故事或觀點(diǎn)能夠有效支撐作品的解讀。

下面以學(xué)生作品《長(zhǎng)，須，植》展開(kāi)具體分析。

作品源于交互媒體課程的結(jié)課作業(yè)，名字中的“長(zhǎng)”意味著萬(wàn)物生長(zhǎng)，“須”可以理解成必須或需要，“植”指代了花草樹(shù)木。作品的類(lèi)型屬于交互影像，內(nèi)容上由三個(gè)部分組成。首先，是偽裝裝置，用來(lái)引導(dǎo)觀眾通過(guò)澆水的方式跟作品產(chǎn)生互動(dòng)；其次，是硬件控制中心，溫度傳感器檢測(cè)到水溫的變化，傳輸給Arduino進(jìn)行處理；最后，是動(dòng)態(tài)影像，Processing接收到信號(hào)后，實(shí)時(shí)調(diào)整大樹(shù)生長(zhǎng)的速度。

作品試圖通過(guò)澆水這一行為，觸發(fā)大樹(shù)從無(wú)到有周而復(fù)始的生長(zhǎng)過(guò)程，跟老子道德經(jīng)中的“道生一，一生二，二生三，三生萬(wàn)物”不謀而合。作品在展示過(guò)程主要分為三個(gè)階段；第一階段，持續(xù)地澆水，對(duì)應(yīng)著大樹(shù)的生根發(fā)芽破土而出這一過(guò)程；第二階段，間隔地澆水，對(duì)應(yīng)著大樹(shù)在往空中和四周不斷延展這一過(guò)程；第三階段，暫停澆水，大樹(shù)已經(jīng)長(zhǎng)成，即將突破現(xiàn)實(shí)的邊界，而新的生命又即將開(kāi)始，在新舊交替之際，影像將根據(jù)數(shù)據(jù)更新畫(huà)面，啟動(dòng)新一輪的生長(zhǎng)過(guò)程。

在設(shè)計(jì)上述作品模塊和內(nèi)容的同時(shí)，形成并升華了作品的設(shè)計(jì)理念，源于冰心的一句詩(shī)：“成功的花，人們只驚羨她現(xiàn)時(shí)的明艷，然而當(dāng)初她的芽?jī)海噶藠^斗的淚泉，灑滿了犧牲的血雨?！比欢X(jué)得花易折，便選擇了樹(shù)作為作品的載體。作品的初衷是想讓人感慨蔥郁的樹(shù)木時(shí)，也能體會(huì)到生活中不能只羨慕別人的成功，更應(yīng)該知道別人成功的背后是多么艱辛，樹(shù)木，花朵的成功尚且如此，那人的成長(zhǎng)與發(fā)展不也都是如此嗎？從而領(lǐng)悟到不管哪條路，何種身份，那些奮斗者的艱辛。

在作品設(shè)計(jì)階段，將“知行合一”中的“知行”觀點(diǎn)，應(yīng)用到作品的概念形成和模塊分析過(guò)程中，并最終形成作品基本的框架，為后續(xù)作品的實(shí)現(xiàn)奠定了良好的基礎(chǔ)。

（二）作品實(shí)現(xiàn)

作品通過(guò)Processing來(lái)呈現(xiàn)，以Arduino作為響應(yīng)裝置。

在Processing中，參考了Openprocessing中Grace Tan的樹(shù)木造型，利用Arduino檢測(cè)出溫度的變化來(lái)觸發(fā)樹(shù)木的生長(zhǎng)，這也寓意著萬(wàn)物需要水，需要灌溉的道理。作品整體的流程設(shè)計(jì)圖如圖5所示。

在Arduino中，選用LM35溫度傳感器來(lái)控制交互響應(yīng)值，當(dāng)黃綠紅三色燈全部亮起時(shí)，表明溫度達(dá)到觸發(fā)值，Processing開(kāi)始執(zhí)行。硬件交互部分設(shè)計(jì)如圖6所示。

在Arduino套件偽裝裝置中，選用六塊木板做成一個(gè)木箱，并用長(zhǎng)頸漏斗鑲嵌在木箱頂端來(lái)讓體驗(yàn)者澆水觸發(fā)程序，并在漏斗下方接上一個(gè)軟管，軟管上端切開(kāi)一個(gè)口子，將LM35傳感器卡在軟管里，軟管下方連出箱外排水，如圖7和圖8所示。

圖7 偽裝裝置圖

8偽裝裝置運(yùn)行

在作品實(shí)現(xiàn)階段，將“知行合一”中的“合一”觀點(diǎn)，應(yīng)用到作品的造型選擇和工藝打磨過(guò)程中，同時(shí)引導(dǎo)著作品融入到空間與環(huán)境之中，為最終作品的展示和體驗(yàn)鋪好道路。

(三 )作品展示

作品：《長(zhǎng)，須，植》

作者：譚壹建（2016級(jí)學(xué)生）

作品榮獲第三屆“匯創(chuàng)青春”上海大學(xué)生文化創(chuàng)意作品數(shù)字媒體藝術(shù)、動(dòng)畫(huà)類(lèi)一等獎(jiǎng)，并于2018年6月在上海時(shí)尚國(guó)際中心參加展覽，如圖9和圖10所示。

圖9 優(yōu)秀作品展開(kāi)幕

圖10 觀眾體驗(yàn)作品交互過(guò)程

三、結(jié)語(yǔ)

科技改變?nèi)祟?lèi)的生活方式，藝術(shù)影響人類(lèi)的生活本質(zhì)。中華文明經(jīng)過(guò)五千年的發(fā)展，沉淀了大量有價(jià)值的傳統(tǒng)技藝。交互媒體作為一種綜合性的創(chuàng)作類(lèi)型，恰恰可以進(jìn)行學(xué)科交叉的融合創(chuàng)作，以傳統(tǒng)文化藝術(shù)作為交互媒體的內(nèi)容，用科學(xué)技術(shù)作為嶄新的交互方式，這樣呈現(xiàn)出的作品，不但傳統(tǒng)文化的精華得到了很好的繼承；而且也緊跟時(shí)代的潮流，更有利于藝術(shù)、文化、科技的弘揚(yáng)及傳播。

此外，隨著電子，遠(yuǎn)程信息和互動(dòng)電子媒介的表達(dá)能力不斷發(fā)展，交互媒體在形式上不斷增強(qiáng)并影響其內(nèi)容的演變；同時(shí)，生物工程、分子工程和神經(jīng)科學(xué)的交叉融合，為人

們認(rèn)知微觀世界帶來(lái)了新的視角；在這樣的趨勢(shì)下，交互媒體必將呈現(xiàn)出多元化、深層次、互聯(lián)互通的發(fā)展面貌。我相信，科學(xué)與藝術(shù)的交融，將引領(lǐng)著我們，去發(fā)現(xiàn)和體驗(yàn)天地萬(wàn)物的大美與永恒。