音訊交互設(shè)計作品創(chuàng)作淺析

段盛華

（南京藝術(shù)學(xué)院 設(shè)計學(xué)院，江蘇 南京 210000）

傳統(tǒng)藝術(shù)作品多以視覺元素為主，早期的藝術(shù)（Traditional Fineart）多重視基于諸如油畫、水墨、紙材等傳統(tǒng)物質(zhì)素材的表現(xiàn)能力。在信息科技高度發(fā)達(dá)的今天，伴隨著社會發(fā)展步伐的變奏，新的設(shè)計形態(tài)、新樣式新的分支不斷推陳出新，新的藝術(shù)工作者逐漸意識到，舊的媒體已無法提升某些類型作品的表現(xiàn)力，因而逐漸轉(zhuǎn)向新的媒體尋找出路?！懊襟w藝術(shù)”這一21世紀(jì)初的新興名詞，日漸成為當(dāng)代藝術(shù)的新寵。在21世紀(jì)開花結(jié)果的新媒體（New Media）——電腦媒體、網(wǎng)絡(luò)媒體，成為便捷的媒體藝術(shù)載體，切合了藝術(shù)工作者的 “脾胃”。依靠電子計算機（Computer）等科技媒體所發(fā)展而來的新媒體，以強烈的交互性（Interactive）、敘事性（Narrative）為基本特征，使利用新媒體的藝術(shù)工作者所能表現(xiàn)的舞臺更為寬廣，表現(xiàn)的手法更加多樣，媒體藝術(shù)也逐漸朝向強調(diào)交互，重視觀者體驗的科技與藝術(shù)交融的方向蓬勃發(fā)展。

然而，綜觀當(dāng)今的交互設(shè)計作品，其表現(xiàn)方式仍以視覺表達(dá)為主，雖在視覺效果方面滿足了受眾的預(yù)期，卻忽略了其他媒體給交互設(shè)計創(chuàng)作帶來的可能性，聽覺媒體、音訊媒體便是非常重要的一部分。音樂、天籟之音、聲響乃至于噪音，這些經(jīng)由空氣媒介傳達(dá)聲波的媒體，無時無刻不存在于我們的生活之中。設(shè)計源于生活，音訊類媒體可以而且應(yīng)當(dāng)成為設(shè)計師攫取設(shè)計靈感的“富礦”，拓寬藝術(shù)表現(xiàn)手段的“源頭活水”。值得欣慰的是，在世界范圍內(nèi)，一些設(shè)計師以過人的才華做了有益的探索和實驗，本文將其總結(jié)如下，以起拋磚引玉之作用。

一、作為交互設(shè)計作品形式的聲音

敘事性較強的交互設(shè)計作品，其創(chuàng)作手法多與影視藝術(shù)中處理聲音元素的手法類似，聲音元素多以作品的主體形式呈現(xiàn)。然而，相對于無明顯故事性的作品而言，對聲音元素的運用手法與規(guī)則則與影視藝術(shù)有所不同，在聲音元素與視覺形象的關(guān)系方面也不同于傳統(tǒng)影視藝術(shù)。音樂、聲響和人聲等，作為交互設(shè)計作品不可或缺的一部分，有著與其他視聽結(jié)合的藝術(shù)形式所不同的特點。

（一）運用聲音元素增強作品感染力

文學(xué)家歌德曾說：“音樂，它能使憤怒的鐵拳變溫和，使赫赫的野豬馴服?！彼€說：“音樂占有理性接近不了的崇高的一面。音樂能支配所有的東西，它放射出不可言喻的感化而來?！币魳吩V諸人們的聽覺，打動的卻是人們的心靈，進(jìn)而影響人們的身心。音樂對于人們的直接影響就是情緒與情感，在這一點上，任何藝術(shù)都不如音樂直截了當(dāng)。而也正因音樂具備這一特征，優(yōu)秀的設(shè)計師往往在設(shè)計作品的過程中非常注重對音樂元素的處理，通過巧妙的聲音——音樂或聲響來吸引受眾的注意。例如，在一些優(yōu)秀的交互界面設(shè)計中，不少設(shè)計師利用聲音作為突破畫面或表達(dá)創(chuàng)意的“先鋒”，強化受眾與作品的互動效果。

（二）運用聲音元素增強作品沖擊力

交互設(shè)計科技和藝術(shù)相交相融的產(chǎn)物，強烈的現(xiàn)代感是交互設(shè)計的本質(zhì)特征之一。一個交互設(shè)計作品是否具有視聽沖擊力是衡量作品優(yōu)劣的關(guān)鍵因素。依托“多媒體”聲畫結(jié)合的特點，利用聲音傳達(dá)產(chǎn)品、作品信息吸引受眾成為設(shè)計師重要的創(chuàng)作原則?？梢哉f，在這類作品中，聲音既是藝術(shù)創(chuàng)作的必要元素，又是作品體現(xiàn)交互設(shè)計作品互動性、現(xiàn)代性、技術(shù)性的重要表現(xiàn)形式。

（三）運用聲音元素協(xié)調(diào)作品的整體創(chuàng)作

聲音在交互設(shè)計作品整體形式的把握上充當(dāng)著必不可少的協(xié)調(diào)作用。受眾一方面可以根據(jù)聲音的引導(dǎo)有條不紊地參與互動體驗，另外一方面可以利用聲音的節(jié)奏、韻律來把握交互設(shè)計作品的節(jié)奏，增強作品的流暢性，使整個作品更具整體感。

二、作為交互設(shè)計作品內(nèi)容的聲音

在交互設(shè)計領(lǐng)域，以聲音為主要表現(xiàn)內(nèi)容的作品不在少數(shù)。這類作品因音樂的靈性而充滿獨特的藝術(shù)魅力和濃濃的藝術(shù)氣息，創(chuàng)作者經(jīng)過巧妙的構(gòu)思，在作品創(chuàng)作的內(nèi)容上大多不依賴視覺元素，而著力于聲音的演繹，用聲音構(gòu)成作品主體，用聲音來吸引受眾。在參與作品體驗的過程中，受眾主要通過聲音與作品進(jìn)行交互?？梢哉f，這類作品是交互設(shè)計眾多類型中充滿趣味、包含獨特藝術(shù)魅力的重要類型之一。

例如，臺灣元智大學(xué)王福瑞創(chuàng)作的交互作品《i Pure》就是一個典型的例子。該作品的創(chuàng)作意圖是通過視覺圖形的變化進(jìn)而引發(fā)聲音的變化。在這個作品中，欣賞者可以自由控制裝置上的旋鈕，根據(jù)旋鈕不同的狀態(tài)，影像會發(fā)生變化，欣賞者隨之將會聽到獨特的聲音反饋，兩者相交相融，如圖1所示。

圖1 ：iPure聲音裝置，專注于聲音合成與變換的互動作品，觀賞者可自由操弄旋扭，不同的狀態(tài)將會對應(yīng)到聽覺回饋上，產(chǎn)生獨特的聽覺感官回饋（王福瑞作品）。

交互設(shè)計作品《Sound Flake》在設(shè)計方面顯得更為精巧，在作者的眼里，聲音是流動“水”，的創(chuàng)作者將抽象的聲音與自然界中的水聯(lián)系起來，取其相似之處，創(chuàng)作出令人匪夷所思的作品。該作品視覺表現(xiàn)為多個彩色的、形狀逼真的水龍頭，當(dāng)觀眾打開這些水龍頭時，聲音就會“流”出來，形成Flake。屏幕也即變形為一個水池。如果有人去攪動波紋，則會產(chǎn)生不同的聲響。水池的波紋及其發(fā)出的聲音都是則利用架設(shè)在作品上方的投影機和揚聲器來完成的，如圖2所示。

圖2 ：Sound Flake，打開水龍頭開關(guān)，聲音會“滴”出來并形成Sound Flake，如果去攪動波紋，波紋重疊后還會產(chǎn)生有不同的聲響。波紋和聲音都是利用架設(shè)在作品上方的投影機和揚聲器所產(chǎn)生。

另一部由臺灣藝術(shù)家駱麗真創(chuàng)作的《大快樂丸、小快樂丸》在聲音和視覺設(shè)計上更加復(fù)雜、精致。作品由不銹鋼、木板、UV燈管、長毛毯、重低音喇叭、感應(yīng)器與電子音樂構(gòu)成，欣賞者可以躺在作者搭建的塔狀裝置中，用不同的身體姿勢觸發(fā)不同的音樂和聲響。這部作品讓受眾與作品的參與突破了“手”的局限，讓人們體會到更多的樂趣，如圖3所示。

圖3 ：《大小快樂丸》，于熒光燈繚繞的環(huán)境，觀賞者可以躺入狀似蛋形的塔狀物（即快樂丸），以不同的軀體姿勢觸發(fā)富有樂趣的聽覺回饋（駱麗真作品）。

以上是由視覺形象或其他元素來引發(fā)聲音的交互設(shè)計作品。用聲音來引發(fā)視覺形象或其他元素的交互作品更加神奇。

交互設(shè)計作品《與蛇共舞》的創(chuàng)作理念源于中東波斯一帶的古市場風(fēng)情。作品將音樂的諸要素轉(zhuǎn)化為計算機語言再輸出圖形，呈現(xiàn)于計算機屏幕，畫面為一個陶罐，罐中藏有蛇，受眾通過與計算機相連的樂器，奏出音樂，“引蛇出罐”。如圖4所示。

圖4 ：新媒體作品《與蛇共舞》圖片來源論文《音訊互動作品創(chuàng)作初探》，臺灣元智大學(xué)蔡立偉

《Hear Wear》Ⅴ可謂交互技術(shù)和應(yīng)用藝術(shù)相結(jié)合的典范。創(chuàng)作者以時髦的服飾為載體表現(xiàn)環(huán)境中的聲音。作品呈現(xiàn)為一種看似普通卻非常神奇的服裝，創(chuàng)作者將特殊的材料嵌入服裝、提包等物品之中，穿著這類服飾的人身處不同的環(huán)境時，服飾上的特殊材料會感應(yīng)環(huán)境中的聲音，發(fā)出或明或暗的光。環(huán)境中的聲音越大越嘈雜，光亮則會越明顯、越持久，如圖5所示。

圖5 ：《HearWear》V.01Alit

綜上所述，視覺、聽覺是人類同時擁有的美好感覺，它們將藝術(shù)與人類的情感緊密相連，沃爾特·佩特說：“所有的藝術(shù)都在向著音樂的境界努力?！彪S著數(shù)字信息技術(shù)的高速發(fā)展和普及，音樂這一以聽覺元素為主要載體的藝術(shù)形式出現(xiàn)了顛覆性的變化。音樂已經(jīng)由單純的聽覺藝術(shù)轉(zhuǎn)變?yōu)橐暵牶弦徊⒊霈F(xiàn)了音樂視覺化的融合趨勢，在這一趨勢之下音樂和設(shè)計的聯(lián)姻越來越緊密，這種結(jié)合不是表面上的拼湊，更有深層次的內(nèi)涵，設(shè)計師們利用互動技術(shù)實現(xiàn)了一個個不可思議的藝術(shù)夢想。可以說，在這里沒有異想天開，只有無盡的驚奇。

［1］Charles Dodge，Thomas A.Jerse，Computer Music:Synthesis，Composition，and Performance，Wadworth Publishing，1997.

［2］陳明熒.PC電腦語音辨認(rèn)實作.旗標(biāo)出版社，1994.

［3］張傳玉，張傳旺，張榮豐.應(yīng)用滑動音程技術(shù)于音樂資料檢索系統(tǒng).第九屆人工智慧與應(yīng)用研討會，國立政治大學(xué)，2004.

［4］王瑞福，駱麗珍.WOW震蕩音象展.http://www.yzu.edu.tw/yzu/art/chinese/center/exposition/2005-1207/index.html.

［5］Milena Iossifova.Hear Wear:The Fashion of Environmental Noise Display.ACM SIGGRAPH Conference，LosAngeles，California，2004.

［6］Satoko Moroi.Sound Flakes.ACM SIGGRAPH Conference，LosAngeles，California，2004.

［7］Todd Winkler.Composing Interactive Music:Techniquesand Ideas Using Max.MITPress，1998.

［8］Processing，http://www.processing.org/MITProject Aes the ticsand Computation Group.

［9］JohnMaeda.CreativeCode.Thames&Hudson，2004.

［10］WilliamL.Benzon.Beethoven’s Anvil-Musicin Mind and Culture，2001.譯本：趙三賢.腦內(nèi)交響曲.商周出版，2003.