藝術(shù)空間中聲音的特性研究

陸鈞怡 黃秋野 （南京航空航天大學(xué) 211106）

人類自電子時代開始便逐漸推動聽覺與聲音媒介的利用。留聲機、隨身聽等電子媒介的出現(xiàn)為聽覺打破了時空限制，高質(zhì)量的聲音記錄使聲音這種傳播媒介越來越受重視。20世紀(jì)60年代。加拿大著名學(xué)者馬歇爾·麥克盧漢（Marshall McLuhan，1911-1980）提出“重新部落化”以及“聽覺回歸”理論，強調(diào)了在重新部落時代，數(shù)字媒介的爆炸式發(fā)展促進了聽覺功能的延伸。針對麥克盧漢的聽覺理論，許多學(xué)者展開了聽覺方面的研究與嘗試。

一、藝術(shù)空間及聲音的特性

在對聽覺的研究方面，王敦指出，麥克盧漢認(rèn)為由于耳朵不像眼睛那樣能夠聚焦、透視和分割信息，因此聽覺空間是有機的、流動的、發(fā)散的。韓志方在《麥克盧漢的聽覺與視覺空間理論研究》中提到電子時代信息的快速流動導(dǎo)致信息傳遞量和傳遞速度的激增。特倫斯·戈登（Terrence Gordon）指出在麥克盧漢的理解中，媒介即信息，媒介與媒介相互嵌套，前者包含后者，而后者是前者的信息。

在聽覺與聲音的關(guān)系中，聽覺感官接收并包含聲音，聲音包含各類信息。以此為推斷，在聽覺空間中，運載信息的聲音被感官接收進而影響感官主體，構(gòu)成了聽覺主體與聲音之間的嵌套方式。眾多學(xué)者表明，聲音以自由式發(fā)散的狀態(tài)流動在物理空間中，而這種流動的聲音信息能夠被聽覺主體有目的地接收。加拿大作曲家默里·謝弗(Raymond Murray Schafer)在1970年提出“聲音景觀”的概念，謝弗認(rèn)為由于每個聽眾個體的歷史因素各不相同，他們在聽到同個聲音元素時會產(chǎn)生不同的聲音印象，當(dāng)聽覺主體身處特定聲音空間中，在塑造著外部聲音空間以及內(nèi)部聲音印象。這種印象與情緒類似，本質(zhì)上是源于歷史和生活的信息流動造成的影響。聲音空間中的情緒化信息以聽覺主體為交叉點，強化聽覺主體心理層面的建設(shè)及其對整個聲音空間的感知。

魏佳在《“藝術(shù)空間”概念探究》中將空間體驗劃分為客觀空間（或物理空間）、視覺空間、心理空間和藝術(shù)空間?？陀^世界的信息流由感官接收形成感知主體的主觀印象，通過心理層面的傳導(dǎo)將主觀印象與客觀世界結(jié)合，構(gòu)成藝術(shù)作品的呈現(xiàn)空間。由此可見，針對不同種空間概念的映射，感知主體能以自身主觀能動性的反饋形成對應(yīng)狀態(tài)下的心理空間?！翱臻g”的概念也一直以不同的形式表征于藝術(shù)創(chuàng)作中，從聽覺角度出發(fā)表現(xiàn)為聲音空間及聽覺空間?？陀^空間、聽覺空間及心理空間的相互穿插、逐層深入，共同構(gòu)建藝術(shù)空間的完整性及多樣性。

數(shù)字技術(shù)的發(fā)展促使藝術(shù)作品創(chuàng)作形式與方法的多樣化，使藝術(shù)作品更強調(diào)交互性，以多感官交互聯(lián)結(jié)心理知覺，推動藝術(shù)空間多維度發(fā)展。聲音具備內(nèi)容屬性、情緒性及交互性，如何針對聲音信息中的各項聲音元素作出細(xì)致變化，使之匹配其它感官信息，豐富體驗者的心理空間構(gòu)建，是數(shù)字藝術(shù)設(shè)計過程中需要仔細(xì)揣摩的問題。多感官之間緊密有機地結(jié)合能刺激觀眾的情緒共鳴，通過藝術(shù)空間的共通聯(lián)系人與人心理空間，為聲音交互性的利用提供了方向。

數(shù)字技術(shù)時代，聽覺感官已經(jīng)加入數(shù)字藝術(shù)交互的考慮范圍內(nèi)。聲音視覺化、聲音交互的利用為聲音加上了時代烙印，為人們帶來更多聽覺刺激的同時，感官接收到的聲音信息能量也會同步輻射至心理層面。隨著對聲音刺激接受度的增長，對聽覺認(rèn)知的刻板印象也會進一步發(fā)生顛覆。

二、聲音的視覺化塑造情緒化場景

聲音同時具備具象與抽象的能量，具象的能量即聲能，是介質(zhì)中存在的機械波，可改變物理空間的布局或形態(tài)；抽象能量可表現(xiàn)為聲音對聽覺主體的誘導(dǎo)作用，通過情緒化的方式引起體驗者的共鳴，進而塑造心理空間。眾多學(xué)者針對聲音片段誘導(dǎo)不同情緒的研究表明，根據(jù)記憶的偏差，聽覺主體接收聲音信息會產(chǎn)生不同的情緒。這兩種能量在聲音信息的流動過程中以各自的方式影響藝術(shù)作品的呈現(xiàn)空間。借由二者不同的表現(xiàn)手法，聲音能夠得到不同的視覺化方式，借此引導(dǎo)觀眾對聲音情緒信息的接收，引導(dǎo)體驗者對其心理空間進行深入塑造。

1.聲音能量的視覺認(rèn)知

聲音具備聲能，是以聲波的形式存在的能量，這一物質(zhì)屬性賦予了聲音影響物理空間的能力，即視覺化屬性。創(chuàng)作者曾就聲音的視覺化作出嘗試，嘗試賦予這種波形以可視的形態(tài)進行藝術(shù)創(chuàng)作。原創(chuàng)音樂制作人奈杰爾·斯坦福（Nigel Stanford）曾以自己的音樂作品進行了CYMATICS創(chuàng)作嘗試（借助沙或水等媒介的振動來實現(xiàn)聲音視覺化的過程）。作品中每樣樂器對應(yīng)不同的視覺化介質(zhì)，通過不同的音響設(shè)備將原有的擴散型聲波轉(zhuǎn)換為指向性明確的聲駐波，根據(jù)駐波的不同類型設(shè)計多種聲音的視覺化方式。奈杰爾設(shè)計由不同樂器演奏出的音樂通過砂礫、火焰、魯本氏管（Ruben's Tube）、特斯拉線圈（Tesla Coil）、鐵液（Ferro Fluid）的現(xiàn)象演示，展示了不同媒介傳導(dǎo)聲音的形態(tài)（如圖1）。

圖1 CYMATICS聲音視覺化示例

大多數(shù)人未嘗試過以視覺“感知”聲音。聲能在對物理空間產(chǎn)生影響的同時，不僅將聲音本身的存在可視化，更賦予了整個聲音空間以視覺屬性。這類視覺屬性與以往構(gòu)建于觀眾視覺空間的符號元素來源不同，前者源于聲音，是聲音元素經(jīng)過物理轉(zhuǎn)化的視覺空間符號，后者源于觀察，來自客觀世界的各種視覺元素。就感官空間而言，觀眾在體驗CYMATICS作品時，能通過視覺感知聲音，也能通過聲音認(rèn)知畫面，視覺化的聲音元素將兩種感官相互串聯(lián)，將聲音承載的信息流寓于視覺空間中。視覺與聽覺功能的高度搭配強調(diào)感官空間多維化。在數(shù)字藝術(shù)創(chuàng)作中，多感官的藝術(shù)體驗并不是將不同感官強硬拼湊，而是需要以交疊的感官空間層次提升作品表現(xiàn)力度，使聲音信息的流動橫向擴散，同時傳播于不同的感官層次，形成感官網(wǎng)絡(luò)。不同感官的功能特質(zhì)造就感官信息的差異性，這些感官信息的集合形成接收主體最終對一件藝術(shù)作品的復(fù)雜感受，滿足了情緒的復(fù)雜性，并為心理空間塑造附加可能性。

2.聲音能量的情緒化場景塑造

通過對聲音的藝術(shù)塑造，能夠表達、渲染各方面的情緒。這一點在電影藝術(shù)中體現(xiàn)地尤為明顯，陳功在《電影聲音“空間感”的設(shè)計規(guī)律與方法》中提出，聲音設(shè)計應(yīng)有其特殊的原則、規(guī)律與手法。他將聲音設(shè)計分為兩種模式，一種是聲音環(huán)境與畫面環(huán)境空間不匹配的聲音設(shè)計模式，大多以“畫外音”的形式出現(xiàn)在電影或紀(jì)錄片中；另一種是二者相互匹配的聲音設(shè)計模式，大多沉浸式藝術(shù)、交互藝術(shù)等數(shù)字藝術(shù)都符合這一點。格蘭莫頤文化藝術(shù)集團（International GLA Art Group Limited）開展了名為“瑰麗”的沉浸式數(shù)字意境展，其中的“千里江山”作品營造出《千里江山圖》古樸的自然意境，音樂及音效匹配細(xì)致入微。

隨著周圍光影的變化，背景音樂以響度漸強的方式出現(xiàn)，且保持一個平緩的節(jié)奏，用以渲染宇宙廣闊，奠定作品聲音空間的基調(diào)。隨著其它音效的出現(xiàn)，背景音樂由第一聲音層級逐漸后退，以持續(xù)烘托氣氛的功效存在于聲音空間內(nèi)。鳥鳴聲、樹葉聲、風(fēng)聲的相繼出現(xiàn)將觀眾帶入大自然的聲音空間中。

作者意圖營造真實的聲音環(huán)境，使之匹配視覺場景。聲音是多方位的、三維流動的有機整體，其聲音屬性時刻保持變化。根據(jù)作品的價值內(nèi)涵、視覺效果、甚至是作品展示空間對聲音元素進行取舍和組織，具體表現(xiàn)為調(diào)整或設(shè)置聲音層級、清晰度、頻率、響度等聲音元素來營造聲音場景，賦予聲音的強弱、遠(yuǎn)近、深度、方向等空間特征，以觀者的感官為中心，依次構(gòu)建聲音空間內(nèi)的近景、中景、遠(yuǎn)景三個層次，塑造獨屬于這個作品聲音空間內(nèi)的聲音的景別。好萊塢聲音設(shè)計師沃爾特·摩奇（Walter Murch）認(rèn)為在同個場景中，觀眾的注意力最多只能集中在兩個聲音元素上，而第三個聲音元素會被加強用以吸引觀眾的注意力，或被弱化從而歸于背景音樂的一部分。作品“千里江山”開頭音效的層級衰減烘托了后來風(fēng)聲鳥叫的音效。由此可見，伴隨視覺場景的切換，聲音的主次地位會發(fā)生變化。不同聲音元素的調(diào)配使整個聲音空間變得立體，在不同景別的堆疊下，感官空間有了一定的深度，加深了聲音信息流浸入的邊界，感知主體更容易使自己的情緒與作品藝術(shù)空間產(chǎn)生共鳴。

眾所周知，人類的情緒是豐富多變的，自然中的聲音也是如此。數(shù)字藝術(shù)作品中的聲音由于藝術(shù)化處理，較自然中的聲音變得失真。因此針對聲音元素的細(xì)致調(diào)控需盡可能貼近自然聲音的表達，引起體驗者情緒上的共鳴，帶動心理空間的構(gòu)建。作品《千里江山》自然化的聲音元素與觀眾的歷史認(rèn)知發(fā)生共鳴，產(chǎn)生了情緒誘導(dǎo)的作用。如果利用聲音信息流串聯(lián)不同感官是對感官空間的橫向擴展，那么針對這些聲音元素的調(diào)控便是在這個橫向擴展面上的細(xì)致化處理（如圖2）。沉浸式聲音場景的視覺化輸出有利于聽覺主體接收并感知聲音的情緒。這使聲音信息流動在橫向感知擴散的層面深化了一個層級，每個聲音元素的變化都在影響聽覺主體感受到的情緒屬性。相互協(xié)調(diào)的聲音元素、情緒與視覺信息相互串聯(lián)，能夠形成聽覺主體主觀意識下的情緒化場景。此外，由于聯(lián)覺效應(yīng)與交互行為的介入，這種由聽覺單方面輸入的信息會產(chǎn)生支流，將針對聲音信息產(chǎn)生的感觸細(xì)分至其他感官，這為不同感官接收到的信息疊加了一層聲音特質(zhì)，由聲音元素誘導(dǎo)的情緒信息也能以此增加其擴散面。

圖2 空間體驗深入過程演變

聲音的情緒化是通過對其他感官的影響構(gòu)建的復(fù)雜情緒感知。這種情緒并非聲音信息的情緒，而是依賴于能夠引起聽覺主體情緒化體驗的視覺化方式對具象和抽象的聲音信息能量進行的深化。抽象的聲音視覺化主要體現(xiàn)在情緒化場景的構(gòu)建。與具象化聲音信息能量不同的是，具象化聲音能量借助裝置進行可視化，以多感官的綜合作用構(gòu)建模糊、簡單的情緒體驗，抽象化聲音信息能夠通過調(diào)控不同聲音元素，對復(fù)雜情緒體驗進行細(xì)化與深入，與聽覺主體的主觀意識結(jié)合，剝離潛意識認(rèn)知的多余情緒，最終構(gòu)建為具體、清晰的情緒化場景，形成立體心理空間。由于聲音的情緒性，聲音信息在心理層面有了較為綜合的塑造功能，即橫向連接多重感官，縱向深入情緒體驗，使情緒化場景立體化。因此在數(shù)字藝術(shù)創(chuàng)作中，針對視覺效果設(shè)計并調(diào)整各項聲音元素在作品中的作用，同時考慮到各元素之間的相互協(xié)調(diào)能夠產(chǎn)生什么樣的情緒化反映，從而利用聲音元素的細(xì)微調(diào)控，使聽覺主體在體驗過程中的情緒感知更為細(xì)膩，塑造清晰立體心理空間，提升作品觀感。

三、聲音構(gòu)建藝術(shù)空間的共情關(guān)系

交互聲音的介入使觀眾之間與作品之間能構(gòu)成“共情”關(guān)系。由于每個感官主體的動作、思想、個人經(jīng)歷各不相同，因此在對作品進行交互時產(chǎn)生的情感具備特殊性，即心理空間具備特殊性。同時，體驗者在多人交互空間下能夠接收到他人發(fā)出的交互信息，在被聲音擴展的感官空間基礎(chǔ)上，聲音交互信息作用于不同主體，使感官主體能夠接收并體會他人的感受。

Teamlab的數(shù)字交互作品水粒子宇宙（Universe of Water Particles）是在一個近乎密閉的場館內(nèi)展現(xiàn)沉浸式虛擬自然空間。視覺上，持續(xù)流動的粒子瀑布作大背景，花朵由綻放至衰敗的即時演算動畫，在場館內(nèi)演繹季節(jié)的變換。聽覺上，花開無聲，流水有聲，作品以玄妙的音樂作背景，輔以持續(xù)不斷的流水音效，與視覺環(huán)境結(jié)合構(gòu)成了作品基本的藝術(shù)空間（如圖3）。所有體驗者共享一片感官空間，共同接收空間內(nèi)的聲音信息，形成的心理空間存在相似性，都是對同一體驗空間產(chǎn)生的主觀印象。在觀眾與作品之間，體驗者能以站立、行走、觸摸的交互行為帶來作品中花朵綻放、瀑布分流的效果。由交互動作引起的音效為原有的聲音空間中注入了新的聲音信息。即便這些音效并不強烈，但眾多聲音元素中充分的變化，使流水聲自然多變。體驗者的交互行為引起水流分支、花團形狀與變化，聲音和視效的即時演繹賦予了交互的隨機性與聲音情緒的真實性。這種真實性由感官空間逐層深入，在視聽效果造就的情緒化場景上添磚加瓦，完成視覺、聲音共享感官空間的建設(shè)。在具體化心理空間的同時，交互行為也使體驗者之間產(chǎn)生聯(lián)系。在觀眾之間，交互行為成為了傳遞感知的媒介。由于體驗者之間共享感官空間，能夠接收相互間交錯的聲音信息，由交互動作產(chǎn)生的聲音信息具備動作發(fā)出者的思維意識，以此為媒介實現(xiàn)情緒共通，即心理空間的共享。交互聲音將體驗者之間串聯(lián)起來，在藝術(shù)空間中構(gòu)成一個復(fù)雜閉環(huán)，這個閉環(huán)內(nèi)的體驗者能夠在保留自身獨到感受的同時，通過交互動作與他人共情。

圖3 水粒子宇宙視覺效果

麥克盧漢認(rèn)為媒介是感官的延伸，而在講究多感官融合的新媒體藝術(shù)中，聲音傳遞人的感受，能夠在交互聲音信息傳遞過程中串聯(lián)不同體驗主體的情緒。這就使數(shù)字藝術(shù)空間由單向感知情緒的形式轉(zhuǎn)變?yōu)樘N含共享復(fù)雜情緒的藝術(shù)空間?！独菆D騰》聲音設(shè)計師王鋼認(rèn)為，聲音設(shè)計要盡量利用一切藝術(shù)創(chuàng)作手段避免聲音元素的循環(huán)和重復(fù)，最終讓觀眾聽起來每個場景都有它的“聲音情緒性”。人類的情緒是復(fù)雜多變的，自然情緒也是同樣。原本復(fù)雜的聲音信息通過感官接收形成情緒化場景，在交互過程中匯聚了新的交互聲音，升華了聲音信息的復(fù)雜性，使數(shù)字藝術(shù)作品在表意、表情的狀態(tài)上更具沉浸性。

對體驗者來說，每個獨立個體都有其自身的社交網(wǎng)絡(luò)，數(shù)字聲音交互將復(fù)雜的社交行為的過程模糊化，將其保持在僅能感知作品或他人動作的簡單程度。通過交互行為，體驗者能夠與藝術(shù)空間內(nèi)的任何人取得感知，體驗并享受簡化的人際交流過程，在心理空間上為已經(jīng)清晰立體化的情緒化場景拓寬邊界，“共情”的同時也在與他人共享心理空間。在如LINES這類并未過多強調(diào)視覺的藝術(shù)空間中，聲音的的各方面特性被襯托得尤為明顯。由于聲音元素的簡單化，體驗者的情緒場景主要由聲音交互行為構(gòu)成。簡單的聲音元素?zé)o法構(gòu)成細(xì)致立體的心理空間，通過交互行為，體驗者增添了聲音層次、音調(diào)、響度的變化，甚至利用物理空間的布置產(chǎn)生回聲，共同豐富了交互中的聲音元素。與水粒子宇宙的本質(zhì)不同在于，LINES的聲音元素完全由體驗者自身創(chuàng)作與調(diào)控。在這種狀態(tài)下，聲音的交互性作為塑造心理空間、強化主體藝術(shù)空間體驗的重要一環(huán)，直接將聽覺主體接收的聲音信息進行整合規(guī)劃，有目的、有秩序地組成個性化的體驗感知。

視覺效果的沉浸度可輔助聲音擴展聲音信息的流動范圍。而不同作品中聲音元素的復(fù)雜程度各有參差，對聲音元素細(xì)致的作品來說，情緒化場景的構(gòu)建以及獲得藝術(shù)空間的細(xì)致體驗是一個兩步走的過程；對聲音元素簡單的作品來說，這兩步即可融入交互行為內(nèi)，擁有更大干涉作品表現(xiàn)的權(quán)力。兩類數(shù)字藝術(shù)作品都能在聲音的情緒性和交互性的趨使下，使心理空間逐步細(xì)致化、立體化，在與感官體驗的相輔相成中獲得更完善的藝術(shù)空間體驗。

四、結(jié)語

在藝術(shù)空間體驗中，聲音信息貫穿空間體驗深入的全過程。由于對感官空間的不同表征手法，聲音信息從橫向擴展感官空間，縱向深化心理空間，兩種流動方向的交錯構(gòu)成立體情緒化場景的雛形。根據(jù)數(shù)字藝術(shù)作品形式的差異，聲音元素不完全以既定的方式呈現(xiàn)給體驗者。與創(chuàng)作手段相結(jié)合的聲音信息有著將感官空間與心理空間體驗共同納入自身塑造范圍的潛力。但不論是何種呈現(xiàn)方式，設(shè)計者及體驗者對聲音元素的共同調(diào)控能在豐富化、立體化心理空間的基礎(chǔ)上，為體驗者提供綜合完善的藝術(shù)空間。

隨著數(shù)字技術(shù)的發(fā)展，聲音的存在形式愈發(fā)多樣，“共享空間”的理念充斥在各種類型的數(shù)字藝術(shù)作品中，而空間定義的多樣化也確定了共享方式的多樣化。體驗者們借助聽覺空間共享聲音信息，借助心理空間共享情緒，在整個作品下共享藝術(shù)空間。交互是共享的手段，聲音將其內(nèi)容性、情緒性、交互性融入其中，為藝術(shù)化的聲音體驗注入活力與真實。聲音藝術(shù)形式借助科學(xué)技術(shù)的發(fā)展不斷多樣化，以怎樣的手段在創(chuàng)作中調(diào)控聲音元素能最大效率地調(diào)動體驗者的情緒，是否有更多方式讓體驗者加入聲音藝術(shù)的創(chuàng)作中，以及如何進一步拉近物理空間與心理空間的距離，都是需要我們進一步思考的內(nèi)容。聲音的各類特性在藝術(shù)空間的表達和塑造方面都有著至關(guān)重要的作用，有助于逐步推動各空間層級的深入，對數(shù)字藝術(shù)設(shè)計的發(fā)展有著前瞻性作用。