淺談音樂可視化在現(xiàn)代的應(yīng)用可能性

（武漢理工大學(xué)藝術(shù)與設(shè)計學(xué)院，湖北武漢 430072）

一、音樂可視化的發(fā)展歷史

1.早期聯(lián)系音樂與視覺的實驗——克拉尼圖形

早在十八世紀(jì)，物理學(xué)家恩斯特·克拉德尼就做過音畫互轉(zhuǎn)的實驗，巧妙地將視覺與聲音聯(lián)系了起來。他在小提琴上放了一塊金屬制的板子，并均勻地在上面撒上細(xì)沙。當(dāng)他開始演奏小提琴時，金屬板上的細(xì)沙隨著音樂的變化，自動呈現(xiàn)出各種各樣變幻的圖案。并且根據(jù)曲調(diào)的不同，和頻率的不同，呈現(xiàn)出了不同的圖案形式。恩斯特·克拉德尼的這個實驗在物理層面將音樂的曲調(diào)和頻率與視覺上的幾何圖案客觀上結(jié)合到了一起。他的實驗為后人很好地開辟了研究思路。

2.藝術(shù)作品中的音樂可視化——康定斯基

著名的俄國畫家，世界公認(rèn)的抽象藝術(shù)大師瓦西里·康定斯基（Wassily Kandinsky），他認(rèn)為音樂和繪畫同樣都是藝術(shù)的表達(dá)方法之一，擁有同樣的精神內(nèi)核，因此能夠相互滲透，通過一定的形式進(jìn)行轉(zhuǎn)化。音樂的欣賞擁有時間性，而繪畫能夠讓人在瞬間直觀地感受到藝術(shù)情感。康定斯基以藝術(shù)形式中所傳達(dá)出的抽象精神為初始點，以抽象繪畫為方法，對音樂可視化進(jìn)行深入的探索。

3.為音樂視覺化賦予時間性——漢斯·李希特

20世紀(jì)初，伴隨著攝影、電影等行業(yè)的迅速發(fā)展，音樂可視化得到了進(jìn)一步的深入發(fā)展。作為一名出色的電影、動畫導(dǎo)演，漢斯·李希特疲于靜止化的藝術(shù)創(chuàng)作，并且開始追逐一種帶有節(jié)奏和韻律的電影形式。他采用自己獨特的繪畫方式，將音樂進(jìn)行視覺化的演繹，創(chuàng)作出了奇特的動畫短片，在康定斯基的基礎(chǔ)上為視覺化的音樂賦予時間性，為平面畫面增加了四維的時間特性，彌補了視覺與音樂的時長差距，向近代的音樂可視化又邁出了一大步。

4.現(xiàn)代化的虛擬3D視覺音樂場景——Animusic公司

到了計算機技術(shù)展開進(jìn)一步發(fā)展的如今，運用計算機做出3D化的視覺效果并不是難事。Animusic公司就利用計算機技術(shù)制作了一系列的虛擬樂器，用動畫的形式進(jìn)行演繹，趣味性十足，相較以上幾種方式更為直觀易懂。三維的傳媒相較于二維更具有直觀真實的效果，而跟隨這樣的思路，我們同樣可以將三維轉(zhuǎn)變?yōu)樗木S，五維，使音樂可視化越來越真實可觀。

二、音樂可視化在現(xiàn)代的應(yīng)用價值和優(yōu)勢

1.時代發(fā)展改變了文化的承載形式

一般來說，音樂是聽覺，通過耳朵進(jìn)行傳播，人們在聆聽的過程中感受到情感變化，從而產(chǎn)生對音樂藝術(shù)的享受。而從電影到電視，最后發(fā)展到便捷的手機屏幕，現(xiàn)代傳達(dá)和傳播技術(shù)發(fā)展使得人們對于屏幕的閱讀似乎呈現(xiàn)著不可替代的作用。而快節(jié)奏的生活方式導(dǎo)致人們不愿花時間聽完一首富有情感的音樂作品，直接以視覺的方式呈現(xiàn)在眼前省去了聆聽的過程，將藝術(shù)情感瞬間傳達(dá)到內(nèi)心，在極短的時間內(nèi)獲取需要的信息，達(dá)到欣賞和享受的目的。如果能夠?qū)崿F(xiàn)音樂可視化，那么人們對于藝術(shù)精神的接收將更加直觀高效。

2.新型媒體的普及是音樂可視化的發(fā)展條件

如今，傳播媒體誕生了一項全新的技術(shù)——虛擬現(xiàn)實。虛擬現(xiàn)實如VR、AR技術(shù)所想要達(dá)到的目的與音樂可視化的目的有共通之處，即創(chuàng)造一種沉浸式體驗與真實感，讓人身臨其境。目前現(xiàn)有的虛擬現(xiàn)實技術(shù)多數(shù)是通過還原人類在真實世界中，視覺上的感受而達(dá)成的，而音樂可視化可以通過將耳朵所聽與視覺所看結(jié)合在一起，營造立體影音的環(huán)境，從感官的多維角度讓人體驗到“沉浸感”。在這樣的條件下，將音樂與視覺相互配合成為虛擬現(xiàn)實技術(shù)發(fā)展的要求，虛擬現(xiàn)實技術(shù)的日漸普及也為音樂可視化創(chuàng)造了充分的條件。

3.社會發(fā)展是音樂可視化研究的重要推動力

科學(xué)技術(shù)不斷發(fā)展，帶動著人們的思維和精神境界也有更高的要求。以往通過單一感官所產(chǎn)生的感受過于單維化，平面化，而各感官相互結(jié)合轉(zhuǎn)化的體驗可以通過改變?nèi)藗冋J(rèn)識世界的角度和形式，拓寬認(rèn)知模式。例如患有“通感癥”的藝術(shù)家梅麗莎·麥克柯萊肯（Melissa McCracken）天生便可以將耳朵聽到的聲音轉(zhuǎn)化為五光十色、鮮艷動人的色彩。她所看到的世界與平常人是不一樣的，正因如此她成了一名優(yōu)秀的藝術(shù)家。如果音樂可視化發(fā)展到一定程度，普通人也能“看到”音樂藝術(shù)，那么人們的認(rèn)知模式和對世界的理解也將發(fā)生變化。反過來，這種認(rèn)知模式的拓展也可以催生全新的行業(yè)，以及現(xiàn)有行業(yè)的突破式發(fā)展。社會各行各業(yè)的發(fā)展導(dǎo)致人們對音樂的視覺可視化研究的追求目標(biāo)越來越精細(xì)，從而推動著音樂可視化的進(jìn)一步發(fā)展。

三、應(yīng)用的實現(xiàn)形式

1.音樂各要素與視覺的相互轉(zhuǎn)化

這是一種客觀理性的轉(zhuǎn)化方式。通過克拉尼圖形我們能夠知道，對于音樂上所產(chǎn)生的不同音調(diào)、振幅，在視覺上可以通過特殊方法進(jìn)行一一對應(yīng)。音樂主要包括旋律、曲調(diào)、和聲、調(diào)式、音色五要素。而視覺繪畫包括點、線、面、明暗、色彩這些要素。如果總結(jié)并規(guī)定某種規(guī)則，那么客觀上來說，音樂與繪畫完全可以進(jìn)行理性的相互轉(zhuǎn)化。例如漢斯·李希特的音樂視覺化短片，他將音樂的曲調(diào)、旋律、節(jié)奏轉(zhuǎn)化為一個個幾何形，跟隨音樂元素的變化設(shè)置旋轉(zhuǎn)、縮放等一系列動效，便是早期簡單的相互轉(zhuǎn)化。我們可以在他的基礎(chǔ)上對這種對應(yīng)規(guī)則進(jìn)行細(xì)化，以求得更加有效的相互對應(yīng)。目前，通過vvvv、Processing等編程軟件進(jìn)行音樂的視覺化已經(jīng)成為專業(yè)領(lǐng)域內(nèi)的重要研究工具。

2.音樂可視化與情感的相互轉(zhuǎn)化

音樂與繪畫同為藝術(shù)，筆者認(rèn)為其目的在于表達(dá)創(chuàng)作者的心境，或傳達(dá)理念，使得接受者能夠在欣賞時體會到同等的感性或理性沖擊，達(dá)成共鳴。同樣成為藝術(shù)形式的音樂和繪畫統(tǒng)一于一件事情——“感受”，可以以人們的主觀感受為切入點，將兩者所傳達(dá)的相似或相同的情感作為兩者的紐帶，作為一種符號進(jìn)行轉(zhuǎn)化和傳播?？刀ㄋ够凇墩撍囆g(shù)的精神》一書里說道：“在音樂里，淡藍(lán)色是長笛，深藍(lán)色是大提琴，更深的藍(lán)色就是雷鳴般的雙管巴松，最深的藍(lán)色是管風(fēng)琴?！彼麑⑸逝c樂器所帶來的感覺進(jìn)行對應(yīng)，足以體現(xiàn)不同種類的藝術(shù)之間是可以相互轉(zhuǎn)化，相互聯(lián)通的。如果我們將這樣的情感符號進(jìn)行系統(tǒng)化的總結(jié)和對應(yīng)，就能夠?qū)崿F(xiàn)情感層面上的相互轉(zhuǎn)化。這是一種主觀感性的轉(zhuǎn)化方式。

四、應(yīng)用領(lǐng)域

1.現(xiàn)代平面的交互設(shè)計

如今手機音樂類軟件和游戲行業(yè)迅速發(fā)展，而音樂與視覺的彼此結(jié)合，互相成就，互相彌補也成為行業(yè)發(fā)展的一種手段。例如“網(wǎng)易云音樂”APP，在音樂播放時，往往會伴隨著唱片機形狀的播放界面緩緩轉(zhuǎn)動的特效，以配合音樂的播放。電腦端的Windows media player，在音樂播放時，會提取出音頻的音調(diào)、節(jié)奏等元素，進(jìn)行視覺的轉(zhuǎn)化。而音樂類游戲如“節(jié)奏大師”，也是根據(jù)音樂和視覺相互配合的方式來產(chǎn)生趣味性。目前，5G時代的到來將進(jìn)一步改變?nèi)藗兊纳罘绞胶徒邮招畔⒌姆绞?。從一開始的紙質(zhì)傳媒到聲媒，再到畫面和視頻，5G的到來很可能給大家?guī)砣碌淖非蠛透惺堋８鱾€感官之間的配合，從全方位為人們提供全面的感受成為新的追求。

2.與虛擬現(xiàn)實技術(shù)的結(jié)合

隨著虛擬現(xiàn)實技術(shù)如VR、AR的發(fā)展，音樂不僅可以轉(zhuǎn)化出平面的視覺形象，并且可以轉(zhuǎn)化成3D的虛擬現(xiàn)實場景。音樂視覺化作為一種沉浸式藝術(shù)，與虛擬技術(shù)互相配合，融合多種傳播形式，將視覺、聽覺甚至觸覺融為一體，便足以給讀者創(chuàng)造一個更加真實的沉浸感。據(jù)調(diào)查顯示，對于人類生存最具有重要意義的信息，絕大部分都來自視覺。而虛擬技術(shù)環(huán)境下的音樂可視化中，視覺超越聽覺占據(jù)主導(dǎo)地位，從而跟日常生活的習(xí)慣更加相符。例如steam游戲《視覺幻象(Visionarium)》，是一個由音樂驅(qū)動的虛擬現(xiàn)實體驗游戲。在播放音樂的同時，通過視覺的變化和律動，創(chuàng)造了比平面視覺轉(zhuǎn)化更加富有沖擊力、更真實的沉浸感心理體驗，不僅從視覺上，并且從心理上也讓人設(shè)身處地地“感受”到音樂。

3.關(guān)愛聾啞人的情感化設(shè)計

對殘疾人士的情感化關(guān)懷是社會文明的重要象征。聾啞人無法聽見聲音，發(fā)出聲音，這讓他們對于世界的認(rèn)識不夠全面，并且目前社會上缺乏對于聾啞人的關(guān)愛。但也正由于聾啞人缺乏聽覺上的感受，因此對于視覺、觸覺、嗅覺等感受更加敏感。如果可以實現(xiàn)音樂可視化，將音樂轉(zhuǎn)化為視覺可見的事物，那么便有可能做到讓聾啞人“看見”聲音，從而感受音樂之美。

4.兒童的音樂教育

藝術(shù)教育可以激發(fā)人們對于美的感受，讓人們對外界事物認(rèn)知更加敏感。單純通過聽覺所傳授的音樂教育效果并不明顯，如果在教學(xué)過程中，可以將音樂轉(zhuǎn)化為一定的視覺形式，運用視聽相互配合的方式進(jìn)行音樂教學(xué)，我們可以設(shè)想，它能夠讓兒童產(chǎn)生更直觀的理解與感受，并且增加了音樂藝術(shù)教學(xué)的趣味性，培養(yǎng)孩子從多維角度理解藝術(shù)。

五、結(jié)語

由音樂的視覺可視化發(fā)展趨勢我們不難看出，視覺和聽覺相互結(jié)合的形式在未來的時代發(fā)展中，有著無窮無盡的進(jìn)步空間和應(yīng)用前景。我們相信，隨著時代的發(fā)展進(jìn)步和人類文明程度的不斷提升，音樂可視化將迎來全新的時代，并進(jìn)一步改變?nèi)藗冋J(rèn)識世界的角度和方式。同時，筆者也將有關(guān)音樂可視化的研究繼續(xù)推進(jìn)，期望未來有更進(jìn)一步的發(fā)展。