多系統(tǒng)跨媒介交互電子音樂創(chuàng)作研究*

王立川

（四川音樂學院，四川 成都 610021）

一、多系統(tǒng)平臺

多系統(tǒng)平臺：即多個平臺的操作系統(tǒng)。如PC電腦所使用的Windows系統(tǒng)、蘋果電腦所使用的Mac OS X系統(tǒng)、手機和平板所使用的Android和iOS系統(tǒng)等。把這些若干個操作系統(tǒng)通過一定的通信方式連接起來組合運行，便構(gòu)成了一個多系統(tǒng)平臺。下面就多系統(tǒng)平臺作下詳細介紹。

（一）為什么要用多系統(tǒng)平臺

在過去很長的一個歷史時期中，由于系統(tǒng)間通信協(xié)議及軟硬件接口標準的制約，軟硬件工程師和電子音樂家們致力于開發(fā)能力更強的軟硬件，以滿足電子音樂不斷增長的系統(tǒng)需求。這便導致了一個較為嚴重的問題，就是硬件和軟件系統(tǒng)越來越復雜，開發(fā)和設計的難度越來越大，價格也越來越高昂，而系統(tǒng)的靈活性則相對較低。但對于今天而言，硬件制造技術(shù)、網(wǎng)絡通信技術(shù)、多媒體技術(shù)和接口標準化等相關技術(shù)的發(fā)展，越來越多的硬件系統(tǒng)可以協(xié)同工作，并且能夠以模塊化的方式進行組合運行。

每個硬件系統(tǒng)的運算處理能力都是有限的，即使科技發(fā)展到今天，如果我們想要獲得一個運算能力非常高的硬件，往往也要花費較高的代價。但如果搭建和使用多系統(tǒng)平臺，往往可以提高幾倍的效率以及節(jié)約相當高的成本，并且同樣可以獲得相同的效果。

（二）多系統(tǒng)平臺的特點及優(yōu)勢

操作系統(tǒng)的發(fā)展和標準化，使得不同的操作系統(tǒng)之間可以更容易地實現(xiàn)相互通信和控制，在共享數(shù)據(jù)上的障礙也逐漸消失；不同的系統(tǒng)和軟件之間利用標準的接口協(xié)議，可以很容易地進行數(shù)據(jù)通信，并且可以實現(xiàn)低延遲的數(shù)據(jù)傳輸和協(xié)同運算。并且由于無線通信技術(shù)和移動運算技術(shù)的發(fā)展，不同類型的軟硬件之間可以進行標準化的信號傳遞和控制，實現(xiàn)更豐富的效果。

合理的利用不同軟硬件系統(tǒng)組合，在一定程度上能夠減少操作系統(tǒng)運行的壓力，使各個應用軟件能更好的適用各個操作系統(tǒng)，減少系統(tǒng)資源浪費，提升各個系統(tǒng)的運算能力。能夠有效的解決單一系統(tǒng)、單一模式下程序調(diào)試復雜、系統(tǒng)運算吃力等諸多問題。因此，利用多種不同的軟硬件平臺來構(gòu)建靈活、高效、適應性強且成本可控的電子音樂創(chuàng)作系統(tǒng)是非?？茖W及可行的，并應該獲得更多的關注與應用。

（三）利用多系統(tǒng)平臺創(chuàng)作電子音樂作品

筆者就多系統(tǒng)平臺創(chuàng)作了一首跨媒介交互電子音樂《迷失太空》，在這首作品中筆者搭建了由四個不同的操作系統(tǒng)所組成的多系統(tǒng)平臺。四個操作系統(tǒng)分別為Windows系統(tǒng)、Mac OS X系統(tǒng)、iOS系統(tǒng)以及Android系統(tǒng)。設備為PC電腦一臺、iMac電腦一臺、iPad一部、安卓手機一部。選用的這四個設備及操作系統(tǒng)都是我們生活中經(jīng)常接觸的，大眾都不會對這些硬件和操作系統(tǒng)陌生。作品在第三章將做詳細介紹。

二、跨媒介交互電子音樂的創(chuàng)作思維

（一）跨媒介藝術(shù)

藝術(shù)媒介意為藝術(shù)材料，指藝術(shù)家在藝術(shù)創(chuàng)作的過程中用于表現(xiàn)的物質(zhì)手段，即用來表現(xiàn)藝術(shù)構(gòu)思的物質(zhì)材料。如聲音、繪畫、影像、舞蹈等藝術(shù)形態(tài)都是生活中最常見的藝術(shù)媒介。在電子音樂創(chuàng)作中，我們所用的媒介往往就只有聲音。電子音樂應用在生活中，我們感知這種藝術(shù)往往也只是通過聲音這個媒介。如聽到的CD唱片、數(shù)字音頻等。

跨媒介是一種新的藝術(shù)創(chuàng)作思維，它可以將不同的藝術(shù)材料相結(jié)合，是一種對傳統(tǒng)藝術(shù)審美進行擴充、變革的新型藝術(shù)形態(tài)。早在20世紀50年代，電子音樂創(chuàng)作家們就逐漸從聲音藝術(shù)的單一模式發(fā)展為視覺和聽覺相結(jié)合的模式，融合舞蹈、戲劇、表演等元素，形成跨界發(fā)展的態(tài)勢。直至今天，跨媒介思維已成為電子音樂創(chuàng)作的主流趨勢，已有數(shù)不勝數(shù)的跨媒介電子音樂作品展現(xiàn)在世界各地舞臺上，并獲得了廣泛的認可。

（二）交互電子音樂

交互電子音樂是指通過技術(shù)手段，使人或其它對象與計算機產(chǎn)生互動，并實時控制聲音、圖像等材料變化和發(fā)展的藝術(shù)形式，如圖一所示。交互電子音樂的創(chuàng)作思路與跨媒介藝術(shù)的思維是息息相關的。早在1946年計算機的問世，并以驚人的速度發(fā)展，藝術(shù)的表現(xiàn)形式也在逐漸的變革，計算機對藝術(shù)的表現(xiàn)形式與手段產(chǎn)生的巨大影響：從單媒體到多媒體、從實境到虛擬現(xiàn)實、從被動到互動。如今，人類已經(jīng)進入了一個互動的時代，交互技術(shù)毫無疑問是電子音樂的重要創(chuàng)作手段。

圖一：作曲家在演奏交互電子音樂

（三）跨媒介與交互電子音樂的結(jié)合

把跨媒介與交互電子音樂結(jié)合起來看，它無疑是電子音樂領域中最前衛(wèi)的表達形式。既融合了音樂以外的藝術(shù)媒介，使其有著獨特的藝術(shù)表達形式，又引入了交互這一創(chuàng)作手法，使其在演出中創(chuàng)作者能夠?qū)崟r的參與到音樂的發(fā)展中來；既能夠使藝術(shù)表達更加新穎、豐富，又順應了時代發(fā)展的需求。因此，跨媒介交互電子音樂的創(chuàng)作思維是電子音樂中最重要的創(chuàng)作思維之一。

三、多系統(tǒng)跨媒介交互電子音樂作品《迷失太空》

在第一章里筆者提到的利用多系統(tǒng)平臺創(chuàng)作的電子音樂作品《迷失太空》將在這一章節(jié)里做詳細介紹。這部作品的創(chuàng)作靈感來源于電影《星際穿越》，圖二為其電影截圖。龐大浩瀚的宇宙太空，蟲洞與時間旅行的詭異莫測，黑洞與多維時空的無窮奧秘，激發(fā)了筆者寫下這部電子音樂作品。意圖描寫人類的一場太空旅行。利用“跨媒介”手段將音樂與影像結(jié)合起來，并用“互動”的方式實時控制音樂中的部分聲音以及影像的變化。整部作品是由多個系統(tǒng)同時協(xié)助工作，利用聲音和影像兩個媒介，并以人實時觸發(fā)聲音素材及影像互動共同構(gòu)成的一部作品。

圖二：電影《星際穿越》中的黑洞概念圖

（1）多系統(tǒng)平臺的搭建

完成這部作品的第一部是搭建多系統(tǒng)平臺，多系統(tǒng)平臺的優(yōu)勢及特點在本文第一章節(jié)里已經(jīng)寫過，這部作品利用多系統(tǒng)平臺的目的就是要充分發(fā)揮和利用每個平臺的優(yōu)勢，減少系統(tǒng)資源的浪費，并將其與跨媒介交互式的理念完美結(jié)合。在這部作品中，筆者搭建了由4個不同的硬件操作系統(tǒng)所組成的多系統(tǒng)平臺。4個操作系統(tǒng)分別為Windows系統(tǒng)、Mac OS X系統(tǒng)、iOS系統(tǒng)以及Android系統(tǒng)。所用到的設備為PC電腦一臺、Mac電腦一臺、iPad一部以及安卓手機一部。PC電腦下的Windows系統(tǒng)所使用的軟件為Cubase 7.5；Mac OS X系統(tǒng)所使用的軟件為Resolume Arena 4.2。iOS系統(tǒng)所使用的軟件為Cubasis LE，如圖三所示；Android系統(tǒng)所使用的軟件為TouchOSC，如圖四所示。除了以上軟硬件設備，還需要無限局域網(wǎng)絡，和路由器一臺。

圖三：Cubasis LE操作界面

圖四：TouchOSC操作界面

（2）連接與操作設計

將這些設備關聯(lián)起來的核心工具是網(wǎng)絡，通過局域網(wǎng)絡，iPad上的Cubasis LE軟件可發(fā)送MIDI信號到PC電腦的Cubase軟件里的midi軌道上，從而實現(xiàn)用Cubasis里的軟鍵盤去控制Cubase中midi軌道的midi音符，達到現(xiàn)場互動的效果。用于演奏的軟鍵盤界面如圖四所示。再者通過局域網(wǎng)絡，可以將安卓手機中TouchOSC軟件里的控制參數(shù)實時發(fā)送給Mac電腦中的Arena視頻處理軟件，亦實現(xiàn)了用手機控制電腦中的影像。該作品在展示時需要兩個人同時參與音樂與視頻的交互，其中一人負責播放PC電腦中的音樂，并用iPad實時控制作品中的一些音符元素（音高、力度、時值等）；另一人則負責在音樂開始演奏的同時播放Mac電腦中的視頻，并用安卓手機實時對視頻中的一些素材做處理和變化，音樂與視頻是相互呼應、相得益彰的，而不是各自獨立。多系統(tǒng)平臺的搭建、軟硬件的互聯(lián)、人實時的控制，都充分體現(xiàn)了跨媒介交互電子音樂的創(chuàng)作思維。

圖五：Cubasis中的軟鍵盤

（3）《迷失太空》的“音樂”創(chuàng)作

看似復雜的多系統(tǒng)跨媒介交互電子音樂，其核心部分依然是“音樂”本身。音樂是首先要被設計出來的藝術(shù)媒介，在設計音樂的同時也要考慮到與影像的結(jié)合的方式以及互動操作的可行性，這樣設計出來的音樂再添加影像或其它媒介以及添加人機交互技術(shù)時才能更完美的將其融合，能夠更加精致的表達其藝術(shù)的魅力與內(nèi)涵。

圖六：《迷失太空》的MIDI工程制作截圖

制作這個“音樂”的技術(shù)手段為MIDI與合成器技術(shù)。制作平臺及軟件為PC電腦與Cubase 7.5，音色為Kontakt采樣音色與合成器音色。因其作品風格是與“太空”相關，所以筆者在制作這個音樂時將合成器音色定位整部作品最主要的音色。因為浩瀚的太空并不像我們?nèi)祟愃佑|的大自然那樣可以用那些“具體”聲音來描繪，而真實樂器是由地球大自然中的一些具體物理材料制作而成，幾百年來作曲家們運用這些樂器來表達世間萬物與情感，已將其發(fā)揮的淋漓盡致，但始終幾乎脫離不開人與地球世界。設想一下如果脫離了地球，進入那些未知的太空領域，這些由具體的音色組織而成的音樂還能繼續(xù)發(fā)揮其“魅力”嗎？答案肯定是不能。自從合成器的誕生，大量非物理碰撞形成的聲音被制作出來，這預示著人類對未知文化的無窮探索，對未來音樂的無窮設想。世界著名電影配樂大師Hans Zimmer在他的公開課上曾說過：如果你能將合成器使用得當，你就獲得了一把通往另一個音色新世界的鑰匙；一旦你能玩轉(zhuǎn)它，你就可以掌握這個世界。可見合成器是一件多么有能量的“法寶”。其獨特之處就在于它能夠制作產(chǎn)生出我們自然界所沒有的各種“神秘”的音色。用這些音色來描繪一些未知的空間與事物是非常符合邏輯的。因此，筆者將合成器音色定位這首音樂的核心，音樂的主題也是用合成器音色來表達。

圖七：《迷失太空》的音樂頻譜

音樂共分為三段。第一段（0″—1′30″）開頭由一個合成器Pad音色引入，再由一個點狀合成器音色加以點綴，共同構(gòu)成音樂的主題，意為“浩瀚的宇宙，美麗的星空”。其后Pad音色經(jīng)過處理變得顫抖起來（顫音），點綴音色持續(xù)添加，并引入了一個經(jīng)過處理的雙簧管音色演奏一段抒情旋律。

圖八：經(jīng)過處理的雙簧管音色演奏的旋律片段

這段主旋律意代表人類本身，背景為其置身于太空旅行的場景。其后雙簧管旋律逐漸變得不穩(wěn)定，隨機化。雙簧管音色在經(jīng)過處理后也逐漸變得模糊，不穩(wěn)定，伴隨著點綴音色和抖動的Pad音色逐漸淡出，第一段就此結(jié)束。

第二段（1′30″—2′25″）由一個經(jīng)過反轉(zhuǎn)處理的合成音色引入，類似于物體被引力突然“吸”進去的一種效果。此時背景音色用調(diào)制的弦樂隊的音色鋪底，聲場比第一段使用的合成器Pad音色更加寬廣，意示著人類來到了宇宙深處，此時前方是一片未知。點綴音色大量使用不穩(wěn)定音程，如小二度、增四度。被“吸”進去的音色持續(xù)出現(xiàn)，標示著在宇宙深處的旅行中各種不穩(wěn)定可能性的發(fā)生。持續(xù)到2″左右時出現(xiàn)了一個相對穩(wěn)定的點綴聲音循環(huán)，但此時背景音色開始變得嘈雜、多變。意味著一個明確的、十分恐怖的場景即將到來。

第三段（2′25″—4′41″）著重描寫了這個十分恐怖的場景。音樂開始是由一段純粹的循環(huán)的點狀音色引入，無任何其它音色介入。其后首先引入了一個抖動的低音Pad。其后又引入了一個合成打擊樂音色，類似木魚，其空間混響調(diào)制的十分龐大，由它奏響了一個漆黑、恐懼的不明空間。其后緊跟著各種點狀恐懼的合成音色，如類似于弦樂震音、大鐘、管風琴低音等等音色交織在一起，此起彼伏的出現(xiàn)。其后類似木魚的合成打擊樂音色持續(xù)演奏兩個八度音高，將恐懼推向高潮，直到第二段的被“吸”進去的音色再次出現(xiàn)，結(jié)束高潮并進入尾聲。尾聲與第一段描寫的場景類似，標示著人類“逃”出了這個恐懼的不明空間，再次返回“浩瀚的宇宙，美麗的星空”這個場景內(nèi)。

（4）與影像的結(jié)合

這部作品的影像部分筆者采用的方法是對若干預制視頻文件做實時效果處理。首先筆者收集了若干“星空”素材的影像視頻文件，將其導入到Mac電腦中的Resolume Arena視頻軟件里，如圖九所示。選擇要進行效果處理的模塊并標記下來。

圖九：Resolume Arena視頻軟件操作界面

其次將安卓手機的TouchOSC軟件通過Mac端的Touch Resolume與Arena視頻軟件連接，連接好后就可以將TouchOSC軟件里的控制信息實時發(fā)送給Arena視頻軟件的效果處理器，這樣就可以通過安卓手機來實時控制視頻的效果變化，如光效、速度、色調(diào)等等。將這些實時控制的影像串聯(lián)起來，與音樂相結(jié)合，共同構(gòu)成《迷失太空》整部作品。

圖十：被實時處理的“星空”影像素材截圖

四、結(jié)語

在《迷失太空》作品中，筆者實驗性的組合了四種不同的硬件系統(tǒng)，將四個操作系統(tǒng)下的軟件互相關聯(lián)、相互控制。并創(chuàng)作以虛幻的太空為主題的音樂一首，將其置于這個多平臺系統(tǒng)中，抽取音樂中的某些素材在作品展示時實時添加和控制。并且為音樂搭配影像，同樣的實時控制其影像效果變化。這種形態(tài)的電子音樂作品國內(nèi)還沒有足夠數(shù)量相關領域研究，但在國外相關領域已經(jīng)成為了電子音樂創(chuàng)作的主流手段，也是電子音樂發(fā)展的基本趨勢之一。因此，多系統(tǒng)跨媒介交互式的理念在國內(nèi)應得到更深入的研究。構(gòu)建專業(yè)的計算機音樂系統(tǒng)，進行更深入的應用和創(chuàng)作。

當今時代下的電子音樂創(chuàng)作，已幾乎很少能看到作品只是單一的計算機音樂與聲音藝術(shù)。越來越多的電子音樂作品采用實時交互，多媒融合等手段。電子音樂在語匯、風格、樣式上越來越“多元化”發(fā)展。筆者創(chuàng)作的這部《迷失太空》正是順應了當今電子音樂發(fā)展的主流趨勢。此外，當代電子音樂的背景由于是在現(xiàn)代音樂的大環(huán)境下，許多純粹的聲音作品并不能夠被大眾廣泛認可，但在加入視覺藝術(shù)、舞蹈藝術(shù)等藝術(shù)形式與音樂藝術(shù)相結(jié)合的情況下，亦能夠給觀眾帶來許多新鮮的感受，使藝術(shù)形態(tài)更加升華。

如今，這種新形態(tài)的電子音樂創(chuàng)作已不再僅僅是一臺計算機對聲音進行某些處理就能夠完成的。使用多平臺、多系統(tǒng)的協(xié)同工作能夠完美的實現(xiàn)這種新形態(tài)電子音樂創(chuàng)作的需求，因此，多系統(tǒng)平臺正是跨媒介交互電子音樂最靈活、最高效的創(chuàng)作平臺。合理搭建與使用多系統(tǒng)平臺對當代電子音樂的發(fā)展有著極大的促進作用。相信在不久的將來，多系統(tǒng)跨媒介交互電子音樂理念能夠引領更多的青年作曲家創(chuàng)作出更多優(yōu)秀的作品。

[1]程伊兵.聲音合成與制作基礎[J].中央音樂學院出版社,2004.

[2]楊萬鈞.多系統(tǒng)平臺協(xié)作電子音樂系統(tǒng)研究與實現(xiàn)[J].中國教育技術(shù)裝備,2014.

[3]陸敏捷.中國新媒體藝術(shù)之互動音樂發(fā)展初探[J].音樂探索,2013,01.

[4]張小夫.電子音樂概念界定[J].中央音樂學院學報,2002.