基于聯(lián)覺效應(yīng)的VR交互式動(dòng)畫中的視覺語言研究

張真

摘 ?要 ?VR交互式動(dòng)畫的出現(xiàn)為傳統(tǒng)單純敘事的動(dòng)畫帶來了全新的感知體驗(yàn)，視覺元素作為動(dòng)畫中的核心構(gòu)成部分，在交互式動(dòng)畫中也起到了重要的作用。文章通過分析視覺語言中的圖像造型語言和色彩蒙太奇手法，論述交互式動(dòng)畫中視覺語言聯(lián)覺效應(yīng)的作用，意圖通過探索視覺語言所帶來的多感官聯(lián)覺效應(yīng)，達(dá)到交互式動(dòng)畫帶給觀眾更好的感官體驗(yàn)的目的。

關(guān)鍵詞 ?視覺語言;交互式動(dòng)畫;聯(lián)覺

中圖分類號(hào) ?G2 ? ? ?文獻(xiàn)標(biāo)識(shí)碼 ?A ? ? ?文章編號(hào) ?2096-0360（2019）17-0120-03

感官之間的聯(lián)結(jié)活動(dòng)可以使我們更好地對一個(gè)事物進(jìn)行感知，而視覺作為直接接受外界圖像信息最重要的感官，是我們在創(chuàng)作活動(dòng)中必須要關(guān)注的部分。VR交互式動(dòng)畫不再受傳統(tǒng)動(dòng)畫中畫框的限制，觀眾視線所及的地方都是動(dòng)畫的一部分。創(chuàng)作者將“攝影”的權(quán)利賦予給觀眾，觀眾可以自主選擇想要觀看的畫面，動(dòng)畫中的視覺語言也被賦予了新的要求。VR交互式動(dòng)畫中，觀眾在各自的敘事空間中活動(dòng)，意味著視覺語言在一定程度上引導(dǎo)著交互式動(dòng)畫敘事主線的發(fā)展，而視覺活動(dòng)的認(rèn)知又與觀眾的感官和情緒相關(guān)聯(lián)，由此所帶來的聯(lián)覺體驗(yàn)使觀眾與動(dòng)畫產(chǎn)生了更好的互動(dòng)。

1 ?畫面造型語言吸引用戶的注意力

畫面造型語言是視覺語言中主要的構(gòu)成部分，在VR交互式動(dòng)畫中，是吸引受眾與動(dòng)畫產(chǎn)生交互行為，并引導(dǎo)敘事向著創(chuàng)作者預(yù)期的結(jié)局進(jìn)行下去的關(guān)鍵。在視覺信息的傳送過程中，最重要的是引起注意。注意是人知覺的起點(diǎn)，引起注意是實(shí)現(xiàn)誘導(dǎo)欲望、加強(qiáng)記憶的重要因素，只有引起注意，才能導(dǎo)致行動(dòng)的產(chǎn)生[1]29-30。因此，吸引觀眾的視覺注意力，并利用聯(lián)覺效應(yīng)傳達(dá)故事的階段情節(jié)感受對于推動(dòng)交互式動(dòng)畫敘事的發(fā)展是至關(guān)重要的。

1.1 ?色彩的意蘊(yùn)渲染故事情節(jié)

人們在觀察到某種色彩的時(shí)，大腦往往會(huì)與以往經(jīng)歷的感知活動(dòng)產(chǎn)生聯(lián)覺?？刀ㄋ够凇端囆g(shù)的精神》中提到：“色彩能引發(fā)相應(yīng)的精神感應(yīng)，通過心理聯(lián)想引起眼睛及其他感官的生理反應(yīng)?！盵2]色彩本身沒有情感，這種情感是人們對色彩產(chǎn)生的聯(lián)想與感受。動(dòng)畫的創(chuàng)作者將色彩帶給人們的這種情感體驗(yàn)運(yùn)用到動(dòng)畫的創(chuàng)作當(dāng)中，渲染VR交互式動(dòng)畫中的場景氣氛，以此增強(qiáng)觀眾的情感體驗(yàn)。例如，由Google spotlight story出品的交互式動(dòng)畫《Duet》中，整個(gè)背景色彩以藍(lán)色調(diào)為基準(zhǔn)，而主人公則以高明度黃色線條來描繪，形成藍(lán)色與黃色強(qiáng)烈的色彩對比，使觀眾在觀看動(dòng)畫時(shí)，視線追尋著主人公并與主人公展開互動(dòng)。在這里色彩的作用就是通過吸引觀眾的視覺注意來保持觀眾對影片的持續(xù)關(guān)注，同時(shí)藍(lán)色也渲染了一種神秘的氣氛?？梢姡实囊馓N(yùn)與劇情的有機(jī)結(jié)合，能表達(dá)出豐富的情感，達(dá)到事半功倍的效果。

1.2 ?光線的運(yùn)用幫助聚焦故事主視點(diǎn)

光線在傳統(tǒng)動(dòng)畫中有溫暖畫面、烘托氣氛的作用。作為交互式動(dòng)畫中的一種視覺元素，任何有別于其他景物的元素出現(xiàn)，都會(huì)影響觀眾觀看交互式動(dòng)畫的進(jìn)程，并吸引觀眾的視線去主動(dòng)探索。人腦在同一瞬間，對信息的加工能力是有限的，不能加工全部信息。注意的選擇功能可以促使大腦排除次要信息的干擾，選擇重要的信息進(jìn)行加工，而光線在VR交互式動(dòng)畫中就扮演著幫助觀眾的視線排除次要信息的角色。例如，Pinta Studio團(tuán)隊(duì)在2017年制作的VR交互式動(dòng)畫《拾夢老人》中，故事開篇失夢者丟掉了自己的吉他，在吉他變成碎片時(shí)，點(diǎn)點(diǎn)星光吸引著觀眾的視線去追蹤劇情的發(fā)展，而周圍的廢棄垃圾場則成為故事的背景，被觀眾的視線選擇性的略過?？梢?，在VR交互式動(dòng)畫中，光線有助于創(chuàng)作者制作一個(gè)視線焦點(diǎn)，來幫助觀眾聚焦故事主體部分。

1.3 ?圖形流動(dòng)的變換推動(dòng)故事情節(jié)的發(fā)展

休伯（Hubel）和威賽爾（Wiesel）在研究大腦的生理結(jié)構(gòu)時(shí)發(fā)現(xiàn)，人的有些細(xì)胞對視覺形狀的元素比較敏感，這些細(xì)胞被稱為特征察覺細(xì)胞，是辨析形狀的主力軍[1]31。圖形語言在動(dòng)畫中出現(xiàn)一般是以靜態(tài)的狀態(tài)存在，而對于交互式動(dòng)畫來說，電影中的蒙太奇手法并不適用，強(qiáng)行采用蒙太奇手法進(jìn)行畫面轉(zhuǎn)場會(huì)帶給觀眾眩暈感和鏡頭間切換不自然的感覺。例如在VR交互式動(dòng)畫《Planet of the Couches》中，鏡頭之間的轉(zhuǎn)場直接用畫面被揭掉的方式處理，打斷了觀眾在虛擬現(xiàn)實(shí)中的沉浸式觀看節(jié)奏，強(qiáng)行將觀眾拉回現(xiàn)實(shí)，影響受眾體驗(yàn)。而反觀由Oculus Story Studio制作的交互式動(dòng)畫《Dear Angelica》中，觀眾進(jìn)入到影片中小女孩的房間時(shí)，小女孩已經(jīng)沉浸在睡夢中，此時(shí)，一道墨跡從小女孩身旁的日記本上延伸向觀眾，并伴隨著小女孩媽媽的聲音繞過觀眾，不斷往觀眾身后蔓延，由于視覺引起的心理上對未知的聯(lián)想，促使觀眾跟隨著墨跡轉(zhuǎn)身，最后將視線定格在電視機(jī)上。電視里播放的是小女孩母親所飾演的電影。這種將原本字跡的流動(dòng)轉(zhuǎn)換成切鏡頭的方式，使受眾更易接受，也勾起受眾的聯(lián)覺。觀眾不自覺的進(jìn)入到下一場景中，達(dá)到創(chuàng)作者推動(dòng)故事情節(jié)發(fā)展的目的。

2 ?色彩蒙太奇喚起觀眾的聯(lián)想

“蒙太奇主要指電影創(chuàng)作中把鏡頭組接起來進(jìn)行敘事、抒情和觀念表達(dá)的表意手法?！盵3]VR交互式動(dòng)畫中由于全景畫面的呈現(xiàn)，畫框的限制被取消，電影中蒙太奇的手法無法得到發(fā)揮，鏡頭與鏡頭間的聯(lián)系又需要得到建立，所以，就需要構(gòu)建新的蒙太奇語言，為交互式動(dòng)畫的鏡頭語言尋找新的出路。“特殊的顏色聯(lián)系為蒙太奇提供了各種新的表現(xiàn)方法。顏色的相似和反差在影像間建立了一種比形式的相似與反差深刻得多的關(guān)系。各種色彩具有強(qiáng)大的象征力量，顏色喚起聯(lián)想，激發(fā)感情?！盵4]鏡頭內(nèi)色彩的變化，正好與VR交互式動(dòng)畫中的“一鏡到底”的特點(diǎn)形成呼應(yīng)，為交互式動(dòng)畫與觀眾之間建立情感聯(lián)系找到了突破口。例如，Google spotlight story團(tuán)隊(duì)制作的交互式動(dòng)畫《Peal》中，畫面一開始設(shè)定在一個(gè)已經(jīng)沾滿塵土的車子中，女主人公進(jìn)入到車子內(nèi)，打開收音機(jī)的同時(shí)，畫面的色彩由冷向暖進(jìn)行色調(diào)的轉(zhuǎn)變，女主人公也回到了小時(shí)候的記憶，色彩的轉(zhuǎn)變喚起了觀眾對女主人公小時(shí)候幸福場景的感知，畫面依舊在車內(nèi)，場景卻瞬間變得溫暖。色彩蒙太奇產(chǎn)生的聯(lián)覺效應(yīng)不僅帶給觀眾適當(dāng)?shù)南胂罂臻g，還解決了VR交互式動(dòng)畫中轉(zhuǎn)場生硬的問題。色彩的感知來源于人們大腦中對顏色的某種聯(lián)想，色彩本身不具有情感，而當(dāng)顏色投影在我們的視覺感知器官時(shí)，我們會(huì)將自己原有的生活經(jīng)驗(yàn)混入到實(shí)際所看到的影像之中，使我們產(chǎn)生對顏色冷暖的聯(lián)想，并賦予顏色溫馨或可怕的心理體驗(yàn)。因此，創(chuàng)作者在設(shè)計(jì)交互式動(dòng)畫的劇情時(shí)，可以考慮運(yùn)用存在于觀眾記憶中的知識(shí)影像，幫助觀眾更好的參與到交互式動(dòng)畫的互動(dòng)當(dāng)中，以便使作品的主題思想傳達(dá)的更加精準(zhǔn)。

3 ?視覺語言帶來的多感官聯(lián)覺體驗(yàn)

一種感官的刺激會(huì)連帶刺激另一種感官的現(xiàn)象在心理學(xué)中稱為通感或共感覺[5]。聯(lián)覺即一種感官感受到的刺激激起了另一種或多種感官的感受。交互式動(dòng)畫中，畫面占主導(dǎo)地位，觀眾的眼睛隨著畫面圖像運(yùn)動(dòng)，并試圖與之產(chǎn)生互動(dòng)。這就要求在交互式動(dòng)畫中視覺語言不止要發(fā)揮其視知覺的作用，同時(shí)也是多感官的聯(lián)覺互動(dòng)體驗(yàn)。

3.1 ?視覺形象帶來的感官體驗(yàn)

交互式動(dòng)畫中視覺語言在色彩、光線、圖形上具有引導(dǎo)觀眾回歸動(dòng)畫敘事主線，并烘托人物情感，渲染背景氣氛的聯(lián)覺效應(yīng)。交互式動(dòng)畫中，觀眾感受到的視覺元素不僅帶來視覺上的感知，同時(shí)也可以作用于觸覺、嗅覺、味覺等感官體驗(yàn)。我們可以從最初的繪畫中尋找視覺與其他感覺的聯(lián)系。例如，亞當(dāng)·埃爾森海默的《逃亡埃及》，是畫家1609年在羅馬完成的一幅夜景繪畫。作者用現(xiàn)實(shí)主義的手法描繪出當(dāng)時(shí)周圍的景象，景物可以再現(xiàn)，但是對于視覺之外可以激發(fā)的其他感覺（空氣和露水的濕潤、太陽的溫暖、風(fēng)的吹動(dòng)等），就是欣賞者在觀賞作品后產(chǎn)生的自然感知與聯(lián)想，是聯(lián)覺效應(yīng)發(fā)揮的作用。類似的例子還有由米高梅電影公司制作的經(jīng)典動(dòng)畫片《Tom and Jerry》中，Tom在吃了辣椒后，觀眾觀看到的是Tom臉部逐漸變紅，可是感覺到的是味覺上辣的體驗(yàn)。這種由視覺語言所產(chǎn)生的聯(lián)覺效應(yīng)運(yùn)用到以后的交互式動(dòng)畫中，會(huì)使人物形象和劇情更加豐滿，同時(shí)，也能增加觀眾與交互式動(dòng)畫的互動(dòng)觀賞體驗(yàn)。

3.2 ?視覺語言帶來的多感官連結(jié)互動(dòng)

現(xiàn)如今大部分的VR交互式動(dòng)畫由于技術(shù)的局限，在制作的過程中考慮的多是怎樣使敘事更加完整，而在故事情節(jié)細(xì)節(jié)的部分花費(fèi)的心思較少，視覺語言雖然在其中運(yùn)用，所帶來的聯(lián)覺效果卻并沒有得到很好地體現(xiàn)。視覺語言是作品創(chuàng)作者與受眾之間交流和傳達(dá)的主要媒介，也是作品主題信息傳達(dá)的重要手段，對視覺語言的理解、運(yùn)用和表現(xiàn)，已成為每個(gè)創(chuàng)作者不可缺少的基本素質(zhì)。VR交互式動(dòng)畫的創(chuàng)作者要注重視覺語言中所可能引申出來的含義，并將交互式動(dòng)畫中的視覺元素與感官建立聯(lián)系。例如當(dāng)圖片在智能手機(jī)上支持放大縮小后，人們由原來的湊近去觀看一幅畫變?yōu)閮芍竿蟿?dòng)改變大小。隨著人類認(rèn)知的不斷豐富，視覺所產(chǎn)生的聯(lián)覺會(huì)更加的多樣，觀眾會(huì)渴望跟著動(dòng)畫中的主人公一起前進(jìn)后退，甚至想要放大交互式動(dòng)畫中的某個(gè)視覺元素。由視覺產(chǎn)生的觸覺渴望，支配著我們的行為，而這種多感官的連結(jié)所引起的互動(dòng)就是未來交互式動(dòng)畫觀眾所期待的互動(dòng)方式之一。

4 ?結(jié)束語

根據(jù)認(rèn)知符號(hào)學(xué)觀點(diǎn)，感覺性與認(rèn)知性是密切聯(lián)系的：基本的符號(hào)學(xué)結(jié)構(gòu)正好反映了我們的感知活動(dòng)——我們的身體正是認(rèn)知機(jī)制的符號(hào)[6]。這種感知活動(dòng)在我們的感覺器官中匯集了由大腦提供的各種信息，并將這些信息進(jìn)行整合，使我們的感覺連結(jié)、融合，視覺語言在交互式動(dòng)畫中起到了溝通這些感覺的引導(dǎo)作用。雖然交互式動(dòng)畫中的視覺語言可以引導(dǎo)敘事節(jié)奏，但在以交互性為主要優(yōu)勢的交互式動(dòng)畫中，利用視覺語言的聯(lián)覺效應(yīng)可以帶給觀眾更多參與到動(dòng)畫交互中的欲望。并且使觀眾獲得更多的情感體驗(yàn)，將視覺互動(dòng)轉(zhuǎn)換為感官互動(dòng)，以期建立觀眾與作品之間的連結(jié)。

參考文獻(xiàn)

[1]宗世英.藝術(shù)視覺素養(yǎng)[M].北京：科學(xué)出版社，2017：29-30，31.

[2]康定斯基.藝術(shù)中的精神[M].余敏玲，譯.重慶：重慶大學(xué)出版社，2011：69-70.

[3]汪流.電影藝術(shù)大辭典[M].北京：中國廣播電視出版社，2001：88-89.

[4]巴拉茲·貝拉.可見的人·電影精神[M].安利，譯.北京：中國電影出版社，2003.

[5]楊靜，劉軍.動(dòng)畫色彩[M].北京：中國青年出版社，2012：69.

[6]安娜·埃諾，安娜·貝雅埃.視覺藝術(shù)符號(hào)[M].懷宇，譯.四川：四川大學(xué)出版社，2014：61.