基于聯覺效應的VR交互式動畫中的視覺語言研究

張真

摘 ?要 ?VR交互式動畫的出現為傳統單純敘事的動畫帶來了全新的感知體驗，視覺元素作為動畫中的核心構成部分，在交互式動畫中也起到了重要的作用。文章通過分析視覺語言中的圖像造型語言和色彩蒙太奇手法，論述交互式動畫中視覺語言聯覺效應的作用，意圖通過探索視覺語言所帶來的多感官聯覺效應，達到交互式動畫帶給觀眾更好的感官體驗的目的。

關鍵詞 ?視覺語言;交互式動畫;聯覺

中圖分類號 ?G2 ? ? ?文獻標識碼 ?A ? ? ?文章編號 ?2096-0360（2019）17-0120-03

感官之間的聯結活動可以使我們更好地對一個事物進行感知，而視覺作為直接接受外界圖像信息最重要的感官，是我們在創作活動中必須要關注的部分。VR交互式動畫不再受傳統動畫中畫框的限制，觀眾視線所及的地方都是動畫的一部分。創作者將“攝影”的權利賦予給觀眾，觀眾可以自主選擇想要觀看的畫面，動畫中的視覺語言也被賦予了新的要求。VR交互式動畫中，觀眾在各自的敘事空間中活動，意味著視覺語言在一定程度上引導著交互式動畫敘事主線的發展，而視覺活動的認知又與觀眾的感官和情緒相關聯，由此所帶來的聯覺體驗使觀眾與動畫產生了更好的互動。

1 ?畫面造型語言吸引用戶的注意力

畫面造型語言是視覺語言中主要的構成部分，在VR交互式動畫中，是吸引受眾與動畫產生交互行為，并引導敘事向著創作者預期的結局進行下去的關鍵。在視覺信息的傳送過程中，最重要的是引起注意。注意是人知覺的起點，引起注意是實現誘導欲望、加強記憶的重要因素，只有引起注意，才能導致行動的產生[1]29-30。因此，吸引觀眾的視覺注意力，并利用聯覺效應傳達故事的階段情節感受對于推動交互式動畫敘事的發展是至關重要的。

1.1 ?色彩的意蘊渲染故事情節

人們在觀察到某種色彩的時，大腦往往會與以往經歷的感知活動產生聯覺?？刀ㄋ够凇端囆g的精神》中提到：“色彩能引發相應的精神感應，通過心理聯想引起眼睛及其他感官的生理反應?！盵2]色彩本身沒有情感，這種情感是人們對色彩產生的聯想與感受。動畫的創作者將色彩帶給人們的這種情感體驗運用到動畫的創作當中，渲染VR交互式動畫中的場景氣氛，以此增強觀眾的情感體驗。例如，由Google spotlight story出品的交互式動畫《Duet》中，整個背景色彩以藍色調為基準，而主人公則以高明度黃色線條來描繪，形成藍色與黃色強烈的色彩對比，使觀眾在觀看動畫時，視線追尋著主人公并與主人公展開互動。在這里色彩的作用就是通過吸引觀眾的視覺注意來保持觀眾對影片的持續關注，同時藍色也渲染了一種神秘的氣氛?？梢?，色彩的意蘊與劇情的有機結合，能表達出豐富的情感，達到事半功倍的效果。

1.2 ?光線的運用幫助聚焦故事主視點

光線在傳統動畫中有溫暖畫面、烘托氣氛的作用。作為交互式動畫中的一種視覺元素，任何有別于其他景物的元素出現，都會影響觀眾觀看交互式動畫的進程，并吸引觀眾的視線去主動探索。人腦在同一瞬間，對信息的加工能力是有限的，不能加工全部信息。注意的選擇功能可以促使大腦排除次要信息的干擾，選擇重要的信息進行加工，而光線在VR交互式動畫中就扮演著幫助觀眾的視線排除次要信息的角色。例如，Pinta Studio團隊在2017年制作的VR交互式動畫《拾夢老人》中，故事開篇失夢者丟掉了自己的吉他，在吉他變成碎片時，點點星光吸引著觀眾的視線去追蹤劇情的發展，而周圍的廢棄垃圾場則成為故事的背景，被觀眾的視線選擇性的略過?？梢?，在VR交互式動畫中，光線有助于創作者制作一個視線焦點，來幫助觀眾聚焦故事主體部分。

1.3 ?圖形流動的變換推動故事情節的發展

休伯（Hubel）和威賽爾（Wiesel）在研究大腦的生理結構時發現，人的有些細胞對視覺形狀的元素比較敏感，這些細胞被稱為特征察覺細胞，是辨析形狀的主力軍[1]31。圖形語言在動畫中出現一般是以靜態的狀態存在，而對于交互式動畫來說，電影中的蒙太奇手法并不適用，強行采用蒙太奇手法進行畫面轉場會帶給觀眾眩暈感和鏡頭間切換不自然的感覺。例如在VR交互式動畫《Planet of the Couches》中，鏡頭之間的轉場直接用畫面被揭掉的方式處理，打斷了觀眾在虛擬現實中的沉浸式觀看節奏，強行將觀眾拉回現實，影響受眾體驗。而反觀由Oculus Story Studio制作的交互式動畫《Dear Angelica》中，觀眾進入到影片中小女孩的房間時，小女孩已經沉浸在睡夢中，此時，一道墨跡從小女孩身旁的日記本上延伸向觀眾，并伴隨著小女孩媽媽的聲音繞過觀眾，不斷往觀眾身后蔓延，由于視覺引起的心理上對未知的聯想，促使觀眾跟隨著墨跡轉身，最后將視線定格在電視機上。電視里播放的是小女孩母親所飾演的電影。這種將原本字跡的流動轉換成切鏡頭的方式，使受眾更易接受，也勾起受眾的聯覺。觀眾不自覺的進入到下一場景中，達到創作者推動故事情節發展的目的。

2 ?色彩蒙太奇喚起觀眾的聯想

“蒙太奇主要指電影創作中把鏡頭組接起來進行敘事、抒情和觀念表達的表意手法?！盵3]VR交互式動畫中由于全景畫面的呈現，畫框的限制被取消，電影中蒙太奇的手法無法得到發揮，鏡頭與鏡頭間的聯系又需要得到建立，所以，就需要構建新的蒙太奇語言，為交互式動畫的鏡頭語言尋找新的出路?！疤厥獾念伾撓禐槊商嫣峁┝烁鞣N新的表現方法。顏色的相似和反差在影像間建立了一種比形式的相似與反差深刻得多的關系。各種色彩具有強大的象征力量，顏色喚起聯想，激發感情?！盵4]鏡頭內色彩的變化，正好與VR交互式動畫中的“一鏡到底”的特點形成呼應，為交互式動畫與觀眾之間建立情感聯系找到了突破口。例如，Google spotlight story團隊制作的交互式動畫《Peal》中，畫面一開始設定在一個已經沾滿塵土的車子中，女主人公進入到車子內，打開收音機的同時，畫面的色彩由冷向暖進行色調的轉變，女主人公也回到了小時候的記憶，色彩的轉變喚起了觀眾對女主人公小時候幸福場景的感知，畫面依舊在車內，場景卻瞬間變得溫暖。色彩蒙太奇產生的聯覺效應不僅帶給觀眾適當的想象空間，還解決了VR交互式動畫中轉場生硬的問題。色彩的感知來源于人們大腦中對顏色的某種聯想，色彩本身不具有情感，而當顏色投影在我們的視覺感知器官時，我們會將自己原有的生活經驗混入到實際所看到的影像之中，使我們產生對顏色冷暖的聯想，并賦予顏色溫馨或可怕的心理體驗。因此，創作者在設計交互式動畫的劇情時，可以考慮運用存在于觀眾記憶中的知識影像，幫助觀眾更好的參與到交互式動畫的互動當中，以便使作品的主題思想傳達的更加精準。

3 ?視覺語言帶來的多感官聯覺體驗

一種感官的刺激會連帶刺激另一種感官的現象在心理學中稱為通感或共感覺[5]。聯覺即一種感官感受到的刺激激起了另一種或多種感官的感受。交互式動畫中，畫面占主導地位，觀眾的眼睛隨著畫面圖像運動，并試圖與之產生互動。這就要求在交互式動畫中視覺語言不止要發揮其視知覺的作用，同時也是多感官的聯覺互動體驗。

3.1 ?視覺形象帶來的感官體驗

交互式動畫中視覺語言在色彩、光線、圖形上具有引導觀眾回歸動畫敘事主線，并烘托人物情感，渲染背景氣氛的聯覺效應。交互式動畫中，觀眾感受到的視覺元素不僅帶來視覺上的感知，同時也可以作用于觸覺、嗅覺、味覺等感官體驗。我們可以從最初的繪畫中尋找視覺與其他感覺的聯系。例如，亞當·埃爾森海默的《逃亡埃及》，是畫家1609年在羅馬完成的一幅夜景繪畫。作者用現實主義的手法描繪出當時周圍的景象，景物可以再現，但是對于視覺之外可以激發的其他感覺（空氣和露水的濕潤、太陽的溫暖、風的吹動等），就是欣賞者在觀賞作品后產生的自然感知與聯想，是聯覺效應發揮的作用。類似的例子還有由米高梅電影公司制作的經典動畫片《Tom and Jerry》中，Tom在吃了辣椒后，觀眾觀看到的是Tom臉部逐漸變紅，可是感覺到的是味覺上辣的體驗。這種由視覺語言所產生的聯覺效應運用到以后的交互式動畫中，會使人物形象和劇情更加豐滿，同時，也能增加觀眾與交互式動畫的互動觀賞體驗。

3.2 ?視覺語言帶來的多感官連結互動

現如今大部分的VR交互式動畫由于技術的局限，在制作的過程中考慮的多是怎樣使敘事更加完整，而在故事情節細節的部分花費的心思較少，視覺語言雖然在其中運用，所帶來的聯覺效果卻并沒有得到很好地體現。視覺語言是作品創作者與受眾之間交流和傳達的主要媒介，也是作品主題信息傳達的重要手段，對視覺語言的理解、運用和表現，已成為每個創作者不可缺少的基本素質。VR交互式動畫的創作者要注重視覺語言中所可能引申出來的含義，并將交互式動畫中的視覺元素與感官建立聯系。例如當圖片在智能手機上支持放大縮小后，人們由原來的湊近去觀看一幅畫變為兩指拖動改變大小。隨著人類認知的不斷豐富，視覺所產生的聯覺會更加的多樣，觀眾會渴望跟著動畫中的主人公一起前進后退，甚至想要放大交互式動畫中的某個視覺元素。由視覺產生的觸覺渴望，支配著我們的行為，而這種多感官的連結所引起的互動就是未來交互式動畫觀眾所期待的互動方式之一。

4 ?結束語

根據認知符號學觀點，感覺性與認知性是密切聯系的：基本的符號學結構正好反映了我們的感知活動——我們的身體正是認知機制的符號[6]。這種感知活動在我們的感覺器官中匯集了由大腦提供的各種信息，并將這些信息進行整合，使我們的感覺連結、融合，視覺語言在交互式動畫中起到了溝通這些感覺的引導作用。雖然交互式動畫中的視覺語言可以引導敘事節奏，但在以交互性為主要優勢的交互式動畫中，利用視覺語言的聯覺效應可以帶給觀眾更多參與到動畫交互中的欲望。并且使觀眾獲得更多的情感體驗，將視覺互動轉換為感官互動，以期建立觀眾與作品之間的連結。

參考文獻

[1]宗世英.藝術視覺素養[M].北京：科學出版社，2017：29-30，31.

[2]康定斯基.藝術中的精神[M].余敏玲，譯.重慶：重慶大學出版社，2011：69-70.

[3]汪流.電影藝術大辭典[M].北京：中國廣播電視出版社，2001：88-89.

[4]巴拉茲·貝拉.可見的人·電影精神[M].安利，譯.北京：中國電影出版社，2003.

[5]楊靜，劉軍.動畫色彩[M].北京：中國青年出版社，2012：69.

[6]安娜·埃諾，安娜·貝雅埃.視覺藝術符號[M].懷宇，譯.四川：四川大學出版社，2014：61.