音樂作品論文:透析音樂作品光衍音視頻結合方式

時間:2022-02-24 03:43:00

導語:音樂作品論文:透析音樂作品光衍音視頻結合方式一文來源于網友上傳,不代表本站觀點,若需要原創文章可咨詢客服老師,歡迎參考。

音樂作品論文:透析音樂作品光衍音視頻結合方式

本文作者:范翎

一、以視覺體驗為先導,確立音頻素材來源

《光衍》的創意之源來自于一組數字媒體專業的學生作業,該作業借助數碼相機的視頻拍攝功能,記錄了光透過玻璃器皿底部的多棱造型以后所產生的衍射現象。這組視頻具有極強的抽象性,通過影像的方式展現了極易在日常生活中被人們忽略的,然而又轉瞬即逝的光的瑰麗之美,其所展現的微觀視角下的視覺體驗富于獨特的表現意味??紤]到該組視頻所具有的特質適合于結合電子音樂的各類手段進行互動式創作,因此,我們迅速成立了專門的創作團隊,開始制定視頻與音頻的獨立創作計劃,就聲音與畫面各自可能實現的結果進行了深入的溝通與探討,并開始計劃如何將兩種媒介合理并巧妙地融合。考慮到音視頻素材的同源性問題,本作品采用玻璃器皿作為主要的音頻創作來源,并加入了少量骨質瓷器皿的采樣作為補充,音頻素材的頻率分布大多在中高頻。從電子音樂的創作規律來看,之所以經常選用玻璃、金屬、陶瓷等材質所發出的高頻聲音作為創作素材,一方面是由于這些聲音素材具有豐富的能量儲備,其潛在的聲音表現擴展性較強,另一方面是因為在進行聲音變形時,高頻聲音在進行向下拓展時聲音的細膩程度較好,不易產生畸變。本作品前期通過大量實驗確立可使用的聲音素材的種類,集中對聲音素材進行采集并做細致分類。在某些段落,特別是節奏性段落則需要進行實時演奏的錄音。

二、以視頻素材為參照,強調“交互性”的音頻創作

《光衍》的音頻創作基于Nuendo平臺,聲音的變形及處理主要通過GRMTOOLS和WAVES完成。在進行該作品的音頻創作時,筆者以視頻素材作為參照,首先對各種形態的視覺要素進行詳細的分析,這些要素包括色彩、形狀、空間布局、區域密度、圖形矢量、運動矢量、事件節奏等等,然后確定與之對應的音頻創作的素材與手段。這一創作手段與單純的音頻創作完全不同。一方面,音頻的創作受到特定視頻素材各要素的制約,但并不完全受其限制;另一方面,視頻的各要素不斷激發出音頻創作的創意與靈感,引導著音頻創作綿延不斷的向前推進,甚至產生完全超出原本預想的特殊效果。通過這種方式創作的音頻作品雖然在總體結構方面依然保持音樂作品所特有的,以時間為主軸的組織形態,但其各個局部的音響與相對應的視頻具有緊密的聯系,這種以交互與融合為目的的創作方式為后期視頻部分的創作提供了良好的前提。以下為本作品創作過程中采用的部分視頻與音頻要素的對應情況:以上各對應原則貫穿作品始終,其目的在于通過多重音視頻對應方式產生不同的多媒交互體驗,力圖形成除視頻與音頻自身構架以外的第三類結構體系,從而實現多維度、立體化的藝術表現方式。下面列舉以上部分對應原則在作品中的應用實例。1.空間布局對應聲場布局這一對應原則實為聲畫同步,在影視作品的音效創作中應用極為廣泛,即將畫面中各事件對應特定的音效,按照畫面布局關系進行聲場排布。作品中00:22-00:25在極左位置出現的碗口敲擊聲具有較長的釋音時間,其對應的視頻為左側邊藍色光源向右衍射的畫面。清晰的聲場定位對應明確的光源位置,長時間的釋音對應光衍射漸變的過程,此段落畫面與聲音具有高度的一致性。圖1《光衍》00:22-00:25畫面2.圖形矢量①對應聲場定位圖形矢量是指[2]“由將我們的目光引導向一定方向的靜止元素產生”的畫面力量。通常情況下,矢量所指的方向由畫面中存在的線條方向構成,而這種指向力與其他物理力量一樣具有強度大小和方向性。作品中00:57-01:03畫面為盛滿水的玻璃器皿底部,盡管該畫面中并不存在實際的線條,但指向屏幕右上方圓形底座的弧形面是由無數線條構成(見圖例中紅色線條標示),因此該畫面具有顯著的向右上方的矢量。對應此畫面的聲音為極右位置的具有較長釋音時間的碗口敲擊聲,聲場定位對應矢量方向,長時間的釋音對應器皿中水的晃動。圖2《光衍》00:58視頻截圖3.畫面形態對應聲音形態本文所涉及的畫面形態指的是動態畫面中所包含的事件的結構特性及其演變方式。我們將畫面形態大致分為兩種,一種是規則形態,另一種為不規則形態。規則畫面形態對應協和、純凈而相對穩定的聲音形態,如作品中00:37-00:41畫面為虛焦的盛有紅色液體的高腳玻璃杯,虛焦效果使得畫面呈現出以圓形光斑為主的抽象形態,杯體作連續的規律性晃動,加上光斑的分布較為均勻,使整體畫面呈現出規則而穩定的狀態。此處對應的聲音為逐漸淡出的敲擊高腳玻璃杯杯口的尾音,聲音純凈,音量呈線性減弱。71范翎:交融的合力不規則畫面形態對應不協和、散亂而不穩定的聲音形態,這一類聲音可通過對聲音采樣進行變形后獲得。如作品中00:51-00:54畫面為光透過杯子底部而產生的不規則形態,此處對應的聲音原型為兩只玻璃碗之間快速摩擦而產生的類似劍出鞘的聲音。通過GRMTOOLS中的Shuffling對聲音進行粉碎和重組,從而獲得了散亂的、不規則的甚至有些捉摸不定的混合形態聲音,這一結果很好的貼合了與畫面所展現的抽象而神秘的意境,其不可預知的無規律變化與畫面中光的不規則變化相得益彰。又如作品中01:05-01:25,這是一個比較長的段落,此段落采用光衍射所產生的多種類型不規則形態的視頻進行連接,與之前00:51-00:54的畫面形態有些類似??紤]到視頻的不規則形態可通過聲音作為主線進行串聯,此段視頻畫面采用了冰塊放入水中融化并產生冰裂的聲音與之對應,該聲音為顆粒狀不規則變化的持續音型,高頻豐富,動態較小,適宜作為長線條的背景層使用,其不規則微變的特性很符合在形態上具有近似性的多段視頻的串聯。6《光衍》01:05-01:25畫面通過不斷分析與比對的過程,在音頻創作基本定稿時,我們已初步確定了不同音樂段落可應對的視頻素材,并對視頻素材進行了詳細的分類,并對可能由后期剪輯產生的一些計劃外的特殊效果做出了一些預估,從而為后續的視頻創作打下了堅實的基礎。

三、以音樂構架為基準,強化音視頻結合的綜合表現力

在音樂結構方面,《光衍》共分為四個相對獨立的段落,雖然除第四部分是第一部分的變化再現以外,各段落之間的差異較大,但由于音視頻素材在來源方面的統一度較高,創作的手法也較為接近,因此,作品在結構上具備了較高的整體性。由于該作品試圖將聲音作為主要的表現載體,而視頻主要用以加強聲音的表現力,因此在視頻創作方面,我們僅使用了最為基本的視頻剪輯與組接手段,除疊化、調色和變速以外,并沒有使用更多的視頻特效功能,其目的在于力求通過“樸素”的視頻創作手段完成深層次的內容表達,使受眾能更多的關注于聲音的表現。《光衍》的音頻創作充分考慮到了與視頻的對應性與一致性,并在此過程中將視頻素材按照音樂的不同段落進行了細致的分類,因此,后期的視頻創作就顯得較為輕松了。我們需要解決的問題主要集中在節奏點的切合、綜合藝術表現力的增強以及音視頻的結構統一等方面。1.節奏點的切合在音樂的時間結構確定以后,視頻剪輯的節奏點就只能由音頻的節奏點來決定了。但是,音頻創作的節奏點或基于“小節、拍、子拍”等音樂結構單位,或基于“分、秒、微秒”等時間單位,而視頻非線性編輯軟件都是基于“幀”,相對于“子拍”和“微妙”來說,這一單位顯然大了許多,因此就存在音視頻在節奏點上不能完美對應的問題?!豆庋堋匪褂玫囊曨l素材統一為24幀/秒,而在實際創作中我們發現,這一數值不夠精確,因此多數時間我們都躑躅于前一幀與后一幀的取舍之間。解決這一問題最直接的方式是采用更高的幀數進行拍攝,或者選擇能以“分、秒、微秒”等時間單位作為基準的視頻編輯軟件。此外,盡管在音頻創作過程中兼顧到了與視頻在時間上的匹配問題,但是,音樂的時間結構有其自身發展的特殊要求,不可能完全按照已有的素材進行創作,因此,視頻素材在時間長度上往往與音樂段落不相吻合。解決此類問題可以通過視頻素材的緊縮與擴展功能來使長度相符。如果時間差異較大時,特別是視頻的時間長度不足時,則可選用近似類型的視頻加以補充,切不可過度拉伸視頻素材的長度,否則會造成“斷幀”現象?!豆庋堋返牡谌温錇樗俣群愣ǖ墓澴嘈远温洌ㄟ^將不同音頻素材復制拼貼,輔以拍打玻璃器皿各部位的實時演奏組成復雜的節奏型。為配合聲音鮮明的節奏特性,視頻部分采用不同素材進行拼接,通過快速的畫面切換來實現視覺體驗的高速變化,但其節奏速度與聲音部分并不相同,其目的在于實現音頻與視頻的節奏差異化,將視頻節奏作為獨立的節奏層次,從而進一步強化作品的綜合藝術表現。2.綜合藝術表現力的增強音視頻結合類電子音樂作品的表現力需要依靠音頻與視頻的綜合作用方能得以實現,音視頻之間力量的比值及其于橫向時間軸上的分布狀況將直接決定作品整體的藝術表現力??梢哉f,兩股力量之間的關系是這一類作品的最為重要表現力結構層次,也是作品創作過程中需要解決的關鍵性問題。音視頻表現力的共同作用是最為常見的,在這里列舉兩例。作品01:33-01:52為第一段落的最高潮,此處聲音的高頻部分采用相互連接的敲擊玻璃碗口的聲音切片,并作漸強處理,低頻部分則為兩只大口徑高腳杯相互碰撞的聲音采樣,并使用GRMTOOLS中PitchAccum、Reson以及Delays三個效果器協同作用,通過音高聚積及共振產生一系列復雜變化?;诋嬅媸录捏w量與聲壓強度成正比的對應特性,為配合此處聲音力量的快速增強,視頻采用了整體畫面快速放大的效果與之對應。聲音與畫面的聯合作用使第一段落的結尾成為全曲的一大亮點,它同時也預示著作品后半部分音視頻的合力將不斷增強。對比手段適宜夸大情緒的起伏,體現作品的表現張力,進而使作品的整體發展富于推動力。而對于極強調動態起伏及張力的電子音樂來說,對比手段尤其重要。視覺藝術可通過色彩、亮度、空間布局、速度以及矢量等要素來實現動態對比,但實際上,最簡單而極致的對比方式是“有”和“無”。為充分表現音樂在動態方面的落差,我們在作品中多次使用到了黑屏,如作品的00:20、00:29、00:55、01:32、04:43。需要指出的是,以上五次黑屏并不是作段落結構終止淡出所用,而全部是與大動態聲音表現相對應,用以最大程度體現視頻張力的。3.音視頻結構的對比與統一由于《光衍》視頻創作的原則是力圖運用最基本的視頻剪輯與組接手段完成內容表達,因此,在通過視頻表現音樂的縱向結構方面主要采用了疊化方式。作品的第二段落是疊化手段使用最為集中的部分。此段落的音頻主體是以手指勻速摩擦大口徑高腳玻璃杯杯口而產生的具有固定音高的正弦波采樣,將該采樣復制并作音高、聲像及混響等參數的線性變化,與原始采樣相結合后形成具有復調意味的多線條結構,其目的在于試圖營造出一種多層次持續化的線性微變效果。為增強該段落聲音的結構支撐,在此基礎上又加入了利用Shuffling、Reson制作的多種穿插式音效,使得聲音的層次在某些時間點變得更為復雜。對應以上聲音特性,該段落使用布局對稱、結構穩定的圓形玻璃煙缸作為視頻的主體,畫面光的強度及色彩隨時間的推進不斷變化,伴隨煙缸中盛有的水的輕微晃動所形成的不斷變化的光的反射,同樣形成了視覺的持續微變。在出現穿插式音效時,視頻采用疊化效果與之對應,加入了多彩光斑、晃動的高腳杯以及玻璃杯滾動等素材與視頻主體作交叉疊化,從而進一步豐富了視頻的內容層次。在橫向結構方面,視頻也充分參照了音頻部分的四段體結構,在時間軸上分為四個段落。作品第一段落與第四段落的音頻結構關系為變化重復,因此其在視頻素材的選擇上近似度也較大,所使用的剪輯手法也較為接近,其目的在于通過視覺引導進一步加強首尾呼應的關系,加強作品的整體感與結構感,以體現聲音部分尾部變化重復的結構特性。音視頻結合類電子音樂作品結構的合理性一方面取決于音頻與視頻自身的表現特性及其之間的契合度,更大程度上取決于二者在橫向結構方面對比與統一的邏輯關系,這一關系是此類作品所獨具的,除音視頻獨立表現結構以外的第三層次結構,它在總體上決定了作品的整體布局,也將直接決定受眾對作品整體結構的判斷與體驗,因此,這一層次結構是此類作品成敗的關鍵。下圖顯示了《光衍》的音頻與視頻部分在時間軸上的能量分布比對的大致情況。從上圖可見,作品第一段落強調了音視頻的契合度,其能量表現的同步性與一致性較強。從第二段落開始,音視頻能量分布開始出現異化,視頻能量經常保持在某一水平線上,其僅有的幾次變化承松散狀分布,而音頻能量變化的密集程度和動態范圍逐漸變大,至第三段進入高潮,而視頻在第三段開始時有一次突變,但其后由于視頻切換節奏的一致性而使它又進入到能量相對穩定的階段。進入第四段,音視頻又回歸到彼此契合的主題,與第一段形成呼應。此外,在作品的各個結構性支撐點上,特別是各段落開始與結束的部分,音頻與視頻往往通過合力的作用來強化作品的橫向構架,其目的在于通過音視頻合力強化作品的動態變化,使作品的結構特性更為清晰明朗。

四、總結

對于音視頻結合類電子音樂作品而言,如何理清音頻與視頻之間的辯證關系是最為關鍵的成敗要素,而音視頻相關要素的對應方式又是各類關系建立的基石。從細節上看,需要預先設定音視頻各要素對應的基本原則,并有效地將這些原則付諸實施;從整體上看,則需要妥善安排音視頻力量的對比與統一,并在時間緯度上形成兩種力量關系的合理分布,既要考慮其各自表現力的獨立存在,又要考慮如何在合理的結構位置上形成合力,并為受眾保留足夠的心理完形②空間,團隊合作對于此類作品的創作來說至關重要。在進行創作之前,需要團隊各部門進行周密的前期設計,通過充分的溝通以了解彼此之間的創作方式與意圖。在創作過程中,音視頻創作部門既要相互參照,又要兼顧完全獨立的創作,這樣更容易產生計劃之外的耦合性藝術效果,從而進一步豐富作品的藝術表現力層次。