楊 靜

[內(nèi)容提要] 多媒體音樂(lè)是含有現(xiàn)代多媒體技術(shù)手段的復(fù)合性藝術(shù)，是綜合了視覺(jué)文化的圖像感知特點(diǎn)和純音樂(lè)聆聽(tīng)方式的一種可見(jiàn)的音樂(lè)形式。筆者對(duì)這類以音樂(lè)為主導(dǎo)、綜合了其他媒介形式的復(fù)合性的多媒體音樂(lè)研究時(shí)，發(fā)現(xiàn)譚盾的多媒體音樂(lè)《地圖》、《女書》音影結(jié)構(gòu)元素間存在多線索、多層級(jí)的復(fù)雜對(duì)位，并形成了多重結(jié)構(gòu)現(xiàn)象。本文基于多視角分析視域，從認(rèn)知角度出發(fā)探討多媒體音樂(lè)研究的路徑，思考具有視聽(tīng)結(jié)合特點(diǎn)的復(fù)合性音樂(lè)的多重結(jié)構(gòu)思維、樣態(tài)及其感知，進(jìn)而從不同角度認(rèn)識(shí)譚盾的多媒體音樂(lè)。

引言

任何一部音樂(lè)作品的結(jié)構(gòu)都具有自身的特點(diǎn)，剖析這些結(jié)構(gòu)的存在方式和結(jié)構(gòu)內(nèi)部材料的相互關(guān)系及邏輯運(yùn)行，對(duì)于研究音樂(lè)作品具有重要的意義。20 世紀(jì)以來(lái)，藝術(shù)音樂(lè)已不僅限于聽(tīng)覺(jué)藝術(shù)這一維度的美學(xué)趣味，其觸角已延伸至更為廣闊的表現(xiàn)方式，與視覺(jué)藝術(shù)緊緊聯(lián)系在一起的多媒體音樂(lè)成為現(xiàn)代音樂(lè)創(chuàng)新的重要形式之一。多媒體音樂(lè)隨著多媒體技術(shù)的興起而出現(xiàn)、發(fā)展，它以交響樂(lè)隊(duì)的音樂(lè)語(yǔ)匯為參照對(duì)象，強(qiáng)調(diào)藝術(shù)與科技、形式與技術(shù)的融合，具有新的音樂(lè)語(yǔ)言特點(diǎn)。對(duì)于這類現(xiàn)代多媒介藝術(shù)音樂(lè)的研究，單一套用傳統(tǒng)藝術(shù)理論的審美準(zhǔn)則和批評(píng)范式是不足以觀其全部的。如何去處理、探究這種藝術(shù)音樂(lè)形式中的樂(lè)隊(duì)、影像各元素之間的相互關(guān)系，就需要一種新的理論、新的思想、新的視角和方法去突破它。賈達(dá)群教授提出的“多重結(jié)構(gòu)”以及解決多重結(jié)構(gòu)關(guān)系的“結(jié)構(gòu)對(duì)位”分析方法，成為我們所需要的這種新視角和新方法的重要理論基礎(chǔ)和可行路徑之一。所謂多重結(jié)構(gòu)現(xiàn)象分析就是建立在“多重思維”基礎(chǔ)上，將音樂(lè)創(chuàng)作中的多種因素進(jìn)行多方面、立體化的分析推理過(guò)程，“結(jié)構(gòu)對(duì)位”分析方法是看待多重結(jié)構(gòu)現(xiàn)象、揭示各創(chuàng)作元素之間相互關(guān)系的一個(gè)途徑和方法。在對(duì)以音樂(lè)為主導(dǎo)、綜合了其他媒介形式的復(fù)合性的音樂(lè)作品研究中，筆者發(fā)現(xiàn)，將多媒體復(fù)合性特點(diǎn)的這類音樂(lè)作品與純音樂(lè)進(jìn)行比較，前者也存在著很多新的能揭示作曲家創(chuàng)作思維的多重結(jié)構(gòu)樣態(tài)。

多重結(jié)構(gòu)現(xiàn)象不僅發(fā)生在節(jié)奏、音高、音色、力度等音樂(lè)結(jié)構(gòu)元素內(nèi)部及相互間的結(jié)構(gòu)錯(cuò)位對(duì)置中，從文本出發(fā)（這里的“文本”一詞是指“含有很多種符號(hào)的自主整體”[1]【美】愛(ài)爾基·佩基萊、戴維·諾伊邁耶、理查德·利特菲爾德.音樂(lè)·媒介·符號(hào)[M].陸正蘭，譯.四川教育出版社，2012：6.，廣義上可以是一部藝術(shù)音樂(lè)作品，也可以是作品中的原生音樂(lè)，甚至可以是作品中的民俗現(xiàn)象、儀式等），多重結(jié)構(gòu)也存在于多媒介音樂(lè)作品的隱性結(jié)構(gòu)元素中，譬如：音樂(lè)結(jié)構(gòu)與視覺(jué)文本之間、視覺(jué)空間與音樂(lè)空間之間、文本結(jié)構(gòu)與聽(tīng)覺(jué)結(jié)構(gòu)之間、文本結(jié)構(gòu)與心理結(jié)構(gòu)之間、原始音樂(lè)與創(chuàng)作音樂(lè)之間，以及源文本與新文本的互文本間的結(jié)構(gòu)對(duì)位等等。含有視覺(jué)元素等其他介質(zhì)的復(fù)合性特點(diǎn)的音樂(lè)作品，它的本身具有結(jié)構(gòu)元素多樣性的基礎(chǔ)，這就使它常形成音樂(lè)結(jié)構(gòu)與其他元素結(jié)構(gòu)間的多重結(jié)構(gòu)現(xiàn)象?？偟膩?lái)說(shuō)，多重結(jié)構(gòu)現(xiàn)象的發(fā)生是多元性的，對(duì)于音樂(lè)結(jié)構(gòu)的多解探究有利于從不同路徑去全面認(rèn)識(shí)作品。

譚盾的多媒體音樂(lè)《地圖》和《女書》都是以音樂(lè)為主導(dǎo)，由多媒體承載、綜合了其他藝術(shù)媒介的復(fù)合性的音樂(lè)作品，這兩部作品音影結(jié)構(gòu)元素間的多線索、多層級(jí)復(fù)雜對(duì)位，形成了多重結(jié)構(gòu)現(xiàn)象?！兜貓D》創(chuàng)作于2002 年，為大提琴、多媒體聲像記錄和樂(lè)隊(duì)而作，由九個(gè)獨(dú)立的樂(lè)章組成[2]《地圖》由九個(gè)獨(dú)立的樂(lè)章組成，分別為：儺戲與哭唱、吹木葉、打溜子、苗嗩吶、飛歌、間奏曲：聽(tīng)音尋路、石鼓、舌歌、蘆笙。。這部作品是協(xié)奏曲形式與湘西民間音樂(lè)的一種多媒體結(jié)合，它的音樂(lè)和影像素材來(lái)源于湖南湘西民間音樂(lè)和民俗行為，通過(guò)科技與傳統(tǒng)的融合表達(dá)一種新的對(duì)位觀念，即獨(dú)奏與影像，獨(dú)奏與樂(lè)隊(duì)，樂(lè)隊(duì)與影像，文字與聲音及多軌聲像之間的競(jìng)奏。《女書》創(chuàng)作完成于2013 年，為十三部微電影、豎琴獨(dú)奏和交響樂(lè)隊(duì)而作，由十三個(gè)具有獨(dú)立標(biāo)題的樂(lè)章組成[3]《女書》由十三個(gè)獨(dú)立標(biāo)題的樂(lè)章組成，分別為：秘扇、母親的歌、穿戴歌、哭嫁歌、女書村、思念老同、深巷、老同相遇、女兒河、祖母故居、淚書、培元橋、活在夢(mèng)里。，這部作品的創(chuàng)作靈感來(lái)源于湖南“江永女書”文字本身和文字背后關(guān)于女人的故事。該作在以影像空間和音樂(lè)時(shí)間為創(chuàng)作維度的基礎(chǔ)上，加入了虛擬時(shí)空軸，將影像與音樂(lè)進(jìn)行了有機(jī)結(jié)合，使視覺(jué)與聽(tīng)覺(jué)相互作用，通過(guò)音樂(lè)、影像、女性行為展示了古老的女書文化和今天女書村女性的精神氣質(zhì)。

本文以作品創(chuàng)作、聽(tīng)賞認(rèn)知過(guò)程中出現(xiàn)的隱性結(jié)構(gòu)對(duì)位為切入點(diǎn)，通過(guò)對(duì)《地圖》、《女書》這類具有多元性藝術(shù)特點(diǎn)的多媒體音樂(lè)表現(xiàn)形式的分析和思考，從認(rèn)知的視角探究多媒體音樂(lè)的多重結(jié)構(gòu)現(xiàn)象生成、結(jié)構(gòu)樣態(tài)與接受感知，進(jìn)而揭示譚盾多媒體音樂(lè)的多重結(jié)構(gòu)思維。文章主要從認(rèn)知中的多媒體音樂(lè)、認(rèn)知中的音影結(jié)構(gòu)對(duì)位樣態(tài)、聽(tīng)覺(jué)與視覺(jué)共同作用下的多重結(jié)構(gòu)現(xiàn)象審美三個(gè)方面進(jìn)行分析。

一、認(rèn)知中的多媒體音樂(lè)解讀

（一）視覺(jué)觀念

古典音樂(lè)中的交響樂(lè)、室內(nèi)樂(lè)等形式，始終擁有著大量的忠實(shí)樂(lè)迷和追隨者，但是隨著文化的多元化、各種藝術(shù)媒介的滲透，諸如電子音樂(lè)等形式的興起，傳統(tǒng)音樂(lè)形式已不再完全引領(lǐng)音樂(lè)創(chuàng)作的潮流。一些作曲家試圖將音樂(lè)以外的藝術(shù)媒介融入到創(chuàng)作中，釋義音樂(lè)的觀念。無(wú)論是序列音樂(lè)還是偶然音樂(lè)，亦或是1945 年以后作曲家們對(duì)于新音色的尋求都是對(duì)既有創(chuàng)作手法和觀念的打破。20 世紀(jì)中期，多媒體手段的使用讓視覺(jué)因素又一次大量介入音樂(lè)創(chuàng)作，也正如不斷突破傳統(tǒng)音樂(lè)創(chuàng)作現(xiàn)象的音樂(lè)形式和觀念那樣，它是個(gè)性音樂(lè)創(chuàng)作及體現(xiàn)內(nèi)容表現(xiàn)新形式的途徑之一。

20 世紀(jì)60 年代錄像技術(shù)的出現(xiàn)引起了不同領(lǐng)域藝術(shù)家們的關(guān)注，也更激發(fā)了人們對(duì)藝術(shù)敘事和敘事結(jié)構(gòu)探索的興趣。隨著電腦的普及、多媒體技術(shù)的興起、新媒介的發(fā)展，它們?yōu)樗囆g(shù)創(chuàng)作開(kāi)辟了新的視野，產(chǎn)生了許多新的藝術(shù)范式，比如：裝置藝術(shù)、舞蹈劇場(chǎng)、多媒體數(shù)字藝術(shù)展等，音樂(lè)創(chuàng)作領(lǐng)域的多媒體音樂(lè)也是這一大背景下的產(chǎn)物。技術(shù)革命常引發(fā)藝術(shù)觀念及藝術(shù)創(chuàng)新思維模式的變革，伴隨著科技進(jìn)步，藝術(shù)創(chuàng)作也向著多元化、全方位的方向轉(zhuǎn)變，呈現(xiàn)單一性感官藝術(shù)創(chuàng)作向視覺(jué)、聽(tīng)覺(jué)、感覺(jué)、觸覺(jué)等感官擴(kuò)展的綜合藝術(shù)進(jìn)發(fā)。

“‘影像’作為名詞一是指肖像、畫像，二是指形象，三是指物體通過(guò)光學(xué)裝置、電子裝置等呈現(xiàn)出來(lái)的形狀，即影像或圖像?！盵1]薛生健、張國(guó)榮、韓曉龍.視覺(jué)藝術(shù)的表現(xiàn)手法[M].機(jī)械工業(yè)出版社，2012：169.影像包括電影、攝影、多媒體藝術(shù)等，“其中‘影像’藝術(shù)是‘動(dòng)像’和‘靜像’所組成的圖像系統(tǒng)的綜合性稱謂”。[2]同上：170.本文研究的譚盾多媒體音樂(lè)中論及的影像，具有紀(jì)實(shí)影像和民俗影像的雙重特點(diǎn)，紀(jì)實(shí)影像具有揭示人與人、人與社會(huì)之間關(guān)系的特點(diǎn)，并在一定程度上能對(duì)社會(huì)產(chǎn)生一定影響；而民俗攝影是攝影技術(shù)與民俗學(xué)相結(jié)合的產(chǎn)物，具有史料性和藝術(shù)性。

1.視覺(jué)材料

視覺(jué)所傳達(dá)的音樂(lè)行為是感官所知覺(jué)到的現(xiàn)實(shí)，這是重要的視覺(jué)材料，而樂(lè)隊(duì)音樂(lè)材料是由聽(tīng)覺(jué)所感知的行為?！皹?lè)譜本身就在視覺(jué)方面重現(xiàn)出樂(lè)音動(dòng)態(tài)的上升和下降，這清楚地證明感官的統(tǒng)一性也存在與樂(lè)音的運(yùn)動(dòng)中——聽(tīng)覺(jué)所知覺(jué)到的‘形象’會(huì)由視覺(jué)保持下來(lái)。我們還要預(yù)先提到，這些外在的形象中還可能蘊(yùn)藏著內(nèi)在的情感的形象，……”[3]【德】恩斯特·邁耶爾.音樂(lè)美學(xué)若干問(wèn)題[M].姚錦新、藍(lán)玉崧，譯.人民音樂(lè)出版社，1984：27.如果說(shuō)我們看到的影像是顯性的視覺(jué)材料，那么多媒體音樂(lè)形式中與影像相對(duì)位的樂(lè)隊(duì)聲部則具有將具象的視覺(jué)材料轉(zhuǎn)化為隱性視覺(jué)材料的功能，經(jīng)過(guò)作曲家的藝術(shù)創(chuàng)作將其轉(zhuǎn)化為樂(lè)譜。這些原始影像在一定程度上具有普遍性，在感官的統(tǒng)一性中構(gòu)成具有一般性的形象，然后樂(lè)隊(duì)音樂(lè)將其具體化，具象為不同的旋律線條和音型。以此為線索，可以將《地圖》、《女書》中的視覺(jué)材料分為顯性的影像視覺(jué)材料和經(jīng)轉(zhuǎn)化具象到樂(lè)譜形態(tài)的隱性視覺(jué)材料。

2.視覺(jué)布局

多媒體音樂(lè)《地圖》、《女書》的視頻位置布局、視頻播放載體的材質(zhì)、視頻拍攝角度和剪輯手法等特點(diǎn)，從側(cè)面體現(xiàn)出譚盾在這一音樂(lè)形式中其創(chuàng)作思維的繼承和變化。從它們的視頻位置來(lái)看，這兩部作品都使用了三屏布局的形式，即舞臺(tái)左右前方各一個(gè)，并且橫向?qū)R，后臺(tái)居中一個(gè)。這種視頻布局不同于通常的樂(lè)隊(duì)媒介布局，作曲家試圖在有限的空間內(nèi)，從視覺(jué)和聽(tīng)覺(jué)創(chuàng)作思維上表現(xiàn)音樂(lè)與影像之間的相互解讀。但是，在這里觀眾是否會(huì)因?yàn)橛跋駥?duì)于視覺(jué)的影響而削弱對(duì)音樂(lè)的聆聽(tīng)，通過(guò)分析我發(fā)現(xiàn)作曲家在影像剪輯中采用較少的素材、個(gè)體素材較長(zhǎng)時(shí)間停留的手法，對(duì)影像與音樂(lè)之間的這種矛盾起到了有效的緩沖。2014 年筆者在譚盾上海工作室一樓大廳對(duì)他采訪時(shí)，一個(gè)三軌的移動(dòng)視頻模擬播放裝置引起了筆者的注意，從這一工作程序也可以看到作曲家在創(chuàng)作中對(duì)于視頻的剪輯、結(jié)構(gòu)的組織，除了具有理性的構(gòu)思外，還具有多種可能的音影對(duì)位模擬實(shí)踐。

在譚盾的作品中，不僅《地圖》、《女書》的影像形成具象布局與樂(lè)隊(duì)的呼應(yīng)，他創(chuàng)作的《圓》[1]《圓》創(chuàng)作于1992 年，為四個(gè)三重奏、指揮和觀眾而作。，通過(guò)譜面、樂(lè)隊(duì)布局設(shè)計(jì)形成圓的視覺(jué)映射“天人合一”思想的體現(xiàn)，也是視覺(jué)布局的一種表現(xiàn)。而他的實(shí)景園林昆曲《牡丹亭》[2]實(shí)景園林昆曲《牡丹亭》，上演于2010 年，上海朱家角，每年定期演出。、建筑音樂(lè)《天頂上的一滴水》[3]建筑音樂(lè)《水樂(lè)堂·天頂上的一滴水》，上演于2010 年，上海朱家角水樂(lè)堂，常年每周六演出。等這種融有實(shí)景元素、情景偶然因素的作品，其視覺(jué)材料則更具開(kāi)放布局的特點(diǎn)。因此，在他的音樂(lè)中，視覺(jué)布局的不同與視覺(jué)材料相關(guān)，而不同的視覺(jué)材料和布局又形成不同的視覺(jué)結(jié)構(gòu)。

（二）音影在大腦中的生成與創(chuàng)作技術(shù)解析

1.大腦對(duì)音樂(lè)和影像的組織

大腦主要通過(guò)神經(jīng)網(wǎng)絡(luò)實(shí)現(xiàn)其加工過(guò)程和諸多功能[4]根據(jù)大腦半球一般的功能，通常將其劃分為四個(gè)區(qū)域：枕葉（視覺(jué)）、頂葉（感覺(jué)加工）、顳葉（聽(tīng)覺(jué)感知、語(yǔ)言、視覺(jué)加工）、額葉（長(zhǎng)期計(jì)劃、運(yùn)動(dòng)控制及言語(yǔ)生成）。（【美】多納德·霍杰斯、戴維·西博爾德.人類的音樂(lè)經(jīng)驗(yàn)——音樂(lè)心理學(xué)導(dǎo)論[M].劉沛，譯.中央音樂(lè)學(xué)院出版社，2015：170.），比如知覺(jué)、注意、記憶等。觀眾在對(duì)樂(lè)隊(duì)與影像整體感知時(shí)，大腦將視覺(jué)和聽(tīng)覺(jué)信息集合起來(lái)，加深對(duì)音樂(lè)形象的感受。也就是說(shuō)受眾的大腦主要在“會(huì)聚區(qū)”[5]多模式整合區(qū)域這個(gè)區(qū)域也被稱作為會(huì)聚區(qū)，將來(lái)自于眼睛、耳朵等部位的感覺(jué)信息整合為一個(gè)整體。（參見(jiàn)【美】多納德·霍杰斯、戴維·西博爾德.人類的音樂(lè)經(jīng)驗(yàn)——音樂(lè)心理學(xué)導(dǎo)論[M].劉沛，譯.中央音樂(lè)學(xué)院出版社，2015：189.）將視覺(jué)信息和聽(tīng)覺(jué)信息加以整合、處理，通過(guò)大腦機(jī)制轉(zhuǎn)換對(duì)所獲得信息加以組織。

聽(tīng)眾往往對(duì)于某種音響的感受和相應(yīng)視覺(jué)現(xiàn)象的接受是一致的，形成一種固定心理上的聯(lián)系，這是由于聽(tīng)覺(jué)感受和視覺(jué)形象之間存在著一種對(duì)應(yīng)的關(guān)系，這種視聽(tīng)覺(jué)現(xiàn)象在人們心理感知中的關(guān)系被稱為“通感”[6]通感是指某個(gè)感官接收到具有另一感官特征的暗示，例如由聲音而引起光和色彩的感覺(jué)或有光和色彩而引起的聲音的感覺(jué)。（參見(jiàn)本杰明·李·沃爾夫.習(xí)慣性思維、行為與語(yǔ)言的關(guān)系.論語(yǔ)言、思維和現(xiàn)實(shí)——沃爾夫文集[C].高一虹等，譯.湖南教育出版社，2001：144.）。也就是，當(dāng)某種現(xiàn)象刺激人的聽(tīng)覺(jué)感官時(shí)會(huì)引起視覺(jué)感官相應(yīng)的反應(yīng)，從而產(chǎn)生與聽(tīng)覺(jué)現(xiàn)象相應(yīng)的視覺(jué)現(xiàn)象，反之亦然。多媒體音樂(lè)就是將這種通感現(xiàn)象用影像和藝術(shù)音樂(lè)同步的形式進(jìn)行呈現(xiàn)，并且具體、明確的展示出來(lái)，使多媒體音樂(lè)達(dá)到視聽(tīng)合一的真實(shí)再現(xiàn)。

2.聽(tīng)覺(jué)藝術(shù)、視覺(jué)藝術(shù)與綜合藝術(shù)

“視覺(jué)是極為復(fù)雜的感覺(jué)，不僅是將來(lái)自視網(wǎng)膜的視信息傳至大腦，還要靠其他感覺(jué)和其他中樞聯(lián)合，靠經(jīng)驗(yàn)、記憶、分析、識(shí)別等極為復(fù)雜的過(guò)程才能形成視覺(jué)。”[1]丁月華、李波、朱錦秀.視覺(jué)藝術(shù)心理學(xué)[M].西南師范大學(xué)出版社，2012：38.視覺(jué)藝術(shù)是基于視覺(jué)特點(diǎn)可以為人所直觀的造型藝術(shù)，相對(duì)于聽(tīng)覺(jué)藝術(shù)而論，具有一定可觸摸性，包括繪畫、雕塑、攝影、建筑、影視等藝術(shù)。聽(tīng)覺(jué)藝術(shù)是不可觸摸的，不像視覺(jué)藝術(shù)具體可見(jiàn)。純音樂(lè)是聽(tīng)覺(jué)藝術(shù)，也是時(shí)間藝術(shù)，在調(diào)性音樂(lè)中常通過(guò)音色、音高、時(shí)值、強(qiáng)弱等特性使其具有豐富多彩的藝術(shù)表現(xiàn)力。

“視覺(jué)藝術(shù)是由點(diǎn)、線、面、色彩等為基本語(yǔ)言單位，再由這些基本語(yǔ)言單位構(gòu)建成具有完整形態(tài)和形式的藝術(shù)形象。”[2]同上：221.在視覺(jué)藝術(shù)中，點(diǎn)、線、面三者不但是繪畫的基本構(gòu)成元素，在舞臺(tái)藝術(shù)和電影畫面呈現(xiàn)等具有視覺(jué)特點(diǎn)的形式中，它同樣是視覺(jué)結(jié)構(gòu)形成的重要元素。在聽(tīng)覺(jué)藝術(shù)中，音樂(lè)結(jié)構(gòu)離不開(kāi)音樂(lè)元素相互組織形成的邏輯進(jìn)行，較之視覺(jué)藝術(shù)對(duì)色彩的直接感知，聽(tīng)覺(jué)對(duì)于音樂(lè)色彩的感知也可以在通感中獲得。雖然聽(tīng)覺(jué)藝術(shù)與視覺(jué)藝術(shù)感知方式不同、結(jié)構(gòu)組織元素不同，但是仍具有藝術(shù)共性。

影視藝術(shù)是集合了時(shí)間藝術(shù)與空間藝術(shù)的復(fù)合體，屬于綜合藝術(shù)，具有視覺(jué)藝術(shù)、聽(tīng)覺(jué)藝術(shù)的雙重屬性。本文所述的多媒體音樂(lè)集結(jié)了純音樂(lè)和視覺(jué)藝術(shù)的特點(diǎn)，比如《女書》中微電影本身的綜合藝術(shù)性質(zhì)與樂(lè)隊(duì)的聽(tīng)覺(jué)藝術(shù)特性相結(jié)合，形成了這種多媒介藝術(shù)形式獨(dú)特的特征和不同的審美感受。在《女書》第六樂(lè)章“思念老同”中，影像位于中間視屏，首先呈現(xiàn)的是一幅人物半身近景景別，居畫面中間位置，隨后鏡頭逐漸推進(jìn)，變?yōu)閷?duì)主人公的面部特寫。這里通過(guò)持續(xù)聚焦的方式對(duì)一個(gè)人物的畫面進(jìn)行強(qiáng)調(diào)，帶給觀眾強(qiáng)烈的視覺(jué)刺激和心理感受。畫面主人公——“女書”演唱者飽經(jīng)滄桑的臉上，深深的皺紋讓觀眾感受到來(lái)自她內(nèi)心深處憂傷的思念之情。這樣的畫面處理避免長(zhǎng)時(shí)間強(qiáng)調(diào)“動(dòng)態(tài)”和多變視覺(jué)元素造成觀眾欣賞的視覺(jué)依賴，讓觀眾通過(guò)相對(duì)單一的畫面兼顧聽(tīng)覺(jué)對(duì)音樂(lè)的理解，主動(dòng)回到對(duì)音樂(lè)的感知上來(lái)。

3.音影組織

以《地圖》、《女書》為例，這兩部作品的多媒體影像采樣來(lái)自“田野”，因此視頻中的音樂(lè)事項(xiàng)具有表演本身的不確定性和舞臺(tái)演出的不可調(diào)控性。也就是，實(shí)時(shí)的樂(lè)隊(duì)演出與指揮家對(duì)作品的現(xiàn)場(chǎng)處理具有可調(diào)控性。相對(duì)而言，這里的視頻播放因由前期剪輯而成，視頻本身的演唱、演奏及一切音樂(lè)行為具有現(xiàn)場(chǎng)不可更改性，比如速度的疾緩、情緒的調(diào)動(dòng)等方面（視頻播放師的功能在此不計(jì)入）。而視頻中音樂(lè)行為表現(xiàn)出的“不確定性”與我國(guó)傳統(tǒng)音樂(lè)演奏（唱）的彈性模式相關(guān)，民間音樂(lè)在演奏和演唱中常較為自由，并具有一定的即興性，尤為突出的體現(xiàn)在民間音樂(lè)的伸縮性節(jié)奏和彈性速率上。多媒體影像的“不可調(diào)控性”與樂(lè)隊(duì)在協(xié)同演出中產(chǎn)生一定的矛盾，這就需要指揮家在排練和演出時(shí)建立一種適應(yīng)多媒體影像和樂(lè)隊(duì)共通的手勢(shì)，從多媒體影像的音樂(lè)行為中提取相對(duì)“量化”的節(jié)拍。

二、認(rèn)知中的音影結(jié)構(gòu)對(duì)位樣態(tài)

（一）影像文本與視覺(jué)文本結(jié)構(gòu)的“結(jié)構(gòu)對(duì)位”

“音樂(lè)多聲部、多層次的呈現(xiàn)特點(diǎn)肯定會(huì)導(dǎo)致多重結(jié)構(gòu)的產(chǎn)生，而在共時(shí)性狀態(tài)下的多重結(jié)構(gòu)也一定會(huì)給聽(tīng)覺(jué)結(jié)構(gòu)帶來(lái)認(rèn)知上的困惑?！盵1]賈達(dá)群.文本與聽(tīng)覺(jué)結(jié)構(gòu)的二元性暨結(jié)構(gòu)認(rèn)知的同一性探賾[J].音樂(lè)藝術(shù)，2016(1)：129-138 .同樣，在多媒體介入的具有復(fù)合特點(diǎn)的音樂(lè)作品中，影像、樂(lè)隊(duì)多聲部及其音畫呈現(xiàn)出的多重結(jié)構(gòu)特點(diǎn)，也會(huì)導(dǎo)致聽(tīng)覺(jué)結(jié)構(gòu)和視覺(jué)結(jié)構(gòu)在認(rèn)知上產(chǎn)生與文本不同步的現(xiàn)象。“理論上對(duì)一首作品結(jié)構(gòu)分析得出一種結(jié)論，而在聽(tīng)覺(jué)上卻得出另外一種結(jié)構(gòu)，這樣一種理論分析與聽(tīng)覺(jué)分析的不一致便構(gòu)成聽(tīng)覺(jué)結(jié)構(gòu)與文本結(jié)構(gòu)的‘結(jié)構(gòu)對(duì)位’?！盵2]賈達(dá)群.結(jié)構(gòu)詩(shī)學(xué)——關(guān)于音樂(lè)結(jié)構(gòu)若干問(wèn)題的討論[M].上海音樂(lè)學(xué)院出版社，2009：157.對(duì)于視覺(jué)介入的這種音樂(lè)作品，理論的分析結(jié)論與視覺(jué)上得出的結(jié)構(gòu)不一致現(xiàn)象，即形成影像文本與視覺(jué)文本結(jié)構(gòu)的“結(jié)構(gòu)對(duì)位”。比如，《女書》第四樂(lè)章《哭嫁歌》就表現(xiàn)出了這一結(jié)構(gòu)特征。

《女書》第四樂(lè)章《哭嫁歌》以哭伴歌、哭唱并行，表現(xiàn)了母女間分離時(shí)的惜別之情。從畫面角度來(lái)看，這一樂(lè)章由同一場(chǎng)景的三個(gè)分割畫面組成，中間屏幕為手巾畫面，右邊母親哭泣的視頻和左邊女兒抽泣的視頻通過(guò)中間屏幕連接，左右兩個(gè)對(duì)比影像為中間屏幕的延伸畫面，呈現(xiàn)出延伸型非對(duì)稱拱形畫面結(jié)構(gòu)。然而，這一樂(lè)章的三個(gè)畫面主體從左前至中后到右前又依次為人、物、人的對(duì)比畫面布局，因此從視覺(jué)上來(lái)看，畫面布局又呈現(xiàn)出三分性畫面結(jié)構(gòu)。這便形成影像文本結(jié)構(gòu)與視覺(jué)結(jié)構(gòu)的“結(jié)構(gòu)對(duì)位”，即影像靜態(tài)文本中的延伸型非對(duì)稱拱形畫面結(jié)構(gòu)與視覺(jué)的三分性畫面結(jié)構(gòu)的結(jié)構(gòu)對(duì)位。

圖1.影像文本結(jié)構(gòu)與視覺(jué)結(jié)構(gòu)的“結(jié)構(gòu)對(duì)位”圖

（二）心理結(jié)構(gòu)與作品文本結(jié)構(gòu)的“結(jié)構(gòu)對(duì)位”

觀眾對(duì)于音樂(lè)的感知常常與作曲家創(chuàng)作時(shí)所設(shè)計(jì)的文本結(jié)構(gòu)有所出入，這就使心理的視聽(tīng)結(jié)構(gòu)與音樂(lè)本身的結(jié)構(gòu)之間出現(xiàn)不同步現(xiàn)象。多種媒介的藝術(shù)音樂(lè)由于創(chuàng)作元素的多樣化常產(chǎn)生多重結(jié)構(gòu)現(xiàn)象，以多媒體音樂(lè)《地圖》、《女書》為例，這兩部作品是以音樂(lè)為主導(dǎo)，由多媒體承載、綜合了其他形式的復(fù)合性的音樂(lè)作品，音視頻復(fù)合這一特點(diǎn)使它們與傳統(tǒng)純音響的音樂(lè)形式有所區(qū)別。觀眾在欣賞音樂(lè)時(shí)，視覺(jué)對(duì)畫面的感知和聽(tīng)覺(jué)對(duì)音樂(lè)的接收同時(shí)發(fā)生，這就使受眾在面對(duì)作曲家創(chuàng)作的文本結(jié)構(gòu)之外，常產(chǎn)生一種自我感知到的、新的音樂(lè)或音影結(jié)構(gòu)，也就是心理音樂(lè)或心理音影結(jié)構(gòu)。這一心理結(jié)構(gòu)與既定的原文本音樂(lè)結(jié)構(gòu)或動(dòng)態(tài)音樂(lè)結(jié)構(gòu)形成非同步進(jìn)行，形成一種特殊的結(jié)構(gòu)對(duì)位。那么，這種不同步結(jié)構(gòu)的形成除了觀眾本身具有不受作曲家調(diào)控的特性外，與作曲家和指揮家是否能讓具有主動(dòng)性的觀眾理解作品和注意力集中在作品上，以及與觀眾的藝術(shù)經(jīng)驗(yàn)積累、是否具有與作品相應(yīng)的審美也有關(guān)。

（三）具象視覺(jué)與音樂(lè)意象處理的“結(jié)構(gòu)對(duì)位”

具象視覺(jué)是指將實(shí)際存在的物象通過(guò)視覺(jué)表達(dá)的方式呈現(xiàn)，包括對(duì)視覺(jué)對(duì)象特征的細(xì)節(jié)寫實(shí)。音樂(lè)處理中的“意象”與心理學(xué)上的“意象”不同，心理學(xué)上的“意象”是本能性的反映，是人對(duì)感知到的外界事物的普遍特征的記憶思維，具有選擇性特點(diǎn)。這里音樂(lè)“意象”的存在是從對(duì)音樂(lè)事項(xiàng)感知記憶到音樂(lè)藝術(shù)處理的主動(dòng)取舍，當(dāng)具象音樂(lè)事項(xiàng)以多媒體視頻這種視覺(jué)藝術(shù)形式出現(xiàn)時(shí),樂(lè)隊(duì)音樂(lè)則存在是否與視頻形成一個(gè)整體的問(wèn)題，這也是作曲家對(duì)具象音樂(lè)形象進(jìn)行感性處理的思維過(guò)程。

具象視覺(jué)的樂(lè)隊(duì)音樂(lè)意象處理思維，常源于樂(lè)隊(duì)音樂(lè)對(duì)視頻中具象形象的“寫意”加工,也就是由具象寫實(shí)形象引發(fā)的向音樂(lè)“寫意”思維至“寫實(shí)”過(guò)程的轉(zhuǎn)化?！耙狻痹谶@里可以指印象，而“象”則為“形象”,包括通過(guò)視覺(jué)表達(dá)對(duì)舍去細(xì)節(jié)的真實(shí)表現(xiàn)。這種轉(zhuǎn)化過(guò)程體現(xiàn)了作曲家本人在視頻采集、編輯過(guò)程中對(duì)一切與音樂(lè)事項(xiàng)有關(guān)的感知，在創(chuàng)作中這種感知對(duì)于音樂(lè)和音視頻結(jié)構(gòu)的構(gòu)思是“寫意”的，而實(shí)際音樂(lè)創(chuàng)作層面的具體細(xì)節(jié)則是落在“寫實(shí)”上。這一具象向意向的轉(zhuǎn)化過(guò)程及各自呈現(xiàn)出的結(jié)構(gòu)，以及“寫意”與“寫實(shí)”結(jié)構(gòu)間也會(huì)產(chǎn)生一種隱性的結(jié)構(gòu)對(duì)位。

三、聽(tīng)覺(jué)與視覺(jué)共同作用下的多重結(jié)構(gòu)現(xiàn)象審美

（一）復(fù)合性特點(diǎn)音樂(lè)的情緒

多媒體音樂(lè)作為視覺(jué)符號(hào)形象鮮明、具體，意義明確、特指，影像清晰呈現(xiàn)了所表現(xiàn)事物的本來(lái)面貌。作為直觀藝術(shù)，它具有通俗易懂的特點(diǎn)，能將視頻中所蘊(yùn)含的思想以影像表意的方式表達(dá)出來(lái)。視覺(jué)畫面的鮮明性和直觀性，能夠激發(fā)起觀眾尋找隱藏在畫面背后的、具有概括性的抽象意義，在多媒體音樂(lè)中，單一的視頻具象表現(xiàn)并不一定能盡抒作曲家之意。因此，多媒體視頻和藝術(shù)音樂(lè)創(chuàng)作相結(jié)合，則更能喚起觀眾對(duì)作品情感意義的感知。

筆者此處引用麥克馬倫（McMullen，1996）的觀點(diǎn)，以“能量的激活的要素”[1]如果某個(gè)音樂(lè)體驗(yàn)在聽(tīng)者的感知中缺乏興奮和強(qiáng)度，這一體驗(yàn)的評(píng)價(jià)的積極程度就較低，或接近拒絕的那一端。隨著激活的遞增，體驗(yàn)的評(píng)價(jià)逐漸走向樂(lè)觀，音樂(lè)的體驗(yàn)也將實(shí)現(xiàn)最大化的接納。強(qiáng)度的遞增如果超越了最佳水平，那么音樂(lè)體驗(yàn)就退往拒絕的一端。（參見(jiàn)【美】多納德·霍杰斯、戴維·西博爾德.人類的音樂(lè)經(jīng)驗(yàn)——音樂(lè)心理學(xué)導(dǎo)論[M].劉沛，譯.中央音樂(lè)學(xué)院出版社，2015：223.）為點(diǎn)，對(duì)音響與視頻同時(shí)刺激觀眾的這種多媒體音樂(lè)形式，在觀眾感知中所起的引導(dǎo)性體驗(yàn)評(píng)價(jià)加以說(shuō)明。

圖2.情感/審美——視覺(jué)反應(yīng)相互作用二維框架[2]此圖基于【美】多納德·霍杰斯、戴維·西博爾德所著的《人類的音樂(lè)經(jīng)驗(yàn)——音樂(lè)心理學(xué)導(dǎo)論》一書中“情感/審美反應(yīng)的二維框架”一圖設(shè)計(jì)。

見(jiàn)圖2 所示，觀眾在感知音樂(lè)所表現(xiàn)的情緒時(shí)，當(dāng)激活的程度（就結(jié)構(gòu)和能量而言）居于中間點(diǎn)時(shí)，接納程度相對(duì)較高，而當(dāng)激活點(diǎn)的位置過(guò)低或過(guò)高時(shí)，就會(huì)出現(xiàn)趨于較低或排斥的音樂(lè)體驗(yàn)。多媒體影像可以在音樂(lè)處于過(guò)低或過(guò)高的激活點(diǎn)時(shí)，通過(guò)視覺(jué)刺激改變接納程度。視覺(jué)表象這一心理機(jī)制在音樂(lè)情緒中起著重要的作用，可以引導(dǎo)聽(tīng)眾想象與音樂(lè)具有緊密聯(lián)系的情節(jié)；而多媒體音樂(lè)形式在引導(dǎo)觀眾情緒時(shí)，常通過(guò)畫面的直接刺激，使觀眾對(duì)音響的反應(yīng)與畫面“直線對(duì)接”，加強(qiáng)音樂(lè)形象傳遞的確定性。

（二）補(bǔ)充體驗(yàn)

多媒體音樂(lè)形式調(diào)動(dòng)了觀眾的聽(tīng)覺(jué)和視覺(jué)，并深化了音樂(lè)表現(xiàn)，使音樂(lè)存在于聽(tīng)眾想象和聯(lián)想的意象上，通過(guò)影像轉(zhuǎn)化為具象。因此，產(chǎn)生了在視覺(jué)中感知音樂(lè)，令音樂(lè)在影像中得到解釋和補(bǔ)充的體驗(yàn)。

（三）結(jié)構(gòu)的多解性

“作曲說(shuō)到底就是一種多聲部、多元素、多結(jié)構(gòu)的共時(shí)性想象、安排、控制和創(chuàng)造的活動(dòng)。”[1]賈達(dá)群.結(jié)構(gòu)詩(shī)學(xué)——關(guān)于音樂(lè)結(jié)構(gòu)若干問(wèn)題的討論[M].上海音樂(lè)學(xué)院出版社，2009：149.多媒體音樂(lè)是將樂(lè)隊(duì)的音響性和視覺(jué)藝術(shù)的可視性特點(diǎn)結(jié)合起來(lái)，形成不同載體的多聲部（多媒體音響和樂(lè)隊(duì)音響）、多元素（音樂(lè)諸元素和影像諸元素）、多結(jié)構(gòu)（音樂(lè)結(jié)構(gòu)和影像結(jié)構(gòu)）的共時(shí)性形態(tài)，由不同的諸結(jié)構(gòu)元素按照一定的內(nèi)在規(guī)律和邏輯發(fā)展建構(gòu)而成。因此，多媒體音樂(lè)是一個(gè)多樣化、立體性的藝術(shù)形態(tài)，它的結(jié)構(gòu)表現(xiàn)為音樂(lè)、視覺(jué)諸結(jié)構(gòu)元素在結(jié)構(gòu)生成過(guò)程中的復(fù)雜相互邏輯關(guān)系。純音響性音樂(lè)結(jié)構(gòu)生成常由各音樂(lè)表現(xiàn)手段相互作用所致，每一元素因自身結(jié)構(gòu)變化而使其與它元素共時(shí)性結(jié)合時(shí)引起新的結(jié)構(gòu)形態(tài)，形成多重結(jié)構(gòu)現(xiàn)象。而多媒體音樂(lè)內(nèi)部音樂(lè)諸元素和視覺(jué)元素的共時(shí)運(yùn)行，必然形成更加復(fù)雜和多解的結(jié)構(gòu)形態(tài)。

賈達(dá)群教授認(rèn)為：“對(duì)多重結(jié)構(gòu)的認(rèn)知和理解，就如同觀察晶體一樣——在不同的光線照耀下，從不同的觀察角度來(lái)審視，就會(huì)得到完全不同的造型輪廓及結(jié)構(gòu)樣態(tài)?！盵2]賈達(dá)群.文本與聽(tīng)覺(jué)結(jié)構(gòu)的二元性暨結(jié)構(gòu)認(rèn)知的同一性探賾[J].音樂(lè)藝術(shù)，2016(1)：129-138.因此，在欣賞、研究含有多媒體手段的這種音樂(lè)形式時(shí)，對(duì)影像與音樂(lè)這兩大機(jī)制的相互作用，以及結(jié)構(gòu)元素之間產(chǎn)生的復(fù)雜相互關(guān)系的認(rèn)識(shí)上，要注意到它的結(jié)構(gòu)樣態(tài)的多重屬性。

結(jié)語(yǔ)

多媒體音樂(lè)的視聽(tīng)結(jié)合特點(diǎn)不同于歌劇、戲曲等綜合藝術(shù)形式，它是含有現(xiàn)代多媒體技術(shù)手段的復(fù)合性藝術(shù)，是綜合了視覺(jué)文化的圖像感知特點(diǎn)和純音樂(lè)聆聽(tīng)方式的一種綜合藝術(shù)，也是一種可見(jiàn)的音樂(lè)形式。在對(duì)多媒體音樂(lè)《地圖》、《女書》的研究中，筆者發(fā)現(xiàn)對(duì)于譚盾創(chuàng)作中這種以音樂(lè)為主導(dǎo)，由多媒體承載、綜合了其他形式（或媒介）的復(fù)合性的音樂(lè)作品進(jìn)行分析，單純關(guān)注音樂(lè)形態(tài)是無(wú)法概其作品全貌的。作曲家的創(chuàng)作思維是多元的，創(chuàng)作技術(shù)是融合的，作品的意義是多維度的，而且呈現(xiàn)的結(jié)構(gòu)也是具有動(dòng)態(tài)多重屬性的。那么，從認(rèn)知視角對(duì)聽(tīng)覺(jué)與視覺(jué)因素相互介入中的多重結(jié)構(gòu)現(xiàn)象加以分析，筆者認(rèn)為這可以成為多媒體音樂(lè)研究的路徑之一。因?yàn)?，“結(jié)構(gòu)對(duì)位”分析方法本身具有開(kāi)放性的認(rèn)識(shí)思維，不排斥其他方法對(duì)其形成的作用和影響，與其他分析方法可互釋?？偟膩?lái)說(shuō)，在認(rèn)知語(yǔ)境下對(duì)具有視聽(tīng)結(jié)合特點(diǎn)的多媒體音樂(lè)分析，可不拘于對(duì)多重結(jié)構(gòu)樣態(tài)中材料間相互關(guān)系的研究，可將視域延伸至作曲家創(chuàng)作中的內(nèi)覺(jué)向?qū)徝栏兄霓D(zhuǎn)換，從而深層揭示這類作品的多重結(jié)構(gòu)思維。