張嵋琳

(湖北理工學(xué)院 外國語學(xué)院，湖北 黃石 435003)

在信息技術(shù)時(shí)代，人們的交際是一種多種模態(tài)交互作用關(guān)系，主要表現(xiàn)為文字、圖表、語言、音樂、視頻、身姿、手勢等。多模態(tài)話語為視、聽、觸等多種感覺系統(tǒng)共同參與的，經(jīng)畫面、語言、聲音、姿勢等多種信息載體同時(shí)作用下完成的交際現(xiàn)象[1]。目前階段，對(duì)于多模態(tài)話語交際現(xiàn)象的研究進(jìn)入一個(gè)嶄新階段，眾多學(xué)者的研究成果表明不僅語言符號(hào)在語篇意義表達(dá)過程中作用顯著，視覺符號(hào)承載的諸多信息同樣地位重要[2]。

目前大多數(shù)多模態(tài)話語分析主要集中在對(duì)圖像、符號(hào)、圖表等靜態(tài)語篇的研究上,對(duì)視頻、電視、電影等動(dòng)態(tài)語篇的研究分析相對(duì)而言比較缺乏[3]。TED演講視頻是全球比較有影響力的公眾視頻，是一種典型的動(dòng)態(tài)多模態(tài)話語語篇。本文將以張德祿提出的“動(dòng)態(tài)多模態(tài)話語分析理論框架”為基礎(chǔ)，從文化語境和情景語境層面上展開對(duì)Richard St. John的《成功的八個(gè)秘訣》的分析，首先以語篇分析作為基礎(chǔ)，深度探析視、聽等各種模態(tài)間所存在的協(xié)同性與關(guān)系整合問題，探析在進(jìn)行動(dòng)態(tài)TED演講視頻的過程中不同模態(tài)間所存在的協(xié)同性問題。

1 動(dòng)態(tài)多模態(tài)話語分析理論框架

圖1 動(dòng)態(tài)多模態(tài)話語分析框架

在Halliday所建立的系統(tǒng)功能語言學(xué)基礎(chǔ)上，綜合了Lim建立的綜合性多符號(hào)模式框架研究成果，張德祿創(chuàng)造性提出動(dòng)態(tài)多模態(tài)話語分析綜合理論框架，見圖1。該理論模型框架涵蓋了文化語境、情景語境、內(nèi)容及表達(dá)四個(gè)邏輯層面。在特定的文化語境中，講話者為達(dá)到一定的交際目的會(huì)根據(jù)不同的情景語境(語場、語旨和語示)選擇視覺模態(tài)(圖像意義)和聽覺模態(tài)(聲音意義)完成意義表達(dá)，這兩種模態(tài)之間既有協(xié)助，又能進(jìn)行相互補(bǔ)充和轉(zhuǎn)換，從而保證了話語整體意境之完整。

這樣，受話者便能在整個(gè)交際過程中完整地接收和理解話語信息[4]。

本文選取動(dòng)態(tài)TED演講視頻為研究對(duì)象，根據(jù)上述動(dòng)態(tài)多模態(tài)話語分析框架，演講者在選擇表達(dá)意義模態(tài)過程中，主要選擇視、聽兩種模態(tài)之間的協(xié)調(diào)、補(bǔ)充，進(jìn)而保證語境、語義上的完整。不同模態(tài)之間的關(guān)系在不同的時(shí)間段呈現(xiàn)不同的主次關(guān)系，是一個(gè)動(dòng)態(tài)變化的視聽過程。如圖1所示，張德祿理論指明不同話語模態(tài)間存在著互補(bǔ)性與非互補(bǔ)性兩種基本關(guān)系。其中，互補(bǔ)關(guān)系即是交際完成過程中單一的模態(tài)話語并不能將語義完整表達(dá)，必須輔以另外模態(tài)進(jìn)行補(bǔ)充，在進(jìn)行補(bǔ)充的過程中其相互間存在著強(qiáng)化與非強(qiáng)化雙模式，強(qiáng)化模式下需指定一種主模態(tài)，非強(qiáng)化模式下各種模態(tài)所占據(jù)的地位是均等的，能夠分為聯(lián)合、協(xié)調(diào)及交叉三種形式；非互補(bǔ)關(guān)系總體來看存在著內(nèi)包、交疊以及語境交互三種核心關(guān)系。比如，多數(shù)模態(tài)下語言位于話語整體交際模式的核心，而身姿、手勢、顏色等則起到強(qiáng)化的作用。視、聽兩種模態(tài)間的變換與聯(lián)系成為話語建構(gòu)之關(guān)鍵。想要完整表達(dá)一個(gè)意義，需要不同模態(tài)之間的密切配合、補(bǔ)充及協(xié)調(diào)[4]。

2 TED演講視頻案例分析

2.1 語料的選擇和分析

TED來自技術(shù)(technology)、娛樂(entertainment)、設(shè)計(jì)(design)英文單詞各取首字母組合后的縮寫，是于1984年由美國建筑設(shè)計(jì)師理查德·沃曼創(chuàng)辦的一家私有非營利機(jī)構(gòu)，其宗旨是“用思想的力量來改變世界”，目的是向人們傳播“值得傳遞的新思想、新信息、新觀點(diǎn)”。每年，TED大會(huì)都會(huì)邀請(qǐng)各領(lǐng)域的杰出人物和專家分享關(guān)于科學(xué)技術(shù)、文學(xué)、環(huán)境、社會(huì)、人類哲學(xué)等各方面的觀點(diǎn)和信息。從2006年6月起，TED演講視頻上傳至互聯(lián)網(wǎng)，供全球的觀眾免費(fèi)下載和觀看[3]。2009年成立的“TED開放翻譯計(jì)劃”使越來越多精彩的TED演講視頻被譯成一百多種語言在全球范圍內(nèi)播放。現(xiàn)在，TED 大會(huì)舉行的過程中，綜合統(tǒng)計(jì)的全球性訪問總量超過40億，“互聯(lián)網(wǎng)+演講”模式已經(jīng)成為網(wǎng)絡(luò)交際之重要形式，這是電子信息技術(shù)時(shí)代演講模式創(chuàng)新的重要形式。

作為經(jīng)典的TED演講視頻之一的Richard St. John的《成功的八個(gè)秘訣》頗受歡迎，一般的TED演講視頻時(shí)長為18分鐘左右，但約翰在3分半鐘的時(shí)間里清楚透徹地向觀眾講解了成功的8個(gè)要點(diǎn)。視頻短小精悍，但觀點(diǎn)邏輯鮮明，深深打動(dòng)了在場的所有觀眾并給其留下了深刻的印象。這段視頻涵蓋了PPT演示、視頻、音頻、身勢等多種動(dòng)態(tài)多模態(tài)語料，包括了視、聽等多種模態(tài)之間的轉(zhuǎn)換、協(xié)同、補(bǔ)充，并且涉及到文字、姿勢、音響、色調(diào)、電腦等諸多符號(hào)信息的表達(dá)，從而將整個(gè)演講視頻統(tǒng)一成為一個(gè)連貫性、邏輯性的協(xié)調(diào)整體。尤其是其涉及到PPT演示、視頻、語言、手勢四種核心要素，將該語篇統(tǒng)一成為具有典型特征的動(dòng)態(tài)多模態(tài)話語。

2.2 案例語篇切分

演講視頻的語篇發(fā)展具有一定的階段特征，通常包含起始、闡述主題、演講高潮與結(jié)束四個(gè)階段，各階段中自有特定情節(jié)結(jié)構(gòu)。本次研究依據(jù)張德祿提出的對(duì)動(dòng)態(tài)多模態(tài)語篇切分的三個(gè)標(biāo)準(zhǔn)，即語篇結(jié)構(gòu)、經(jīng)驗(yàn)意義、前景化的事物和特征對(duì)3分30秒的TED演講視頻《成功的八個(gè)秘訣》進(jìn)行了語篇切分。一方面，語篇中各主題是進(jìn)行話語切分之主要依據(jù)，每一個(gè)話題內(nèi)又可以細(xì)分成諸多部分與階段，更進(jìn)一步講各階段中又充分包含了不同的次要單位；另一方面，隨著語篇內(nèi)容的進(jìn)行，其主題發(fā)生轉(zhuǎn)化，其轉(zhuǎn)折點(diǎn)即可作為單位切分的界限，此后將開始展示新的語篇主題，涉及到參與者角色與具體情景的改變；再者，值得注意的是同語篇主題密切關(guān)聯(lián)的前景事物與特征將作為切分進(jìn)行時(shí)的重點(diǎn)標(biāo)識(shí)。從語篇整體上來看，層面、各圖像將呈現(xiàn)一個(gè)事件，而相互聯(lián)系、交叉的事件能夠構(gòu)成一個(gè)情節(jié)，多個(gè)情節(jié)最終構(gòu)成了一個(gè)故事或語篇[3]。

整體上看，該TED演講視頻由5個(gè)漸進(jìn)性、相互關(guān)聯(lián)的階段組成，每階段又能夠細(xì)致劃分為8個(gè)細(xì)致步驟與情節(jié)，單步驟獨(dú)自形成一個(gè)語篇結(jié)構(gòu)，又可細(xì)分為14個(gè)事件與圖像。事件將以圖像的形式展現(xiàn)出來，圖像標(biāo)均是一個(gè)獨(dú)立的語篇單位、語法過程及信息單位。

3 TED演講視頻案例語篇?jiǎng)討B(tài)多模態(tài)話語分析

3.1 TED演講視頻的文化語境

文化語境最早被提出是在人類學(xué)家馬林諾夫斯基關(guān)于“語境”的闡釋中。文化語境即同言語交際進(jìn)行密切關(guān)聯(lián)的社會(huì)文化背景，其主要構(gòu)成要素為社會(huì)規(guī)范、文化習(xí)俗。社會(huì)規(guī)范即當(dāng)前社會(huì)交際中對(duì)各種活動(dòng)制定的規(guī)則與限制；文化習(xí)俗則為人群在進(jìn)行長期的交流、交換等社會(huì)群體生活過程中經(jīng)長期磨合形成規(guī)則并逐漸成為習(xí)慣的一種生存模式，這是人進(jìn)行社會(huì)群體生活過程中心理、語言、行為等方面被普遍接受和適應(yīng)的默認(rèn)規(guī)則。文化語境在多模態(tài)交際中處于極為關(guān)鍵的地位，語境中的諸多內(nèi)容如文化背景、人物情緒、特定時(shí)空等要素同語言符號(hào)相結(jié)合之后，便使復(fù)雜、多義的語言符號(hào)的諸多歧義被舍去，從而表達(dá)準(zhǔn)確的含義，同時(shí)語境又能夠豐富語言符號(hào)自身本意上表達(dá)的不足，賦予語言符號(hào)更多層面上的含義。可以說，語境是語言交際的承載者，語篇交際之最終目的必須通過這樣的載體向外表達(dá)。演講是一種以聲、像為主的公共交際活動(dòng)，多數(shù)在公眾場所進(jìn)行，主要的手段為語言，輔助手段包括姿勢等，最終達(dá)到聲情并茂、準(zhǔn)確無誤地向公眾闡述自身觀點(diǎn)的目的[5]。

以前的演講形式比較單一，主要以演講者的語言為主要信息傳遞方式，現(xiàn)而在當(dāng)前信息技術(shù)極大普及的時(shí)代中，多媒體成為了演講能夠完成的重要輔助措施。其中，TED 推出的“互聯(lián)網(wǎng)+視頻”演講模式，受到廣大群眾的普遍歡迎。

本文選取的是Richard St. John的《成功的八個(gè)秘訣》中關(guān)于在當(dāng)今社會(huì)中如何使人們具備成功的基本素質(zhì)的TED演講。著名的TED演講家Richard St. John在7年的時(shí)間里通過對(duì)500多位優(yōu)秀的成功者進(jìn)行采訪，結(jié)合他們的成功經(jīng)歷提煉出成功的8個(gè)秘訣(Passion，Work， Good， Focus，Push，Serve， Ideas， persist)。之前他的這篇演講長達(dá)兩個(gè)小時(shí)，現(xiàn)在濃縮為短短的三分半鐘，并且整個(gè)演講配合幽默的語調(diào)和調(diào)侃式的語句，詼諧生動(dòng)，堪稱演講精華范本。

John此篇演講結(jié)構(gòu)包括：起始階段、主題闡釋階段、高潮表達(dá)階段及結(jié)尾階段。

1.開始:演講者向觀眾致意,提示演講即將開始,要大家關(guān)注演講主題。

2.演講主題:演講者以七年前一名高中生“怎樣才能成功”的問題引發(fā)思考，繼而通過7年共500次對(duì)成功人士的調(diào)查訪談向觀眾總結(jié)真正的成功之道，并以成功的TED-ster 為例進(jìn)行佐證。

3.演講高潮：用PPT課件圖片的形式一一向人們展示有效取得成功的八大秘訣：熱情(passion)、Work(努力)， Good(精通)， Focus(專注)，Push(強(qiáng)迫)，Serve(服務(wù))， Ideas(想法)， persist(毅力)。

4.結(jié)束: 演講者的祝愿和向觀眾致謝。

3.2 TED演講視頻的情景語境分析

情景語境包括語場(field))、語旨(tenor)和語式(mode)三個(gè)變項(xiàng)[6]。其中，語場指的是發(fā)生的事或正在被談?wù)摰氖?，具體指語篇所涉及的具體內(nèi)容。Richard St. John的本次演講的語場是2015年在美國TED會(huì)議上結(jié)合采訪的500多位成功人士總結(jié)出的8個(gè)成功秘訣。語旨是指交際雙方的社會(huì)角色關(guān)系。視頻中的語旨是美國TED大會(huì)媒體、著名的TED演講專家Richard St. John和在場的觀眾。語式為具體性交際環(huán)境內(nèi)語言發(fā)揮的作用，是進(jìn)行語言交際的媒介與渠道。案例中的語式是美國 TED大會(huì)采用互聯(lián)網(wǎng)技術(shù)對(duì)外免費(fèi)傳播的著名TED演講專家Richard St. John所進(jìn)行的精彩演講，其穿著得體，語言流利生動(dòng)，語速適中且富有感染力，演講者整個(gè)演講通過語言模態(tài)配合幽默的語調(diào)和調(diào)侃式的語句結(jié)合PPT圖片展示，同時(shí)伴有多樣的非言語交際模態(tài)(手勢、姿態(tài)、副語言)和視頻的圖像模態(tài)等共筑多模態(tài)意義之基石。

3.3 TED演講語篇?jiǎng)討B(tài)多模態(tài)模態(tài)間協(xié)同分析

前文詳細(xì)論述了TED演講視頻的語篇文化及情景語境，可知不同類型、種類符號(hào)組件之間的強(qiáng)化合作、協(xié)調(diào)、交叉、互補(bǔ)等能夠順利達(dá)到交際目的。在動(dòng)態(tài)視頻語篇中，視覺模態(tài)和聽覺模態(tài)的協(xié)作相互依存，相互輔助。因此,只有充分利用互聯(lián)網(wǎng)上視頻的傳播優(yōu)勢,才能將視頻的視、聽雙模態(tài)系統(tǒng)實(shí)現(xiàn)統(tǒng)一，從而達(dá)到在3分鐘內(nèi)向觀眾準(zhǔn)確傳達(dá)信息的目的，簡短而明確[7]。下文將依據(jù)TED視頻語篇探討各交際階段所采用的多模態(tài)話語交際模式中模態(tài)間的協(xié)同關(guān)系。

第一類：提示型交際模式。提示類型包括三個(gè)階段：提示演講開始、話題的引出和結(jié)束階段。首先，Rachard St. John站在演講臺(tái)右邊，隨意打開右邊的提示電腦，雙手打開，很自然地介紹了7年前偶遇一高中生并提出“怎樣做才能成功”的話題(第一階段)；接下來他通過PPT圖片向觀眾展示7年內(nèi)進(jìn)行的500人次優(yōu)秀成功人士專訪：“現(xiàn)在我就要告訴你們是什么帶來了成功，是什么啟發(fā)了TED演講者們”(第二階段)；“這個(gè)問題的答案很簡單：付4000塊來TED會(huì)場。 如果不能來，就做到以上八點(diǎn)——相信我， 這重要的八點(diǎn)就是通向成功的秘訣。 謝謝TED講演者參與我的采訪!”(第五階段)。此種類型交際模式主要模態(tài)為聽覺，其PPT幻燈為一種視覺模態(tài)，并未參與實(shí)際交際進(jìn)行程序，其主要作用僅為勾畫語境環(huán)境，與主模態(tài)間構(gòu)成了非互補(bǔ)關(guān)系。

第二類：信息提供型交際模式。第三階段為演講者向觀眾推出“成功的八個(gè)秘訣”信息時(shí)所采取的交際模式。在這一段視頻中，John用精簡的語言和得體的手勢語用語言向觀眾傳遞了熱情(passion)，Work(努力)， Good(精通)， Focus(專注)，Push(強(qiáng)迫)，Serve(服務(wù))， Ideas(想法)， persist(毅力)等成功的八個(gè)秘訣的意義和內(nèi)涵。這一階段有聽覺和視覺兩種模態(tài)。視覺模態(tài)(有關(guān)八個(gè)秘訣的文字PPT圖示和人手勢構(gòu)成的圖像)與聽覺模態(tài)(解說)是非強(qiáng)化類互補(bǔ)型關(guān)系，二者協(xié)調(diào)一致，目的是使觀眾能準(zhǔn)確理解關(guān)鍵詞，抓住主要信息。兩種模態(tài)在共同構(gòu)建完整的意義表達(dá)上互為補(bǔ)充，缺一不可。同時(shí)，第四階段視頻中，John通過不斷觸摸手提電腦，用多媒體課件現(xiàn)場展示八個(gè)關(guān)鍵信息的圖示和詞匯信息。這一階段包括視覺、聽覺和觸覺三個(gè)模態(tài)，其中，聽覺為主模態(tài)，表現(xiàn)在演講者介紹八個(gè)關(guān)鍵詞的語言上；視覺模態(tài)由電腦上的PPT圖片和關(guān)鍵詞句的屏幕畫面，由人手觸摸提示電腦的畫面構(gòu)成；觸覺表現(xiàn)在演講者輕觸和滑動(dòng)等動(dòng)作中。該模式下，主模態(tài)為聽覺，視覺模態(tài)與其之間的關(guān)系為互補(bǔ)型。這種情況下，無論是視覺模態(tài)還是聽覺模態(tài)，其單一均不能保持整體意義的完整性，其與聽覺模態(tài)之間的關(guān)系則定為協(xié)調(diào)類非強(qiáng)化關(guān)系。

第三類：求取注意型交際模式。這是演講者通過聲調(diào)等變化的副語言產(chǎn)生幽默詼諧的反語形式吸引觀眾的注意力并引起思考所采取的交際模式。在視頻中，John 在描述Work(努力)舉了Rupert Murdoch 的一個(gè)例子：“他提到了樂趣？Rupert？是的！ TED講演者都有一份充滿樂趣的工作，而且他們都很刻苦。 我覺得，他們都不是工作狂，他們是享受工作狂！”(觀眾大笑)John在視頻中嘴角上揚(yáng)，面帶自嘲的微笑，雙手?jǐn)傞_，目光直視觀眾，語調(diào)突然上揚(yáng)，語言詼諧幽默，引起了觀眾的注意和思考，產(chǎn)生了很好的“笑果”。在這一類型里，演講者的視覺模態(tài)對(duì)主模態(tài)聽覺模態(tài)起強(qiáng)化作用。因此,此時(shí)兩種模態(tài)之間的關(guān)系為強(qiáng)化類互補(bǔ)[2]。背景圖所形成的視覺模態(tài)在對(duì)交際意義的體現(xiàn)上相對(duì)較弱，故對(duì)聽覺模態(tài)來說是語境交互類的非互補(bǔ)關(guān)系，見表1。

表1 TED演講視頻模態(tài)間協(xié)同關(guān)系

在Richard St. John演講視頻實(shí)例中，多模態(tài)之間的關(guān)系如下：聽覺和視覺兩種模態(tài)聯(lián)合表達(dá)演講的主題，構(gòu)成聯(lián)合非強(qiáng)化類型；視覺主要形式為形象鮮明的PPT幻燈片，此同演講者生動(dòng)詼諧有力的聽覺模式共筑整體意義，聽覺模態(tài)和觸覺模態(tài)之間為互補(bǔ)型關(guān)系非強(qiáng)化型。通過觸覺模態(tài)所呈現(xiàn)的另一種視覺圖示在演講的過程中結(jié)合得體的身勢語則能更好補(bǔ)充聽覺所表達(dá)的意義。這個(gè)過程中動(dòng)作的間斷的觸動(dòng)和生動(dòng)的語言通過互補(bǔ)來交叉體現(xiàn)話語的完整意義[7]。另外觸覺和視覺之間為強(qiáng)化關(guān)系。視覺圖片這種主模態(tài)通過不斷點(diǎn)擊和滑動(dòng)電腦來進(jìn)行階段性轉(zhuǎn)折生成，能更好地引起觀眾的注意并對(duì)視覺模態(tài)起著強(qiáng)化的作用。

4 結(jié)語

通過對(duì)TED演講視頻的語篇?jiǎng)討B(tài)多模態(tài)間模態(tài)協(xié)同性的研究分析發(fā)現(xiàn)，提示型、信息類型、求取注意型此三類多模態(tài)話語交際模式為演講者最常選擇。為達(dá)到不同交際目的，在不同的交際過程和階段中，各種模態(tài)的選擇會(huì)不同，會(huì)有主模態(tài)和次模態(tài)之分，模態(tài)之間的關(guān)系總是相互協(xié)調(diào)、相互補(bǔ)充或者強(qiáng)化，從而實(shí)現(xiàn)演講者的整體講話意義。本文的研究目的在于三個(gè)方面：一是希望演講者們?cè)诮浑H中充分利用各種模態(tài)達(dá)到最佳語言表達(dá)效果，二是期待接收信息者們能通過了解動(dòng)態(tài)多模態(tài)之間的協(xié)同關(guān)系更好地理解演講者的話語意圖，三是期望本文能起到拋磚引玉的作用，讓多模態(tài)協(xié)同性的研究能輻射到更多不同體裁篇章的多模態(tài)話語研究中。

[1] Kress,G.&T.van Leeuwen.MultimodalDiscourse:TheModesandMediaofContemporaryCommunication[M].London:Arnold, 2001.

[2] 張德祿,袁艷艷．動(dòng)態(tài)多模態(tài)話語的模態(tài)協(xié)同研究：電視天氣預(yù)報(bào)多模態(tài)語篇為例[J].山東外語教學(xué)，2011(5)：9-16.

[3] 管 樂. 動(dòng)態(tài)演講視頻的多模態(tài)話語分析[J]. 浙江理工大學(xué)學(xué)報(bào)，社會(huì)科學(xué)版，2017(1)：1-8.

[4] 張德祿. 多模態(tài)話語分析綜合理論框架探索[J].中國外語,2009(1)：24-30.

[5] 靳雅姝. 動(dòng)態(tài)語篇的多模態(tài)分析[J].社會(huì)科學(xué)家，2012(10)：154-157.

[6] Halliday,M.A.K.&R.Hasan.CohesioninEnglish[M]. London: Longman, 1976.

[7] 劉福英. 論動(dòng)態(tài)多模態(tài)話語模態(tài)之間的協(xié)同性: 以IPhone6S 產(chǎn)品發(fā)布會(huì)3DTouch 功能語篇為例[J]. 2016(4)：43-47.