王云 王霞

石家莊鐵道大學(xué)

商務(wù)英語視聽說教學(xué)中多模態(tài)教學(xué)的實證研究*

王云 王霞

石家莊鐵道大學(xué)

本文通過采用樣本實證研究，對商務(wù)英語視聽說教學(xué)中多模態(tài)教學(xué)功能、不同模態(tài)的多種組合方式對商務(wù)英語專業(yè)學(xué)生視聽說能力的影響進行了調(diào)查研究。本次實證研究通過不同模態(tài)的多種組合考察學(xué)生對一段商務(wù)英語視聽說材料的信息把握能力和語言輸出能力。實驗結(jié)果表明，合理地對不同模態(tài)進行設(shè)計組合可以有效提高學(xué)生的聽力和口語表達能力；視覺模態(tài)和聽覺模態(tài)的有效結(jié)合發(fā)揮了最主要的功能，比單一的模態(tài)教學(xué)更能提高學(xué)生的視聽說能力。

多模態(tài)，聽力理解，口語表達，實證研究

1.引言

多模態(tài)也被稱之為多符號，是指運用聽覺、視覺、觸覺等多種感覺，通過語言、圖像、聲音、動作等多種手段和符號資源進行交際的現(xiàn)象(張德祿2009a:24-30)。計算機網(wǎng)絡(luò)的多媒體的集成功能、教學(xué)信息的擴展功能、教學(xué)過程的交互功能、教學(xué)方法的多樣化功能等使自然話語的研究更為廣闊，并且為多模態(tài)研究提供了有力的支持。多模態(tài)話語研究主張在教學(xué)中充分利用多種符號資源和豐富的教學(xué)手段來達到教學(xué)效果的最優(yōu)化。本文試圖將多模態(tài)話語研究的成果與商務(wù)英語視聽說教學(xué)實踐相結(jié)合，采用實證研究的方法，分析多模態(tài)視聽說教學(xué)對學(xué)生視聽說能力的影響及不同的視聽說模態(tài)的優(yōu)缺點，進而探索有效的視聽說教學(xué)途徑、操作模式和運用策略，以期為有效的商務(wù)英語視聽說教學(xué)提供切實可行的實例教學(xué)模式。

2.國內(nèi)外相關(guān)研究概述

關(guān)于多模態(tài)視聽說教學(xué)的應(yīng)用，國內(nèi)外學(xué)者通過長期的努力已經(jīng)取得了頗具價值和意義的理論和實踐成果。自20世紀70年代后期開始，西方的研究者就已經(jīng)開始了對多模態(tài)話語的早期探索。R.Barthes在1977年發(fā)表論文《圖像的修辭》(Rhetoric of the Image)，探討視覺圖像在話語交際中的重要作用，這是關(guān)于多模態(tài)話語研究的啟蒙階段。Kress and Leeuwen(1996)創(chuàng)建了以“再現(xiàn)”、“互動”、“構(gòu)圖”三大意義為核心的視覺圖像語法分析框架，奠定了多模態(tài)話語研究的理論基礎(chǔ)及研究方法，成為多模態(tài)應(yīng)用于語言教學(xué)的先驅(qū)。Royce(2002:191-205)研究了多模態(tài)語篇中圖像與文字產(chǎn)生的互補關(guān)系以及多種復(fù)合模態(tài)在語言教學(xué)中的協(xié)調(diào)關(guān)系。Jewitt(2006)使用“互動白板”(Interactive Whiteboards)這一概念，對節(jié)奏、多模態(tài)和互動性資源分配進行觀察分析，討論了互動白板的語篇設(shè)計和課堂教學(xué)中多模態(tài)讀寫、教學(xué)方法和現(xiàn)代技術(shù)的關(guān)系。Guichon和Mclornan(2008:85-93)用實驗證明了多模態(tài)教學(xué)模式的使用有助于學(xué)生對于語料庫的把握。Domínguez Romero和Maíz Arévalo(2010:100-139.)研究了多模態(tài)在聽力教學(xué)中的作用，并且指出采用不同的模態(tài)，其發(fā)生作用的方式也不盡相同。

李戰(zhàn)子(2003:1-8)在國內(nèi)第一次把多模態(tài)話語理論引進來，指出了多模態(tài)話語分析的社會符號學(xué)分析方法對于英語教學(xué)具有重要的理論指導(dǎo)意義。劉曉杰(2011)使用多模態(tài)話語分析理論的相關(guān)原則指導(dǎo)大學(xué)英語聽力教學(xué)。他發(fā)現(xiàn)，基于多模態(tài)話語分析理論的聽力教學(xué)方法更有效，且能夠?qū)Σ煌降膶W(xué)生體現(xiàn)出不同的教學(xué)效果，更有利于高水平學(xué)生聽力成績的提高。李欣(2012:59-64)對多模態(tài)自主英語聽力教學(xué)模式進行了實證研究，探討了多模態(tài)自主聽力教學(xué)模式對學(xué)習(xí)者聽力水平和多元識讀能力的影響，結(jié)果發(fā)現(xiàn)該教學(xué)模式受到絕大多數(shù)學(xué)習(xí)者的歡迎并能切實有效地提高學(xué)習(xí)者的聽力水平以及多元識讀能力。徐艷麗(2013:168-170)分析了大學(xué)英語聽力教學(xué)中的多模態(tài)因素，分別揭示了聽覺模態(tài)、視覺模態(tài)和觸覺模態(tài)等大學(xué)英語聽力教學(xué)中的主要模態(tài)在大學(xué)英語聽力教學(xué)中的不同作用和配置方式，并指出了大學(xué)英語聽力教學(xué)中文化模態(tài)教學(xué)的必要性和可能途徑。

從整體上看，國內(nèi)外已經(jīng)取得了一定的成果，但是針對不同模態(tài)對視聽說教學(xué)影響和效果的研究相對較少，也沒有明確指出不同的模態(tài)在視聽說教學(xué)中的具體作用。為此，本研究選擇商務(wù)英語專業(yè)學(xué)生為研究對象，探討多模態(tài)的綜合運用對于視聽說能力培養(yǎng)和提高之間的關(guān)系以及不同模態(tài)的優(yōu)缺點。

3.研究設(shè)計

3.1 研究設(shè)計

本研究擬回答以下問題：

(1)商務(wù)英語視聽說多模態(tài)教學(xué)模式是否能夠充分調(diào)動學(xué)生的學(xué)習(xí)積極性及提高信息的獲取率？(2)視覺模態(tài)在視聽說教學(xué)過程中的優(yōu)缺點是什么？(3)聽覺模態(tài)在視聽說理解上的優(yōu)缺點是什么？(4)商務(wù)英語視聽說多模態(tài)教學(xué)模式與學(xué)生視聽說能力的提高之間的相關(guān)性如何？

3.2 研究對象

研究對象為石家莊市某高校商務(wù)英語專業(yè)三年級3個平行班的學(xué)生。從每個班里隨機選取25名學(xué)生作為研究對象，共分成3組。根據(jù)對3組學(xué)生的期末口語測試及專業(yè)四級聽力成績進行SPSS19.0單因素方差分析，結(jié)果顯示3組學(xué)生的聽說能力總體持平(如表1、表2)。在視聽說教學(xué)實驗過程中,對3個組別采用不同模態(tài)的教學(xué)手段，其中1組為單模態(tài)組，即教學(xué)過程主要以聽力為主；2組為雙模態(tài)組，教學(xué)過程包含音頻和視頻，但是視頻中不顯示字幕；3組為三模態(tài)組，教學(xué)過程包含音頻和視頻，并帶有字幕。以上三個組別采用聽覺模態(tài)、聽覺視覺混合模態(tài)。

(F=0.550,P=0.580>0.05,無顯著差異)

(F=0.145,P=0.865>0.05,無顯著差異)

3.3 研究語料、方法和步驟

本研究選取了一段時長為5分48秒的商務(wù)視聽材料為測試材料，共有單詞589個，主題是商務(wù)英語函電中需要注意的7個原則，分別是完整(completeness)、正確(correctness)、清楚(clearness)、簡潔(concreteness)、具體(concreteness)、禮貌(courtesy)和體諒(consideration)。整個視頻被放置在商務(wù)背景之下，將這7個原則分別以具體情景表演的方式予以解釋，較為直觀的呈現(xiàn)什么是7Cs。

三個組別分別采取了不同模態(tài)的教學(xué)方法，即1組為音頻組，2組為音頻、視頻(無字幕)組，3組為音頻、視頻(有字幕)組。測試材料播放三次后，請各組學(xué)生根據(jù)所記筆記，兩兩結(jié)組重現(xiàn)測試材料中的內(nèi)容，并錄音形成口語語料。老師對學(xué)生的口語語料進行分析，以捕獲學(xué)生對不同模態(tài)教學(xué)效果的反應(yīng)。具體實施方法：教師按照不同模態(tài)要求分別向3組學(xué)生播放測試材料，該材料共播放三次。第一次播放后，請學(xué)生注意全文大意，并做筆記記錄；第二次播放后，請學(xué)生對筆記查缺補漏；第三次播放后，請學(xué)生整理筆記，兩兩結(jié)組并口頭復(fù)述材料中內(nèi)容，同時錄音，形成口語語料庫。

3.4 數(shù)據(jù)的收集和分析

該測試材料層次清楚，共分7個要點，此外，還有2個實例。為了進行數(shù)據(jù)的分析，學(xué)生說出一個要點記1分，要點復(fù)述殘缺不全的記0.5分，總分為9分，以組為單位打分，每組得分即為兩個組員的得分。通過這種方式，將不同組別的學(xué)生對不同模態(tài)的教學(xué)方法的不同反應(yīng)量化，可以清晰的看出不同組別學(xué)生在教學(xué)實驗過程中的差異。所得到的量化數(shù)據(jù)采用統(tǒng)計軟件SPSS19.0，并進行單因素方差分析及應(yīng)用Post Hoc事后多重檢驗方法，得出不同模態(tài)下學(xué)習(xí)效果的差異。此外，基于對學(xué)生的調(diào)查問卷對分析結(jié)果進行佐證。

4.結(jié)果分析

4.1 不同模態(tài)教學(xué)手段間的差異

由于在不同組別間采用了不同模態(tài)的教學(xué)方法，為探究教學(xué)效果之間的差異，我們首先采用了統(tǒng)計軟件SPSS19.0對收集到的各組學(xué)生口語語料進行了描述，結(jié)果見表3.

如表3所示，1組的均值為3.9， 2組為5.26， 3組為6.22， 各組均值相比，3組最高，2組其次，1組最低。其次，我們對該組口語語料數(shù)據(jù)進行單因素方差分析，結(jié)果見表4。

由表4結(jié)果顯示，F(xiàn)=55.467，P=0.000<0.05，測試材料采用不同的方式傳遞給學(xué)生，學(xué)生的學(xué)習(xí)效果產(chǎn)生了顯著的差異。從以上兩個表格來看，單模態(tài)的1組，即音頻組，對教學(xué)效果的幫助最??；2組中采用了音頻和視頻相結(jié)合的方式，但是沒有字幕，對教學(xué)效果的幫助優(yōu)于1組；3組運用音頻、視頻，并配上了字幕，對教學(xué)效果的幫助最大。之后，我們又對該組語料數(shù)據(jù)進行了Post Hoc事后多重檢驗，以進一步驗證各組間存在的差異，分析結(jié)果見表5。

*.均值差的顯著性水平為 0.05。

表5顯示了3組之間視聽說成績的不同，結(jié)果進一步印證了上述分析數(shù)據(jù)結(jié)果?？傊?，我們可以看出，采用不同模態(tài)對教學(xué)效果的影響大小依次為：聽覺和視覺(字幕)>聽覺和視覺(無字幕)>聽覺。我們以圖表的形式清晰地列出了不同組別均值差異，見下表：

4.2 學(xué)生對多模態(tài)教學(xué)方法的反應(yīng)

測試結(jié)束后，我們還對采用聽覺、視覺模態(tài)進行學(xué)習(xí)的二組、三組學(xué)生進行了問卷調(diào)查，目的是調(diào)查多模態(tài)視聽說教學(xué)模式對教學(xué)效果、學(xué)習(xí)態(tài)度、學(xué)習(xí)效率等的影響。本問卷共發(fā)放了50份，回收了50份，其中有效問卷48份。問卷的設(shè)計采用了Likert scale量表形式，即1=完全同意，2=同意，3=不確定，4=不同意，5=完全不同意。

調(diào)查表明多模態(tài)的教學(xué)方法對教學(xué)效果、學(xué)生的學(xué)習(xí)態(tài)度產(chǎn)生積極的影響。79%的學(xué)生認為多模態(tài)教學(xué)方法使他們獲得了更多的信息。58%的學(xué)生認為通過多模態(tài)方式學(xué)習(xí)，更有成就感，更愿意學(xué)習(xí)英語課程。而72%的學(xué)生認為這樣學(xué)習(xí)更有樂趣，增加了視頻、圖片，使得教學(xué)內(nèi)容的呈現(xiàn)更加生動，更有助于理解。68%的學(xué)生認為這樣學(xué)習(xí)可以激發(fā)興趣，62%的學(xué)生認為提高了他們的積極性。由此可見，多模態(tài)視聽說教學(xué)模式產(chǎn)生了良性的反撥效應(yīng)，達到了較好的預(yù)期效果。

4.3 不同模態(tài)的影響

4.3.1 視覺模態(tài)

首先，在商務(wù)英語視聽說課程中，視覺模態(tài)中的圖像，視頻等信息形式提供了具體的環(huán)境，其視頻中圖像、字幕、視頻的交互作用可以創(chuàng)造附加意義。其次，視覺模態(tài)具有其獨有的特性，即直觀性，使得在必要文字、音頻信息缺失的情況下，學(xué)習(xí)者可以輕易理解學(xué)習(xí)目標。再次，視覺模態(tài)還可以為學(xué)生創(chuàng)設(shè)身臨其境的情景，為其捕獲知識模擬了場景。

但是，視覺模態(tài)的運用并不適用于所有的商務(wù)英語課堂教學(xué)內(nèi)容，對這一模態(tài)的運用，要避免一個誤區(qū)，即過分運用。第一，視頻資料的甄選要以配合聽力為主。如果所選的視頻材料與聽力并不能協(xié)調(diào)配合，那么視覺模態(tài)的使用恐怕會產(chǎn)生不良影響。第二，視頻資料中圖像所提供的信息量應(yīng)該適中。信息量過多或過少，都不利于學(xué)生能力的鍛煉。如過早地出現(xiàn)字幕，使學(xué)生喪失鍛煉聽力的機會。

4.3.2 聽覺模態(tài)

從“商務(wù)英語視聽說”這一課程名稱即可看出，聽覺模態(tài)必然涉及到模態(tài)形式，且具有無可替代的作用。學(xué)生對信息的獲取，聽覺模態(tài)是主要形式之一。但是需要注意的是，聽覺作為主要的信息接收渠道，應(yīng)該與其他模態(tài)進行配合，適當(dāng)運用圖片、視頻等二維甚至三維的視覺模態(tài)，為學(xué)生對信息進行整合、理解提供幫助，以加深學(xué)生對學(xué)習(xí)材料的理解。這樣，既保證學(xué)生聽力部分的練習(xí)起到應(yīng)有的鍛煉作用，又不損害學(xué)生學(xué)習(xí)的積極性、自信心。本次測驗對此提供了數(shù)據(jù)支持。例如，測驗中，只有聽覺模態(tài)的一組均值只有3.9，而采用多模態(tài)的二組，三組分別達到了5.25和6.22，差別非常顯著。

同時，要注意音頻資料的長短結(jié)合，避免產(chǎn)生疲勞感。不恰當(dāng)?shù)厥褂靡纛l教學(xué)內(nèi)容，如音頻資料難度過大、時長過長、內(nèi)容乏味等都非常容易使學(xué)生失去興趣和注意力，進而造成聽力訓(xùn)練事倍功半。

4.3.3 觸覺模態(tài)等其他模態(tài)

除了視覺模態(tài)、聽覺模態(tài)之外，商務(wù)英語視聽說中還存在其他的模態(tài)形式，如觸覺模態(tài)、嗅覺模態(tài)和味覺模態(tài)等。而在商務(wù)英語視聽說課堂上，觸覺模態(tài)的使用也有助于提高教學(xué)效果。觸覺模態(tài)主要體現(xiàn)在師生互動、學(xué)生互動以及師生與教學(xué)道具互動等方面。例如，在本次測試的最后一個環(huán)節(jié)，要求學(xué)生兩人一組重現(xiàn)測試材料中的例子。例子本身就是一個商務(wù)背景下的兩人情境對話。學(xué)生在角色扮演的過程中產(chǎn)生了一些肢體接觸，如握手、擁抱等；另外，學(xué)生在角色扮演過程中也接觸了一些道具，如打印機、電腦等。這些接觸，強化了學(xué)生在具體情境下對具體語言的運用。

但是，觸覺模態(tài)切不可刻意求取，必須遵守視覺模態(tài)、聽覺模態(tài)為中心的原則，使觸覺模態(tài)與其他模態(tài)相協(xié)調(diào)，共同促進商務(wù)英語視聽說教學(xué)效果的提升。

4.3.4 各模態(tài)間的協(xié)作

商務(wù)英語是在特定環(huán)境下以英語為媒介進行的商務(wù)活動，而多模態(tài)的教學(xué)較大程度上為學(xué)生還原了商務(wù)情景。在綜合運用多種模態(tài)的教學(xué)中，我們發(fā)現(xiàn)視覺模態(tài)、聽覺模態(tài)對學(xué)生捕獲信息能力的提高有明顯效果，而觸覺模態(tài)對學(xué)生口語表達能力有著明顯的促進作用。

有研究表明，學(xué)生在通過各種途徑和模式接收信息的時候，由于面對繁多的信息，常常不知道如何去甄別、遴選、加工和輸出(Sweller,Van Merrienboer & Paas 1998:251-296)。鑒于此，在商務(wù)英語視聽說的教學(xué)過程中，各種模態(tài)間的配合必須遵循正效應(yīng)的原則，互相協(xié)調(diào)、互相強化，以增強學(xué)生學(xué)習(xí)效果為最終目標(張德祿2009b)。同時，在實際教學(xué)活動中，還應(yīng)該以某個模態(tài)為主，以其他模態(tài)為輔，使各個模態(tài)按不同比例配置在教學(xué)活動中。如本次測驗中，視覺、聽覺模態(tài)處于主導(dǎo)地位，觸覺模態(tài)處于輔助地位，幾種模態(tài)共同作用，強化教學(xué)效果。本次測驗中，對于難點出現(xiàn)的地方，如 definition of concreteness，除了以視頻、音頻的形式展現(xiàn)給學(xué)生外，還配上英文字幕，而對于其他非難點的地方，我們均以視頻和音頻的形式呈現(xiàn)。

此外，為了給學(xué)生呈現(xiàn)出更加逼真的商務(wù)活動情景，我們還需要注意觸覺模態(tài)、嗅覺模態(tài)、味覺模態(tài)等在學(xué)生口語練習(xí)時的積極作用。學(xué)生在口語組練習(xí)過程中，相互間的肢體接觸、道具等的恰當(dāng)運用，都傳遞著社會特征和文化特征。更多地了解這些特征，可以為學(xué)生創(chuàng)設(shè)更加真實的語境。

5.結(jié)語

本研究的結(jié)果表明，將多模態(tài)進行合理的設(shè)計之后，應(yīng)用到商務(wù)英語視聽說的教學(xué)過程中是完全可行的。該模式能夠更為充分地調(diào)動學(xué)生的學(xué)習(xí)積極性并提高他們的信息獲取率。商務(wù)英語視聽說多模態(tài)教學(xué)模式對于學(xué)生視聽說能力的提高之間呈現(xiàn)正相關(guān)。其中，視覺模態(tài)、聽覺模態(tài)發(fā)揮了最主要的作用，觸覺模態(tài)等也發(fā)揮著作用。多模態(tài)教學(xué)鼓勵多種感官的協(xié)調(diào)參與，更加接近語言實際交際情境下的言語交際過程。總之，在實際教學(xué)實踐中，任何一種模態(tài)都不是單獨存在的，是需要協(xié)調(diào)配合的。

本研究的語料范圍有限，只是基于石家莊某高校的樣本進行調(diào)查分析，而且研究對象是具有一定聽說基礎(chǔ)的商務(wù)英語專業(yè)高年級學(xué)生，研究結(jié)果具有一定的局限性。今后可針對英語專業(yè)低年級或者其他方向的學(xué)生進行多模態(tài)試驗研究，以進一步探討多模態(tài)對于視聽說教學(xué)的作用和影響。

Domínguez,R.E.& Maíz Arévalo C.2010.Multimodality and listening comprehension:Testing and implementing classroom material [J].System(1):85-93.

Guichon,N.& S.McLornan,2008.The effects of multimodality on L2 learners:Implications for CALL resource design [J].System(1):85-93.

Jewittt,C.2006.Technology,LiteracyandLearning:AMultimodalApproach[M].London and New York:Roufledge.

Kress,G.& T.Van Leeuwen,1996.ReadingImages:TheGrammarofVisualDesign[M].London:Rutledge.

Royce,T.2002.Multimodality in the TESOL Classroom:Exploring Visual-verbal Synergy [J].TESOLQuarterly(2):191- 205.

Sweller.J.,Van Merrienboer,J.J.G.& Paas,F.G.W.C,1998.Cognitive architecture and instructional design [J].EducationalPsychologyReview(3):251-296.

李欣、李玫瑛、王佳子，2012，多模態(tài)自主聽力教學(xué)模式有效性的實證研究[J]，《解放軍外國語學(xué)院學(xué)報》(6):59-64。

李戰(zhàn)子，2003，多模式話語的社會符號學(xué)分析[J]，《外語研究》(5):1-8。

劉曉杰，2011，多模態(tài)話語分析理論在大學(xué)英語聽力教學(xué)中的應(yīng)用研究[D]，東南大學(xué)碩士學(xué)位論文。

徐艷麗，2013，多模態(tài)視域下大學(xué)英語聽力教學(xué)模式的構(gòu)建[J]，《黑龍江高教研究》(11)：168-170。

張德祿，2009a，多模態(tài)話語分析綜合理論框架探索[J]，《中國外語》(1):24-30。

張德祿，2009b，多模態(tài)話語理論與媒體技術(shù)在外語教學(xué)中的應(yīng)用[J]，《外語教學(xué)》(4)：15-20。

(王 云：石家莊鐵道大學(xué)四方學(xué)院外語系講師； 王 霞：石家莊鐵道大學(xué)四方學(xué)院外語系講師)

通訊地址：050000 河北省石家莊市橋西區(qū)南二環(huán)和濱河街交叉口南東尹泰東苑18號樓3單元202

*本文系河北省教育廳人文社會科學(xué)研究重點項目“實用型商務(wù)英語課程優(yōu)化和教學(xué)有效性研究和河北省教育科學(xué)研究“十二五”規(guī)劃青年專項課題“新媒體時代下實用型英語多模態(tài)研究”的階段性，課題項目編號分別為SD141029，1404550。

H319

A

2095-9645(2015)03-0076-05

2015-04-30