譚羽胭 周啟強(qiáng)

基于ELAN的初中外語閱讀教學(xué)多模態(tài)話語研究

譚羽胭 周啟強(qiáng)

（湖南科技大學(xué) 外國語學(xué)院，湖南 湘潭 411201）

以第十二屆全國初中英語課堂教學(xué)案例為研究對象，借助視頻標(biāo)注軟件ELAN對三位獲得一等獎的教師在課堂中所運(yùn)用的模態(tài)分類進(jìn)行標(biāo)記，探討教師如何運(yùn)用多種模態(tài)來提高教學(xué)效果。研究表明，大賽教師根據(jù)不同教學(xué)階段的任務(wù)復(fù)雜程度有選擇性地調(diào)用模態(tài)資源，且遵循模態(tài)選擇的原則，實(shí)現(xiàn)最佳交際效果。

多模態(tài)話語；外語教學(xué)；ELAN

隨著現(xiàn)代科技媒體的發(fā)展，在外語課堂中使用多種模態(tài)進(jìn)行教學(xué)已成為大勢所趨。課堂作為一種典型的多模態(tài)話語環(huán)境，包括了豐富的視覺模態(tài)以及聽覺模態(tài)等。即使在外語教學(xué)中語言模態(tài)仍舊占據(jù)課堂話語的絕大部分，但僅語言的角度來研究課堂教學(xué)是不全面的，無法深層挖掘其特征。因此，文章從多模態(tài)的角度來分析課堂教學(xué)中出現(xiàn)的各種模態(tài)資源，探究其在教學(xué)中所起的作用。研究語料選取自第十二屆全國初中英語優(yōu)質(zhì)課大賽，通過ELAN視頻分析軟件對課堂中出現(xiàn)的多種模態(tài)類型進(jìn)行量化分析，探尋優(yōu)質(zhì)課堂中的多模態(tài)配合特征，以期推動多模態(tài)外語教學(xué)的發(fā)展。

一 研究設(shè)計

（一）研究問題

文章旨在研究外語課堂教學(xué)中的模態(tài)類型以及它們之間的配合與協(xié)同，主要探討以下三個問題：（1）初中英語課堂主要包括了哪些模態(tài)？（2）多模態(tài)話語因素內(nèi)部具體包括哪些對教學(xué)有影響的模態(tài)符號資源？（3）外語教學(xué)多模態(tài)話語呈現(xiàn)何種特點(diǎn)？

（二）研究對象

以第十二屆全國初中英語優(yōu)質(zhì)課大賽的教學(xué)視頻為語料來源從中選取了三位獲得一等獎的教學(xué)比賽視頻進(jìn)行分析，三節(jié)課都為完整的教學(xué)課堂，課堂中包含了視覺模態(tài)、聽覺模態(tài)等，并配合使用多媒體輔助教學(xué)。三位教師上課年級均為初二年級，課堂類型均為閱讀課。教師1，來自湖北省，課堂主題是Reading: MickeyMouse；教師2，來自湖南省，課堂主題是Bus Driver and Passengers Save an Old Man；教師3，來自貴州省，課堂主題是Do You Think You Will Have Your Own Robot?

（三）研究方法以及研究工具

根據(jù)ELAN對語料的標(biāo)注和統(tǒng)計得出課堂中出現(xiàn)的多模態(tài)因素，結(jié)合宏觀與微觀對不同模態(tài)進(jìn)行分類，宏觀上分為視覺模態(tài)、聽覺模態(tài)以及視聽模態(tài)，微觀上視覺模態(tài)可劃分為文字、圖片、體態(tài)語以及環(huán)境，聽覺模態(tài)劃分為語言和音頻，視聽模態(tài)為視頻，探討課堂中出現(xiàn)的模態(tài)類型以及不同階段的模態(tài)配合特征。然后根據(jù)張德祿教學(xué)程序中的教學(xué)階段劃分框架，對模態(tài)的出現(xiàn)頻次進(jìn)行標(biāo)注統(tǒng)計，再根據(jù)結(jié)果進(jìn)行分析。

二 課堂整體多模態(tài)配合

利用ELAN對三位教師的課堂教學(xué)視頻進(jìn)行標(biāo)注后，得出教師在授課過程中所調(diào)用的模態(tài)頻次及其所占比例，如圖1所示：

圖1 課堂模態(tài)資源整體使用情況

從圖1中可以看出，在這40分鐘的外語教學(xué)課堂中，聽覺模態(tài)是占比最大的模態(tài)類型，即在課堂教學(xué)中，無論是教師語言還是學(xué)生語言都是必不可少的組成部分。此外，三位教師的課堂中也都出現(xiàn)了文字、圖片，以及視頻等模態(tài)資源，協(xié)同配合意義的表達(dá)。

（一）聽覺模態(tài)

聽覺模態(tài)是課堂教學(xué)中最重要、最不可缺少的模態(tài)。在英語教學(xué)過程中必然會存在聽和說的活動，教師的傳達(dá)、師生的交流、學(xué)生與學(xué)生的交流是課堂交流的主要組成部分。教師在授課過程中的講話速度、準(zhǔn)確性、流暢性和語調(diào)都和學(xué)生的學(xué)習(xí)效果密切相關(guān)，現(xiàn)有的研究已從各個角度對教師課堂語言展開過探討，本文便不再贅述。由于三節(jié)課都為讀寫課，三位教師都未使用錄音，這也表明模態(tài)的選擇仍然是基于課堂的實(shí)際需要，而不是盲目地將所有模態(tài)混合使用。

（二）視覺模態(tài)

視覺模態(tài)在課堂教學(xué)中起著十分關(guān)鍵的作用，三位教師的課堂都使用了PPT進(jìn)行輔助教學(xué)，在PPT上展示圖片與文字。通過這種方式，教師可以節(jié)約大部分板書時間，提高課堂效率，且能夠讓文本和其他的模態(tài)資源更好地結(jié)合。例如，文本可以與圖片、視頻等同時呈現(xiàn)，更加清楚地傳達(dá)教學(xué)內(nèi)容。簡筆畫以及圖片的配合使用能夠激發(fā)他們的學(xué)習(xí)興趣，加速對教學(xué)內(nèi)容的吸收，體態(tài)語作為一種常見的非語言模態(tài)，通常配合語言模態(tài)一起表達(dá)意義，本研究中的環(huán)境主要指的是教室的布局變化如桌子、椅子、黑板等位置的挪動以及教師自備的教具如卡片、圖畫、模型等。

視頻是視覺模態(tài)和聽覺模態(tài)的綜合運(yùn)用，視頻中圖像和聲音的同時呈現(xiàn)給學(xué)生帶來一種真實(shí)感，極大地填補(bǔ)了傳統(tǒng)教學(xué)的不足，不僅吸引了中學(xué)生的注意力，也滿足了信息社會中需要接受不同領(lǐng)域信息的需求。

三 各個多模態(tài)符號資源分析

按照圖1中的模態(tài)分類，利用ELAN分別對三位教師的課堂視頻進(jìn)行轉(zhuǎn)寫和標(biāo)注之后，再導(dǎo)出對其進(jìn)行統(tǒng)計分析，得出三位教師在課堂中所調(diào)用的模態(tài)類型、頻次、時長及其占據(jù)整節(jié)課的比例，如圖2所示。（T1、T2、T3分別代表教師1、教師2、教師3）

圖2 三位教師模態(tài)調(diào)用統(tǒng)計

從圖2可以看出，不同教師所選擇的模態(tài)各不相同，但語言模態(tài)仍舊是課堂教學(xué)中的主要模態(tài)，配合使用文字、圖片、體態(tài)語、視頻等協(xié)助意義的表達(dá)。

（一）聽覺模態(tài)

1.教師語言。從表3中可以看出，教師語言仍然是課堂中占比最大的模態(tài)資源符號。它在教學(xué)過程中的地位毋庸置疑，能夠把控課堂進(jìn)程、發(fā)出指令。語言模態(tài)的表意功能最為明顯，教師也常常通過提高音量或是重讀來突出重點(diǎn)信息，語調(diào)上升表示疑問，共同優(yōu)化語言模態(tài)的表達(dá)。如教師2在與學(xué)生互動的過程中，重復(fù)闡述所提出的問題并伴有明顯的升降調(diào)，以便他們快速抓住問題的關(guān)鍵信息點(diǎn)，給出正確答案。

2.學(xué)生語言。在多模態(tài)外語課堂教學(xué)中，學(xué)生語言也是重要的組成部分之一。根據(jù)統(tǒng)計及觀察得出，教師在課堂上注重與學(xué)生之間的互動，設(shè)計一系列活動鍛煉他們的語言組織以及表達(dá)能力。如教師1在講解完文章后給出了一個問題讓學(xué)生討論，“Which cartoon character canbeasymbol of Chinese culture？”之后讓她們分組上臺闡述自己的觀點(diǎn)，不僅有助于口語能力的提升，也鍛煉了他們的小組合作能力。

3.音頻。除了語言模態(tài)之外，音頻也是課堂中常出現(xiàn)的聽覺模態(tài)之一，由于本研究的對象為三節(jié)閱讀課，因此都未使用錄音。但為了增加課堂趣味性，有些教師會在引入環(huán)節(jié)插入音頻來吸引學(xué)生的注意力。如教師1在做課堂引入時，播放了一則葫蘆娃的音頻材料，讓學(xué)生猜測是中國的哪個卡通人物，再步步引入美國的卡通人物代表，音頻的使用能夠刺激學(xué)生的聽覺模態(tài)，有助于教學(xué)目標(biāo)的順利實(shí)現(xiàn)。

（二）視覺模態(tài)

1.文字。隨著現(xiàn)代科技媒體的發(fā)展，課堂中出現(xiàn)的文字類型也愈發(fā)豐富，從表3可以看出，相較于非PPT文字，三位教師在課堂上會更加頻繁地使用PPT文字來強(qiáng)化補(bǔ)充語言模態(tài)。通常，教師會把文章內(nèi)容以及重點(diǎn)講解部分以PPT的形式展現(xiàn)出來，以便學(xué)生明確重要知識點(diǎn)。如教師2在講解文章第一段所提到的新聞報道的四要素時，PPT中呈現(xiàn)文章內(nèi)容并標(biāo)注出關(guān)鍵信息點(diǎn)，進(jìn)一步強(qiáng)化了語言模態(tài)，有利于學(xué)生對重點(diǎn)內(nèi)容的掌握。

2.圖片。在課堂教學(xué)時，教師常常利用圖片刺激學(xué)生的感官，吸引他們的注意。其中既有PPT圖片，也有簡筆畫圖片，甚至有教師會自備一些手工圖片。如教師3在引入“robot”這個單詞時，把動畫人物“大白”呈現(xiàn)在PPT上，在講解完整篇文章后，她又在黑板上呈現(xiàn)了一些手工圖片，并將文章的關(guān)鍵語法點(diǎn)和重要詞匯寫在圖片上，設(shè)計出一個機(jī)器人的造型，不僅激發(fā)了學(xué)生的學(xué)習(xí)興趣，也有助于他們清楚本節(jié)課的重難點(diǎn)。

3.體態(tài)語。體態(tài)語作為多模態(tài)課堂中的一種資源符號，也訴諸于學(xué)生的視覺。本文按照表意功能將其分為演示動作和解釋動作。教師在講解新單詞時，通常使用演示動作示范單詞的正確發(fā)音。如教師1在講解新單詞“symbol”時，手勢示意同學(xué)們關(guān)注口型，反復(fù)面對他們大聲朗讀，有助于學(xué)生掌握標(biāo)準(zhǔn)發(fā)音。而解釋動作常用于補(bǔ)充解釋教師的語言模態(tài)，如教師1在提到單詞“strong”時，雙手攥緊向上舉起補(bǔ)充說明其含義，體態(tài)語補(bǔ)充說明語言模態(tài)，降低學(xué)生理解的難度，以便學(xué)生更好地接收課堂指令，有利于教學(xué)程序的順利進(jìn)行。

4.環(huán)境。本研究中的“環(huán)境”主要包括自備實(shí)物以及布局變化，教學(xué)過程中教師有時會自備教具或是使用教室中的物品來輔助教學(xué)。如教師3在組織活動環(huán)節(jié)，事先準(zhǔn)備了自己制作的機(jī)器人模型，根據(jù)模型進(jìn)行講解，不僅有助于創(chuàng)設(shè)真實(shí)的教學(xué)情境，也能引起學(xué)生興趣，發(fā)散他們的思維，提高教學(xué)效率。

（三）視聽模態(tài)

視頻作為一種課堂中常見的視聽模態(tài)，能夠同時刺激學(xué)生的視覺與聽覺，獲得更好的教學(xué)效果。教師3在講解課文的過程中同樣調(diào)用了多種模態(tài)來提升教學(xué)效果，如在引導(dǎo)學(xué)生回答一個開放性的問題時，她播放了一則機(jī)器人跳舞的視頻，并和同學(xué)一起跟隨視頻舞動，視覺模態(tài)與聽覺模態(tài)的配合也更有利于調(diào)動學(xué)生的積極性。

綜上所述，三位教師在課堂上所用的主要模態(tài)為語言模態(tài)，語言模態(tài)把控整個課堂進(jìn)程，PPT文字和圖片、體態(tài)語、音頻、視頻等模態(tài)強(qiáng)化補(bǔ)充語言模態(tài)，且在不同階段調(diào)用的模態(tài)種類以及頻次也有差異教學(xué)任務(wù)相對較重的階段，模態(tài)調(diào)用較為頻繁，便于意義的建構(gòu)，幫助學(xué)生更好地理解新的教學(xué)內(nèi)容，而在任務(wù)復(fù)雜度較低的階段，模態(tài)復(fù)雜度也相對較低。PPT模態(tài)凸顯重點(diǎn)，避免了冗長的口頭表述，進(jìn)一步優(yōu)化了語言表達(dá)，教師的體態(tài)語補(bǔ)充說明口頭語言，特別是在聽話者不能理解話語的目的時，教師的體態(tài)動作能起到很好地解釋作用，實(shí)現(xiàn)意義的充分表達(dá)。此外，在教學(xué)任務(wù)復(fù)雜度較高的階段，三位教師都使用了視頻模態(tài)同時刺激學(xué)生的視覺和聽覺，不僅能幫助學(xué)生集中注意力，還有助于營造輕松的教學(xué)氛圍，提升教學(xué)效果。

四 外語課堂多模態(tài)特點(diǎn)分析

（一）閱讀教學(xué)的多模態(tài)性較強(qiáng)

對初中英語優(yōu)質(zhì)課大賽中的多模態(tài)話語分析可以看出，閱讀教學(xué)包含了多種模態(tài)資源符號，具有較強(qiáng)的多模態(tài)性。這不僅與現(xiàn)有的外語教學(xué)呈現(xiàn)多模態(tài)性的觀點(diǎn)一致，也符合當(dāng)下時代的發(fā)展潮流，多媒體技術(shù)在教育領(lǐng)域的應(yīng)用和普及使得課堂中的多模態(tài)資源愈發(fā)豐富，合理運(yùn)用多種模態(tài)資源能夠有效利用課堂時間，提高課堂教學(xué)效率，但這些模態(tài)資源在交際中并非以同等的頻率出現(xiàn)，通過統(tǒng)計我們可以發(fā)現(xiàn)，課堂教學(xué)以聽覺模態(tài)和視覺模態(tài)為主，聽覺模態(tài)主要包括了教師話語和學(xué)生話語，在閱讀教學(xué)課中的占比較高，視覺模態(tài)資源類型相對來說較為豐富，主要包括了文字、圖片、體態(tài)語環(huán)境以及視頻。

（二）非語言模態(tài)資源高頻使用

研究發(fā)現(xiàn)，盡管語言模態(tài)仍然是外語課堂教學(xué)中占比最重的主流模態(tài)，但其他模態(tài)在教學(xué)中所起的作用也不可小覷。當(dāng)語言模態(tài)無法充分表明說話者含義時，教師通常采用非語言模態(tài)來補(bǔ)充或是強(qiáng)化語言表達(dá)，不僅有助于學(xué)生更好地理解，也能調(diào)動課堂氛圍，增強(qiáng)學(xué)生的交流意愿，提高他們的可理解性輸入。本研究的教學(xué)課堂大賽中教師重視非語言模態(tài)資源的調(diào)用，他們對整體意義的表達(dá)起著十分重要的作用。教學(xué)目標(biāo)的實(shí)現(xiàn)不能單單只靠語言，尤其是在師生間的互動環(huán)節(jié)，教師體態(tài)語的使用有助于拉近師生的交際距離，優(yōu)化語言模態(tài)，有效緩解學(xué)生的緊張、焦慮等情緒，有助于教學(xué)目標(biāo)的順利實(shí)現(xiàn)。

（三）各模態(tài)之間相互協(xié)同

教學(xué)大賽中教師不僅僅關(guān)注語言模態(tài)所表達(dá)的意義，也考慮到了其他模態(tài)在構(gòu)建整體意義時的協(xié)同作用，如教師常常借助PPT文字或圖片來共同建構(gòu)話語意義，尤其是在教學(xué)復(fù)雜度較高的階段，利用多媒體設(shè)備呈現(xiàn)一些帶有色彩的文字、圖片或是視頻，創(chuàng)設(shè)教學(xué)情境，注重模態(tài)間的相互配合，刺激學(xué)生的視覺模態(tài)，不僅能幫助他們更加直觀地理解話語意義，降低理解難度，也能激發(fā)學(xué)生的學(xué)習(xí)興趣。此外，各模態(tài)協(xié)同表達(dá)意義不僅僅是為了補(bǔ)充強(qiáng)化教師的語言模態(tài)，更是為了實(shí)現(xiàn)師生之間更加順暢的溝通，提高課堂教學(xué)效率。因此，在日常教學(xué)中，教師應(yīng)該學(xué)習(xí)運(yùn)用多種模態(tài)來協(xié)同表達(dá)意義，吸引學(xué)生積極參與，主動加入多模態(tài)話語的意義建構(gòu)。

隨著現(xiàn)代多媒體技術(shù)的發(fā)展，外語課堂教學(xué)的多模態(tài)性也越來越強(qiáng)，本研究借用ELAN軟件對在比賽中獲得一等獎三位教師課堂教學(xué)中的多模態(tài)資源進(jìn)行分析，發(fā)現(xiàn)教學(xué)大賽的教師善于調(diào)用非語言模態(tài)資源協(xié)同構(gòu)建意義，強(qiáng)化、補(bǔ)充、輔助配合語言模態(tài)，且教師會根據(jù)不同教學(xué)階段的目的來選擇模態(tài)的種類，遵循模態(tài)選擇的最優(yōu)化原則，主要包括有效原則、適配原則以及經(jīng)濟(jì)原則。在教學(xué)難度相對較高的階段，單一的語言模態(tài)無法實(shí)現(xiàn)好的教學(xué)效果，因而教師運(yùn)用PPT模態(tài)呈現(xiàn)文章重點(diǎn)段落，輔以圖片和視頻，強(qiáng)化語言模態(tài)所傳遞的意義，為學(xué)生創(chuàng)設(shè)盡可能生動真實(shí)的教學(xué)情境，遵循了模態(tài)的適配原則，在課堂開始和結(jié)束階段，教師只運(yùn)用了口頭模態(tài)以及PPT模態(tài)便可實(shí)現(xiàn)其教學(xué)目的，遵循了模態(tài)選擇的有效原則，在學(xué)生作為活動主體時，教師為實(shí)現(xiàn)最佳教學(xué)效果而簡化模態(tài)資源的使用，避免取得適得其反的效果，遵循了模態(tài)調(diào)用的經(jīng)濟(jì)原則。因此，在日常教學(xué)中，教師應(yīng)該充分利用好模態(tài)資源進(jìn)行教學(xué)，并且根據(jù)不同教學(xué)階段的目的來選擇合適的模態(tài)組合，實(shí)現(xiàn)模態(tài)選擇的最優(yōu)化，在更好地表達(dá)教師話語意義的同時給學(xué)生留下深刻印象，取得最佳的課堂交際效果。

[1]Jewitt, C. (ed.). The Routledge Handbook of Multimodal Analysis[M].London: Routledge, 2009

[2]Sinclair, J. & M. Coulthard. Towards an Analysis of Discourse:The English Used by Teachers and Pupils[M]. Oxford: Oxford University Press, 1975.

[3]代樹蘭.關(guān)注多模態(tài)話語教學(xué)提高學(xué)生交際能力[J].山東外語教學(xué),2011(3):48-53.

[4]杜金榜.語篇分析教程[M].武漢:武漢大學(xué)出版社,2013.

[5]郭萬群.大學(xué)英語多模態(tài)課堂教學(xué)研究[M].上海:上海交通大學(xué)出版社,2015.

[6]Kress, G. &Van Leeuwen, T. Reading Images: the Grammar of Visual Design [M].London: Routledge, 1996.

[7]Halliday, M. A. K. Explorations in the Functions of Language[M].London: Edward Arnold, 1973.

[8]New London Group. A pedagogy of multiliteracies: Designing social futures[J].Harvard Educational Review, 1996(1): 60-92.

[9]Stein, P. Rethinking Resources: Multimodal Pedagogies in the ESL Classroom [J].TESOL Quarterly, 2000,(34):333- 336.

[10]Kress, G. &Van Leeuwen, T. Multimodal Discourse: The Modes and Media of Contemporary Communication[M]. London: Edward Arnold,2001.

[11]Royce, T. Multimodality in the TESOL classroom: exploring visual-verbal synergy [J].TESOL Quarterly, 2002 (2): 191-205.

[12]胡壯麟.社會符號學(xué)研究中的多模態(tài)化[J].語言教學(xué)與研究,2007(1):1-10.

[13]顧曰國.多媒體、多模態(tài)學(xué)習(xí)剖析[J].外語電化教學(xué),2007 (2):3-12.

[14]朱永生.多模態(tài)話語分析的理論基礎(chǔ)和研究方法[J].外語學(xué)刊,2007(5):82-86.

[15]張德祿.多模態(tài)話語分析綜合理論框架探索[J].中國外語, 2009(1):24-30.

[16]張德祿.多模態(tài)外語教學(xué)的設(shè)計與模態(tài)調(diào)用初探[J].中國外語,2010(3):48-53.

[17]張德祿,李玉香.多模態(tài)課堂話語的模態(tài)配合研究[J].外語與外語教學(xué),2012(1):39-43.

[18]朱金蘭,陳新仁.優(yōu)秀教師多模態(tài)英語課堂話語的語用分析[J].山東外語教學(xué),2015(1):44-49.

2021-03-08

湖南省研究生科研創(chuàng)新項(xiàng)目資助（項(xiàng)目編號CX20201012）。

譚羽胭（1998－），女，湖南衡陽人，碩士研究生，研究方向?yàn)槎嗄B(tài)與外語教學(xué)。周啟強(qiáng)（1967－），男，湖南茶陵人，博士，教授，研究方向?yàn)檎Z義學(xué)與外語教學(xué)。

H09

A

1673-2219（2022）01-0121-04

（責(zé)任編校：周欣）