鄭魯晶

摘 要：文章對(duì)全國(guó)97所高校103位外語(yǔ)教師的多媒體課件進(jìn)行調(diào)查，分析當(dāng)前外語(yǔ)教師對(duì)于圖文關(guān)系的認(rèn)知及運(yùn)用現(xiàn)狀，指出視覺(jué)文化時(shí)代，高校教師應(yīng)該突破語(yǔ)言中心的觀念，改變圖文關(guān)系單一的審美模式而重視圖文的認(rèn)知功能；提升視覺(jué)教育技術(shù)，實(shí)現(xiàn)語(yǔ)言與圖像的信息互補(bǔ)、認(rèn)知參照和功能整合，使得文字和圖像縫合而成的文本-視覺(jué)語(yǔ)言，滿足學(xué)生的期待視野，成為便捷高效的外語(yǔ)教學(xué)工具。

關(guān)鍵詞：視覺(jué)文化；外語(yǔ)教學(xué)；圖文；認(rèn)知

中圖分類(lèi)號(hào)：G642 文獻(xiàn)標(biāo)志碼：A 文章編號(hào)：2096-000X（2018）11-0112-03

Abstract： On the basis of a nationwide survey over classroom PPT from 103 foreign language teachers in 97 universities， this paper analyzes how language teachers perceive and exploit the relationship between pictures and words in PPT， and then suggests that teachers shake off the language-centered pedagogy and shift the focus on the esthetic factions into exploring the cognitive potential of pictures. Visual-verbal PPT， with integrated function and mutual reference in terms of information and cognition， is capable of turning into an effective language teaching tool.

Keywords： visual culture； foreign language teaching； pictures and words； cognition

一、概述

隨著信息傳播技術(shù)的突飛猛進(jìn)，一種新的文化形態(tài)，視覺(jué)文化業(yè)已形成并深刻地影響和改變著人們的文化生存和文化運(yùn)作模式。視覺(jué)文化以豐富多彩、圖文并茂的清晰直觀，沖擊著傳統(tǒng)語(yǔ)言文化的抽象世界，改變了信息加工方式。視覺(jué)文化主因的環(huán)境導(dǎo)致了學(xué)生期待具有視覺(jué)吸引性的教學(xué)方式，從而使得外語(yǔ)教育“視覺(jué)化”問(wèn)題提上日程。視覺(jué)文化的興起給教學(xué)提出了新的挑戰(zhàn)和考驗(yàn)，也帶來(lái)了新的方法和手段。文字和圖像的共同特點(diǎn)是認(rèn)識(shí)世界的工具，具有符號(hào)化的工具性。文字和圖像作為差異性的符號(hào)信息體系，具有相互影響滲透的并行互補(bǔ)關(guān)系，并共同指向思維活動(dòng)和認(rèn)知活動(dòng)本身。[1]多媒體作為外語(yǔ)教學(xué)的主要載體，具有融合圖像的直觀在場(chǎng)性和語(yǔ)言的間接抽象性的顯著優(yōu)勢(shì)。在視覺(jué)需求旺盛而視覺(jué)負(fù)擔(dān)沉重的當(dāng)下，多媒體課件改變以往圖像裝飾文字的審美模式，探討圖像與文字的信息互補(bǔ)、認(rèn)知參照和功能整合是視覺(jué)時(shí)代對(duì)外語(yǔ)教學(xué)提出的新要求，也是外語(yǔ)教學(xué)工具開(kāi)發(fā)的新嘗試。學(xué)界從1988年開(kāi)始對(duì)圖像的教學(xué)功能進(jìn)行理論探討和實(shí)證研究，近三十年來(lái)盛行不衰。本文對(duì)全國(guó)19省市97所高校103位外語(yǔ)教師的多媒體課件進(jìn)行圖文地位和功能的對(duì)比調(diào)查，分析圖像研究經(jīng)久不衰，多模態(tài)教學(xué)呼聲強(qiáng)烈的當(dāng)下，外語(yǔ)教師對(duì)于圖文關(guān)系的認(rèn)知及運(yùn)用現(xiàn)狀，嘗試為外語(yǔ)教學(xué)工具的革新提供建議。

二、圖文關(guān)系研究現(xiàn)狀

國(guó)外Helwig等論述了圖文合作對(duì)于閱讀的積極影響。[2]L Isaeva等認(rèn)為圖像提供內(nèi)容表征，而文本調(diào)整意義的生成。視覺(jué)文本在認(rèn)知加工中各元素因概念整合而形成復(fù)合空間。[3]ROYCE分析了圖像與文本的相互增效作用。[4]L Unsworth列舉了多模態(tài)文本中多種圖文意義，號(hào)召建立適當(dāng)?shù)脑Z(yǔ)言分析圖文意義。[5]目前國(guó)內(nèi)外語(yǔ)教學(xué)中的圖文研究主要在多模態(tài)和多媒體設(shè)計(jì)兩個(gè)領(lǐng)域展開(kāi)。邢琰[6]等主要從多模態(tài)意義整合角度探討圖文關(guān)系；而宋潤(rùn)霞[7]等主要從多媒體認(rèn)知規(guī)律角度討論圖文關(guān)系。外語(yǔ)教學(xué)中圖文關(guān)系的專(zhuān)門(mén)論述并不多見(jiàn)。馬友平提出語(yǔ)圖相互依存，互為補(bǔ)充的互文閱讀模式成為青年獲取文化知識(shí)的主要途徑。[8]徐娟教學(xué)實(shí)驗(yàn)驗(yàn)證圖文對(duì)學(xué)習(xí)效果的具體影響。[9]綜上所述，國(guó)內(nèi)外學(xué)界都敏感地注意到視覺(jué)文化對(duì)于教學(xué)的影響并在教學(xué)實(shí)踐和理論探討方面做了很多嘗試，關(guān)于圖文關(guān)系的研究路徑和研究領(lǐng)域也較為相似。國(guó)內(nèi)外的學(xué)者均意識(shí)到圖文研究是個(gè)潛力廣闊的領(lǐng)域，圖文關(guān)系有各種語(yǔ)法、語(yǔ)義和修辭的可能。圖文關(guān)系因?yàn)樯婕爱愘|(zhì)符號(hào)、視覺(jué)與知覺(jué)、意象思維與抽象思維等多種因素的復(fù)雜關(guān)系和共同作用，所以目前缺乏元語(yǔ)言而無(wú)法深入到異質(zhì)符號(hào)組合結(jié)構(gòu)和運(yùn)行機(jī)制層面研究。諸多學(xué)者剖析多模態(tài)語(yǔ)篇中的圖文關(guān)系模式，雖然沒(méi)有厘清異質(zhì)符號(hào)相互作用的機(jī)制，未能深入圖文共建意義的理論探討，但是為教學(xué)中圖文關(guān)系的研究奠定了一定的基礎(chǔ)。針對(duì)外語(yǔ)教學(xué)課件中的圖文關(guān)系進(jìn)行實(shí)證研究，了解當(dāng)前外語(yǔ)課堂現(xiàn)狀，分析教師對(duì)于圖文關(guān)系認(rèn)知和運(yùn)用，對(duì)于提升教學(xué)質(zhì)量， 深化教學(xué)內(nèi)涵，具有現(xiàn)實(shí)意義。

三、研究設(shè)計(jì)

（一）研究對(duì)象

調(diào)查選取了全國(guó)19省市97所院校103位英語(yǔ)教師的多媒體課件進(jìn)行圖文關(guān)系的對(duì)比調(diào)查。研究問(wèn)題如下：

問(wèn)題1：圖像在多媒體教學(xué)課件中的使用比率。

問(wèn)題2：外語(yǔ)教學(xué)課件中圖文地位和功能。

問(wèn)題3：圖像參與教學(xué)意義生產(chǎn)的比率。

（二）研究工具

Barthes（1977）研究了圖片與文本兩種不同符號(hào)體系如何相互聯(lián)系生成意義。他提出了三種基本的圖文關(guān)系： 說(shuō)明，錨定和接遞。“說(shuō)明”指圖片支持文本，文本處于信息承載的支配地位，而圖片則處于附屬地位，起說(shuō)明或支持文本意義的功能?！板^定”指文本支持圖片，文本只是說(shuō)明圖片的意義，而圖片才起決定性的意義功能?！敖舆f”指文本與圖片地位平等，沒(méi)有明顯主次關(guān)系的界限，兩者處于一種互補(bǔ)的關(guān)系。“文字和圖片一樣，都是更綜合的結(jié)構(gòu)體的組成部分，信息的統(tǒng)一性在較高層次上得以實(shí)現(xiàn)?！盵10] Barthes 從符號(hào)的角度對(duì)圖文關(guān)系的劃分相對(duì)來(lái)說(shuō)比較簡(jiǎn)單，便于讀者界定圖文關(guān)系的類(lèi)型。然而，該圖文模式?jīng)]有涵蓋圖文相互獨(dú)立和圖文相互悖離等情況，存在一定的片面性， 因此本文做了如下補(bǔ)充與完善。

四、調(diào)查結(jié)果與分析

1. 圖像在多媒體教學(xué)課件中的使用比率

對(duì)103位外語(yǔ)教師教學(xué)課件的調(diào)查表明，圖像在多媒體課件中的使用比例非常高。圖片高達(dá)2667幅，有圖頁(yè)面1651，占55.91%，平均每頁(yè)1.6幅圖片。此外，為營(yíng)造良好的視覺(jué)效果，文字的藝術(shù)化處理及思維導(dǎo)圖的使用實(shí)現(xiàn)文本圖像化共693頁(yè)，占23.47%。無(wú)圖頁(yè)面僅占20.62%。103位教師中有100位使用圖片。這些數(shù)據(jù)說(shuō)明圖像以簡(jiǎn)易直觀的特點(diǎn)和強(qiáng)大的視覺(jué)沖擊受到廣大教師的青睞，成為外語(yǔ)課堂教學(xué)的重要工具。

2. 當(dāng)前外語(yǔ)教學(xué)中圖文的地位和功能

由圖可知，雖然外語(yǔ)教師在教學(xué)中普遍使用圖像，圖像與文本具有多樣化的關(guān)系，但是集中度非常高。其中最簡(jiǎn)單的圖像說(shuō)明文本被廣大教師普遍使用，高達(dá)1008頁(yè)。而文本錨定圖像，僅為62頁(yè)。兼具圖像文本雙重特點(diǎn)的接遞704頁(yè)，主要通過(guò)文本圖像化手段實(shí)現(xiàn)圖表接遞，如流程圖、示意圖、一覽表等思維導(dǎo)圖實(shí)現(xiàn)。真正具有創(chuàng)新價(jià)值的圖文接遞僅41頁(yè)。除此之外，在課件中還出現(xiàn)了圖文獨(dú)立564頁(yè)和悖離34頁(yè)的情況，69位教師出現(xiàn)圖文獨(dú)立，高達(dá)564頁(yè)，20位教師出現(xiàn)圖文悖離，說(shuō)明部分教師沒(méi)有認(rèn)識(shí)到圖像的信息價(jià)值和認(rèn)知功能，囿于傳統(tǒng)的圖像裝飾文本的審美功能，圖片選擇比較隨意。圖像不僅沒(méi)有參與意義生產(chǎn)而且因?yàn)楠?dú)立或者悖離文本，成為外語(yǔ)教學(xué)信息呈現(xiàn)中的干擾因素。消耗了學(xué)生的注意力資源，增加認(rèn)知負(fù)荷，影響了教學(xué)效果。綜上，圖像說(shuō)明文本和圖表接遞是我國(guó)外語(yǔ)教學(xué)中最主要的兩種圖文關(guān)系。我國(guó)外語(yǔ)教師主要使用圖像說(shuō)明文本和思維導(dǎo)圖實(shí)現(xiàn)圖文接遞呈現(xiàn)教學(xué)內(nèi)容。

3. 圖像參與教學(xué)意義生產(chǎn)的比率

圖像與文本多樣化的關(guān)系決定了其對(duì)于教學(xué)意義的貢獻(xiàn)也各不相同。圖像說(shuō)明文本占34.13%，圖像文本接遞為23.84%。文本錨定圖像僅為0.021%，圖像參與教學(xué)意義建構(gòu)共計(jì)57.99%。圖文獨(dú)立和悖離增加認(rèn)知負(fù)荷阻礙教學(xué)意義建構(gòu)的頁(yè)面占2%。數(shù)據(jù)說(shuō)明，盡管我國(guó)高校外語(yǔ)教師普遍使用圖像，但是圖文意義生產(chǎn)的意識(shí)不強(qiáng)，認(rèn)識(shí)不清；某些教師具有一定的圖文創(chuàng)新意識(shí)，但這大多源于自然狀態(tài)下無(wú)意識(shí)的學(xué)習(xí)積累，并不深刻和系統(tǒng)；能使用圖像生產(chǎn)意義和提升教學(xué)內(nèi)涵的僅占 23.84%。第二，視覺(jué)表達(dá)能力低下，教師對(duì)視覺(jué)素材使用方式單一并且手法固化。用圖片說(shuō)明人物、建筑、處所等方便搜索，易于使用。思維導(dǎo)圖則可以運(yùn)用office軟件輕松實(shí)現(xiàn)。圖片說(shuō)明文本和思維導(dǎo)圖的運(yùn)用已經(jīng)固化成為最普遍的呈現(xiàn)方式。文本錨定圖像和圖文接遞不符合語(yǔ)言中心地位的傳統(tǒng)觀念而且素材難以查找，技術(shù)上較難實(shí)現(xiàn)。即使具有視覺(jué)魅力和說(shuō)理深刻等創(chuàng)新價(jià)值，也沒(méi)有為廣大教師廣泛使用。上述分析表明我國(guó)外語(yǔ)教師在思想觀念上囿于語(yǔ)言中心地位，認(rèn)為圖像從屬于語(yǔ)言，運(yùn)用圖像參與教學(xué)意義生產(chǎn)的意識(shí)不強(qiáng)，以至于出現(xiàn)圖文獨(dú)立甚至悖離而不自知的情況。面對(duì)高度視覺(jué)化和多模態(tài)化的新生代大學(xué)生，廣大教師應(yīng)該更新視覺(jué)教育理念和教育技術(shù)，深入學(xué)習(xí)圖文關(guān)系和多媒體設(shè)計(jì)，讓學(xué)生更好地參與到視覺(jué)文化時(shí)代下的外語(yǔ)教學(xué)中來(lái)。

五、討論與思考

技術(shù)的進(jìn)步和視覺(jué)文化的誕生使得人類(lèi)獲得了一種感受和理解世界的新能力。通過(guò)圖像傳達(dá)思想、意義，通過(guò)觀看圖像來(lái)感受、理解思想與意義的能力，這本是人類(lèi)最原始的能力。但通過(guò)文字文化的風(fēng)行、統(tǒng)治和覆蓋，人類(lèi)的這種能力被遮蔽，壓抑了。圖像參與教學(xué)是對(duì)人類(lèi)認(rèn)知世界方式的回歸。圖像與文字作為實(shí)現(xiàn)意義的最主要的兩種符號(hào)表征，其關(guān)系影響著多媒體教學(xué)的效果。圖像與文本在多媒體教學(xué)中如何實(shí)現(xiàn)最佳價(jià)值，需要討論如下幾個(gè)問(wèn)題。

（一）多媒體課件的文本傾斜向圖文互動(dòng)的發(fā)展

通常情況下，圖像對(duì)文字只起著補(bǔ)充或輔助的作用，但隨著技術(shù)、媒體的交叉發(fā)展，圖像的作用發(fā)生了變化。圖像不僅是文本的參照物或背景，文字受保護(hù)、簇?fù)淼莫?dú)立狀態(tài)讓位于文本與圖像的滲透和互動(dòng)。文字和圖像都成為生成意義的重要手段。圖像和文字都具有符號(hào)的二元結(jié)構(gòu)和指涉建構(gòu)功能，異質(zhì)同構(gòu)決定了二者形式和意義的相互凝聚、置換、象征等多元膠融、互補(bǔ)共享關(guān)系。圖像的色彩構(gòu)圖、景深等空間與文本的措辭、造句、成篇之間相互膠融，基于信息容量適配、結(jié)構(gòu)相互關(guān)照、內(nèi)涵相互征引，而縫合生成一個(gè)功能獨(dú)特的教學(xué)文本。多媒體課件不再是圖像與文本的簡(jiǎn)單拼貼。教師對(duì)圖文資源的積極選擇與整合生成了新的教學(xué)手段。多媒體課件由過(guò)去的文本傾斜發(fā)展到了文本圖像的互動(dòng)。

（二）意象思維與邏輯思維互動(dòng)推進(jìn)教學(xué)

視覺(jué)思維指人類(lèi)對(duì)視覺(jué)感知基礎(chǔ)上形成的意象進(jìn)行加工尋求意義的認(rèn)知過(guò)程。以意象為思維運(yùn)作的基本元素，以直覺(jué)思維為基本方法認(rèn)識(shí)世界。語(yǔ)言思維以概念為思維操作的基本元素，以邏輯思維為基本方法。在現(xiàn)實(shí)中兩種思維相互聯(lián)系、相互作用。多媒體教學(xué)過(guò)程中，意象思維和邏輯思維隨著讀解推進(jìn)而不斷快速地交替活動(dòng)，互換主導(dǎo)位置，最終完成理解。教師對(duì)意象的刻意制造以及意象在學(xué)生頭腦中的喚醒將使意義的理解和表達(dá)如虎添翼。學(xué)生將感知的視覺(jué)意象，同語(yǔ)詞建立關(guān)聯(lián)。一維語(yǔ)詞聯(lián)想拓展成二維或三維的視覺(jué)意象，從與意象的契合中確定并且固化語(yǔ)詞的意義。而語(yǔ)言通過(guò)意義為意象提供了清晰穩(wěn)定的“標(biāo)簽”，從而使得意象通過(guò)語(yǔ)詞變得具體并保持下來(lái)。隨著學(xué)習(xí)的深入，語(yǔ)言不斷得到意象的明晰化，意象在語(yǔ)言的推動(dòng)下不斷得到修正、填充。因此，學(xué)生通過(guò)意象鎖定了語(yǔ)詞的意義，避開(kāi)外語(yǔ)學(xué)習(xí)的去生活化，可以自如地進(jìn)行自己的外語(yǔ)世界建構(gòu)。視覺(jué)思維與邏輯思維的互動(dòng)突出意象的描繪和語(yǔ)詞意義的合力作用，推動(dòng)學(xué)生進(jìn)入語(yǔ)言指向的生活世界。

（三）圖文膠融共建意義的飛躍

“我始終都強(qiáng)調(diào)圖像再現(xiàn)和語(yǔ)言描述之間的類(lèi)似性……描繪和描述二者都參與世界塑形和特征刻畫(huà)； 它們互相影響，且與知覺(jué)和知識(shí)互相影響”[11]（古德曼2013：33）。圖像作為人類(lèi)思維的模式與介質(zhì)，不僅是意義傳達(dá)的工具，而且是意義產(chǎn)生、創(chuàng)造的場(chǎng)所，與言語(yǔ)文字一起在相互闡釋、共同作用中建構(gòu)我們的意義世界。多媒體教學(xué)中二者具有共同的意義指向性。意義指向性的契合，表現(xiàn)手法的互補(bǔ)使得多媒體語(yǔ)篇成為強(qiáng)符號(hào)，具有強(qiáng)大的認(rèn)知驅(qū)動(dòng)和情感統(tǒng)攝作用。圖像與文本外在形式和內(nèi)在意義的關(guān)聯(lián)，經(jīng)過(guò)有機(jī)組合形成新的語(yǔ)義和語(yǔ)法修辭關(guān)系，超越了單一符號(hào)表意的局限，具有比過(guò)去單一符號(hào)更豐富的意義延伸和內(nèi)蘊(yùn)，使符號(hào)語(yǔ)言在形式和內(nèi)容兩個(gè)方面有了根本的飛躍，形成敘事話語(yǔ)和思想開(kāi)挖的巨大能量。傳統(tǒng)的語(yǔ)言文字機(jī)械訓(xùn)練使得外語(yǔ)學(xué)習(xí)者的思維貧弱。視覺(jué)文本給讀者提供了多維度、多層次的閱讀和思維空間， 促進(jìn)了話語(yǔ)的生成轉(zhuǎn)換，促進(jìn)學(xué)生語(yǔ)言文本質(zhì)量的提升，有利于培養(yǎng)創(chuàng)新思維。

六、結(jié)束語(yǔ)

文本和圖像各自有著對(duì)方所不能代替的功能。語(yǔ)言是高效思維的有利工具。理性思維的深刻性和抽象性決定了圖像永遠(yuǎn)無(wú)法取代文字。因此，在圖文模式的建構(gòu)中，應(yīng)該摒棄“語(yǔ)言中心論”或“圖像霸權(quán)”的片面思想，把圖文關(guān)系看成動(dòng)態(tài)的有機(jī)整體，從圖文意義生產(chǎn)和消費(fèi)的角度出發(fā)，根據(jù)不同的教學(xué)要求，合理選擇圖文模式，從而豐富多媒體教學(xué)意義建構(gòu)的手段。

參考文獻(xiàn)：

[1]朱永明.視覺(jué)語(yǔ)言探析-符號(hào)化的圖像形態(tài)與意義[M].南京：南京大學(xué)出版社，2011：195.

[2]Helwig， Magdelyn H. Writing with Image： Verbal-Visual Collaboration in 20th-Century Poetry[D].University of Maryland， 2010.

[3]L Isaeva，N Komina，S Krestinski.Visual， audible and verbal： synthetic intertextuality[DB/OL].[2012-3-2].http：xueshu.baidu.com/s？wd=paperuri%3A%28a53d62a186821ef0c8a1b8a2c89addcd%29&filter=sc_long_sign&tn=SE_baiduxueshu_c1gjeupa&ie=utf-8&sc_ks_para=q%3DVisual%2C%20audible%20and%20verbal%3A%20synthetic%20intertextuality&sc_vtab=help.

[4]ROYCE，TERRY.Multimodality in the TESOL Classroom： Exploring Visual-Verbal Synergy[J].Tesol Quarterly A Journal for Teachers of English to Speakers of Other Languages & of Standard English As A Second Dialect，2002，36（2）：191-206.

[5]L Unsworth. Towards a metalanguage for multiliteracies education： Describing the meaningmaking resources of language-image interaction[J].English Teaching： Practice and Critique，2006，5（1）：55.

[6]邢琰.大學(xué)英語(yǔ)多模態(tài)視閾下學(xué)生多元識(shí)讀能力探析[J].河南商業(yè)高等專(zhuān)科學(xué)校學(xué)報(bào)，2013，26（2）：102-106.

[7]宋潤(rùn)霞，吳丹.多媒體畫(huà)面語(yǔ)言的記憶優(yōu)勢(shì)[J].高校實(shí)驗(yàn)室工作研究，2013，117（3）：83-84.

[8]馬友平.“語(yǔ)-圖”互文閱續(xù)模式的建構(gòu)及文化意義[J].電影評(píng)介，2013：11.

[9]徐娟，劉儒德，柴松針，等.多媒體環(huán)境下圖文的具體程度對(duì)學(xué)習(xí)效果的影響[J].應(yīng)用心理學(xué)，2008，14（3）：238-243.

[10]Barthes，R.Image-Music-Text[M].London： Fontana，1977：38-39.

[11]納爾遜·古德曼.藝術(shù)的語(yǔ)言-通往符號(hào)理論的道路[M].北京： 北京大學(xué)出版社，2013：33.