王鋼賀靜
(巢湖學(xué)院外語(yǔ)系,安徽 巢湖 238000)
CET-4完形填空考點(diǎn)效度歷時(shí)研究(2007-2010)
王鋼賀靜
(巢湖學(xué)院外語(yǔ)系,安徽 巢湖 238000)
完形填空是國(guó)內(nèi)外語(yǔ)言測(cè)試的常用題型,旨在考查考生的語(yǔ)言綜合運(yùn)用能力。本文以2007年12月至2010年12月間CET-4完形填空試題為樣本,從文本選擇、考點(diǎn)層次及考點(diǎn)效度等方面對(duì)其效度進(jìn)行了驗(yàn)證。結(jié)果表明,四年來(lái)完形填空試題設(shè)計(jì)符合《大學(xué)英語(yǔ)四級(jí)考試大綱》的要求,文本選擇得當(dāng),考點(diǎn)層次較為合理,分布態(tài)勢(shì)較好,試題的考點(diǎn)效度較高。但同時(shí)表明對(duì)于今后該類(lèi)試題的命制仍應(yīng)進(jìn)一步提高試題的綜合性,突顯篇章功能,擴(kuò)大考點(diǎn)范圍,提升考點(diǎn)層次。
完形填空;考點(diǎn)效度;考點(diǎn)層次
完形填空(cloze test)是國(guó)內(nèi)外各種外語(yǔ)測(cè)試常采用的題型,也是大學(xué)英語(yǔ)四級(jí)考試改革后繼續(xù)采用的題型之一,主要考查考生的英語(yǔ)綜合運(yùn)用能力。這一題型是泰勒(Taylor)根據(jù)格式塔心理設(shè)計(jì)出來(lái)的,反映了人們對(duì)于不完整語(yǔ)言的補(bǔ)全心理。起初,完形填空只用于測(cè)量語(yǔ)言讀物的可讀性,后來(lái)逐漸成為常用的綜合性外語(yǔ)測(cè)試題型。武尊民認(rèn)為完形填空是“一種標(biāo)準(zhǔn)化綜合性語(yǔ)言水平測(cè)試的組成部分,也可以用來(lái)配合課堂語(yǔ)言教學(xué)?!盵1]鑒于此,本文對(duì)2007年12月至2010年12月間CET-4完形填空試題進(jìn)行效度分析和驗(yàn)證,著重探析試題在文本選擇、內(nèi)容設(shè)計(jì)方面的有效性,以期為今后該類(lèi)試題的命制提供參考。
完形填空題型具有多種形式,按填空方式劃分為開(kāi)放式和選擇式兩種,按刪詞方式劃分為定距刪詞、特定范疇刪詞和合理刪詞三種。目前,大學(xué)英語(yǔ)四級(jí)考試中采用的是合理刪詞分題選擇的題型。這種題型的優(yōu)點(diǎn)是可以選擇考點(diǎn),從層次上、領(lǐng)域上、難易程度上對(duì)試題加以控制和調(diào)整,便于保證測(cè)試效度?!洞髮W(xué)英語(yǔ)四級(jí)考試大綱》(以下稱(chēng) 《考試大綱》)規(guī)定:完形填空共20題,考試時(shí)間為15分鐘?!霸谝黄}材熟悉、難度適中的短文(約220詞)中留有20個(gè)空白,空白處所刪去的詞既有實(shí)詞也有虛詞,每個(gè)空白為1題,每題有4個(gè)選擇項(xiàng),要求考生在全面理解內(nèi)容的基礎(chǔ)上選擇一個(gè)最佳答案,使短文的意思和結(jié)構(gòu)恢復(fù)完整?!盵2]可見(jiàn),該類(lèi)題型具有語(yǔ)篇、語(yǔ)境,要求考生根據(jù)上下文語(yǔ)境進(jìn)行判斷和選擇,從而使整個(gè)語(yǔ)篇成為合乎邏輯、語(yǔ)言通順、意義連貫的短文。同時(shí),它以篇章為載體,采用綜合考點(diǎn)的形式進(jìn)行測(cè)試,可以充分反映出考生的語(yǔ)言知識(shí)和技能,符合目標(biāo)語(yǔ)言實(shí)際使用情況,具有較高的真實(shí)性。
近年來(lái),完形填空試題的效度研究已成為語(yǔ)言測(cè)試領(lǐng)域探討的熱點(diǎn)。完形填空是一種基于篇章類(lèi)的試題,命題的得當(dāng)與否關(guān)鍵是在于文本的選擇和考點(diǎn)效度的確定。[3]因而,要驗(yàn)證完形填空試題的效度就應(yīng)將文本與考點(diǎn)統(tǒng)一起來(lái)從宏觀和微觀兩個(gè)角度來(lái)考察命題的效度。從而,本文將從文本的選擇和考點(diǎn)效度分別進(jìn)行分析、驗(yàn)證。
3.1 完形填空文本的選擇
《考試大綱》中已明確規(guī)定完形填空題采用的文本是一篇題材熟悉、難度適中、長(zhǎng)度合適的短文(約220~250詞)。據(jù)此,我們對(duì)7套試題中的完形填空試題的長(zhǎng)度、主題和題材進(jìn)行了統(tǒng)計(jì)(見(jiàn)表 1)。
表1 完形填空文本類(lèi)型
根據(jù)表1統(tǒng)計(jì),首先7篇試題中完形填空文本的總詞數(shù)雖有所波動(dòng),但基本保持在235詞左右,基本符合考試大綱要求。其次,文本主題大多是考生們所熟知的,或與之相關(guān)的內(nèi)容,體現(xiàn)出主題的時(shí)代性、教育性。如關(guān)于大學(xué)功能、電子商務(wù)和城市化進(jìn)程等話(huà)題。而文本題材包括社會(huì)生活與文化、經(jīng)濟(jì)貿(mào)易及教育等多方面,體現(xiàn)出題材的多樣性。
3.2 完形填空的考點(diǎn)效度
3.2.1 效度及考點(diǎn)效度的概念
“語(yǔ)言測(cè)試的效度(validity),亦稱(chēng)有效性,指測(cè)試所考的,是否就是所要考的,或者說(shuō),在多大程度上考了目的所要考的?!盵4]Bachman認(rèn)為試題的效度和信度是衡量試題質(zhì)量的主要因素,其中效度的高低是衡量語(yǔ)言測(cè)試質(zhì)量最重要的指標(biāo),是語(yǔ)言測(cè)試的基本出發(fā)點(diǎn)。一項(xiàng)效度很低的語(yǔ)言測(cè)試是沒(méi)有意義的。[5]
就考點(diǎn)效度來(lái)講,它和構(gòu)念效度、效標(biāo)關(guān)聯(lián)效度概念一樣,都是對(duì)語(yǔ)言測(cè)試題型在效度方面提出的質(zhì)量要求。不同之處在于它是專(zhuān)門(mén)針對(duì)完形填空這類(lèi)綜合考點(diǎn)單技能試題提出的。就完形填空題而言,所謂考點(diǎn)效度,就是指命題者在命題時(shí)應(yīng)該對(duì)所要?jiǎng)h除的項(xiàng)目進(jìn)行考查分析和選擇取舍,以盡量提高刪除項(xiàng)目的考點(diǎn)層次,充分體現(xiàn)和利用完形填空題的篇章特色、語(yǔ)境功能和綜合特點(diǎn),以便能充分考查出受試者綜合運(yùn)用語(yǔ)言知識(shí)的能力。[6]簡(jiǎn)言之,完形填空試題的考點(diǎn)效度主要是在考點(diǎn)刪除的合理性方面提出的效度要求。[7]
3.2.2 考點(diǎn)因素和考點(diǎn)層次
許多測(cè)試專(zhuān)家(李筱菊1999,陳曉扣2001)指出完形填空的考點(diǎn)效度主要應(yīng)從兩方面來(lái)看,即考點(diǎn)因素和考點(diǎn)層次。[8]考點(diǎn)因素是測(cè)試的內(nèi)容,包括語(yǔ)法因素、慣用搭配因素和意義因素三種。考點(diǎn)層次指受試在做題時(shí),需要考慮多廣的上下文信息及多少長(zhǎng)時(shí)記憶中的信息。[9]完形填空的考點(diǎn)層次大體可分為四類(lèi):1、單詞層次(W)。這是最低的層次。在這一層次上,只需看單詞,無(wú)須看單詞以外的上下文就能決定填什么詞。屬于這一層次的大多是單詞拼寫(xiě)、語(yǔ)法變位及構(gòu)詞法的題目。2、詞組層次(P)。在這一層次上,需要填的詞與其前、后的詞具有某種固定的搭配關(guān)系,通過(guò)空缺前、后的詞便能明晰應(yīng)該填什么詞。詞組層次是較常見(jiàn)的,主要是介詞與名詞、形容詞或動(dòng)詞之間的固定搭配。3、句子層次(S)。對(duì)所缺的詞單靠其與前、后詞的關(guān)系不能決定,但可以在其所在的句子內(nèi)決定,不用超出句子的范圍。這一層次上的考點(diǎn)主要是句子里關(guān)系代詞、連詞或副詞的考查。4、語(yǔ)篇層次(D)。這是最高的層次。對(duì)于所缺詞光看其所在句子不行,還需要從語(yǔ)篇層次上加以考慮。這類(lèi)考點(diǎn)主要涉及到文章中信息含量豐富的名詞、動(dòng)詞和指示代詞等。根據(jù)這一考點(diǎn)效度分析理論,我們將對(duì)7篇完形填空試題進(jìn)行具體統(tǒng)計(jì),全面分析各篇試題的考點(diǎn)因素和考點(diǎn)層次。
4.1 考點(diǎn)因素
根據(jù)試題測(cè)試的內(nèi)容,本文從語(yǔ)法、慣用搭配、意義因素三方面對(duì)7篇試題進(jìn)行了統(tǒng)計(jì)分析。
表2 考點(diǎn)因素統(tǒng)計(jì)分析
從表2中可見(jiàn),7篇完形填空試題均以意義因素考查為主體,兼顧考查語(yǔ)法及慣用法因素。以意義因素考查為主體,即要求考生要透徹理解語(yǔ)篇中句與句之間、句與段之間的關(guān)聯(lián),旨在考查考生綜合運(yùn)用語(yǔ)言的能力。此外,語(yǔ)法因素也是每篇試題的常規(guī)考點(diǎn),比例控制在15%左右,有助于考生對(duì)基礎(chǔ)語(yǔ)法的學(xué)習(xí)、掌握。在慣用搭配因素上,由于其屬于低層次考題,比例控制在10%左右,且其比例呈下降趨勢(shì)。
4.2 考點(diǎn)層次
根據(jù)前文所列的四大考點(diǎn)層次的分類(lèi),本文對(duì)7篇試題的考點(diǎn)層次做了統(tǒng)計(jì)分析,并統(tǒng)計(jì)了三個(gè)層次所占比例,結(jié)果見(jiàn)表3、表4。
表3 考點(diǎn)層次分布
表4 考點(diǎn)層次比例
從表3、4統(tǒng)計(jì)可見(jiàn),7篇試題主要考查語(yǔ)篇層次、句子層次和詞組層次,沒(méi)有涉及單詞層次的考查。從三個(gè)考點(diǎn)層次的比例看,句子和語(yǔ)篇層次的比例基本保持穩(wěn)定,詞組層次比例有減少趨勢(shì)。這一比例反映出四年來(lái)完形填空試題的命制一直貫徹考試大綱的要求“主要考核學(xué)生運(yùn)用語(yǔ)言的能力,同時(shí)也考核學(xué)生對(duì)語(yǔ)法結(jié)構(gòu)和詞語(yǔ)用法的掌握程度。”為了明晰各個(gè)層次的命題特點(diǎn),這里本文通過(guò)實(shí)例加以分析說(shuō)明。
4.2.1 詞組層次考點(diǎn)
詞組層次,即著重考查不同詞類(lèi)之間固定的搭配關(guān)系。該類(lèi)考點(diǎn)屬于低層次的題,只要掌握固定的搭配即可選出正確答案。例如:
例 1:(2007 年 12 月卷 67、68 題)Mood may be defined _67_a temporary and mild positive or negative feeling that is generalized and not tied _6__8 any particular circumstance.
67.A as B about C by D with
68.A over B under C to D up
本句是對(duì) “心情”加以定義,67題考點(diǎn)是define sth as sth這一結(jié)構(gòu)的被動(dòng)語(yǔ)態(tài)be defined as…。而68題考點(diǎn)是be tied to的搭配關(guān)系。
例 2:(2009年 12月卷 79題) People are changing their jobs,____,partners and lifestyles more often than __7_9_,they need opportunities to learn at every age.
79.A ago B ever C previously D formerly
本題考查的是慣用搭配,本句意為人們比以往更加頻繁的改變工作、伙伴及生活方式,這里more often than ever是慣用搭配,表示“比以往任何時(shí)候都要頻繁”。
例 3:(2010 年 12 月卷 81 題)This is where cities___quickly into rural areas,sometimes _8__1 a much faster rate than urban population growth.
81.A in B beyond C with D at
本題是考查介詞辨析,其中“at a much faster rate”表示以更快的速度,因?yàn)樵趓ate、speed等速率的詞前用at是常見(jiàn)搭配。
4.2.2 句子層次考點(diǎn)
句子層次是近年來(lái)完形填空的一個(gè)重要考點(diǎn),所填詞可以在空缺所在句子之內(nèi),根據(jù)句意選出合適答案。例如:
例 4:(2008年 12 月卷 68 題)This is especially true_ 6__7 children from families and communities that have the resources needed to organize and_68_sports programs and make sure…
68.A spread B speed C spur D sponsor
本句68題空格前有并列連詞and,說(shuō)明空格處所填詞與其前面的organize具有邏輯上的對(duì)等關(guān)系,根據(jù)這一關(guān)系應(yīng)選sponsor(贊助、主辦),意思為組織和舉辦運(yùn)動(dòng)項(xiàng)目。
例 5:(2010 年 6 月卷 84 題 )..many banks added online access, __8_4_online banking and bill paying became _____.
84.A and B or C but D though
本句84題空格的前半句說(shuō)到許多銀行增設(shè)了網(wǎng)絡(luò)在線(xiàn)服務(wù),后半句是說(shuō)這種服務(wù)給支付方式帶來(lái)的變革,蘊(yùn)含著一種因果關(guān)系,這里選項(xiàng)and正體現(xiàn)出這個(gè)關(guān)系。
例 6:(2010年 12月卷 83題)Art Hall at the University of Kansas found that people are moving away from the_83_cities to smaller ones.
83.A essential B prior C primitive D major本句中出現(xiàn)了from… to…的結(jié)構(gòu),因而根據(jù)后面的smaller,前面83題應(yīng)選與之意義相反的詞major,表示人們逐步開(kāi)始逆城市化趨勢(shì)。
4.2.3 語(yǔ)篇層次考點(diǎn)
語(yǔ)篇層次考點(diǎn)是近年來(lái)試題涉及最多的考點(diǎn),也是最高層次考點(diǎn)。它要求考生應(yīng)讀懂全文,把握語(yǔ)意,并注意語(yǔ)篇的銜接、邏輯關(guān)系。同時(shí),在結(jié)合上下文語(yǔ)境的基礎(chǔ)上考生應(yīng)聯(lián)系自身已構(gòu)建的知識(shí),去分析、比較產(chǎn)生新的認(rèn)知,在理解中將語(yǔ)篇補(bǔ)充完整。例如:
例 7:(2008年 6月卷 70題)The smaller and newer universities do not_70_the stuff or equipment to carry out the _71_research projects possible in larger intuitions.
70.A occupy B involve C possess D spare
本題70空格前面的語(yǔ)篇介紹了大學(xué)是一種機(jī)構(gòu),既教授各門(mén)學(xué)科,又承擔(dān)各種研究工作。因而不同規(guī)模的大學(xué)其研究能力也不相同,據(jù)此已知知識(shí)建構(gòu),可知規(guī)模較小的新建學(xué)校不具備規(guī)模大的院校進(jìn)行研究的人力和物力。所以possess(擁有、占有)為正確選項(xiàng)。
例8:(2009年 6月卷 79題)Alarmed by this state of_79_,the Japan Automobile Manufactures Association (JAMA) _80_a comprehensive study of the market in 2006.
79.A mess B boom C growth D decay
本句79題的選擇離不開(kāi)上下文語(yǔ)境,前文一直在介紹日本汽車(chē)銷(xiāo)量下降的事情,而且全篇中反復(fù)出現(xiàn)slip,drop,fall等表示銷(xiāo)售下降的詞,結(jié)合前文所述應(yīng)填入表負(fù)面意義的詞decay(衰退),才符合全篇主題。
例9:(2009年12月卷81題)People need opportunities to make a“midlife review”to _8__1 to the later stages of employed life,and to plan for the transition……
81.A transform B yield C adjust D suit
本句81題也離不開(kāi)上下文語(yǔ)境,前文說(shuō)到許多老年人50多歲后有了新工作,對(duì)這一年齡段的人而言,他們需要機(jī)會(huì)來(lái)適應(yīng)后期的新工作和生活,綜合考慮上下文只有 adjust和to連用表示“適應(yīng)”,因而adjust與語(yǔ)篇意義相符。
例 10:(2010年 12月卷 68 題)A century ago, _68_than five percent of all people lived in cities. ____the middle of this century it could be seventy percent, or ____six and a half billion people.
68.A rather B more C less D other
就本句68題而言,如果不具備上下文的推理能力,考生會(huì)在more和less之間猶豫不決,遇到一定的困難。然而通過(guò)上下文強(qiáng)調(diào)的是城市化的迅速發(fā)展,以及作者的敘述語(yǔ)氣可以推知,他必定在感嘆這個(gè)變化的巨大,因此68題應(yīng)該是不到 5%,應(yīng)選less than(少于,不到),更能突出這種反差,形成對(duì)比。
綜上所述,7篇試題在考點(diǎn)層次上均以句子、語(yǔ)篇等中高層次考點(diǎn)為主,各層次考點(diǎn)比例較為合理,分布態(tài)勢(shì)較好,加強(qiáng)了語(yǔ)篇層次的考查,試題的考點(diǎn)效度是比較高的。試題考點(diǎn)要求考生不但要掌握基本的語(yǔ)法和詞匯知識(shí),而且要具有語(yǔ)篇分析、語(yǔ)意推理、邏輯思辨等多種能力。此外,考生自身的知識(shí)面和知識(shí)構(gòu)建,以及靈活運(yùn)用各種信息手段的能力在認(rèn)知和解讀語(yǔ)篇的過(guò)程中起重要作用。
完形填空試題是大學(xué)英語(yǔ)四、六級(jí)試題等各種考試的常用題型。作為綜合性試題,它能否真正測(cè)試出考生的語(yǔ)篇理解能力,引起了試題命題者和廣大英語(yǔ)教師的關(guān)注和重視。據(jù)此,本文從文本的選擇、考點(diǎn)效度等方面對(duì)7篇完形填空試題的效度進(jìn)行了分析。結(jié)果表明,各篇試題的效度總體上是比較高的,符合考試大綱的命題要求。但需要強(qiáng)調(diào)是完形填空的優(yōu)點(diǎn)在于它具有語(yǔ)篇、語(yǔ)境,那么對(duì)于該類(lèi)試題的命制要盡可能發(fā)揮出試題的綜合特性,努力把考點(diǎn)的制約范圍擴(kuò)大、層次提高,使考點(diǎn)的層次做到科學(xué)、合理的分布。只要這樣才能真正提高試題的效度,促進(jìn)學(xué)生語(yǔ)言理解能力的提高。
[1]武尊民.英語(yǔ)測(cè)試的理論與實(shí)踐[M].北京:外語(yǔ)教學(xué)與研究出版社,2005.
[2]大學(xué)英語(yǔ)四、六級(jí)標(biāo)準(zhǔn)考試設(shè)計(jì)組.大學(xué)英語(yǔ)四級(jí)考試大綱[M].上海:上海外語(yǔ)教育出版社,2006.
[3]蘭春壽.高考英語(yǔ)完形填空題的效度分析[J].基礎(chǔ)英語(yǔ)教育,2008,(5):75.
[4]李筱菊.語(yǔ)言測(cè)試科學(xué)與藝術(shù)[M].長(zhǎng)沙:湖南教育出版社,1999.
[5]Bachman,L.F.Fundamental Considerations in Language Testing[M].Oxford:Oxford University Press,1999.
[6]周長(zhǎng)銀.98高考英語(yǔ)完形填空題的考點(diǎn)效度分析[J].外語(yǔ)與外語(yǔ)教學(xué),1999,(4):32
[7]聶建中.高考英語(yǔ)完形填空的考點(diǎn)效度分析[J].教育理論與實(shí)踐,2005,(3):54.
[8]文慧、聶建中.大學(xué)英語(yǔ)四級(jí)考試完形填空試題的考點(diǎn)效度分析[J].山西農(nóng)業(yè)大學(xué)學(xué)報(bào),2007,(3):309.
[9]陳曉扣.論英語(yǔ)測(cè)試完形填空試題[J].解放軍外國(guó)語(yǔ)學(xué)院學(xué)報(bào),2001,(3):72.
A DIACHRONIC RESEARCH OF TESTING-POINT VALIDITY OF CLOZE IN CET-4
WANG GangHE Jing
(Chaohu College,Chaohu Anhui 238000)
Cloze test is one of the common patterns in language testing at home and abroad,which mainly examines the integrated English ability of the test candidates.With CET-4 papers from December 2007 to December 2010 as samples,this article analyses its validity from text selection,testing-point gradation and testing-point validity.Results show that the cloze tests tally with the requirements of CET-4 Testing Syllabus with proper texts and rational testing-point gradation.But the cloze test should enhance its comprehensiveness and textual function further in the future.
cloze;testing-point validity;testing-point gradation
G64;H310.4
A
1672-2868(2011)05-0131-06
2011-05-09
王鋼(1979-),男,安徽巢湖人。巢湖學(xué)院外語(yǔ)系教師,碩士,研究方向:應(yīng)用語(yǔ)言學(xué)及語(yǔ)用學(xué)。
責(zé)任編輯:陳 侃