李傳益

(湖北科技學(xué)院 外國語學(xué)院，湖北 咸寧 437100)

高校英語專業(yè)四級(jí)考試質(zhì)量考生問卷調(diào)查*

李傳益

(湖北科技學(xué)院 外國語學(xué)院，湖北 咸寧 437100)

本文對(duì)我校英語專業(yè)二至四年級(jí)的384名學(xué)生進(jìn)行了一次TEM4質(zhì)量問卷調(diào)查，內(nèi)容涉及試卷難度、題目數(shù)量、區(qū)分度、效度以及與TEM4有關(guān)的考生自我評(píng)價(jià)。通過對(duì)調(diào)查問卷的統(tǒng)計(jì)分析，我們認(rèn)為，考生對(duì)TEM4試卷總體和六個(gè)分測(cè)驗(yàn)的質(zhì)量評(píng)價(jià)與我們的期望一致。

高校英語專業(yè)四級(jí)考試;信度;效度;問卷調(diào)查

作為應(yīng)用語言學(xué)的分支，英語教學(xué)與學(xué)習(xí)都離不開科學(xué)的測(cè)試?yán)砟詈头椒?，反過來，測(cè)試也會(huì)對(duì)英語教學(xué)與學(xué)習(xí)產(chǎn)生重要的反撥效應(yīng)。因?yàn)橛⒄Z測(cè)試關(guān)系到每位教師、學(xué)生以及與測(cè)試相關(guān)的使用者。從某種意義上來說，測(cè)試既是對(duì)學(xué)生學(xué)習(xí)程度的檢測(cè)，也是對(duì)教師教學(xué)成敗的檢驗(yàn)。因此，在中國這樣一個(gè)歷來極為重視考試并且以應(yīng)試教育為主的國家，它在很大程度上在某些地方已經(jīng)成為整個(gè)教、學(xué)過程的指揮棒，深刻地影響著教師的教和學(xué)生的學(xué)，即考什么，就教什么。比如，在有些中小學(xué)校，英語口語和聽力技能的訓(xùn)練被擱置在一邊，整個(gè)教學(xué)活動(dòng)圍繞著語法和試卷進(jìn)行，很多學(xué)生是通過做試卷來學(xué)英語的，高校的英語教學(xué)也不容樂觀。作為全國唯一的測(cè)量英語專業(yè)學(xué)生基礎(chǔ)階段英語水平的大規(guī)模標(biāo)準(zhǔn)化考試，高校英語專業(yè)四級(jí)考試(TEM4)在評(píng)估英語專業(yè)學(xué)生的基礎(chǔ)能力水平中占有不可替代的地位，很多學(xué)校將TEM4通過率作為教師評(píng)定職稱和晉級(jí)的標(biāo)準(zhǔn)，很多用人單位也將TEM4證書作為選拔人才的依據(jù)，因而學(xué)生十分看中TEM4成績，有些學(xué)生在考試中鋌而走險(xiǎn)，頻頻作弊，有些甚至不惜重金請(qǐng)人代考。從這個(gè)意義上說，TEM4實(shí)際上已經(jīng)成為一項(xiàng)高風(fēng)險(xiǎn)的考試，因此，對(duì)其質(zhì)量的考查就顯得尤為重要。一項(xiàng)不科學(xué)的考試不但會(huì)毀掉一些考生的前途，也會(huì)在很大程度上誤導(dǎo)教學(xué)，一項(xiàng)考試只有具有較高的質(zhì)量才能真正發(fā)揮其作用。

衡量和評(píng)價(jià)考試質(zhì)量的最重要的指標(biāo)是信度和效度，因此，我們的調(diào)查問卷選取了與這這兩個(gè)指標(biāo)最密切相關(guān)的一些內(nèi)容:試卷難度、區(qū)分度、題目數(shù)量等，這些調(diào)查項(xiàng)目分試卷總體和聽寫、聽力理解、完型填空、語法和詞匯、閱讀理解以及寫作等六個(gè)分測(cè)驗(yàn)進(jìn)行。同時(shí)，考慮到考生的總體差異，在調(diào)查問卷中我們還編制了一些考查考生基本情況的項(xiàng)目，如考生考試次數(shù)、考試動(dòng)機(jī)、考生對(duì)考試的自我評(píng)價(jià)以及對(duì)考試結(jié)果的自我預(yù)測(cè)等。

一、調(diào)查對(duì)象

我們選取了我校英語專業(yè)二年級(jí)以上學(xué)生430人參加此次問卷調(diào)查，剔除填寫不合乎要求的問卷(當(dāng)考生沒做答的題目超過10個(gè)時(shí)，我們有理由懷疑該考生反應(yīng)的可靠性)，回收有效問卷384份。

二、問卷編制內(nèi)容和方法

此項(xiàng)調(diào)查問卷由47道題構(gòu)成，都是多項(xiàng)選擇題，每題都采用5級(jí)評(píng)分制，考生只能選擇一個(gè)答案。1－7題分別考查考生對(duì)TEM4試卷總體和聽寫、聽力理解、完型填空、語法和詞匯、閱讀理解以及寫作等六個(gè)分測(cè)驗(yàn)難度的評(píng)價(jià)，選項(xiàng)為:A.非常難，B.比較難，C.一般，D.比較容易，E.非常容易。8－14題分別考查考生對(duì)TEM4試卷總體和六個(gè)分測(cè)驗(yàn)區(qū)分度的評(píng)價(jià)，選項(xiàng)為:A.非常具有區(qū)分度，B.比較有區(qū)分度，C.一般，D.沒有區(qū)分度，E.非常沒有區(qū)分度。15－21題分別考查考生對(duì)TEM4試卷總體和六個(gè)分測(cè)驗(yàn)題目數(shù)量的評(píng)價(jià)，選項(xiàng)為:A.非常多，B.比較多，C.很合適，D.不多，E.非常少。22－28題分別考查考生對(duì)TEM4試卷總體和六個(gè)分測(cè)驗(yàn)效度的評(píng)價(jià)，選項(xiàng)為:A.能真實(shí)考查考生的實(shí)際水平，B.基本能考查考生的實(shí)際水平，C.不清楚，D.不太能考查考生的實(shí)際水平，E.完全不能考查考生的實(shí)際水平。29題涉及考生考試次數(shù)(A.3次以上，B.3次，C.2次，D.1次，E.沒參加過)。30題是關(guān)于TEM4對(duì)考生英語學(xué)習(xí)影響力的評(píng)價(jià):TEM4能有助于提高你的英語水平嗎?選項(xiàng)為:A.幫助非常大，B.幫助比較大，C.說不清楚，D.幫助比較小，E.基本沒有幫助。31－34題涉及考生參加TEM4動(dòng)機(jī)的四個(gè)維度:檢驗(yàn)英語水平，父母或畢業(yè)要求，從眾心理，找工作。選項(xiàng)為:A.非常贊成，B.贊成，C.不贊成也不反對(duì)，D.反對(duì)，E.非常反對(duì)。35－48題為考生對(duì)TEM4總體和六個(gè)分測(cè)驗(yàn)的自我評(píng)價(jià)以及對(duì)考試結(jié)果的自我預(yù)測(cè)，選項(xiàng)為:A.非常好，B.比較好，C.一般，D.不太好，E.非常不好。

三、調(diào)查結(jié)果與分析

通過對(duì)回收的384份有效問卷進(jìn)行統(tǒng)計(jì)分析，我們發(fā)現(xiàn):

(一)對(duì)TEM4難度的評(píng)價(jià)

題目難度決定某題對(duì)某一被試群體是否適用，它也決定該題在某一試卷中的取舍(Henning，2001)。它是分析題目特征的關(guān)鍵因素，也影響考試的信度。如果某題或某次考試對(duì)某一被試群體太難，它就失去了意義。

考生對(duì)TEM4試卷總體和聽寫、聽力理解、完型填空、語法和詞匯、閱讀理解以及寫作等六個(gè)分測(cè)驗(yàn)難度的評(píng)價(jià)從難到易依次為試卷總體(45%)，聽寫(24.3%)、聽力理解(19.5%)、完型填空(16.6%)、閱讀理解(14.4%)、寫作(13.8%)、語法和詞匯(11.4%)。其中，聽寫、閱讀理解、完型填空都有近半數(shù)的考生認(rèn)為偏難，其中尤以聽寫被認(rèn)為是所有分測(cè)驗(yàn)里最難的。也有超過半數(shù)的考生認(rèn)為寫作、語法和詞匯兩項(xiàng)比較容易。這和我們的實(shí)踐經(jīng)驗(yàn)基本一致。平時(shí)的教學(xué)經(jīng)驗(yàn)也告訴我們，聽寫和聽力理解過程中的語速、生詞(短語或句子)、背景知識(shí)以及考生對(duì)聽寫和聽力理解的產(chǎn)出等對(duì)考生的影響極大，比如，考生聽懂了聽寫和聽力理解原文，但寫不出來或回答不了問題。而影響完型填空和閱讀理解的最大障礙是考生的語篇能力以及考試的時(shí)間因素。由于語法和詞匯項(xiàng)較少受語篇的影響，而考生又積累了一定的詞匯量，因而這部分對(duì)考生影響不大。但考生對(duì)作文的反應(yīng)出乎我們的意料。平時(shí)，考生的寫作并不理想，存在主謂、性數(shù)格的不一致，修飾語錯(cuò)位，句子不完整，懸垂修飾語，詞語亂用，一個(gè)簡單句出現(xiàn)多個(gè)謂語動(dòng)詞，累贅以及意思表達(dá)不連貫等問題。其原因主要是考生還沒有意識(shí)到自己存在的問題，只要他們認(rèn)為自己寫完了作文規(guī)定的字?jǐn)?shù)，就覺得自己的寫作能力還不錯(cuò)。

(二)對(duì)TEM4區(qū)分度的評(píng)價(jià)

除難度外，區(qū)分度是試題的另一個(gè)最重要的特征，它能有效地區(qū)分被試的能力水平(王孝玲，2004)。

考生對(duì)TEM4區(qū)分度的評(píng)價(jià)和對(duì)TEM4難度的評(píng)價(jià)一致?？忌鷮?duì)聽寫、聽力理解、完型填空、語法和詞匯、閱讀理解以及寫作等六個(gè)分測(cè)驗(yàn)區(qū)分度的評(píng)價(jià)從高到低依次為聽寫(25.4%)、聽力理解(18.7%)、完型填空(16.3%)、閱讀理解(15.2%)、寫作(13.9%)、語法和詞匯(11.5%)，對(duì)TEM4試卷總體的區(qū)分度評(píng)價(jià)約為53%。

(三)對(duì)TEM4題目數(shù)量的評(píng)價(jià)

一般來說，一項(xiàng)考試的題目數(shù)量越多，其信度越高，因此，題目數(shù)量是影響，也是考查信度的一個(gè)重要指標(biāo)(張凱，2002)。在此次問卷調(diào)查中，考生對(duì)六個(gè)分測(cè)驗(yàn)題目數(shù)量的評(píng)價(jià)存在顯著差異，他們對(duì)語法和詞匯題目數(shù)量的滿意程度最高，近62%的考生選擇了“很合適”;近45%的考生認(rèn)為聽力理解和完型填空題目數(shù)量“很合適”，但也有約21%的考生認(rèn)為聽力理解和完型填空題目數(shù)量“比較多”;考生對(duì)閱讀理解題有點(diǎn)排斥，因?yàn)榧s43%的考生選擇了“比較多”，近11%的考生選擇了“非常多”，沒有考生選擇“很合適”和“非常少”兩項(xiàng)，也有很多考生反映他們的閱讀理解沒有做完;57%的考生認(rèn)為聽寫和寫作題量“很合適”，也有22%的考生認(rèn)為這兩題“不多”。認(rèn)為TEM4試卷總題量“很合適”的為36%，認(rèn)為“非常多”和“比較多”的分別占25%和23%，沒有考生選擇“非常少”。這表明，考生認(rèn)為，TEM4題目數(shù)量偏多，在此意義上，與其說影響考生答題的重要因素是題目難度，還不如說是速度。其中，閱讀理解花費(fèi)他們的答題時(shí)間較長，也最容易讓他們疲勞。從考生對(duì)TEM4試卷總題量的反應(yīng)來看，也符合他們平時(shí)的學(xué)習(xí)狀況、答題情況和英語水平。

(四)對(duì)TEM4效度的評(píng)價(jià)

效度是衡量考試質(zhì)量的最重要的指標(biāo)之一，它指考試是否測(cè)出了或在多大程度上測(cè)出了它想測(cè)的東西(Heaton，2000)。此次問卷中的22－28題分別考查考生對(duì)TEM4試卷總體和六個(gè)分測(cè)驗(yàn)效度的評(píng)價(jià)。從考生的反應(yīng)來看，他們對(duì)六個(gè)分測(cè)驗(yàn)效度的評(píng)價(jià)都是積極態(tài)度＞中間態(tài)度＞消極態(tài)度，對(duì)TEM4試卷總體效度的評(píng)價(jià)則是中間態(tài)度＞積極態(tài)度＞消極態(tài)度。其中，聽寫和聽力理解的效度評(píng)價(jià)是最高的(22%和 21%)，完型填空(19%)、閱讀理解(17%)、寫作(13%)、語法和詞匯(8%)次之。雖然考生認(rèn)為聽寫難度較大，但他們?nèi)匀徽J(rèn)為這個(gè)題目能有效地考查考生的聽寫水平。其它五個(gè)分測(cè)驗(yàn)的效度評(píng)價(jià)符合我們的期望值，因?yàn)檫@些題型相對(duì)來說能鼓勵(lì)猜測(cè)，并不能真正代表學(xué)生的能力。

(五)考生自身項(xiàng)目評(píng)價(jià)

1.考生考試動(dòng)機(jī)

關(guān)于參加TEM4的動(dòng)機(jī)，“同意”或“非常同意”“找工作”的考生占69%，其次為“檢驗(yàn)英語水平”，“父母或畢業(yè)要求”和“從眾心理”;也有31% 的考生選擇了“反對(duì)”或“非常反對(duì)”“檢驗(yàn)英語水平”，這從另一側(cè)面佐證了相當(dāng)一部分考生學(xué)習(xí)英語和參加TEM4的目的并不是自發(fā)的，而是來自就業(yè)的壓力，這也從約24%的考生參加了2次以上的TEM4可以反映出來。而且，這一結(jié)論與考生對(duì)第30題的反應(yīng)也高度一致:約60%的考生選擇了中間和消極選項(xiàng)，即“說不清楚”，“幫助比較小”，和“基本沒有幫助”。所以，我們有理由相信，不是積極、主動(dòng)學(xué)習(xí)英語的學(xué)生，他們對(duì)參加TEM4的動(dòng)機(jī)評(píng)價(jià)和關(guān)于TEM4對(duì)考生英語學(xué)習(xí)影響力的評(píng)價(jià)都持不樂觀的態(tài)度。

2.考生對(duì)自身英語水平的評(píng)價(jià)

通過考查考生對(duì)自身各項(xiàng)英語語言技能的評(píng)價(jià)和對(duì)自己參加TEM4成績的預(yù)測(cè)，我們發(fā)現(xiàn)，考生選擇“一般”的超過半數(shù)。在對(duì)自身各項(xiàng)英語語言技能的評(píng)價(jià)中，只有語法和詞匯項(xiàng)的“非常好”和“比較好”超過消極選項(xiàng)“不太好”和“非常不好”，而聽寫、聽力理解和完型填空的選項(xiàng)都是消極選項(xiàng)超過積極選項(xiàng)，尤以聽寫的消極選項(xiàng)最多?？忌鷮?duì)自己參加TEM4成績的預(yù)測(cè)評(píng)價(jià)與技能評(píng)價(jià)一致:只有約19%的考生認(rèn)為自己的聽寫成績“非常好”和“比較好”，選擇“不太好”和“非常不好”的達(dá)到51%，同樣，預(yù)測(cè)自己語法和詞匯成績“非常好”和“比較好”的最多，達(dá)58%。這說明，考生對(duì)自己語言技能和TEM4成績預(yù)測(cè)的評(píng)價(jià)與對(duì)TEM4各分測(cè)驗(yàn)難度的評(píng)價(jià)一致，多數(shù)考生都認(rèn)為自己的聽寫技能最薄弱，而語法和詞匯技能相對(duì)要優(yōu)秀一些，因而對(duì)聽寫成績的預(yù)測(cè)就不太樂觀。

四、結(jié) 論

通過對(duì) TEM4的考生問卷調(diào)查，我們發(fā)現(xiàn)，盡管對(duì)TEM4的難度、區(qū)分度、題目數(shù)量、效度等還有不勝滿意之處，他們對(duì)TEM4試卷總體和各分測(cè)驗(yàn)的評(píng)價(jià)持積極態(tài)度的還是占多數(shù)，結(jié)論如下:

1.考生普遍認(rèn)為TEM4偏難，其中尤以聽寫和聽力理解最難。但我們對(duì)試卷的分析結(jié)果發(fā)現(xiàn)，學(xué)生認(rèn)為較難的測(cè)驗(yàn)，如聽力理解和完型填空未必如此，而學(xué)生認(rèn)為較易的測(cè)驗(yàn)，如寫作等也未必容易。這說明，考生的感覺和試題的實(shí)際難度并不完全等價(jià);

2.接近半數(shù)的考生認(rèn)為TEM4題目數(shù)量多，特別是閱讀理解材料較長，花費(fèi)他們答題的時(shí)間也相對(duì)較長，也最容易讓他們疲勞，有些學(xué)生反映他們的閱讀理解沒完成，這和考生平時(shí)的學(xué)習(xí)狀況、答題情況和英語水平一致;

3.對(duì)TEM4區(qū)分度和效度的評(píng)價(jià)，絕大多數(shù)考生都持積極態(tài)度，認(rèn)為它能有效區(qū)分能力水平不同的考生，并能測(cè)出考生的真實(shí)水平;

4.考生考試動(dòng)機(jī)越積極(選擇“檢驗(yàn)英語水平”和“學(xué)英語興趣”越多者)，其成績預(yù)測(cè)越樂觀，其對(duì)TEM4區(qū)分度和效度的評(píng)價(jià)，以及對(duì)TEM4對(duì)考生英語學(xué)習(xí)影響力的評(píng)價(jià)也越積極;

5.平時(shí)英語水平高的考生，其自我評(píng)價(jià)就高，其成績預(yù)測(cè)就更樂觀，或者說，他們對(duì)英語語言技能的自我評(píng)價(jià)和對(duì)自我TEM4成績預(yù)測(cè)的評(píng)價(jià)高度一致;

綜上所述，盡管考生個(gè)體差異影響他們對(duì)TEM4質(zhì)量的評(píng)價(jià)，但他們總體上都對(duì)TEM4質(zhì)量持積極態(tài)度，基本上能反映TEM4的質(zhì)量。但考生的反應(yīng)也給我們反饋了一些問題，值得我們深思。在今后的教學(xué)實(shí)踐中，我們應(yīng)該充分發(fā)揮“以學(xué)生為主體”的教學(xué)理念，幫助學(xué)生樹立正確的英語學(xué)習(xí)觀，杜絕他們?yōu)榱藨?yīng)試而學(xué)英語的做法，切實(shí)有效地培養(yǎng)他們的語言技能。同時(shí)，讓全社會(huì)真正認(rèn)識(shí)考試的本質(zhì)，使考試真正指導(dǎo)和服務(wù)教學(xué)，而不是教學(xué)的指揮棒。

［1］Heaton，J.B.(2000)Writing English Language Test［M］.Beijing:Foreign Language Teaching and Research Press.

［2］Henning，G.(2001)A guide to Language Testing:Development，Evaluation and Research［M］.北京:外語教學(xué)與研究出版社.

［3］王孝玲.教育測(cè)量［M］.上海:華東師范大學(xué)出版社，2004.

［4］張凱.語言測(cè)驗(yàn)理論與實(shí)踐［M］.北京:語言文化大學(xué)出版社，2002.

G642

A

1006－5342(2012)04－0054－03

2011－12－18

TEM4質(zhì)量考查研究(2011B036);2012年湖北省教育廳人文社科課題:高校英語專業(yè)四級(jí)考試質(zhì)量考查與評(píng)價(jià)(2012G380)的階段性成果之一