葉梅

【摘要】本文對上海工商外國語職業(yè)學(xué)院首屆職場英語水平考試，從正態(tài)性、信度效度、難度和區(qū)分度等方面進行了試卷質(zhì)量分析，在此基礎(chǔ)上對試卷各題型的設(shè)置及分值分配進行反思，以期編制出更好的職場英語水平考試試卷。

【關(guān)鍵詞】職場英語 考試分析 反思

教育部高職高專英語教指委頒布的《高等職業(yè)教育英語課程教學(xué)要求》（試行）（2010年6月）中明確提出“高職英語課程以培養(yǎng)學(xué)生實際應(yīng)用英語的能力為目標(biāo)，側(cè)重職場環(huán)境下語言交際能力的培養(yǎng)，使學(xué)生逐步提高用英語進行交流和溝通的能力”。在教學(xué)中，我們要遵循外語學(xué)習(xí)規(guī)律，結(jié)合高職教育特點，在打好語言基本功的基礎(chǔ)上，以職場崗位需求為主線開發(fā)和構(gòu)建教學(xué)內(nèi)容體系，著力培養(yǎng)學(xué)生職場環(huán)境下的英語口頭和書面交際能力。因此，我們提出并實施了“三五”教改方案，就是將大學(xué)英語教學(xué)分成三個階段和五個學(xué)期，即：基礎(chǔ)英語階段（大一兩個學(xué)期）、通用職場英語階段（大二兩個學(xué)期）及專業(yè)職場英語階段（大三第一學(xué)期八周）。三階段五學(xué)期的教學(xué)內(nèi)容各有側(cè)重，相互滲透。

課程考核是構(gòu)建課程體系的重要一環(huán)，為進一步完善了公共英語課程體系，在大二年級第四學(xué)期期末設(shè)置職場英語水平考試，考查學(xué)生語言水平和教學(xué)效果。職場英語水平考試有兩個顯著的特點：一是重視考查學(xué)生的英語口語能力?？谠囉伞拔⑿脱葜v”（Mini-Talk）和“簡短對話”（Short Conversation）兩部分組成。通過現(xiàn)場演講和即興對話，考查學(xué)生的口語表達能力；二是注重考查職場英語應(yīng)用能力。筆試部分的試題不僅涉及基礎(chǔ)英語，還包含了職場英語內(nèi)容（如詞匯、翻譯和應(yīng)用文寫作），較好體現(xiàn)了職業(yè)教育的特點和就業(yè)崗位對求職者英語能力的需求。

2012級學(xué)生在2014年6月參加了上海工商外國語學(xué)院首屆職場英語水平考試。本次考試總分150分，分筆試（100分）和口試（50分）兩部分，口試由班級授課老師進行一對一的口試，給出分數(shù)。筆試為2012級學(xué)生第四學(xué)期的期末統(tǒng)考，考試規(guī)范，成績可信度較高。本文擬采用SPSS.19軟件對1333份筆試成績樣本進行分析，并提出對職場英語水平考試題型設(shè)置及分值分配的反思。

一、考試分析及主要指標(biāo)

考試分析的首要環(huán)節(jié)是試卷質(zhì)量分析。根據(jù)測量學(xué)原理，在對考試成績進行正態(tài)擬合檢驗的基礎(chǔ)上，從試卷的信度效度和難度、區(qū)分度三個方面獲取本次考試的相關(guān)信息。

1.正態(tài)擬合檢驗。一門課程考試的質(zhì)量首先取決于作為考試工具的試卷是否能夠反映學(xué)生學(xué)習(xí)的實際水平。一項符合學(xué)生試卷水平的考試，理論上，其考試成績應(yīng)該服從或近似服從正態(tài)分布。也就是說，成績中等水平的學(xué)生占大多數(shù)，而成績特別好和特別差的學(xué)生均為少數(shù)。因此，試卷分析首先必須檢驗其考試結(jié)果的分布情況。采用SPSS.19軟件對1333份筆試樣本進行分析后，本次考試的成績分布頻數(shù)如圖一。

本次職場英語水平考試筆試部分的平均成績?yōu)?1.4，標(biāo)準(zhǔn)差為15.7。通過正態(tài)擬合檢驗發(fā)現(xiàn)本次考試的成績接近負偏態(tài)分布（見圖一），試卷基本上能反映學(xué)生的實際情況。

2.信度效度?？荚囆哦戎缚荚嚱Y(jié)果的一致性程度，是表明考試質(zhì)量的穩(wěn)定性和可靠性的一個重要指標(biāo)。試卷的信度高，意味著考試結(jié)果很少受隨機因素的影響，考試的結(jié)果與其他等價考試的結(jié)果是一致的，考試成績能真實可靠地反映學(xué)生的學(xué)業(yè)水平。效度是對考試所要測量的內(nèi)容所達到的程度的估計，考試是否準(zhǔn)確地測定了要測定的內(nèi)容。

只有信度較高的測試才能有較高的效度，但是，效度較高不能保證信度也一樣高?？梢哉f，信度和效度的關(guān)系是單方面的，信度差則效度差，但效度差不一定信度差。只有信度高的考試結(jié)果才能為試卷分析提供有意義的信息。

首先通過SPSS.19軟件計算出試題的均值和標(biāo)準(zhǔn)差，然后通過庫德·理查遜公式計算出本次考試的信度。

根據(jù)計算，本次考試的信度系數(shù)為0.939，可見本次考試信度較好，考試結(jié)果是穩(wěn)定可靠的。

3.難度、區(qū)分度。試題的難度就是試題的難易程度，也是試題質(zhì)量分析的一個數(shù)量指標(biāo)。試題的難度與考試分數(shù)的分布有著直接的關(guān)系。如果試題太難，則考試分數(shù)成負偏態(tài)分布。如果試題太容易，則考試分數(shù)成正偏態(tài)分布。難度可用正確回答試題人數(shù)與參加測驗總?cè)藬?shù)之比值作為指標(biāo)，也可以采用極端分組法。試卷難度會對試卷多方面的質(zhì)量產(chǎn)生深刻的影響。因此，難度必須適宜。本次考試分析采用極端分組法分析了試卷試題的難度，把全體考生的成績從高分到低分排列，把處于前27%的考生列為高分組，處于后27%的考生列為低分組。

試題的區(qū)分度是用來判斷試題具有多大能力把成績較好和較差的學(xué)生檔次區(qū)分開來的指標(biāo)，也就是試題在用于考試時使水平高的學(xué)生得高分，使水平低的學(xué)生得低分的傾向。區(qū)分度是鑒定試題的重要依據(jù)。區(qū)分度不高的考試，學(xué)業(yè)優(yōu)秀和學(xué)業(yè)差的學(xué)生在考試成績上差異不大，或沒有規(guī)律性。它可用一組學(xué)生的本試題得分與這組學(xué)生的本試卷考分之間的相關(guān)程度來表示。另一種方法是比較兩個極端組通過一個題項的比例，即從分布的兩端選出高分組和低分組，然后將高分組和低分組通過每個項目的分數(shù)用百分比來表示，這兩個百分數(shù)之差就提供了題目區(qū)分度的指標(biāo)。其計算公式如下：D= PH-PL

一般要求題項得分與總分的相關(guān)達到0.2以上。通過極端分組法計算后，D≥0.3表示區(qū)分度好；0.3>D≥0.15 表示區(qū)分度較好；D<0.15則表示區(qū)分度差。從本次考試的結(jié)果分析來看，試卷整體上具有良好的區(qū)分度（見表一）。

二、對于職場英語水平考試的反思

通過以上對試卷質(zhì)量的分析表明，本次考試的試卷總體上具有良好的信度效度和區(qū)分度，考試成績較真實的反映了學(xué)生的學(xué)業(yè)水平。對本次考試，筆者有以下幾點思考。

1.職場英語水平考試的定位。語言測試按用途來分類，至少可以分出四類：水平測試、成績測試、潛能測試和診斷測試。水平測試考查學(xué)生的語言能力，不管從前學(xué)過沒有或?qū)W了多少，或是如何學(xué)的，也不考慮學(xué)生的文化、教育、年齡等環(huán)境因素。如“托?！焙汀把潘肌睖y試都屬于水平測試。成績測試考查學(xué)生對所學(xué)知識的掌握，它一般要參考某種教學(xué)大綱，甚至考慮到教學(xué)方法。如隨堂測試、期中期末測試，以及學(xué)校的畢業(yè)考試，都屬于成績測試。潛能測試用來預(yù)示學(xué)生學(xué)習(xí)某種語言的潛力和天賦。診斷測試用來發(fā)現(xiàn)教和學(xué)兩方面的問題，目的是為了改進教學(xué)，調(diào)整教學(xué)計劃，進行個別指導(dǎo)。

職場英語水平考試就其性質(zhì)來說應(yīng)該屬于水平測試，而在本次考試中又把它定位為第四學(xué)期期末考試。從本次職場英語水平考試分析結(jié)果來看，二外和商務(wù)文法專業(yè)學(xué)生成績較好，而機電信息和藝術(shù)專業(yè)學(xué)生的成績不理想。作為期末考試，對于機電信息和藝術(shù)專業(yè)的學(xué)生來說，是次難度偏大的考試，直接導(dǎo)致學(xué)生的大面積不及格。成績測試的性質(zhì)一般就限定了試題的難易程度，一般在成績測驗中，試題難度應(yīng)該小一點，因為這類試卷是要考慮讓大多數(shù)學(xué)生都能通過，即準(zhǔn)予及格這一原則。那么，如何調(diào)整職場英語水平考試和作為成績測試的期末考試之間的矛盾，就成了我們必須解決的問題。

2.題型設(shè)置及分值分配。本次考試的題型第一部分為詞匯和語法結(jié)構(gòu)，考查學(xué)生對職場英語基礎(chǔ)詞匯（10%），基本語法結(jié)構(gòu)（30%）的掌握；第二部分為對話補全，考查學(xué)生交際場合的口語得體應(yīng)答（10%）；第三部分為閱讀理解題共三篇文章，主要考查學(xué)生英語閱讀能力（20%）。第四部分和第五部分分別為翻譯（15%）和寫作（15%），考查學(xué)生職場英語的翻譯和實用寫作能力。從筆試卷面題型的設(shè)置來看，還是以基礎(chǔ)英語知識的考查為重，而反映職場環(huán)境下的交際能力的聽力任務(wù)沒有涉及。從考試的內(nèi)容上，也還是以日常英語（60%）為主，涉及職場環(huán)境下的英語內(nèi)容只占（40%）。在以后的試卷編制中，應(yīng)從全面考查學(xué)生在職場環(huán)境下的英語運用能力的視角來進行題型設(shè)置和分值分配。

結(jié)語

本文對2012級學(xué)生職場英語水平考試的結(jié)果進行了分析，從考試成績的分布、考試的信度效度、試題的難度和區(qū)分度等方面進行了試卷質(zhì)量分析，在此基礎(chǔ)上對試卷各題型的設(shè)置及分值分配進行了反思，以期在后續(xù)的職場英語水平考試試卷的編制中加以改進和提高。

參考文獻：

[1]劉潤清，韓定成.語言測試和它的方法[M].北京：外語教學(xué)與研究出版社，2010.

[2]蒙詩茜等.高職英語等級測試對“就業(yè)為導(dǎo)向”課程設(shè)計的積極反撥[J].職業(yè)時空，2013（7）.

[3]錢朝霞.考試分析及其應(yīng)用[J].海南大學(xué)學(xué)報（自然科學(xué)版）， 1999（06）.

[4]王孝玲.教育統(tǒng)計學(xué)[M].上海：華東師范大學(xué)出版社，2009.

[5]吳明隆.SPSS統(tǒng)計應(yīng)用實務(wù)[M].北京：中國鐵道出版社，2003.

[6]徐小麗.淺議基于職場工作視角的英語考試設(shè)計[J].中國校外教育，2013（3）.