■蘭 娟 張元元 王東花/保山學院
期末考試是大學英語課程教學過程中不可分割的重要組成部分,教育部2017年發(fā)布的《大學英語教學指南》(以下簡稱《指南》)中明確指出:學校大學英語教學管理部門應(yīng)根據(jù)本校的實際情況,對學生提出切合實際的英語能力要求,開發(fā)科學、系統(tǒng)、個性化的大學英語課程評價體系和大學生英語能力測試體系,充分發(fā)揮評價和測試對大學英語教學的導向、激勵、診斷、改進、鑒定、咨詢、決策等多重功能,更好地促進大學英語課程的建設(shè)和大學生英語能力的提高。大學英語課程是筆者所在的地方應(yīng)用型本科院校的一門重要的通識必修課程,涉及面廣,影響大,對學生的學業(yè)發(fā)展和未來就業(yè)前景都有較為深遠的影響;此外,由于教學對象主要來自于邊(邊疆)農(nóng)(農(nóng)村)貧(貧困)少(少數(shù)民族)地區(qū),學生英語基礎(chǔ)較弱、英語學習能力較差,現(xiàn)有的大學英語考試試題庫大多以水平測試為目的,不能體現(xiàn)與本校大學英語教學大綱以及日常課堂教學的關(guān)系,對我校教學對象的適用性并不強?;谶@些原因,地方應(yīng)用型本科院校建設(shè)符合其自身特點的大學英語期末考試試題庫是必要的。
筆者于2017年-2018年期間根據(jù)校本大學英語教學大綱和考試大綱的要求,學校所采用的大學英語教材的結(jié)構(gòu)、教學重點、以及教學對象的特點,在 Wright和Bell在1984年提出的試題庫建設(shè)基本步驟的指導下,進行了校本大學英語期末考試試題庫初步階段的建設(shè)工作,基本完成了大學英語期末考試試題庫的初步階段建設(shè)工作,并在2018-2019學年第一學期2017級B級班級的期末考試中投入使用?,F(xiàn)將具體使用情況和試卷效度情況分析如下:
根據(jù)校本大學英語考試大綱,期末考試的目的在通過考試,客觀、公正、準確地檢測和評估學生在《大學英語》課程學習中英語綜合應(yīng)用能力的發(fā)展情況,檢測學生是否能較好地掌握英語語言基礎(chǔ)知識和語言技能,并具有一定的聽、說、讀、寫、譯能力。根據(jù)這一考試目的,大學英語期末考試試卷包含了口語測試、聽力理解、詞匯、語法和結(jié)構(gòu)、閱讀理解、翻譯、寫作七個部分?;诮滩暮徒虒W重點,在自建試題庫中主要進行了詞匯、閱讀理解、翻譯三個部分的建設(shè),并結(jié)合現(xiàn)有的水平測試試題庫,共同應(yīng)用于期末考試中。
在2017級B級班級中進行了期末考試后,筆者隨機抽取了兩個班級,與2016級同一階段未使用自建考試題庫進行制卷考試的學生考試成績進行了對比,對比結(jié)果顯示,在使用試題庫制卷進行考試后,學生的期末考試卷面不及格率得到了大幅度的減低,從42.8%降到了17.4%,降幅達到25.4%。從試卷測試結(jié)果呈現(xiàn)出來的集中趨勢看,考試的平均分從59.7分提高到了69.85分;中數(shù)由66分提高為70.5分;眾數(shù)由69分變?yōu)?0分。從測試結(jié)果呈現(xiàn)出來的離散趨勢看,考試卷面最高分由92分略降為90分;考試最低分從25分提高到了40分;相應(yīng)的,成績?nèi)嘤?7分縮短為50分。從這些描述統(tǒng)計數(shù)據(jù)來看,從試題庫中抽取試題進行制卷后,測試的整體表現(xiàn)明顯優(yōu)于之前。
針對測試項目主要進行難易 度(Facility Value) 和 區(qū) 分 度(Discrimination Index)兩個數(shù)據(jù)的分析。難易度的計算是由測試平均分除以試卷滿分得出一個0-1范圍內(nèi)的數(shù)據(jù),計算結(jié)果越接近0.5,難易度值越理想,計算結(jié)果越大,難度越小。根據(jù)Heaton (2000:179)的闡述,試題難度在0.3~0.7范圍內(nèi)都是可以接受的。區(qū)分度顯示了測試項目區(qū)分學得好的學生和學得不太好的學生的能力 (Heaton,2000:179)。測試的區(qū)分度計算可以參照公示 DI= 2(Xh-XL)/W,W指的是測試試卷的總分,Xh指的是成績較好的那一部分學生的平均得分;Xl指的是成績較差的那一部分學生的平均得分。Henning (2000:180) 指出,項目區(qū)分度是一個 +1 和-1之間的數(shù)值, 數(shù)值越大,項目的區(qū)分度就越大。
針對從試題庫中抽取的試卷的內(nèi)部信度,筆者擬采用SPSS軟件相關(guān)分析中的Cronbach’s alpha系數(shù)進行分析,分析得出的數(shù)值越大,提示條目的內(nèi)在一致性越強。
表1 Cronbach's alpha系數(shù)計算結(jié)果
從Cronbach’s alpha系數(shù)計算結(jié)果來看,試卷所包含的7個部分之間的Cronbach’s alpha系數(shù)為 0.671,由此可以說明,測試試卷的各個部分間具有較強的內(nèi)在一致性。
針對從自建大學英語期末考試試題庫中提取的試卷,經(jīng)過分析試卷結(jié)構(gòu)、測試卷面成績、測試項目和試卷內(nèi)部信度,可以看出,自建校本大學英語期末考試試題庫從試題構(gòu)成和試題量上看都基本能夠滿足大學英語期末考試的需求;考試成績的集中趨勢、離散趨勢、難易度和區(qū)分度結(jié)果提示,試卷能較試題庫建設(shè)前更好地反映學生在大學英語課程中的學習情況;從試卷內(nèi)部信度來看,Cronbach’s alpha系數(shù)為0.671,試卷各部分內(nèi)容具有較好的內(nèi)部一致性。因此可以得出初步結(jié)論,自建校本大學英語期末考試試題庫有利于對本校大學英語課程的評價。
但是,基于試題庫發(fā)展的特點以及本次測試結(jié)果的分析,在今后還需要對以下方面進行進一步的探討。首先,在本分析報告中只分析了試卷的整體情況和各個構(gòu)成部分的情況,對每一個測試項目并沒有進行逐一分析,因此,在以后還需要加強這方面的研究,進一步提高試題庫的質(zhì)量。其次,試題庫的建設(shè)是一個動態(tài)的過程,試題庫的完善也還需要長期的努力,目前試題庫的題量,特別是自建試題庫部分的題量還非常有限,在今后還需不斷地進行補充。再次,自建校本大學英語期末考試試題庫有一個最大的缺陷在于,自建部分是依據(jù)大學英語課程所使用的教材進行建設(shè),一旦教材發(fā)生變化,自建部分即刻失效,因此,在今后還需就如何解決這一問題進行深入的研究。