姚敦紅　陳宇

[摘 要]課程聯(lián)考是對(duì)口支援課程建設(shè)的一種手段，為分析跨校域聯(lián)考課程的試卷質(zhì)量及考試可信度等評(píng)價(jià)系數(shù)，課題組改進(jìn)了傳統(tǒng)試卷難度、區(qū)分度和可信度分析方法，設(shè)計(jì)了一套跨校域聯(lián)考試卷分析方法，實(shí)現(xiàn)了跨校域聯(lián)考試卷質(zhì)量分析和結(jié)果可信分析。分析結(jié)果表明，基于該方法能準(zhǔn)確得出跨校域聯(lián)考課程的綜合難度、區(qū)分度和可信度系數(shù)，可用來(lái)檢驗(yàn)對(duì)口支援課程建設(shè)的成效。

[關(guān)鍵詞]跨校域；課程聯(lián)考；難度；區(qū)分度；可信度；成效評(píng)價(jià)

[中圖分類號(hào)] G64 [文獻(xiàn)標(biāo)識(shí)碼] A [文章編號(hào)] 2095-3437（2017）05-0033-03

為加快湖南偏遠(yuǎn)地方高校的建設(shè)，提升辦學(xué)綜合水平，湖南省教育廳于2010年12月正式成文明確了相關(guān)對(duì)口支援單位，其中湖南農(nóng)業(yè)大學(xué)對(duì)口支援懷化學(xué)院?？缧５母叩冉逃砟羁纱龠M(jìn)教育從封閉、集權(quán)化走向開(kāi)放與合作。在這種背景下，湖南農(nóng)業(yè)大學(xué)信息科學(xué)技術(shù)學(xué)院成為懷化學(xué)院計(jì)算機(jī)科學(xué)與工程學(xué)院的對(duì)口支援單位，協(xié)助提升懷化學(xué)院計(jì)算機(jī)科學(xué)與工程學(xué)院的各項(xiàng)建設(shè)。

因此，針對(duì)跨校課程聯(lián)考的試卷質(zhì)量及考試情況分析，以及為檢驗(yàn)對(duì)比近年來(lái)在對(duì)口支援建設(shè)中的受援單位課程建設(shè)的成效，將采用一種改進(jìn)的跨校域聯(lián)考難度、區(qū)分度與可信度分析的方法，分析由湖南農(nóng)業(yè)大學(xué)信息科學(xué)技術(shù)學(xué)院（以下簡(jiǎn)稱“農(nóng)大”）、吉首大學(xué)信息科學(xué)與工程學(xué)院（以下簡(jiǎn)稱“吉大”，主動(dòng)加入課程聯(lián)考）和懷化學(xué)院計(jì)算機(jī)科學(xué)與工程學(xué)院（以下簡(jiǎn)稱“懷院”）共同構(gòu)建的聯(lián)考（以下簡(jiǎn)稱“三校聯(lián)考”）機(jī)制下的課程聯(lián)考成效，檢查對(duì)口支援課程建設(shè)的成果。

一、課程聯(lián)考情況

本文將三所高校2013級(jí)、2014級(jí)學(xué)生高級(jí)語(yǔ)言程序設(shè)計(jì)課程聯(lián)考的試卷與考試情況做一個(gè)綜合分析，以此來(lái)衡量對(duì)口支援課程建設(shè)的成效。

考前，根據(jù)高級(jí)語(yǔ)言程序設(shè)計(jì)三校課程聯(lián)考實(shí)施方案的具體步驟，事先規(guī)范考試大綱和知識(shí)點(diǎn)，確定考試范圍。為能體現(xiàn)動(dòng)手編程實(shí)踐能力，三校一致認(rèn)同考試試卷由理論試卷與實(shí)踐試卷兩種類型組合構(gòu)成，采用輪換交替機(jī)制進(jìn)行出題，實(shí)施教考分離。對(duì)于理論測(cè)試與實(shí)踐測(cè)試，三校均采用無(wú)紙化考試平臺(tái)同時(shí)進(jìn)行?？己?，高級(jí)語(yǔ)言程序設(shè)計(jì)“三校聯(lián)考”兩部分考試基本數(shù)據(jù)情況如表1、表2、表3所示：

二、跨校域聯(lián)考課程分析方法

（一）試卷難度分析

為能體現(xiàn)跨校域聯(lián)考課程試卷難度系數(shù)，不能僅憑某一所學(xué)校的考試結(jié)果單獨(dú)確定難度系數(shù)，應(yīng)綜合權(quán)衡三校難度作為整體試卷難度系數(shù)，同時(shí)，還需綜合權(quán)衡理論考試與實(shí)踐考試的難度系數(shù)。因此，在已知三校各自的理論與實(shí)踐考試平均成績(jī)與參考人數(shù)的情況下，“三校聯(lián)考”的試卷總難度P可按公式（1）計(jì)算得出：

其中 N、 J和 H分別表示農(nóng)大、吉大和懷院的理論考試平均成績(jī)， N、 J和 H分別表示農(nóng)大、吉大和懷院實(shí)踐考試平均成績(jī)，SN、SJ和SH分別表示農(nóng)大、吉大和懷院參考學(xué)生數(shù)，W表示試卷滿分值。P值越大表示試卷整體難度越小，根據(jù)教育測(cè)量學(xué)，要求試卷難度P值一般在0.4-0.7之間為宜，過(guò)高或過(guò)低表示試卷難度偏小或偏大，不利于體現(xiàn)考試的可信度。

（二）試卷區(qū)分度分析

區(qū)分度可以用來(lái)作為檢測(cè)每道試題設(shè)置是否合理有效的評(píng)價(jià)指標(biāo)，或用來(lái)作為評(píng)價(jià)試題質(zhì)量高低的依據(jù)。根據(jù)伊貝爾測(cè)量學(xué)的經(jīng)驗(yàn)表明，區(qū)分度在0.4以上表示此題區(qū)分度很好，小于0.19表示不好，應(yīng)放棄該題。在此，結(jié)合“三校聯(lián)考”的特點(diǎn)，特從各校的理論與實(shí)踐試題按題序、分年級(jí)和跨校域綜合考慮試卷的區(qū)分度，用以分析聯(lián)考試卷的質(zhì)量。區(qū)分度采用改進(jìn)的鑒別指數(shù)法進(jìn)行，使用公式（4）計(jì)算出整套試題的綜合區(qū)分度D？綴（0，1）：

N為理論與實(shí)踐試卷總試題數(shù)，DNi、DJi、DHi分別表示農(nóng)大、吉大和懷院的第i題區(qū)分度，該區(qū)分度由公式（5）計(jì)算得出：

其中 PHi表示高分組（最高的27%）的得分率， PLi表示低分組（最低的27%）的得分率。

（三）考試信度分析

為檢測(cè)“三校聯(lián)考”試卷的考試結(jié)果對(duì)于三所學(xué)校的可信度，采用克倫巴赫（L.J.Cronbach）系數(shù)估計(jì)方法先對(duì)三所學(xué)校的聯(lián)考試卷做各自的系數(shù)計(jì)算，然后按公式（6）計(jì)算出平均值作為“三校聯(lián)考”試卷的α？綴（0，1）系數(shù)：

α 值越大，表明試卷測(cè)試結(jié)果越可信，其中αN 、αJ 和αH分別表示農(nóng)大、吉大和懷院的試卷α系數(shù)，可根據(jù)克倫巴赫α系數(shù)估計(jì)方法計(jì)算得到：

N為理論與實(shí)踐試卷題目總數(shù)，DM（X）為M校的所有考題總得分的方差，DM（Xi）為M校第i題得分的方差。

三、聯(lián)考結(jié)果分析

（一）聯(lián)考結(jié)果

采用上述方法，分析了從無(wú)紙化考試平臺(tái)導(dǎo)出的各年級(jí)考試結(jié)果數(shù)據(jù)，經(jīng)過(guò)統(tǒng)計(jì)計(jì)算，將結(jié)果使用直方圖、折線圖加以可視化處理，得到兩次聯(lián)考試卷難度系數(shù)（P），如圖1所示：

從圖中可以看出，兩次“三校聯(lián)考”的各校難度系數(shù)及總體難度系數(shù)均在合理區(qū)間，且2014級(jí)的試卷難度較2013級(jí)要低些。得到兩次“三校聯(lián)考”試卷總的區(qū)分度（D），如圖2所示：

從圖2可以看出，兩次“三校聯(lián)考”試卷總體區(qū)分度均在理想值范圍，具有較好的區(qū)分能力，使用聯(lián)考試卷進(jìn)行考試能將不同水平的學(xué)生區(qū)分開(kāi)來(lái)。

2013級(jí)理論試卷41題，實(shí)踐試卷8題，共49題，2014級(jí)理論試卷39題，實(shí)踐試卷8題，共47題，經(jīng)運(yùn)行算法程序，得出如圖3所示的兩次“三校聯(lián)考”各校與總體測(cè)試信度的系數(shù)。

從圖3可以看出，各校及綜合的α系數(shù)值均大于0.7，表明考試可信度高。

圖4為受援單位懷化學(xué)院計(jì)算機(jī)科學(xué)與工程學(xué)院兩次聯(lián)考的平均分與及格率的對(duì)比圖：

從圖4可以看出，在對(duì)口支援課程聯(lián)考機(jī)制下，懷化學(xué)院計(jì)算機(jī)科學(xué)與工程學(xué)院的高級(jí)語(yǔ)言程序設(shè)計(jì)課程建設(shè)成效顯著得到提升，特別是在理論教學(xué)上提升的效果較為明顯。

（二）綜合評(píng)價(jià)分析

聯(lián)考試卷質(zhì)量的好與差，不能單一的看綜合難度或綜合區(qū)分度，應(yīng)該由難度與區(qū)分度兩個(gè)指標(biāo)共同確定。根據(jù)文獻(xiàn)中的經(jīng)驗(yàn)表明，當(dāng)P>0.5且D>0.15時(shí)為好試卷，當(dāng)P<0.5且D>0.15時(shí)為適用卷，當(dāng)P>0.5且D≤0.15時(shí)為一般卷，當(dāng)P<0.5且D≤0.15時(shí)為差試卷。對(duì)于一般的探索性測(cè)試結(jié)果研究，只需要克倫巴赫系數(shù)在0.7以上，可被認(rèn)為結(jié)果是信度的。按此規(guī)則，從圖1、圖2和圖3可以清晰看出，兩次“三校聯(lián)考”試卷均為好試卷，并且結(jié)果是可信的。

四、結(jié)語(yǔ)

“三校聯(lián)考”是對(duì)口支援課程建設(shè)的重要手段之一，為分析聯(lián)考試卷的質(zhì)量、可信度以及檢驗(yàn)對(duì)口支援下課程建設(shè)成效，設(shè)計(jì)了一套用于跨校域的試卷分析方法，成功地實(shí)現(xiàn)了分析聯(lián)考課程試卷的難度、區(qū)分度等質(zhì)量指標(biāo)系數(shù)，以及考試結(jié)果可信度系數(shù)。分析結(jié)果表明，基于改進(jìn)的跨校域分析方法能正確得到相應(yīng)的分析結(jié)果，可作為一種衡量協(xié)同共建課程成效的方法。

[ 參 考 文 獻(xiàn) ]

[1] Dunn P. SPSS survival manual： a step by step guide to da？鄄ta analysis using IBM SPSS[J]. Australian & New Zealand Jour？鄄nal of Public Health，2013（6）：597-598.

[2] 孫居鋒， 王春華， 侯桂革. 藥物合成反應(yīng)考試試卷分析[J].大學(xué)教育，2015（8）：150-151.

[3] 張春輝，席衛(wèi)文，陳戈煜，等.卓越醫(yī)學(xué)本科教育的課程考核方式改革研究[J].中國(guó)高等醫(yī)學(xué)教育，2011（1）：22-24.

[4] 王剛，任汝靜，杜敏，等.醫(yī)學(xué)生神經(jīng)病學(xué)課學(xué)習(xí)態(tài)度量表的編制及效信度評(píng)價(jià)[J].醫(yī)學(xué)教育探索，2009（7）：802-806.

[5] 馮艷賓，馬洪超.關(guān)于經(jīng)典測(cè)量理論和項(xiàng)目反應(yīng)理論中難度和區(qū)分度的探討[J].中國(guó)考試，2012（4）：10-14.

[6] 何明高，吳福根.對(duì)試題和試卷質(zhì)量的分析——考試質(zhì)量分析專用軟件介紹[J].教育探索，2001（2）：31-32.

[責(zé)任編輯：鐘 嵐]