摘 要：文中簡(jiǎn)要介紹網(wǎng)上閱卷概念、工作原理及優(yōu)點(diǎn)，重點(diǎn)指出高校網(wǎng)上閱卷在客觀題識(shí)別，評(píng)分質(zhì)量監(jiān)控，成績(jī)趨中，網(wǎng)上閱卷數(shù)據(jù)利用等方面的問題。針對(duì)這些問題，文中提出對(duì)評(píng)卷員評(píng)分質(zhì)量進(jìn)行考量的維度及監(jiān)控方法。指出造成成績(jī)趨中這現(xiàn)象的主要原因，并提出一套適應(yīng)高校網(wǎng)上閱卷的成績(jī)計(jì)算方法。面對(duì)網(wǎng)上閱卷產(chǎn)生的大量數(shù)據(jù)，文中指出如何利用這些分析數(shù)據(jù)來指導(dǎo)教學(xué)和提高命題質(zhì)量。

關(guān)鍵詞：網(wǎng)上閱卷；評(píng)分質(zhì)量監(jiān)控；分析數(shù)據(jù)；命題質(zhì)量

與傳統(tǒng)的人工紙筆閱卷模式相比，客觀題自動(dòng)評(píng)分，主觀題網(wǎng)上閱卷的閱卷模式更受人們喜愛，它既保留了多年積累的閱卷經(jīng)驗(yàn)，又實(shí)現(xiàn)了計(jì)算機(jī)輔助控制評(píng)分誤差。不僅高考、中考等大型考試，越來越多高校也采取網(wǎng)上閱卷來組織實(shí)施閱卷。網(wǎng)上閱卷不僅可以節(jié)省大量人力物力，提高閱卷效率，而且可以提高閱卷的準(zhǔn)確性，真正實(shí)現(xiàn)閱卷的公平公正，因此它代表著未來閱卷工作的主要方向。

1 網(wǎng)上閱卷的概念和特點(diǎn)

網(wǎng)上閱卷是以高速掃描技術(shù)、計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)、圖像處理技術(shù)和數(shù)據(jù)庫(kù)技術(shù)為依托，評(píng)卷人可以在網(wǎng)上對(duì)電子化的考生答卷進(jìn)行評(píng)閱的一種閱卷手段。網(wǎng)上閱卷采取試卷隨機(jī)分發(fā)、多人評(píng)閱、專家仲裁的評(píng)卷模式。

網(wǎng)上閱卷由計(jì)算機(jī)對(duì)考生答題卡，通過掃描儀以圖像的方式掃描到計(jì)算機(jī)，按照既定的程序進(jìn)行圖像切割、編碼，存入服務(wù)器。客觀題部分進(jìn)行OMR識(shí)別，并對(duì)比標(biāo)準(zhǔn)答案給分。主觀題部分則通過終端計(jì)算機(jī)屏幕顯示相應(yīng)的答題圖像，圖像隱去答題以外的任何信息。評(píng)卷員依據(jù)評(píng)分標(biāo)準(zhǔn)，通過鍵盤與鼠標(biāo)進(jìn)行評(píng)閱[1]。網(wǎng)上閱卷與人工閱卷的區(qū)別在于試卷隨機(jī)分發(fā)，屏蔽了除閱卷試題外的任何信息，且是在電子化的圖像上閱卷，因此，它具有如下優(yōu)點(diǎn)：

1）閱卷的公平性。網(wǎng)上閱卷屏蔽考生信息，隨機(jī)分發(fā)考生答卷，使得閱卷更加透明化，有效避免了人為干預(yù)考試分?jǐn)?shù)的可能性，保證評(píng)卷過程公平公正[2]。

2）成績(jī)的準(zhǔn)確性。閱卷系統(tǒng)通過雙評(píng)或多評(píng)的誤差控制機(jī)制，保證閱卷的科學(xué)準(zhǔn)確性；系統(tǒng)的自動(dòng)登分與統(tǒng)分功能，避免人工操作可能導(dǎo)致的錯(cuò)誤[2]。

3）閱卷的高效率性。網(wǎng)上閱卷實(shí)現(xiàn)客觀題自動(dòng)評(píng)分，主觀題網(wǎng)上評(píng)閱，評(píng)閱完成，系統(tǒng)自動(dòng)統(tǒng)分，極大程度的減少工作量，提高工作效率。

4）閱卷的可監(jiān)控性。網(wǎng)上閱卷實(shí)時(shí)全程監(jiān)控，隨時(shí)查詢閱卷的總體進(jìn)度、每位評(píng)卷員的閱卷評(píng)分情況，這些便捷的閱卷工作檢查和監(jiān)控方式，是傳統(tǒng)閱卷方式無法達(dá)到的。

5）強(qiáng)大的數(shù)據(jù)分析功能。網(wǎng)上閱卷系統(tǒng)能夠及時(shí)地提供考試后的數(shù)據(jù)分析，可以輕松的計(jì)算試卷（各題）難度、區(qū)分度、信度、標(biāo)準(zhǔn)差，以及學(xué)生在每道小題的答題情況都能清晰的反映出來。

2 高校網(wǎng)上閱卷現(xiàn)狀及問題

2.1 OMR系統(tǒng)識(shí)別缺陷

網(wǎng)上閱卷用到OMR有兩個(gè)方面，一是考生信息的OMR區(qū)域識(shí)別，考生信息填涂不清晰，不正確和漏填，都需要考試工作人員耗費(fèi)不少人力物力來檢查信息填寫情況。二是客觀題OMR塊識(shí)別，OMR塊識(shí)別就是統(tǒng)計(jì)OMR塊內(nèi)的黑色像素百分比，如果達(dá)到某個(gè)值就認(rèn)為某選項(xiàng)被學(xué)生選中，填涂過淡或過濃的試卷容易導(dǎo)致識(shí)別率降低。

2.2 評(píng)分質(zhì)量監(jiān)控不到位

高?？荚嚲哂幸?guī)模小，課程多的特點(diǎn)。而且，它是參照性考試，考查的是學(xué)生對(duì)課程知識(shí)的掌握情況，參照點(diǎn)局限于優(yōu)良率，及格率，平均分，知識(shí)模塊得分率等信息。高校考試的特點(diǎn)、規(guī)模限定了它在如下提高閱卷質(zhì)量監(jiān)控措施方面相對(duì)薄弱：1）組織專家細(xì)化評(píng)分細(xì)則，制定合理的評(píng)分標(biāo)準(zhǔn)；2）制定合理的評(píng)分誤差值；3）對(duì)評(píng)分員進(jìn)行閱卷前培訓(xùn)；4）組織專家組與評(píng)卷員試評(píng)，對(duì)比分析評(píng)分結(jié)果來檢驗(yàn)評(píng)卷員對(duì)評(píng)分標(biāo)準(zhǔn)掌握情況；5）組織專家組對(duì)試卷進(jìn)行抽查，復(fù)評(píng)；6）一些檢測(cè)評(píng)分誤差控制質(zhì)量的硬件設(shè)施等。如上環(huán)節(jié)少有高校有正規(guī)的組織檢查，且少有高校網(wǎng)上閱卷有對(duì)評(píng)卷員評(píng)分質(zhì)量監(jiān)控，評(píng)分質(zhì)量一致性檢查。有些閱卷系統(tǒng)自身有簡(jiǎn)單的對(duì)評(píng)卷員評(píng)分質(zhì)量監(jiān)控，但也很少高校重視這些數(shù)據(jù)。這些現(xiàn)狀導(dǎo)致主觀題評(píng)分受評(píng)卷員業(yè)務(wù)知識(shí)水平，教學(xué)工作經(jīng)驗(yàn)，對(duì)問題敘述方式愛好，評(píng)卷時(shí)工作態(tài)度影響極大。

2.3 趨中效應(yīng)加劇問題

高?？荚嚾藗冴P(guān)注的是少量高分，不及格人員信息，不會(huì)太關(guān)注成績(jī)中等考生具體分?jǐn)?shù)，高校主要從平均分、優(yōu)良率、及格率，某題得分率等角度來評(píng)價(jià)課程教學(xué)情況和學(xué)生對(duì)知識(shí)掌握情況，這些導(dǎo)致打中間分就成為高校網(wǎng)上閱卷常見現(xiàn)象。

趨中效應(yīng)加劇是評(píng)分員打中間分和成績(jī)計(jì)算方法采取平均分法等因素造成的。由于人力物力等現(xiàn)實(shí)狀況限制，高校網(wǎng)上閱卷基本采取雙評(píng)，用平均分法計(jì)算考生成績(jī)，很少用三評(píng)、四評(píng)。這些因素導(dǎo)致高校一些主觀題占主導(dǎo)的課程既沒有高分，也沒有低分，加劇了分?jǐn)?shù)集中，不利于考生能力區(qū)分。

2.4 利用網(wǎng)上閱卷數(shù)據(jù)對(duì)命題組卷指導(dǎo)不夠

網(wǎng)上閱卷提供全樣本量的全部分?jǐn)?shù)，為命題和題庫(kù)建設(shè)提供詳細(xì)的統(tǒng)計(jì)數(shù)據(jù)。目前少有研究如何利用這些統(tǒng)計(jì)數(shù)據(jù)來指導(dǎo)命題質(zhì)量和題庫(kù)建設(shè)質(zhì)量。

2.5 利用網(wǎng)上閱卷數(shù)據(jù)對(duì)教學(xué)指導(dǎo)不夠

如何利用網(wǎng)上閱卷強(qiáng)大的分析數(shù)據(jù)，更加深入的分析學(xué)生學(xué)業(yè)質(zhì)量，從而更加有效地指導(dǎo)日常教學(xué)。目前鮮少有人從這個(gè)角度進(jìn)行較為深入的探討和研究，從而導(dǎo)致當(dāng)前的情況基本上是網(wǎng)上閱卷得到的數(shù)據(jù)和日常教學(xué)相互分離的狀態(tài)。

3 應(yīng)對(duì)措施

3.1 增強(qiáng)OMR識(shí)別

提高OMR識(shí)別率，系統(tǒng)采取設(shè)置兩個(gè)有效填涂黑度值，在掃描識(shí)別時(shí)使用兩個(gè)不同的值進(jìn)行圖像識(shí)別，以找出填涂過淡的客觀題。OMR識(shí)別有效填涂黑度值的大小根據(jù)OMR塊圖像中的黑色素來設(shè)置，不足之處是值得大小的把握目前沒有好的方便快捷的方法，基本上是依靠經(jīng)驗(yàn)或通過重復(fù)的測(cè)試與驗(yàn)證。提高OMR識(shí)別準(zhǔn)確性，在網(wǎng)上閱卷系統(tǒng)中增加客觀題的查錯(cuò)與校正模塊，并使用視圖和存儲(chǔ)過程將可能的問題卷提取出來，用人工的方式進(jìn)行校正。

3.2 評(píng)分員評(píng)分質(zhì)量監(jiān)控

對(duì)評(píng)分員閱卷質(zhì)量的監(jiān)控一般采取計(jì)算評(píng)分員的標(biāo)準(zhǔn)差、平均分、全距、評(píng)分速度、有效評(píng)分率等質(zhì)量來進(jìn)行考量[3-6]。

1）標(biāo)準(zhǔn)差。標(biāo)準(zhǔn)差代表了評(píng)卷員評(píng)分的離散程度，標(biāo)準(zhǔn)差越大，說明給分越分散，其評(píng)分結(jié)果可能不夠穩(wěn)定，標(biāo)準(zhǔn)差越小，說明給分越集中，有可能出現(xiàn)打中間分情況。

2）平均分。通過對(duì)評(píng)卷員在某題的平均分與該題所有評(píng)卷員的平均分進(jìn)行比較分析，可以判斷出該評(píng)卷員評(píng)分的寬嚴(yán)程度。

3）全距。評(píng)卷員評(píng)分的最高分與最低分只差叫全距，全距越低，可能出現(xiàn)打中間分情況。

4）評(píng)分速度。評(píng)卷員的評(píng)分速度過快，超出正常范圍，就有可能出現(xiàn)打中間分情況。

5）有效評(píng)分率。評(píng)卷員對(duì)某試題的評(píng)分與其他評(píng)卷員評(píng)分的差值不超出評(píng)分誤差閾值，則這份試卷屬于有效評(píng)卷。該評(píng)分員的有效評(píng)卷數(shù)量與其評(píng)卷總數(shù)量的比率稱有效評(píng)分率，該值越大，說明評(píng)卷質(zhì)量越好。

評(píng)卷員評(píng)分質(zhì)量監(jiān)控方法有三種。一是在不同時(shí)段，或一定工作量?jī)?nèi)，對(duì)部分評(píng)卷員評(píng)卷的標(biāo)準(zhǔn)差、平均分、有效度和評(píng)卷速度等進(jìn)行綜合比較分析，數(shù)據(jù)越接近，說明穩(wěn)定性越好；二是抽取部分評(píng)分速度快、全距小的評(píng)卷員試卷，尤其是分值相同試卷，由專家進(jìn)行復(fù)評(píng)，比較評(píng)卷員與專家評(píng)分分布，檢測(cè)評(píng)卷員的評(píng)分標(biāo)準(zhǔn)把握情況及嚴(yán)寬程度；三是隨機(jī)抽取部分評(píng)分速度快、全距小的評(píng)卷員的已評(píng)試卷，尤其相同分值試卷，重新發(fā)給本人重新評(píng)分，比較兩次評(píng)分差值，差值越小或者零差值，說明其一致性好。

3.3 控制趨中效應(yīng)加劇

由于人力物力和文中上述提到的種種現(xiàn)實(shí)因素導(dǎo)致高校主觀題為主課程分?jǐn)?shù)集中，區(qū)分度低。主要原因：一是評(píng)分要點(diǎn)不明確，沒有合理評(píng)分標(biāo)準(zhǔn)；對(duì)評(píng)卷員評(píng)分沒有約束機(jī)制，評(píng)卷員打分隨意，打中間分現(xiàn)象常見。針對(duì)這些情況，可以采取制定合理的評(píng)分標(biāo)準(zhǔn)，采用上述監(jiān)控評(píng)卷員評(píng)分質(zhì)量方法加以控制。二是成績(jī)計(jì)算方法不合理。平均值法對(duì)評(píng)分要點(diǎn)，評(píng)分標(biāo)準(zhǔn)明確的計(jì)算類題型，影響不大，但對(duì)于論述題，寫作題，這種評(píng)分方式就有一定的局限性。

設(shè)置評(píng)分誤差A(yù)（取總分1/6），X1，X2為評(píng)卷員對(duì)同一題的評(píng)分，該題優(yōu)秀分?jǐn)?shù)值設(shè)為E（試題總分的85%），及格分?jǐn)?shù)值P（試題總分60%），成績(jī)計(jì)算方法：| X1-X2|A，若X1，X2中一值大于E，一值小于P，則說明該題兩評(píng)卷員評(píng)分存在較大爭(zhēng)議，那這兩次評(píng)分作廢，該試卷重新投入到未評(píng)試卷中重新評(píng)閱；否則進(jìn)行三評(píng)，成績(jī)?yōu)閄3，當(dāng)| X1-X3|

3.4 網(wǎng)上閱卷對(duì)提高命題質(zhì)量作用

高校課程考試試卷每年考題是可以出現(xiàn)類似或重題，若組卷系統(tǒng)和網(wǎng)上閱卷系統(tǒng)之間兼容，評(píng)分誤差控制閾值A(chǔ)可以采取試題總分1/6，也可以采取更精準(zhǔn)的誤差值（歷年網(wǎng)上閱卷該題或相似試題評(píng)分誤差平均值）。網(wǎng)上閱卷該題批改所計(jì)算的難度、區(qū)分度、效度等評(píng)價(jià)試題質(zhì)量的指標(biāo)數(shù)據(jù)反饋與組卷系統(tǒng)，組卷系統(tǒng)統(tǒng)計(jì)該題或相似試題總考核次數(shù)，原難度、原區(qū)分度，本次難度，本次區(qū)分度，效度等，及時(shí)修正試題庫(kù)該題的各項(xiàng)指標(biāo)值。通過這些指標(biāo)值可以篩選出一些不合理試題，還能為智能組卷系統(tǒng)提供可靠、科學(xué)的參考數(shù)據(jù)，提高命題質(zhì)量。

3.5 網(wǎng)上閱卷對(duì)教學(xué)指導(dǎo)

目前人們對(duì)網(wǎng)上閱卷數(shù)據(jù)基本局限于平均分、分?jǐn)?shù)段人數(shù)等，這些統(tǒng)計(jì)結(jié)果往往只能體現(xiàn)出校與校、班與班之間的大體差異。通過網(wǎng)上閱卷數(shù)據(jù)可以計(jì)算班級(jí)、個(gè)人在某知識(shí)點(diǎn)、某題的得分情況，比較班級(jí)、個(gè)人在具體知識(shí)點(diǎn)、章節(jié)、某題的差異。如：利用網(wǎng)上閱卷各題的具體得分情況，可以計(jì)算章節(jié)、知識(shí)點(diǎn)的得分率，能有效評(píng)價(jià)教師該章節(jié)、知識(shí)點(diǎn)的教學(xué)質(zhì)量。提供的具體考生在各題的具體得分，可以精確計(jì)算出考生在具體章節(jié)、知識(shí)點(diǎn)的得分率，可用于指導(dǎo)考生找出學(xué)習(xí)的薄弱環(huán)節(jié)。網(wǎng)上閱卷提供的大量的具體的數(shù)據(jù)，需要我們利用不同方法、算法，從多角度多層次進(jìn)行分析，從而指導(dǎo)教與學(xué)。

4 結(jié)束語(yǔ)

網(wǎng)上閱卷是未來閱卷發(fā)展的總體方向和趨勢(shì)，其發(fā)展前景是從局域網(wǎng)網(wǎng)上評(píng)卷發(fā)展到遠(yuǎn)程網(wǎng)網(wǎng)上評(píng)卷，從固定場(chǎng)所集中閱卷發(fā)展為分散的個(gè)體化評(píng)卷。面對(duì)這樣的趨勢(shì)，人們只有完善網(wǎng)上閱卷評(píng)分質(zhì)量，加強(qiáng)對(duì)網(wǎng)上閱卷數(shù)據(jù)大量分析數(shù)據(jù)的利用，才能更好的幫助教師了解學(xué)生學(xué)習(xí)情況、發(fā)現(xiàn)日常教學(xué)中存在的問題，進(jìn)行總結(jié)與反思，調(diào)整和改進(jìn)教學(xué)方法。

參考文獻(xiàn)

[1]李美華.網(wǎng)上閱卷工作原理與誤差控制[J].中國(guó)考試，2005（10）：46-47.

[2]王文成.“人機(jī)對(duì)抗”視域下主觀題評(píng)分誤差控制策略研究[J].中國(guó)考試，2013（9）：11-19.

[3]賈志先.基于譜聚類的網(wǎng)上閱卷質(zhì)量控制研究[J].智能計(jì)算機(jī)與應(yīng)用，2014（5）：76-79.

[4]曹建莉，張強(qiáng).評(píng)卷質(zhì)量監(jiān)控模型及其統(tǒng)計(jì)分析[J].統(tǒng)計(jì)與決策，2012（18）：29-31.

[5]劉建華，馬睿等.主觀題網(wǎng)上評(píng)分員隊(duì)伍建設(shè)與誤差控制研究[J].中國(guó)考試，2012（9）：32-39.

[6]宋濤.網(wǎng)上閱卷評(píng)分員閱卷質(zhì)量評(píng)價(jià)分析體系及模型研究[D].河南大學(xué)碩士畢業(yè)論文，2010.

作者簡(jiǎn)介

許小紅（1979-），女，漢族，江西萬安，碩士，講師，研究方向：考試管理。