尹 建
(河北省教育考試院,河北 石家莊 050000)
2010年上半年河北省全國計算機等級考試第一次全部采用網(wǎng)上評卷,共有十四個科目,一種標準答題卡,三種普通紙答卷??忌倲?shù)為112469人,答題卡總數(shù)為112469張,普通紙答卷總數(shù)為4147張。答卷及答題卡掃描采用了四臺山大鷗瑪公司研發(fā)的TS3000高速智能掃描儀進行掃描,用兩天時間(每天工作八小時),完成了十四個科目的掃描任務(wù)。評卷工作自4月11日上午開始,至4月26日下午結(jié)束,共有15名老師參加了評卷工作,完成成品卷評閱116860份。由于在掃描及評卷過程中通過誤差控制和質(zhì)量檢查,有效保證了答卷掃描及評卷工作的質(zhì)量。截止到2013年上半年考試網(wǎng)上評卷結(jié)束,河北省實施了7次網(wǎng)上掃描和評卷,共計掃描和評閱890652份試卷,最終無一漏評和錯評。
(1)準備工作。部署網(wǎng)絡(luò)和系統(tǒng)運行環(huán)境,安裝與調(diào)試應(yīng)用系統(tǒng)軟件和掃描設(shè)備。
(2)粘貼條碼。由專人負責將提前打印好的條碼粘貼在普通紙答卷(4147張)的固定位置,以便掃描。
(3)技術(shù)培訓(xùn)。對參與掃描工作的人員進行技術(shù)培訓(xùn),使每位工作人員能熟練使用掃描軟件,明確自己的工作職責和任務(wù),保質(zhì)保量完成掃描工作。
(4)系統(tǒng)參數(shù)設(shè)置。掃描環(huán)境準備完畢后,進行參數(shù)的設(shè)置和初始化,使掃描系統(tǒng)處于正常工作狀態(tài),并根據(jù)主觀題切分方案設(shè)置格式定義。
(5)試掃描。系統(tǒng)參數(shù)設(shè)置和檢查完成后,進行試掃描工作,試掃描的數(shù)量每科目不少于5袋。對試掃描結(jié)果包括所掃描科目的答題卡格式定義、掃描參數(shù)定義、掃描整圖圖像、切分圖像、OMR識別、圖像傳輸正確性、網(wǎng)絡(luò)傳輸負載等內(nèi)容進行核查,以確保正式掃描工作能夠順利進行。
(6)正式掃描。試掃描結(jié)束后對掃描輸出結(jié)果進行核查,核查無誤經(jīng)掃描組長批準后轉(zhuǎn)正式掃描,試掃描數(shù)據(jù)視為有效數(shù)據(jù)。
(7)質(zhì)量檢查。掃描過程中對全部手輸考號和缺考信息進行核查,并與數(shù)據(jù)庫信息比對是否一致。對全部切分圖像檢查圖像是否清晰,對不清晰圖像重新掃描。對OMR識別(客觀題部分)結(jié)果全部檢查,確保掃描和識別準確完整。
(8)數(shù)據(jù)交接。掃描和質(zhì)量檢查全部結(jié)束后,技術(shù)服務(wù)公司向省級考試機構(gòu)提供整圖圖像、主觀題切分圖像和客觀題掃描數(shù)據(jù)。
(1)確定切分方案。切分方案經(jīng)評卷學(xué)科負責人、省級考試機構(gòu)負責人、技術(shù)服務(wù)公司負責人三方簽字確認后留檔保存,作為掃描、評卷的依據(jù)。卷型信息確定之后,技術(shù)人員根據(jù)各科卷型信息表進行設(shè)置。
(2)壓力測試。為保證系統(tǒng)軟件、硬件、網(wǎng)絡(luò)運行正常,按照真實配置,對評卷環(huán)境進行測試。
(3)評卷員培訓(xùn)。培訓(xùn)評閱端、質(zhì)檢端的使用,使每位評卷人員明確自己的職責、任務(wù)和工作方法。
(4)試評。隨機或指定一部分試卷,給每位評卷員進行評閱,目的是使評卷員熟悉系統(tǒng)操作和評分標準。試評數(shù)據(jù)不作為評卷成績。
(5)正評。試評結(jié)束后,轉(zhuǎn)入正式評閱(正評)階段。在正評階段,評卷員負責對答卷進行試卷的判分;質(zhì)檢員對評卷質(zhì)量、評卷進度進行監(jiān)控,處理特殊試卷。
(6)出成績。評卷結(jié)束后,對評卷數(shù)據(jù)進行檢查和成績合成。
(7)數(shù)據(jù)復(fù)核。對特殊的試卷進行核查,如0分卷、疑似雷同卷等。
(8)數(shù)據(jù)交接。評卷工作結(jié)束后,向省級考試機構(gòu)提交考生最終成績和評卷過程數(shù)據(jù)。
根據(jù)河北省的實際和計算機等級考試的特點,我們總結(jié)了在質(zhì)檢環(huán)節(jié)的一些做法和經(jīng)驗。
一是檢查掃描圖像的質(zhì)量。即時抽檢掃描圖像和標記不清晰的圖像,要求每半個工作日抽檢到全部工作組,抽檢率不低于20%;抽檢圖像正反面的一致性,要抽檢到全部工作組,抽檢率不低于10%;抽查試掃描階段切分圖像的裁切,確保裁切區(qū)域的正確性和可讀性,抽查比率不低于試掃描階段圖像的30%;即時抽查圖像的數(shù)字水印,對掃描完成部份進行一次水印抽查,抽查比率不低于15%;即時抽查不清晰圖像,以掃描小組為單位進行不清晰圖像的抽查,抽查比率不低于15%。
二是檢查掃描答卷的OMR字符串。檢查機器識別涂點的參數(shù)設(shè)置的正確性。
三是檢查判分標準的準確性。檢查所有的零分試卷和滿分試卷;抽檢滿分考生,抽檢率為100%;檢查所有考生成績?yōu)榱惴值玂MR字符串不為空的答卷。
全國計算機等級考試的試卷和答題卡是由教育部考試中心統(tǒng)一印制的,并沒有針對網(wǎng)上評卷而專門設(shè)計。在考試中主要使用了兩種類型的答卷,一種是普通答題卡,一種是普通紙答卷。對于第一種普通答題卡,在定位點的選取和考號的讀取上與標準的網(wǎng)上評卷的答題卡不同,標準的答題卡定位點更精確有助于后期圖像的切分,同時考生的考號一般采用條碼識別,條碼識別速度快,準確率高。對于普通答題卡定位點的選取,我們采取的辦法是掃描前進行反復(fù)測試,經(jīng)測試無誤后最終確定合適的定位點。普通答題卡上的考號是考生用2B鉛筆填涂的,讀取的辦法是在掃描時通過OMR方式采集,并與數(shù)據(jù)庫中的信息進行核實,避免考生填涂失誤而導(dǎo)致信息錯誤。對于第二種普通紙答卷,存在的主要問題:一是考生的考號是手寫在答卷上,現(xiàn)有技術(shù)不能很好的識別和讀取,二是答卷比標準答題卡薄,且大小不一。我們的辦法是首先對使用普通答卷的這部分考生,單獨制作了包含考生信息的條形碼,在掃描前由專人負責將條形碼粘貼在考生答卷的固定區(qū)域,解決了普通紙答卷考號的識別問題。其次是經(jīng)過考察和試用,我們采用了山東大學(xué)鷗瑪公司自主研發(fā)的高速智能掃描儀 (TS-3000),經(jīng)過調(diào)試完全能夠掃描普通紙答卷,解決了普通紙答卷的掃描問題。
在傳統(tǒng)的評卷過程中,評卷教師對于填空題判分一般是一道大題給一個分,然后由另一位教師復(fù)核。填空題一般由10—20道小題組成,由于網(wǎng)上評卷引入了誤差控制,如果一道大題設(shè)一個差值閾限,那么對于填空題中每個小題可能會產(chǎn)生單個誤差,而不被發(fā)現(xiàn)。因此在實際評卷中我們將每個小題都設(shè)一個給分點。同時,每個小題的差值閾限都設(shè)置成“0”,即不允許存在誤差。使評卷工作更加科學(xué)、客觀、公正,并且也為后期統(tǒng)計分析提供了數(shù)據(jù)保障。
河北省的具體做法是,首先通過計算機核查出同一考場客觀題答案100%相同的所有答卷,由閱卷組長和兩名以上評卷員(副高或以上職稱)組成專家組,再根據(jù)考生的填空題和主觀題部分判斷是否為雷同卷,對判定為雷同的試卷,專家組要寫出確認報告并簽字,報省級考試機構(gòu)審核后,將考生成績處理為零分,并記錄在案。
在計算機等級考試評卷工作中,聘請的評卷教師大部分都擔負著各種教學(xué)任務(wù),除在制定評分細則和短時間集中培訓(xùn)以外,很難保證同時集中在一起評卷。2010年上半年河北省全國計算機等級考試評卷工作中,要求評卷教師必須在固定機房進行評卷,但不要求同時都集中在一起,可根據(jù)自己的實際情況安排上機時間。由于教師們分布得很分散,到同一地點評卷,浪費了很多路途上的時間,增加了交通費、餐飲費、住宿費等成本。因此我們提出了區(qū)域分布式網(wǎng)上評卷方式改革的思路,準備在以后的評卷工作中加以實踐。
區(qū)域分布式網(wǎng)上評卷指參與網(wǎng)上評卷的計算機終端通過區(qū)域網(wǎng)(或互聯(lián)網(wǎng))分布在校園內(nèi)外,即參與網(wǎng)上評卷的計算機終端在地理位置上是分散,非集中的。
評卷系統(tǒng)應(yīng)采用帶插件安裝的B/S架構(gòu),優(yōu)點是瀏覽器自動檢測播件,自動下載安裝,功能較強,操作方便。評卷教師通過瀏覽器來訪問服務(wù)器端的網(wǎng)上評卷系統(tǒng),完成調(diào)卷、評卷、回卷等工作,質(zhì)檢人員可以通過瀏覽器對評卷進行質(zhì)量檢查,管理人員也可以通過瀏覽器實現(xiàn)評卷監(jiān)控、分析等操作。避免了下載與安裝客戶端,降低了操作難度,任何能上網(wǎng)的計算機均可通過瀏覽器方便地完成操作。
《2007年國家教育統(tǒng)一考試網(wǎng)上評卷工作管理辦法》提出:評卷場地的網(wǎng)絡(luò)連接原則上采用局域網(wǎng)的形式,并與外網(wǎng)實行物理隔離,如需要在互聯(lián)網(wǎng)上傳送數(shù)據(jù),必須采取相應(yīng)的安全措施,確保數(shù)據(jù)絕對安全。目前全國計算機等級考試評卷工作安全保密要求沒有高考、研究生等選拔性考試高,可以充分利用現(xiàn)代技術(shù)手段來保證身份認證和數(shù)據(jù)的安全。硬件條件已經(jīng)完備,完全利用原有的校園網(wǎng)絡(luò)設(shè)備、計算機以及互聯(lián)網(wǎng)絡(luò),不需要重復(fù)建設(shè)和投資。
區(qū)域分布式網(wǎng)上評卷與現(xiàn)在的網(wǎng)上評卷最大區(qū)別就是評卷人員是分散的,非集中的。評卷員的身份認證和保證數(shù)據(jù)安全成為評卷安全的關(guān)鍵。
對于身份認證,可以采用指紋識別技術(shù)來實現(xiàn)。每位評卷工作人員配發(fā)一臺小型指紋儀,安裝在本人的評卷計算機終端上,登錄時先按指紋,系統(tǒng)通過與事先采集的評卷教師指紋進行比對,指紋比對成功并且登錄密碼也輸入正確后,才允許評卷教師進入評卷系統(tǒng)進行操作。
評卷教師在評卷過程中離開且未退出系統(tǒng),為防止被其他人使用,系統(tǒng)會在評卷教師無任何操作情況下3分鐘后自動退出或鎖死,評卷教師必須重新登錄才能進入。如條件具備,可以在每臺評卷終端上安裝一個攝像頭進行監(jiān)控錄像,評卷組長可隨時在網(wǎng)上檢查是否是評卷教師本人在評卷,錄像可保留半年或更久。
區(qū)域分布式網(wǎng)上評卷的順利實施,除硬件設(shè)備、軟件平臺以及技術(shù)手段支撐外,也需要在管理上精心規(guī)劃、統(tǒng)籌安排、合理實施。分布式網(wǎng)上評卷方式如能夠在計算機等級考試網(wǎng)上評卷中順利實施,也會逐漸應(yīng)用到其它各項考試的評卷中。