劉英霞 杜永貴
摘要:職教高考技能測(cè)試是高職院校招生考試的重要組成部分,其測(cè)量目標(biāo)的達(dá)成度和測(cè)試效度關(guān)系到考生的切身利益和招生的公平性。目前,技能考試在實(shí)訓(xùn)測(cè)量目標(biāo)、可測(cè)量性、區(qū)分度、測(cè)試項(xiàng)目設(shè)計(jì)等方面面臨挑戰(zhàn),從教育測(cè)量角度透視技能考試的科學(xué)性,對(duì)測(cè)試的難度、區(qū)分度、效度和信度進(jìn)行分析,通過(guò)實(shí)證研究,從優(yōu)化考試內(nèi)容、考試方式、考試標(biāo)準(zhǔn)等方面提出技能考試的發(fā)展策略。
關(guān)鍵詞:測(cè)量目標(biāo);效度;技能考試;挑戰(zhàn);發(fā)展
中圖分類(lèi)號(hào):G710? ? 文獻(xiàn)標(biāo)識(shí)碼:A? ? 文章編號(hào):1672-5727(2022)01-0069-06
考試招生制度是我國(guó)的基本教育制度,也是人才培養(yǎng)的樞紐環(huán)節(jié)?!秶?guó)家職業(yè)教育改革實(shí)施方案》明確提出了要“建立‘職教高考’制度,為學(xué)生接受高等職業(yè)教育提供多種入學(xué)方式和學(xué)習(xí)方式”?!秶?guó)務(wù)院關(guān)于深化考試招生制度改革的實(shí)施意見(jiàn)》要求招生考試要體現(xiàn)科學(xué)高效,提高選拔水平,指出要改革考試形式和內(nèi)容,加快推進(jìn)高職院校分類(lèi)考試?!笆奈濉睍r(shí)期,我國(guó)將建立職教高考制度,把中等職業(yè)教育、職業(yè)專(zhuān)科教育、職業(yè)本科教育在內(nèi)容上、培養(yǎng)上貫通起來(lái)。在我國(guó),教育測(cè)量理論很早就開(kāi)始指導(dǎo)高考改革與實(shí)踐[1]。技能考試是高職院校招生考試的重要組成部分,技能考試目標(biāo)的達(dá)成度和考試效度關(guān)系到考生的切身利益和招生的公平性。從教育測(cè)量理論的視角,通過(guò)對(duì)技能考試進(jìn)行科學(xué)性分析,優(yōu)化技能考試的內(nèi)容和方式,有助于形成分類(lèi)考試、綜合評(píng)價(jià)、多元錄取的考試招生模式,為全社會(huì)有需要的學(xué)習(xí)者搭建進(jìn)入職業(yè)院校學(xué)習(xí)的橋梁。
一、職教高考技能考試現(xiàn)狀分析
職教高考制度是職業(yè)教育類(lèi)型特征的重要表現(xiàn),國(guó)家進(jìn)行職教高考改革是為學(xué)生能接受高等職業(yè)教育提供更多的入學(xué)方式,促進(jìn)教育公平。職教高考將賦予高校更多的自主權(quán),同時(shí)也為考生提供了更多的選擇。而技能考試作為技術(shù)技能人才培養(yǎng)的重要“入口”,關(guān)系到高職院校的技能供給質(zhì)量和服務(wù)經(jīng)濟(jì)社會(huì)發(fā)展的水平。隨著職教高考改革進(jìn)程的不斷加快,技能考試在技術(shù)技能人才評(píng)價(jià)中發(fā)揮著越來(lái)越重要的作用。
(一)從國(guó)家政策看,職教高考是一項(xiàng)制度設(shè)計(jì)
職業(yè)教育作為一種類(lèi)型教育,構(gòu)建縱向貫通的現(xiàn)代職業(yè)教育體系,需要一個(gè)與之相適應(yīng)的選拔人才的考試制度設(shè)計(jì)。建立分類(lèi)考試、多元錄取的“職教高考”制度,暢通了職業(yè)教育體系內(nèi)部升學(xué)通道,為學(xué)生搭建多樣化選擇、多路徑成才的立交橋。黨中央、國(guó)務(wù)院高度重視考試招生制度改革工作。高等職業(yè)教育的考試招生改革大致可以分為三個(gè)階段:
第一階段是納入全國(guó)統(tǒng)一高考。自1952年我國(guó)確立統(tǒng)一全國(guó)招生考試制度以來(lái),高職教育作為專(zhuān)科層次教育,納入全國(guó)統(tǒng)一高考,并按照分?jǐn)?shù)高低,分層分批錄取為本科和高職。
第二階段是實(shí)施分類(lèi)入學(xué)考試?!秶?guó)家中長(zhǎng)期教育改革和發(fā)展規(guī)劃綱要(2010—2020年)》提出了改革考試招生制度;2011年,教育部發(fā)布《關(guān)于推進(jìn)中等和高等職業(yè)教育協(xié)調(diào)發(fā)展的指導(dǎo)意見(jiàn)》提出,要積極推廣“知識(shí)+技能”的考試招生模式;2013年,教育部出臺(tái)《關(guān)于積極推進(jìn)高等職業(yè)教育考試招生制度改革的指導(dǎo)意見(jiàn)》,提出“逐步與普通高校本科考試分離,重點(diǎn)探索‘知識(shí)+技能’的考試評(píng)價(jià)辦法,為學(xué)生接受高等職業(yè)教育提供多樣化入學(xué)形式”。
第三階段是實(shí)行“文化素質(zhì)+職業(yè)技能”考試招生模式。2014年,國(guó)務(wù)院發(fā)布《關(guān)于深化考試招生制度改革的實(shí)施意見(jiàn)》,明確“實(shí)行‘文化素質(zhì)+職業(yè)技能’評(píng)價(jià)方式”。同年,《國(guó)務(wù)院關(guān)于加快發(fā)展現(xiàn)代職業(yè)教育的決定》提出,要健全“文化素質(zhì)+職業(yè)技能”、單獨(dú)招生、綜合評(píng)價(jià)招生和技能拔尖人才免試等考試招生辦法,為學(xué)生接受不同層次高等職業(yè)教育提供多種機(jī)會(huì)。2019年發(fā)布的《國(guó)家職業(yè)教育改革實(shí)施方案》提出,完善“文化素質(zhì)+職業(yè)技能”的考試招生辦法。在國(guó)家政策指導(dǎo)下,各省高職考試招生制度改革不斷深化和完善,多元化考試招生模式逐步形成。
(二)從考試改革看,職教高考采用試點(diǎn)先行
2007年,教育部批準(zhǔn)江蘇、浙江、湖南、廣東4省8所國(guó)家示范性高職院校進(jìn)行“單獨(dú)招生”試點(diǎn),開(kāi)創(chuàng)了我國(guó)高職院?!皢为?dú)招生”的新時(shí)代。山東省2012年正式啟動(dòng)職教高考(山東省稱(chēng)為“春季高考”),技能考試共涉及17個(gè)專(zhuān)業(yè)類(lèi)別的276個(gè)專(zhuān)業(yè);2021年春季高考技能考試涉及18個(gè)專(zhuān)業(yè)類(lèi)別。目前,山東省春季高考繼續(xù)沿用技能考試單獨(dú)進(jìn)行的方式,而江蘇等省份的高等職業(yè)院校(含部分應(yīng)用型本科院校)對(duì)口招收中等職業(yè)學(xué)校畢業(yè)生時(shí),除按專(zhuān)業(yè)類(lèi)實(shí)施通用專(zhuān)業(yè)技能省級(jí)統(tǒng)考外,還將學(xué)業(yè)水平考試技能成績(jī)同時(shí)作為學(xué)生對(duì)口升學(xué)考試技能成績(jī)的一部分計(jì)算在內(nèi)。
(三)從考試模式看,職教高考采用“知識(shí)+技能”的方式
職教高考采用文化素質(zhì)考核與職業(yè)技能考核并重的方式,突出了實(shí)用導(dǎo)向[2]。以山東省為例,春季高考分為“知識(shí)”和“技能”兩部分。知識(shí)部分由省考試院統(tǒng)一命題、統(tǒng)一組織考試,考試科目為語(yǔ)文(滿分120分)、數(shù)學(xué)(滿分120分)、英語(yǔ)(滿分80分)、專(zhuān)業(yè)知識(shí)(滿分200分)。技能考試部分由主考學(xué)校負(fù)責(zé)命題并組織考試,2021年山東省的技能考試分別由30所高職院校作為主考學(xué)校,滿分為230分,知識(shí)和技能的占比為2.26∶1。
二、職教高考技能考試面臨的問(wèn)題
技能考試作為職教高考改革的重要環(huán)節(jié),突出了職教高考和普通高考的區(qū)別,彰顯了職業(yè)教育面向人人、面向市場(chǎng)、面向能力的類(lèi)型屬性特征。從近10年技能考試的實(shí)施情況以及在教師和學(xué)生中的調(diào)研來(lái)看,技能考試在試點(diǎn)省份穩(wěn)步推進(jìn),暢通了職業(yè)教育縱向貫通的渠道。以山東省為例,從不同生源占比及變化趨勢(shì)來(lái)看,2014—2018年普通高考招生規(guī)模占比由55.21%逐年上升到58.95%,呈現(xiàn)基本穩(wěn)定但緩慢上升的趨勢(shì),依然是考試招生的主渠道,有效保障了高職院校的生源,為高職院校的高質(zhì)量發(fā)展提供了有力支撐。從錄取人數(shù)來(lái)看,從2012年的2 607人增加到2021年的45 442人,從而解決了技術(shù)技能人才學(xué)業(yè)成長(zhǎng)路徑不暢、高層次技術(shù)技能人才短缺問(wèn)題,滿足了產(chǎn)業(yè)轉(zhuǎn)型升級(jí)對(duì)高技能人才的迫切需求,為學(xué)生根據(jù)個(gè)人興趣和愛(ài)好選擇專(zhuān)業(yè)和學(xué)校創(chuàng)造了條件,為更多青少年走技能成才、技能報(bào)國(guó)之路奠定堅(jiān)實(shí)基礎(chǔ)。但是,從測(cè)量目標(biāo)和效度視角分析,技能考試在目標(biāo)達(dá)成度、區(qū)分度等方面還面臨一些挑戰(zhàn)。
一是技能考試的測(cè)量目標(biāo)達(dá)成度面臨挑戰(zhàn)。技能考試的目標(biāo)是實(shí)現(xiàn)適應(yīng)需求、因材施考、因材施教,科學(xué)選拔人才。這體現(xiàn)在三個(gè)方面:一是滿足區(qū)域經(jīng)濟(jì)社會(huì)發(fā)展和產(chǎn)業(yè)轉(zhuǎn)型升級(jí)的需要;二是適應(yīng)高職院校特色發(fā)展定位的需要;三是適應(yīng)學(xué)生個(gè)性化發(fā)展的需要,提供鑒別其知識(shí)、能力、素質(zhì)等方面差異的考試內(nèi)容[3]。目前,技能考試在實(shí)現(xiàn)測(cè)量目標(biāo)方面還存在一定困難,主要表現(xiàn)為:考試內(nèi)容與產(chǎn)業(yè)發(fā)展、企業(yè)職業(yè)崗位要求結(jié)合不夠緊密;考試內(nèi)容與專(zhuān)業(yè)人才培養(yǎng)目標(biāo)吻合度不高;考試內(nèi)容對(duì)考生的學(xué)情考慮不充分,學(xué)生差異化發(fā)展、個(gè)性化成才體現(xiàn)不足等。調(diào)研數(shù)據(jù)顯示,有36%的考生認(rèn)為技能考試能滿足個(gè)性化發(fā)展需要;有18%的考生則認(rèn)為技能考試對(duì)學(xué)習(xí)基礎(chǔ)、特長(zhǎng)等差異性體現(xiàn)不足。
二是技能考試的可測(cè)量性面臨挑戰(zhàn)??荚噧?nèi)容、過(guò)程和結(jié)果可測(cè)量是保證考試質(zhì)量及有效性的基本要求。技能考試以實(shí)操為主,主要考核學(xué)生的實(shí)踐能力和職業(yè)素養(yǎng),因此,技能考試通常采用過(guò)程評(píng)價(jià)和結(jié)果評(píng)價(jià)相結(jié)合的方式。過(guò)程評(píng)價(jià)主要是由評(píng)定員根據(jù)考生現(xiàn)場(chǎng)操作和表現(xiàn)進(jìn)行評(píng)分。在考試過(guò)程中,考生的操作是否規(guī)范、是否達(dá)到指定的熟練程度等指標(biāo),均受主觀因素影響,使考試標(biāo)準(zhǔn)量化困難,從而影響職教高考的公平性。調(diào)研數(shù)據(jù)顯示,僅有47%的考生認(rèn)為技能考試能夠體現(xiàn)測(cè)試的公平性;有40%的考生認(rèn)為技能考試能反映出自己的技能水平;有15%的考生則持否定態(tài)度,認(rèn)為技能考試難以準(zhǔn)確地鑒別出技能水平高低。
三是技能考試區(qū)分度面臨挑戰(zhàn)。區(qū)分度是表征測(cè)試質(zhì)量和有效性的重要依據(jù)。但是,目前有些專(zhuān)業(yè)大類(lèi)的技能測(cè)試為了便于考試評(píng)分和組織管理,技能考試偏簡(jiǎn)單,難以體現(xiàn)本專(zhuān)業(yè)大類(lèi)的核心技能,考生分?jǐn)?shù)相對(duì)集中,不能將不同水平的考生區(qū)分開(kāi)來(lái),不利于學(xué)生創(chuàng)新能力和創(chuàng)新思維的發(fā)揮,在一定程度上影響了技能考試的權(quán)威性。調(diào)研數(shù)據(jù)顯示,有超過(guò)57%的考生認(rèn)為技能考試比較簡(jiǎn)單;有12%的考生持否定態(tài)度,認(rèn)為技能考試難以準(zhǔn)確地鑒別出技能水平高低。
四是技能考試測(cè)試項(xiàng)目面臨挑戰(zhàn)。職業(yè)教育是面向能力的實(shí)踐教育,對(duì)選拔的生源除了要求具備必須的理論基礎(chǔ)外,還要具備一定的實(shí)踐操作能力。以山東省為例,技能考試最初是通過(guò)筆試完成測(cè)試,2014年開(kāi)始實(shí)施現(xiàn)場(chǎng)實(shí)操測(cè)試,重點(diǎn)考核學(xué)生的實(shí)踐動(dòng)手能力和職業(yè)素養(yǎng)。如商貿(mào)類(lèi)專(zhuān)業(yè)側(cè)重于商品促銷(xiāo)方案策劃、業(yè)務(wù)單證繕制等,可通過(guò)上機(jī)考試完成;電工電子類(lèi)專(zhuān)業(yè)側(cè)重于焊接、組裝、設(shè)計(jì)、調(diào)試等,通常在實(shí)踐教學(xué)場(chǎng)所動(dòng)手操作完成。由于受命題質(zhì)量、測(cè)試場(chǎng)地、測(cè)試經(jīng)費(fèi)等條件限制,不同專(zhuān)業(yè)技能測(cè)試局限于固有的面試、上機(jī)考試、現(xiàn)場(chǎng)實(shí)操等大眾化的考試模式,表現(xiàn)為考試方式僵化,不利于選拔出創(chuàng)新型、復(fù)合型的技術(shù)技能人才。調(diào)研數(shù)據(jù)顯示,有42%的考生認(rèn)為技能考試形式多樣化;有20%的考生則認(rèn)為技能考試形式單一,不利于發(fā)揮個(gè)人的優(yōu)勢(shì)特長(zhǎng)。
三、職教高考技能考試的科學(xué)性分析
本文將經(jīng)典測(cè)量理論應(yīng)用于技能考試分析,從教育測(cè)量視角透視技能考試的科學(xué)性,滿足難度、區(qū)分度、效度和信度等技術(shù)指標(biāo)的要求,以提高考試的可靠性,保證“職教高考”作為制度設(shè)計(jì)的權(quán)威性。
(一)難度:要能充分適合被測(cè)試者的能力水平
難度是指測(cè)驗(yàn)的難易程度,通常用通過(guò)率作為難度系數(shù)P來(lái)定量描述被測(cè)試者完成項(xiàng)目作答任務(wù)時(shí)遇到的困難程度。P的最小值為0,最大值為1。通常將P≤0.4定義為難,將0.4技能考試的難度受被測(cè)試者個(gè)體特征、測(cè)試方式、測(cè)試環(huán)境等多種因素影響。技能考試的主體以中等職業(yè)學(xué)校畢業(yè)生為主,其學(xué)習(xí)行為具有動(dòng)手能力強(qiáng)、邏輯思維弱、創(chuàng)新能力強(qiáng)、學(xué)習(xí)需求多元化等特征。針對(duì)被測(cè)試者的學(xué)情特點(diǎn),如果在真實(shí)或模擬的情景化職場(chǎng)環(huán)境中,采用實(shí)踐操作的形式完成技能測(cè)試,將在一定程度上降低測(cè)試的難度。因此,技能考試的內(nèi)容要在深入分析研究被測(cè)試者學(xué)習(xí)心理特征和行為特征的基礎(chǔ)上,科學(xué)設(shè)計(jì)測(cè)試題目結(jié)構(gòu)和題目類(lèi)型,并設(shè)定恰當(dāng)?shù)臏y(cè)試方法,使考試的難度系數(shù)P控制在0.4~0.7之間,且在0.5左右,保證測(cè)試的適當(dāng)性和有效性。
(二)區(qū)分度:要能準(zhǔn)確鑒別被測(cè)試者技能水平的高低
區(qū)分度是指測(cè)試在多大程度上能將水平不同的被測(cè)試對(duì)象區(qū)分開(kāi)的量度,通常用D表示,取值范圍在-1~1之間。D值越大,區(qū)分度越高,越能反映出被測(cè)試者的真實(shí)水平。當(dāng)D取0~1的值時(shí),表示正區(qū)分,即高水平的被測(cè)試者得高分,低水平的被測(cè)試者得分低;當(dāng)D取-1~0的值時(shí),表示負(fù)區(qū)分,即高水平的被測(cè)試者反而得分低,而低水平的被測(cè)試者得分高;當(dāng)D=0時(shí),表示高水平的被測(cè)試者和低水平的測(cè)試者得分沒(méi)有差異。根據(jù)美國(guó)教育測(cè)量學(xué)家埃貝爾提出的區(qū)分度標(biāo)準(zhǔn)[4],D的取值在0.40以上,則認(rèn)為測(cè)試的區(qū)分度較好。
技能考試的區(qū)分度是衡量技能測(cè)試質(zhì)量的重要標(biāo)準(zhǔn)和依據(jù)。技能考試以學(xué)生的能力本位為導(dǎo)向,注重職業(yè)能力評(píng)價(jià),要求被測(cè)試者在設(shè)定的情境中,運(yùn)用已有的知識(shí)和具備的能力完成設(shè)定的任務(wù)。評(píng)價(jià)過(guò)程側(cè)重被測(cè)試者知識(shí)和技能的掌握程度、分析問(wèn)題和解決問(wèn)題的能力、交流與合作的能力,以及批判性思考問(wèn)題的能力。因此,技能考試內(nèi)容和方式要充分考慮上述因素,科學(xué)設(shè)定測(cè)試的區(qū)分度,合理區(qū)分被測(cè)試者能力的不同水平,選拔出合適的技術(shù)技能人才。
(三)信度:要能穩(wěn)定呈現(xiàn)被測(cè)試者技能的實(shí)際水平
信度是測(cè)試的可靠性程度,是指測(cè)試能否穩(wěn)定地反映被測(cè)試者的實(shí)際水平,通常用rxy表示,取值范圍在0~1之間。任何一個(gè)測(cè)試都會(huì)受到相關(guān)因素的干擾,從而在不同程度上影響測(cè)試的信度。測(cè)試的信度通常用信度系數(shù)來(lái)表示,信度系數(shù)越大,測(cè)試的可信程度越高。美國(guó)學(xué)者德維利斯認(rèn)為,信度系數(shù)在0.7~0.8之間時(shí),表示測(cè)試的信度很好;信度系數(shù)在0.8以上時(shí),表示信度非常好。
技能考試通常是在特定的實(shí)踐環(huán)境中進(jìn)行,以表現(xiàn)性評(píng)價(jià)的方式完成,考試過(guò)程受被測(cè)試者生理因素和心理因素、考試的難度和方式、考試的時(shí)段和時(shí)長(zhǎng)、考試環(huán)境和測(cè)試設(shè)備、評(píng)分人員的言行和評(píng)分方式等的影響,從而導(dǎo)致測(cè)試結(jié)果的不穩(wěn)定,影響考試的信度。因此,要科學(xué)設(shè)計(jì)技能考試的命題、測(cè)試過(guò)程以及考核評(píng)價(jià),以最大限度避免被測(cè)試對(duì)象因特質(zhì)不同、測(cè)試時(shí)間不同、測(cè)試環(huán)境不同等因素帶來(lái)的誤差影響,保證技能測(cè)試結(jié)果的公平和公正,為選拔適應(yīng)需求的技術(shù)技能人才提供客觀有效的依據(jù)。
(四)效度:要能有效反映被測(cè)試者的能力建構(gòu)
效度即有效性,是指所測(cè)量到的結(jié)果反映所想要考察內(nèi)容的程度。效度是與測(cè)量目標(biāo)緊密聯(lián)系的,反映了測(cè)試預(yù)期目的的達(dá)成度,測(cè)量結(jié)果與要考察的內(nèi)容越吻合,則效度越高。美國(guó)心理學(xué)會(huì)發(fā)行的《教育與心理測(cè)量的標(biāo)準(zhǔn)》將效度分為內(nèi)容效度、結(jié)構(gòu)效度和效標(biāo)關(guān)聯(lián)效度。本文進(jìn)行內(nèi)容效度的研究,通過(guò)專(zhuān)家分析的方法,定性分析測(cè)試題目對(duì)測(cè)試內(nèi)容范圍的代表程度。
技能考試的目的是為適應(yīng)產(chǎn)業(yè)轉(zhuǎn)型升級(jí)和學(xué)校特色發(fā)展選拔技術(shù)技能人才,因此,技能考試的內(nèi)容要適應(yīng)新業(yè)態(tài)、新技術(shù)、新規(guī)范、新職業(yè)發(fā)展,遵循技術(shù)技能人才成長(zhǎng)規(guī)律和能力建構(gòu)過(guò)程,契合專(zhuān)業(yè)人才培養(yǎng)目標(biāo)。高質(zhì)量編制考試試卷、規(guī)范考試過(guò)程、科學(xué)統(tǒng)計(jì)分?jǐn)?shù),確??荚噧?nèi)容達(dá)到測(cè)試目標(biāo),有效反映被測(cè)試者能力的建構(gòu)。
四、技能考試實(shí)證分析
以2021年山東省某專(zhuān)業(yè)類(lèi)技能考試為例,對(duì)考試的難度、區(qū)分度、信度和效度進(jìn)行定量和定性分析。試題共分兩部分,包括填空、上機(jī)操作等題型,均以客觀評(píng)分為主。本次考試共有3 466人參加,滿分230分,平均分145.5分。從考生中隨機(jī)抽取578人進(jìn)行分析,考試成績(jī)頻率分布曲線如圖1所示。
從圖1看出,考生的成績(jī)分布合理,符合偏右的正態(tài)分布,大部分考生成績(jī)?cè)?41分以上,占到總?cè)藬?shù)的64.3%,技能考試分?jǐn)?shù)分布整體良好。
(一)難度分析
由于本次技能考試人數(shù)較多,且分?jǐn)?shù)為連續(xù)變量,因此難度系數(shù)采用分組法計(jì)算。首先將測(cè)試總分按從高到低的順序進(jìn)行排列,從最高分開(kāi)始依次向下選出全部試卷的27%作為高分組(本次測(cè)試選擇578×27%=156人),從最低分開(kāi)始依次向上選出全部試卷的27%作為低分組,計(jì)算P值:
其中,PH、PL分別為高分組、低分組的難度系數(shù),XˉH、XˉL分別為高分組、低分組被試者的平均分,X為該測(cè)試的滿分。
技能測(cè)試是常模參照測(cè)驗(yàn),其目的是盡可能體現(xiàn)被測(cè)試者的個(gè)體差異,要求測(cè)試結(jié)果盡量拉開(kāi)距離。本次技能測(cè)試P=0.588,在0.4~0.7范圍內(nèi),且接近0.5,說(shuō)明本次技能考試難度適宜,能體現(xiàn)被測(cè)試者實(shí)踐動(dòng)手能力的不同層次,測(cè)驗(yàn)分?jǐn)?shù)基本呈正態(tài)分布。
(二)區(qū)分度分析
測(cè)試的區(qū)分度和難度密切相關(guān),當(dāng)測(cè)試的難度適中時(shí),才能使區(qū)分度達(dá)到最大值。采用分組法計(jì)算本次技能測(cè)試的區(qū)分度:
其中,H、L分別為該測(cè)試的最高得分和最低得分。
由于技能考試的目的是選拔合格的技術(shù)技能人才,因此,要求區(qū)分度越高越好。本次測(cè)試D=0.38<0.40,區(qū)分度接近于0.4,說(shuō)明測(cè)試基本能鑒別被測(cè)試者的技能水平,但區(qū)分度不夠高,出現(xiàn)分?jǐn)?shù)過(guò)于集中的現(xiàn)象。
(三)信度分析
由于本次技能測(cè)試不可能重復(fù)測(cè)驗(yàn),因此,采用奇偶分半信度來(lái)估算測(cè)驗(yàn)的信度系數(shù):
其中,X、Y分別為奇偶次測(cè)試得分。
用斯皮爾曼—布朗公式進(jìn)行校正,得到一致性系數(shù) rtt為:
技能考試是大規(guī)模選拔性的技能測(cè)驗(yàn),要求具有較高的可靠性。本次測(cè)試的信度系數(shù) rxy=0.81>0.80,且校正后內(nèi)部一致性系數(shù)較大,說(shuō)明整個(gè)測(cè)試信度很高。
(四)效度初步分析
對(duì)技能考試來(lái)說(shuō),所要測(cè)試的內(nèi)容依據(jù)是職業(yè)崗位(群)和專(zhuān)業(yè)人才培養(yǎng)方案,實(shí)際測(cè)試的內(nèi)容是學(xué)生對(duì)知識(shí)和能力的運(yùn)用與表現(xiàn),如果技能考試的題目能恰當(dāng)?shù)胤从陈殬I(yè)崗位能力、專(zhuān)業(yè)人才培養(yǎng)目標(biāo)和學(xué)生的個(gè)性化發(fā)展需求,則測(cè)試具有較高的內(nèi)容效度。本文采用專(zhuān)家分析法研究技能考試的內(nèi)容效度,根據(jù)本次技能測(cè)試的目標(biāo)和被測(cè)試者的學(xué)習(xí)行為特征制定評(píng)定量表,由行業(yè)企業(yè)專(zhuān)家、專(zhuān)業(yè)負(fù)責(zé)人、課程專(zhuān)家、考試專(zhuān)家等50名專(zhuān)家組成的專(zhuān)家組,根據(jù)量表的內(nèi)容對(duì)考試的效度進(jìn)行判斷分析,結(jié)果如表1所示。
數(shù)據(jù)顯示,本次技能考試的試題一,有62%以上的專(zhuān)家認(rèn)為能與人才培養(yǎng)目標(biāo)吻合、與職業(yè)崗位契合、與被測(cè)試者學(xué)情適合,但是,有4%的專(zhuān)家認(rèn)為和被測(cè)試者的學(xué)情基本不適合,需要引起足夠重視。對(duì)試題二來(lái)說(shuō),72%以上專(zhuān)家均持肯定態(tài)度??傮w來(lái)看,本次技能考試題目分布基本合理,具有較高的內(nèi)容效度。
(五)結(jié)論
通過(guò)分析發(fā)現(xiàn),雖然本次技能測(cè)試難度、信度均在合理范圍內(nèi),但是,測(cè)試的區(qū)分度存在一定問(wèn)題,需要進(jìn)一步論證測(cè)試項(xiàng)目的設(shè)計(jì)和優(yōu)化,并加強(qiáng)技能測(cè)試的流程管理,減少分?jǐn)?shù)集中的現(xiàn)象。通過(guò)調(diào)研發(fā)現(xiàn),專(zhuān)家對(duì)測(cè)試內(nèi)容的效度基本持肯定態(tài)度,但仍有4%的專(zhuān)家認(rèn)為專(zhuān)業(yè)人才培養(yǎng)目標(biāo)和學(xué)生的個(gè)性化發(fā)展需求吻合度不高。同時(shí),專(zhuān)家普遍認(rèn)為技能測(cè)試的能力構(gòu)建是深層次問(wèn)題,測(cè)試中的技能操作過(guò)程符合度、覆蓋度與測(cè)試目標(biāo)尚有差距,需要在后續(xù)的測(cè)試中引起高度重視。
五、職教高考技能考試的發(fā)展策略
能力本位評(píng)價(jià)是職業(yè)教育作為一種教育類(lèi)型的重要特征,因此,技能考試要從分析各專(zhuān)業(yè)大類(lèi)對(duì)應(yīng)崗位群的職業(yè)能力入手,分專(zhuān)業(yè)大類(lèi)建設(shè)技能考試試題庫(kù),并確保不同專(zhuān)業(yè)、不同工種或科目的測(cè)量基準(zhǔn)和難易程度相當(dāng)[5],通過(guò)優(yōu)化考試內(nèi)容、考試方式、考試標(biāo)準(zhǔn)等,提高技能考試測(cè)試目標(biāo)達(dá)成度和效度。
(一)優(yōu)化考試內(nèi)容,完善技能考試難度和區(qū)分度
考試內(nèi)容的優(yōu)化能提高技能考試的區(qū)分度,使測(cè)試具有適中的難度,提高測(cè)試的可測(cè)量性,實(shí)現(xiàn)選拔合適技術(shù)技能人才的目的。一是技能考試要選擇職業(yè)崗位真實(shí)的工作項(xiàng)目(任務(wù)),適應(yīng)技術(shù)進(jìn)步和生產(chǎn)方式變革需要,通過(guò)設(shè)計(jì)多個(gè)可供選擇的不同測(cè)試項(xiàng)目,保證測(cè)試具有良好的難度和區(qū)分度。二是技能考試內(nèi)容要依據(jù)招生專(zhuān)業(yè)(群)的人才培養(yǎng)方案,與人才培養(yǎng)目標(biāo)和培養(yǎng)規(guī)格吻合,將專(zhuān)業(yè)知識(shí)、技能和素養(yǎng)融入到不同的測(cè)試項(xiàng)目中。三是技能考試內(nèi)容要契合被測(cè)試者學(xué)習(xí)基礎(chǔ)、學(xué)習(xí)習(xí)慣、思維方式等差異化學(xué)情特征,注重服務(wù)其全面發(fā)展和個(gè)性化成才,拓寬職業(yè)空間[6],使被測(cè)試者能根據(jù)個(gè)人的興趣愛(ài)好,選擇發(fā)揮個(gè)人技能專(zhuān)長(zhǎng)的測(cè)試項(xiàng)目。
(二)優(yōu)化考試方式,提高技能考試效度
技能考試單一固化的考試模式在很大程度上限制了技術(shù)技能人才的入口質(zhì)量,從而影響考試的效度。美國(guó)哈佛大學(xué)教授加德納將多元智能理論定義為在某種社會(huì)或文化環(huán)境的價(jià)值標(biāo)準(zhǔn)下,個(gè)體用以解決自己遇到的真正難題或生產(chǎn)及制造出有效產(chǎn)品所需要的能力。技能考試要以多元智能理論為指導(dǎo),根據(jù)每個(gè)被測(cè)試者都具有自身優(yōu)勢(shì)和特點(diǎn),并有自己獨(dú)特的表現(xiàn)形式,以學(xué)生的能力本位為導(dǎo)向,注重考試的針對(duì)性和專(zhuān)業(yè)性,使學(xué)生在設(shè)計(jì)的真實(shí)或模擬的工作崗位情境中,運(yùn)用已有的知識(shí)解決某個(gè)新問(wèn)題、創(chuàng)造某個(gè)作品、完成一個(gè)生產(chǎn)過(guò)程、模擬一項(xiàng)經(jīng)營(yíng)服務(wù)等,測(cè)試學(xué)生知識(shí)與技能的掌握程度,以及分析問(wèn)題、解決問(wèn)題、交流合作和批判性思考等能力,提高技能考試效度,選拔出適應(yīng)產(chǎn)業(yè)發(fā)展需求的技術(shù)技能人才。
(三)優(yōu)化考試標(biāo)準(zhǔn),提高技能考試信度
我國(guó)已經(jīng)進(jìn)入新的發(fā)展階段,產(chǎn)業(yè)升級(jí)和經(jīng)濟(jì)結(jié)構(gòu)調(diào)整不斷加快,新產(chǎn)業(yè)、新業(yè)態(tài)、新商業(yè)模式不斷涌現(xiàn),對(duì)技術(shù)技能人才的能力結(jié)構(gòu)和素質(zhì)結(jié)構(gòu)提出了新的要求。因此,技能考試的標(biāo)準(zhǔn)要契合職業(yè)能力標(biāo)準(zhǔn),提高技能考試信度。技能考試要有相關(guān)行業(yè)和企業(yè)全程參與考試命題和標(biāo)準(zhǔn)制定,使技能考試標(biāo)準(zhǔn)與職業(yè)崗位要求相匹配,從“入口”解決校企合作不緊密的問(wèn)題,從根本上實(shí)現(xiàn)學(xué)校、學(xué)生和企業(yè)共贏、共生。同時(shí),技能考試標(biāo)準(zhǔn)要與職業(yè)技能等級(jí)證書(shū)標(biāo)準(zhǔn)結(jié)合,與職業(yè)資格證書(shū)標(biāo)準(zhǔn)結(jié)合,確保技能的實(shí)用性及有效性。另外,技能考試標(biāo)準(zhǔn)要以質(zhì)性評(píng)價(jià)與量化評(píng)價(jià)相結(jié)合,并以量化評(píng)價(jià)為主,減少評(píng)分人員主觀因素的影響,確保技能考試的公平性和公正性。
參考文獻(xiàn):
[1]雷新勇.教育測(cè)量理論應(yīng)用于高考改革實(shí)踐若干問(wèn)題的探討[J].中國(guó)考試,2020(1):7-12.
[2]陳虹羽.類(lèi)型教育視角下職教高考制度建設(shè)的邏輯要求、難點(diǎn)及對(duì)策[J].教育與職業(yè),2021(5):13-20.
[3]吳根洲.職教高考的適應(yīng)性與選拔性[J].職教論壇,2021(6):49-52.
[4]朱德全.教育測(cè)量學(xué)[M].北京:中國(guó)人民大學(xué)出版社,2016.
[5]盧斌,陳少艾,呂金華,等.基于高考改革的“技能高考”模式研究與實(shí)踐成果[J].中國(guó)職業(yè)技術(shù)教育,2016(8):5-9.
[6]劉英霞,亓俊忠,丁文利.系統(tǒng)論視角下高職學(xué)校高水平專(zhuān)業(yè)群組建邏輯與成效探析[J].職業(yè)技術(shù)教育,2020(14):25-29.
(責(zé)任編輯:張宇平)