葉汝軍
摘 要:本文參考教育部提出的教育質(zhì)量綜合評價的理論框架,結(jié)合地區(qū)高職學(xué)校的實際情況及學(xué)生的心理特點,開發(fā)出具有科學(xué)性和實操性的中國高職學(xué)生的教育質(zhì)量綜合評價的測量工具,為更好地了解高職學(xué)生的發(fā)展情況,促進(jìn)學(xué)生健康成長,全面提高教育質(zhì)量提供依據(jù)。
關(guān)鍵詞:高職學(xué)生 教育質(zhì)量綜合評價 量表 信度
課 題:本文系課題《職業(yè)教育質(zhì)量監(jiān)測與綜合評價平臺關(guān)鍵技術(shù)研究》(編號2015C33070)的研究成果。
目前,我國高職教育學(xué)習(xí)評價現(xiàn)狀不容樂觀。在評價理念上注重學(xué)生對系統(tǒng)知識的積累和掌握,忽視學(xué)生實踐和動手能力的訓(xùn)練;在評價方式上,閉卷考試居多,開卷考試少,筆試方式多,口試、答辯形式少;在評價內(nèi)容上,理論考試居多,技能、操作實踐能力考察少;在評價組織上,統(tǒng)一考試多,因材施考少。
一、我國高職教育評價背景
實踐證明,諸如此類的評價方式不僅無法有效、科學(xué)地評價學(xué)生所學(xué)知識和所獲得的技能,還歪曲了學(xué)習(xí)評價引領(lǐng)教學(xué)改革的作用,抑制了學(xué)生的個性化發(fā)展。當(dāng)今教育改革過程中離不開教育質(zhì)量的監(jiān)測,這個環(huán)節(jié)是學(xué)校發(fā)展的生命線。開展教育質(zhì)量監(jiān)測是建設(shè)教育質(zhì)量管控體系與提高教育治理能力的重要內(nèi)容。因此,教師應(yīng)該從關(guān)注學(xué)業(yè)成績轉(zhuǎn)變到關(guān)注教育質(zhì)量綜合評價。
二、研究方法及過程
1.文獻(xiàn)研究
主要用于對教育部發(fā)布的《中小學(xué)教育質(zhì)量綜合評價指標(biāo)框架(試行)》進(jìn)行深入解讀,對國家相關(guān)教育政策或制度(如《國家基礎(chǔ)教育質(zhì)量監(jiān)測實施方案》等)及已有文獻(xiàn)和實踐案例進(jìn)行梳理和分析,為構(gòu)建本地高職教育質(zhì)量綜合評價指標(biāo)體系提供了理論基礎(chǔ)。
2.訪談法
以半結(jié)構(gòu)化訪談的形式,面向相關(guān)利益群體(學(xué)校、教師、學(xué)生、家長等)就某區(qū)高職教育質(zhì)量現(xiàn)狀以及特點等進(jìn)行深入討論交流,據(jù)此來細(xì)化評價指標(biāo),確保構(gòu)建的評價指標(biāo)體系全面系統(tǒng)且符合實際。
3.調(diào)查法
以抽樣調(diào)查的形式獲取區(qū)域高職教育質(zhì)量綜合評價數(shù)據(jù),用于對初步設(shè)計開發(fā)的評價工具的有效性和可靠性進(jìn)行檢驗和修正。
4.數(shù)據(jù)分析方法
數(shù)據(jù)分析方法主要用于對隱沒在一大批看來雜亂無章的數(shù)據(jù)中的信息,集中、萃取和提煉出來,并形成定量結(jié)論。
1.文獻(xiàn)研究初步構(gòu)建指標(biāo)
教育部發(fā)布的《指標(biāo)框架(試行)》給出了五大評價內(nèi)容、20個關(guān)鍵指標(biāo)等主要監(jiān)測依據(jù)。根據(jù)高職學(xué)生的年齡特點,其包含和對應(yīng)不同的指標(biāo)內(nèi)容。如身心發(fā)展,包括情緒行為調(diào)控、人際溝通、健康生活方式、對行為的自我約束情況等;品德發(fā)展,包括行為習(xí)慣、公民素養(yǎng)、在文明交往、遵紀(jì)守法方面的認(rèn)知和表現(xiàn)等;學(xué)業(yè)發(fā)展,包括學(xué)習(xí)品質(zhì)、實踐能力、關(guān)注現(xiàn)實生活、解決實際問題等方面的情況;興趣潛能,包括創(chuàng)新能力、求知欲、愛好特獨立思考與鉆研探究,對某些知識和現(xiàn)象的專注、思考等情況;學(xué)業(yè)負(fù)擔(dān),包括潛能發(fā)展、在某些方面表現(xiàn)出的突出素質(zhì)和進(jìn)一步發(fā)展的能力等。
2.基于實際調(diào)研結(jié)果修訂指標(biāo)
為完善教育質(zhì)量綜合評價結(jié)構(gòu)設(shè)計,為題項編制收集豐富的素材,本次研究針對理論構(gòu)建的教育質(zhì)量綜合評價的框架,編制學(xué)生版和教師版的《教育質(zhì)量綜合評價指標(biāo)重要性調(diào)查問卷》。
3.題項編制
本研究編制的量表題項的來源主要包括:已有的國內(nèi)外的相關(guān)量表;修改前人量表的相關(guān)試題;基于前期訪談的資料,結(jié)合與學(xué)生學(xué)習(xí)、生活和社會工作相聯(lián)系的情景和事件自編題目。
4.施測過程
采取隨機(jī)抽樣的方法,將某地區(qū)四所高職學(xué)校的高職一年級學(xué)生作為施測對象,第一階段隨機(jī)抽取兩所高職學(xué)校的800名學(xué)生作為試測對象,用于探索性因素分析;第二階段選取了四所學(xué)校的1500名學(xué)生作為被試發(fā)放正式問卷,用于驗證性因素分析。兩次測試對象的具體情況如下。
預(yù)測對象(n=644):學(xué)校一,男47,女41,總?cè)藬?shù)88,占比13.66%;學(xué)校二,男185,女371,總?cè)藬?shù)556,占比人數(shù)86.43%;
正式測試對象(n=1292):學(xué)校一,男,480人,女,366人,總?cè)藬?shù),846人,占比65.48%;學(xué)校二,男19人,女15人,總?cè)藬?shù)34人,占比2.63%;學(xué)校三,男126人,女67人,總?cè)藬?shù)193人,占比14.94%
5.數(shù)據(jù)分析
本研究首先對收集的數(shù)據(jù)按照一定的規(guī)則和篩選數(shù)據(jù)的原則進(jìn)行整理,刪除具有規(guī)律性作答問卷和具有缺失值的數(shù)據(jù),然后將有效數(shù)據(jù)的等級計分方式選項A、B、C、D、E分別編碼為1、2、3、4、5,同時將所有反向計分題目轉(zhuǎn)換。隨后基于整理后的數(shù)據(jù)進(jìn)行項目分析、信度檢驗和效度檢驗。
三、因素分析與結(jié)果
1.項目分析
將題總相關(guān)以及臨界比率(critical ration,CR)作為項目區(qū)分度的分析指標(biāo)。CR值的計算方法為將所有被試按照因子得分由高到低排列,因子得分前27%的被試(644×27%=173名)為高分組,因子得分后27%的被試(173名)為低分組,對高低兩組被試在因子上的每一個項目得分進(jìn)行獨立樣本t檢驗。
2.探索性因素分析
本次研究主要采用主成分分析法,利用方差極大斜交旋轉(zhuǎn)法進(jìn)行結(jié)構(gòu)分析。
(1)身心發(fā)展——人與自身的互動。KMO和Bartlett檢驗結(jié)果是KMO=0.954,Bartlett球形檢驗p<0.001,說明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明,在身心發(fā)展分量表中,有9個項目具有雙重負(fù)荷,10個項目的載荷低于0.4,6個項目分屬于一個因子,
(2)品德發(fā)展——人與自身的互動。KMO和Bartlett檢驗結(jié)果是KMO=0.944,Bartlett球形檢驗p<0.001,說明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明,在品德發(fā)展分量表中,有3個項目具有雙重負(fù)荷,3個項目的載荷低于0.4,兩個項目分別屬于一個因子。
(3)學(xué)業(yè)負(fù)擔(dān)——人與工具的互動。KMO和Bartlett檢驗結(jié)果是KMO=0.914,Bartlett球形檢驗p<0.001,說明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明,在學(xué)業(yè)負(fù)擔(dān)分量表中,有10個項目具有雙重負(fù)荷,9個項目的載荷低于0.4,5個項目分別屬于一個因子。
(4)學(xué)業(yè)發(fā)展——人與社會互動。KMO和Bartlett檢驗結(jié)果是KMO=0.946,Bartlett球形檢驗p<0.001,說明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明,在學(xué)業(yè)發(fā)展分量表中,有5個項目具有雙重負(fù)荷,4個項目的載荷低于0.4,5個項目分別屬于一個因子。
(5)興趣潛能——人與社會的互動。KMO和Bartlett檢驗結(jié)果是KMO=0.949,Bartlett球形檢驗p<0.001,說明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明,在興趣潛能分量表中,有6個項目具有雙重負(fù)荷,8個項目的載荷低于0.4,3個項目分別屬于一個因子。
3.驗證性因素分析
驗證性因素分析結(jié)構(gòu),即潛變量與觀測變量的對應(yīng)關(guān)系參照探索性因素分析的結(jié)果,模型擬合采用最大似然法(ML),參考各題項的因子載荷與各統(tǒng)計指標(biāo),確定模型的擬合程度情況,各維度的驗證性因素分析結(jié)果見表1。
根據(jù)驗證性因素分析的結(jié)果發(fā)現(xiàn),各分量表的CFI和TLI指標(biāo)均在0.9以上,RMSEA指標(biāo)均小于0.08,符合心理測量學(xué)要求,說明各分量表的模型擬合良好。
4.信度檢驗
各分量表及因子的信度系數(shù)的具體結(jié)果見表2。
由上表可知,本研究量表的信度良好。
四、結(jié)論
本研究最終形成的問卷結(jié)構(gòu)與教育部提出的內(nèi)容框架基本相同,仍包括“身心發(fā)展、品德發(fā)展、學(xué)業(yè)負(fù)擔(dān)、學(xué)業(yè)發(fā)展、興趣潛能”五個模塊,量表的信度和效度各項指標(biāo)良好。本研究為深刻揭示當(dāng)代教育質(zhì)量的本質(zhì)提供參考,為學(xué)生的全面發(fā)展提供了指導(dǎo),為轉(zhuǎn)變教育管理者、教師和家長的觀念提供了依據(jù)。
參考文獻(xiàn):
[1]代其平.學(xué)校監(jiān)測中應(yīng)注意的幾個問題[J].現(xiàn)代中小學(xué)教育,1990(3).
[2]傅永春,楊伊生.家長教育方式的現(xiàn)狀及思考[J].內(nèi)蒙古教育學(xué)院學(xué)報,1995(2).
[3]胡月琴,甘怡群.青少年心理韌性量表的編制和效度驗證[J].心理學(xué)報,2008(8).
(作者單位:浙江商業(yè)職業(yè)技術(shù)學(xué)院)