浦香++貢和法
摘要:學(xué)業(yè)評價與課程標(biāo)準(zhǔn)一致性問題一直是教學(xué)評價領(lǐng)域研究的關(guān)注點。采用美國學(xué)者波特提出的SEC模式,通過量化分析方法的研究表明,2015年江蘇省高考政治試題在內(nèi)容主題分布上與《普通高中思想政治課程標(biāo)準(zhǔn)(實驗)》一致性不夠,在部分領(lǐng)域存在明顯的差異性??荚囋u價要與課程標(biāo)準(zhǔn)保持一致,應(yīng)樹立課程標(biāo)準(zhǔn)意識,明確考試評價功能,構(gòu)建一致性評價標(biāo)準(zhǔn)。
關(guān)鍵詞:高考;政治;試題;課程標(biāo)準(zhǔn);一致性;SEC模式
中圖分類號:G632.474 文獻(xiàn)標(biāo)志碼:A 文章編號:1673-9094(2016)01A-0056-05
國家課程標(biāo)準(zhǔn)是我國新一輪課程改革的重要文件,是我國素質(zhì)教育在相應(yīng)階段的質(zhì)量標(biāo)準(zhǔn),“是教材編寫、教學(xué)、評估和考試命題的依據(jù),是國家管理和評價課程的基礎(chǔ)”[1]。但國家課程標(biāo)準(zhǔn)本身只是一種政策性文本,并不能確保我們的教育教學(xué)實踐與學(xué)業(yè)評價就能嚴(yán)格依據(jù)國家課程標(biāo)準(zhǔn)而展開。只有當(dāng)學(xué)業(yè)評價與課程標(biāo)準(zhǔn)相一致的時候,教學(xué)才能很好地貫徹課程標(biāo)準(zhǔn),達(dá)成課改目標(biāo)。高考作為學(xué)生學(xué)業(yè)評價的重要組成部分,其試題內(nèi)容與國家課程標(biāo)準(zhǔn)是否一致?一致性水平如何?考試評價是否符合國家課程標(biāo)準(zhǔn)的理念,是否貫徹了課程標(biāo)準(zhǔn)的要求?……這些都成為大家關(guān)注的問題,同時也是評價新課程實施情況的重要指標(biāo)?;谶@樣的認(rèn)識,本文選擇2015年江蘇省高考政治試題與《普通高中思想政治課程標(biāo)準(zhǔn)(實驗)》(以下簡稱課程標(biāo)準(zhǔn))作為研究對象,力圖通過量化分析,探究兩者間的一致性水平,以期促進(jìn)高中思想政治課改的推進(jìn)與深化。
一、研究模式與方法的選擇
研究結(jié)論一般與研究模式及其方法的選擇之間存在邏輯上的關(guān)聯(lián)性,選擇不同的研究模式與方法,研究結(jié)論也會有所不同。因此,研究模式及其方法的選擇對研究活動及結(jié)論的獲取具有重要影響。
(一)研究模式
研究高考試題內(nèi)容與課程標(biāo)準(zhǔn)的一致性問題,需要通過統(tǒng)計學(xué)意義上可接受的量化指標(biāo)來衡量課程標(biāo)準(zhǔn)與測驗項目之間的一致性程度。在國際上,基于課程標(biāo)準(zhǔn)的學(xué)業(yè)評價研究中,較有代表性的一致性研究模式主要有Webb模式、SEC模式、Achieve模式等三種。本研究采用美國學(xué)者波特(Porter)于2002年提出的SEC模式,又稱“二維矩陣法”[2],從內(nèi)容主題與認(rèn)知水平兩個維度來衡量高考試題和課程標(biāo)準(zhǔn)之間的一致性程度。
(二)研究方法
研究方法是人們在研究中發(fā)現(xiàn)新事物或提出新理論,揭示事物內(nèi)在規(guī)律的手段。根據(jù)研究手段的不同,研究方法有定性研究與定量研究之分。在我國高考試題分析研究中,以往的研究者主要從命題理念、試題特點及其結(jié)構(gòu)等幾個方面進(jìn)行定性研究,少有學(xué)者采用統(tǒng)計學(xué)意義上的信度、效度、區(qū)分度、標(biāo)準(zhǔn)差等指標(biāo)進(jìn)行定量研究。本研究選擇2015年江蘇省高考政治試題(共同必修部分)與課程標(biāo)準(zhǔn)作為分析對象,嘗試采用SEC模式下的定量分析方法探究高考試題與課程標(biāo)準(zhǔn)之間的一致性水平。
SEC模式下的分析需要將高考試題與課程標(biāo)準(zhǔn)采用相同的方法編碼到一個“內(nèi)容主題×認(rèn)知水平”的二維矩陣中。對兩個二維矩陣表格中的單元格賦值后進(jìn)行的系統(tǒng)計算結(jié)果即為任意兩個變量之間的一致性。為保證變量之間的可比性,需要對每個單元格賦值進(jìn)行總和為1的比值的標(biāo)準(zhǔn)化處理,之后根據(jù)SEC模式下的波特一致性系數(shù)計算課程標(biāo)準(zhǔn)與高考試題之間的一致性水平,其中波特一致性系數(shù)P的數(shù)學(xué)計算公式為:1-■。在波特一致性系數(shù)P的數(shù)學(xué)計算公式中,n表示矩陣中的單元格數(shù),i表示矩陣中某一指定單元格,1≤i≤n。Xi表示矩陣X中的第i個值,Yi表示矩陣Y中的第i個值。波特一致性系數(shù)P的數(shù)值介于0和1之間,P=0時,表示兩者間不存在一致性,也即兩者間差異性最大,P=1時,表示兩者間的一致性達(dá)到完美水平,即一致性水平最高。
二、具體研究流程
(一)內(nèi)容與認(rèn)知水平的分類
本文采用SEC模式的通用編碼框架,即“內(nèi)容主題×認(rèn)知水平”二維矩陣對課程標(biāo)準(zhǔn)和2015年江蘇省高考政治試題進(jìn)行編碼。編碼之前,首先需要完成對內(nèi)容主題和認(rèn)知水平的分類。
根據(jù)課程標(biāo)準(zhǔn),將內(nèi)容主題分為十六個領(lǐng)域:生活與消費;生產(chǎn)、勞動與經(jīng)營;收入與分配;發(fā)展社會主義市場經(jīng)濟(jì);公民的政治生活;為人民服務(wù)的政府;發(fā)展社會主義民主政治;當(dāng)代國際社會;文化與生活;文化傳承與創(chuàng)新;中華文化與民族精神;發(fā)展中國特色社會主義文化;生活智慧與時代精神;探索世界與追求真理;思想方法與創(chuàng)新意識;認(rèn)識社會與價值選擇。
《江蘇省普通高中思想政治課程標(biāo)準(zhǔn)教學(xué)要求(修訂稿)》是根據(jù)《普通高中思想政治課程標(biāo)準(zhǔn)(實驗)》,并結(jié)合江蘇省的教學(xué)實際,為教師教學(xué)制定的一份指導(dǎo)性文件。在深入閱讀《江蘇省普通高中思想政治課程標(biāo)準(zhǔn)教學(xué)要求(修訂稿)》的基礎(chǔ)上,研究者將知識與技能的認(rèn)知水平分為三個層次:了解水平、理解水平、應(yīng)用水平,具體分類如表1所示。
(二)內(nèi)容與認(rèn)知水平的編碼
在確定內(nèi)容主題與認(rèn)知水平分類之后,研究者開始對課程標(biāo)準(zhǔn)和高考政治試題進(jìn)行編碼。
1.課程標(biāo)準(zhǔn)編碼
編碼者為兩位學(xué)科教學(xué)(思政)專業(yè)教育碩士。兩人分別對課程標(biāo)準(zhǔn)從內(nèi)容主題和認(rèn)知水平兩個維度進(jìn)行編碼,編碼結(jié)束后用SPSS18.0軟件對得到的編碼數(shù)據(jù)結(jié)果進(jìn)行信度分析,計算得出斯皮爾曼相關(guān)系數(shù)為0.965,說明本次研究具有良好的一致性。
編碼以課程標(biāo)準(zhǔn)中的條款數(shù)目為計量單位,對“內(nèi)容主題×認(rèn)知水平”的二維矩陣的每個單元格進(jìn)行賦值,得到表2。
對表2中的數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化處理,得到表3。
2.高考政治試題編碼
與上述編碼方法類似,本文對2015年江蘇省高考政治試題的分析是將每一道試題按其參考答案所設(shè)定的分值,以及對課程標(biāo)準(zhǔn)編碼時采用的編碼標(biāo)準(zhǔn),分析試題內(nèi)容所對應(yīng)的內(nèi)容主題,從內(nèi)容主題與認(rèn)知水平兩個維度,將高考政治試題編碼到“內(nèi)容主題×認(rèn)知水平”的16×3的矩陣中得到表4。然后與上述方法類似,對其進(jìn)行標(biāo)準(zhǔn)化處理,以便與課程標(biāo)準(zhǔn)矩陣進(jìn)行比較。endprint
對表4中的數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化處理得到表5。
3.計算波特一致性系數(shù)
根據(jù)表3和表5的數(shù)據(jù)以及波特一致性系數(shù)計算公式,得出P=0.448,表明2015年江蘇省高考政治試題與課程標(biāo)準(zhǔn)在統(tǒng)計學(xué)意義上一致性不顯著。
三、研究結(jié)果與數(shù)據(jù)分析
研究發(fā)現(xiàn),波特一致性系數(shù)P反映的是高考試題與課程標(biāo)準(zhǔn)在內(nèi)容主題及認(rèn)知水平之間的絕對差值,并沒有很好地說明試題考核的內(nèi)容與課程標(biāo)準(zhǔn)中的內(nèi)容標(biāo)準(zhǔn)相比是多還是少,也沒有說明試題考察的認(rèn)知水平與課程標(biāo)準(zhǔn)提出的認(rèn)知要求相比是高還是低。為了更為深入地比較分析,研究者通過直觀的圖形從內(nèi)容主題與認(rèn)知水平兩個方面進(jìn)行具體說明。
(一)高考試題與課程標(biāo)準(zhǔn)間的內(nèi)容主題比較
從圖1中可以看出,整體上,2015年江蘇省高考政治試題內(nèi)容主題強(qiáng)調(diào)“探索世界與追求真理”“思想方法與創(chuàng)新意識”這2個領(lǐng)域,而課程標(biāo)準(zhǔn)則強(qiáng)調(diào)“發(fā)展社會主義民主政治”“思想方法與創(chuàng)新意識”這2個領(lǐng)域。2015年江蘇省高考政治試題與課程標(biāo)準(zhǔn)在“當(dāng)代國際社會”“文化傳承與創(chuàng)新”“發(fā)展中國特色社會主義文化”這3個領(lǐng)域上比較一致。
我們還發(fā)現(xiàn),2015年江蘇省高考政治試題考察的內(nèi)容主題所占比例明顯超過課程標(biāo)準(zhǔn)內(nèi)容主題所占比例的領(lǐng)域有“發(fā)展社會主義市場經(jīng)濟(jì)”“公民的政治生活”“為人民服務(wù)的政府”“探索世界與追求真理”“思想方法與創(chuàng)新意識”“認(rèn)識社會與價值選擇”這6個領(lǐng)域。2015年江蘇省高考政治試題考察的內(nèi)容主題所占比例明顯低于課程標(biāo)準(zhǔn)內(nèi)容主題所占比例的領(lǐng)域有“生活與消費”“生產(chǎn)、勞動與經(jīng)營”“收入與分配”“發(fā)展社會主義民主政治”“文化與生活”“生活智慧與時代精神”這6個領(lǐng)域??傮w說明,2015年江蘇省高考政治試題在內(nèi)容主題分布上與課程標(biāo)準(zhǔn)的一致性程度不強(qiáng),且在部分領(lǐng)域存在著明顯的差異性。
(二)高考試題與課程標(biāo)準(zhǔn)間的認(rèn)知水平比較
從圖2中可以看出,2015年江蘇省高考政治試題的認(rèn)知水平強(qiáng)調(diào)“理解”,而課程標(biāo)準(zhǔn)的認(rèn)知水平則強(qiáng)調(diào)“了解”和“理解”。2015年江蘇省高考政治試題與課程標(biāo)準(zhǔn)在“應(yīng)用”這一認(rèn)知水平上比較一致。課程標(biāo)準(zhǔn)在“了解”這個認(rèn)知水平上所占比例最高,而2015年江蘇省高考政治試題在這一認(rèn)知水平上幾乎為0,但在“理解”這一認(rèn)知水平上遠(yuǎn)遠(yuǎn)超過了課程標(biāo)準(zhǔn)的要求。總體上看,2015年江蘇省高考政治試題與課程標(biāo)準(zhǔn)在認(rèn)知水平上的契合度不明顯,且高考試題考察的認(rèn)知水平有明顯的超標(biāo)趨勢,針對課程標(biāo)準(zhǔn)三維目標(biāo)中的過程與方法、情感態(tài)度與價值觀目標(biāo)的檢測不夠到位。
四、思考與討論
本次研究的目的不是要分辨高考政治試題質(zhì)量的好與壞,而是希望為新課程改革背景下的思想政治課教學(xué)與考試評價工作提供參考。研究結(jié)果顯示,2015年江蘇省高考政治試題與課程標(biāo)準(zhǔn)之間的一致性水平不顯著,表明在考試評價與課程標(biāo)準(zhǔn)保持一致,且在推動課程教學(xué)貫徹落實課程標(biāo)準(zhǔn)的理念和策略上還需多方面努力的。
(一)樹立課程標(biāo)準(zhǔn)意識,增強(qiáng)高考試題的科學(xué)性
研究結(jié)果顯示,2015年江蘇省高考政治試題在內(nèi)容主題分布上與課程標(biāo)準(zhǔn)一致性不夠,在部分領(lǐng)域存在明顯的差異性。眾所周知,考試評價是一線教師開展教學(xué)的“風(fēng)向標(biāo)”。一份高考試題中的內(nèi)容分布對教師教學(xué)工作的影響不僅會表現(xiàn)在高三的復(fù)習(xí)課,同時也會影響到高一、高二教學(xué)中重點的確定以及由此而產(chǎn)生的課時的劃分。如果高考試題在內(nèi)容主題分布比例上與課程標(biāo)準(zhǔn)偏離到一定程度,就會誤導(dǎo)一線教師,導(dǎo)致其在課堂教學(xué)中讓學(xué)生反復(fù)練習(xí)個別內(nèi)容主題,忽視其他內(nèi)容主題的學(xué)習(xí),不利于課程標(biāo)準(zhǔn)的貫徹落實。
此外,2015年江蘇省高考政治試題在認(rèn)知性學(xué)習(xí)目標(biāo)上,理解和應(yīng)用水平均超過課程標(biāo)準(zhǔn)的水平,尤其以理解水平最為明顯,這反映了2015年江蘇省高考政治試題在認(rèn)知水平上有向高處發(fā)展的趨勢。這勢必會導(dǎo)致一線教師在實際教學(xué)中會相應(yīng)地提高教學(xué)內(nèi)容的認(rèn)知水平,給學(xué)生的學(xué)習(xí)帶來不必要的負(fù)擔(dān)。實現(xiàn)學(xué)業(yè)評價與課程標(biāo)準(zhǔn)的一致,要求高考試題的命題者在試題的內(nèi)容選擇與認(rèn)知水平上要充分考慮課程標(biāo)準(zhǔn)的具體要求,強(qiáng)化執(zhí)行課程標(biāo)準(zhǔn)的意識,進(jìn)而通過高考試題的達(dá)標(biāo)準(zhǔn)性來引導(dǎo)一線教師真正實施基于課程標(biāo)準(zhǔn)的教學(xué)。
(二)明確考試評價功能,促進(jìn)三維目標(biāo)均衡發(fā)展
透過數(shù)據(jù),我們發(fā)現(xiàn)無論是課程標(biāo)準(zhǔn)還是2015年江蘇省高考政治試題在三種不同認(rèn)知水平的分布上較不平衡。在課程標(biāo)準(zhǔn)的認(rèn)知性學(xué)習(xí)目標(biāo)中,以了解水平和理解水平為主,而應(yīng)用水平較少。2015年江蘇省高考政治試題在認(rèn)知性學(xué)習(xí)目標(biāo)中,了解水平幾乎沒有,主要集中在理解水平,其次是應(yīng)用水平。兩者在應(yīng)用水平的要求上較低,對學(xué)生運用、分析、創(chuàng)造水平的考察較少,未能充分體現(xiàn)新課改的三維目標(biāo)。
高考通過紙筆測驗的方式進(jìn)行,檢查學(xué)生對知識掌握的情況,對較高認(rèn)知水平的檢測具有一定的局限性。新課改倡導(dǎo)發(fā)展性評價理念,強(qiáng)調(diào)終結(jié)性評價應(yīng)建立在形成性評價的基礎(chǔ)上,與形成性評價相結(jié)合,才能保證評價的真實性、準(zhǔn)確性與全面性。思想政治學(xué)科學(xué)業(yè)評價應(yīng)轉(zhuǎn)變紙筆測驗的單一評價方式,構(gòu)建多元評價機(jī)制,將高考成績與平時的社會實踐有機(jī)結(jié)合,并合理分配平時成績與高考成績的比例,全面考察學(xué)生的分析、創(chuàng)造和運用水平,促進(jìn)學(xué)生知識、能力及情感、態(tài)度與價值觀三維目標(biāo)的均衡發(fā)展。
(三)構(gòu)建一致性評價標(biāo)準(zhǔn),實現(xiàn)評價模式的本土化
本研究借助SEC模式,從內(nèi)容主題與認(rèn)知水平兩個維度,通過定量研究考察2015年江蘇省高考政治試題與課程標(biāo)準(zhǔn)之間的一致性,研究過程較為順利,研究結(jié)論也是可信的。國內(nèi)學(xué)者劉恩山[3]和王磊[4]的相關(guān)實證研究也證明了該模式的有效性。定量研究是現(xiàn)代科學(xué)的重要特征,此種研究模式為以后的國際比較乃至我國課程改革等研究提供了重要范式。而我國在試題分析的研究中恰恰欠缺更為有效的定量分析模型以及相應(yīng)的分析手段。國際上開發(fā)的一致性評價標(biāo)準(zhǔn)的成果和經(jīng)驗,為我國研究如何依據(jù)國家課程標(biāo)準(zhǔn)改進(jìn)學(xué)業(yè)評價提供了新的路徑。基于課程標(biāo)準(zhǔn)的學(xué)業(yè)評價,說明國家課程標(biāo)準(zhǔn)在教學(xué)活動中占有重要地位,課程標(biāo)準(zhǔn)不是一個口號意義上的概念,而是一個實質(zhì)意義上的評價工具。因此,學(xué)術(shù)界應(yīng)該積極進(jìn)行基于課程標(biāo)準(zhǔn)的學(xué)業(yè)評價模式的本土化研究,為檢測學(xué)業(yè)評價的有效性提供科學(xué)的方法與手段。endprint
基于課程標(biāo)準(zhǔn)的學(xué)業(yè)評價旨在落實教育領(lǐng)域的規(guī)則意識,也是我國“依法治國”理念在教育領(lǐng)域的具體表現(xiàn)。在呼喚基于課程標(biāo)準(zhǔn)的學(xué)業(yè)評價的今天,形成基于課程標(biāo)準(zhǔn)的學(xué)業(yè)評價的意識并不困難,讓基于課程標(biāo)準(zhǔn)的學(xué)業(yè)評價進(jìn)入決策層面也較為容易,但真正的要在實踐中落實基于課程標(biāo)準(zhǔn)的學(xué)業(yè)評價,就需要將課程標(biāo)準(zhǔn)置于課程體系的核心地位,真正發(fā)揮課程標(biāo)準(zhǔn)的綱領(lǐng)性指導(dǎo)作用,實現(xiàn)有“標(biāo)”可依、有“標(biāo)”必依、執(zhí)“標(biāo)”必嚴(yán)、違“標(biāo)”必糾。希望通過本研究,我們對高考試題與課程標(biāo)準(zhǔn)能有更加直觀和可信的認(rèn)識,樹立課標(biāo)意識,執(zhí)行課程標(biāo)準(zhǔn),推進(jìn)新課改革背景下的高中思想政治課教學(xué)和考試評價的有序、有信、有效、有度!
參考文獻(xiàn):
[1]中華人民共和國教育部.基礎(chǔ)教育課程改革綱要(試行)[DB/OL].http://www.moe.edu.cn/publicfiles/business/htmlfiles/moe/moe_309/200412/4672.html.
[2]Porter, A. C. Measuring the content of instruction: Uses in research and practice .Educational Researcher,2002,31(7):3-14.
[3]劉恩山,盧群,張穎之.2010年高考生物試題與課程標(biāo)準(zhǔn)的一致性分析[J].基礎(chǔ)教育課程,2010(9).
[4]王磊,黃瓊,劉東方.中考命題與化學(xué)課程標(biāo)準(zhǔn)的一致性研究[J].基礎(chǔ)教育課程,2010(3).
責(zé)任編輯:楊孝如
Research on Consistency between 2015 Jiangsu CEPE
and Curriculum Criterion: SEC Mode
PU Xiang & GONG He-fa
(School of Politics and Public Administration Suzhou University, Suzhou 215123, China)
Abstract: Consistency between academic assessment and curriculum criterion has always been the focus of teaching evaluation research. This author employs the mode of SEC by American scholar Porter to conduct quantitative research on the consistency between 2015 Jiangsu College Entrance Politics Examination (CEPE) and curriculum criterion, finding that they two lack consistency in content, and in some area there exists significant difference. To achieve the consistency between them, we should establish the awareness of curriculum criterion, clarify the function of exam evaluation, and construct consistent criterion of evaluation.
Keywords: College Entrance Examination; Politics; test; curriculum criterion; SEC modeendprint