張俊飛+畢志升+吳小玲
摘 要:教學(xué)評價作為現(xiàn)代教育科學(xué)研究三大領(lǐng)域之一,對其研究熱點和主題分析十分必要。文章以中國知網(wǎng)數(shù)據(jù)庫2014-2016年核心期刊、CSSCI期刊收錄的840篇教學(xué)評價研究相關(guān)的學(xué)術(shù)論文為研究對象,利用可視化技術(shù),結(jié)合詞篇矩陣、共現(xiàn)矩陣、聚類分析、多尺度分析、社會網(wǎng)絡(luò)化分析等技術(shù)探究我國教學(xué)評價領(lǐng)域近3年研究現(xiàn)狀和發(fā)展趨勢。結(jié)果顯示,教學(xué)評價研究主要圍繞九個主題展開研究,當(dāng)前研究主要集中在教學(xué)模式改革、教學(xué)過程和要素、評價方式等;未來需要關(guān)注教學(xué)模式改革效果評價、有意義學(xué)習(xí)等領(lǐng)域。
關(guān)鍵詞:詞篇矩陣;共現(xiàn)矩陣;聚類分析;知識圖譜;社會網(wǎng)絡(luò)化分析
中圖分類號:G434 文獻標志碼:A 文章編號:1673-8454(2018)01-0017-05
引言
《國家中長期教育改革和發(fā)展規(guī)劃綱要(2010-2020年)》明確提出了“改革考試評價制度和學(xué)??己宿k法,建立科學(xué)的教育質(zhì)量評價體系,改進教育教學(xué)評價”的總體發(fā)展目標。教學(xué)評價被譽為現(xiàn)代教育科學(xué)研究的三大領(lǐng)域之一,其意義不言而喻。教育評價思想開始于我國古代教育,早在西周時代已經(jīng)形成比較完備的考試選拔制度,在歷代的封建王朝時代,“分科舉人”、“開科納士”等考試制度,正是教育評價思想的淵源。
本研究利用社會網(wǎng)絡(luò)化分析、多維尺度分析和聚類分析等多元分析方法,將“教學(xué)評價”領(lǐng)域內(nèi)的重要關(guān)鍵詞進行提取、分類、關(guān)系分析操作,從而總結(jié)歸納出該領(lǐng)域研究的熱點和主題,以進一步掌握“教學(xué)評價”研究路線以及未來研究方向,為后續(xù)科研提供參考。
本研究同樣秉承可視化分析的思路,結(jié)合多元分析方法。可視化分析是指將計算機進行科學(xué)計算的中間數(shù)據(jù)和結(jié)果數(shù)據(jù),以某種容易理解的視覺方式展示出來的方法。[1]可視化分析利用計算機數(shù)據(jù)表示、處理技術(shù)實現(xiàn)數(shù)據(jù)可視化,[2]使數(shù)據(jù)用圖表、曲線顯示,并能對數(shù)據(jù)的相互關(guān)系和模式進行分類、組合、可視化呈現(xiàn)。在大數(shù)據(jù)時代,數(shù)據(jù)可視化已經(jīng)逐漸成為主流。
一、數(shù)據(jù)來源與處理
1.數(shù)據(jù)來源
本研究以中國知網(wǎng)CNKI為搜索引擎,采用高級檢索功能,檢索2014-2016年在核心期刊、CSSCI期刊中發(fā)表的包含“教學(xué)評價”主題的文章,共847篇,過濾掉與主題無關(guān)的7篇文獻,共得到840篇樣本文獻,并以NoteFirst格式導(dǎo)出。
2.提取高頻關(guān)鍵詞
利用BICOMB2.0書目共現(xiàn)分析軟件,創(chuàng)建項目,選擇“cnki..
3.構(gòu)建詞篇矩陣、共現(xiàn)矩陣與相異矩陣
采用Ucinet6和SPSS22軟件對66個高頻關(guān)鍵詞做矩陣分析,首當(dāng)其沖的是準備分析數(shù)據(jù)——高頻關(guān)鍵詞的詞篇矩陣(見表2)、高頻關(guān)鍵詞的相異矩陣(見表3)、高頻關(guān)鍵詞的共現(xiàn)矩陣(見表4)。首先在BICOMB2.0軟件中設(shè)置閾值條件為5≤頻次≤148,生成詞篇矩陣和共現(xiàn)矩陣;利用SPSS22軟件對詞篇矩陣進行相似矩陣距離分析處理,設(shè)置度量標準為二分類Ochiai系數(shù),生成相似矩陣。為了消除由于關(guān)鍵詞共現(xiàn)次數(shù)差異所帶來的影響,相異矩陣由相似矩陣導(dǎo)出到Excel中,并利用數(shù)字“1”與相似矩陣中的相似值相減生成。[5]
二、研究熱點及其關(guān)系
為了獲取教學(xué)評價研究熱點及其關(guān)系,需要將先前統(tǒng)計出的高頻關(guān)鍵詞共現(xiàn)矩陣導(dǎo)入到Ucinet6軟件中,生成二維社會網(wǎng)絡(luò)關(guān)系圖譜。將共現(xiàn)矩陣導(dǎo)入到Ucinet6軟件中,對高頻關(guān)鍵詞進行節(jié)點中間度分析,如表5所示,并生成可視化高頻關(guān)鍵詞社會網(wǎng)絡(luò)關(guān)系圖譜,在圖譜的基礎(chǔ)上進行中間中心度(Betweenness)操作和K-cores分析操作,得圖1。
通過Ucinet6菜單項“網(wǎng)絡(luò)-中心度-Freeman中間度-節(jié)點中間度”操作統(tǒng)計節(jié)點中間度。從表5中可以看出,教學(xué)評價主要圍繞評價體系、教學(xué)模式、教學(xué)改革、實踐教學(xué)、課堂教學(xué)、教學(xué)質(zhì)量等主題展開研究的。在社會網(wǎng)路關(guān)系圖譜中可以看出,通過中間中心度和K-cores分析,各個節(jié)點在網(wǎng)絡(luò)中作用大小有不同大小顯示和顏色變化。節(jié)點正方形大小標識占據(jù)網(wǎng)絡(luò)核心位置,紅色表示該領(lǐng)域的研究熱點,其他研究基本都是圍繞這些熱點主題展開的。在社會網(wǎng)絡(luò)關(guān)系圖譜中,除了可以看出研究的熱點,還可以通過熱點間連線的粗細和緊密程度,說明熱點研究的成熟度。除了核心關(guān)鍵詞外,其他節(jié)點聯(lián)系較為松散,說明沒有形成明顯的研究主題。
三、主流研究領(lǐng)域結(jié)構(gòu)及其關(guān)系
1.高頻關(guān)鍵詞聚類分析
關(guān)鍵詞聚類分析的原理是以關(guān)鍵詞兩兩在同一篇文章中出現(xiàn)的頻率(共詞)為分析對象,利用聚類的統(tǒng)計學(xué)方法,把關(guān)聯(lián)密切的關(guān)鍵詞聚集在一起形成類團。[6]在SPSS22中,把詞篇矩陣導(dǎo)入,進行系統(tǒng)聚類分析,聚類方法采用組之間的鏈接,以二分類Ochiai系數(shù)為測量標準,得到圖2所示的主題譜系圖。聚類結(jié)果顯示,教學(xué)評價領(lǐng)域的研究熱點主要集中在九類主題——教學(xué)評價指標、教學(xué)評價方式、教學(xué)模式改革、教學(xué)評價體系、學(xué)生評價、教學(xué)評價的意義、課程評價、教師評價、教學(xué)過程與要素。
種類一涉及教學(xué)評價指標的設(shè)計。高校開設(shè)科目眾多,課程性質(zhì)多樣,如實驗課、雙語課、討論課、體育課、見習(xí)課等,不能采用單一教師評價指標全面覆蓋所有教師。另外評價對象除了教師以外,還有學(xué)生和課程等教學(xué)過程要素,應(yīng)該針對學(xué)生和課程根據(jù)不同的標準提出不同的評價指標。只有建立多維度的教學(xué)評價指標體系才能符合教學(xué)情況,才能更具有針對性。魏翼飛[7]等通過研究大學(xué)生評教心理因素,設(shè)計了分階段的教學(xué)質(zhì)量評價指標,提出多元評價方式和以教學(xué)質(zhì)量綜合指數(shù)為標準的評教手段。
種類二是評價方式。隨著信息化的發(fā)展,教學(xué)評價方式呈現(xiàn)多樣化趨勢。韋文榮[8]等結(jié)合移動學(xué)習(xí)的特征對思政課進行教學(xué)改革,構(gòu)建基于移動學(xué)習(xí)的評價方式。徐鎮(zhèn)凱[9]等綜合應(yīng)用大數(shù)據(jù)多層變權(quán)云計算方法優(yōu)化教學(xué)質(zhì)量評價體系機制。信息化評價軟件的出現(xiàn)促進了評價方式的革新,學(xué)生群體作為教學(xué)評價的主體,從自身實踐經(jīng)驗出發(fā)帶有很強的主觀性,因此需要信息化技術(shù)應(yīng)用到評價中對數(shù)據(jù)清洗,剔除無效數(shù)據(jù)。
種類三是教學(xué)模式改革。信息化的發(fā)展,促進了網(wǎng)絡(luò)課程的開設(shè),“微課”、“慕課”、“CDIO”、“移動學(xué)習(xí)”等教學(xué)新名詞井噴出現(xiàn)。王冠軍[10]等基于翻轉(zhuǎn)課堂與MOOC的嵌入式軟件工程實踐教學(xué)促進了學(xué)生對理論知識的掌握與理解。
種類四是評價體系。教學(xué)評價體系研究近年來日益豐富。從總體上分析,主要研究內(nèi)容包括兩部分:①多視角研究教學(xué)體系的結(jié)構(gòu),包括教學(xué)課程設(shè)置、教學(xué)模式、人才培養(yǎng)等;②教學(xué)質(zhì)量監(jiān)控與評價體系,包括相關(guān)軟硬件的設(shè)計、開發(fā)與使用,師資保障以及制度建設(shè)。這些對高校教學(xué)發(fā)展、人才培養(yǎng)等都有重要指導(dǎo)和促進作用。
種類五是學(xué)生評價。建構(gòu)主義學(xué)習(xí)觀認為:學(xué)習(xí)是學(xué)習(xí)者利用已有知識經(jīng)驗了解構(gòu)建新知識的過程。當(dāng)前,對學(xué)生的評價主要是改善學(xué)生的學(xué)習(xí)和甄別學(xué)生學(xué)習(xí)水平。通過學(xué)生評價數(shù)據(jù),教師可以了解教學(xué)得失從而改進教學(xué)方法,同時也可以及時了解學(xué)生學(xué)習(xí)和身心發(fā)展?fàn)顩r,方便給予引導(dǎo)和幫助。
種類六是教學(xué)評價意義。教學(xué)評價作為一個獨立的研究領(lǐng)域始于20世紀初,其發(fā)展經(jīng)歷了四個時期,由最初的測量、測驗評價階段,到是否達到教學(xué)目標描述時期,再到確定評價是價值判斷、具有過程性的判斷時期,直到最終認為評價是共同建構(gòu)的成熟期。教學(xué)評價反饋被視為評價者和被評價者“協(xié)商”進行的共同心理建設(shè)過程。學(xué)生評價,是授課教師對學(xué)生學(xué)習(xí)的一個反饋,讓學(xué)生獲得自己的學(xué)習(xí)水平層次,知曉在學(xué)習(xí)中取得的進步和存在的不足,有益于學(xué)生學(xué)習(xí)及成長。教師評價的兩大基本目的,就是保證教學(xué)質(zhì)量和推動教師的專業(yè)發(fā)展,[11]使教師在完成業(yè)績目標的同時也成為實現(xiàn)自我發(fā)展及完善的過程。[12]課程評價的主體是學(xué)生,真實地反映課程開設(shè)情況,及時反映給教學(xué)管理者,為教學(xué)管理者的科學(xué)決策及工作方針的制訂提供依據(jù)。簡言之,教學(xué)評價反饋具有教學(xué)診斷、激勵、調(diào)控功能。
種類七是課程評價。課程評價是事實與價值判斷的合體,是課程價值的發(fā)現(xiàn)和創(chuàng)造。[13]課程的發(fā)展是伴隨著時代的要求,對課程的評價更能體現(xiàn)課程是否符合現(xiàn)實,是否促進學(xué)生對科學(xué)文化的掌握。楊燁[14]依據(jù)美國“概念體育”課程理論,構(gòu)建了基于體育生活方式的學(xué)校體育課程,使學(xué)生形成科學(xué)、健康的體育生活方式,掌握熟練的運動技能和知識。
種類八是教師評價。教育大計,教師為本,《關(guān)于深化教育改革全面推進素質(zhì)教育的決定》要求教師評價機制作為一項全面推進素質(zhì)教育的重要措施。教師評價研究是建立教師管理制度的重要方面和首要環(huán)節(jié),教師對自身的教育活動進行自我評價,實際上是一個反思、修正的過程,可以促進教師的專業(yè)成長。
種類九是教學(xué)過程與要素。教學(xué)過程是學(xué)生認知身心發(fā)展的過程,在教學(xué)過程中,教師按照教學(xué)計劃引導(dǎo)學(xué)生進行有意義的認知活動,學(xué)生自覺調(diào)整自己的認知結(jié)構(gòu),提高自己的智力、體力、品德等方面。對教學(xué)過程的研究是對教學(xué)本質(zhì)的研究、對教學(xué)更深入的認識。教學(xué)基本要素有多種研究說法,如三要素說、四要素說、五要素說、六要素說、七要素說和三三構(gòu)成說等。無論是哪種說法教學(xué)要素就是在教學(xué)過程中對教學(xué)產(chǎn)生影響的因子,對因子的研究有助于教學(xué)的順利開展。
2.高頻關(guān)鍵詞知識圖譜分析
知識圖譜主要用于科學(xué)文獻中知識發(fā)現(xiàn),用以揭示領(lǐng)域知識結(jié)構(gòu)和領(lǐng)域的研究重點。[15]多維尺度分析生成的知識圖譜是一個二維坐標圖,其中橫坐標表示某個研究領(lǐng)域的向心度,描述了該領(lǐng)域在整個領(lǐng)域中的地位,值越大說明該研究領(lǐng)域越重要;縱坐標表示某個領(lǐng)域研究的密度,衡量該領(lǐng)域中內(nèi)部知識研究的聯(lián)系強度,值越大表示該領(lǐng)域研究的框架結(jié)構(gòu)越完整,該領(lǐng)域研究現(xiàn)狀很成熟前景良好。圖中的圓點代表高頻關(guān)鍵詞在知識圖譜中所處的位置。各個領(lǐng)域的不同位置在知識圖譜中表示不同的含義。第一象限包含的高頻詞組具有較高的向心度和緊密的密度,說明這些詞組代表的研究領(lǐng)域是整個領(lǐng)域的核心地位,并且研究的層次結(jié)構(gòu)完善。第二象限關(guān)鍵詞組的向心度低但密度緊密,這說明其代表的研究領(lǐng)域雖然不占據(jù)整個領(lǐng)域的重要地位,但是其具有較完整的框架結(jié)構(gòu)、系統(tǒng)的體系。第三象限關(guān)鍵詞組具有較低的向心度和密度,這說明其代表的研究領(lǐng)域在整個領(lǐng)域的邊緣,且之間關(guān)聯(lián)疏松,結(jié)構(gòu)不完整、不系統(tǒng)。第四象限關(guān)鍵詞組的向心度高但是密度低,這說明其代表的研究領(lǐng)域在整個領(lǐng)域中還很重要,但是內(nèi)部研究不系統(tǒng),結(jié)構(gòu)松散。
知識圖譜由SPSS22ALSCAL多維尺度分析生成。將先前準備的高頻關(guān)鍵詞相異矩陣輸入到SPSS22軟件中,以區(qū)間為測量級別并設(shè)置Eudidean距離為度量模型,輸出數(shù)據(jù)矩陣,得到熱點知識圖譜如圖3所示。
第一象限呈現(xiàn)大部分種類一、三、九高頻關(guān)鍵詞,這說明在教學(xué)評價領(lǐng)域評價指標、教學(xué)模式、教學(xué)過程與要素在該領(lǐng)域中處于研究重要地位,并且研究趨于完整成熟。但是,在第四象限還有部分種類三、九部分高頻關(guān)鍵詞,如“翻轉(zhuǎn)課堂”、“學(xué)習(xí)過程”等,這說明種類三、九還有些領(lǐng)域雖然具有研究價值,但是還沒有形成完整體系。第二象限呈現(xiàn)大部分種類二、四、六、八高頻關(guān)鍵詞,這說明教學(xué)評價方式、評價體系、評價意義、教師評價,雖然研究得比較系統(tǒng)化,研究的層次很完善,但是研究的熱度處于該領(lǐng)域的邊緣。第三象限呈現(xiàn)大部分種類五、七高頻關(guān)鍵詞,這說明學(xué)生評價、課程評價兩個領(lǐng)域研究熱度不夠、處于該領(lǐng)域邊緣,并且研究的框架結(jié)構(gòu)也不完善,是個比較薄弱的環(huán)節(jié)。endprint
四、結(jié)論與反思
教學(xué)評價作為學(xué)校教育活動體系中不可缺少的組成部分,對優(yōu)化教育管理、提高教育質(zhì)量等具有重要的作用。教學(xué)評價是教學(xué)活動的重要因素之一,是修改和完善教學(xué)的基礎(chǔ)。在教學(xué)活動實施過程中,評價活動也始終貫穿其中。本研究對我國教學(xué)評價的未來發(fā)展提出以下幾個意見,供其他學(xué)者參考。
1.評價主體、客體要全
只對一個或者幾個教學(xué)要素進行評價,必將導(dǎo)致評價指向偏離,評價結(jié)果價值降低。評價主體必須包含如下方面:①教學(xué)督導(dǎo)、領(lǐng)導(dǎo)。一般由在職的資深教授組成,旨在利用他們豐富的教學(xué)經(jīng)驗,發(fā)現(xiàn)課堂教學(xué)中的問題,規(guī)范教學(xué)秩序,監(jiān)督教學(xué)行為,并對授課教師提供必要的建議和引導(dǎo),提升他們的教學(xué)能力。②學(xué)生。依據(jù)自身的聽課感受及其認知進行主觀價值判斷。③教師。教師參與評價的形式應(yīng)是教師在日常工作中對自身工作持續(xù)不斷的反思、改進的記錄。
弗·鮑良克[16]認為:“教師、學(xué)生、教學(xué)內(nèi)容是教學(xué)的三個基本要素,它被稱為教學(xué)論的三角形。”劉克蘭[17]認為:“教學(xué)過程是教師的教和學(xué)生的學(xué)以教材為中介的共同活動過程。”本研究堅持教學(xué)過程三要素觀點,教學(xué)評價應(yīng)該圍繞對學(xué)生評價、對教師評價、對課程評價三個維度,來詮釋教學(xué)質(zhì)量評價。然現(xiàn)代教學(xué)評價對象更多的是教師,僅從教師角度去評價教學(xué)無疑管中窺豹。學(xué)生、教師、課程作為教學(xué)活動三要素,對教學(xué)效果都有著重要的影響,都應(yīng)成為被評價的客體。
2.多種評價方式
形成性評價強調(diào)教學(xué)過程,使教學(xué)成為一個自我糾正系統(tǒng);總結(jié)性評價強調(diào)績效責(zé)任,檢驗教學(xué)目標達標程度;發(fā)展性評價實現(xiàn)評價者和評價對象共同商定發(fā)展目標,以促進被評價者不斷地發(fā)展。當(dāng)前,教學(xué)模式的多種化、教學(xué)方法的多樣化都需要多種評價方式并存,更好地對教學(xué)過程、效果進行評估與監(jiān)控。
3.評價指標要具有信度和效度
信度和效度是教育評價指標體系實施的前提條件,是衡量教育評價指標體系構(gòu)建質(zhì)量的重要尺度。信度是指評價指標要貼合實際、能評出真實情況;效度指評價指標的準確性和代表性。針對不同的評價對象,要設(shè)計不同的評價指標體系,體現(xiàn)評價指標的多維化特性。如對教師的評價指標可以按照課程性質(zhì),設(shè)置不同的評價標準。
4.評價數(shù)據(jù)處理要具有科學(xué)性
按照數(shù)據(jù)類型,評價數(shù)據(jù)可以分為量化數(shù)據(jù)和質(zhì)性數(shù)據(jù)。針對兩種類型數(shù)據(jù)可采取兩種方法:①教育評價信息的定量分析評判法,如加權(quán)平均法、模糊綜合評判法、集體綜合評價法等。②教育評價信息的定性分析描述法,如等級評價法、評語鑒定法、寫實分析法等。隨著信息化技術(shù)的發(fā)展,數(shù)據(jù)可視化也逐漸成為一種成熟的科學(xué)處理方法,增強了數(shù)據(jù)的可讀性。
參考文獻:
[1]張家華,鄒琴,祝智庭.國內(nèi)近五年學(xué)習(xí)分析研究現(xiàn)狀的可視化綜述[J].浙江師范大學(xué)學(xué)報(社會科學(xué)版),2017(1):117-124.
[2]高玥.大數(shù)據(jù)時代背景下的數(shù)據(jù)可視化概念研究[J].電子技術(shù)與軟件工程,2014(19):216.
[3]王佑鎂,陳慧斌.近十年我國電子書包研究熱點與發(fā)展趨勢——基于共詞矩陣的知識圖譜分析[J].中國電化教育,2014(5):4-10.
[4]梁樂明,曹俏俏,張寶輝.微課程設(shè)計模式研究——基于國內(nèi)外微課程的對比分析[J].開放教育研究,2013(1):65-73.
[5]郭文斌,方俊明.關(guān)鍵詞共詞分析法:高等教育研究的新方法[J].高教探索,2015(9):15-21,26.
[6]王敏,郭文斌.我國近十年情緒調(diào)節(jié)研究熱點知識圖譜[J].心理研究,2011(5):56-59.
[7]魏翼飛,王鐵軍.教學(xué)質(zhì)量評價心理因素研究與評價體系設(shè)計[J].北京郵電大學(xué)學(xué)報(社會科學(xué)版),2016(6):103-110.
[8]韋文榮,黃振宣.基于移動學(xué)習(xí)的思政課學(xué)習(xí)效果評價體系[J].教育與職業(yè),2016(24):101-103.
[9]徐鎮(zhèn)凱,溫勇兵,魏博文,谷明晗.基于大數(shù)據(jù)多層變權(quán)云計算的高校工科教師授課質(zhì)量綜合評價[J].現(xiàn)代教育管理,2016(9):93-96.
[10]王冠軍,周勇,江海峰,趙瑩,李向群.基于翻轉(zhuǎn)課堂與MOOC的嵌入式軟件工程實踐教學(xué)研究[J].實驗技術(shù)與管理,2016(4):176-178,185.
[11]唐善梅,裴育.美國教師評價研究對我國高校教師評價制度的啟示[J].繼續(xù)教育,2010(6):127-129.
[12]朱志良.建立發(fā)展性教師評價體系芻議[J].高等工程教育研究,2005(6):38-41.
[13]蔣雅俊.課程評價:課程價值的創(chuàng)造與實現(xiàn)[J].華南師范大學(xué)學(xué)報(社會科學(xué)版), 2014(3):63-68,162.
[14]楊燁.基于體育生活方式的學(xué)校體育課程評價標準[J].上海體育學(xué)院學(xué)報,2014(2): 74-77.
[15]任紅娟,張志強.基于文獻計量的科學(xué)知識圖譜發(fā)展研究[J].情報雜志,2009(12):86-90.
[16]Bacic, B..Computer at the university: opportunities for tailoring automated marking and digital feedback, F,2003[C].IEEE.
[17]劉克蘭.現(xiàn)代教學(xué)論[M].重慶:西南師范大學(xué)出版社,1998:41-44.
(編輯:王天鵬)endprint