在線教學(xué)是通過互聯(lián)網(wǎng)技術(shù)開展的教學(xué)活動,其主要特點是克服了傳統(tǒng)教學(xué)的時空局限,使得師生可以通過在線情境進行交互。在新冠疫情的沖擊下,師生被迫居家隔離,全球的大中小學(xué)不得不采用在線的方式保障教學(xué),在線教學(xué)從“幕后”走向“臺前”,有關(guān)在線教學(xué)評價的話題受到前所未有的關(guān)注。盡管隨著國內(nèi)疫情的逐漸好轉(zhuǎn),國內(nèi)研究者對在線教學(xué)評價的研究熱情開始降低,但在疫情常態(tài)化防控背景下,在線教學(xué)在提供個性化輔導(dǎo)和支持、提高學(xué)習(xí)體驗等方面仍然發(fā)揮著重要作用,對在線教學(xué)評價的探討仍有必要。國內(nèi)有關(guān)在線教學(xué)評價的研究起步較晚,雖然在新冠疫情期間熱度大增,但大部分研究同質(zhì)性高,缺少有深度、有內(nèi)涵的高質(zhì)量研究。國外在線教學(xué)評價研究起步較早,研究范圍較廣,內(nèi)容也更豐富,探討國外在線教學(xué)評價研究的熱點和研究趨勢對于我國進一步深化在線教學(xué)評價相關(guān)研究有著重要意義。本研究擬在對國外在線教學(xué)評價的相關(guān)文獻進行可視化分析的基礎(chǔ)上,結(jié)合對文獻的內(nèi)容分析,探討國外在線教學(xué)評價研究的現(xiàn)狀、熱點問題和前沿話題以及研究熱點的變遷趨勢,以期為在線教學(xué)領(lǐng)域的研究者和實踐者提供一定的借鑒。
一般來說,在線教學(xué)(Online Teaching)或在線學(xué)習(xí)(Online learning)指的是利用互聯(lián)網(wǎng)技術(shù)開展的教學(xué)活動。與之相近的概念還有混合學(xué)習(xí)、遠程教育、MOOC等,在一些在線教學(xué)評價研究中,這些概念?;煊?。所謂混合學(xué)習(xí)(Blended Learning)是指在物理環(huán)境下采用在線教學(xué)技術(shù)補充傳統(tǒng)教學(xué)的一系列教學(xué)活動。遠程教育(Distance Education)或遠程學(xué)習(xí)(Distance learning)是指通過廣播、電話、電視、互聯(lián)網(wǎng)等形式傳輸文字、音視頻等課程資源并借此實現(xiàn)師生非接觸的交互式教學(xué)活動。在線課程(Online Courses)是指在網(wǎng)絡(luò)平臺開設(shè)的課程,而大規(guī)模開放在線課程(Massive Open Online Course,簡稱MOOC)是近年來在線教學(xué)的重要發(fā)展模式,課程教師和學(xué)習(xí)者來自世界各地,通過某一個共同的主題聯(lián)系起來,這類課程通常對學(xué)習(xí)者無特別要求,但會通過固定的測試、討論、學(xué)習(xí)小組等展開課程,通過課程之后學(xué)生可獲得課程證書。本研究中所指在線教學(xué)指的是教師和學(xué)生之間非接觸的、利用互聯(lián)網(wǎng)等技術(shù)開展的在線教學(xué)活動。
與傳統(tǒng)教學(xué)評價類似,對在線教學(xué)活動的評價主要分為對在線教學(xué)背景、平臺、資源、實施過程等環(huán)節(jié)的評價;評價的對象主要包括教師、學(xué)生以及課程等;評價的主體主要有管理人員、教師和學(xué)生。隨著教學(xué)理論的不斷突破、評價技術(shù)的不斷發(fā)展,在線教學(xué)評價領(lǐng)域的研究者越來越傾向于采用質(zhì)性和量化相結(jié)合、過程與結(jié)果評價相結(jié)合、自我評價和同行評價相結(jié)合的多樣化評價方式,越來越注重對在線教學(xué)全過程的評價。但限于評價技術(shù)和條件所限,不少在線教學(xué)評價仍停留在表面。
本研究以Web of Science核心合集(Core Collection)數(shù)據(jù)庫為數(shù)據(jù)來源。Web of Science是科睿唯安(Clarivate Analytics,原湯森路透知識產(chǎn)權(quán)與科技事業(yè)部)開發(fā)的信息服務(wù)平臺,其中的核心合集數(shù)據(jù)庫收錄了18000多種世界權(quán)威的、高影響力的學(xué)術(shù)期刊,內(nèi)容涵蓋自然科學(xué)、工程技術(shù)、生物醫(yī)學(xué)、社會科學(xué)、藝術(shù)與人文等領(lǐng)域。相較于其他數(shù)據(jù)庫,Web of Science涵蓋了更全面翔實和權(quán)威的研究資料,是全球范圍內(nèi)被研究者普遍認可的文獻檢索系統(tǒng)。[1]為全面探討國外在線教學(xué)評價的前沿和熱點,本研究同時檢索了標題包含在線學(xué)習(xí)、遠程教育、在線課程和MOOC等關(guān)鍵詞的文獻。以“TI=(online teaching or online learning or distance education or online course or mooc)AND TI=(assessment or evaluation or quality or assurance)”為檢索條件,時間跨度設(shè)為2000—2020年,共檢索到文獻1136篇(截至2020年8月30日),選取類型為論文(article)和會議論文(proceedings paper)的文獻進行精煉,再由人工審查每篇文獻的主題內(nèi)容,最終保留1020篇有效文獻。
CiteSpace是由美國德雷塞爾大學(xué)(Drexel University)陳超美教授基于科學(xué)發(fā)展模式理論、引文分析方法等應(yīng)用Java語言開發(fā)的一款多元、動態(tài)、分時的信息可視化軟件。CiteSpace更新及時、使用方便,能夠處理WOS、CNKI、CSSCI等數(shù)據(jù)庫導(dǎo)出的引文記錄,結(jié)合對文獻的內(nèi)容分析能夠比較全面地反映相關(guān)領(lǐng)域的研究狀況,是近年來最具特色和影響力的信息可視化軟件。借助CiteSpace軟件的詞頻和共詞分析功能,能夠?qū)崿F(xiàn)對作者、機構(gòu)、國家/地區(qū)合作網(wǎng)絡(luò)的分析。通過對文獻的共現(xiàn)和共被引分析,能夠以可視化的手段呈現(xiàn)科學(xué)知識的結(jié)構(gòu)、規(guī)律和分布情況,并在此基礎(chǔ)上探尋該領(lǐng)域的研究基礎(chǔ)、前沿和熱點。[2]本研究采用CiteSpace5.6 R5軟件對檢索的文獻進行關(guān)鍵詞共現(xiàn)和文獻共被引分析,繪制知識圖譜對在線教學(xué)評價領(lǐng)域的研究前沿、研究熱點及變遷趨勢進行分析。
本研究結(jié)合Web of Science的文獻分析功能對2000—2020年間在線教學(xué)評價研究的發(fā)文和被引情況進行分析。從總發(fā)文量和被引量來看,國外對在線教學(xué)評價的關(guān)注總體呈上升趨勢,1020篇有效文獻的總被引頻次為6050次,平均每篇文獻被引5.93次,表明所選文獻質(zhì)量較為可靠,在該領(lǐng)域具有一定的影響力。從發(fā)文和被引情況具體分布(如圖1、圖2所示)來看,2000—2004年,相關(guān)研究發(fā)文較少,學(xué)者們對在線教學(xué)評價的關(guān)注度較低;2005—2014年,在陷入一小段停滯期后發(fā)文量不斷上升,被引量穩(wěn)步增加,表明學(xué)界對在線教學(xué)評價的關(guān)注度持續(xù)上升;2014年后相關(guān)研究發(fā)文量急劇上升、被引量大幅增加,表明研究者對在線教學(xué)的關(guān)注度急劇上升,在線教學(xué)評價成為了學(xué)界研究的熱點話題。
圖1 2000—2020年在線教學(xué)評價相關(guān)研究發(fā)文分布
圖2 2000—2020年在線教學(xué)評價相關(guān)研究被引情況分布
本研究利用CiteSpace的機構(gòu)共現(xiàn)和詞頻統(tǒng)計功能,結(jié)合Web of Science自帶的引文分析功能探討國外在線教學(xué)評價研究領(lǐng)域的機構(gòu)合作網(wǎng)絡(luò)分布情況。檢索所得1020篇文獻分別來自1116個研究機構(gòu),其中852個研究機構(gòu)只發(fā)文1篇,僅有264個機構(gòu)發(fā)文達到或超過2篇。由表1可知,發(fā)文量前三名的機構(gòu)分別是:英國開放大學(xué)(15篇)、賓夕法尼亞州立大學(xué)(11篇)以及荷蘭開放大學(xué)(8篇);被引量前三名的機構(gòu)分別是:英國開放大學(xué)(381次)、賓夕法尼亞州立大學(xué)(126次)、哈佛大學(xué)(120次)和加泰羅尼亞開放大學(xué)(120次);上述機構(gòu)在此研究領(lǐng)域具有非常重要的影響力。從機構(gòu)所在地分布來看,發(fā)文量排名前22位的機構(gòu)主要分布在美國、英國、荷蘭、澳大利亞、西班牙、印度尼西亞、加拿大、墨西哥,歐美國家是在線教學(xué)評價研究的主要陣地。CiteSpace機構(gòu)共現(xiàn)結(jié)果發(fā)現(xiàn),各研究機構(gòu)之間連線較少,分布較為零散,表明在線教學(xué)評價研究領(lǐng)域機構(gòu)間的合作較少,尚未形成緊密的機構(gòu)合作網(wǎng)絡(luò)。
表1 發(fā)文量排名前22位的機構(gòu)
本研究采用CiteSpace的作者共現(xiàn)功能對在線教學(xué)評價高產(chǎn)作者及分布情況進行分析,對發(fā)文量最多的前20位高產(chǎn)作者進行排名,詳見表2。結(jié)果發(fā)現(xiàn),印度尼西亞大學(xué)的哈利·布迪·桑托索(Harry Budi Santoso)教授以7篇論文高居榜首,阿爾及利亞提濟烏祖穆盧德·馬邁里大學(xué)的法里達·布瓦拉卜·達曼尼(Farida Bouarab-Dahmani)教授、加泰羅尼亞開放大學(xué)的桑蒂·卡瓦萊(Santi Caballe)教授緊隨其后,均發(fā)文5篇。根據(jù)普賴斯定律,核心作者發(fā)文量,其中Nmax表示該領(lǐng)域最高產(chǎn)作者的發(fā)文量。[3]若作者發(fā)文量大于M則可判斷其為該領(lǐng)域的核心作者。本研究中,最高產(chǎn)作者哈利·布迪·桑托索發(fā)文量為7篇,M≈2篇。發(fā)文量超過2篇的181位作者可看作是核心作者,占所有作者的6.36%,共發(fā)文412篇,占總論文量的40.38%,尚不足50%??梢?,國外在線教學(xué)評價領(lǐng)域尚未形成核心作者集群。但從H指數(shù)①和總被引頻次可以看出,西班牙加泰羅尼亞開放大學(xué)的桑蒂·卡瓦萊、加泰羅尼亞理工大學(xué)的法托斯·哈法(Fatos Xhafa)、英國開放大學(xué)的約翰·理查森(John T.E Richardson)和希臘派圖拉斯大學(xué)的米卡利斯·澤諾斯(Michalis Xenos)等人在此領(lǐng)域具有重要影響力,是國外在線教學(xué)評價領(lǐng)域的代表性學(xué)者。
表2 發(fā)文量最多的前20位高產(chǎn)作者
研究前沿是一組突現(xiàn)的動態(tài)概念和潛在的研究問題[4],往往通過文獻共引聚類的施引文獻的研究內(nèi)容來表征。研究前沿是在一定時間內(nèi),以突現(xiàn)文獻為知識基礎(chǔ)的一組文獻所探討的科學(xué)問題或?qū)n},必須在分析突現(xiàn)詞和突現(xiàn)文獻的基礎(chǔ)上,結(jié)合對施引文獻的分析,進行綜合判斷和探測。[5]為探討最近幾年在線教學(xué)評價研究的前沿話題,本研究選取發(fā)文年份為2018—2020年的259篇前沿文獻及其施引文獻進行文獻共被引分析②,共發(fā)現(xiàn)6篇高被引文獻,見表3。
圖3 在線教學(xué)評價研究前沿的文獻共被引圖譜(2018—2020年)③
表3 前6篇高被引文獻信息表
由上表可知,以上高被引文獻大都聚焦于MOOC評價這一話題,對MOOC的評價研究是近年來在線教學(xué)評價領(lǐng)域的前沿話題。
MOOC作為近年來最具活力的教育模式,最早可以追溯到史蒂芬·唐斯(Stephen Downes)和喬治·西蒙斯(George Siemens)在2008年開發(fā)的一門名為 “聯(lián)通主義和聯(lián)通的知識”(Connectivism and Connectivity Knowledge)的課程。MOOC資源豐富、覆蓋范圍廣泛、費用低廉、使用靈活,能將全世界范圍的學(xué)習(xí)者連接起來。隨著Coursera、OpenLearning、edX等 MOOC平臺的建立,MOOC運動在全球范圍內(nèi)迅速發(fā)展,對傳統(tǒng)教學(xué)模式造成了重大沖擊,并由此引發(fā)了學(xué)界對MOOC課程設(shè)計、課程實施以及課程評估的廣泛討論,對MOOC質(zhì)量的評價研究成為了在線教學(xué)評價領(lǐng)域的前沿和熱點話題。在Web of Science核心合集分別檢索以上6篇高被引文獻的施引文獻,根據(jù)對施引文獻的關(guān)鍵詞共現(xiàn)和內(nèi)容分析,本研究發(fā)現(xiàn),近年來國外在線教學(xué)評價的研究前沿主要集中在以下幾個方面。
1.MOOC評價的理論和技術(shù)研究
這一前沿的核心主題詞有:在線教學(xué)、在線學(xué)習(xí)、MOOC、技術(shù)接受模型、項目反應(yīng)理論、學(xué)習(xí)分析技術(shù)、計劃行為理論等。此類研究多為文獻綜述、元分析研究,主要探討MOOC評價的基礎(chǔ)性、理論性問題。比較常用的理論有技術(shù)接受模型(Technology Acceptance Model)、計劃行為理論(Theory of Planned Behavior)等。隨著大數(shù)據(jù)技術(shù)、學(xué)習(xí)分析技術(shù)、機器學(xué)習(xí)、人工智能技術(shù)等的不斷發(fā)展,如何將這些新技術(shù)應(yīng)用于在線教學(xué)評價領(lǐng)域成為研究者關(guān)心的前沿話題。
2.MOOC的質(zhì)量和有效性研究
這一前沿的核心主題詞有:質(zhì)量、滿意度、使用意愿、開放性、學(xué)業(yè)表現(xiàn)、注冊率、完成率、輟學(xué)率等。此類研究主要關(guān)注MOOC的有效性問題,常通過改編或自編量表對MOOC的結(jié)果進行評價,還有研究通過文獻研究、實驗研究等方法比較MOOC、混合教學(xué)和傳統(tǒng)教學(xué)的質(zhì)量和有效性。何塞·路易斯·馬丁·努涅斯(Jose Luis Martin Nunez)探討了將傳統(tǒng)課程轉(zhuǎn)為MOOC過程中對學(xué)生造成的積極影響以及風(fēng)險因素。[6]約瑟夫·杜阿爾特(Josep M.Duart)采用文獻研究法探討了33個研究提及的MOOC課程的質(zhì)量和有效性問題。[7]
3.MOOC質(zhì)量的影響因素研究
這一前沿的核心主題詞有:動機、自我調(diào)節(jié)、在線學(xué)習(xí)策略、興趣、交互等。此類研究主要關(guān)注影響MOOC質(zhì)量的因素或探討MOOC成功的關(guān)鍵因素,如李秋杰(Qiujie Li)探討了不同參與程度對學(xué)生學(xué)業(yè)表現(xiàn)的影響[8],雷內(nèi)·基齊爾切克(Rene F.Kizilcec)探討了自我調(diào)節(jié)策略對學(xué)生學(xué)習(xí)行為和目標達成情況的影響[9],艾莉森·利特爾約翰(Allison Littlejohn)探討了學(xué)習(xí)動機和自我調(diào)節(jié)對學(xué)習(xí)行為的影響。[10]
4.MOOC教學(xué)設(shè)計評價研究
這一前沿的核心主題詞有:情境、結(jié)構(gòu)化設(shè)計、小組參與、游戲化、學(xué)生中心、課程結(jié)構(gòu)、教學(xué)策略、學(xué)習(xí)社區(qū)等。教學(xué)設(shè)計的質(zhì)量是有效教學(xué)的重要指標和前提,是在線教學(xué)整體質(zhì)量和教學(xué)效果的關(guān)鍵組成部分。MOOC教學(xué)設(shè)計以學(xué)生中心為導(dǎo)向,強調(diào)學(xué)生的認知建構(gòu),鼓勵學(xué)生參與和師生交互,重視教學(xué)情境的創(chuàng)設(shè)。此類研究主要關(guān)注如何創(chuàng)建更加有效的在線教學(xué)課堂,如曼努埃拉·拉波索·里瓦斯(Manuela Raposo-Rivas)MOOC教學(xué)設(shè)計的五個關(guān)鍵領(lǐng)域:學(xué)習(xí)、活動和任務(wù)、手段和資源、交互性、評估。[11]
5.MOOC評價方式研究
這一前沿的核心主題詞有:反饋、個性化評估、學(xué)生參與、同伴評估、在線測試、行為分析、案例、形成性評估等。對于在線教學(xué)實踐者來說,采用何種方式進行評價,如何將課程內(nèi)容與評價方式相結(jié)合可能更加困擾。隨著MOOC的不斷發(fā)展,研究者更多地關(guān)注如何將同伴評價、形成性評價整合進MOOC評價中。MOOC開放、多元、參與的特點為學(xué)習(xí)者參與教學(xué)過程、參與課程互動和課程評價提供了豐富的機會,也為將同伴評價、形成性評價整合進MOOC評價中提供了重要條件。
研究熱點是在某一時間段內(nèi),有內(nèi)在聯(lián)系的、數(shù)量相對較多的一組論文所探討的科學(xué)問題或?qū)n}。[12]CiteSpace從數(shù)據(jù)集的標題、關(guān)鍵詞、系統(tǒng)補充關(guān)鍵詞以及摘要中提取名詞性術(shù)語。與關(guān)鍵詞相比,對主題詞的共現(xiàn)分析能更全面地反映某領(lǐng)域的研究主題,據(jù)此提取出的高頻主題詞也能反映相關(guān)研究的熱點話題。本研究將時間分區(qū)設(shè)置為1年,以標題、摘要、關(guān)鍵詞為主題詞來源,節(jié)點類型為主題詞,選取每個時間分區(qū)前50個節(jié)點進行分析并選擇尋徑算法對網(wǎng)絡(luò)進行修剪。圖4和表4分別展現(xiàn)了主題詞共現(xiàn)圖譜以及據(jù)此得出的30個高頻主題詞。
圖4 國外在線教學(xué)評價主題詞共現(xiàn)圖譜
表4 2000—2020年國外在線教學(xué)評價的30個高頻主題詞
根據(jù)主題詞共現(xiàn)圖譜和高頻詞排序表,結(jié)合對文獻的閱讀和梳理,發(fā)現(xiàn)2000—2020年間國外在線教學(xué)評價相關(guān)研究主要有在線教學(xué)、在線教學(xué)評價的概念及內(nèi)涵,在線教學(xué)環(huán)境與在線教學(xué)技術(shù)的評價,在線教學(xué)課程及教學(xué)過程評價、在線教學(xué)結(jié)果評價四個熱點主題。
1.在線教學(xué)、在線教學(xué)評價的概念及內(nèi)涵
這一主題包含的高頻主題詞有在線課程、遠程教育、慕課、在線學(xué)習(xí)、遠程學(xué)習(xí)、網(wǎng)上教學(xué)、在線教育等,可見學(xué)者們對在線教學(xué)的定義、內(nèi)涵和特點探討較多。盡管在線教學(xué)在過去十幾年中發(fā)展迅速,但學(xué)者們就在線教學(xué)的定義尚未達成共識。目前,學(xué)界比較認可的觀點認為,遠程教育是指因教師與學(xué)員在地理上的距離受限而采取的一系列教學(xué)活動的總稱[13],在線教學(xué)是指通過在線網(wǎng)絡(luò)和信息技術(shù)獲取學(xué)習(xí)經(jīng)驗的活動[14],而電子學(xué)習(xí)強調(diào)通過網(wǎng)絡(luò)、軟件以及信息技術(shù)實現(xiàn)的教學(xué)活動。[15]這些概念均具有通過信息網(wǎng)絡(luò)技術(shù)實現(xiàn)教學(xué)的意義。事實上,在許多研究中,在線教學(xué)、遠程教育、在線學(xué)習(xí)、在線課程等概念常?;煊?。在線教學(xué)的內(nèi)涵之一在于其技術(shù)性,通過信息技術(shù)實現(xiàn)跨距離、跨時空的教學(xué)活動,有助于促進教育資源的公平配置;另一方面在線教學(xué)還具有教育性,本質(zhì)上它仍是一種教育活動,技術(shù)只是作為促進教育的一種手段。因此,在研究和實踐過程中應(yīng)避免重技術(shù)而輕教育的傾向,以免影響在線教學(xué)的效果。
在線教學(xué)評價是指依照一定的標準和目標,通過質(zhì)性或量化的手段收集在線教學(xué)的各種信息并對在線教學(xué)的設(shè)計、實施、評估等環(huán)節(jié)進行價值判斷的過程。與傳統(tǒng)教學(xué)評價類似,在線教學(xué)評價的主體有教師、學(xué)生、管理人員等;根據(jù)評價的不同階段和目的,可以分為診斷性評價、形成性評價和終結(jié)性評價。對在線教學(xué)的評價既包括對在線教學(xué)項目的微觀評價,如對在線教學(xué)實施過程的評價,也可以包括對在線教學(xué)項目的宏觀評價,如對在線教學(xué)項目投入、過程、產(chǎn)出的全過程進行評價,根據(jù)不同的需要,在線教學(xué)評價的角度和內(nèi)容也各不相同。
2.在線教學(xué)環(huán)境和技術(shù)的評價
從網(wǎng)絡(luò)學(xué)習(xí)環(huán)境、通信技術(shù)、學(xué)習(xí)環(huán)境、網(wǎng)絡(luò)環(huán)境等主題詞可以看出,在線教學(xué)評價的重要議題是對在線教學(xué)環(huán)境和技術(shù)的評價。這一主題的相關(guān)研究主要聚焦于如何營造有利于促進在線教學(xué)的組織環(huán)境,包括技術(shù)環(huán)境和文化環(huán)境的營造。組織層面的評價主要包括對機構(gòu)戰(zhàn)略、在線教學(xué)規(guī)劃、機構(gòu)支持、人員配備、資金投入等指標的評價。對技術(shù)的評價主要表現(xiàn)在對技術(shù)基礎(chǔ)設(shè)施、在線教學(xué)平臺、界面設(shè)計、網(wǎng)絡(luò)連通性、平臺穩(wěn)定性、可獲得性等方面。如哈?!と贰ぐ~德(Hassan M Selim Ahmed)探討了教師特征、在線教學(xué)信息技術(shù)基礎(chǔ)設(shè)施(互聯(lián)網(wǎng)訪問的便利性、網(wǎng)絡(luò)可靠性、在線支持服務(wù))、組織和技術(shù)支持(圖書館服務(wù)的可靠性、技術(shù)支持團隊的態(tài)度、在線教學(xué)計劃支持、計算機技術(shù)支持)以及學(xué)習(xí)者接受和使用對在線教學(xué)的影響。[16]文森扎·貝尼尼奧(Vincenza Benigno)認為對在線教學(xué)課程的評價應(yīng)包括對學(xué)習(xí)環(huán)境(本地的、虛擬的、社會環(huán)境)和通信技術(shù)(可用性、在線合作的有效性)的評價。[17]維羅妮卡·瑟蒙德(Veronica A Thurmond)指出,環(huán)境變量(如評估的多樣性和與他人的感知互動)在很大程度上影響了在線教學(xué)的滿意度。[18]
3.在線教學(xué)課程及教學(xué)過程的評價
從學(xué)習(xí)過程、形成性評價、學(xué)生學(xué)習(xí)、學(xué)習(xí)活動、學(xué)習(xí)經(jīng)驗、教學(xué)質(zhì)量、課程內(nèi)容等高頻詞可以看出,對在線教學(xué)課程及教學(xué)過程的評價一直都是在線教學(xué)評價領(lǐng)域的熱點。對在線教學(xué)過程的評價中,評價者往往通過在線教學(xué)管理系統(tǒng)收集學(xué)生學(xué)習(xí)行為、偏好、動機等多方面的數(shù)據(jù),為學(xué)習(xí)分析提供重要條件和資源保證。與傳統(tǒng)教學(xué)的側(cè)重點有所不同,在線教學(xué)強調(diào)學(xué)生參與學(xué)習(xí)的重要性,重視合作學(xué)習(xí)和自我建構(gòu)學(xué)習(xí)的作用,認為師生之間的交互以及同伴之間的交流是在線教學(xué)必不可少的部分。因此,對在線教學(xué)過程的評價也多從師生交互、教學(xué)活動、同伴交流等方面展開。侯賽姆·薩姆里(Hosam Alsamarraie)等人的研究認為結(jié)構(gòu)化的內(nèi)容有助于增強在線教學(xué)動機、注意力和互動性,從而提高學(xué)生的思維能力,并影響他們的元認知活動并促進理解。[19]拉法特·喬治·薩德(Raafat George Saade)基于105名學(xué)生的樣本,通過探索性因子分析,確定了在線教學(xué)的六個關(guān)鍵要素:情感、學(xué)習(xí)者對在線學(xué)習(xí)的看法、感知的學(xué)習(xí)成果、態(tài)度、內(nèi)在動機、外部動機。[20]蒂埃里·沃瑞(Thierry Volery)采用問卷調(diào)查的方式測量了在線教學(xué)成功的關(guān)鍵要素,發(fā)現(xiàn)除了技術(shù)特征之外,教師的特征(教師對技術(shù)的態(tài)度、教學(xué)風(fēng)格、控制技術(shù))、學(xué)生特征(使用計算機的經(jīng)驗、自律水平、技術(shù)能力)與在線教學(xué)效果有重要相關(guān)。[21]此外,對教師和學(xué)生的在線教學(xué)支持也非常重要。黛安·斯?。―iane Sloan)等人在關(guān)于如何支持國際研究生的在線學(xué)習(xí)挑戰(zhàn)的研究中指出,為學(xué)生提供支持和反饋,以幫助他們理解內(nèi)容非常重要。[22]蘇坎拉亞·薩旺(Sukanlaya Sawang)等人發(fā)現(xiàn),高水平的支持可以彌補采用在線教學(xué)的低技術(shù)效率,并且在線教學(xué)特征可以調(diào)節(jié)學(xué)習(xí)者特征與學(xué)習(xí)意愿之間的關(guān)系。[23]
4.在線教學(xué)的結(jié)果評價
在線教學(xué)的結(jié)果評價主要包括學(xué)習(xí)結(jié)果、學(xué)生看法、質(zhì)量保證、學(xué)生成績、在線評估、評估過程、學(xué)生表現(xiàn)、數(shù)據(jù)分析、定性分析等高頻詞。這一主題主要關(guān)注在線教學(xué)產(chǎn)出的評價,包括對學(xué)生、教師和機構(gòu)的產(chǎn)出進行評價。其中,學(xué)生的產(chǎn)出既包括學(xué)業(yè)成績等專業(yè)產(chǎn)出,也包括學(xué)生滿意度、對在線教學(xué)的看法、學(xué)習(xí)動機、態(tài)度等通用產(chǎn)出;教師的產(chǎn)出則包括教師滿意度、教學(xué)績效、專業(yè)發(fā)展、組織承諾等指標;機構(gòu)產(chǎn)出則包括成本收益、投資回報率等指標。加布里?!てた评℅abriele Piccoli)認為,對在線教學(xué)有效性的評估應(yīng)包括表現(xiàn)(成就、回憶、任務(wù)時間)、自我效能、滿意度(對教學(xué)經(jīng)歷的滿意度、輟學(xué)率、不滿)三個方面。[24]弗朗西斯科·岡薩雷斯·戈麥斯(Francisco Gonzalez Gomez)調(diào)查了包括學(xué)生感知的目標和內(nèi)容、教學(xué)法、教學(xué)工具、教師在內(nèi)的滿意度要素,并探討了滿意度的性別差異。[25]多麗絲·波利格(Doris U Bolliger)開發(fā)了適用于在線教學(xué)背景下的教師滿意度工具,并探討了影響教師滿意度的學(xué)生因素、教師因素和學(xué)校因素。[26]阿納特·科恩(Anat Cohen)以經(jīng)濟學(xué)和教育學(xué)為視角,基于學(xué)生、教師和大學(xué)分析了高等教育機構(gòu)在線教學(xué)的成本收益。[27]對在線教學(xué)結(jié)果的評價方法既有定性的方法如觀察法、訪談法等,也有定量的方法如問卷法、數(shù)據(jù)分析法等。艾米·卡塔拉諾(Amy J Catalano)總結(jié)了包含滿意度、在線學(xué)習(xí)自我效能、在線學(xué)習(xí)行為、學(xué)生成就、保留率和減損等方面的常用量表。[28]
時區(qū)視圖側(cè)重于從時間維度上來表示知識演進,可以清晰地展示出文獻的更新和相互影響。[29]沿用上文的設(shè)置,本研究將所得圖譜以時區(qū)圖的形式展現(xiàn),結(jié)合發(fā)文量、被引量年度分布以及關(guān)鍵詞突現(xiàn)表,大致將2000—2020年間在線教學(xué)評價研究劃分成三個階段。
圖5 國外在線教學(xué)評價主題詞共現(xiàn)時區(qū)圖
2000—2008年:這一時期的突現(xiàn)主題詞有遠程教育、遠程學(xué)習(xí)、在線學(xué)習(xí)環(huán)境、在線學(xué)習(xí)、在線課程,高頻主題詞包括質(zhì)量保證、學(xué)習(xí)過程、學(xué)習(xí)管理系統(tǒng)、學(xué)生感知、評價方法、課程設(shè)計、評價過程等??梢姡@一階段主要以在線教學(xué)、在線教學(xué)評價的概念和內(nèi)涵研究為主,旨在對在線教學(xué)以及在線教學(xué)實施、評價的相關(guān)概念進行辨析。對在線教學(xué)的評價研究也以對在線教學(xué)環(huán)境和學(xué)習(xí)成果的評價為主,對在線教學(xué)過程的評價研究較少。
2009—2014年:這一時期的突現(xiàn)主題詞有高等教育、學(xué)習(xí)產(chǎn)出、學(xué)生表現(xiàn)、在線評價、形成性評價,高頻主題詞包括在線交互、學(xué)習(xí)體驗、在線調(diào)查、MOOC等。高等教育機構(gòu)一直都是在線教學(xué)的主要實施者,在推動在線教學(xué)評價研究方面發(fā)揮著重要作用。如何通過在線方式對學(xué)生的學(xué)習(xí)產(chǎn)出和學(xué)業(yè)表現(xiàn)進行準確評價,是這一時期的研究者關(guān)心的主要問題。這一時期的學(xué)者們也不再局限于采用單一的定量指標來評價在線教學(xué)的成效,更加重視對教學(xué)過程的評價,強調(diào)形成性評價在開展在線教學(xué)過程中的作用,致力于依托在線教學(xué)管理系統(tǒng)收集的學(xué)習(xí)行為數(shù)據(jù),結(jié)合訪談、觀察等定性研究方法對教學(xué)過程的交互活動、活動設(shè)計、學(xué)習(xí)體驗等進行全面評價。
2015年以來:這一時期的突現(xiàn)主題詞有機器學(xué)習(xí)和教師專業(yè)發(fā)展,主要高頻主題詞有課程內(nèi)容、控制組、質(zhì)性數(shù)據(jù)、即時反饋、課程設(shè)計、學(xué)習(xí)分析、半結(jié)構(gòu)化訪談、結(jié)構(gòu)方程模型等。研究者們采用實驗設(shè)計、準實驗設(shè)計,結(jié)合訪談、問卷、學(xué)習(xí)分析技術(shù)和統(tǒng)計分析等多種方法收集了在線學(xué)生表現(xiàn)豐富的數(shù)據(jù),力圖對在線教學(xué)質(zhì)量進行綜合全面的評價。這一時期在線教學(xué)經(jīng)歷了翻天覆地的變化,人工智能、大數(shù)據(jù)、虛擬現(xiàn)實等技術(shù)不斷興起,為在線教學(xué)提供了重要機遇和技術(shù)手段。人工智能(Artificial Intelligence)技術(shù)的主要目標在于讓機器能夠模擬執(zhí)行人腦的部分功能如感知、判斷、推理、思考等,根據(jù)應(yīng)用目的的不同又可分為語音識別、機器學(xué)習(xí)、教育機器人、專家系統(tǒng)技術(shù)等。機器學(xué)習(xí)(Machine Learning)是指通過大量的數(shù)據(jù)處理過程不斷完善機器的算法,據(jù)此發(fā)現(xiàn)數(shù)據(jù)的規(guī)律并加以利用的技術(shù)。將人工智能技術(shù)和機器學(xué)習(xí)技術(shù)融合進在線教學(xué)管理系統(tǒng),結(jié)合學(xué)習(xí)分析、數(shù)據(jù)挖掘等技術(shù)實現(xiàn)對學(xué)習(xí)數(shù)據(jù)的深度挖掘、分析、聚類等,能夠幫助管理者科學(xué)決策、合理分配教育資源;幫助教師反思教學(xué)方法,改進教學(xué)模式,優(yōu)化教學(xué)環(huán)境;為學(xué)習(xí)者提供個性化的智能輔導(dǎo)和支持,幫助學(xué)習(xí)者提高學(xué)習(xí)效率、提高學(xué)業(yè)成績。
此外,人工智能等技術(shù)的發(fā)展及其在教育領(lǐng)域的廣泛應(yīng)用前景也激發(fā)了研究者們關(guān)于“技術(shù)”和“教育”二者關(guān)系的思考。研究者在探討新技術(shù)在教育領(lǐng)域的適用性的同時也在反思在線教學(xué)的本質(zhì),更加關(guān)注在線教育生態(tài)系統(tǒng)的構(gòu)建。人工智能技術(shù)的飛速發(fā)展也引起了研究者對教師處境的思考。盡管人工智能技術(shù)能夠提高教師的工作效率,減輕教學(xué)工作者的負擔(dān),研究者們?nèi)匀徽J為教師的智慧才是人工智能時代教育成功的關(guān)鍵,技術(shù)僅是實現(xiàn)教育價值和目標的手段。不少研究者開始思考人工智能等新技術(shù)在促進教師專業(yè)發(fā)展、提升教師勝任力等方面的可能性,主張將在線教學(xué)與終身教育理念相結(jié)合,將教師的專業(yè)發(fā)展與在線教學(xué)相結(jié)合,把教師專業(yè)發(fā)展和對教師的支持看作是在線教學(xué)質(zhì)量的重要保證。
本研究借助CiteSpace軟件結(jié)合對文獻的梳理和內(nèi)容分析,對國外在線教學(xué)評價研究的核心機構(gòu)、作者、前沿和熱點等問題進行了探討,得出主要結(jié)論如下:
第一,21世紀以來國外對在線教學(xué)評價的關(guān)注呈波動上升趨勢,學(xué)者們對在線教學(xué)評價的關(guān)注度逐步上升。在線教學(xué)評價領(lǐng)域涌現(xiàn)了一批高產(chǎn)和高被引作者、機構(gòu),多分布于美國、英國、西班牙等地,但仍未形成核心作者集群和緊密的機構(gòu)合作網(wǎng)絡(luò)。
第二,隨著MOOC的快速發(fā)展,對MOOC的質(zhì)量評價成為研究者們關(guān)注的前沿話題。國外在線教學(xué)評價研究的前沿主要包括MOOC評價的理論和技術(shù)研究、MOOC質(zhì)量和有效性研究、MOOC質(zhì)量的影響因素研究、MOOC教學(xué)設(shè)計評價研究、MOOC評價方式研究等五個方面。
第三,國外在線教學(xué)評價研究的熱點主要包括在線教學(xué)和在線教學(xué)評價的概念及內(nèi)涵研究、在線教學(xué)環(huán)境和技術(shù)的評價研究、在線教學(xué)課程及教學(xué)過程評價研究、在線教學(xué)結(jié)果評價研究。隨著研究方法的發(fā)展和研究理論的突破,研究者們不斷重視質(zhì)性方法在在線教學(xué)評價中的作用,強調(diào)綜合采用量化和質(zhì)性數(shù)據(jù)對在線教學(xué)的全過程進行評價。
第四,從時間維度看,國外在線教學(xué)評價研究的熱點在進入21世紀的20年間不斷變遷,人工智能、機器學(xué)習(xí)和教師專業(yè)發(fā)展成為近年來的突現(xiàn)主題。
基于以上分析,為進一步深化我國在線教學(xué)評價研究,推動我國在線教學(xué)評價實踐的發(fā)展,本研究提出以下建議:
1.重視在線教學(xué)的作用,拓寬在線教學(xué)評價研究范圍
新冠疫情以前,對在線教學(xué)評價的討論主要集中在高等教育領(lǐng)域。疫情暴發(fā)后,在線教學(xué)在全球大中小學(xué)得以推廣,對基礎(chǔ)教育階段在線教學(xué)的關(guān)注也隨之增多。在我國進入疫情常態(tài)化防控階段后,在線教學(xué)在豐富學(xué)生學(xué)習(xí)體驗、提供個性化輔導(dǎo)和即時反饋等方面仍然發(fā)揮著重要作用,對在線教學(xué)尤其是基礎(chǔ)教育階段的在線教學(xué)評價的研究仍有必要。后疫情時代,研究者應(yīng)更多關(guān)注在線教學(xué)與傳統(tǒng)教學(xué)相融合,更多地思考在線教學(xué)在彌合傳統(tǒng)教學(xué)不足、提高整體教學(xué)質(zhì)量等方面的作用。
2.關(guān)注在線教學(xué)評價核心話題,深化研究層次
越來越多的臨床試驗對BT的可行性、安全性和療效進行了檢驗,但循證醫(yī)學(xué)證據(jù)推薦強度有限,部分學(xué)者對其仍存疑,因此還需要大規(guī)模的隨機臨床對照試驗和長期隨訪驗證。作為新興的治療技術(shù),國際上還缺乏公認的診療規(guī)范,存在一定的濫用、錯用。
由上文分析可知,對在線教學(xué)評價的理論研究、在線教學(xué)過程和產(chǎn)出的評價研究一直是在線教學(xué)評價的熱點話題。然而,國內(nèi)相關(guān)研究仍較多關(guān)注微觀教學(xué)層面,缺乏中觀和宏觀層面的深入研究,研究范圍較小,研究主題豐富但跟風(fēng)現(xiàn)象嚴重,大多浮于表象,理論性研究、基礎(chǔ)性研究深度不夠,研究結(jié)論千篇一律。研究者應(yīng)著眼于我國在線教學(xué)的實際,聚焦在線教學(xué)評價的關(guān)鍵問題(如在線評價基礎(chǔ)理論研究、過程和產(chǎn)出研究及新興的學(xué)習(xí)分析技術(shù)研究等),把握在線教學(xué)評價的特點,拓寬研究視角,開展跨學(xué)科合作,深化在線教學(xué)評價領(lǐng)域的研究層次。
3.聚焦在線教學(xué)評價的新理論、新技術(shù),緊跟教育變革的前沿話題
近年來,大數(shù)據(jù)、人工智能、機器學(xué)習(xí)等技術(shù)不斷發(fā)展,如何將人工智能等新技術(shù)融合進在線教學(xué)和在線教學(xué)評價過程越來越受到研究者的關(guān)注。除此之外,在線教學(xué)還出現(xiàn)了一些新形式,如私播課程(Small,private online courses)、個性化MOOC(Personalized MOOC)、分布式開放協(xié)作課程(Distributed Open Collaborative Course)等。這些新出現(xiàn)的在線教學(xué)形式更加追求學(xué)習(xí)和研究的自主性、內(nèi)容的個性化,強調(diào)在線教學(xué)對學(xué)生協(xié)作能力、問題解決能力的培養(yǎng),一定程度上體現(xiàn)了未來教育改革和發(fā)展的趨勢。未來研究者可就這些新形式及其評價開展深入研究,在探討中不斷厘清在線教學(xué)的“教育”本質(zhì),充分發(fā)揮在線教學(xué)的“教育性”。
4.轉(zhuǎn)變研究范式,豐富研究方法
通過對文獻的梳理,本研究發(fā)現(xiàn),隨著研究方法和理論的突破,越來越多的國外研究采用實驗設(shè)計、準實驗設(shè)計等,結(jié)合定量定性研究方法開展在線教學(xué)評價研究。大數(shù)據(jù)、人工智能等技術(shù)的迅速發(fā)展也為學(xué)習(xí)分析技術(shù)提供了重要機遇。而國內(nèi)仍以思辨研究為主,實證研究采用較多的仍是問卷調(diào)查和統(tǒng)計分析法,研究方法較為單一。所采用的量表也多改編自國外現(xiàn)有量表或已有教學(xué)評價量表在在線教學(xué)背景下的遷移,量表面臨著跨文化適應(yīng)性和信效度不高等問題。未來研究應(yīng)轉(zhuǎn)變研究范式,推進實證研究發(fā)展,注重研究數(shù)據(jù)收集方法的多樣化,提升研究的規(guī)范性。
5.鼓勵機構(gòu)開展國際科研合作,提高科研國際影響力
作者和機構(gòu)共現(xiàn)分析結(jié)果發(fā)現(xiàn),當下國外在線教學(xué)評價領(lǐng)域尚未形成核心作者集群,各研究機構(gòu)間的合作網(wǎng)絡(luò)尚不密切。近年來,我國在線教學(xué)評價領(lǐng)域的相關(guān)研究也不斷豐富,但同樣仍未形成密切的合作網(wǎng)絡(luò)和作者集群,在國際舞臺上的聲音仍然不大,仍處于合作的邊緣位置。為此,研究者應(yīng)樹立國際合作意識,緊跟國家戰(zhàn)略和教育對外開放戰(zhàn)略部署,通過多種形式積極開展國際科研合作,堅持“引進來”和“走出去”相結(jié)合,形成研究合力,提升我國在在線教學(xué)評價領(lǐng)域的國際影響力。
注釋
① H指數(shù)(H index)表示研究者在一段時間內(nèi)有H篇文章被至少引用了H次。
② 檢索日期為2020年9月1日。具體操作為:將所有施引文獻導(dǎo)入CiteSpace,時間設(shè)置為2018—2020,設(shè)置時間切片為1年,節(jié)點類型選擇被引文獻,提取前50個節(jié)點進行分析,選擇尋徑算法對圖譜進行修剪。
③ 節(jié)點的顏色由紫到紅表明該節(jié)點所代表的研究越來越新。