鄧祖祿　李佳

摘要：在線開放課程已成為學(xué)習(xí)者知識(shí)獲取、技能提升和終身學(xué)習(xí)的重要途徑，但現(xiàn)有在線開放課程學(xué)習(xí)評(píng)價(jià)存在學(xué)習(xí)起點(diǎn)評(píng)價(jià)不精準(zhǔn)、過程評(píng)價(jià)不全面、評(píng)價(jià)結(jié)果的解釋性不足等困境?？茖W(xué)合理的學(xué)習(xí)評(píng)價(jià)能激發(fā)學(xué)習(xí)者的主動(dòng)性和積極性，提高學(xué)習(xí)效能。本研究從混合教學(xué)結(jié)構(gòu)流程的視角，將學(xué)習(xí)評(píng)價(jià)有機(jī)融入學(xué)習(xí)過程，構(gòu)建了課前導(dǎo)學(xué)、課中研學(xué)、課后拓學(xué)評(píng)價(jià)框架，并應(yīng)用于教學(xué)實(shí)踐。研究結(jié)果表明：投入度高的學(xué)習(xí)者其學(xué)習(xí)成績(jī)較好；發(fā)回帖越活躍的學(xué)習(xí)者其學(xué)習(xí)成績(jī)并不一定很好；教師在混合教學(xué)過程中科學(xué)地進(jìn)行教學(xué)組織、調(diào)控及干預(yù)，對(duì)提高學(xué)生學(xué)習(xí)質(zhì)量具有重要的保障作用。

關(guān)鍵詞：在線開放課程；混合學(xué)習(xí)；數(shù)據(jù)驅(qū)動(dòng)；評(píng)價(jià)設(shè)計(jì)

中圖分類號(hào)：G712? ? 文獻(xiàn)標(biāo)識(shí)碼：A? ? 文章編號(hào)：1672-5727（2023）07-0078-06

2020年10月，中共中央、國務(wù)院發(fā)布的《深化新時(shí)代教育評(píng)價(jià)改革總體方案》對(duì)結(jié)果評(píng)價(jià)、過程評(píng)價(jià)、增值評(píng)價(jià)和綜合評(píng)價(jià)改革做了詳細(xì)部署，并要求利用信息技術(shù)，深度挖掘分析學(xué)習(xí)過程數(shù)據(jù)和學(xué)習(xí)結(jié)果數(shù)據(jù)，探索建立個(gè)性化、精準(zhǔn)化的學(xué)習(xí)評(píng)價(jià)方式[1]。截止到2022年3月，我國在線開放課程數(shù)量和用戶數(shù)量都居世界第一位[2]。在線開放課程因其支持多種教學(xué)應(yīng)用場(chǎng)景、教學(xué)方式靈活、突破時(shí)空限制、能滿足不同學(xué)習(xí)群體需求等優(yōu)勢(shì)備受學(xué)習(xí)者、教師們的青睞，為學(xué)習(xí)者在知識(shí)獲取、技能提升和終身學(xué)習(xí)等方面提供了有效路徑。同時(shí)，由于受在線開放課程師生之間的時(shí)空分離、淺層教學(xué)互動(dòng)、學(xué)習(xí)動(dòng)機(jī)差異較大等因素影響，出現(xiàn)在線開放課程學(xué)習(xí)體驗(yàn)不佳、學(xué)習(xí)質(zhì)量不高等問題。鑒于此，本研究從在線開放課程中混合教學(xué)過程與學(xué)習(xí)評(píng)價(jià)相融合的視角，對(duì)在線開放課程學(xué)習(xí)質(zhì)量進(jìn)行評(píng)價(jià)研究，以提高學(xué)習(xí)效能。

一、在線開放課程學(xué)習(xí)評(píng)價(jià)的困境

通過中國知網(wǎng)和實(shí)踐調(diào)研發(fā)現(xiàn)，現(xiàn)有在線開放課程學(xué)習(xí)質(zhì)量評(píng)價(jià)存在不足。具體體現(xiàn)在：一是學(xué)習(xí)起點(diǎn)評(píng)價(jià)（學(xué)情分析）方面，因課前學(xué)習(xí)行為數(shù)據(jù)采集片面、部分?jǐn)?shù)據(jù)缺失，同時(shí)在數(shù)據(jù)分析上多倚重教師的經(jīng)驗(yàn)判斷和簡(jiǎn)單的統(tǒng)計(jì)對(duì)比，導(dǎo)致學(xué)習(xí)起點(diǎn)評(píng)價(jià)（學(xué)情分析）不能精準(zhǔn)識(shí)別學(xué)習(xí)者的認(rèn)知基礎(chǔ)、認(rèn)識(shí)能力和學(xué)習(xí)偏好；二是學(xué)習(xí)過程評(píng)價(jià)方面，由于不能采集學(xué)習(xí)過程全樣本數(shù)據(jù)，數(shù)據(jù)處理與分析難以深入，沒有采取即時(shí)監(jiān)測(cè)與精準(zhǔn)反饋的有效措施，導(dǎo)致無法診斷學(xué)習(xí)狀態(tài)與學(xué)習(xí)目標(biāo)之間的差距；三是學(xué)習(xí)結(jié)果評(píng)價(jià)方面，過于強(qiáng)調(diào)對(duì)學(xué)生過去學(xué)習(xí)的總結(jié)并簡(jiǎn)單地賦予成績(jī)等級(jí)，缺乏對(duì)等級(jí)與位置的深入分析、深度解釋，難以發(fā)現(xiàn)教與學(xué)中存在的問題，難以實(shí)現(xiàn)“教學(xué)評(píng)一體化”；四是增值評(píng)價(jià)方面，評(píng)價(jià)指標(biāo)設(shè)置不合理，簡(jiǎn)單粗糙地把幾次考試分?jǐn)?shù)的增值作為增值評(píng)價(jià)指標(biāo)，而忽略了學(xué)習(xí)者在受教育過程中以及在獨(dú)立學(xué)習(xí)過程中的表現(xiàn)，忽略了對(duì)學(xué)習(xí)者的品德、藝術(shù)審美、綜合能力提升等方面的考察。

二、基于數(shù)據(jù)驅(qū)動(dòng)的學(xué)習(xí)評(píng)價(jià)框架構(gòu)建

（一）在線開放課程教學(xué)結(jié)構(gòu)流程

在信息技術(shù)賦能下，在線開放課程與傳統(tǒng)課堂相比，在教學(xué)模式、交互方式、評(píng)價(jià)方法等方面發(fā)生了根本性變化。在線開放課程教學(xué)結(jié)構(gòu)流程通常包括課前導(dǎo)學(xué)、課中研學(xué)、課后拓學(xué)三個(gè)階段[3]（見圖1）。

課前導(dǎo)學(xué)：教師的主要任務(wù)聚焦在學(xué)情分析與教學(xué)預(yù)設(shè)。首先，教師從教學(xué)目標(biāo)、教學(xué)資源、學(xué)習(xí)者初始學(xué)習(xí)需求和群體特征等方面進(jìn)行學(xué)情分析。其次，根據(jù)學(xué)情分析進(jìn)行教學(xué)設(shè)計(jì)，此階段的教學(xué)設(shè)計(jì)主要圍繞課前導(dǎo)學(xué)任務(wù)中需要學(xué)習(xí)者具備的知識(shí)、技能而進(jìn)行的教學(xué)預(yù)設(shè)。教學(xué)預(yù)設(shè)趣味性強(qiáng)的導(dǎo)學(xué)任務(wù)、基于微課視頻為主的多樣化學(xué)習(xí)資源和課前導(dǎo)學(xué)測(cè)評(píng)試題等。然后，教師根據(jù)學(xué)習(xí)者導(dǎo)學(xué)資源學(xué)習(xí)情況、導(dǎo)學(xué)測(cè)評(píng)成績(jī)、討論互動(dòng)等情況，綜合分析導(dǎo)學(xué)階段的學(xué)習(xí)情況。最后，重新評(píng)估學(xué)情，重新進(jìn)行教學(xué)設(shè)計(jì)。學(xué)習(xí)者的主要任務(wù)是根據(jù)導(dǎo)學(xué)任務(wù)完成課前預(yù)習(xí)，進(jìn)行自學(xué)、同伴互學(xué)，完成導(dǎo)學(xué)測(cè)驗(yàn)，并將學(xué)習(xí)難點(diǎn)或有疑問的地方記錄下來及時(shí)反饋給教師，以便在課中研學(xué)時(shí)教師對(duì)其進(jìn)行重點(diǎn)講解。

課中研學(xué)：學(xué)習(xí)者深度參與教學(xué)活動(dòng)是促進(jìn)學(xué)習(xí)者有效內(nèi)化知識(shí)、提升技能的關(guān)鍵。教師活動(dòng)，首先，要對(duì)課前導(dǎo)學(xué)階段遺留的“疑難雜癥”進(jìn)行講解答疑；其次，為導(dǎo)入本堂課的教學(xué)情境，提出高階問題，在學(xué)生研學(xué)過程中給予適當(dāng)?shù)狞c(diǎn)撥或提醒；最后，要對(duì)學(xué)習(xí)者的研學(xué)過程和學(xué)習(xí)成果進(jìn)行歸納總結(jié)。學(xué)生活動(dòng)方面，首先，基于具體情境、具體問題進(jìn)行獨(dú)立思考；其次，需在此基礎(chǔ)上與小組其他成員進(jìn)行協(xié)作研討并解決問題，最終形成小組學(xué)習(xí)成果并進(jìn)行展示；再次，要在課內(nèi)學(xué)習(xí)任務(wù)完成后，及時(shí)進(jìn)行學(xué)習(xí)效果評(píng)測(cè)；最后，為教師對(duì)小組學(xué)習(xí)成果進(jìn)行及時(shí)的評(píng)價(jià)與反饋。

課后拓學(xué)：此階段聚焦在學(xué)習(xí)之后的反思與遷移應(yīng)用。教師根據(jù)課中階段的學(xué)習(xí)情況，設(shè)計(jì)不同難易程度、不同類型的拓展項(xiàng)目，設(shè)計(jì)拓展學(xué)習(xí)資源，推送拓展學(xué)習(xí)資源，對(duì)個(gè)別學(xué)生/小組進(jìn)行精準(zhǔn)指導(dǎo)，最后組織學(xué)習(xí)者進(jìn)行反思與自評(píng)/互評(píng)。學(xué)習(xí)者通過自學(xué)、互學(xué)完成拓展任務(wù)，進(jìn)行拓學(xué)測(cè)評(píng)，完成同伴互評(píng)與學(xué)習(xí)反思，在此過程中培養(yǎng)學(xué)習(xí)者的批判思維和遷移應(yīng)用能力。

（二）在線開放課程教學(xué)過程生成的數(shù)據(jù)體系

在線開放課程教學(xué)實(shí)施過程產(chǎn)生了大量的多模態(tài)數(shù)據(jù)，這些數(shù)據(jù)包含了學(xué)習(xí)過程和學(xué)習(xí)結(jié)果數(shù)據(jù)，為評(píng)價(jià)提供了數(shù)據(jù)基礎(chǔ)（見圖1）。本研究將教學(xué)過程產(chǎn)生的海量多模態(tài)數(shù)據(jù)進(jìn)行分類，形成師生行為數(shù)據(jù)簇、師生情感數(shù)據(jù)簇、評(píng)價(jià)數(shù)據(jù)簇和課堂管理數(shù)據(jù)簇。

1.師生行為數(shù)據(jù)

師生的學(xué)習(xí)行為既包含顯性學(xué)習(xí)行為，也包含隱性學(xué)習(xí)行為[4-5]。教師線下行為數(shù)據(jù)包含線下課堂組織行為、互動(dòng)行為數(shù)據(jù)和線上在線指導(dǎo)、學(xué)情分析等線上行為數(shù)據(jù)。學(xué)習(xí)者行為數(shù)據(jù)同樣包含線下實(shí)體課堂聽課行為、互動(dòng)行為等數(shù)據(jù)和登錄學(xué)習(xí)平臺(tái)頻率、資源訪問學(xué)習(xí)行為、論壇互動(dòng)等在線行為數(shù)據(jù)。

2.師生情感數(shù)據(jù)

已有研究表明，學(xué)習(xí)者的情感是影響其學(xué)習(xí)效果的重要因素[6-7]。師生情感數(shù)據(jù)采集中，可以通過視頻、圖像識(shí)別技術(shù)對(duì)師生情感、實(shí)時(shí)狀態(tài)數(shù)據(jù)等情感信息進(jìn)行分析評(píng)價(jià)。

3.教與學(xué)評(píng)價(jià)數(shù)據(jù)

評(píng)價(jià)貫穿課前導(dǎo)學(xué)、課中研學(xué)、課后拓學(xué)全過程，評(píng)價(jià)數(shù)據(jù)包括評(píng)學(xué)、評(píng)教、互評(píng)等過程性和結(jié)果性數(shù)據(jù)。

4.課堂管理數(shù)據(jù)

信息化教學(xué)環(huán)境與設(shè)備是保障教學(xué)順利實(shí)施的重要載體，它記錄了教學(xué)過程中的課堂管理數(shù)據(jù)，這些數(shù)據(jù)包含學(xué)習(xí)者考勤、課堂異常表現(xiàn)、學(xué)習(xí)進(jìn)度提醒和預(yù)警信息等數(shù)據(jù)[8]。

（三）在線開放課程學(xué)習(xí)評(píng)價(jià)框架構(gòu)建

科學(xué)評(píng)價(jià)能有效診斷出教學(xué)中存在的不足，并提出針對(duì)性的改進(jìn)建議，實(shí)現(xiàn)以評(píng)促教、以評(píng)促學(xué)。在線開放課程混合教學(xué)涉及線上線下不同場(chǎng)景，其學(xué)習(xí)質(zhì)量評(píng)價(jià)也應(yīng)針對(duì)不同場(chǎng)景進(jìn)行適切性地評(píng)價(jià)[9]。本研究在教育測(cè)量等理論指導(dǎo)下，結(jié)合在線開放課程教學(xué)結(jié)構(gòu)流程和教學(xué)過程生成的數(shù)據(jù)體系特點(diǎn)，從課前導(dǎo)學(xué)、課中研學(xué)、課后拓學(xué)等角度對(duì)學(xué)習(xí)者進(jìn)行診斷與評(píng)價(jià)。學(xué)習(xí)評(píng)價(jià)在伴隨式采集學(xué)習(xí)者學(xué)習(xí)過程全樣本多模態(tài)數(shù)據(jù)基礎(chǔ)上，采用定性與定量結(jié)合、線上線下考核并進(jìn)、結(jié)果性評(píng)價(jià)與過程性評(píng)價(jià)相結(jié)合方式進(jìn)行學(xué)習(xí)全過程診斷評(píng)價(jià)。學(xué)習(xí)評(píng)價(jià)總成績(jī)=過程性評(píng)價(jià)成績(jī)+結(jié)果性評(píng)價(jià)成績(jī)，其中過程性評(píng)價(jià)成績(jī)=課前導(dǎo)學(xué)評(píng)價(jià)成績(jī)+課中研學(xué)評(píng)價(jià)成績(jī)+課后拓學(xué)成績(jī)，結(jié)果性評(píng)價(jià)成績(jī)=綜合測(cè)試成績(jī)+項(xiàng)目作品質(zhì)量成績(jī)。

1.課前導(dǎo)學(xué)評(píng)價(jià)框架設(shè)計(jì)

在該階段，學(xué)習(xí)評(píng)價(jià)的目標(biāo)聚集在對(duì)學(xué)習(xí)者的學(xué)情進(jìn)行分析、對(duì)導(dǎo)學(xué)成效進(jìn)行評(píng)價(jià)。利用網(wǎng)絡(luò)學(xué)習(xí)平臺(tái)數(shù)據(jù)采集工具，采集學(xué)習(xí)者學(xué)習(xí)行為數(shù)據(jù)、導(dǎo)學(xué)測(cè)評(píng)數(shù)據(jù)等，利用學(xué)習(xí)分析、數(shù)據(jù)挖掘等技術(shù)，深度挖掘其學(xué)習(xí)參與度與學(xué)習(xí)成效，對(duì)學(xué)習(xí)者線上學(xué)習(xí)過程和學(xué)習(xí)結(jié)果進(jìn)行評(píng)價(jià)。此階段從評(píng)價(jià)維度、觀測(cè)點(diǎn)、權(quán)重、評(píng)價(jià)主體等四個(gè)方面構(gòu)建評(píng)價(jià)框架，其中評(píng)價(jià)的維度包含投入度、參與度、學(xué)習(xí)能力、導(dǎo)學(xué)測(cè)評(píng)等方面（詳見表1）。

2.課中研學(xué)評(píng)價(jià)框架設(shè)計(jì)

課中學(xué)習(xí)評(píng)價(jià)目標(biāo)主要聚焦在學(xué)習(xí)者在課堂上的主動(dòng)參與、合作表現(xiàn)以及學(xué)習(xí)成效等方面，采用定量評(píng)價(jià)與定性評(píng)價(jià)相結(jié)合的方式，其中，在投入度中重點(diǎn)對(duì)學(xué)習(xí)者課上情況進(jìn)行評(píng)價(jià)；參與度中主要對(duì)學(xué)習(xí)者是否積極參與討論、小組互動(dòng)、學(xué)習(xí)任務(wù)完成情況等方面進(jìn)行評(píng)價(jià)，此外為其它維度評(píng)價(jià)觀測(cè)點(diǎn)（詳見表2）。

3.課后拓學(xué)評(píng)價(jià)框架設(shè)計(jì)

課后拓學(xué)是進(jìn)一步鞏固課中學(xué)習(xí)內(nèi)容，并在此基礎(chǔ)上進(jìn)行知識(shí)遷移應(yīng)用。因此，課后學(xué)習(xí)評(píng)價(jià)主要針對(duì)拓展學(xué)習(xí)任務(wù)的完成度、知識(shí)遷移應(yīng)用、拓學(xué)測(cè)評(píng)、反思總結(jié)等方面進(jìn)行評(píng)價(jià)。此外為各評(píng)價(jià)維度及觀測(cè)點(diǎn)（詳見表3）。

三、實(shí)踐應(yīng)用

（一）研究過程

1.實(shí)驗(yàn)樣本選擇

實(shí)驗(yàn)樣本以湖南電氣職業(yè)技術(shù)學(xué)院電梯工程技術(shù)專業(yè)和城市軌道交通機(jī)電技術(shù)專業(yè)2020級(jí)339名學(xué)生為研究對(duì)象，實(shí)驗(yàn)課程為“職業(yè)素養(yǎng)”，基于超星慕課平臺(tái)和線下智慧課堂實(shí)施混合式教學(xué)。將電梯工程技術(shù)專業(yè)學(xué)生作為實(shí)驗(yàn)組，應(yīng)用本研究的評(píng)價(jià)框架進(jìn)行教學(xué)實(shí)踐；城市軌道交通機(jī)電技術(shù)專業(yè)的學(xué)生作為參照組，采用原有的評(píng)價(jià)方法進(jìn)行教學(xué)實(shí)踐。前期兩個(gè)專業(yè)的學(xué)生已基于超星慕課平臺(tái)完成了“信息技術(shù)”等課程的混合式學(xué)習(xí)，具備了線上線下混合學(xué)習(xí)技能和相應(yīng)的信息素養(yǎng)?！奥殬I(yè)素養(yǎng)”課程為電梯工程技術(shù)專業(yè)和城市軌道交通機(jī)電技術(shù)專業(yè)學(xué)生所必修的一門公共基礎(chǔ)課程，課程學(xué)習(xí)6～11周，第12周進(jìn)行期末綜合測(cè)評(píng)?？傉n時(shí)為32學(xué)時(shí)。

2.學(xué)習(xí)評(píng)價(jià)量化計(jì)算方法

本研究學(xué)習(xí)評(píng)價(jià)計(jì)算方法按照表1、表2、表3觀測(cè)點(diǎn)進(jìn)行量化。具體量化計(jì)算公式：課程學(xué)習(xí)評(píng)價(jià)總成績(jī)=過程性評(píng)價(jià)（70%）+結(jié)果性評(píng)價(jià)（30%）。其中，結(jié)果性評(píng)價(jià)成績(jī)=期末綜合測(cè)試成績(jī)（50%）+項(xiàng)目作品質(zhì)量（50%）；過程性評(píng)價(jià)成績(jī)=課前導(dǎo)學(xué)成績(jī)（20%）+課中研學(xué)成績(jī)（50%）+課后拓學(xué)成績(jī)（30%）。

課前導(dǎo)學(xué)成績(jī)=投入度（40%）+參與度（20%）+學(xué)習(xí)能力（10%）+導(dǎo)學(xué)測(cè)評(píng)（30%）。其中，投入度、參與度、學(xué)習(xí)能力、導(dǎo)學(xué)測(cè)評(píng)各維度下觀測(cè)點(diǎn)的百分占比見表1所示。

課中研學(xué)成績(jī)=投入度（15%）+參與度（20%）+協(xié)作創(chuàng)新（20%）+貢獻(xiàn)度（15%）+實(shí)時(shí)測(cè)評(píng)（15%）+學(xué)習(xí)成效（15%）。其中，投入度、參與度、貢獻(xiàn)度、協(xié)作創(chuàng)新、學(xué)習(xí)成效、實(shí)時(shí)測(cè)評(píng)等各維度下觀測(cè)點(diǎn)的百分占比見表2所示。

課后拓學(xué)成績(jī)=拓學(xué)任務(wù)完成度（20%）+知識(shí)遷移應(yīng)用（40%）+拓學(xué)測(cè)評(píng)（20%）+反思總結(jié)（20%）。其中拓學(xué)任務(wù)完成度、知識(shí)遷移應(yīng)用、拓學(xué)測(cè)評(píng)、反思總結(jié)等各維度下觀測(cè)點(diǎn)的百分占比見表3所示。

3.信度與效度分析

研究基于上述具體量化公式，抽取課前導(dǎo)學(xué)4個(gè)評(píng)價(jià)維度數(shù)據(jù)、課中6個(gè)評(píng)價(jià)維度數(shù)據(jù)、課后4個(gè)評(píng)價(jià)維度數(shù)據(jù)為研究對(duì)象，將339名學(xué)生的數(shù)據(jù)導(dǎo)入到統(tǒng)計(jì)分析軟件SPSS 26中進(jìn)行可靠性計(jì)算分析。發(fā)現(xiàn)克朗巴哈系數(shù)Cronbachs Alpha為0.843，表明各影響因素之間具有較好的內(nèi)部一致性，信度較高。同時(shí)，研究還進(jìn)行了KMO度量（檢驗(yàn)變量之間的相關(guān)性，取值在0～1之間，值越大表明變量之間相關(guān)性越大），其KMO值為0.692，表明具有較好的結(jié)構(gòu)效度。

（二）研究發(fā)現(xiàn)

1.學(xué)習(xí)者的參與度、投入度與學(xué)習(xí)總成績(jī)相關(guān)性分析

通過皮爾遜相關(guān)性檢驗(yàn)（度量?jī)蓚€(gè)變量間的相關(guān)程度）發(fā)現(xiàn)（見表4）：學(xué)習(xí)者的參與度成績(jī)與總成績(jī)的皮爾遜相關(guān)系數(shù)為0.745，兩者之間相關(guān)性較強(qiáng)（在0.01水平上顯著相關(guān)）；學(xué)習(xí)投入度成績(jī)與總成績(jī)的皮爾遜相關(guān)系數(shù)為0.759，兩者之間相關(guān)性較強(qiáng)（在0.01水平上顯著相關(guān)）；另外，學(xué)習(xí)者參與度成績(jī)與學(xué)習(xí)者投入度成績(jī)的皮爾遜相關(guān)系數(shù)為0.728且顯著相關(guān)；參與度成績(jī)、投入度成績(jī)均與總成績(jī)具有較強(qiáng)相關(guān)性。這說明參與度高的學(xué)習(xí)者，其學(xué)習(xí)投入度也較高，學(xué)習(xí)成績(jī)也越好，也與心理學(xué)研究結(jié)論一致。本研究結(jié)論的啟示是：教師創(chuàng)設(shè)趣味性較強(qiáng)、體驗(yàn)感較好的學(xué)習(xí)情境和學(xué)習(xí)任務(wù)，能較好地激發(fā)學(xué)習(xí)者的學(xué)習(xí)積極性與興趣，促進(jìn)學(xué)習(xí)者“樂學(xué)、愛學(xué)、好學(xué)”，提高學(xué)習(xí)效能。

2.觀看視頻時(shí)長、線下提問/線上發(fā)回帖與成績(jī)的相關(guān)性分析

學(xué)習(xí)者觀看視頻的時(shí)長從某種程度上代表了學(xué)習(xí)者對(duì)視頻中學(xué)習(xí)內(nèi)容的掌握程度。本研究顯示（見表5所示）：線下提問/線上發(fā)回帖和觀看視頻時(shí)長兩者之間存在顯著相關(guān)（0.01水平）；與考試成績(jī)之間也存在顯著相關(guān)（0.05水平）。研究結(jié)果表明，一方面，學(xué)習(xí)者觀看視頻的時(shí)長越長、次數(shù)越多，對(duì)內(nèi)容理解、提升成績(jī)?cè)接袔椭?；另一方面，說明反復(fù)觀看的視頻內(nèi)容存在理解難度較大，學(xué)習(xí)者傾向提問發(fā)帖的方式向同學(xué)、教師求助。從某種意義上來講，發(fā)帖求助越多的學(xué)習(xí)者的學(xué)習(xí)主動(dòng)性就越強(qiáng)，其成績(jī)也相對(duì)較好。然而，研究數(shù)據(jù)發(fā)現(xiàn)線下提問/線上發(fā)回帖與學(xué)習(xí)成績(jī)相關(guān)性為0.225，表明二者不存在顯著相關(guān)性。導(dǎo)致此結(jié)果的原因是大部分學(xué)習(xí)者提問/發(fā)帖的目的是向同伴或教師進(jìn)行求助，而相應(yīng)的回答/回帖卻較少，沒能及時(shí)響應(yīng)求助者需求。本研究結(jié)論的啟示是：教師應(yīng)加強(qiáng)對(duì)線上線下交流談?wù)摰年P(guān)注，及時(shí)有效地進(jìn)行回答/發(fā)帖，以幫助學(xué)習(xí)者解決學(xué)習(xí)困惑。

3.過程性評(píng)價(jià)與結(jié)果性評(píng)價(jià)的相關(guān)性分析

本研究將過程性成績(jī)和結(jié)果性成績(jī)進(jìn)行相關(guān)性分析發(fā)現(xiàn)，二者在0.01水平（雙側(cè)）上顯著相關(guān)，這表明在混合教學(xué)過程中，教師對(duì)線上/線下學(xué)習(xí)過程的引導(dǎo)、調(diào)控及干預(yù)，對(duì)學(xué)習(xí)者克服學(xué)習(xí)困難、完成學(xué)習(xí)目標(biāo)具有重要的保障作用。本研究結(jié)論的啟示是教師應(yīng)在精準(zhǔn)分析學(xué)情（學(xué)習(xí)目標(biāo)、學(xué)習(xí)內(nèi)容、學(xué)習(xí)環(huán)境、學(xué)習(xí)者學(xué)習(xí)需求、學(xué)習(xí)者群體特征等）基礎(chǔ)上，統(tǒng)籌安排好線上線下學(xué)習(xí)內(nèi)容，創(chuàng)設(shè)學(xué)習(xí)情境，有效組織教學(xué)，及時(shí)進(jìn)行教學(xué)調(diào)控與干預(yù)，以提高教與學(xué)的效能。

4.學(xué)習(xí)效果對(duì)比

本研究選取2020級(jí)電梯工程技術(shù)專業(yè)201名學(xué)生（實(shí)驗(yàn)組）、城市軌道交通機(jī)電技術(shù)專業(yè)138名學(xué)生（參照組）在2022年春季班課程成績(jī)進(jìn)行基于數(shù)據(jù)驅(qū)動(dòng)的學(xué)習(xí)評(píng)價(jià)實(shí)踐效果的對(duì)比分析，學(xué)習(xí)評(píng)價(jià)總成績(jī)=過程性評(píng)價(jià)+結(jié)果性評(píng)價(jià)成績(jī)；其中有過程性評(píng)價(jià)成績(jī)=課前導(dǎo)學(xué)評(píng)價(jià)成績(jī)+課中研學(xué)評(píng)價(jià)成績(jī)+課后拓學(xué)成績(jī)，結(jié)果性評(píng)價(jià)成績(jī)=綜合測(cè)試成績(jī)+項(xiàng)目作品質(zhì)量成績(jī)課程成績(jī)。研究采用獨(dú)立樣本T檢驗(yàn)對(duì)兩個(gè)班級(jí)學(xué)生的成績(jī)差異進(jìn)行檢驗(yàn)，結(jié)果如表6、表7所示。

從表6可以看出，獨(dú)立樣本檢驗(yàn)結(jié)果中的F值=0.57，Sig.值=0.839>0.05，說明假設(shè)方差相等；均值方程T檢驗(yàn)值=4.131，Sig.值=0.000<0.05，拒絕原假設(shè)，即證明基于數(shù)據(jù)驅(qū)動(dòng)的學(xué)習(xí)評(píng)價(jià)實(shí)施前后在成績(jī)上存在顯著差異。從對(duì)照班級(jí)的成績(jī)數(shù)據(jù)統(tǒng)計(jì)（如表7 所示）可以看出：電梯工程專業(yè)班學(xué)生的成績(jī)均值為87.79，軌道交通專業(yè)班學(xué)生的成績(jī)均值為76.83。由此可知，實(shí)施了基于數(shù)據(jù)驅(qū)動(dòng)學(xué)習(xí)評(píng)價(jià)的實(shí)驗(yàn)組班級(jí)成績(jī)高于沒有實(shí)施評(píng)價(jià)框架的參照班級(jí)的成績(jī)，且超過了顯著水平為5%的顯著性檢驗(yàn)，說明基于數(shù)據(jù)驅(qū)動(dòng)的學(xué)習(xí)評(píng)價(jià)能顯著提高學(xué)生的學(xué)習(xí)質(zhì)量。

綜上所述，從實(shí)證研究過程、研究結(jié)果與啟示可以發(fā)現(xiàn)，本文研究的基于數(shù)據(jù)驅(qū)動(dòng)的在線開放課程學(xué)習(xí)評(píng)價(jià)框架能夠從課前導(dǎo)學(xué)、課中研學(xué)、課后拓學(xué)三個(gè)典型教學(xué)應(yīng)用場(chǎng)景對(duì)學(xué)習(xí)者的學(xué)習(xí)過程和學(xué)習(xí)成效進(jìn)行全方位診斷評(píng)價(jià)，根據(jù)評(píng)價(jià)反饋信息及時(shí)改進(jìn)教與學(xué)，能有效調(diào)動(dòng)學(xué)生的學(xué)習(xí)積極性、提高學(xué)習(xí)成效；同時(shí)，學(xué)習(xí)評(píng)價(jià)框架具有開放動(dòng)態(tài)性，教師在實(shí)踐過程中可以根據(jù)教學(xué)目標(biāo)、學(xué)習(xí)內(nèi)容、學(xué)習(xí)環(huán)境和學(xué)生特征等具體學(xué)情，靈活調(diào)整評(píng)價(jià)指標(biāo)維度和對(duì)應(yīng)的觀測(cè)點(diǎn)，盡可能真實(shí)客觀地反映學(xué)習(xí)者學(xué)習(xí)行為、態(tài)度和結(jié)果之間的相關(guān)性，實(shí)現(xiàn)以評(píng)促學(xué)、以評(píng)促教。

學(xué)習(xí)評(píng)價(jià)是一個(gè)系統(tǒng)且復(fù)雜的活動(dòng)過程，其終極目標(biāo)是改進(jìn)教與學(xué)。本研究在采集學(xué)習(xí)者學(xué)習(xí)過程數(shù)據(jù)和學(xué)習(xí)結(jié)果全樣本數(shù)據(jù)的基礎(chǔ)上，從混合教學(xué)流程的課前導(dǎo)學(xué)、課中研學(xué)、課后拓學(xué)三個(gè)階段構(gòu)建了在線開放學(xué)習(xí)評(píng)價(jià)框架，以期為我國在線開放課程教學(xué)評(píng)價(jià)提供借鑒與參考。

參考文獻(xiàn)：

[1]我國慕課數(shù)量和學(xué)習(xí)人數(shù)均居世界第一 [EB/OL].（2022-02-29）[2022-12-20].http：//www.moe.gov.cn/fbh/live/2022/54324/mtbd/202203/t20220329_611860.html.

[2]成亞玲，譚愛平.基于智慧課堂的混合學(xué)習(xí)教學(xué)設(shè)計(jì)研究[J].中國信息技術(shù)教育，2022（21）：85-88.

[3]方海光，侯偉鋒，王曉春，等.基于PADClass模型的數(shù)字化課堂學(xué)習(xí)過程數(shù)據(jù)挖掘與分析研究[J].電化教育研究，2014（10）：110-113，120.

[4]黃瑤.基于在線學(xué)習(xí)環(huán)境下學(xué)習(xí)者學(xué)習(xí)行為模型構(gòu)建與分析[D].昆明：云南師范大學(xué)，2019.

[5]郭秀艷，楊治良.內(nèi)隱學(xué)習(xí)與外顯學(xué)習(xí)的相互關(guān)系[J].心理學(xué)報(bào)，2002（4）：351-356.

[6]夏立新，周鼎，葉光輝，等.情感負(fù)荷視角下探索式搜索學(xué)習(xí)效果的影響因素[J].圖書情報(bào)知識(shí)，2020（4）：133-141.

[7]趙悅君.漢語學(xué)習(xí)者情感因素對(duì)于其學(xué)習(xí)效果的影響[D].保定：河北大學(xué)， 2013.

[8]成亞玲.智慧課堂數(shù)據(jù)采集框架設(shè)計(jì)研究[J].湖南工業(yè)職業(yè)技術(shù)學(xué)院學(xué)報(bào)，2021（3）：14-18，25.

[9]楊浩，付艷芳.新時(shí)代高職院校混合式教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系構(gòu)建[J].職業(yè)技術(shù)教育，2021（35）：67-72.

（責(zé)任編輯：劉東菊）

Study on Evaluation of Online Open Course Learning Based on Data Driven

DENG Zu-lu， LI Jia

（Hunan Electrical Vocational and Technical College， Xiangtan Hunan 410001， China）

Abstract： Online open courses have become an important way for learners to acquire knowledge， improve skills and lifelong learning. However， there are some difficulties in the evaluation of open online courses， such as inaccurate starting point evaluation， incomplete process evaluation， and insufficient interpretation of evaluation results. Scientific and reasonable learning evaluation can stimulate learners' initiative and enthusiasm and improve learning efficiency. From the perspective of mixed teaching structure and process， this study organically integrates learning evaluation into the learning process， constructs the evaluation framework of pre-class guidance， in-class research and after-class extension， and applies it to teaching practice. The results show that learners with high degree of engagement have better learning performance. Learners who are more active in posting do not necessarily perform better. Teachers' scientific teaching organization， regulation and intervention in the process of mixed teaching plays an important role in ensuring the improvement of students' learning quality.

Key words： online open courses; mixed learning; data driven; evaluation design