雷 莉, 陳 雯

(1.四川大學(xué) 海外教育學(xué)院,四川 成都 610041；2.四川大學(xué) 文學(xué)與新聞學(xué)院,四川 成都 610207)

一、引 言

留學(xué)生思政教育是將知識、技能及實踐等各類課程所蘊含的思政元素和所承載的思政教育功能融入課堂教學(xué)環(huán)節(jié)，以實現(xiàn)價值引領(lǐng)、知識教育、能力培養(yǎng)的育人行為(1)沈庶英.來華留學(xué)課程思政：基于學(xué)科交叉的統(tǒng)整建構(gòu)[J].教育研究,2021,(6).。早在20世紀(jì)末，崔永日(2)崔永日,崔亨龍,金永燦.淺談來華留學(xué)生教育管理中的思想教育[J].中國高教研究,1998，(6).，宋乃蓮(3)宋乃蓮.淺談來華留學(xué)生教育管理[J].中國高教研究,2000,(9).等學(xué)者便強調(diào)思想教育工作是留學(xué)生管理工作的關(guān)鍵。其后，學(xué)界從留學(xué)生思政教育的概念內(nèi)容、存在的問題、途徑策略等方面進行研究。李慧琳、張營廣從趨同管理背景探討高校來華留學(xué)生的思想教育問題，明確留學(xué)生思想教育的內(nèi)涵、內(nèi)容與方法，提高來華留學(xué)生思想教育工作的針對性與實效性(4)李慧琳,張營廣.趨同管理背景下高校來華留學(xué)生思想教育問題探析[J].思想教育研究,2014，(11).。秦小莉(5)秦小莉,范純琍.來華留學(xué)生思想教育現(xiàn)狀分析與應(yīng)對策略[J].思想教育研究,2015，(10).、翟國(6)翟國.高校留學(xué)生群體思想政治教育策略研究[J].教育探索,2015,(3).、何正英(7)何正英.趨同管理背景下來華留學(xué)生思想教育工作問題及對策[J].學(xué)校黨建與思想教育,2018，(14).、李寶貴(8)李寶貴,李博文.新時代國際學(xué)生思想政治教育:意義、特點、內(nèi)容與路徑[J].遼寧師范大學(xué)學(xué)報(社會科學(xué)版),2018,(4).和劉又萌(9)劉又萌,張地珂.來華留學(xué)生思想教育策略研究[J].學(xué)校黨建與思想教育,2021，(10).等學(xué)者均立足來華留學(xué)生思想政治教育面臨的困境提出對策，主要包括建設(shè)留學(xué)生管理信息系統(tǒng)，制定完善留學(xué)生思想政治教育制度，加強留學(xué)生專職輔導(dǎo)員師資隊伍建設(shè)和創(chuàng)新留學(xué)生思想政治教育方式等。隨著現(xiàn)代信息技術(shù)的發(fā)展，有學(xué)者聚焦來華留學(xué)生的個性化特征，利用互聯(lián)網(wǎng)技術(shù)賦能留學(xué)生思政教育工作。如許蘊文重點關(guān)注來華留學(xué)生的思維差異，提出通過思維差異化教學(xué)模式建設(shè)和開展思維引導(dǎo)工作(10)許蘊文.基于思維差異的來華留學(xué)生思想教育工作思路與措施[J].學(xué)校黨建與思想教育,2019,(4).；李慧琳等提出來華留學(xué)生思政教育工作應(yīng)借助多媒體資源，將思想教育融入留學(xué)生教學(xué)(11)李慧琳,張營廣.趨同管理背景下高校來華留學(xué)生思想教育問題探析[J].思想教育研究,2014,(11).；曹靜提出利用網(wǎng)絡(luò)平臺開展思想政治教育，以便及時掌握留學(xué)生的心理狀況、思想動態(tài)、生活情況等，便于實施者及時疏導(dǎo)留學(xué)生的不良情緒并解決其遇到的困難(12)曹靜.我國留學(xué)生思想政治教育網(wǎng)絡(luò)平臺設(shè)計研究[J].渭南師范學(xué)院學(xué)報,2015,(22).?？傮w而言，留學(xué)生思想政治教育是促進培養(yǎng)質(zhì)量提升，落實立德樹人目標(biāo)的重要保障，學(xué)界多針對其發(fā)展困境提出對策，但對留學(xué)生思政教育與現(xiàn)代信息技術(shù)的結(jié)合問題關(guān)注尚少，有待深入探究。

由于留學(xué)生思政教育的教學(xué)環(huán)境復(fù)雜，學(xué)習(xí)者個體差異較大，導(dǎo)致教學(xué)效果的監(jiān)測與評估成為難題。多模態(tài)學(xué)習(xí)分析方法拓展了傳統(tǒng)的學(xué)習(xí)評估方法，能夠?qū)α魧W(xué)生思政教育的學(xué)習(xí)過程與結(jié)果進行全面細(xì)致的刻畫。鑒于此，文章以真實評價留學(xué)生思政教育成效為目標(biāo)，構(gòu)建基于多模態(tài)數(shù)據(jù)的留學(xué)生思政教育多模態(tài)學(xué)習(xí)分析框架，通過對學(xué)生在線下實體課堂、線上智能平臺以及其他媒介平臺中的多模態(tài)數(shù)據(jù)進行挖掘、采集、整理和分析，以可視化形式展現(xiàn)思政教育對留學(xué)生思想情感、行為動態(tài)的影響，為更加精準(zhǔn)、科學(xué)地開展留學(xué)生思政教育工作提供指導(dǎo)和數(shù)據(jù)參考。

二、多模態(tài)學(xué)習(xí)分析與來華留學(xué)生思政教育

為保障真實全面的留學(xué)生思政教育過程挖掘與實踐改進,本文重點聚集多模態(tài)數(shù)據(jù)分析視域下的學(xué)習(xí)評價研究,以多模態(tài)學(xué)習(xí)分析理論為指導(dǎo),通過多模態(tài)數(shù)據(jù)的采集,處理和分析,客觀描繪、評估留學(xué)生思政教育的過程與成效，實現(xiàn)多模態(tài)數(shù)據(jù)賦能教育的目標(biāo)。

(一)多模態(tài)學(xué)習(xí)分析

學(xué)習(xí)分析是利用多種分析技術(shù)和數(shù)據(jù)挖掘方法，收集和分析學(xué)習(xí)者的行為數(shù)據(jù)，多維度、深層次地理解和優(yōu)化學(xué)習(xí)過程，提升教學(xué)效果的一種方法或手段(13)高明,王小霞.多模態(tài)學(xué)習(xí)分析研究現(xiàn)狀與啟示——基于學(xué)習(xí)分析與知識國際會議的調(diào)研[J].開放學(xué)習(xí)研究,2022,(1).。隨著各類可穿戴傳感器技術(shù)、互聯(lián)網(wǎng)技術(shù)和大數(shù)據(jù)計算能力的發(fā)展，為獲取多種模態(tài)數(shù)據(jù)提供了技術(shù)支撐，促成了多模態(tài)學(xué)習(xí)分析研究的誕生，并成為學(xué)習(xí)分析領(lǐng)域的一個重要新興分支。

多模態(tài)學(xué)習(xí)分析(MultiModal Learning Analytics，MMLA)最早由美國南加州大學(xué)的Stefan Scherer 和 Louis-Philippe Morency、西北大學(xué)的Marcelo Worsley等學(xué)者于2012年在第十四屆《多模態(tài)交互國際會議》上正式提出(14)SCHERER S，WORSLEY M，MORENCY L P.1st international workshop on multimodal learning analytics：extended abstract[C]//Proceedings of the 14th ACM international conference on multimodal interaction.New York：ACM，2012：353～356.，它是基于人的多重感知模式，采用多種方式追蹤學(xué)習(xí)者的學(xué)習(xí)過程，獲取與分析學(xué)習(xí)者不同層面的數(shù)據(jù)，更精準(zhǔn)、更全面地洞悉復(fù)雜學(xué)習(xí)者的學(xué)習(xí)過程及其學(xué)習(xí)環(huán)境(15)潘青青,楊現(xiàn)民,陳世超.國際學(xué)習(xí)分析技術(shù)研究進展與趨勢分析——基于2014年至2016年Journal of Learning Analytics論文分析[J].中國遠(yuǎn)程教育,2019,(3).。目前多模態(tài)學(xué)習(xí)分析廣泛應(yīng)用于教育領(lǐng)域，通過分析學(xué)習(xí)者的對話、行為、心理情感等多模態(tài)數(shù)據(jù)，解釋和預(yù)測學(xué)生的學(xué)習(xí)軌跡、學(xué)習(xí)表現(xiàn)、學(xué)習(xí)結(jié)果等，以實現(xiàn)多模態(tài)數(shù)據(jù)賦能的學(xué)習(xí)現(xiàn)象的解釋和學(xué)習(xí)規(guī)律的發(fā)現(xiàn)。

(二)多模態(tài)學(xué)習(xí)分析應(yīng)用于來華留學(xué)生思政教育的可行性

1.信息化、智慧化是來華留學(xué)生思政教育發(fā)展的必然趨勢

來華留學(xué)生思政教育是以課程育人、創(chuàng)新培養(yǎng)為目標(biāo)導(dǎo)向，在知識傳授的過程中進行價值引領(lǐng)，助力來華青年理解“中國方案”并形成文化和價值認(rèn)同。在百年未有之大變局以及新冠疫情的影響下，國際中文教育發(fā)生重大變革，大數(shù)據(jù)、人工智能等信息技術(shù)的應(yīng)用重塑了國際中文教育生態(tài)，來華留學(xué)生思政教育作為國際中文教育領(lǐng)域的重要組成部分，其教學(xué)生態(tài)逐漸向信息化、智慧化轉(zhuǎn)型。

目前，已有學(xué)者基于大數(shù)據(jù)、智能化發(fā)展的視角對思政教育進行創(chuàng)新研究，主要集中于兩方面：其一，大數(shù)據(jù)、人工智能時代的思政教育理論內(nèi)涵創(chuàng)新研究，如崔建西等提出智能思政是人工智能時代思政教育創(chuàng)新發(fā)展的新形態(tài)(16)崔建西,白顯良.智能思政：思想政治教育創(chuàng)新發(fā)展的新形態(tài)[J].思想理論教育,2021,(10).，劉政等提出數(shù)據(jù)挖掘技術(shù)的目標(biāo)、內(nèi)容、方式有助于信息傳播與思想政治教育的融合創(chuàng)新(17)劉政,鄭易平.數(shù)據(jù)挖掘視域下思想政治教育創(chuàng)新的新時代意蘊[J].喀什大學(xué)學(xué)報,2022,(1).；其二，大數(shù)據(jù)、人工智能技術(shù)等手段推動思政教育的實踐發(fā)展研究，如黃欣榮提出大數(shù)據(jù)將人類思想、情感和行為數(shù)據(jù)化，為思想政治教育系統(tǒng)的可觀可控提供了數(shù)據(jù)基礎(chǔ)(18)黃欣榮.大數(shù)據(jù)對思想政治教育方法論的變革[J].江西財經(jīng)大學(xué)學(xué)報,2015,(3).，如林晶、宋林澤等從路徑、手段和功能三個維度說明了大數(shù)據(jù)如何推動思政教育轉(zhuǎn)型(19)林晶,王建亭.大數(shù)據(jù)思想政治教育模式構(gòu)建的可能性及其實現(xiàn)路徑研究[J].湖北社會科學(xué),2020,(5);宋林澤,丁凱.大數(shù)據(jù)時代思想政治教育研究范式轉(zhuǎn)型的三重維度[J].江淮論壇,2020，(6).，操菊華等從理論邏輯和實踐路徑說明了大數(shù)據(jù)技術(shù)和人工智能如何賦能高校精準(zhǔn)思政(20)操菊華.人工智能賦能思政課教學(xué)精準(zhǔn)化的理論邏輯與實踐圖景[J].思想理論教育導(dǎo)刊,2022，(4)。

雖然暫未有學(xué)者直接將多模態(tài)學(xué)習(xí)分析應(yīng)用于留學(xué)生思政教育，但現(xiàn)代信息技術(shù)在思政教育領(lǐng)域的廣泛應(yīng)用證明兩者融合發(fā)展的必然性和可行性，現(xiàn)代信息技術(shù)為思政教育智慧化轉(zhuǎn)型提供了技術(shù)支撐，也為思政教育研究創(chuàng)新提供了新的思路和方法。

2.多模態(tài)學(xué)習(xí)分析有助于科學(xué)、精準(zhǔn)地開展來華留學(xué)生思政教育工作

面向留學(xué)生實施精準(zhǔn)思政的難度較大，原因主要有以下三點：其一，從學(xué)習(xí)對象來看，來自不同國家、地區(qū)的留學(xué)生具有不同的文化背景和語言習(xí)慣，其個性化、差異化特征鮮明，涉及的分析維度較多，評價指標(biāo)更為復(fù)雜；其二，從教學(xué)生態(tài)來看，留學(xué)生思政教育場域呈現(xiàn)出線上線下交叉融合的趨勢，教學(xué)生態(tài)復(fù)雜，學(xué)習(xí)過程的監(jiān)控難度較大；其三，從思政教育的特點來看，思政教育強調(diào)留學(xué)生潛移默化地接受文化熏陶和道德教育，其學(xué)習(xí)過程的監(jiān)測及教學(xué)成效的評估難以通過試卷、作業(yè)等傳統(tǒng)考核形式完成，且這種行為變化是動態(tài)發(fā)展的，需要全過程追蹤學(xué)習(xí)者的思想行為動態(tài)。

為解決這一評估困境，可充分利用多模態(tài)學(xué)習(xí)分析方法及技術(shù)，基于多模態(tài)數(shù)據(jù)的分析處理，從留學(xué)生的外顯特征追蹤內(nèi)在變化，全面、客觀地分析學(xué)習(xí)行為，并依據(jù)結(jié)果指導(dǎo)教學(xué)，賦能精準(zhǔn)思政。目前，國際中文教育領(lǐng)域已經(jīng)開發(fā)建設(shè)了眾多的軟件平臺、智慧教室，儲存著海量的學(xué)習(xí)者信息及學(xué)習(xí)過程數(shù)據(jù)，如來自學(xué)習(xí)管理系統(tǒng)、MOOC、社交媒體、教育游戲等平臺的數(shù)據(jù)資料，這些數(shù)據(jù)資料主要包括兩部分：一是服務(wù)主體課程的教輔資料，教師可挖掘這些資料中的思政要素直接用于課堂教學(xué)環(huán)節(jié)；二是反映學(xué)習(xí)過程的數(shù)據(jù)，包括學(xué)習(xí)者的語言、表情、手勢、肢體動作等多模態(tài)數(shù)據(jù)，教師可通過這些數(shù)據(jù)了解最真實的學(xué)習(xí)情況，如學(xué)習(xí)者的注意力、情感變化、行為動態(tài)等。多模態(tài)學(xué)習(xí)分析是以多模態(tài)數(shù)據(jù)為研究對象，可最大化發(fā)揮學(xué)習(xí)數(shù)據(jù)的價值，將這些數(shù)據(jù)變?yōu)樾畔ⅲ蔀閷徤鳑Q策、過程優(yōu)化的重要依據(jù)，并用以指導(dǎo)決策，服務(wù)教學(xué)，實現(xiàn)對學(xué)習(xí)者及其學(xué)習(xí)過程的正面引導(dǎo)，全面提高人才培養(yǎng)質(zhì)量。

三、來華留學(xué)生思政教育中的多模態(tài)數(shù)據(jù)采集

(一)來華留學(xué)生思政教育中的多模態(tài)數(shù)據(jù)

多模態(tài)學(xué)習(xí)分析的分析對象是學(xué)習(xí)過程中的多模態(tài)數(shù)據(jù)，即多種模態(tài)數(shù)據(jù)的融合。由于來華留學(xué)生思政教育的復(fù)雜性，僅憑單一模態(tài)的數(shù)據(jù)分析難以呈現(xiàn)立體、全面的學(xué)習(xí)行為，需采集不同模態(tài)的信息，增強不同模態(tài)信息之間的互補性。

為了系統(tǒng)、科學(xué)地采集復(fù)雜學(xué)習(xí)環(huán)境中的多模態(tài)學(xué)習(xí)數(shù)據(jù)，需要對采集到的多模態(tài)數(shù)據(jù)進行分類整合，通過多模態(tài)數(shù)據(jù)融合支撐精準(zhǔn)分析。文章參考牟智佳的分類標(biāo)準(zhǔn)(21)牟智佳.多模態(tài)學(xué)習(xí)分析：學(xué)習(xí)分析研究新生長點[J].電化教育研究,2020,(5).，以學(xué)習(xí)者為中心，搜集分析留學(xué)生思政教育產(chǎn)生的學(xué)習(xí)數(shù)據(jù)，將多模態(tài)數(shù)據(jù)分為學(xué)習(xí)資源數(shù)據(jù)、學(xué)習(xí)體征數(shù)據(jù)、學(xué)習(xí)環(huán)境數(shù)據(jù)和學(xué)習(xí)交互數(shù)據(jù)。

如圖1所示，四類多模態(tài)學(xué)習(xí)數(shù)據(jù)是相輔相成、互為一體的。其中，學(xué)習(xí)資源數(shù)據(jù)是基礎(chǔ)，它既是學(xué)習(xí)分析的要素，也可作為教輔資料直接用于教學(xué)活動；學(xué)習(xí)體征數(shù)據(jù)是主體，是直觀反映學(xué)習(xí)行為和學(xué)習(xí)過程的部分；學(xué)習(xí)交互數(shù)據(jù)是輔助，側(cè)重于學(xué)習(xí)交互活動的分析，幫助全面描繪教學(xué)過程；學(xué)習(xí)環(huán)境數(shù)據(jù)是背景，既包括現(xiàn)實的教學(xué)環(huán)境，也包括承載學(xué)習(xí)數(shù)據(jù)的虛擬載體。具體如下：

圖1 來華留學(xué)生思政教育的多模態(tài)學(xué)習(xí)數(shù)據(jù)

1.學(xué)習(xí)資源數(shù)據(jù)

來華留學(xué)生思政教育的學(xué)習(xí)資源數(shù)據(jù)主要包括專業(yè)課程與思政要素。思政要素是以“理想信念”為核心，以立德樹人為目標(biāo)，包括專業(yè)課程在教學(xué)體系、教學(xué)內(nèi)容、教學(xué)過程和教學(xué)方式中蘊含的思政理念、思政內(nèi)容、思政載體、思政資源等要素。留學(xué)生思政教育的學(xué)習(xí)資源除了深入梳理專業(yè)課的課程內(nèi)容，還包括中國歷史、地理、社會、經(jīng)濟等中國國情和基本文化知識，中國社會主流價值觀和公共道德觀念等內(nèi)容，甚至涵蓋支撐思政教育的多媒體課件、教材教輔、微課視頻等輔助資源。

2.學(xué)習(xí)體征數(shù)據(jù)

學(xué)習(xí)體征數(shù)據(jù)指留學(xué)生個體的身體多模態(tài)數(shù)據(jù)，既包括以文本、圖像、音視頻、點擊流等為代表的外顯行為數(shù)據(jù)，也包括眼動、面部表情、腦電信號等為代表的內(nèi)隱特征數(shù)據(jù)。如在線上線下融合環(huán)境中開展的來華留學(xué)生思政教育的學(xué)習(xí)體征數(shù)據(jù)既包括筆記記錄頻次、課堂注意力時間比等課堂學(xué)習(xí)數(shù)據(jù)，也包括平臺登錄時間點、頻次和持續(xù)時間、學(xué)習(xí)任務(wù)完成進度、練習(xí)測驗結(jié)果等網(wǎng)絡(luò)學(xué)習(xí)行為數(shù)據(jù)。

值得注意的是，面向來華留學(xué)生的思政教育通常是動態(tài)變化的學(xué)習(xí)過程，尤其重視學(xué)習(xí)者價值觀念、情感態(tài)度的變化，因此，其學(xué)習(xí)分析的體征指標(biāo)不僅包括外部行為變化，更強調(diào)學(xué)習(xí)者內(nèi)在心理、生理的變化。以注意力分配和轉(zhuǎn)移為例，可跟蹤面部表情、眼動等生理信號，識別學(xué)習(xí)者的實時注意力，獲取學(xué)生注意力高度集中的時間段分布信息。

3.學(xué)習(xí)交互數(shù)據(jù)

學(xué)習(xí)交互是反映教學(xué)過程動態(tài)發(fā)展的重要指標(biāo)，來華留學(xué)生的思政教育的學(xué)習(xí)交互數(shù)據(jù)則包括師生交互數(shù)據(jù)、生生交互數(shù)據(jù)和人機交互數(shù)據(jù)，其中，人機交互數(shù)據(jù)包括鍵盤輸入、鼠標(biāo)位移、點擊流等數(shù)據(jù)，可利用大數(shù)據(jù)追蹤、云計算等手段進行采集，師生交互數(shù)據(jù)和生生交互數(shù)據(jù)主要包括言語信息和非言語交流兩類，可通過學(xué)生出勤頻次、師生互動頻次及時長、生生互動頻次及時長等指標(biāo)進行采集分析。

4.學(xué)習(xí)環(huán)境數(shù)據(jù)

學(xué)習(xí)環(huán)境數(shù)據(jù)以真實環(huán)境和網(wǎng)絡(luò)空間環(huán)境兩類數(shù)據(jù)為主。真實環(huán)境主要指線下的課堂環(huán)境，包括所處方位、溫度、光照等自然條件，也包括桌椅位置、教室裝飾等課堂環(huán)境；網(wǎng)絡(luò)空間環(huán)境指開展在線教學(xué)的網(wǎng)絡(luò)環(huán)境，包括直播平臺、自主學(xué)習(xí)平臺等數(shù)字空間，還包括網(wǎng)絡(luò)運行速度、運行狀態(tài)等影響因素。

(二)來華留學(xué)生思政教育多模態(tài)數(shù)據(jù)采集流程

多模態(tài)數(shù)據(jù)的采集與分析是多模態(tài)學(xué)習(xí)分析的基礎(chǔ)與關(guān)鍵，對揭示復(fù)雜環(huán)境下的學(xué)習(xí)行為和學(xué)習(xí)規(guī)律有直接影響。為全面收集、整合學(xué)習(xí)者的多模態(tài)數(shù)據(jù)，需充分利用現(xiàn)代信息技術(shù)，優(yōu)化數(shù)據(jù)采集流程，以更好發(fā)揮學(xué)習(xí)數(shù)據(jù)的價值，精準(zhǔn)科學(xué)地評估學(xué)習(xí)者的學(xué)習(xí)行為和狀態(tài)。來華留學(xué)生思政教育多模態(tài)數(shù)據(jù)采集流程可分為數(shù)據(jù)采集、數(shù)據(jù)預(yù)處理、數(shù)據(jù)分類、解釋分析四個過程，如圖2所示。

圖2 來華留學(xué)生思政教育多模態(tài)數(shù)據(jù)采集流程圖

1.數(shù)據(jù)采集：綜合利用腦電感應(yīng)、眼動追蹤等多模態(tài)生物識別技術(shù)和數(shù)據(jù)挖掘技術(shù)，采集線上、線下課堂以及各學(xué)習(xí)平臺中的留學(xué)生思政教育的相關(guān)學(xué)習(xí)數(shù)據(jù)，包括課堂學(xué)習(xí)表現(xiàn)、學(xué)習(xí)平臺登錄信息、日志文件等。由于研究中思政教育的對象是來自不同文化背景的留學(xué)生，在采集上述四類多模態(tài)學(xué)習(xí)數(shù)據(jù)的基礎(chǔ)上，還需采集學(xué)習(xí)者的基本信息數(shù)據(jù)，如國籍、性別、年齡、職業(yè)、學(xué)歷、漢語水平等，為學(xué)習(xí)分析提供全面系統(tǒng)的數(shù)據(jù)支撐。

2.數(shù)據(jù)預(yù)處理：對收集到的數(shù)據(jù)進行整理，清除無用的、不完整的、不一致的數(shù)據(jù)，確保數(shù)據(jù)真實有效。由于來華留學(xué)生思政教育具有對象多樣化、內(nèi)容多元化、環(huán)境復(fù)雜化等特點，數(shù)據(jù)種類繁復(fù)，體量龐大，且數(shù)據(jù)質(zhì)量不盡相同，更需要通過預(yù)處理將與最終決策相關(guān)性較低的數(shù)據(jù)去除，為分析計算提供可靠性較高的數(shù)據(jù)。

3.數(shù)據(jù)分類：不同類別的學(xué)習(xí)數(shù)據(jù)具有不同的表征形式，可基于某類主題將不同模態(tài)的數(shù)據(jù)分類存儲，形成滿足具體學(xué)習(xí)行為信息提取的數(shù)據(jù)分析環(huán)境，如依據(jù)留學(xué)生的基本信息、學(xué)習(xí)體征、學(xué)習(xí)環(huán)境等建立思政教育主題數(shù)據(jù)庫，并將各數(shù)據(jù)庫進行關(guān)聯(lián)，既可以實現(xiàn)分類處理，也可以滿足融合分析的需求。

4.解釋分析：通過上述數(shù)據(jù)處理分析得出結(jié)果，以可理解、可視化的方式呈現(xiàn)結(jié)果，基于分析結(jié)果解釋和預(yù)測學(xué)習(xí)者的學(xué)習(xí)軌跡、學(xué)習(xí)表現(xiàn)、學(xué)習(xí)參與度等。

四、多模態(tài)學(xué)習(xí)分析在來華留學(xué)生思政教育中的應(yīng)用

(一)來華留學(xué)生思政教育多模態(tài)學(xué)習(xí)分析框架構(gòu)建

來華留學(xué)生思政教育多模態(tài)學(xué)習(xí)分析框架是在采集多模態(tài)學(xué)習(xí)數(shù)據(jù)的基礎(chǔ)上，以多模態(tài)學(xué)習(xí)分析理論為指導(dǎo)，構(gòu)建以學(xué)習(xí)者為中心、以多模態(tài)學(xué)習(xí)數(shù)據(jù)為分析對象，以思政教育成效可視化輸出為目標(biāo)的分析框架，該框架致力于將復(fù)雜多元的數(shù)據(jù)轉(zhuǎn)化為可闡釋、可利用的教學(xué)信息，以跟蹤學(xué)習(xí)體驗，解釋和預(yù)測學(xué)習(xí)者的行為動態(tài)，從而科學(xué)精準(zhǔn)指導(dǎo)教學(xué)實踐。

來華留學(xué)生思政教育多模態(tài)學(xué)習(xí)分析框架從下往上依次為：多模態(tài)數(shù)據(jù)采集層、多模態(tài)數(shù)據(jù)管理層、多模態(tài)數(shù)據(jù)分析與展現(xiàn)層和多模態(tài)數(shù)據(jù)應(yīng)用服務(wù)層。數(shù)據(jù)采集層將采集到的各類學(xué)習(xí)數(shù)據(jù)傳遞給數(shù)據(jù)管理層，并通過數(shù)據(jù)整合、存儲形成數(shù)據(jù)庫，教師或教學(xué)管理者可基于多模態(tài)學(xué)習(xí)數(shù)據(jù)庫進行分析評估，在分析與展現(xiàn)層實現(xiàn)學(xué)習(xí)數(shù)據(jù)的可視化呈現(xiàn)，并將分析結(jié)果傳遞給應(yīng)用服務(wù)層。總體而言，每個環(huán)節(jié)都有明確的研究任務(wù)和分析目標(biāo)，各個階段相互影響、層層遞進，形成了一個系統(tǒng)的分析框架，具體如圖3所示。

圖3 來華留學(xué)生思政教育多模態(tài)學(xué)習(xí)分析框架

1.多模態(tài)數(shù)據(jù)采集層

主要通過攝像頭、麥克風(fēng)、腦電設(shè)備、眼動設(shè)備、心理傳感器等模態(tài)傳感器，并利用人工智能、大數(shù)據(jù)深度挖掘和區(qū)塊鏈等技術(shù)，對學(xué)習(xí)者行為及其環(huán)境數(shù)據(jù)進行采集。為了保證學(xué)習(xí)數(shù)據(jù)的系統(tǒng)性和科學(xué)性，數(shù)據(jù)采集環(huán)節(jié)應(yīng)該規(guī)范數(shù)據(jù)格式進行預(yù)處理，如基于來華留學(xué)生思政教育的個性化、差異化特征鮮明，依據(jù)國別區(qū)域、語言水平、個體學(xué)習(xí)表現(xiàn)等字段建立主題數(shù)據(jù)庫，反映學(xué)習(xí)個體及群體的學(xué)習(xí)現(xiàn)狀與規(guī)律，也便于后續(xù)多模態(tài)數(shù)據(jù)的存儲、管理與應(yīng)用。

2.多模態(tài)數(shù)據(jù)管理層主要包含數(shù)據(jù)標(biāo)注、數(shù)據(jù)整合和數(shù)據(jù)儲存

(1)數(shù)據(jù)標(biāo)注是將收集到的數(shù)據(jù)轉(zhuǎn)換為可用于學(xué)習(xí)分析的數(shù)據(jù)標(biāo)簽，這一過程可借助Elan、Anvil等多模態(tài)注解技術(shù)劃分不同模態(tài)的數(shù)據(jù)，再由專家、教師或教學(xué)管理者對數(shù)據(jù)進行判斷和注釋，將包括語音、圖片、文本、視頻等在內(nèi)的學(xué)習(xí)數(shù)據(jù)轉(zhuǎn)換為機器可識別的信息。

(2)數(shù)據(jù)整合是在數(shù)據(jù)標(biāo)注的基礎(chǔ)上，根據(jù)一定的規(guī)則對多個數(shù)據(jù)集進行重新融合，從整體保證數(shù)據(jù)的一致性和相關(guān)性。如將反映情感態(tài)度的數(shù)據(jù)信息進行合并，對比分析留學(xué)生的情感態(tài)度變化，也可通過數(shù)據(jù)發(fā)現(xiàn)留學(xué)生更易于接受和理解的思政內(nèi)容。

(3)數(shù)據(jù)存儲是所有數(shù)據(jù)的集中存放地，主要用來存放各種歷史數(shù)據(jù)、匯總數(shù)據(jù)、預(yù)測數(shù)據(jù)等，可通過集群應(yīng)用、網(wǎng)絡(luò)技術(shù)和分布式文件系統(tǒng)等功能，集合不同的學(xué)習(xí)數(shù)據(jù)庫，并提供業(yè)務(wù)訪問功能以滿足學(xué)習(xí)分析的需求。由于思政教育強調(diào)“全過程育人”，學(xué)習(xí)數(shù)據(jù)的儲存尤為重要，不僅包括學(xué)習(xí)者個體信息、思政內(nèi)容等基本資料，還包括語言、表情、動作等學(xué)習(xí)者數(shù)據(jù)，以保證全面、立體地刻畫思政教育的全過程。

3.多模態(tài)數(shù)據(jù)分析與展現(xiàn)層是對處理后的多模態(tài)學(xué)習(xí)數(shù)據(jù)進行分析評估

(1)學(xué)習(xí)分析是指通過測量、收集、分析、匯報學(xué)習(xí)者和他們所處環(huán)境的數(shù)據(jù)，用以理解和優(yōu)化學(xué)習(xí)以及學(xué)習(xí)發(fā)生的環(huán)境(22)Siemens G,Long P.Penetrating the fog:Analytics in learning and education[J].Educause Review,2011,(5).，研究者可使用包括多元回歸分析、分類聚類、文本內(nèi)容分析及社會網(wǎng)絡(luò)分析等多種方法處理分析多模態(tài)數(shù)據(jù)集。為全面客觀地評估留學(xué)生思政教育成效，應(yīng)綜合考量資源使用、學(xué)習(xí)投入、社會互動、情緒分析、認(rèn)知負(fù)荷等評價指標(biāo)，形成一個完整、可信的多模態(tài)學(xué)習(xí)分析數(shù)據(jù)庫。

(2)可視化是將數(shù)據(jù)轉(zhuǎn)換成圖形或圖像在屏幕上顯示出來，是對數(shù)據(jù)世界的“透視”或“顯像”。文章的學(xué)習(xí)分析對象為來華留學(xué)生在思政教育的學(xué)習(xí)體驗，分析目標(biāo)是解釋和預(yù)測留學(xué)生的學(xué)習(xí)行為、思想動態(tài)等，利用數(shù)據(jù)可視化技術(shù)能夠以更加直觀、更易于理解的方式呈現(xiàn)學(xué)習(xí)者的內(nèi)在心理、生理表現(xiàn)，預(yù)測留學(xué)生的行為發(fā)展趨勢，為下一步的教學(xué)決策提供指導(dǎo)。

4.多模態(tài)數(shù)據(jù)應(yīng)用服務(wù)層是將分析結(jié)果進行反饋解釋，以引導(dǎo)學(xué)習(xí)者做出一些新的學(xué)習(xí)行為，分為教學(xué)服務(wù)和發(fā)展服務(wù)兩大模塊：教學(xué)服務(wù)模塊即多模態(tài)學(xué)習(xí)分析主要應(yīng)用于挖掘思政要素，豐富教學(xué)內(nèi)容，構(gòu)建多模態(tài)教學(xué)環(huán)境，增強體驗感和交互性以及全面評價學(xué)習(xí)行為及學(xué)習(xí)過程，實現(xiàn)精準(zhǔn)教學(xué)和科學(xué)管理；發(fā)展服務(wù)模塊即基于分析結(jié)果提供個性化學(xué)習(xí)服務(wù)、信息分析和共享服務(wù)以及學(xué)習(xí)者行為動態(tài)的監(jiān)測和預(yù)警服務(wù)。

總體而言，將多模態(tài)學(xué)習(xí)分析的結(jié)果用于改善實際的留學(xué)生思政教育工作，有助于推動留學(xué)生思政教育的全面改革和科學(xué)化、精準(zhǔn)化發(fā)展。如教師可結(jié)合教學(xué)理論、學(xué)習(xí)分析理論解釋可視化分析結(jié)果中的關(guān)鍵發(fā)現(xiàn)，將結(jié)果用于指導(dǎo)思政教育的學(xué)習(xí)活動層面，以改進教學(xué)策略，優(yōu)化教學(xué)計劃，完善課程的設(shè)計與開發(fā)；還可預(yù)測留學(xué)生的學(xué)習(xí)傾向、思想行為發(fā)展趨勢，為其推薦個性化的學(xué)習(xí)資源、學(xué)習(xí)任務(wù)和學(xué)習(xí)路徑，以更好地滿足其個性化學(xué)習(xí)需求，提升精準(zhǔn)思政的實效。

(二)來華留學(xué)生思政教育多模態(tài)學(xué)習(xí)分析的基本原則

為了保證多模態(tài)學(xué)習(xí)分析的科學(xué)性和有效性，結(jié)合留學(xué)生思政教育的特點，在分析過程中需要遵守四個基本原則，即科學(xué)性原則、系統(tǒng)性原則、個性化原則和動態(tài)性原則。

1.科學(xué)性原則

科學(xué)性原則指多模態(tài)學(xué)習(xí)分析的評價指標(biāo)覆蓋是否全面，用于評價的數(shù)據(jù)來源是否真實可靠，學(xué)習(xí)評價的結(jié)果能否真實反映留學(xué)生的學(xué)習(xí)狀態(tài)及其思想價值、態(tài)度行為的發(fā)展變化。留學(xué)生思政教育的多模態(tài)學(xué)習(xí)數(shù)據(jù)龐雜，除了學(xué)習(xí)者個體差異，還有如知識課程、技能課程和實踐課程的課程類別差異，且不同課程涉及的思政要素及其表現(xiàn)形式也各有不同，處理難度較大。因此，要盡可能遵循科學(xué)性原則，一方面保證數(shù)據(jù)來源真實可靠，減少冗余數(shù)據(jù)的干擾；另一方面合理選擇數(shù)據(jù)處理方法，如融合R語言、云計算等形式，提高數(shù)據(jù)分析處理的效果。

2.系統(tǒng)性原則

面向留學(xué)生開展的思政教育是以課程思政為載體，為留學(xué)生提供中國視角的認(rèn)知方式、知識體系和價值引領(lǐng)，使其了解、理解和認(rèn)同中國，這是一項系統(tǒng)工程，其最終成效通常受多種因素影響。因此，系統(tǒng)性原則要求在進行多模態(tài)學(xué)習(xí)分析前應(yīng)全面收集信息，綜合分析學(xué)習(xí)者、教學(xué)資源、教學(xué)環(huán)境等多種因素的相互關(guān)系，融合多種模態(tài)數(shù)據(jù)進行計算分析，做出系統(tǒng)評價。同時，留學(xué)生思政教育的成效是潛移默化的，更多是以內(nèi)隱的生理、心理特征形式展現(xiàn)，因而系統(tǒng)性也強調(diào)全方位、全模態(tài)、全周期并具有高度適應(yīng)性的評價，將評價作為教育教學(xué)活動的重要組成部分，貫穿于教學(xué)的各個環(huán)節(jié)。

3.個性化原則

個性化原則強調(diào)多模態(tài)學(xué)習(xí)分析應(yīng)考慮留學(xué)生的個體特征，在堅持系統(tǒng)性評價分析的基礎(chǔ)上尊重差異。從客觀環(huán)境來看，各個國家、地區(qū)之間存在較大的政治、經(jīng)濟、語言文化、硬軟件設(shè)施等方面的差異；從留學(xué)生個體來看，受教育程度、學(xué)習(xí)需求、學(xué)習(xí)動機等個性化特征鮮明。因此，多模態(tài)學(xué)習(xí)分析在確定和選用評價標(biāo)準(zhǔn)和評價方式時，應(yīng)在達到最低教學(xué)要求的基礎(chǔ)上，考慮留學(xué)生的個性和創(chuàng)造性發(fā)展，如根據(jù)個體需求，在國情文化、社會熱點等問題上分類教學(xué)，提升教學(xué)內(nèi)容的針對性；還可以對比不同留學(xué)生的學(xué)習(xí)特征，總結(jié)其學(xué)習(xí)規(guī)律，提供具有個體適應(yīng)性的教學(xué)形式。

4.動態(tài)性原則

動態(tài)性原則強調(diào)要以發(fā)展的眼光對待分析結(jié)果，以結(jié)果促進思政教育的優(yōu)化發(fā)展。一方面，思政教育作為一項立德樹人的系統(tǒng)工程，難以基于短期、片面的學(xué)習(xí)數(shù)據(jù)開展評估，依據(jù)動態(tài)性原則，用于學(xué)習(xí)分析的多模態(tài)數(shù)據(jù)要保持更新發(fā)展，以保證真實、及時地追蹤留學(xué)生學(xué)習(xí)行為、思想態(tài)度的變化發(fā)展，為教師優(yōu)化教學(xué)過程、學(xué)習(xí)者監(jiān)控學(xué)習(xí)進度提供參考；另一方面，動態(tài)性原則也強調(diào)緊跟時代前沿，及時發(fā)現(xiàn)、整合最新的數(shù)據(jù)計算分析方法和技術(shù)手段，擴充算法模型，不斷提高數(shù)據(jù)分析的質(zhì)量以達到能夠精準(zhǔn)預(yù)測學(xué)習(xí)者行為表現(xiàn)，最大化實現(xiàn)多模態(tài)數(shù)據(jù)的教育價值。

(三)多模態(tài)學(xué)習(xí)分析賦能精準(zhǔn)思政

基于留學(xué)生思政教育多模態(tài)學(xué)習(xí)分析框架和分析原則，結(jié)合留學(xué)生思政教育的特點，本部分將重點探討多模態(tài)學(xué)習(xí)分析如何從豐富教學(xué)內(nèi)容、塑造教學(xué)環(huán)境、解釋學(xué)習(xí)過程、預(yù)測發(fā)展趨勢等方面賦能精準(zhǔn)思政。

1.挖掘思政元素，針對性生成教學(xué)內(nèi)容

思政要素的挖掘是思政教育的重要環(huán)節(jié)，基于多模態(tài)學(xué)習(xí)分析，可明確學(xué)生對語言、文化、國情等知識點的學(xué)習(xí)興趣和學(xué)習(xí)訴求，指導(dǎo)教師調(diào)整教學(xué)重點與難點，有針對性地設(shè)計思政教育的素材內(nèi)容和呈現(xiàn)形式。

一方面，可借助多模態(tài)數(shù)據(jù)挖掘技術(shù)，結(jié)合不同課程的內(nèi)容特點、價值理念和教學(xué)目標(biāo)，利用統(tǒng)計分析、關(guān)聯(lián)規(guī)則、頻繁訪問組、聚類分析等方法，從大量的、隨機的數(shù)據(jù)中提取有用的信息和知識，構(gòu)建留學(xué)生思政教育數(shù)據(jù)資源庫，以保證收集到盡可能多的思政要素，豐富課程內(nèi)容。如通過分析進一步發(fā)現(xiàn)教學(xué)過程中成效顯著和成效一般的思政元素，并基于此從傳統(tǒng)文化、價值觀念、國家治理、科技進步、社會發(fā)展風(fēng)貌、風(fēng)土人情、生活方式等方面全方位開發(fā)多模態(tài)教學(xué)資源，推動文本形式的課程思政元素轉(zhuǎn)為多元媒體的呈現(xiàn)形式。另一方面，面向留學(xué)生開展的思政教育還應(yīng)考慮留學(xué)生的認(rèn)知水平、思維習(xí)慣、語言文化等差異特征，注意思政內(nèi)容的適用性、針對性。如教師和教學(xué)管理者可以在多模態(tài)數(shù)據(jù)整合過程中按照國別、年齡、語言水平等基本信息建立學(xué)習(xí)者個人檔案信息庫，并將不同子庫鏈接起來，既可以基于分析結(jié)果描繪單一個體學(xué)習(xí)者畫像，也可以發(fā)現(xiàn)某一國別、區(qū)域?qū)W習(xí)者的認(rèn)知偏好，采集并推送符合其學(xué)習(xí)需求和興趣偏好的思政內(nèi)容。

2.塑造多模態(tài)教學(xué)環(huán)境，增強體驗感和交互性

多模態(tài)學(xué)習(xí)分析基于信息化、智能化的基礎(chǔ)設(shè)施開展教學(xué)，在教學(xué)過程中動態(tài)收集學(xué)習(xí)者及其所處環(huán)境的相關(guān)數(shù)據(jù)，并基于分析結(jié)果為師生創(chuàng)設(shè)更加多元、真實的教學(xué)環(huán)境，為師生交流、知識講授提供便利。

目前，來華留學(xué)生思政教育面臨線上線下融合的復(fù)雜教學(xué)環(huán)境，借助多模態(tài)學(xué)習(xí)分析結(jié)果，可有效整合文本、圖片、聲音、影像多模態(tài)符號資源，以“多模態(tài)協(xié)同”的方式構(gòu)建教學(xué)環(huán)境。教師可以在課堂中充分利用人工智能、5G等現(xiàn)代信息技術(shù)，借助教學(xué)平臺、學(xué)習(xí)網(wǎng)站和移動APP等智能設(shè)施全方位鏈接物理空間與網(wǎng)絡(luò)空間，拉近師生互動的時空距離，打造云端思想政治教育仿真實踐場，如教師可以引導(dǎo)留學(xué)生云參觀慶祝改革開放40周年大型展覽，帶領(lǐng)學(xué)習(xí)者全景式回顧中國社會的發(fā)展變化，使其身臨其境地感受，增強思想感染力和引導(dǎo)力。

3.監(jiān)測學(xué)習(xí)過程，評估學(xué)習(xí)行為

教學(xué)評價是教學(xué)的風(fēng)向標(biāo)和測量儀，解釋和評估學(xué)習(xí)者的學(xué)習(xí)行為，再現(xiàn)學(xué)習(xí)過程，是留學(xué)生思政教育的重點，也是難點。多模態(tài)學(xué)習(xí)分析將現(xiàn)代信息技術(shù)融入思政教育，將數(shù)據(jù)轉(zhuǎn)化為可解讀的信息資源，以可視化的形式反饋給教學(xué)主體，幫助監(jiān)測學(xué)習(xí)過程，評估學(xué)習(xí)行為。

教師和教學(xué)管理者可借助智能工具觀察留學(xué)生在學(xué)習(xí)過程中的思想波動與情緒變化，掌握其日常行為數(shù)據(jù)，從思想與行為、過程與結(jié)果、現(xiàn)狀與趨勢等諸多維度進行評價分析，跟蹤留學(xué)生的學(xué)習(xí)參與、合作學(xué)習(xí)和師生互動等情況。此外，多模態(tài)學(xué)習(xí)分析基于多模態(tài)數(shù)據(jù)集全周期、全過程地追蹤學(xué)習(xí)行為，教師可基于留學(xué)生思政教育全過程的持續(xù)觀察、記錄、反思做出發(fā)展性評價，隨時了解留學(xué)生的學(xué)習(xí)進展情況，獲得連續(xù)反饋，為教師及時調(diào)整教學(xué)計劃、改進教學(xué)方法提供數(shù)據(jù)支撐。

4.預(yù)測發(fā)展趨勢，建立干預(yù)機制

來華留學(xué)生思政教育應(yīng)做到全過程育人、全方位育人，將思想教育內(nèi)容內(nèi)化于對留學(xué)生教育、教學(xué)、管理和服務(wù)的全過程，促進留學(xué)生綜合素質(zhì)的全面發(fā)展，這一過程中應(yīng)實時監(jiān)測學(xué)習(xí)者的學(xué)習(xí)狀態(tài)，預(yù)測其行為發(fā)展趨勢，及時實施干預(yù)。

多模態(tài)學(xué)習(xí)分析利用信息技術(shù)追蹤留學(xué)生在各種社交平臺的信息數(shù)據(jù)記錄，幫助教師更好地觀察、了解、分析學(xué)習(xí)過程，并通過深入挖掘和分析這些數(shù)據(jù)，第一時間掌握留學(xué)生的思想動態(tài)和生活近況。同時，基于對留學(xué)生多模態(tài)學(xué)習(xí)數(shù)據(jù)的處理分析，教師能有效監(jiān)測學(xué)生思想意識形態(tài)的發(fā)展變化，預(yù)測留學(xué)生在學(xué)習(xí)過程中的危機，及時發(fā)送預(yù)警信號，并發(fā)揮校內(nèi)外主體協(xié)同聯(lián)動作用，建立針對性的干預(yù)機制，在共同的規(guī)則、共同的文化、共同的要求的規(guī)范和熏陶下，幫助來華留學(xué)生了解中國國情文化，增強思想教育實效。

五、結(jié) 語

留學(xué)生思想政治教育是一項必要且重要的工作，但面臨線上線下融合的復(fù)雜教學(xué)環(huán)境，如何評估留學(xué)生的學(xué)習(xí)態(tài)度、情感投入以及行為特征以落實思政教育成效，值得進一步深入研究。多模態(tài)學(xué)習(xí)分析利用智能傳感設(shè)備和分析技術(shù)再現(xiàn)學(xué)習(xí)生態(tài)的全貌，為全方位評測思政教育成效，全過程監(jiān)測學(xué)生思想狀態(tài)提供了有效途徑。文章利用多模態(tài)學(xué)習(xí)分析理論及方法，對思政教育過程中產(chǎn)生的多模態(tài)學(xué)習(xí)數(shù)據(jù)進行采集、整合、處理和分析，監(jiān)測分析學(xué)習(xí)過程，預(yù)測學(xué)習(xí)者的思想動態(tài)，為教學(xué)主體提供教學(xué)支持和導(dǎo)學(xué)服務(wù)，以優(yōu)化思政教育過程。隨著大數(shù)據(jù)、人工智能、云計算等現(xiàn)代信息技術(shù)的持續(xù)發(fā)展與廣泛應(yīng)用，多模態(tài)學(xué)習(xí)分析理論方法不斷趨于成熟，能夠為實現(xiàn)精準(zhǔn)思政提供技術(shù)支撐和理論指導(dǎo)，為來華留學(xué)生思政教育創(chuàng)新研究提供強大動力。