鄭 可，程啟翔

(國防科技大學(xué) 教學(xué)考評(píng)中心，湖南 長沙 410073)

一、引言

為實(shí)現(xiàn)防衛(wèi)協(xié)作，北約依托各成員國現(xiàn)有軍事框架和力量構(gòu)建了較為完備的指揮體系(NATO Command Structure，NCS)和部隊(duì)體系(NATO Force Structure，NFS)。北約根據(jù)權(quán)限和任務(wù)需要統(tǒng)一協(xié)調(diào)、組織和使用成員國的軍事人力、設(shè)施、情報(bào)等資源。但由于各國軍隊(duì)在作戰(zhàn)訓(xùn)練、組織結(jié)構(gòu)、條令條例、語言文化等方面存在較大差異，如何在異構(gòu)的國家軍事體系基礎(chǔ)上組成一支聯(lián)盟軍隊(duì)并在北約環(huán)境下有效形成合力，成為亟待解決的問題[1]。北約認(rèn)為教育訓(xùn)練是解決以上問題的關(guān)鍵，并視軍事人員的教育訓(xùn)練為其戰(zhàn)略重心之一[2]。為此，北約著眼新的使命任務(wù)要求，順應(yīng)學(xué)習(xí)發(fā)展趨勢(shì)，結(jié)合軍事預(yù)算削減實(shí)際，充分利用科技創(chuàng)新手段，依托現(xiàn)有教育訓(xùn)練機(jī)構(gòu)，構(gòu)建了滿足聯(lián)盟需要的在線教育體系。作為北約軍事教育訓(xùn)練的重要組成部分，北約在線教育采用基于系統(tǒng)的課程開發(fā)與實(shí)施流程，大力推行基于評(píng)估和認(rèn)證的質(zhì)量保障舉措，著力發(fā)展優(yōu)質(zhì)高效低成本的教育訓(xùn)練解決方案，最終實(shí)現(xiàn)以盡可能低成本的方式在正確的時(shí)間和正確的地點(diǎn)為正確的人員提供正確的教育訓(xùn)練[3]。

二、北約的軍事教育訓(xùn)練

北約認(rèn)為，教育訓(xùn)練(Education and Training，E&T)是其根據(jù)目標(biāo)層次(Level of Ambition，LOA)，針對(duì)當(dāng)前和未來任務(wù)使命，提高指揮體系和部隊(duì)體系戰(zhàn)備水平的重要手段，旨在打造反應(yīng)迅速、效能突出、互操作性好的指揮和作戰(zhàn)力量[4]。北約的教育訓(xùn)練活動(dòng)能夠加強(qiáng)成員國與伙伴國家和非北約實(shí)體①(Non-NATO Entities，NNE)之間的關(guān)系，進(jìn)一步提升安全事務(wù)合作水平。按照參訓(xùn)方式，北約教育訓(xùn)練活動(dòng)劃分為個(gè)人和集體2種類別。在此之下，又細(xì)分為4種組織形式，分別是教育、個(gè)人訓(xùn)練、集體訓(xùn)練和演習(xí)，具體定義見表1。從定義和劃分來看，北約的軍事教育與軍事訓(xùn)練是相對(duì)應(yīng)的概念，共同屬于北約人才培養(yǎng)體系的一部分。北約的軍事教育以培養(yǎng)軍事人才為核心，旨在增進(jìn)軍事知識(shí)、培養(yǎng)軍事能力的活動(dòng)，更多針對(duì)個(gè)體，以培養(yǎng)個(gè)體素質(zhì)為主。軍事訓(xùn)練則是以提高作戰(zhàn)能力為核心，對(duì)軍事人員個(gè)體和集體進(jìn)行的各種訓(xùn)演活動(dòng)的統(tǒng)稱，更多針對(duì)集體，以提高集體作戰(zhàn)能力為主。

表1 北約教育訓(xùn)練活動(dòng)類型

總體看，北約的教育訓(xùn)練(Education & Training，E&T)從軍人職業(yè)發(fā)展角度出發(fā)，著眼當(dāng)前和未來任務(wù)使命，綜合運(yùn)用教育、個(gè)人訓(xùn)練、集體訓(xùn)練和演習(xí)等形式，著力提升官兵崗位任職能力，提高指揮體系與部隊(duì)體系戰(zhàn)備水平。由于北約本身幾乎不承擔(dān)軍事人才的基礎(chǔ)性培養(yǎng)等工作，因此北約的教育訓(xùn)練體系中并不包括生長軍官教育、研究生教育等內(nèi)容，與我軍院校教育相比，其范疇較窄，側(cè)重于崗位任職教育。我軍的軍事職業(yè)教育大致對(duì)應(yīng)北約的教育和個(gè)人訓(xùn)練部分。北約的集體訓(xùn)練和演習(xí)大致對(duì)應(yīng)我軍的部隊(duì)訓(xùn)練實(shí)踐，通過實(shí)施有組織的集體訓(xùn)練和聯(lián)合演習(xí)活動(dòng)，連接訓(xùn)練場(chǎng)與戰(zhàn)場(chǎng)、平時(shí)與戰(zhàn)時(shí)，最終借助訓(xùn)練實(shí)踐來轉(zhuǎn)化知識(shí)，檢驗(yàn)?zāi)芰?，提升素質(zhì)。

三、北約的在線教育

在2003年北約盟軍轉(zhuǎn)型司令部(Allied Command Transformation，ACT)成立之初，北約軍事委員會(huì)就寄希望于該機(jī)構(gòu)能夠幫助北約實(shí)現(xiàn)軍事教育訓(xùn)練政策、能力和實(shí)施的轉(zhuǎn)型，從而確保北約及其成員國的指揮和部隊(duì)體系做好充分準(zhǔn)備，應(yīng)對(duì)未來使命挑戰(zhàn)。作為轉(zhuǎn)型任務(wù)的重要一環(huán)，在線教育以其靈活性、低成本和高效率等優(yōu)點(diǎn)，極大拓展了北約教育訓(xùn)練“工具箱”，為分散在世界各地的學(xué)員提供接受教育的新渠道[5]。

(一)機(jī)構(gòu)及職責(zé)

從管理機(jī)構(gòu)看，北約ACT是領(lǐng)導(dǎo)和管理在線教育能力的常設(shè)機(jī)構(gòu)，具體由ACT分管聯(lián)合部隊(duì)發(fā)展的副參謀長總體負(fù)責(zé)(DCOS JFD)，旨在加強(qiáng)在線教育管理的統(tǒng)籌協(xié)調(diào)，著力在更廣范圍內(nèi)提升軍事人員能力素質(zhì)[6]。ACT在戰(zhàn)略上把握、指導(dǎo)和支持在線教育。鑒于教育訓(xùn)練機(jī)構(gòu)對(duì)于在線教育支持有特殊的需求，北約致力于引導(dǎo)教育訓(xùn)練機(jī)構(gòu)建設(shè)核心分布式在線教育能力，指導(dǎo)與協(xié)調(diào)教育訓(xùn)練機(jī)構(gòu)在線教育事務(wù)，并通過計(jì)劃、協(xié)調(diào)、建立和發(fā)布北約通用的在線教育標(biāo)準(zhǔn)和規(guī)范，引領(lǐng)在線教育技術(shù)發(fā)展，指導(dǎo)和實(shí)施在線課程評(píng)價(jià)，開展在線學(xué)習(xí)課程認(rèn)證，著力提升互操作性、適應(yīng)性和復(fù)用性。同時(shí)，ACT著力提升在線學(xué)習(xí)管理系統(tǒng)服務(wù)端能力，滿足北約各教育訓(xùn)練機(jī)構(gòu)在線教育部署所需，見圖1。

圖1 北約在線教育的領(lǐng)導(dǎo)與實(shí)施機(jī)構(gòu)

從具體實(shí)施來看，北約的教育訓(xùn)練機(jī)構(gòu)(Education and Training Facilities，ETFs)是在線教育的主要承擔(dān)機(jī)構(gòu)，提供各類在線教育訓(xùn)練課程，主要包括3大類。一是北約內(nèi)設(shè)的教育訓(xùn)練機(jī)構(gòu)，主要有北約防務(wù)學(xué)院(NDC)、北約上阿瑪高學(xué)校(NSO)、北約通信與信息系統(tǒng)學(xué)校(NCISS)、北約海上攔截作戰(zhàn)訓(xùn)練中心(NMIOTC)、聯(lián)合作戰(zhàn)中心(JWC)和聯(lián)合部隊(duì)訓(xùn)練中心(JFTC)等；二是通過北約認(rèn)證的卓越中心(Centres of Excellence, COEs)，截止2020年2月，共有25家，具體見表2；三是伙伴關(guān)系教育訓(xùn)練中心(Partnership Training and Education Centres, PTECs)，目前共有33家，其中北約成員國16家，伙伴計(jì)劃國17家[7]。除此之外，必要時(shí)還可以包括北約成員的國家或多邊訓(xùn)練機(jī)構(gòu)、其他符合北約流程和標(biāo)準(zhǔn)的伙伴國和非北約實(shí)體國家教育訓(xùn)練機(jī)構(gòu)、通過提供教育和個(gè)人訓(xùn)練解決方案直接支持北約的其他補(bǔ)充性機(jī)構(gòu)和資產(chǎn)等。這些組織機(jī)構(gòu)歸屬于不同實(shí)體的不同部門，但由轉(zhuǎn)型司令部負(fù)責(zé)總體協(xié)調(diào)并尋求北約范圍內(nèi)統(tǒng)一。

表2 北約認(rèn)證卓越中心[8]

續(xù)表2

續(xù)表2

(二)條令法規(guī)

為指導(dǎo)在線教育活動(dòng)開展，北約制定和頒布了一系列條令法規(guī)。北約軍事委員會(huì)458號(hào)文件《教育訓(xùn)練政策》是北約關(guān)于教育與訓(xùn)練的拱頂石文件，為北約所有的教育訓(xùn)練活動(dòng)提供戰(zhàn)略層面政策支撐。兩大戰(zhàn)略司令部聯(lián)合發(fā)布75-2號(hào)《教育與訓(xùn)練指示》，是北約教育訓(xùn)練的核心文件，描述了教育訓(xùn)練的計(jì)劃、流程和政策等，助力達(dá)成作戰(zhàn)和轉(zhuǎn)型目標(biāo)，為下屬部門指揮官及其參謀人員組織實(shí)施教育訓(xùn)練活動(dòng)提供關(guān)鍵的戰(zhàn)略方向和指導(dǎo)[9]。北約戰(zhàn)略司令部75-7號(hào)文件《教育與個(gè)人訓(xùn)練指示》，是北約教育與個(gè)人訓(xùn)練計(jì)劃的核心文件，就北約教育與個(gè)人訓(xùn)練的流程和原則提供指導(dǎo)，促進(jìn)北約及其成員國和伙伴國按照北約標(biāo)準(zhǔn)協(xié)同行動(dòng)，提升教育與個(gè)人訓(xùn)練活動(dòng)的有效性[10]。依據(jù)北約軍事委員會(huì)和兩大戰(zhàn)略司令部制定有關(guān)教育訓(xùn)練政策和指令，北約各機(jī)構(gòu)制定了一系列關(guān)于在線教育的具體規(guī)定和標(biāo)準(zhǔn)。2013年頒布的《北約標(biāo)準(zhǔn)-2591》，采用共享內(nèi)容對(duì)象參考模型(SCORM)1.2版和2004版為在線學(xué)習(xí)課程開發(fā)標(biāo)準(zhǔn)，確保北約和成員國間開發(fā)的在線課程能夠在不同學(xué)習(xí)管理系統(tǒng)相互兼容共享[11]。2014年北約發(fā)布的《在線學(xué)習(xí)構(gòu)想》，是引領(lǐng)在線教育實(shí)踐發(fā)展的藍(lán)圖[12]。2019年北約轉(zhuǎn)型司令部訓(xùn)練工作組發(fā)布《北約先進(jìn)分布式學(xué)習(xí)手冊(cè)》，具體指導(dǎo)有關(guān)教育訓(xùn)練機(jī)構(gòu)和人員開發(fā)、采購、實(shí)施和評(píng)估在線教育[13]。各條令法規(guī)之間關(guān)系見圖2。

圖2 北約在線教育條令法規(guī)體系

(三)在線教育平臺(tái)

為提供便捷的在線教育服務(wù)，北約轉(zhuǎn)型司令部依托內(nèi)部網(wǎng)和互聯(lián)網(wǎng)，建立了面向北約及其伙伴國軍事人員的在線教育平臺(tái)。北約范圍內(nèi)，符合條件的學(xué)員可以通過該平臺(tái)進(jìn)行注冊(cè)和登錄，并根據(jù)自身需求選擇相應(yīng)的在線課程進(jìn)行學(xué)習(xí)。截止2020年2月，北約通過在線教育平臺(tái)對(duì)軍隊(duì)和軍事相關(guān)人員開放的課程一共有102門，分屬不同專業(yè)[14]。專業(yè)是北約認(rèn)可的知識(shí)和技能體系，基本描述了現(xiàn)有和不斷發(fā)展的教育訓(xùn)練需求。北約的專業(yè)結(jié)構(gòu)相對(duì)穩(wěn)定，但各個(gè)專業(yè)中的教育訓(xùn)練需求會(huì)隨著時(shí)間變化而變化，以滿足北約的政治和軍事要求。專業(yè)列表由北約軍事委員會(huì)每年審定批準(zhǔn)。為簡化管理，所有需求在區(qū)別和分類以后，按照戰(zhàn)略司令部的專業(yè)列表進(jìn)行歸類。專業(yè)涵蓋北約所有的教育訓(xùn)練需求，每年都會(huì)進(jìn)行重新審閱和修訂[15]。在教育訓(xùn)練體系中確定的30個(gè)專業(yè)中，北約在其中19個(gè)專業(yè)開設(shè)了在線教育計(jì)劃，每個(gè)專業(yè)由若干門在線課程組成，有效提高在線教育的涵蓋的專業(yè)范圍。為提升在線學(xué)習(xí)課程的質(zhì)量，北約在對(duì)其中符合條件的課程進(jìn)行了認(rèn)證，目前已認(rèn)證課程22門。所有已認(rèn)證課程均已納入北約教育與訓(xùn)練課程目錄(Education and Training Opportunity Catalogue，ETOC)，進(jìn)入北約正式任職培訓(xùn)教育課程名單[16]。除在線學(xué)習(xí)平臺(tái)之外，北約部分教育訓(xùn)練機(jī)構(gòu)還根據(jù)實(shí)際需要通過其他渠道開設(shè)了相應(yīng)的在線學(xué)習(xí)或混合學(xué)習(xí)課程，但并未在平臺(tái)上進(jìn)行發(fā)布，這些課程也屬于在線教育計(jì)劃的一部分。

四、北約在線教育質(zhì)量保障體系

(一)基于SAT的課程組織實(shí)施框架

北約規(guī)定，包括在線教育在內(nèi)的所有教育和個(gè)人訓(xùn)練活動(dòng)，都必須按照系統(tǒng)訓(xùn)練方法(System Approach to Training，SAT)模型進(jìn)行定義、設(shè)計(jì)、開發(fā)、實(shí)施、評(píng)價(jià)、認(rèn)證和管理[17]。作為一整套教育訓(xùn)練框架，SAT聚焦于作戰(zhàn)需要和組織要求，融合了教學(xué)方法和學(xué)習(xí)理論，為開發(fā)課程提供標(biāo)準(zhǔn)化的可復(fù)制程序，能夠有效促進(jìn)知識(shí)、技能、態(tài)度等從學(xué)習(xí)環(huán)境向真實(shí)世界轉(zhuǎn)移，確保教學(xué)質(zhì)量。SAT是不斷迭代、交互的系列活動(dòng)的合集，從確定對(duì)課程的需求，到定義、開發(fā)和實(shí)施高效、優(yōu)質(zhì)的課程來滿足需求，每個(gè)步驟看起來有規(guī)定的順序，但在實(shí)踐中通常并發(fā)運(yùn)行，構(gòu)成一個(gè)連續(xù)整體，見圖3。北約認(rèn)為，作為教育訓(xùn)練活動(dòng)的一種形式，在線教育活動(dòng)的組織實(shí)施也應(yīng)遵循SAT框架。該框架能夠描述在線教育活動(dòng)開始、實(shí)施和評(píng)估的全流程。

圖3 北約系統(tǒng)訓(xùn)練方法流程

需求分析是在線課程開發(fā)的前提。必須首先摸清預(yù)期能力水平與現(xiàn)有能力水平之間存在的差距，并且驗(yàn)證這種差距是否能夠能否通過在線教育來彌補(bǔ)。分析階段主要任務(wù)是生成清晰準(zhǔn)確的能力目標(biāo)，即要達(dá)到的崗位能力水平，旨在彌補(bǔ)存在的能力差距并確定預(yù)期目標(biāo)。在分析過程中，主要嘗試回答以下關(guān)鍵問題：為什么開展在線教育？誰必須參加在線教育？教育什么？在什么條件下？達(dá)到什么水平？一般來說，需要成立工作組來系統(tǒng)分析、選擇和組織特定的在線教育主題。工作組需要廣泛吸收利益相關(guān)方意見，包括指揮人員、培訓(xùn)要求發(fā)起方、用人單位、主題專家(SME)和教育訓(xùn)練專家等。工作組能否取得成功取決于全體成員的思考、經(jīng)驗(yàn)和專業(yè)知識(shí)，以及在整個(gè)分析階段做出合理判斷的能力。最后將形成課程控制文件(CCD)，用以描述課程的宏觀策略和意圖。

設(shè)計(jì)階段旨在創(chuàng)建新的在線課程或匹配已有課程，幫助受訓(xùn)對(duì)象實(shí)現(xiàn)特定能力目標(biāo)。此階段將進(jìn)一步完善課程控制文件，詳細(xì)定義學(xué)習(xí)目標(biāo)和課程的教學(xué)策略。學(xué)習(xí)目標(biāo)明確了個(gè)人要學(xué)習(xí)的內(nèi)容，是實(shí)現(xiàn)能力目標(biāo)的重要一步。完整清晰的學(xué)習(xí)目標(biāo)是學(xué)員評(píng)估的基礎(chǔ)，為制定教學(xué)策略奠定基礎(chǔ)。學(xué)習(xí)目標(biāo)下，崗位所需的知識(shí)、技能和態(tài)度等要素被歸入特定的學(xué)習(xí)領(lǐng)域，進(jìn)行結(jié)構(gòu)化以后用以描述不同學(xué)習(xí)水平。教學(xué)策略包括教學(xué)概要內(nèi)容、實(shí)施方法和如何監(jiān)控和評(píng)估學(xué)員等。學(xué)員評(píng)估旨在衡量課程結(jié)束時(shí)學(xué)員是否具備學(xué)習(xí)目標(biāo)中明確的期望能力(即知識(shí)、技能、態(tài)度和信念等)，通常分為形成性評(píng)估和總結(jié)性評(píng)估。

任何在線課程的開發(fā)都是一項(xiàng)大工程，涉及方方面面。為最大程度提升在線教育的兼容性和互操作性，北約規(guī)定必須嚴(yán)格按照標(biāo)準(zhǔn)開發(fā)教學(xué)內(nèi)容。根據(jù)北約第2591號(hào)標(biāo)準(zhǔn)，現(xiàn)有在線課程依據(jù)SCORM模型進(jìn)行開發(fā)。該模型不涉及任何教學(xué)理念或課程設(shè)計(jì)方法，是純粹的在線教育技術(shù)標(biāo)準(zhǔn)，規(guī)定了在線學(xué)習(xí)內(nèi)容與學(xué)習(xí)管理系統(tǒng)(LMS)之間的交互方式。開發(fā)階段的主要工作包括召開啟動(dòng)會(huì)議、開發(fā)基礎(chǔ)概念與結(jié)構(gòu)、開發(fā)設(shè)計(jì)與內(nèi)容概要、開發(fā)故事板(課程設(shè)計(jì)的綱目性方案)、準(zhǔn)備媒體要素、實(shí)施編程、在LMS系統(tǒng)開展課程測(cè)試和開發(fā)后評(píng)估等。在開發(fā)時(shí)間特別緊張時(shí)，可以采用快速內(nèi)容開發(fā)(RCP)模式，通過采用PPT等傳統(tǒng)內(nèi)容制作工具，在交互性和設(shè)計(jì)性有限的情況下滿足課程開發(fā)所需。

在所有階段中，實(shí)施至關(guān)重要。在線課程的實(shí)施主要包括部署和運(yùn)行2部分。部署是指將在線課程進(jìn)入學(xué)習(xí)管理系統(tǒng)，做好學(xué)員學(xué)習(xí)準(zhǔn)備的過程。部署需要考慮的主要技術(shù)性因素包括帶寬大小、學(xué)員瀏覽器類型、所需插件支持、保密要求等。課程運(yùn)行是指學(xué)員參加在線學(xué)習(xí)的過程。很多時(shí)候，課程的運(yùn)行不僅僅只是學(xué)員簡單點(diǎn)擊和瀏覽在線學(xué)習(xí)視頻，可能還涉及練習(xí)、測(cè)試、作業(yè)(可能涉及學(xué)員之間或?qū)W員與教員之間的協(xié)作)、模擬等其他交互過程。

評(píng)估階段旨在提供課程改進(jìn)和未來發(fā)展的信息，確保課程質(zhì)量。評(píng)估的主要指標(biāo)包括學(xué)習(xí)的有效性、學(xué)生滿意度和成本效能等。評(píng)估階段與其他階段緊密聯(lián)系，本質(zhì)上是系統(tǒng)性質(zhì)量審核流程的一部分，融入到課程分析、設(shè)計(jì)、開發(fā)、實(shí)施的各個(gè)環(huán)節(jié)。需要注意的是，學(xué)員評(píng)估與課程有效性評(píng)估并不相同。學(xué)員評(píng)估聚焦于學(xué)員是否掌握了該學(xué)習(xí)的內(nèi)容，屬于課程考核方式的一部分。而課程有效性評(píng)估主要回答課程是否實(shí)現(xiàn)了預(yù)設(shè)目標(biāo)。評(píng)估階段的關(guān)鍵在于改進(jìn)教學(xué)，為下一步教學(xué)修訂提供反饋和依據(jù)。

(二)基于評(píng)估的內(nèi)部質(zhì)量保障

北約在線教育的內(nèi)部質(zhì)量保障主要依托教育訓(xùn)練機(jī)構(gòu)自身開展，是機(jī)構(gòu)內(nèi)質(zhì)量管理體系的重要一環(huán)，主要包括課程后評(píng)估和機(jī)構(gòu)自我評(píng)估2部分，評(píng)估的結(jié)果指明了教育訓(xùn)練需求與特定在線課程之間的匹配程度，為持續(xù)改進(jìn)和創(chuàng)新提供可能。

1.課程后評(píng)估

課程后評(píng)估聚焦于特定課程的評(píng)估。通過搜集和分析課程內(nèi)外的信息，評(píng)估課程實(shí)施的效果和學(xué)員學(xué)習(xí)完成后的崗位能力水平。課程后評(píng)估是基于結(jié)構(gòu)化的系統(tǒng)流程，涉及收集和分析定量和定性數(shù)據(jù)、評(píng)估課程質(zhì)量(有效性、效率和可負(fù)擔(dān)性)和改進(jìn)結(jié)果。根據(jù)各機(jī)構(gòu)質(zhì)量管理體系的不同特點(diǎn)，課程后評(píng)估的開展方式有所不同，但流程上是一致的。課程后評(píng)估由內(nèi)部評(píng)估和外部評(píng)估兩個(gè)部分構(gòu)成。

首先開展的是內(nèi)部課程后評(píng)估，每門課程結(jié)束之后即開始進(jìn)行，形成評(píng)估報(bào)告。該報(bào)告指明課程中需改進(jìn)的問題，并提出改進(jìn)的行動(dòng)計(jì)劃。內(nèi)部評(píng)估專注于從教育訓(xùn)練機(jī)構(gòu)內(nèi)部獲取反饋和行政管理數(shù)據(jù)，側(cè)重于評(píng)估各方對(duì)近期結(jié)束課程的反應(yīng)和看法，并驗(yàn)證學(xué)習(xí)是否已發(fā)生。學(xué)員反饋和學(xué)員考核結(jié)果是其中不可或缺的內(nèi)容。

外部課程后評(píng)估是一個(gè)后續(xù)過程，在學(xué)員結(jié)束課程之后進(jìn)行，主要評(píng)估其是否在工作崗位應(yīng)用學(xué)習(xí)到的技能。外部評(píng)估的時(shí)間取決于所學(xué)技能知識(shí)和工作環(huán)境，但通常在學(xué)員完成學(xué)習(xí)后的六個(gè)月內(nèi)。外部評(píng)估專注于整個(gè)教學(xué)實(shí)施的觀察和反饋。評(píng)估的重點(diǎn)是學(xué)員在課程中所學(xué)到的知識(shí)在多大程度上轉(zhuǎn)化為崗位能力并取得了成果。外部評(píng)估應(yīng)當(dāng)避免讓畢業(yè)學(xué)員直接反思其課程經(jīng)歷，這種反饋信息最好在內(nèi)部評(píng)估中收集。外部評(píng)估應(yīng)重點(diǎn)評(píng)估學(xué)員執(zhí)行特定任務(wù)的能力。支持外部評(píng)估的數(shù)據(jù)來源有很多，包括對(duì)畢業(yè)學(xué)員及其上級(jí)的調(diào)查和采訪、在崗能力觀察、演習(xí)反饋等。

2.機(jī)構(gòu)自我評(píng)估

機(jī)構(gòu)自我評(píng)估是機(jī)構(gòu)領(lǐng)導(dǎo)層對(duì)整體組織績效的自我評(píng)估。機(jī)構(gòu)自我評(píng)估聚焦于機(jī)構(gòu)本身，是對(duì)其質(zhì)量管理進(jìn)行的周期性全面評(píng)估。評(píng)估的重點(diǎn)是各機(jī)構(gòu)的關(guān)鍵績效指標(biāo)，特別是機(jī)構(gòu)核心的教育訓(xùn)練任務(wù)。機(jī)構(gòu)自我評(píng)估是基于組織的內(nèi)部檢查，是重要的質(zhì)量管理工具，幫助機(jī)構(gòu)實(shí)現(xiàn)持續(xù)改進(jìn)。一般來說，北約教育訓(xùn)練機(jī)構(gòu)每年進(jìn)行一次自我評(píng)估。機(jī)構(gòu)根據(jù)定性和定量數(shù)據(jù)以及可能的財(cái)務(wù)績效數(shù)據(jù)開展自我檢查?？偟膩碚f，機(jī)構(gòu)自我評(píng)估的目的是確保機(jī)構(gòu)流程協(xié)調(diào)一致并回答以下問題：本機(jī)構(gòu)是否在向合適的對(duì)象提供合適的課程？課程是否達(dá)到理想的質(zhì)量(優(yōu)質(zhì)、高效和可負(fù)擔(dān))？課程是否可持續(xù)且在財(cái)務(wù)上可行？結(jié)果是否與機(jī)構(gòu)近期和長期發(fā)展計(jì)劃一致？機(jī)構(gòu)自我評(píng)估將生成年度質(zhì)量檢查報(bào)告，重點(diǎn)包括課程組織與實(shí)施、政策和程序、教職員工發(fā)展、信息系統(tǒng)和知識(shí)管理、學(xué)習(xí)資源和學(xué)生支持、對(duì)北約的貢獻(xiàn)等方面。機(jī)構(gòu)自我評(píng)估是北約認(rèn)證教育訓(xùn)練機(jī)構(gòu)質(zhì)量管理體系的重要組成部分，對(duì)機(jī)構(gòu)再次獲得北約認(rèn)證或在提升認(rèn)證等級(jí)有重要意義。

(三)基于認(rèn)證的外部質(zhì)量保障

北約在線教育的外部質(zhì)量保障由外部機(jī)構(gòu)組織實(shí)施，主要由課程認(rèn)證和機(jī)構(gòu)認(rèn)證2部分組成。

1.課程認(rèn)證

課程認(rèn)證是北約保證在線教育質(zhì)量的重要外部手段，由轉(zhuǎn)型司令部按照北約軍事委員會(huì)第458號(hào)文件要求組織實(shí)施。北約的課程認(rèn)證取決于2個(gè)因素，一是該機(jī)構(gòu)是否通過了轉(zhuǎn)型司令部組織的北約機(jī)構(gòu)認(rèn)證；二是課程是否滿足北約的教育與個(gè)人訓(xùn)練需求。轉(zhuǎn)型司令部依據(jù)各專業(yè)部門主管(Department Head，DH)的建議，判定在線課程是否滿足北約需求。DH由轉(zhuǎn)型司令部指定，負(fù)責(zé)將北約的教育訓(xùn)練需求轉(zhuǎn)化具體的課程解決方案。因此，DH的評(píng)估對(duì)于課程通過認(rèn)證并獲資助有重要影響。

課程認(rèn)證有三種類型，分別是批準(zhǔn)課程、選定課程和列出課程。其中批準(zhǔn)課程滿足北約教育與個(gè)人訓(xùn)練需求且實(shí)施課程的教育訓(xùn)練機(jī)構(gòu)獲得轉(zhuǎn)型司令部的機(jī)構(gòu)認(rèn)證；選定課程滿足北約教育與個(gè)人訓(xùn)練需求，但實(shí)施課程的教育訓(xùn)練機(jī)構(gòu)并未獲得轉(zhuǎn)型司令部的機(jī)構(gòu)認(rèn)證；列出課程不一定滿足北約教育與個(gè)人訓(xùn)練需求。

所有批準(zhǔn)課程、選定課程和列出課程都可以進(jìn)入北約ETOC，成為北約正式任職培訓(xùn)教育課程名單的一部分。課程認(rèn)證是一個(gè)連續(xù)的流程。在需求分析過程中，首先需要對(duì)課程進(jìn)行初步評(píng)估，確定課程內(nèi)容是否符合北約教育訓(xùn)練能力要求，并在年度專業(yè)會(huì)議(Annual Discipline Conference，ADC)紀(jì)要中公布評(píng)估結(jié)果。該會(huì)議由各專業(yè)DH代表戰(zhàn)略司令部組織，旨在根據(jù)新的政策、條令和構(gòu)想，評(píng)估和更新教育需求，審定或調(diào)整課程。ADC將對(duì)審核批準(zhǔn)和選定課程進(jìn)行審定，確保批準(zhǔn)課程和選定課程始終緊貼北約教育與個(gè)人訓(xùn)練需求。需要注意的是，課程認(rèn)證針對(duì)的是某個(gè)教育訓(xùn)練機(jī)構(gòu)的某門課程。課程認(rèn)證無法在不同教育訓(xùn)練機(jī)構(gòu)間轉(zhuǎn)換，除非DH支持且所涉及的承訓(xùn)機(jī)構(gòu)均已獲得轉(zhuǎn)型司令部的無條件機(jī)構(gòu)認(rèn)證。

北約認(rèn)證的課程可以在其他地方獲得認(rèn)可。北約之外，很多機(jī)構(gòu)承認(rèn)學(xué)生在學(xué)習(xí)北約課程后所獲得的學(xué)分，并認(rèn)定其為取得特定資格的條件，如專業(yè)資格認(rèn)證、文憑和學(xué)位等。獲得專業(yè)和學(xué)術(shù)機(jī)構(gòu)的認(rèn)可是北約課程的額外優(yōu)勢(shì)，可以鼓勵(lì)學(xué)生進(jìn)一步學(xué)習(xí)，為個(gè)人發(fā)展提供寶貴動(dòng)力。

2.機(jī)構(gòu)認(rèn)證

機(jī)構(gòu)認(rèn)證要求教育訓(xùn)練機(jī)構(gòu)證明其內(nèi)部存在有效的質(zhì)量管理體系。 機(jī)構(gòu)認(rèn)證的管理者是北約轉(zhuǎn)型司令部副總參謀長兼聯(lián)合部隊(duì)訓(xùn)練官(DCOS JFT，與DCOS JFD為同一人)，由其組建并領(lǐng)導(dǎo)質(zhì)量保障專家組(QA ToE)對(duì)機(jī)構(gòu)進(jìn)行認(rèn)證。機(jī)構(gòu)認(rèn)證的范圍包括北約所有教育訓(xùn)練機(jī)構(gòu)(ETF)。北約機(jī)構(gòu)認(rèn)證并非強(qiáng)制要求，ETF可以自行決定是否參加。機(jī)構(gòu)認(rèn)證的標(biāo)準(zhǔn)以北約質(zhì)量標(biāo)準(zhǔn)為基礎(chǔ)，包括領(lǐng)導(dǎo)與管理、教育與訓(xùn)練和對(duì)北約的貢獻(xiàn)等3個(gè)廣泛領(lǐng)域。質(zhì)量管理體系則由政策與程序、教職隊(duì)伍建設(shè)、信息系統(tǒng)與知識(shí)管理、信息公布、課程的定義與實(shí)施、學(xué)生評(píng)估和學(xué)習(xí)資源與學(xué)生支持等7條標(biāo)準(zhǔn)構(gòu)成。

機(jī)構(gòu)認(rèn)證的流程包含申請(qǐng)?zhí)峤?、自評(píng)報(bào)告、現(xiàn)場(chǎng)考察、評(píng)估報(bào)告和認(rèn)證結(jié)論5項(xiàng)，見圖4。首先機(jī)構(gòu)根據(jù)自身實(shí)際按照要求提交申請(qǐng)。正式申請(qǐng)?zhí)峤徊⑹芾砗?，機(jī)構(gòu)在現(xiàn)場(chǎng)考察前一個(gè)月內(nèi)提交基于證據(jù)的自我評(píng)估報(bào)告。質(zhì)量保障專家組將根據(jù)需要要求機(jī)構(gòu)提供其他資料?，F(xiàn)場(chǎng)考察期間，專家組將評(píng)估機(jī)構(gòu)的質(zhì)量管理體系和內(nèi)部持續(xù)改進(jìn)流程以及相關(guān)活動(dòng)能否提供高效、優(yōu)質(zhì)且低成本的課程。現(xiàn)場(chǎng)考察評(píng)估活動(dòng)主要包括與相關(guān)工作人員進(jìn)行公開討論和訪談、審查相關(guān)文件和檢查條件設(shè)施。在此基礎(chǔ)上，質(zhì)量檢查專家組將根據(jù)現(xiàn)場(chǎng)考察情況撰寫評(píng)估報(bào)告草稿。該報(bào)告旨在通過外部反饋和專家建議促進(jìn)機(jī)構(gòu)進(jìn)一步發(fā)展。評(píng)估將對(duì)照預(yù)先建立的北約質(zhì)量標(biāo)準(zhǔn)，逐項(xiàng)進(jìn)行一致性分析。評(píng)估的結(jié)論分為符合標(biāo)準(zhǔn)、部分符合標(biāo)準(zhǔn)和不符合標(biāo)準(zhǔn)3種。專家組對(duì)被認(rèn)定不符合標(biāo)準(zhǔn)的教育訓(xùn)練機(jī)構(gòu)提出解決問題和進(jìn)一步改進(jìn)的建議。在結(jié)論最終確定之前，機(jī)構(gòu)有機(jī)會(huì)對(duì)評(píng)估報(bào)告草案中的有關(guān)結(jié)論進(jìn)行解釋闡述。DCOS JFT將根據(jù)質(zhì)量保證專家組的建議和評(píng)估報(bào)告做出最終認(rèn)證結(jié)論，包括無條件認(rèn)證、有條件認(rèn)證和未通過認(rèn)證3種類型。無條件認(rèn)證有效期為6年。有條件認(rèn)證有效期為1年。只要能夠提供足夠的證據(jù)證明存在的問題已得到解決，機(jī)構(gòu)可以在DCOS JFT發(fā)布認(rèn)證結(jié)論的6個(gè)月后且在有效期到期前，隨時(shí)將有條件認(rèn)證轉(zhuǎn)換為無條件認(rèn)證。未通過認(rèn)證的機(jī)構(gòu)，將獲得解決和改進(jìn)特定問題的指導(dǎo)。這些解決問題后，機(jī)構(gòu)可以再次申請(qǐng)認(rèn)證[18]。

圖4 機(jī)構(gòu)認(rèn)證流程

為確保機(jī)構(gòu)教育質(zhì)量穩(wěn)定，在成功獲得機(jī)構(gòu)認(rèn)證后，轉(zhuǎn)型司令部仍會(huì)依據(jù)機(jī)構(gòu)發(fā)布的年度質(zhì)量保證報(bào)告(Annual QA Report)開展質(zhì)量監(jiān)控。年度質(zhì)量保證報(bào)告的模板結(jié)構(gòu)由轉(zhuǎn)型司令部統(tǒng)一提供。各認(rèn)證機(jī)構(gòu)需在每年1月底前發(fā)布。年度質(zhì)量保證報(bào)告展示了各北約認(rèn)證教育訓(xùn)練機(jī)構(gòu)對(duì)質(zhì)量的持續(xù)承諾，對(duì)于維持機(jī)構(gòu)認(rèn)證地位至關(guān)重要?；谝颜J(rèn)證機(jī)構(gòu)提供的年度質(zhì)量保證報(bào)告，DCOS JFT將在一定范圍內(nèi)發(fā)布年度質(zhì)量保證摘要，包括最佳實(shí)踐、常見問題和建議解決方案等。

五、結(jié)語

經(jīng)過十多年的發(fā)展，北約以培養(yǎng)任職崗位能力為目標(biāo)，依托北約內(nèi)設(shè)、各成員國和伙伴國教育訓(xùn)練機(jī)構(gòu)，構(gòu)建了構(gòu)建滿足聯(lián)盟需要的在線教育體系。通過采取一系列切實(shí)有效的質(zhì)量保障舉措，北約成功開發(fā)和應(yīng)用一批優(yōu)質(zhì)高效低成本的在線課程解決方案，極大拓展了北約教育訓(xùn)練覆蓋范圍，為分散在世界各地的軍事人員提供接受教育的新渠道，成為北約打造靈活敏捷、快速反應(yīng)教育訓(xùn)練體系的創(chuàng)新實(shí)踐和高效舉措。

注釋：

① 根據(jù)北約軍事委員會(huì)0458號(hào)文件，非北約實(shí)體包括國際組織、非北約成員國的政府組織、非政府組織、非北約多國軍隊(duì)、東道國(非北約成員國)、從事作戰(zhàn)、演練和轉(zhuǎn)型活動(dòng)的承包商和不符合“北約伙伴”定義的非北約成員國。