羅林明 趙亞南 鄧一

摘 要：本文著眼于對(duì)培訓(xùn)評(píng)估形勢(shì)、國(guó)內(nèi)評(píng)估進(jìn)展情況的分析，氣象教育培訓(xùn)評(píng)估的實(shí)踐進(jìn)行了介紹，以期為進(jìn)一步推進(jìn)干部教育培訓(xùn)評(píng)估的科學(xué)化、制度化、規(guī)范化提供一定的實(shí)踐借鑒。

關(guān)鍵詞：氣象；培訓(xùn)；評(píng)估；評(píng)價(jià)

中圖分類(lèi)號(hào)：G726 文獻(xiàn)標(biāo)識(shí)碼：A

一、國(guó)外培訓(xùn)評(píng)估的進(jìn)展

以美國(guó)、英國(guó)、法國(guó)和加拿大培訓(xùn)評(píng)估實(shí)踐來(lái)看，發(fā)達(dá)國(guó)家和地區(qū)的培訓(xùn)評(píng)估呈現(xiàn)出：1.培訓(xùn)評(píng)估制度法制化、制度化趨勢(shì)，通過(guò)制定法律、有關(guān)法令及配套的法規(guī)和政策，對(duì)培訓(xùn)的各個(gè)方面做出具體規(guī)定，把培訓(xùn)評(píng)估建立在“法制”的基礎(chǔ)上，使培訓(xùn)評(píng)估工作目標(biāo)明確，易于操作。2.培訓(xùn)評(píng)估體系完備、程序嚴(yán)謹(jǐn)。綜合體現(xiàn)在訓(xùn)前、訓(xùn)中、訓(xùn)后三個(gè)階段和評(píng)估過(guò)程和評(píng)估結(jié)果的反饋應(yīng)用方面。訓(xùn)前評(píng)估以素質(zhì)測(cè)評(píng)和需求調(diào)研為重點(diǎn)，訓(xùn)中評(píng)估以課程質(zhì)量和學(xué)習(xí)效果為重點(diǎn)，跟蹤評(píng)估則以成果轉(zhuǎn)化評(píng)估和投資回報(bào)評(píng)估為重點(diǎn)；同時(shí)還特別注重以學(xué)員考核和機(jī)構(gòu)選擇為重點(diǎn)的評(píng)估結(jié)果的運(yùn)用。

另外從美國(guó)培訓(xùn)和發(fā)展協(xié)會(huì)（ASTD）2009 年發(fā)布的一項(xiàng)研究報(bào)告《評(píng)估的價(jià)值：使培訓(xùn)評(píng)估更有效》發(fā)現(xiàn)，柯克帕特里克技術(shù)和菲利普斯技術(shù)是使用最為普遍的評(píng)估技術(shù)。其中，柯氏評(píng)估技術(shù)由四層次評(píng)估內(nèi)容組成，菲利普斯評(píng)估技術(shù)在柯氏四級(jí)評(píng)估技術(shù)的基礎(chǔ)上增加了投資收益評(píng)估，四/五層評(píng)估內(nèi)容包括反映層評(píng)估（第一層），學(xué)習(xí)層評(píng)估（第二層），行為層評(píng)估（第三層），結(jié)果層評(píng)估（第四層）和投資回報(bào)率評(píng)估（第五層）。

二、氣象教育培訓(xùn)評(píng)估的實(shí)踐

柯克帕特里克技術(shù)和菲利普斯技術(shù)是應(yīng)用最為廣泛的評(píng)估技術(shù)，氣象教育培訓(xùn)評(píng)估在具體評(píng)估實(shí)踐中，結(jié)合氣象業(yè)務(wù)特點(diǎn)，建立“質(zhì)量調(diào)查——效果評(píng)估——效益評(píng)價(jià)”三級(jí)評(píng)估業(yè)務(wù)體系，其中質(zhì)量調(diào)查重點(diǎn)關(guān)注學(xué)員滿意度和學(xué)員收獲，后效果評(píng)估是在質(zhì)量調(diào)查的基礎(chǔ)上，重點(diǎn)關(guān)注學(xué)員受訓(xùn)后能力的提升和對(duì)崗位履職能力的促進(jìn)，效益評(píng)價(jià)則是在質(zhì)量調(diào)查和后效果評(píng)估的基礎(chǔ)上重點(diǎn)關(guān)注收益與成本間的差異和無(wú)形效益。三級(jí)之間是由簡(jiǎn)入深，層層遞進(jìn)，覆蓋了包括反映層評(píng)估（第一層），學(xué)習(xí)層評(píng)估（第二層），行為層評(píng)估（第三層），結(jié)果層評(píng)估（第四層）和投資回報(bào)率評(píng)估（第五層）。四/五層評(píng)估內(nèi)容包括反映層評(píng)估（第一層），學(xué)習(xí)層評(píng)估（第二層），行為層評(píng)估（第三層），結(jié)果層評(píng)估（第四層）和投資回報(bào)率評(píng)估（第五層）在實(shí)踐中取得了很好地效果。

（一）教學(xué)質(zhì)量調(diào)查

教學(xué)質(zhì)量調(diào)查主要是通過(guò)問(wèn)卷調(diào)查、訪談、座談等了解在校培訓(xùn)期間，學(xué)員對(duì)培訓(xùn)設(shè)計(jì)、教學(xué)方式方法、課程內(nèi)容、教師授課水平、教材（講義）、教學(xué)管理、教學(xué)保障等的滿意度，了解學(xué)員對(duì)知識(shí)和技能的掌握程度，進(jìn)一步改進(jìn)和規(guī)范在校培訓(xùn)，從而達(dá)到監(jiān)控培訓(xùn)質(zhì)量的目的。教學(xué)質(zhì)量調(diào)查對(duì)列入中國(guó)氣象局年度培訓(xùn)計(jì)劃的所有培訓(xùn)項(xiàng)目進(jìn)行全覆蓋，并做到班班有調(diào)查，班班有分析，班班有反饋。調(diào)查對(duì)象以學(xué)員、班主任、授課教師為主。指標(biāo)體系主要包括課程內(nèi)容、教師授課水平、培訓(xùn)設(shè)計(jì)、教學(xué)管理和教學(xué)保障五個(gè)一級(jí)指標(biāo)，14個(gè)2級(jí)指標(biāo)。培訓(xùn)課程內(nèi)容與教師授課水平是針對(duì)每門(mén)課程開(kāi)展調(diào)查；培訓(xùn)設(shè)計(jì)、教學(xué)管理、教學(xué)保障等是針對(duì)整個(gè)培訓(xùn)項(xiàng)目開(kāi)展調(diào)查。主要產(chǎn)品是年度（或月度）教學(xué)質(zhì)量評(píng)估對(duì)當(dāng)年（當(dāng)月）實(shí)施的培訓(xùn)項(xiàng)目教學(xué)質(zhì)量進(jìn)行整體評(píng)估分析。

（二）培訓(xùn)效果評(píng)估

培訓(xùn)效果評(píng)估主要是通過(guò)問(wèn)卷調(diào)查（學(xué)員自評(píng)、送培單位評(píng)價(jià)、服務(wù)對(duì)象評(píng)價(jià)）、個(gè)人及送培單位訪談、重點(diǎn)對(duì)象跟蹤等對(duì)培訓(xùn)后學(xué)員收獲情況、回到工作崗位后個(gè)人行為的改變情況及其對(duì)個(gè)人績(jī)效和組織工作績(jī)效改變的程度情況進(jìn)行評(píng)估。培訓(xùn)效果評(píng)估主要是針對(duì)規(guī)模大、具有可持續(xù)性的核心培訓(xùn)項(xiàng)目開(kāi)展，在實(shí)施過(guò)程中根據(jù)實(shí)際情況通常會(huì)分為試點(diǎn)培訓(xùn)項(xiàng)目后效果評(píng)估，即對(duì)新開(kāi)發(fā)的培訓(xùn)項(xiàng)目在試點(diǎn)期間應(yīng)該開(kāi)展效果評(píng)估，以幫助調(diào)整教學(xué)計(jì)劃；崗位培訓(xùn)，上崗培訓(xùn)、任職培訓(xùn)等針對(duì)固定崗位固定層次人員的培訓(xùn)，因其對(duì)學(xué)員的學(xué)習(xí)成果有明確要求，因此需要開(kāi)展效果評(píng)估，以確保培訓(xùn)的效果達(dá)到預(yù)期。評(píng)估對(duì)象主要以參加過(guò)培訓(xùn)的學(xué)員及其所在單位領(lǐng)導(dǎo)為主。指標(biāo)體系主要以框架指標(biāo)為主，根據(jù)具體情況對(duì)其中具體指標(biāo)及內(nèi)涵進(jìn)行相應(yīng)調(diào)整，框架指標(biāo)主要包括學(xué)習(xí)收獲、行為改變、工作結(jié)果3個(gè)一級(jí)指標(biāo)，知識(shí)、態(tài)度、技能、愿望、業(yè)務(wù)開(kāi)展和業(yè)績(jī)提高6個(gè)2級(jí)指標(biāo)，其中學(xué)習(xí)收獲主要是針對(duì)培訓(xùn)學(xué)院，行為改變和工作結(jié)果主要是針對(duì)送培單位負(fù)責(zé)人。

（三）培訓(xùn)效益評(píng)價(jià)

培訓(xùn)效益評(píng)價(jià)主要是通過(guò)文獻(xiàn)調(diào)研法、問(wèn)卷調(diào)查法、專(zhuān)家咨詢法等，估算培訓(xùn)收益與培訓(xùn)成本之間的比例，進(jìn)一步估算出培訓(xùn)的投資回報(bào)率。培訓(xùn)效益評(píng)價(jià)主要是針對(duì)具有可持續(xù)性、系統(tǒng)性，能夠較為直觀地反映培訓(xùn)的成本以及具有較為直觀的收益的培訓(xùn)項(xiàng)目。培訓(xùn)效益評(píng)估是繼反應(yīng)層、學(xué)習(xí)層、行為層、結(jié)果層之后更高層次的評(píng)估，評(píng)估難度更大，評(píng)估方法更復(fù)雜，也沒(méi)有現(xiàn)成的經(jīng)驗(yàn)可以借鑒，以氣象雷達(dá)培訓(xùn)為例開(kāi)展了氣象培訓(xùn)效益評(píng)估的初步探索，其科學(xué)性、系統(tǒng)性和全面性還需不斷研究和探索。

氣象雷達(dá)培訓(xùn)效益評(píng)價(jià)是在前期開(kāi)展氣象雷達(dá)培訓(xùn)教學(xué)質(zhì)量調(diào)查、氣象雷達(dá)培訓(xùn)效果評(píng)估的基礎(chǔ)上，采用波士頓矩陣模型和Phillips的投資回報(bào)率理論，探索性地開(kāi)展了氣象雷達(dá)培訓(xùn)效益評(píng)價(jià)，估算出培訓(xùn)的投資回報(bào)率。評(píng)價(jià)對(duì)象主要是學(xué)員及其所在單位、相關(guān)管理管理機(jī)構(gòu)、業(yè)務(wù)機(jī)構(gòu)及科研機(jī)構(gòu)人員等。指標(biāo)設(shè)計(jì)主要是氣象培訓(xùn)效益一部分是可以直接計(jì)算出的培訓(xùn)成本與效益的比值，另一部分是非直接量化的經(jīng)濟(jì)指標(biāo)，因此，評(píng)估指標(biāo)設(shè)計(jì)主要圍繞影響培訓(xùn)效益發(fā)揮的要素展開(kāi)。根據(jù)學(xué)員及送培單位的調(diào)查，確定相關(guān)要素在培訓(xùn)中的貢獻(xiàn)度以及發(fā)揮影響作用的方式，引入“置信區(qū)間”，在評(píng)估指標(biāo)設(shè)計(jì)上明確各要素在效益發(fā)揮上等的重要性程度；各種手段在人員素質(zhì)提高上的有效性程度，即：培訓(xùn)貢獻(xiàn)度=培訓(xùn)在人員素質(zhì)提高方面的貢獻(xiàn)度、人員素質(zhì)提高在具體業(yè)務(wù)效益發(fā)揮上的貢獻(xiàn)度，并在此思路的指導(dǎo)下建立培訓(xùn)效益發(fā)揮影響因素指標(biāo)體系。

參考文獻(xiàn)

[1]中共中央組織部干部教育局.干部教育培訓(xùn)工作條例學(xué)習(xí)輔導(dǎo)[M].北京：黨建讀物出版社，2015.

[2]中共中央印發(fā).2013-2017年全國(guó)干部教育培訓(xùn)規(guī)劃，2013-9-28.

[3]干部教育培訓(xùn)項(xiàng)目評(píng)估的研究和思考[J].繼續(xù)教育，2016（1）.

[4]干部教育培訓(xùn)質(zhì)量評(píng)估研究[M].北京：科學(xué)出版社，2014.

[5]培訓(xùn)效益評(píng)估實(shí)證分析研究[J].繼續(xù)教育，2016（4）.