夏 軍

(江海職業(yè)技術(shù)學院，江蘇 揚州 225101)

0 引言

高職院校作為專業(yè)技術(shù)技能型人才培養(yǎng)的重要主體，是國家教育行業(yè)中不可或缺的一部分，擔負著為國家培育人才的重任。在高職院校日常發(fā)展中培訓工作是重要部分，需要通過持續(xù)不斷地對教育者開展培訓，使之緊跟時代步伐和大學生心理動態(tài)，提升育人的精準性和科學性。一項培訓活動是否能取得理想效果、培訓投入是否值得，是培訓工作需要考慮的重點問題。因此，為達到培訓目的，選擇合理的評估方式去衡量培訓過程就顯得十分有必要。構(gòu)建科學的評估體系對院校了解培訓效果、界定培訓對組織的貢獻、證明培訓活動的存在價值都具有重要意義，也正是如此需要在培訓效果評估上“狠”下功夫。

1 高職院校構(gòu)建培訓效果評估體系的內(nèi)涵價值

1.1 以評促“優(yōu)”，裁定培訓價值

高職院校通過構(gòu)建培訓效果評估體系，在培訓活動結(jié)束以后，按照體系標準和規(guī)范要求全面性評估教師參與培訓的成效，能全方位了解其專業(yè)知識掌握情況、能力提升狀況，并明確培訓管理服務(wù)的水平和質(zhì)量，從而幫助培訓負責人及管理者及時發(fā)現(xiàn)培訓活動給組織帶來的影響，做出繼續(xù)開展培訓活動或終止培訓活動的決定。

1.2 以評促“學”，激發(fā)參訓熱情

在高職院校培訓效果評估中，評估數(shù)據(jù)最直接的來源就是參訓人員，通過全面搜集參訓人員的各類信息，并將其繪制成數(shù)據(jù)曲線，能充分了解參訓人員在培訓活動中最真實的感受，明確培訓的優(yōu)缺利弊[1]。具體而言，一方面可以準確客觀反映評估結(jié)果，更深入地體現(xiàn)參訓人員的價值和意愿；另一方面可以幫助教師深刻了解培訓目標和實施情況，明確后期發(fā)展方向，激發(fā)參訓熱情。

1.3 以評促“改”，明確培訓重點

培訓師可以從評估結(jié)果中汲取經(jīng)驗和教訓，發(fā)現(xiàn)培訓中存在的問題，找到培訓活動設(shè)置與學員需求之間的偏差，并及時采取合理措施糾正偏差，為后續(xù)更準確有效地操作培訓環(huán)節(jié)，及時改革調(diào)整培訓技巧、培訓方案、培訓環(huán)境提供有利作用，從而促進培訓效果的提升，形成良性閉環(huán)。此外，學校還可以通過評估數(shù)據(jù)發(fā)現(xiàn)培訓短板，綜合教師的意見，及時對培訓方案進行改進。并在深度分析和探索下，對培訓思路進行開拓創(chuàng)新，發(fā)現(xiàn)新的培訓需求，為新一輪培訓工作的開展做好鋪墊。

2 高職院校構(gòu)建培訓效果評估體系的主要內(nèi)容及實施原則

高職院校構(gòu)建培訓效果評估體系，需要選擇合理的評估模型和評估流程。Kirkpatrick 在1959 年提出的培訓效果評估模型——柯氏四級培訓評估模式，能夠全方位反映培訓結(jié)果，推動每一個培訓環(huán)節(jié)的高質(zhì)量開展。

2.1 柯氏四級培訓評估模式的主要內(nèi)容

柯氏四級培訓評估模式將受訓者作為研究對象，從其對培訓知識的理解和應用層面出發(fā)，將總體培訓劃分為四個層次，分別為反應層、學習層、行為層、結(jié)果層，每一個層次與下一個層次之間是逐步遞進的關(guān)系，各層次評估目標和評估內(nèi)容明確，能夠詳細診斷評估過程[2]。

2.1.1 反應層

反應層作為柯氏四層培訓效果評估模式的第一層，其目的在于通過評估明確學員對評估方案、評估目標、培訓課程、作息時間安排及評估內(nèi)容等的反應。

2.1.2 學習層

學習層的目的在于了解學員對培訓知識的理解與掌握程度，如通過評估分析學員是否對培訓知識有了深刻了解，培訓活動是否對學員起到了一定的“增益”作用。只有學員掌握知識，才能在后續(xù)工作中發(fā)揮知識的作用。

2.1.3 行為層

行為層屬于實踐活動層面的評估，目的是通過評估明確培訓前后學員的工作表現(xiàn)是否發(fā)生了變化，崗位活動是否出現(xiàn)了創(chuàng)新等。即借助評估了解學員有沒有將培訓知識運用于工作實踐中，分析培訓是否對學員工作起到了真正的指導作用。

2.1.4 結(jié)果層

作為四級評估體系的最后一層，結(jié)果層的目的在于衡量組織業(yè)績變化，分析學員參與培訓之后，行為變化有沒有為組織發(fā)展帶來積極作用。結(jié)果層是四級培訓體系中最關(guān)鍵的一層，只有組織整體運行結(jié)果向好的方向變化，才說明培訓活動發(fā)揮出了其真正作用。

2.2 柯氏四級培訓評估模式的實施原則

2.2.1 完整性原則

柯氏四級培訓評估模式從四個不同的層面開展評估活動，注重評估的全面性和完整性，所以無論在設(shè)定評估指標的過程中，還是在構(gòu)建評估體系的過程中，都應當注重完整性，結(jié)合培訓活動的內(nèi)外部影響因素，關(guān)注每一個層面的內(nèi)容。還應充分考慮定性指標和定量指標、財務(wù)指標和非財務(wù)指標、靜態(tài)指標與動態(tài)指標內(nèi)容，在綜合分析與全面探索的基礎(chǔ)上構(gòu)建動態(tài)化、完整性、可視化、“可編輯”的評估體系。

2.2.2 可操作原則

任何評估活動都是有目的的，高職院校構(gòu)建培訓效果評估體系也一樣，目的是通過評估活動檢驗培訓成效，提升培訓質(zhì)量。因此在構(gòu)建評估體系的過程中，要注重各項指標的選擇，盡量對指標進行量化，并遵循可獲取原則，能夠真正通過各類指標反映培訓情況，最終在可量化的指標下構(gòu)建操作性強的評估體系[3]。

2.2.3 最小性原則

要確保各項指標具有較高的完善性，所選擇的指標應當能夠準確衡量培訓效果各指標的最小集合，如此可以避免指標冗繁或重復。這就要求相關(guān)人員在選擇指標過程中要盡量選擇信息量大、代表性強的關(guān)鍵指標，確保每一個指標都可以發(fā)揮出最大化作用。

3 高職院校培訓效果評估體系的具體構(gòu)建

3.1 篩選評估指標

評估指標篩選是評估活動開展的首要步驟，應確保評估指標的合理性，做到謹慎性選擇和精細化篩選。學校通過問卷調(diào)查、專家訪談、層次分析等方法全方位搜集數(shù)據(jù)信息，篩選出最終的評估指標。首先，針對準受訓教師開展問卷調(diào)查，借助問卷了解評估指標的具體選擇方向；其次，以院系領(lǐng)導、專業(yè)教師、院質(zhì)量管理人員、培訓督導評估專家、培訓業(yè)務(wù)管理專家等為主要對象開展訪談活動，通過深度訪談進一步完善優(yōu)化評估指標的初步構(gòu)想；最后通過層次分析對指標進行修改補充，確定最終指標。在此基礎(chǔ)上，文章根據(jù)江海職業(yè)技術(shù)學院培訓活動實際需求選出符合目標要求的2 個一級指標、6 個二級指標和12 個三級指標。分別如下:

2 個一級指標:個人學習效果評估、組織績效效果評估。

6 個二級指標:知識掌握狀況、行為變化狀況、個人績效變化狀況、組織滿意度、組織內(nèi)部流程與成長、組織財務(wù)變化。

12 個三級指標:12 個三級指標分別對應6 個二級指標，每1 個二級指標對應2 個三級指標，即知識掌握狀況對應的三級指標為知識理解情況、知識應用狀況；行為變化狀況對應的三級指標為工作態(tài)度、工作能力；個人績效變化狀況對應的三級指標為工作質(zhì)量變化狀況、工作效率提升狀況；組織滿意度對應的三級指標為教師忠誠度、學生投訴率；組織內(nèi)部流程與成長對應的三級指標為教學流程合理率、教學效果好轉(zhuǎn)率；組織財務(wù)變化對應的三級指標為人才培育與市場需求聚焦率、人才培養(yǎng)質(zhì)量。

3.2 設(shè)置指標權(quán)重

在高職院校培訓效果評估中，依據(jù)各組成要素在整體中所發(fā)揮的作用大小和所處重要程度，賦予不同的數(shù)值。以此能明確考核重點，使培訓評估更為客觀準確。在具體權(quán)重設(shè)置中采用了層次分析法，基于不同評估指標構(gòu)建階梯形層次結(jié)構(gòu)，形成兩兩判斷矩陣。并運用問卷調(diào)查的途徑由相關(guān)專家依據(jù)1～9 比例標度法，將位于同一個子集中的指標相較于上一級指標的重要性進行兩兩比較，最終得出判斷矩陣。在此基礎(chǔ)上，將本子集不同指標對應的重要性次序權(quán)值，歸結(jié)為計算判斷矩陣的特征向量問題，從而確定單層權(quán)重子集。在開展一次性檢驗之后，借助同樣途徑確定總層權(quán)重子集，并開展一致性檢驗。檢驗通過后，對不同指標的權(quán)重進行最終確定，得出院校培訓效果評估指標體系。具體權(quán)重計算如下:

一級指標:個人學習效果評估、組織績效效果評估對應權(quán)重分別為0.6、0.4。

二級指標:知識掌握狀況0.24、行為變化狀況0.18、個人績效變化狀況0.18、組織滿意度0.2、組織內(nèi)部流程與成長0.12、組織財務(wù)變化0.08。

三級指標:知識理解情況0.138、知識應用狀況0.136、工作態(tài)度0.087、工作能力0.068、工作質(zhì)量變化狀況0.048、工作效率提升狀況0.047、教師忠誠度0.109、學生投訴率0.108、教學流程合理率0.049、教學效果好轉(zhuǎn)率0.035、人才培育與市場需求聚焦率0.022、人才培養(yǎng)質(zhì)量0.045。

3.3 確定評估方法

選擇評估方法是評估活動開展的基礎(chǔ)，根據(jù)柯氏四級培訓評估模式，針對每一層的評估需求，選擇如下評估方法:

3.3.1 反應層:訪談法

在院校內(nèi)部選擇20 位受訓者，通過電話或面對面方式開展深度訪談，了解其對培訓活動的感受，包括對培訓時間的設(shè)置是否滿意、對培訓活動的內(nèi)容是否贊同、對培訓師及培訓環(huán)境是否滿意等，通過聽取其意見或建議，積累培訓經(jīng)驗，彌補培訓工作中的不足，為改進培訓基礎(chǔ)環(huán)境做好保障。通過匯總訪談結(jié)果發(fā)現(xiàn)，20 位受訓者對培訓活動整體較為滿意，但仍然有一些人員認為培訓活動存在不足，尤其是對培訓時間的意見較大。說明在后續(xù)培訓中應盡量合理安排培訓時間，避免安排在節(jié)假日，并對培訓環(huán)境進行改善，盡量不激發(fā)參訓者的抵觸情緒，最大限度提升培訓效果。

3.3.2 學習層:測試法

通過筆試的方式考核參訓者所學理論知識的掌握程度，即培訓部門負責人根據(jù)受訓者崗位工作狀況及培訓內(nèi)容制作一張試卷，要求參訓者在規(guī)定時間內(nèi)完成試卷作答，并上交。后續(xù)由培訓工作者對試卷作答狀況進行批改，并將結(jié)果匯總成表格。根據(jù)對表格的分析發(fā)現(xiàn)，大部分參訓者對理論知識掌握程度較好，總體得分都超過及格線，不過也發(fā)現(xiàn)培訓中存在一些小問題，如課程重點內(nèi)容的安排不夠突出，導致二級評估中的重點偏離課程目標。

3.3.3 行為層:360 度績效考核法

對參訓者參訓后的工作表現(xiàn)進行觀察和統(tǒng)計，首先安排相關(guān)專業(yè)人員負責對參訓者工作過程進行觀察，明確參訓前后工作行為是否出現(xiàn)變化，分析培訓活動是否對參訓者工作產(chǎn)生了實際影響。通過觀察發(fā)現(xiàn)，大部分受訓者在工作中都對培訓內(nèi)容進行了運用，部分參訓者還積極借助培訓知識對工作方法進行創(chuàng)新，取得了一定的成效。然后采用360 度績效考核法對參訓者進行考核，發(fā)動同事、上級、下屬、學生等多層面多主體的作用，通過對參訓者近三個月的工作績效與受訓之前比較，及各主體的反饋發(fā)現(xiàn)，大部分參訓者工作績效都有所提升，但總體提升效果不是十分顯著?？紤]到培訓活動屬于一項潛在效益活動，對參訓者的反應很多時候不會在近期直接表現(xiàn)出來，所以該結(jié)果在預料之中。與此同時，為深度挖掘和掌握參訓者對知識的理解深度，又組織參訓者開展了“分享行動計劃”，要求參訓者將自己在培訓中學到的知識分享給其他教師，在單位內(nèi)部集中開展一次交流活動，旨在借助該項活動進一步檢驗參訓者對培訓內(nèi)容的掌握狀況，并通過分享和交流開闊視野，深化對知識的吸收。

3.3.4 結(jié)果層:統(tǒng)計分析法

對參訓者個人、專業(yè)及院系近六個月的“業(yè)績”變化狀況進行統(tǒng)計，明確參訓之后工作質(zhì)量、個人業(yè)績是否得到提升，專業(yè)人才培養(yǎng)業(yè)績有無顯著上升，院校人才培養(yǎng)整體業(yè)績是否相較于以前有所增加，明確培訓活動最終是否發(fā)揮出預期效益。通過對參訓者個人、專業(yè)及院系人才培養(yǎng)工作進行6 個月的跟蹤統(tǒng)計分析發(fā)現(xiàn)，這三者都呈現(xiàn)上升態(tài)勢，說明本次培訓對院校人才培育工作起到了好的作用，初步實現(xiàn)預期目標。

3.4 匯總評估結(jié)果

匯總評估結(jié)果是評估活動開展的最后一項工作，其目的在于對整個評估過程進行系統(tǒng)分析，通過有效分析，明確評估活動的開展情況。在上述評估方法中，已針對每一層評估做出了梳理與分析，明確了具體培訓成效，但培訓成效明確的目的在于檢驗培訓活動是否對院校發(fā)展起到有益作用，其作用在于院校層面，且重點在于完善和優(yōu)化培訓活動。而匯總評估結(jié)果則是為了對評估活動開展的全過程進行總結(jié)與反思，其作用在于評估層面，目的在于推進下次評估活動的更完善開展。因此，上述培訓成果梳理不能等同于評估結(jié)果匯總。在這一步，院校應當安排專業(yè)參評人員充分開展討論分析，整理每一個評估環(huán)節(jié)的數(shù)據(jù)信息，并基于各種數(shù)據(jù)信息探索評估活動開展得是否合理、有沒有需要改進的地方，最終制作匯總評估表，明確注意事項，為下次評估做好鋪墊。

基于高職院校特殊的性質(zhì)，構(gòu)建培訓效果評估體系對院校發(fā)展至關(guān)重要，既是推動院校高質(zhì)量發(fā)展的有效路徑，也是提升院校人才培養(yǎng)水準、實現(xiàn)院校與企業(yè)緊密對接的有力武器。將柯氏四級培訓評估模式應用于高職院校培訓效果評估中，能從更精細、更全面的層面開展評估活動，將有助于評估工作的創(chuàng)新。