陳曉光 ,盛 聚 ,金安彥
(1.大連理工大學(xué) 高等教育研究中心,遼寧 大連116024;2.沈陽(yáng)市教育研究院,沈陽(yáng)110031)
自2012年起,全國(guó)新型職業(yè)農(nóng)民培育試點(diǎn)工作全面展開(kāi),在探索方法和路徑、總結(jié)經(jīng)驗(yàn)、形成制度的同時(shí),推動(dòng)了新型職業(yè)農(nóng)民培育工作健康有序發(fā)展。但培訓(xùn)過(guò)程中,對(duì)培訓(xùn)效益研究表現(xiàn)出明顯的不足,或缺乏應(yīng)有的重視。本文對(duì)職業(yè)農(nóng)民培訓(xùn)效益評(píng)估的重要性和培訓(xùn)效益評(píng)估理論發(fā)展?fàn)顩r、效益評(píng)估建立的原則和標(biāo)準(zhǔn)體系進(jìn)行了初步的研究,希望可以對(duì)培訓(xùn)工作的長(zhǎng)期開(kāi)展,以及從整體上提升培訓(xùn)質(zhì)量提供一定參考和建議。
新型職業(yè)農(nóng)民培訓(xùn)的目的就是解決“誰(shuí)來(lái)種地、如何種好地”的問(wèn)題。在這個(gè)過(guò)程中,如何將農(nóng)民培訓(xùn)的滿意程度與農(nóng)村產(chǎn)業(yè)發(fā)展相統(tǒng)整是一個(gè)重要的難題。效益評(píng)估正是將培訓(xùn)過(guò)程中農(nóng)民對(duì)培訓(xùn)內(nèi)容的需求與培訓(xùn)后所達(dá)到的目標(biāo)進(jìn)行統(tǒng)一,有效提升農(nóng)民培訓(xùn)的整體質(zhì)量,實(shí)現(xiàn)個(gè)人發(fā)展與產(chǎn)業(yè)發(fā)展、個(gè)人效益與產(chǎn)業(yè)效益相結(jié)合的目的。[1]效益評(píng)估也是對(duì)培訓(xùn)模式進(jìn)行的有效甄別,選擇適合農(nóng)民學(xué)習(xí)、使用與增收的項(xiàng)目,選擇與之相匹配的培訓(xùn)手段,選擇有效的培訓(xùn)模式,保障培訓(xùn)工作的順利進(jìn)行。
培訓(xùn)過(guò)程中和結(jié)束后,難免會(huì)出現(xiàn)不盡如人意的問(wèn)題,這是就需要有一整套的評(píng)價(jià)標(biāo)準(zhǔn)進(jìn)行有效識(shí)別,發(fā)現(xiàn)問(wèn)題,改正問(wèn)題,提升培訓(xùn)效果。效益評(píng)估不僅僅是對(duì)培訓(xùn)內(nèi)容的甄別,也是對(duì)培訓(xùn)手段,培訓(xùn)結(jié)果的影響程度進(jìn)行探知。效益評(píng)估可以發(fā)現(xiàn)問(wèn)題所在,提升師資結(jié)構(gòu)和拓寬信息渠道,加強(qiáng)與農(nóng)民的及時(shí)溝通,真正解決培訓(xùn)內(nèi)容與培訓(xùn)效果難以統(tǒng)一的問(wèn)題。[2]
職業(yè)農(nóng)民培訓(xùn)的主要目的就在于能否達(dá)到促進(jìn)農(nóng)民增收,這是衡量培訓(xùn)效果的重要標(biāo)準(zhǔn)。此外,還應(yīng)針對(duì)培訓(xùn)的各個(gè)環(huán)節(jié)建立起一整套標(biāo)準(zhǔn)化的農(nóng)村科技培訓(xùn)監(jiān)測(cè)和評(píng)估指標(biāo),把監(jiān)測(cè)和評(píng)估的結(jié)果作為重要的反饋信息以便調(diào)整以后的培訓(xùn)計(jì)劃。[3]效益評(píng)估中所反映出來(lái)的問(wèn)題不應(yīng)只停留在結(jié)果上,也應(yīng)該表現(xiàn)在培訓(xùn)的過(guò)程中,應(yīng)該是過(guò)程與結(jié)果的結(jié)合,這樣,才更加有效地將培訓(xùn)中出現(xiàn)的問(wèn)題有針對(duì)性地反饋給培訓(xùn)機(jī)構(gòu)、培訓(xùn)者,達(dá)到改善培訓(xùn)效果的目的。
唐·柯克帕特里克于1959年首次提出四層次模型,這四個(gè)層次包括反映層次、學(xué)習(xí)層次、行為層次和結(jié)果層次。反映層次是評(píng)估中最低層次的評(píng)估,是對(duì)學(xué)員注意力、興趣等進(jìn)行研究,從而得知學(xué)員對(duì)培訓(xùn)的態(tài)度;學(xué)習(xí)層次是對(duì)學(xué)員從培訓(xùn)中學(xué)到的內(nèi)容進(jìn)行評(píng)估;行為層次是針對(duì)學(xué)員是否運(yùn)用了培訓(xùn)中所學(xué)到的知識(shí)和技能進(jìn)行的評(píng)估,依據(jù)是其上下級(jí)、同事等對(duì)其業(yè)績(jī)提高的評(píng)價(jià);結(jié)果層次是針對(duì)學(xué)員在培訓(xùn)后,在不同崗位上工作業(yè)績(jī)的提高程度(表現(xiàn)在銷售量、產(chǎn)量提高和事故率的降低等方面)進(jìn)行評(píng)定。
CIRO 評(píng)估模型是一個(gè)由奧爾、伯德和雷克漢姆發(fā)明的四級(jí)評(píng)估方法。這種評(píng)估包括四個(gè)基本的評(píng)估活動(dòng),是由情境評(píng)估、輸入評(píng)估、反應(yīng)評(píng)估和結(jié)果評(píng)估組成的。情景評(píng)估是對(duì)學(xué)員當(dāng)前的地位和狀況以及學(xué)員的需求進(jìn)行的評(píng)估;輸入評(píng)估是將評(píng)估所需的資源進(jìn)行搜索、整理并將其應(yīng)用在培訓(xùn)中的評(píng)估;反應(yīng)評(píng)估是對(duì)學(xué)員的反饋信息,并將其不足加以修正的評(píng)估;結(jié)果評(píng)估是對(duì)培訓(xùn)結(jié)果的檢驗(yàn)。CIRO評(píng)估模型相對(duì)唐·柯克帕特里克的四層次評(píng)估模型有著更加先進(jìn)的系統(tǒng)結(jié)構(gòu),但其不足就是未將評(píng)估和培訓(xùn)執(zhí)行專門結(jié)合起來(lái)。[4]
CIPP 評(píng)估模型是斯塔弗爾比姆于1967年在對(duì)泰勒行為目標(biāo)模型反思基礎(chǔ)上提出的。CIPP 模型由背景評(píng)估、輸入評(píng)估、過(guò)程評(píng)估、成果評(píng)估的四個(gè)評(píng)估的首字母組成。背景評(píng)估是對(duì)培訓(xùn)環(huán)境、培訓(xùn)的問(wèn)題、培訓(xùn)的需求和目標(biāo)進(jìn)行的評(píng)估;輸入評(píng)估是收集培訓(xùn)資源,并對(duì)資源進(jìn)行整合的評(píng)估;過(guò)程評(píng)估是評(píng)估過(guò)程中的信息反饋;成果評(píng)估是在培訓(xùn)過(guò)程中或者培訓(xùn)結(jié)束后對(duì)培訓(xùn)活動(dòng)所達(dá)到的目標(biāo)進(jìn)行的衡量與評(píng)價(jià)。CIPP 模型具有全程性、過(guò)程性和反饋性等特點(diǎn)。它將評(píng)估過(guò)程和培訓(xùn)過(guò)程有機(jī)結(jié)合起來(lái),使其評(píng)估與反饋的目的貫穿評(píng)估過(guò)程的始終。
考夫曼的五級(jí)評(píng)估模型包括反應(yīng)和可能、掌握、應(yīng)用、組織效益、社會(huì)效益五個(gè)層級(jí),各個(gè)層級(jí)評(píng)估范圍是從內(nèi)向外逐漸擴(kuò)展的。反應(yīng)和可能層級(jí)是對(duì)培訓(xùn)方法、手段和程序的有效應(yīng)用,包括對(duì)培訓(xùn)中人力、財(cái)力和物力有效性的評(píng)價(jià);掌握層級(jí)是對(duì)培訓(xùn)中個(gè)人和小組的能力情況進(jìn)行的評(píng)估;應(yīng)用層級(jí)是對(duì)掌握層級(jí)所具備的能力在實(shí)際情況中應(yīng)用的評(píng)估;組織效益和社會(huì)效益層級(jí)是考夫曼在擴(kuò)展柯克帕特里克的四層次模型基礎(chǔ)上提出的,考夫曼認(rèn)為從對(duì)組織收益的獲得來(lái)源離不開(kāi)與之密切相關(guān)的組織環(huán)境,因此,他認(rèn)為社會(huì)和客戶的反應(yīng)也是評(píng)估的重要組成部分。
菲利普斯于1996年提出五級(jí)投資回報(bào)率模型,該模型的層級(jí)包括反應(yīng)和既定的活動(dòng)、學(xué)習(xí)、在工作中的應(yīng)用、業(yè)務(wù)結(jié)果和投資回報(bào)率。反應(yīng)和既定的活動(dòng)層級(jí)是評(píng)估學(xué)員對(duì)培訓(xùn)項(xiàng)目的反應(yīng)及實(shí)施的明確計(jì)劃;學(xué)習(xí)層級(jí)是對(duì)學(xué)員技能、知識(shí)或觀念的變化的評(píng)估;在工作中的應(yīng)用層級(jí)是對(duì)學(xué)員在工作中行為的變化和培訓(xùn)資源應(yīng)用的評(píng)估;業(yè)務(wù)結(jié)果層級(jí)是關(guān)于培訓(xùn)項(xiàng)目對(duì)學(xué)員業(yè)務(wù)活動(dòng)影響的評(píng)估;投資回報(bào)率層級(jí)是從財(cái)務(wù)績(jī)效方面對(duì)培訓(xùn)效果進(jìn)行計(jì)算的評(píng)估。
1.科學(xué)性原則
職業(yè)農(nóng)民培訓(xùn)效益評(píng)估的科學(xué)性體現(xiàn)在三個(gè)方面:一個(gè)是評(píng)估內(nèi)容的科學(xué)性,內(nèi)容的選擇要有客觀的依據(jù),不能主觀臆斷;二是評(píng)估標(biāo)準(zhǔn)的科學(xué)性,針對(duì)農(nóng)民培訓(xùn)機(jī)構(gòu)、培訓(xùn)過(guò)程和結(jié)果認(rèn)定等主要培訓(xùn)環(huán)節(jié),應(yīng)建立一套嚴(yán)格、具有可操行性的評(píng)價(jià)標(biāo)準(zhǔn),采用的數(shù)據(jù)要有代表性和可比性;三是評(píng)估方法的科學(xué)性,評(píng)估方法的選擇要結(jié)合農(nóng)民培訓(xùn)的特點(diǎn),定性方法與定量方法相結(jié)合,方法和手段具有針對(duì)性,既可有效收集信息,又能對(duì)結(jié)果的評(píng)價(jià)具有指導(dǎo)性。[5]
2.整體性原則
職業(yè)農(nóng)民培訓(xùn)是一個(gè)系統(tǒng)性的工作,不僅需要注重培訓(xùn)過(guò)程、技能掌握的認(rèn)定,更重要的是培訓(xùn)后的效果。而培訓(xùn)效益評(píng)估正是對(duì)農(nóng)民所重點(diǎn)憂慮的問(wèn)題給予有針對(duì)性的反饋和解決。職業(yè)農(nóng)民培訓(xùn)不僅有直接的效益,還有間接的效益;不僅有短期的效益,還有長(zhǎng)期的效益;不僅有經(jīng)濟(jì)效益,還有社會(huì)效益。實(shí)現(xiàn)這些效益,需要從整體去把握培訓(xùn)的過(guò)程和結(jié)果,既要實(shí)現(xiàn)農(nóng)民對(duì)培訓(xùn)內(nèi)容的需求,也要完成國(guó)家對(duì)農(nóng)業(yè)發(fā)展的整體規(guī)劃,需要構(gòu)建一個(gè)具有整體性和綜合性的指標(biāo)以反映職業(yè)農(nóng)民培訓(xùn)的效益。
3.實(shí)用性原則
職業(yè)農(nóng)民培訓(xùn)效益評(píng)估工作取決于現(xiàn)有評(píng)估工作主要由上級(jí)農(nóng)廣校開(kāi)展,并且培訓(xùn)的內(nèi)容具有時(shí)間限定,要結(jié)合農(nóng)業(yè)種植的季節(jié)規(guī)律,所以在有限的時(shí)間內(nèi)對(duì)培訓(xùn)開(kāi)展效益評(píng)價(jià)就要遵循實(shí)用性的原則。評(píng)估人員的選擇(包括其他獨(dú)立的評(píng)估機(jī)構(gòu)中的人員)、評(píng)估時(shí)間的把握、評(píng)估手段的選取等都要具有實(shí)用性特點(diǎn),要結(jié)合不同培訓(xùn)項(xiàng)目和內(nèi)容,選擇最適合的人員,制定全面、可靠的評(píng)估指標(biāo),評(píng)估方法的選擇要有針對(duì)性,使得評(píng)估工作能夠簡(jiǎn)便、快捷和富有靈活性。只有這樣,評(píng)估工作才容易得到評(píng)估人員的理解,使評(píng)估操作容易、方便、可行。
1.要素及指標(biāo)體系
結(jié)合國(guó)內(nèi)外關(guān)于培訓(xùn)效益評(píng)估理論的研究成果、將培訓(xùn)過(guò)程與培訓(xùn)結(jié)果相結(jié)合的經(jīng)驗(yàn),本文將職業(yè)農(nóng)民培訓(xùn)效益評(píng)估指標(biāo)劃分為3 個(gè)一級(jí)指標(biāo)11個(gè)二級(jí)指標(biāo),建立了一套完整的評(píng)估指標(biāo)體系。一級(jí)指標(biāo)為人才效益、經(jīng)濟(jì)效益和社會(huì)效益。
人才效益對(duì)培訓(xùn)過(guò)程中農(nóng)民的自身理解程度、技術(shù)掌握程度、技術(shù)實(shí)用性和農(nóng)民滿意度四個(gè)方面給與更多的考慮,制定了掌握技術(shù)程度、改善了從業(yè)渠道、增強(qiáng)技術(shù)應(yīng)用和培訓(xùn)的認(rèn)可度4 個(gè)二級(jí)指標(biāo)。
經(jīng)濟(jì)效益是農(nóng)民參與培訓(xùn)獲得收益的最直接體現(xiàn),也是衡量培訓(xùn)效果的最佳指標(biāo)。從提高勞動(dòng)生產(chǎn)率、降低生產(chǎn)成本、提高產(chǎn)品產(chǎn)量、增強(qiáng)市場(chǎng)份額4 個(gè)二級(jí)指標(biāo)來(lái)體現(xiàn)經(jīng)濟(jì)效益。
社會(huì)效益是整個(gè)指標(biāo)體系中難以衡量的指標(biāo)。由于農(nóng)民參與培訓(xùn)的模式有所不同,加上不同技術(shù)推廣具有地域性、季節(jié)性特點(diǎn),給培訓(xùn)所產(chǎn)生的社會(huì)效益評(píng)估造成了一定的難度。因此,這一級(jí)指標(biāo),主要通過(guò)對(duì)增強(qiáng)科教興農(nóng)意識(shí)、提高技術(shù)普及、增強(qiáng)產(chǎn)業(yè)發(fā)展3 個(gè)二級(jí)指標(biāo)采取定性評(píng)估的方法來(lái)體現(xiàn),讓評(píng)估專家參與農(nóng)民農(nóng)作活動(dòng)中去,觀察培訓(xùn)給農(nóng)民帶來(lái)的理念和行為上的影響,進(jìn)而得出培訓(xùn)所輻射出來(lái)的社會(huì)效益。
2.指標(biāo)的權(quán)重
職業(yè)農(nóng)民培訓(xùn)效益評(píng)估指標(biāo)體系的權(quán)重比例是衡量培訓(xùn)效益高低的關(guān)鍵要素。因此,權(quán)重賦值要采取主觀賦權(quán)與客觀賦權(quán)相結(jié)合的方式。
主觀賦權(quán)宜采用層次分析法(AHP)進(jìn)行賦值。層次分析法是以定性與定量相結(jié)合的方式來(lái)對(duì)各種因素進(jìn)行判定的,它將人的主觀判斷用數(shù)量形式進(jìn)行表達(dá),是社會(huì)經(jīng)濟(jì)領(lǐng)域應(yīng)用比較廣泛的方法。
客觀賦權(quán)宜采用熵值法。在信息論中,熵是對(duì)不確定性的一種度量。信息量越大,不確定性就越小,熵也就越小;信息量越小,不確定性越大,熵也越大。根據(jù)熵的特性,我們可以通過(guò)計(jì)算熵值來(lái)判斷一個(gè)事件的隨機(jī)性及無(wú)序程度,也可以用熵值來(lái)判斷某個(gè)指標(biāo)的離散程度,指標(biāo)的離散程度越大,該指標(biāo)對(duì)綜合評(píng)價(jià)的影響越大。
將每一個(gè)指標(biāo)的權(quán)重設(shè)定為W,層次分析法得到的指標(biāo)權(quán)重為W1j,熵值法得到的指標(biāo)權(quán)重為W2j,得到綜合考慮主客觀因素的指標(biāo)權(quán)重向量:W =k1×W1j+k2×W2j,其中,0≤k1≤1,0≤k2≤1,k1+k2=1,j 為指標(biāo)項(xiàng)數(shù)綜合權(quán)重。組合權(quán)重隨k1與k2的改變而改變,本文取k=k1=k2=0.5,得到指標(biāo)的組合權(quán)重,[6]即:W =k ×W1j+k ×W2j(k =0.5)。計(jì)算出每一個(gè)指標(biāo)的權(quán)重后,再針對(duì)不同的地域特點(diǎn)和培訓(xùn)項(xiàng)目,采用相應(yīng)的評(píng)估。
[1]吳小穎.新農(nóng)村建設(shè)中農(nóng)民培訓(xùn)效果分析:以福建省茶農(nóng)為例[J].福建農(nóng)林大學(xué)學(xué)報(bào):哲學(xué)社會(huì)科學(xué)版,2011,(4):14—17.
[2]朱奇彪,米松華,等.新型職業(yè)農(nóng)民培訓(xùn)的績(jī)效評(píng)估與分析[J].江蘇農(nóng)業(yè)科學(xué),2014,(2):407—411.
[3]張景林,劉永功.農(nóng)民培訓(xùn)效果及其影響因素研究[J].中國(guó)農(nóng)業(yè)教育,2005,(4):1—4.
[4]夏艷玲.培訓(xùn)效果評(píng)估理論綜述[J].科教文匯(下半月刊),2006,(1):187—188.
[5]吳淮平.人力資源培訓(xùn)效益評(píng)估分析[J].科技進(jìn)步與對(duì)策,2011,(12):146—147.
[6]張秀萍.中國(guó)省域高等教育競(jìng)爭(zhēng)力研究[D].大連:大連理工大學(xué),2013.