張璞玉
(上海杉達(dá)學(xué)院,上海 201209)
[摘 要]評(píng)估方法是政策評(píng)估活動(dòng)中的重要工具。Guba,E. G和Lincoln,Y. S.基于評(píng)估研究的發(fā)展歷程,提出了時(shí)代模式,展示了政策評(píng)估發(fā)展的特點(diǎn)。本文基于時(shí)代模式下每一階段評(píng)估的特點(diǎn),發(fā)現(xiàn)政策評(píng)估方法出現(xiàn)了從實(shí)證主義向詮釋主義轉(zhuǎn)變的趨勢(shì)。然而,這一模式下評(píng)估的發(fā)展是非線性的,政策評(píng)估方法在演變的過(guò)程中也并不是替代與被替代的關(guān)系,而是在時(shí)代模式下的融合。
[關(guān)鍵詞]政策評(píng)估;時(shí)代模式;評(píng)估方法
doi:10.3969/j.issn.1673 - 0194.2017.10.125
[中圖分類號(hào)]D630 [文獻(xiàn)標(biāo)識(shí)碼]A [文章編號(hào)]1673-0194(2017)10-0-02
政策評(píng)估是政策過(guò)程中的重要環(huán)節(jié),通過(guò)政策評(píng)估可以判斷政策本身的質(zhì)量和價(jià)值,從而進(jìn)一步?jīng)Q定政策是延續(xù)、革新或是終結(jié)。政策評(píng)估功能的發(fā)揮主要取決于是否能夠選取合適的政策評(píng)估方法并有效運(yùn)用。現(xiàn)階段,國(guó)內(nèi)關(guān)于政策評(píng)估方法的研究甚少,且主要集中于對(duì)國(guó)外政策評(píng)估模式等理論的介紹??偟膩?lái)看,我國(guó)的政策評(píng)估還未形成一套成熟、完善的方法體系。探究政策評(píng)估的興起背景以及評(píng)估研究的發(fā)展歷程可知,政策評(píng)估是評(píng)估研究在其發(fā)展過(guò)程中,由接受了該學(xué)科訓(xùn)練的人將評(píng)估研究方法運(yùn)用到機(jī)構(gòu)政治決策中而形成的,是眾多評(píng)估活動(dòng)中的一類。評(píng)估模式是評(píng)估要素、評(píng)估過(guò)程以及評(píng)估方法等因素形成的相對(duì)穩(wěn)固的邏輯關(guān)系。評(píng)估模式能表現(xiàn)出評(píng)估者對(duì)評(píng)估工作的主要概念、結(jié)構(gòu)的看法。在評(píng)估研究的發(fā)展過(guò)程中,已形成了不同的模式及發(fā)展方向?!皶r(shí)代模式”是Guba,E. G和Lincoln,Y. S.基于評(píng)估研究的發(fā)展,提出的評(píng)估分類體系,是最早對(duì)評(píng)估進(jìn)行系統(tǒng)分類的模式。該評(píng)估模式已在政策評(píng)估的研究中被廣為接受,并且可以將該模式看作是政策評(píng)估的演進(jìn)歷程。相較于Alkin,M.C.的樹狀模式和Fitzpatrick,J.L.,Sander,J.R.和Worthen,C.P.的運(yùn)用模式,“時(shí)代模式”將復(fù)雜的評(píng)估活動(dòng)簡(jiǎn)單清晰地呈現(xiàn)出來(lái),并體現(xiàn)了每一階段評(píng)估的鮮明特點(diǎn),有利于探究政策評(píng)估方法的變化。
1 “時(shí)代模式”概述
Guba,E. G和Lincoln,Y. S.將評(píng)估的發(fā)展按時(shí)代進(jìn)行劃分,并在此基礎(chǔ)之上提出了第四代評(píng)估理論。第一代評(píng)估起源于教育領(lǐng)域,是對(duì)學(xué)生特征的測(cè)量。這一時(shí)代的評(píng)估等同于測(cè)量,以獲得測(cè)量數(shù)據(jù)為中心,評(píng)估者利用其可以掌握的工具,對(duì)評(píng)估對(duì)象進(jìn)行測(cè)量。第二代評(píng)估被稱作描述,準(zhǔn)確的說(shuō),這一評(píng)估時(shí)代應(yīng)是以目標(biāo)為導(dǎo)向的評(píng)估,描述是其重要特征,即“目標(biāo)導(dǎo)向的描述途徑”。在政策評(píng)估中,首先要對(duì)目標(biāo)進(jìn)行描述分析,并將政策實(shí)施結(jié)果加以精確測(cè)量,在此基礎(chǔ)上將結(jié)果與目標(biāo)進(jìn)行比較。這種將目標(biāo)與結(jié)果進(jìn)行比較的第二代評(píng)估,對(duì)當(dāng)今的評(píng)估活動(dòng)產(chǎn)生了深遠(yuǎn)的影響。以判斷作為特征的評(píng)估被劃分為第三代評(píng)估?!芭袛唷笔窃u(píng)估活動(dòng)中重要的因素,并貫穿于評(píng)估活動(dòng)。與第三代評(píng)估相比,第二代評(píng)估中的判斷是將目標(biāo)與結(jié)果進(jìn)行對(duì)比,對(duì)比則意味著判斷的存在。而該時(shí)代的評(píng)估,則以獨(dú)立于評(píng)估活動(dòng)的外部標(biāo)準(zhǔn)作為判斷的依據(jù)。因項(xiàng)目目標(biāo)本身也被看成是有問(wèn)題的,因此,不能將其作為判斷的標(biāo)準(zhǔn)。對(duì)判斷定義的不同理解,其體現(xiàn)了評(píng)估活動(dòng)的發(fā)展從以科學(xué)為基礎(chǔ)的研究,向“自然主義評(píng)估”過(guò)渡。Guba,E. G和Lincoln,Y. S.基于前三代評(píng)估發(fā)展提出了第四代評(píng)估——協(xié)商。他們認(rèn)為在評(píng)估活動(dòng)中要考慮評(píng)估者與政策相關(guān)者間的關(guān)系,如政策評(píng)估項(xiàng)目委托方、評(píng)估活動(dòng)開展的資金提供者、評(píng)估報(bào)告使用的領(lǐng)導(dǎo)者等。他們認(rèn)為評(píng)估要深入到評(píng)估對(duì)象中,探清其需求,在不斷協(xié)商中進(jìn)行。如文中所述,判斷伴隨著評(píng)估活動(dòng)而存在,判斷的標(biāo)準(zhǔn)也體現(xiàn)了評(píng)估者的價(jià)值取向,這一時(shí)代的評(píng)估則強(qiáng)調(diào)評(píng)估者在與政策相關(guān)方協(xié)商的過(guò)程中共同構(gòu)建評(píng)估的目標(biāo)價(jià)值。
2 政策評(píng)估方法演變——社會(huì)實(shí)驗(yàn)與質(zhì)性研究方法
基于Guba,E. G和Lincoln,Y. S.提出的時(shí)代模式,第一代評(píng)估到第四代評(píng)估,體現(xiàn)了評(píng)估范式從實(shí)證主義到詮釋主義的轉(zhuǎn)變。實(shí)證主義評(píng)估范式的核心在于使用科學(xué)的技術(shù)方法對(duì)評(píng)估對(duì)象進(jìn)行精確的測(cè)量,主要使用的是實(shí)驗(yàn)方法。詮釋主義評(píng)估范式的核心是評(píng)估者深度參與政策的制定、執(zhí)行等全過(guò)程,建構(gòu)政策的目標(biāo)價(jià)值,主要使用質(zhì)性的研究方法,通過(guò)實(shí)地參與式觀察、深度訪談等方法對(duì)政策進(jìn)行全面理解。
前三代的評(píng)估都具備一個(gè)共同的特性——強(qiáng)調(diào)評(píng)估的科學(xué)范式,在評(píng)估方法上重視使用定量的測(cè)量工具以及實(shí)驗(yàn)方法。第一代評(píng)估采用實(shí)驗(yàn)室實(shí)驗(yàn),運(yùn)用技術(shù)性的測(cè)量方法,如心理學(xué)的測(cè)量方法,目的是確保測(cè)量結(jié)果客觀、準(zhǔn)確;第二代則采用實(shí)地實(shí)驗(yàn),保留了上一階段測(cè)量這一技術(shù)手段,提出對(duì)評(píng)估對(duì)象進(jìn)行客觀描述,在客觀描述的基礎(chǔ)上,強(qiáng)調(diào)對(duì)政策目標(biāo)與政策干預(yù)結(jié)果的測(cè)量;第三代評(píng)估中使用的是社會(huì)實(shí)驗(yàn)方法,在前兩代評(píng)估方法繼續(xù)沿用的基礎(chǔ)上,強(qiáng)調(diào)了評(píng)估者要以外部標(biāo)準(zhǔn)進(jìn)行價(jià)值判斷。盡管在評(píng)估工具的使用和側(cè)重上略有不同,但前三代都采用了對(duì)評(píng)估對(duì)象有控制性的實(shí)驗(yàn)方式,看重獲取關(guān)于評(píng)估對(duì)象客觀、真實(shí)的數(shù)據(jù)。第四代評(píng)估強(qiáng)調(diào)構(gòu)建、協(xié)商,基于詮釋主義方法論,運(yùn)用質(zhì)性的評(píng)估方法。詮釋主義的評(píng)估范式強(qiáng)調(diào)評(píng)估者參與到評(píng)估對(duì)象的活動(dòng)中,通過(guò)獲取質(zhì)性的數(shù)據(jù)資料,進(jìn)而進(jìn)行判斷評(píng)價(jià)。
2.1 社會(huì)實(shí)驗(yàn)法
實(shí)證主義范式下的政策評(píng)估方法有很多種,就其本質(zhì)來(lái)看,政策評(píng)估是檢視政策實(shí)施后,對(duì)其實(shí)施對(duì)象是否帶來(lái)了預(yù)期及預(yù)期外的影響,那么評(píng)估者就需要對(duì)政策的實(shí)施進(jìn)行判斷。目前,比較流行且廣泛使用的實(shí)證主義的政策評(píng)估方法是社會(huì)實(shí)驗(yàn)。美國(guó)從20世紀(jì)60年代至20世紀(jì)90年代,各級(jí)政府采用社會(huì)實(shí)驗(yàn)對(duì)醫(yī)療、教育、住房等領(lǐng)域?qū)嵤┑恼?,進(jìn)行了90多次的評(píng)估,耗資超過(guò)10億美元。
社會(huì)實(shí)驗(yàn)的基本思想是把評(píng)估對(duì)象隨機(jī)分配到實(shí)驗(yàn)組和控制組,對(duì)實(shí)驗(yàn)組實(shí)施政策,經(jīng)政策干預(yù)后,通過(guò)對(duì)比兩組的變化情況,判斷政策干預(yù)效果。若僅有實(shí)驗(yàn)組發(fā)生變化,那么兩組之間的差異為政策干預(yù)所致。這是社會(huì)實(shí)驗(yàn)最基本的思路,被視為最有效的社會(huì)實(shí)驗(yàn)方法——隨機(jī)實(shí)驗(yàn)。在實(shí)際操作中因受現(xiàn)實(shí)情況的限制,無(wú)法隨機(jī)分配控制組或無(wú)法選取控制組時(shí),會(huì)采用準(zhǔn)實(shí)驗(yàn)方法。準(zhǔn)實(shí)驗(yàn)的思路同隨機(jī)實(shí)驗(yàn),但二者的區(qū)別在于對(duì)實(shí)驗(yàn)組與控制組的選取并不是隨機(jī)分配的,是通過(guò)相似性進(jìn)行選擇。此外,覆蓋面較為全面的政策,如全國(guó)性或某一地方政府的政策,隨機(jī)建立實(shí)驗(yàn)組和控制組不太可行,這時(shí)就可以使用反身設(shè)計(jì)。這一實(shí)驗(yàn)設(shè)計(jì)的假設(shè)是若沒(méi)有政策的干預(yù),那么評(píng)估對(duì)象的前后測(cè)數(shù)據(jù)是一致的。但這種方法的缺點(diǎn)較為明顯,如果后測(cè)出的數(shù)據(jù)較前測(cè)出的數(shù)據(jù)產(chǎn)生了變化,該變化是否為政策干預(yù)所致?因而,該實(shí)驗(yàn)設(shè)計(jì)在政策干預(yù)與測(cè)量的對(duì)象上存在非常密切的關(guān)系,且評(píng)估對(duì)象所處的外界環(huán)境較為穩(wěn)定時(shí)才會(huì)使用。
2.2 質(zhì)性研究方法
Guba,E. G和Lincoln,Y. S.提出的超越了純粹科學(xué)范疇的第四代評(píng)估——以協(xié)調(diào)和談判為核心的評(píng)估,需要評(píng)估者與政策相關(guān)方充分互動(dòng),完全參與政策評(píng)估項(xiàng)目。質(zhì)性研究方法在此發(fā)揮了重要的作用。質(zhì)性研究方法在政策評(píng)估使用過(guò)程中、在資料收集方面,不是通過(guò)測(cè)量而獲得數(shù)據(jù),而是在自然情境下與政策評(píng)估對(duì)象進(jìn)行互動(dòng)。不同于實(shí)驗(yàn)法的是,質(zhì)性研究方法強(qiáng)調(diào)在“自然狀態(tài)”下進(jìn)行,而不是實(shí)驗(yàn)設(shè)計(jì)中強(qiáng)調(diào)的對(duì)實(shí)驗(yàn)環(huán)境的控制。在質(zhì)性研究中最有代表性的是實(shí)地法。實(shí)地法的使用需要評(píng)估者深入評(píng)估對(duì)象的背景中,通過(guò)參與觀察和無(wú)結(jié)構(gòu)訪談來(lái)收集項(xiàng)目資料,并通過(guò)對(duì)項(xiàng)目資料進(jìn)行定性的分析,從而與評(píng)估對(duì)象進(jìn)行溝通協(xié)商。實(shí)地研究具有很強(qiáng)的彈性,不像實(shí)驗(yàn)法那樣具有嚴(yán)格和固定的程序。
3 結(jié) 論
時(shí)代模式視角下政策評(píng)估的發(fā)展歷程,展現(xiàn)了政策評(píng)估方法從實(shí)證主義評(píng)估范式向詮釋主義評(píng)估范式演變的趨勢(shì)。但這并不意味著質(zhì)性研究方法在政策評(píng)估活動(dòng)中完全替代了實(shí)證主義的評(píng)估方法。時(shí)代模式揭示了政策評(píng)估的發(fā)展與進(jìn)步,這種發(fā)展與進(jìn)步并不是簡(jiǎn)單的線性發(fā)展軌跡,新一代政策評(píng)估彌補(bǔ)了上一代政策評(píng)估活動(dòng)中的不足,上一代政策評(píng)估中的特點(diǎn)則作為已有的評(píng)估要素蘊(yùn)含在新一代政策評(píng)估中,作為評(píng)估時(shí)代要素之一的評(píng)估方法,也伴隨著政策評(píng)估的發(fā)展而發(fā)展。第一代評(píng)估突出了評(píng)估的工具屬性以及評(píng)估者評(píng)估技術(shù)的熟練性、準(zhǔn)確性,其目的是要得到客觀準(zhǔn)確的測(cè)量結(jié)果,以保證政策評(píng)估結(jié)果的準(zhǔn)確。在之后的評(píng)估研究中,認(rèn)為其測(cè)量過(guò)分強(qiáng)調(diào)了評(píng)估的技術(shù)性,忽略了對(duì)評(píng)估對(duì)象的了解、描述,不應(yīng)將測(cè)量等同于評(píng)估。第二代評(píng)估強(qiáng)調(diào)了對(duì)項(xiàng)目結(jié)果的描述,但仍保留了測(cè)量這一技術(shù)方法,并將其作為對(duì)目標(biāo)描述的工具。尤其是在社會(huì)實(shí)驗(yàn)中,在測(cè)量實(shí)驗(yàn)對(duì)象受政策干預(yù)時(shí),測(cè)量的技術(shù)性與重要性不可忽視。第四代評(píng)估突出協(xié)商和政策評(píng)估價(jià)值的建構(gòu),雖然其以質(zhì)性研究方法為主,但并不意味著這種方法的使用就完全脫離了技術(shù)指導(dǎo)。前三代政策評(píng)估中,實(shí)證主義評(píng)估方法強(qiáng)調(diào)的客觀、準(zhǔn)確的科學(xué)精神依然適用于質(zhì)性的評(píng)估方法。質(zhì)性的評(píng)估方法依賴于對(duì)獲得信息的意義解釋,對(duì)數(shù)據(jù)內(nèi)容的解釋也有與其相適應(yīng)的技術(shù),諸如分類學(xué)的解釋、語(yǔ)言學(xué)的解釋和注釋學(xué)的解釋,必要的話,還需將信息轉(zhuǎn)化為可以處理的數(shù)字或文本。當(dāng)然,沒(méi)有哪一種評(píng)估方法可以適用于所有的政策評(píng)估活動(dòng),但通過(guò)評(píng)估模式建立了政策評(píng)估活動(dòng)中各要素間的穩(wěn)定關(guān)系,可以體現(xiàn)出政策評(píng)估的特點(diǎn),從而采取更適用的政策評(píng)估方法。
主要參考文獻(xiàn)
[1]和經(jīng)緯.中國(guó)公共政策評(píng)估研究的方法論取向:走向?qū)嵶C主義[J].中國(guó)行政管理,2008(9).
[2][美]彼得·羅西,馬克·李普希,霍華德·弗里德曼.評(píng)估:方法與技術(shù)[M].第7版.邱澤奇,王旭輝,劉月,譯.重慶:重慶大學(xué)出版社,2007.
[3]曹哲堂.公共管理評(píng)估研究[M].北京:北京大學(xué)出版社,2014.
[4]李志軍.重大公共政策評(píng)估理論、方法與實(shí)踐[M].北京:中國(guó)發(fā)展出版社,2013.
[5][德]賴因哈德·施托克曼,沃爾夫?qū)っ芬?評(píng)估學(xué)[M].唐以志,譯.北京:人民出版社,2012.
[6][美]埃貢·G·古貝,伊馮娜·S·林肯.第四代評(píng)估[M].秦霖,蔣燕玲,譯.北京:中國(guó)人民大學(xué)出版社,2008.
[7]G Burtless. The Case for Randomized Field Trialsin Economic and Policy Research[J].Journal of Economic Perspectives,1995(2).
[8]陳向明.質(zhì)的研究方法與社會(huì)科學(xué)研究[M].北京:教育科學(xué)出版社,2000.
[9][美]勞倫斯·紐曼.社會(huì)研究方法——定性和定量的取向[M].郝大海,譯.北京:中國(guó)人民大學(xué)出版社,2007.
[10]李偉.公共政策評(píng)估:發(fā)達(dá)國(guó)家“抓落實(shí)”的一把“利劍”[J].秘書工作,2016(1).
[11]孫達(dá).對(duì)我國(guó)當(dāng)前公共政策評(píng)估現(xiàn)狀分析及完善途徑的幾點(diǎn)思考[J].人力資源管理,2016(5).
[12]劉星.我國(guó)公共政策評(píng)估發(fā)展面臨的困境及對(duì)策研究[J].商,2016(16).
[13]王海波.公共政策評(píng)估基本問(wèn)題研究綜述[J].齊齊哈爾工程學(xué)院學(xué)報(bào),2016(3).
[14]覃耀堅(jiān).我國(guó)公共政策評(píng)估存在的問(wèn)題及其對(duì)策研究[J].大眾科技,2015(1).
[15]廉爾力.公共政策評(píng)估內(nèi)涵新探[J].中共山西省直機(jī)關(guān)黨校學(xué)報(bào),2015(2).
[16]陳何南.公共政策評(píng)估標(biāo)準(zhǔn)的應(yīng)用路徑分析[J].商業(yè)時(shí)代,2014(6).
[17]高小泉.我國(guó)公共政策評(píng)估存在的問(wèn)題及其完善措施[J].人才資源開發(fā),2014(14).