賈辛欣，郭夢縈

(山東省科技統(tǒng)計(jì)分析研究中心 ,山東 濟(jì)南 250101)

山東省自然科學(xué)基金項(xiàng)目績效評(píng)價(jià)研究

賈辛欣，郭夢縈

(山東省科技統(tǒng)計(jì)分析研究中心 ,山東 濟(jì)南 250101)

為進(jìn)一步加強(qiáng)對(duì)山東省自然科學(xué)基金的管理、優(yōu)化科技資源、提高科技投入的資金運(yùn)行效率，在國內(nèi)外相關(guān)學(xué)者已有的研究基礎(chǔ)上，建立山東省自然科學(xué)基金績效的概念模型和評(píng)價(jià)指標(biāo)體系，采用兩階段數(shù)據(jù)包絡(luò)分析模型對(duì)山東省自然科學(xué)基金項(xiàng)目進(jìn)行評(píng)價(jià)。實(shí)證分析結(jié)果顯示，山東省自然科學(xué)基金項(xiàng)目整體績效水平較高，但不同項(xiàng)目類別、不同學(xué)科之間差距較大，對(duì)此應(yīng)進(jìn)一步扶持弱勢學(xué)科，加大財(cái)政科技投入及對(duì)基礎(chǔ)研究領(lǐng)軍人才的引進(jìn)和培養(yǎng)。

自然科學(xué)基金；兩階段數(shù)據(jù)包絡(luò)分析；績效評(píng)價(jià)

山東省自然科學(xué)基金作為省級(jí)科技計(jì)劃項(xiàng)目的重要組成部分，致力于推動(dòng)原始性創(chuàng)新，以資助的方式管理其支持的基礎(chǔ)研究和應(yīng)用基礎(chǔ)研究，發(fā)現(xiàn)、培養(yǎng)和引進(jìn)高層次創(chuàng)新人才，培育自主知識(shí)產(chǎn)權(quán)，增加科技與人才儲(chǔ)備，為增強(qiáng)科技持續(xù)創(chuàng)新后勁發(fā)揮積極的作用。為了更好地發(fā)揮自然科學(xué)基金對(duì)科技的資助作用，我國近年也在不斷地推行和完善自然科學(xué)基金制?？冃гu(píng)價(jià)作為一項(xiàng)重要的管理手段，對(duì)自然科學(xué)基金的管理、優(yōu)化科技資源、提高科技投入的資金運(yùn)行效率起到了重要的作用。因此，對(duì)于科技基金項(xiàng)目的績效評(píng)價(jià)方法的研究越來越得到同行的重視。

國外學(xué)者對(duì)科技計(jì)劃項(xiàng)目績效評(píng)價(jià)方面的研究比較成熟，除了運(yùn)用同行評(píng)議法、案例分析法、訪談問卷法、文獻(xiàn)計(jì)量法等傳統(tǒng)評(píng)價(jià)方法外，還結(jié)合計(jì)量經(jīng)濟(jì)學(xué)、數(shù)學(xué)、運(yùn)籌學(xué)等組成綜合性評(píng)價(jià)方法，從各種角度對(duì)科技計(jì)劃項(xiàng)目進(jìn)行績效評(píng)價(jià)。Martin等[1]對(duì)基礎(chǔ)研究項(xiàng)目進(jìn)行評(píng)價(jià)研究，提出了基礎(chǔ)研究績效評(píng)價(jià)的四個(gè)維度，即科學(xué)自身維度、技術(shù)維度、教育維度和文化維度。Garcia等[2]提出了一種新的評(píng)價(jià)方法，即采用領(lǐng)航操作(Pilot exercise)來構(gòu)建指標(biāo)體系。

相比國外來說，我國對(duì)于科技計(jì)劃項(xiàng)目的績效評(píng)價(jià)工作起步較晚，但經(jīng)過這些年的不斷探索，在這方面也有一定的進(jìn)步和發(fā)展。白坤朝等[3]通過對(duì)數(shù)學(xué)、物理領(lǐng)域國家杰出青年科學(xué)基金項(xiàng)目績效評(píng)估(結(jié)題審查和中期檢查)實(shí)踐的分析，研究和探討建立完善基礎(chǔ)研究項(xiàng)目績效評(píng)估指標(biāo)和有關(guān)方法等。徐敏[4]結(jié)合浙江省自然科學(xué)基金管理的實(shí)踐，探索了多層次的績效評(píng)價(jià)指標(biāo)體系。

目前國內(nèi)外大多學(xué)者只從投入和產(chǎn)出兩個(gè)維度評(píng)價(jià)研發(fā)項(xiàng)目的績效，忽略服務(wù)過程的重要性。因而本文重點(diǎn)從研究投入-過程-產(chǎn)出角度，利用數(shù)據(jù)包絡(luò)分析模型對(duì)山東省自然科學(xué)基金進(jìn)行績效評(píng)價(jià)，更有科學(xué)意義，對(duì)決策應(yīng)用的價(jià)值更大。

1 指標(biāo)體系及模型構(gòu)建

山東省自然科學(xué)基金是省科技計(jì)劃體系中重要一類科技計(jì)劃，以培養(yǎng)優(yōu)秀青年科技人才為主要目的，重點(diǎn)支持基礎(chǔ)研究和應(yīng)用基礎(chǔ)研究。山東省自然科學(xué)基金項(xiàng)目績效系統(tǒng)包括投入系統(tǒng)、實(shí)施過程系統(tǒng)、產(chǎn)出系統(tǒng)。其中，投入系統(tǒng)包括人力投入、經(jīng)費(fèi)投入、物力投入；產(chǎn)出系統(tǒng)包括科研成果、人才培養(yǎng)、爭取高級(jí)別項(xiàng)目等；實(shí)施過程系統(tǒng)包括人員活動(dòng)情況、經(jīng)費(fèi)使用、計(jì)劃執(zhí)行和實(shí)施形式等。省自然科學(xué)基金的投入系統(tǒng)通過實(shí)施過程影響產(chǎn)出水平，同時(shí)產(chǎn)出系統(tǒng)又反作用于實(shí)施系統(tǒng)和投入系統(tǒng)。三者之間相互聯(lián)系、相互影響、相互作用、相輔相成[5]。如一個(gè)產(chǎn)學(xué)研創(chuàng)新系統(tǒng)，高水平的創(chuàng)新產(chǎn)出，會(huì)激勵(lì)產(chǎn)學(xué)研組織的良性互動(dòng)和創(chuàng)新投入，高效的產(chǎn)學(xué)研合作也會(huì)促使各組織單位增加創(chuàng)新投入。因此，科技創(chuàng)新是一個(gè)具有投入-過程-產(chǎn)出特征的動(dòng)態(tài)過程系統(tǒng)[6]。

基于以上分析，建立省自然科學(xué)基金績效評(píng)價(jià)的概念模型，如圖1所示。

圖1 省自然科學(xué)基金績效系統(tǒng)的概念模型Fig.1 Conceptual model of performance system of Provincial Natural Science Foundation

1.1 指標(biāo)體系構(gòu)建原則

山東省自然科學(xué)基金項(xiàng)目評(píng)價(jià)指標(biāo)體系選取的基本原則是從山東省的具體情況出發(fā)，根據(jù)當(dāng)?shù)卣芾淼默F(xiàn)狀和特點(diǎn)，全面真實(shí)地反映山東省的發(fā)展情況，兼顧當(dāng)前與長遠(yuǎn)的發(fā)展。因此，在構(gòu)建山東省自然科學(xué)基金項(xiàng)目的績效評(píng)價(jià)指標(biāo)體系時(shí)，遵循重點(diǎn)性和系統(tǒng)性相結(jié)合、現(xiàn)實(shí)性和發(fā)展性相結(jié)合、科學(xué)實(shí)用性與針對(duì)性相結(jié)合、動(dòng)態(tài)性與靜態(tài)性相結(jié)合、定量與定性相結(jié)合的原則。

1.2 指標(biāo)的選擇

根據(jù)數(shù)據(jù)的可得性，我們初步選取數(shù)據(jù)完整的指標(biāo)作為評(píng)價(jià)指標(biāo)，在經(jīng)過數(shù)據(jù)的同樣性和相關(guān)性分析后，確立最終選取的指標(biāo)。其中，投入指標(biāo)包括研究人員和研究經(jīng)費(fèi)；過程指標(biāo)選取按時(shí)結(jié)題情況和產(chǎn)學(xué)研聯(lián)合情況兩個(gè)指標(biāo)；產(chǎn)出指標(biāo)選取發(fā)表論文數(shù)、培養(yǎng)人才數(shù)、項(xiàng)目成果和專利。其中各指標(biāo)定義如下：

研究人員——指從事科學(xué)研究工作的在職在崗專業(yè)技術(shù)人員，包括研究實(shí)習(xí)員、助理研究員、副研究員、研究員以及各高等院校的科研人員和參與科研的研究生等；

研究經(jīng)費(fèi)——指科學(xué)研究經(jīng)費(fèi)的總和，包括政府資金、企事業(yè)單位委托和其他經(jīng)費(fèi)等；

按時(shí)結(jié)題情況——主要評(píng)價(jià)各科研機(jī)構(gòu)、高等院校等機(jī)構(gòu)是否能夠按照項(xiàng)目申請(qǐng)書的要求按時(shí)按量完成相應(yīng)的任務(wù)；

產(chǎn)學(xué)研聯(lián)合情況——指企業(yè)與高等院校、企業(yè)與科研機(jī)構(gòu)、高等院校與科研機(jī)構(gòu)的合作情況；

發(fā)表論文數(shù)——主要統(tǒng)計(jì)發(fā)表的中文核心期刊論文數(shù)和三大檢索機(jī)構(gòu)SCI(科學(xué)引文索引)、EI(工程索引)、STP(科技會(huì)議錄索引)收錄論文數(shù)；

培養(yǎng)人才數(shù)——包括通過基金項(xiàng)目培養(yǎng)的博士研究生和碩士研究生；

項(xiàng)目成果和專利中項(xiàng)目成果——指獲省部級(jí)以上科技獎(jiǎng)勵(lì)數(shù)和爭取到國家級(jí)科研項(xiàng)目數(shù)；

專利數(shù)——指發(fā)明專利授權(quán)數(shù)。

1.3 數(shù)據(jù)包絡(luò)分析(DEA)模型的構(gòu)建

數(shù)據(jù)包絡(luò)分析(data envelopment analysis, DEA)是一種處理多投入-多產(chǎn)出的多目標(biāo)決策的效率評(píng)價(jià)方法。傳統(tǒng)的DEA只考慮投入和產(chǎn)出兩個(gè)過程，忽略了評(píng)價(jià)對(duì)象的內(nèi)部結(jié)構(gòu)和投入資源的配置情況。因此，我們將實(shí)施過程作為一個(gè)獨(dú)立的系統(tǒng)，通過BC2模型將綜合效率分解為純技術(shù)效率和規(guī)模效率，判斷評(píng)價(jià)對(duì)象是處于規(guī)模報(bào)酬不變、遞增還是遞減階段，通過C2R模型判定決策單元是否同時(shí)達(dá)到效率有效性和技術(shù)有效性。其動(dòng)態(tài)研究模型如圖2所示。據(jù)此，可以清楚地發(fā)現(xiàn)山東省自然科學(xué)基金項(xiàng)目從基礎(chǔ)投入到形成科技成果的整個(gè)過程和各個(gè)子階段的相對(duì)有效性，從而有針對(duì)性地尋找其績效改進(jìn)的手段，這對(duì)山東省自然科學(xué)基金項(xiàng)目的管理和發(fā)展更具有現(xiàn)實(shí)意義。

圖2 考慮過程的自然科學(xué)基金項(xiàng)目績效評(píng)價(jià)兩階段動(dòng)態(tài)DEA模型Fig.2 Two-Stage dynamic DEA model for performance evaluation of Natural Science Foundation Project considering process

如圖2所示：

第一階段：科技服務(wù)階段作為科技計(jì)劃績效評(píng)價(jià)的第一個(gè)子階段，其產(chǎn)出是整個(gè)科技計(jì)劃活動(dòng)的中間產(chǎn)出，該階段產(chǎn)出以服務(wù)水平和服務(wù)質(zhì)量為主，其中，服務(wù)水平和服務(wù)質(zhì)量包括按時(shí)結(jié)題情況和產(chǎn)學(xué)研聯(lián)合情況等。

第二階段：知識(shí)轉(zhuǎn)化階段作為科技計(jì)劃績效評(píng)價(jià)的第二個(gè)子系統(tǒng)，其產(chǎn)出主要包括培養(yǎng)人才數(shù)，發(fā)表論文數(shù)以及項(xiàng)目成果的獲獎(jiǎng)等。知識(shí)轉(zhuǎn)化作為完整的生產(chǎn)過程，其成果的產(chǎn)出不能自動(dòng)出現(xiàn)，該過程的順利實(shí)施需要科技人員的服務(wù)。因此，以第一階段的產(chǎn)出作為第二階段的投入指標(biāo)。

2 實(shí)證分析

根據(jù)動(dòng)態(tài)DEA模型，運(yùn)用MaxDEA 6.5軟件對(duì)山東省自然科學(xué)基金項(xiàng)目按照不同類型、不同學(xué)科分別進(jìn)行DEA分析，由于結(jié)果較為復(fù)雜和多樣，只給出相對(duì)簡單且重要的部分結(jié)果，具體結(jié)果如表1、表2所示，規(guī)模收益的結(jié)果較為復(fù)雜，僅根據(jù)上述規(guī)模收益判定的原理，給出最終的結(jié)論。

表1 按四種類型劃分的DEA分析結(jié)果

注：crste，vrste，scale分別表示綜合效率、純技術(shù)效率和規(guī)模效率，下同。綜合效率是在固定投入量下，產(chǎn)品的實(shí)際產(chǎn)出與最大產(chǎn)出之間的比率。規(guī)模效率=綜合效率/純技術(shù)效率，前者測算決策單元處于規(guī)模報(bào)酬的某一階段，后者反映規(guī)模因素對(duì)綜合效率的影響力有多大。

由表1可知，四類項(xiàng)目在第一階段的綜合效率平均值為0.949，純技術(shù)效率值為0.983，規(guī)模效率值為0.96，說明山東省自然科學(xué)基金項(xiàng)目在科技服務(wù)階段的整體績效較好，但在技術(shù)水平以及規(guī)模等方面還存在著一些問題，尚需要改進(jìn)。其中青年基金和面上項(xiàng)目綜合效率為1，且邊際投入等于邊際產(chǎn)出，故規(guī)模收益保持不變。由此可知，青年基金和面上項(xiàng)目的整體水平相對(duì)較好，處于較高的水平。重點(diǎn)項(xiàng)目的純技術(shù)效率為1，但由于其規(guī)模效率值小于1，導(dǎo)致其綜合效率值小于1，表明重點(diǎn)項(xiàng)目的資源配置能力是有效的，但由于規(guī)模不合理導(dǎo)致其綜合效率值小于1，同時(shí)由于重點(diǎn)項(xiàng)目的邊際產(chǎn)出大于邊際投入，因此導(dǎo)致重點(diǎn)項(xiàng)目的規(guī)模效益為遞增，在日后的管理中，應(yīng)調(diào)整資源的比例，適當(dāng)改變其規(guī)模，同時(shí)可適當(dāng)?shù)卦黾悠渫度胭Y源，進(jìn)而達(dá)到較高的績效水平。中青年項(xiàng)目，又稱博士基金，其純技術(shù)效率和規(guī)模效率值均小于1，故導(dǎo)致其綜合效率值小于1，說明中青年基金項(xiàng)目在資源的配置、資源的利用等方面均存在著不足，日后應(yīng)加強(qiáng)資源的配置，資源的利用等。

四類項(xiàng)目在第二階段的知識(shí)轉(zhuǎn)化過程中，純技術(shù)效率的平均值為1，處于相對(duì)較好的水平，規(guī)模效率的平均值為0.991，盡管規(guī)模效率依然存在一定的不足，但處于較高的水平，綜合來看四類項(xiàng)目在知識(shí)轉(zhuǎn)化階段的水平相對(duì)較好。特別是青年基金、重點(diǎn)項(xiàng)目和面上項(xiàng)目的三項(xiàng)效率值均為1，表明三者在知識(shí)轉(zhuǎn)化階段的資源投入、資源配置、資源利用等各方面相對(duì)較好，整體績效相對(duì)較理想。中青年項(xiàng)目的純技術(shù)效率值為1，但規(guī)模效率值小于1，其邊際產(chǎn)出小于邊際投入，規(guī)模報(bào)酬遞減，因此在日后的管理中，應(yīng)該減小經(jīng)營規(guī)模，以減少冗余，提高資源利用效率。

表2 按不同學(xué)科劃分的DEA分析結(jié)果

由表2可知，八個(gè)學(xué)科類別的項(xiàng)目在科技服務(wù)階段的綜合效率平均值為0.728，純技術(shù)效率的平均值為0.92，規(guī)模效率的平均值為0.799。由此可知八類學(xué)科的純技術(shù)效率的平均值較高，整體水平不高的原因是由于規(guī)模效率的平均值較低。其中，地球科學(xué)和信息科學(xué)三項(xiàng)效率值均為1，表明地球科學(xué)和信息科學(xué)的績效水平相對(duì)較高。生物科學(xué)、工程與材料科學(xué)和醫(yī)學(xué)科學(xué)的純技術(shù)效率值為1，而綜合效率值小于1是由于規(guī)模效率值小于1所導(dǎo)致的。且這三個(gè)學(xué)科的邊際產(chǎn)出均小于邊際投入，規(guī)模報(bào)酬處于遞減狀態(tài)，因此在日后的管理中，應(yīng)該縮小經(jīng)營規(guī)模，以減少冗余，提升總體效率。數(shù)理科學(xué)、化學(xué)科學(xué)和管理科學(xué)的純技術(shù)效率、規(guī)模效率均低于1，因此三者的綜合效率小于1，三者的邊際產(chǎn)出均大于邊際投入，規(guī)模報(bào)酬處于遞增狀態(tài)，因此在管理中，應(yīng)該擴(kuò)大經(jīng)營規(guī)模，發(fā)揮范圍經(jīng)濟(jì)和規(guī)模經(jīng)濟(jì)，提升總體效率。

在知識(shí)轉(zhuǎn)化階段，八類項(xiàng)目的綜合效率平均值為0.863，純技術(shù)效率的平均值為0.964，規(guī)模效率的平均值為0.892，該階段的效率平均值均高于第一階段的科技服務(wù)階段，說明八類學(xué)科在知識(shí)轉(zhuǎn)化階段的效率水平要高于科技服務(wù)階段的技術(shù)水平。其中，數(shù)理科學(xué)、生物科學(xué)、工程與材料科學(xué)和信息科學(xué)的綜合效率值為1，表明四者在知識(shí)轉(zhuǎn)化階段的績效水平較高?；瘜W(xué)科學(xué)、地球科學(xué)和管理科學(xué)三者的純技術(shù)效率值為1，表明三者在資源配置方面是有效的，之所以綜合效率水平較低是由于投入資源的規(guī)模不當(dāng)造成了整體水平較低，因此，應(yīng)該注重資源的規(guī)模效益，發(fā)揮規(guī)模經(jīng)濟(jì)的優(yōu)勢。在八類學(xué)科中，僅醫(yī)學(xué)科學(xué)的純技術(shù)效率和規(guī)模效率均小于1，因此應(yīng)該加強(qiáng)醫(yī)學(xué)科學(xué)的資源投入、資源配置等，提高資源的利用率，提高醫(yī)學(xué)科學(xué)的整體績效水平。

3 結(jié)語

根據(jù)兩階段數(shù)據(jù)包絡(luò)分析的結(jié)果可知，山東省自然科學(xué)基金項(xiàng)目整體績效水平較高，但不同項(xiàng)目類別、不同學(xué)科之間的差距較大。項(xiàng)目類別上，青年基金和面上項(xiàng)目整體績效水平較高；重點(diǎn)項(xiàng)目資源配置相對(duì)有效，但規(guī)模不合理；中青年基金項(xiàng)目在資源的配置、資源的利用等方面均存在著不足，日后應(yīng)加強(qiáng)資源的配置和利用。學(xué)科類別上，信息科學(xué)是山東省的優(yōu)勢學(xué)科，其他學(xué)科在資源配置、利用率上都存在相應(yīng)不足。

對(duì)此，應(yīng)進(jìn)一步加大對(duì)弱勢學(xué)科的扶持力度，持續(xù)穩(wěn)定地增加政府財(cái)政科技投入，提高資助強(qiáng)度，重視對(duì)基礎(chǔ)研究領(lǐng)軍人才引進(jìn)和培養(yǎng)，擴(kuò)大對(duì)中青年科研人員的支持規(guī)模，激發(fā)青年人才的科研熱情，從而形成一批在國內(nèi)外有一定影響力的學(xué)術(shù)帶頭人和研究團(tuán)隊(duì)。

[1]MARTIN B R, IRVINE J. Assessing basic research: Some partial indicators of scientific progress in radio astronomy[J]. Research Policy, 1983, 12(2):61-90.

[2]GARCIA C E，SANZ-MENENDEZ L.Competition for funding as an indicator of research competitiveness[J].Scientometrics，2005，64(3)：271-300.

[3]白坤朝,汲培文.基礎(chǔ)研究項(xiàng)目績效評(píng)估的實(shí)踐與探索——國家杰出青年科學(xué)基金項(xiàng)目績效評(píng)估案例研究[J].中國科學(xué)基金,2013,(1):22-25.

[4]徐敏.地方科學(xué)基金項(xiàng)目管理探析[J].浙江師范大學(xué)學(xué)報(bào)(自然科學(xué)版),2010,33(2):236-240.

[5]吳銳.安徽省自然科學(xué)基金績效評(píng)價(jià)體系研究[J].安徽科技(交流與探討),2010,(1):41-43.

[6]馮鴻雁,肖廣嶺,蘇俊斌.省級(jí)自然科學(xué)基金的目標(biāo)定位與績效評(píng)估——以河北省自然科學(xué)基金為案例[J].科學(xué)管理研究,2005,23(4):49-52.

ResearchonperformanceevaluationoftheprojectsofShandongProvincialNaturalScienceFoundation

JIAXin-xin，GUOMeng-ying

(ShandongScienceandTechnologyStatisticalAnalysisandResearchCenter,Jinan250101,China)

∶To further strengthen the management of Shandong provincial Natural Science Fundation, optimize the scientific and technological resources, and improve the efficiency of capital investment in science and technology, the conceptual model and evaluation index system of Shandong Provincial Natural Science Fundation was established on the basis of the existing research. Furthermore, the two-stage DEA model was used to evaluate the projects Shandong Provincial Natural Science Foundation.The empirical results show that the overall performance level of the projects of Shandong Provincial Natural Science Foundation is relatively high. However, there is a big gap between different project categories and different disciplines. Therefore, attention should be paid to further supporting of the weak disciplines, the increase of financial investment in science and technology, and the introduction and cultivation of leading talents in basis research.

∶Shandong Provincial Natural Science Foundation; two stage DEA; performance evaluation

10.3976/j.issn.1002-4026.2017.06.018

2017-10-11

山東省重點(diǎn)研發(fā)計(jì)劃(2015GSF122005)

賈辛欣(1970—) 女， 研究員， 研究方向?yàn)榭萍冀y(tǒng)計(jì)分析與評(píng)價(jià)。

N2;G311

A

1002-4026(2017)06-0110-05