翟亞寧
摘 要 結(jié)合北京工業(yè)大學研究生科技基金的特點,其評估活動開展應(yīng)堅持定量與定性評價相結(jié)合原則、各相關(guān)主體共同參與評估原則,與研究生成長規(guī)律相結(jié)合的原則。宜采用問卷調(diào)查法、文獻分析法和德爾菲法等方法,圍繞基金的管理情況、基金運行情況和實施效果情況開展評估活動;明確科技基金評估的前期準備階段、評估實施階段和撰寫提交評估報告階段的相關(guān)事項,對保證后續(xù)具體評估活動的開展很有必要。
關(guān)鍵詞 北京工業(yè)大學 研究生科技基金 評估
中圖分類號:G644 文獻標識碼:A DOI:10.16400/j.cnki.kjdks.2015.12.020
Beijing University of Technology Graduate
Students' Technology Fund Assessment
ZHAI Yaning
(School of Marxism, Beijing University of Technology, Beijing 100124)
Abstract Combine with the characteristics of graduate students of Beijing University of Technology Fund, the assessment activities should adhere to the principles of quantitative and qualitative evaluation of the combination principle, the relevant body involved in the assessment of common principles, combined with the growth pattern of the graduate. Should adopt the questionnaire, document analysis and Delphi method and other methods, the management of around fund, the operation and effect of the situation assessment activities carried out; clear the preparatory stage technology fund evaluation, the implementation stage and submit an assessment report writing related matters stage, to carry out specific evaluation activities to ensure follow-up is necessary.
Key words Beijing University of Technology; graduates technology fund; assessment
0 引言
北京工業(yè)大學研究生科技基金(以下簡稱“科技基金”)已實施13年,通過每年征集自主項目和委托項目的方式,在培養(yǎng)研究生創(chuàng)新能力方面取得了一定的成績,提高科技基金的運行效率,發(fā)揮科技基金的最大效用,已成為科技基金管理面臨的主要問題之一。科技評估是提高科技基金運行效率的重要手段,運用科技評估理論,在科技基金的評估原則、評估方法、評估程序和評估內(nèi)容方面開展研究,為后期的評估實踐開展奠定基礎(chǔ),十分必要。
1 科技基金基本情況
1.1 科技基金管理情況
在研究生科技基金的規(guī)章制度方面,北京工業(yè)大學分別制定了《北京工業(yè)大學研究生科技基金章程》、《北京工業(yè)大學研究生科技基金經(jīng)費管理辦法》,有效保證了研究生科技基金的順利運轉(zhuǎn)。在研究生科技基金的管理架構(gòu)上,北京工業(yè)大學要采用了院校兩級的管理體系。各學院主要負責對研究項目的初審、管理等。校研究生工作部主要管理重點項目和對一般項目進行抽查。從項目管理的角度看,北京工業(yè)大學對基金研究項目的管理覆蓋全過程,包含項目的立項管理、中期管理、結(jié)題管理等。
1.2 科技基金主要特點
在項目來源上,自主項目與委托項目并存。北京工業(yè)大學研究生科技基金項目來源主要有自主項目和委托項目。自主項目即研究生根據(jù)自身興趣和特長,自主設(shè)定研究方向、研究內(nèi)容和預(yù)期研究成果等。委托項目,每年研究生工作部發(fā)布委托項目指南,對所屬委托機構(gòu)、項目名稱、委托人、委托項目內(nèi)容、預(yù)期成果、考核指標和項目要求做了詳細的描述。
在支持對象上,主要面向研究生一年級學生。從北京工業(yè)大學研究生科技基金的支持對象上看,主要支持碩士一年級和博士一年級的同學,研究生二年級的科技項目一般不予支持。同時在支持項目的研究內(nèi)容上,一方面不能夠與導(dǎo)師的研究課題相關(guān),另一方面不能夠與研究生畢業(yè)論文相關(guān)。
在目標定位上,著眼于研究生熟悉科研過程。從《北京工業(yè)大學研究生科技基金管理章程》分析來看,北京工業(yè)大學研究生科技基金主要定位于研究生對科研過程的熟悉上,并非像首都經(jīng)濟貿(mào)易大學、對外經(jīng)濟貿(mào)易大學等高校研究基金明確提出要“形成一批創(chuàng)新性成果”。
2 科技基金評估基本原則
2.1 堅持定量評價與定性評價相結(jié)合原則
定量評價是采用數(shù)學的方法,收集和處理數(shù)據(jù)資料,對評價對象做出定量結(jié)果的價值判斷。定量評價相對比較客觀,人為影響因素相對較少,具有一定的可比性。定性評價是不采用數(shù)學的方法,而是根據(jù)評價者對評價對象的現(xiàn)實和狀態(tài)或文獻資料的觀察和分析,直接對評價對象做出定性結(jié)論的價值判斷。
在對研究生科技基金評估時,應(yīng)該對研究生科技基金的投入、產(chǎn)生的成果、立項數(shù)進行一些量化的處理,從而判斷其成效。同時,在研究生科技基金實施過程中的一些隱性影響和一些非量化成果是無法用定量的方法進行評價,應(yīng)對其進行定性評價。endprint
2.2 堅持各相關(guān)主體共同參與評估活動原則
該原則源自利益相關(guān)者理論。①一般認為,利益相關(guān)者是能夠影響一個組織目標的實現(xiàn)或者能夠被組織實現(xiàn)目標過程影響的。對研究生科技基金的各相關(guān)主體進行分析,讓各相關(guān)主體共同參與到評估活動中去,有利于評估結(jié)果的更加客觀公正。經(jīng)過初步分析認為,研究生科技基金相關(guān)主體主要有以下幾個方面:
獲得立項的研究生。研究生科技基金是面向研究生設(shè)立的,研究生是主要受益者。研究生從科技基金中獲得項目支持和訓練,進而取得研究成果。
基金管理單位?;鸸芾韱挝皇茄芯可萍蓟鸬慕M織運行者,主要負責對研究生申報項目的培訓、支持,以及科技基金的運行管理。
研究生導(dǎo)師。研究生導(dǎo)師在整個科技基金的實施階段,擁有“雙重身份”。一方面研究導(dǎo)師需要在科研期間,給予研究生指導(dǎo);另一方面研究生導(dǎo)師也是研究生能力提升的最直接見證者。
2.3 堅持與研究生成長規(guī)律相結(jié)合原則
研究生科技基金的主要目的是了提升研究生的科研能力,在對研究生科技基金進行評價時,應(yīng)系統(tǒng)考慮研究生的成長規(guī)律,保證基金評估的客觀性。需綜合考慮以下兩個方面:(1)研究生科研能力的提升不是一蹴而就的,具有一定的周期性。因此,我們在對研究生科研能力層面的評價時,不能忽視一些細小的提升,同時也應(yīng)綜合評價研究生科研能力的后期溢出效應(yīng)。(2)研究生科研能力的提升是多方面綜合努力結(jié)果。研究生科研能力需要自身不懈努力、導(dǎo)師的辛勤指導(dǎo)等等多方面因素,研究生科技基金作為一種學術(shù)研究平臺,對研究生科研能力的提升起著十分重要的作用,但不能把研究生科研能力的提升全部歸功于研究生科技基金,應(yīng)合理判斷。
3 科技基金評估方法
3.1 問卷調(diào)查法
問卷調(diào)查法是在評估過程中比較常用的方法。在對研究生科技基金評估過程中,主要針對已經(jīng)結(jié)題的研究生項目進行問卷調(diào)查,問卷調(diào)查的方式主要通過電子郵件的方式進行開展。問卷調(diào)查的內(nèi)容主要圍繞以下幾個方面:(1)科研項目的產(chǎn)生。主要調(diào)查科研項目來源情況,是自己感興趣的問題還是導(dǎo)師提供的參考項目等。(2)科研項目的立項。主要調(diào)查研究生對整個立項過程是否滿意,有什么建議,如何應(yīng)對科研項目的立項以及在參與立項過程中的收獲等。(3)科研項目的研究。主要圍繞科研項目研究過程中的三類問題進行調(diào)查。一是在科研項目研究過程中,團隊合作是否密切;二是在碰到困難時,采取什么樣的方法進行解決;三是科研項目的研究占用的時間等。(4)科研經(jīng)費的使用。主要圍繞當前的科研經(jīng)費管理是否便于進行科學研究進行調(diào)查。可設(shè)置研究生對科研經(jīng)費支出科目設(shè)置情況、科研經(jīng)費撥款程序的認知,研究生科研經(jīng)費的實際使用情況等觀測點。(5)科研項目的結(jié)題。主要調(diào)查研究生對當前研究生結(jié)題程序的看法以及研究生應(yīng)對結(jié)題的實際狀態(tài)。(6)科研成果的管理。主要調(diào)查研究生取得科研成果的用途及管理情況。
3.2 文獻分析法
在該評估過程中,需要對一些文獻資料的整理獲取研究生科技基金的相關(guān)信息。經(jīng)過初步分析認為,需要通過資料的整理,需要獲取以下幾方面的信息:一是北京其它高校同類科技基金的運行管理情況,從而便于從宏觀上把握北京工業(yè)大學研究生科技基金的整體定位情況;二是研究生科技基金的近年來經(jīng)費投入、立項數(shù)目和成果產(chǎn)出情況;三是研究生科技基金的管理運行機制情況。
3.3 德爾菲法
德爾菲法也稱專家調(diào)查法,是在20世紀40年代由O.赫爾姆和N.達爾克首創(chuàng),經(jīng)過T.J.戈爾登和蘭德公司進一步發(fā)展而成的。②德菲爾發(fā)具有以下幾點特征:一是能夠充分利用專家的專業(yè)知識;二是采用“背靠背”的方法,能夠保證專家獨立做出判斷;三是在不同專家的意見基礎(chǔ)上,進行綜合判斷,能夠更加保證評估的合理性與客觀性。
在對研究生科技基金評估時,擬選取從事基金運行的管理人員和從事研究生培養(yǎng)的導(dǎo)師作為專家,圍繞以下幾點內(nèi)容進行訪談和調(diào)查:研究生科技基金在研究生科技創(chuàng)新體系中的定位;研究生科技基金運行的經(jīng)驗與不足;研究生科技基金對研究科研能力提升的作用;研究生取得的成效。
4 科技基金評估程序
4.1前期準備階段
在科技基金評估的前期準備階段主要開展以下幾方面的工作:(1)評估對象特征的分析。對評估對象特征的分析是開展評估活動的首要程序。在對科技基金這一評估對象的分析過程中,主要分析以下幾個方面:一是科技基金的歷史發(fā)展過程。縱向分析科技基金的發(fā)展過程。設(shè)立的緣由以及發(fā)展過程中的相關(guān)信息和重大事件等。二是科技基金的同類比較分析。橫向分析北京工業(yè)大學研究生科技基金同其它高校類似基金的設(shè)置、運行和管理的異同,幫助提高對科技基金的認知;三是科技基金的外部特征分析。主要分析科技基金在大學研究生創(chuàng)新體系所處的位置和扮演的角色;四是科技基金的內(nèi)部特征分析。主要分析科技基金的運行細節(jié)、管理模式等。(2)評估方法、指標確定。經(jīng)過對評估對象分析后,需確定評估活動所采用的方法和指標。在對評估方法和指標的確定時,應(yīng)本著科學合理、易操作的原則。(3)評估小組的搭建。評估小組主要包括工作組和專家組兩部分。(4)評估文件的準備。評估文件主要包括評估方案、評估指標體系、評估報告框架等。
4.2 評估實施階段
在科技基金的評估實施階段主要開展以下幾點工作:(1)相關(guān)資料的分析評估工作。主要針對評估范圍內(nèi)的項目立項、結(jié)題、產(chǎn)出、相關(guān)管理文件的分析整理工作。(2)相關(guān)人員的訪談工作。主要針對基金管理人員、導(dǎo)師、基金項目承擔研究生等開展訪談工作。(3)問卷的發(fā)放與回收。主要針對科技基金承擔研究生發(fā)放調(diào)查問卷,并對問卷進行有效分析。
4.3 撰寫提交評估報告階段
在撰寫評估報告階段主要分為兩個步驟,一是撰寫評估報告初稿,交由相關(guān)專家進行咨詢論證,二是根據(jù)專家咨詢論證意見,修改評估報告并提交。endprint
撰寫評估報告時需注意以下三個方面:一是評估語言要清晰明確,采用第三方獨立的角度對評估結(jié)論進行描述,慎用情感類、模糊不確定類詞匯。二是評估結(jié)論要客觀。每一個評估結(jié)論提出的背后,都有一條完整的證據(jù)鏈。三是評估報告要全面。能夠細致全面客觀地反映科技基金在評估范圍內(nèi)的運行情況。
5 科技基金評估內(nèi)容
科技基金的實質(zhì)是為了提高研究生的科技創(chuàng)新能力,學校拿出一筆資金支持學生自主選題、申報、立項和研究,從而提高研究生的創(chuàng)新興趣和創(chuàng)新能力。為此,選擇較為科技評估工作中常用的“目標—管理—效果”邏輯框架,結(jié)合實際情況將科技基金評估內(nèi)容分為基金管理評估、基金運行評估和實施效果評估。
5.1 基金管理評估
基金管理評估主要針對基金的全過程管理環(huán)節(jié)進展評估。基金全過程管理評估可分為項目立項管理、中期管理、結(jié)題管理和經(jīng)費管理。根據(jù)上述管理環(huán)節(jié),對基金管理下設(shè)四個二級指標:項目立項管理情況、項目中期管理情況、項目結(jié)題管理情況和項目經(jīng)費管理及使用情況。
5.1.1 項目立項管理情況
項目的立項管理情況主要評價從組織項目申報到項目確認公布這一時段的所有管理工作。在評估活動中,重點關(guān)注學院、學校的項目立項評審工作。主要從以下三個方面考察:第一,項目立項程序情況。主要評價項目的立項程序是否合理,如答辯時間安排能否滿足實際需要等。第二,項目立項公正性問題。主要從評審內(nèi)容設(shè)置、評價專家選擇等方面進行判斷。
5.1.2 項目中期管理情況
項目中期管理情況主要評價項目在中期考核所開展的管理工作。主要從以下三個方面進行考察:第一,中期考核是否有所計劃還是具有突發(fā)性,發(fā)布中期考核公告是否具有緩沖時間段;第二,中期考核是否能夠按照相關(guān)規(guī)定順利進行。第三,針對與預(yù)期研究有所偏差的項目,如何應(yīng)對,是否具有溝通渠道,舉措等。
5.1.3 項目結(jié)題管理情況
項目結(jié)題管理主要評價項目結(jié)題評審、未按時結(jié)題處理辦法、相關(guān)成果管理辦法等主要節(jié)點。
5.1.4 項目經(jīng)費管理情況
主要評價項目經(jīng)費管理支出范圍設(shè)定,項目撥付程序是否滿足研究生科研過程的需要等。
5.2 基金運行評估
基金運行評估主要針對項目實施過程中的一些重要節(jié)點進行評估,包含項目申報前期的宣傳培訓工作。主要有基金宣傳培訓、導(dǎo)師參與情況和項目實際運行情況等。
(1)基金宣傳培訓。該指標主要反映基金管理單位的工作成效。主要考察基金宣傳培訓的受眾范圍和宣傳培訓的效果(2)導(dǎo)師參與情況。該指標主要反映導(dǎo)師在項目實施研究過程中參與和發(fā)揮的作用情況。(3)項目實際運行。該指標主要反映科技基金科技項目的實際運行情況??蓮囊韵聝蓚€方面進行考察:一是項目是否能夠順利按照預(yù)期計劃進行;二是項目進行過程中,項目團隊合作是否有效進行。
5.3 實施效果評估
實施效果評估是本指標體系的重點,是針對研究生科技基金運行的效果進行評價。在設(shè)計實施效果評估指標時,采取“顧客導(dǎo)向”的設(shè)計思路,③圍繞研究生取得的效果方面進行評價。二級指標主要設(shè)置為:“研究生科研興趣培養(yǎng)情況”、“研究生科研氛圍營造情況”、“研究生科研過程熟悉情況”、“研究生科研成果取得情況”。
(1)研究生科研興趣培養(yǎng)。培養(yǎng)研究生的科研興趣和創(chuàng)新意識是研究生科技基金設(shè)立的主要目的之一,該指標主要考察通過參與研究生科研項目后,研究生的科研興趣是否得到了培養(yǎng)。(2)研究生科研氛圍的營造。該指標主要反映研究生科技基金對全校研究生科研活動的帶動情況。該指標可從歷年參與研究生科研項目數(shù)量變化情況和調(diào)查問卷分析而得。(3)研究生科研過程熟悉情況。該指標主要考察通過研究生科技基金的支持,研究生是否熟悉了整個科研過程和一些研究方法等。(4)研究生科研成果取得情況。主要考察研究生的論文、專利等科研成果取得情況。
表1 科技基金評估內(nèi)容
6 結(jié)語
科技評估是一項復(fù)雜的系統(tǒng)工程,針對科技基金評估得基本原則、評估方法、評估程序和評估內(nèi)容的研究,是保證科技基金評估活動開展的重要條件。本文由于精力有限,在評估指標的權(quán)重設(shè)置等方面還需進一步開展研究。
北京工業(yè)大學研究生科技基金支持項目: 北京工業(yè)大學研究生科技基金整體情況評價研究,基金編號:ykj-2014-11422
注釋
① 吳月.利益相關(guān)者視角的公共品供給績效評估主體研究[J].山東社會科學,2011(10):153-156.
② 李志河,張宏業(yè)等.高校教學科研人員績效考評體系指標權(quán)重確定研究[J].現(xiàn)代教育技術(shù),2008(6):36-42.
③ 李素利,張金隆,劉汕.多維多層視角下我國社會保障政策執(zhí)行效果測度研究.2015(3):24-38.endprint