高山卜 王禹欽 王樂樂 馮學(xué)書

（1.中國石油管道公司科技研究中心；2.中國石油管道公司科技信息處）

科技項(xiàng)目后評(píng)價(jià)作為科技項(xiàng)目閉環(huán)管理的重要環(huán)節(jié)，是對(duì)已完成的科技項(xiàng)目進(jìn)行綜合評(píng)價(jià)，總結(jié)經(jīng)驗(yàn)，反饋有效信息并及時(shí)發(fā)現(xiàn)問題[1-2]。管道企業(yè)科技項(xiàng)目應(yīng)用性強(qiáng)，其后評(píng)價(jià)指標(biāo)體系是一個(gè)多層級(jí)的指標(biāo)體系[3]，需要從項(xiàng)目前期調(diào)研與立項(xiàng)、實(shí)施過程、完成情況、推廣應(yīng)用4個(gè)主要環(huán)節(jié)入手建立科技項(xiàng)目后評(píng)價(jià)指標(biāo)體系。在評(píng)價(jià)過程中，各項(xiàng)測(cè)評(píng)指標(biāo)的權(quán)重至關(guān)重要，需盡量客觀、公正，層次分析法（AHP）能夠滿足這樣的需求，因而選用該方法對(duì)定性的指標(biāo)進(jìn)行量化配比相應(yīng)的權(quán)重。

1 管道企業(yè)科技項(xiàng)目后評(píng)價(jià)指標(biāo)體系設(shè)計(jì)

目前，根據(jù)項(xiàng)目研發(fā)目的與成果的特點(diǎn)，管道企業(yè)科技項(xiàng)目可分為基礎(chǔ)研究類、應(yīng)用研究類、決策與管理類3種。本文以應(yīng)用研究類項(xiàng)目為例，根據(jù)管道科技項(xiàng)目運(yùn)行周期涉及的主要環(huán)節(jié)，從項(xiàng)目前期調(diào)研與立項(xiàng)、項(xiàng)目實(shí)施過程、項(xiàng)目完成情況、項(xiàng)目推廣應(yīng)用情況4個(gè)方面構(gòu)建了管道科技項(xiàng)目后評(píng)價(jià)指標(biāo)體系（表 1）。

表1 應(yīng)用研究類項(xiàng)目后評(píng)價(jià)指標(biāo)

續(xù)表

綜上，給出了各指標(biāo)定義及二級(jí)指標(biāo)的評(píng)分劃分等級(jí)，各二級(jí)指標(biāo)具體詮釋如下：

（1）項(xiàng)目前期調(diào)研與立項(xiàng)決定了科研方向、目標(biāo)及任務(wù)，反映在：①生產(chǎn)需求程度，這一指標(biāo)是指企業(yè)面臨的生產(chǎn)問題的重要性、迫切性程度，與科技項(xiàng)目立項(xiàng)的意義相匹配；②研究目標(biāo)及內(nèi)容的覆蓋性，是指科技項(xiàng)目的研究目標(biāo)和內(nèi)容對(duì)于解決企業(yè)面臨生產(chǎn)問題的覆蓋性程度；③考核指標(biāo)的合理性，是指科技項(xiàng)目設(shè)立的技術(shù)指標(biāo)、經(jīng)濟(jì)指標(biāo)、有形化成果指標(biāo)是否合理，能夠體現(xiàn)出項(xiàng)目的研究價(jià)值；④開題設(shè)計(jì)專家意見整改情況，是指科技項(xiàng)目立項(xiàng)開題后，是否能夠遵守開題專家意見進(jìn)行相應(yīng)的修改和完善。

（2）項(xiàng)目實(shí)施過程決定了項(xiàng)目的組織、計(jì)劃及經(jīng)費(fèi)的實(shí)現(xiàn)程度，其有效性直接關(guān)系到科技項(xiàng)目實(shí)施成功的關(guān)鍵，反映在：①組織管理情況，這一指標(biāo)是指項(xiàng)目進(jìn)展過程中對(duì)項(xiàng)目組成員的分工管理情況，以及為保證項(xiàng)目質(zhì)量組織召開的專家研討會(huì)及技術(shù)交流情況；②計(jì)劃執(zhí)行情況，是指項(xiàng)目研究進(jìn)展按照計(jì)劃進(jìn)度的完成情況；③項(xiàng)目經(jīng)費(fèi)決算和使用情況，是指經(jīng)費(fèi)使用是否合理，決算控制占比預(yù)算多少。

（3）項(xiàng)目完成情況決定了項(xiàng)目是否達(dá)到預(yù)期目標(biāo)、完成質(zhì)量、成果產(chǎn)出等，給出了科研項(xiàng)目完成情況的結(jié)論性評(píng)價(jià)，反映在：①目標(biāo)實(shí)現(xiàn)程度，這一指標(biāo)是指項(xiàng)目的研究成果是否達(dá)到了項(xiàng)目立項(xiàng)設(shè)定的研究目標(biāo)，解決了對(duì)應(yīng)的生產(chǎn)問題；②對(duì)外協(xié)作情況，是指項(xiàng)目開展過程中的核心技術(shù)是否借助對(duì)外服務(wù)或技術(shù)服務(wù)獲得，自主研發(fā)的核心技術(shù)占比情況；③成果有形化，是指項(xiàng)目研究過程中形成產(chǎn)品、專利、標(biāo)準(zhǔn)、軟件著作權(quán)、論文等情況；④材料歸檔情況，是指項(xiàng)目結(jié)題后按照有關(guān)要求將整套驗(yàn)收材料進(jìn)行歸檔的情況。

（4）項(xiàng)目推廣應(yīng)用情況決定了項(xiàng)目產(chǎn)出成果的效益、作用及影響，反映在：①成果應(yīng)用頻率，這一指標(biāo)是指項(xiàng)目的研究成果在試用階段被不同單位應(yīng)用的頻率；②效益、效果及應(yīng)用單位評(píng)價(jià)，是指項(xiàng)目的研究成果應(yīng)用后，安全生產(chǎn)效果或經(jīng)濟(jì)效益的提高程度；③國內(nèi)外市場(chǎng)前景，是指成果在國內(nèi)外是否具有通用性，且指標(biāo)達(dá)到國際/國內(nèi)何種水平。

2 管道企業(yè)科技后評(píng)價(jià)指標(biāo)體系量化

AHP又稱為多目標(biāo)決策法，該方法可將較為復(fù)雜的問題中相互關(guān)聯(lián)的各要素進(jìn)行有序的層次劃分，使問題簡單化、條理化，其劃分的重要環(huán)節(jié)體現(xiàn)在使用者可以結(jié)合專家意見或經(jīng)驗(yàn)對(duì)同屬于一層級(jí)的元素進(jìn)行兩兩比較，構(gòu)造判斷矩陣后使用數(shù)學(xué)方法計(jì)算出層級(jí)元素的權(quán)重[4-5]。該方法簡便、靈活，能夠?qū)⒖萍柬?xiàng)目后評(píng)價(jià)中無法量化的定性指標(biāo)進(jìn)行量化處理，且各指標(biāo)因素經(jīng)過兩兩對(duì)比后顯示更具公正性、客觀性。

以表1所示的應(yīng)用研究類科技項(xiàng)目為例，確定因 素 集 為A=｛P1，P2，P3，P4，P5，P6，P7，P8，P9，P10，P11，P12，P13，P14｝，將因素集按屬性分為 4 個(gè)子集，其 中B1=｛P1，P2，P3，P4｝，B2=｛P5，P6，P7｝，B3=｛P8，P9，P10，P11｝，B4=｛P12，P13，P14｝，對(duì)應(yīng)的權(quán)重集為W1，W2，W3，W4，且A=｛B1，B2，B3，B4｝，對(duì)應(yīng)的權(quán)重集為Wn。

構(gòu)建完矩陣集合后，需要科學(xué)確定各指標(biāo)之間的相對(duì)權(quán)重，科技項(xiàng)目后評(píng)價(jià)小組根據(jù)工作經(jīng)驗(yàn)，將各指標(biāo)因素間的評(píng)價(jià)尺度采用1～9標(biāo)度法[6]進(jìn)行兩兩比較，構(gòu)造出的判斷矩陣如表2所示。

表2 A—B判斷矩陣

通過計(jì)算判斷矩陣中每行元素的幾何平均值，并進(jìn)行歸一化處理，得到主評(píng)價(jià)矢量Wn=（0.06，0.15，0.28，0.51），對(duì)判斷矩陣進(jìn)行一致性檢驗(yàn)，得出判斷矩陣一致性比例CR=0.01<0.1，符合一致性原則，所以認(rèn)為矩陣A層次總排序結(jié)果具有滿意的一致性。

重復(fù)以上過程，構(gòu)建B1—P判斷矩陣，經(jīng)計(jì)算其對(duì)應(yīng)的權(quán)重集為W1=（0.51，0.31，0.11，0.07），判斷矩陣一致性比例CR1=0.01231<0.1，符合一致性原則；構(gòu)建B2—P判斷矩陣，經(jīng)計(jì)算其對(duì)應(yīng)的權(quán)重集為W2=（0.11，0.58，0.31），判斷矩陣一致性比例CR2=0<0.1，符合一致性原則；構(gòu)建B3—P判斷矩陣，經(jīng)計(jì)算其對(duì)應(yīng)的權(quán)重集為W3=（0.39，0.13，0.35，0.13），判斷矩陣一致性比例CR3=-0.0134<0.1，符合一致性原則；構(gòu)建B4—P判斷矩陣，經(jīng)計(jì)算其對(duì)應(yīng)的權(quán)重集為W4=（0.43，0.43，0.14），判斷矩陣一致性比例CR4=0<0.1，符合一致性原則。由此可得管道企業(yè)應(yīng)用研究類科技項(xiàng)目后評(píng)價(jià)指標(biāo)及權(quán)重配比（表 3）。

表3 應(yīng)用研究類項(xiàng)目后評(píng)價(jià)指標(biāo)及權(quán)重

結(jié)合表3中給出的各指標(biāo)權(quán)重，科技項(xiàng)目后評(píng)價(jià)計(jì)算公式為：

式中S——科技項(xiàng)目后評(píng)價(jià)的最終得分；

w1、w2、w3、w4—— 分別為第一層指標(biāo)B1、B2、B3、B4的權(quán)重；

ωi——第二層指標(biāo)的權(quán)重；

si——第二層指標(biāo)的得分。

3 管道企業(yè)科技后評(píng)價(jià)指標(biāo)體系的應(yīng)用

研究選取中油管道公司已驗(yàn)收的18個(gè)應(yīng)用研究類科技項(xiàng)目，課題組依據(jù)上述構(gòu)建的指標(biāo)體系，首先根據(jù)第二層指標(biāo)的評(píng)分依據(jù)對(duì)各項(xiàng)二級(jí)指標(biāo)進(jìn)行評(píng)分，然后根據(jù)科技項(xiàng)目后評(píng)價(jià)計(jì)算公式計(jì)算出各科技項(xiàng)目的最終得分（表4）。表中科技項(xiàng)目的最高分為94.12，最低分為74.50，平均值為84.06，標(biāo)準(zhǔn)差為4.77，將該組數(shù)據(jù)進(jìn)行分組，組數(shù)選為10，經(jīng)計(jì)算得到組距=（最高分-最低分）/組數(shù)=2.18，將各科技項(xiàng)目后評(píng)價(jià)得分頻率分布情況擬合成光滑曲線（圖1）。

表4 科技項(xiàng)目后評(píng)價(jià)得分情況

圖1 管道科技項(xiàng)目后評(píng)價(jià)得分頻率分布情況

經(jīng)過擬合，得到圖1曲線上的函數(shù)符合總體平均數(shù)μ為84.06、標(biāo)準(zhǔn)差σ為4.77的正態(tài)分布。該條曲線上的縱向坐標(biāo)值可用如下公式計(jì)算得到：

式中x——科技項(xiàng)目后評(píng)價(jià)得分；

f（x）——科技項(xiàng)目后評(píng)價(jià)得分分布頻率；

μ——科技項(xiàng)目后評(píng)價(jià)得分的平均值；

σ——科技項(xiàng)目后評(píng)價(jià)得分的標(biāo)準(zhǔn)差。

經(jīng)驗(yàn)證，本次基于層次分析法構(gòu)建的科技項(xiàng)目后評(píng)價(jià)指標(biāo)體系科學(xué)、合理，其評(píng)價(jià)結(jié)果符合正態(tài)分布的科學(xué)規(guī)律，能夠較為客觀地反映科技項(xiàng)目總體研究水平。

4 結(jié)束語

管道科技項(xiàng)目后評(píng)價(jià)小組目前已累計(jì)開展公司科技項(xiàng)目后評(píng)價(jià)近200項(xiàng)，取得了一定的實(shí)踐經(jīng)驗(yàn)。為了客觀、科學(xué)地評(píng)價(jià)科技項(xiàng)目，優(yōu)化后評(píng)價(jià)指標(biāo)，提升后評(píng)價(jià)質(zhì)量，此次研究根據(jù)科技項(xiàng)目周期各環(huán)節(jié)構(gòu)建后評(píng)價(jià)指標(biāo)，從指標(biāo)屬性入手定義其分值，引入層次分析法量化各指標(biāo)層級(jí)的權(quán)重，經(jīng)各層級(jí)指標(biāo)加權(quán)求和得到最終科技項(xiàng)目的得分結(jié)果。選取目前油氣管道所屬科技項(xiàng)目（應(yīng)用研究類）作為樣本進(jìn)行初評(píng)，評(píng)價(jià)結(jié)果符合統(tǒng)計(jì)學(xué)中正態(tài)分布的科學(xué)規(guī)律，得到了業(yè)內(nèi)專家一致認(rèn)可。研究建立的科技項(xiàng)目后評(píng)價(jià)指標(biāo)能夠客觀、公正地反映科技項(xiàng)目的綜合研究水平，為科技管理者后期查看科技項(xiàng)目執(zhí)行及應(yīng)用情況、進(jìn)行科技獎(jiǎng)勵(lì)評(píng)級(jí)，以及科技項(xiàng)目研究人員及時(shí)發(fā)現(xiàn)問題并進(jìn)行相應(yīng)改進(jìn)提供了重要的決策依據(jù)。該成果目前已推廣至公司科技項(xiàng)目后評(píng)價(jià)中。該指標(biāo)構(gòu)建方法及權(quán)重配比方法同樣適用于基礎(chǔ)研究類及決策管理類科技項(xiàng)目，但由于課題屬性的不同，在構(gòu)造層級(jí)指標(biāo)的判斷矩陣上會(huì)略有調(diào)整。