□施書林 盛 豐 陶 陶
開展后評估工作的關(guān)鍵是建立起合理、科學(xué)的煙草企業(yè)信息化項目后評估指標(biāo)體系。煙草企業(yè)信息化項目后評估指標(biāo)從多個方面反映了煙草企業(yè)信息化項目的情況。它把復(fù)雜的問題分解成幾個相互關(guān)聯(lián)的部分,科學(xué)、客觀、真實地反映已完成的信息化項目或規(guī)劃的目的、實施過程、效益、效果和影響,從而使后評估具體化和組織化[1]。同時,可以在后評估指標(biāo)中設(shè)置定量指標(biāo)和定性指標(biāo)和通過從多個角度衡量對比評估指標(biāo),將復(fù)雜問題直觀化。因此,結(jié)合煙草企業(yè)信息化項目建立的實際情況,在建立后評估指標(biāo)體系時需遵循現(xiàn)實性、客觀性、全面性、可操作性、反饋性、科學(xué)性、系統(tǒng)性、定性與定量相結(jié)合性、可量化性等原則。
結(jié)合煙草行業(yè)管理工作的各項規(guī)范要求,把控信息化的規(guī)律性,通過對行業(yè)信息化項目特點的分析,梳理各層管理者和各業(yè)務(wù)部門的管理者業(yè)務(wù)需求,從項目目標(biāo)評估、項目實施過程評估、項目效益評估、項目影響評估和項目可持續(xù)性評估等幾個方面分析研究信息化項目后評估的方法、過程、評價維度和評估結(jié)果的應(yīng)用方法。信息化項目后評估主要分為五個研究方向[2]。
(一)項目目標(biāo)實現(xiàn)評估。
1.預(yù)期目標(biāo)符合性。將軟件項目運行時實際產(chǎn)生的一些經(jīng)營管理和技術(shù)指標(biāo)的效益與項目前評估和決策時所定的目標(biāo)進行比較,檢查項目是否達到預(yù)期目標(biāo)或達到預(yù)期目標(biāo)的程度。若沒達到預(yù)期目標(biāo),就要分析所產(chǎn)生偏差的原因,從而判斷項目的成功與否。
2.預(yù)期目標(biāo)合理性正確性評估。指通過對當(dāng)前經(jīng)營管理實際情況分析和判別與項目需求提出時的想法是否存在偏離,并考查項目實施過程中需求部門隨著對管理需要理解的不斷加深,不斷完善需求后,導(dǎo)致項目內(nèi)容與范圍變更后,系統(tǒng)發(fā)生的變化及合理性等[3]。
(二)項目實施過程評估。項目實施過程評估主要對項目在整個實施過程中的組織管理水平和規(guī)范性進行評估。
1.團隊組成的合理性。主要評估項目團隊組成和人員專業(yè)技術(shù)水平的合理性。
2.項目計劃的合理性。主要評估項目進度控制措施和工作計劃執(zhí)行的符合程度。
3.項目實施的合規(guī)性。主要評估項目實施全過程的合規(guī)性。
4.項目實施的過程。主要評估項目的質(zhì)量管理、變更管理、過程控制以及廠商開發(fā)規(guī)范性、分析與設(shè)計能力、實現(xiàn)與測試能力等[2]。
5.項目試運行過程。主要評估項目培訓(xùn)效果、知識轉(zhuǎn)移效果、文檔交付情況等。
(三)項目使用情況評估。
1.用戶滿意度。主要評估項目在人機交互、易用性等方面的指標(biāo)。
2.廠商服務(wù)力。廠商服務(wù)力,是指在信息化項目承建商在信息化項目建成以后所提供的各種服務(wù)活動。主要評估廠商技術(shù)支持和運維服務(wù)能力。
3.項目實用性。主要評估項目在實際使用過程中的人員使用范圍、業(yè)務(wù)適用情況等。
4.系統(tǒng)性能評估。主要評估系統(tǒng)的正確性、可靠性、穩(wěn)定性、實用性和可維護性等內(nèi)容。
5.項目的影響力。主要評估系統(tǒng)與相關(guān)系統(tǒng)的兼容性、編碼一致性、功能可擴展性以及有利于數(shù)據(jù)共享、固化流程、減少資源浪費等內(nèi)容。
6.安全適用性。主要評估系統(tǒng)在正常使用和滿足預(yù)定使用的條件下要保證系統(tǒng)中所涉及到的數(shù)據(jù)信息、硬件設(shè)備的安全,以及各項信息安全指標(biāo)的符合性和隨著安全技術(shù)發(fā)展應(yīng)對新的安全風(fēng)險的能力[4]。
(四)項目效益實現(xiàn)評估。
1.經(jīng)濟效益評估。主要是針對收入增長率、內(nèi)部收益率、投資回收情況、成本降低率等指標(biāo)進行評估。但是考慮到很難對經(jīng)濟效益進行量化評價,考慮進行定性評價[5]。
2.業(yè)務(wù)效益評估。主要針對業(yè)務(wù)處理時間、業(yè)務(wù)流程優(yōu)化、客戶滿意度、業(yè)務(wù)效率提升程度等。
3.管理效益評估。主要評估決策改善度、管理效率改善度、計劃改善度、產(chǎn)品服務(wù)改善度等。
4.員工效益評估。主要評估系統(tǒng)與對于人員的知識結(jié)構(gòu)、綜合素質(zhì)、工作能力與水平的提升情況[6]。
(五)項目持續(xù)發(fā)展評估。持續(xù)性評估是對軟件項目在未來運營中實現(xiàn)既定目標(biāo)以及持續(xù)發(fā)揮效益的可能性進行預(yù)測分析。
1.項目的適用性評估。主要評估項目對經(jīng)營管理需要變化的適應(yīng)能力,對其是否適應(yīng)業(yè)務(wù)需求未來發(fā)展的適應(yīng)能力進行評估[7]。
2.項目的可擴展性評估。主要評估項目設(shè)計思想和技術(shù)框架的開放性和可擴展性。
針對煙草企業(yè)信息化項目后評估指標(biāo)體系建立,結(jié)合煙草企業(yè)信息化項目特點,主要從項目目標(biāo)實現(xiàn)評估、項目實施過程評估、項目使用情況評估、項目效益實現(xiàn)評估、項目可持續(xù)性評估這5個研究方向考慮構(gòu)建煙草企業(yè)信息化項目后評估指標(biāo)體系。將此5個研究方向作為構(gòu)建指標(biāo)體系的第一級指標(biāo)點,同時也是該指標(biāo)體系的5個評價維度。再分別對此5個評估維度進行分析和研究,再分別細劃分出二級指標(biāo)點。同樣再從二級指標(biāo)點中細劃分出三級指標(biāo)點。
接著,通過訪談上百名煙草企業(yè)領(lǐng)導(dǎo)和員工,補充和完善初步建立的指標(biāo)體系,通過文獻查閱及專家咨詢,消除反復(fù)、不正確或難以獲得的指標(biāo),通過這一過程,分別獲得了5個一級指標(biāo),15個二級指標(biāo),77個三級指標(biāo)。再選取16名知名管理學(xué)專家、項目后評估體系專家和統(tǒng)計學(xué)專家分成5個評估小組,對各項指標(biāo)進行篩選,并分別對不合理的二級和三級指標(biāo)進行刪除。經(jīng)過篩選評估,最終建立了具有三級指標(biāo)結(jié)構(gòu)的后評估指標(biāo)體系,其中一級指標(biāo)共有5個,二級指標(biāo)共有15個,三級指標(biāo)共有51個。
(一)項目目標(biāo)實現(xiàn)指標(biāo)A1。將指標(biāo)A1細劃成目標(biāo)設(shè)定情況A11和目標(biāo)完成情況A12等2個二級指標(biāo)。二級指標(biāo)目標(biāo)設(shè)定情況劃分成三級指標(biāo):目標(biāo)設(shè)定的充分性A111、目標(biāo)設(shè)定的有效性A112和目標(biāo)設(shè)定的明確性A113;二級指標(biāo)目標(biāo)完成情況劃分成三級指標(biāo):目標(biāo)完成質(zhì)量A121、目標(biāo)完成率A122、完成的及時性A123和驗收的有效性A124。
(二)項目實施過程指標(biāo)A2。將指標(biāo)A2細劃成項目組織管理A21、項目過程管理A22和項目試運行管理A23等3個二級指標(biāo)。二級指標(biāo)項目組織管理劃分成三級指標(biāo):項目規(guī)范管理A211、管理制度保障A212和項目機構(gòu)人員情況A213;二級指標(biāo)項目過程管理劃分成三級指標(biāo):項目論證情況A221、項目計劃執(zhí)行情況A222、目標(biāo)變更管理A223、項目質(zhì)量控制A224和項目技術(shù)水平A225;二級指標(biāo)項目試運行管理劃分成三級指標(biāo):試運行測試情況A231、試運行變更情況A232、培訓(xùn)情況A233和文檔移交情況A234。
(三)項目使用情況指標(biāo)A3。將指標(biāo)A3細劃成應(yīng)用效果A31、廠商服務(wù)力A32、系統(tǒng)性能A33、項目影響力A34、運行維護A35和系統(tǒng)安全性A36等6個二級指標(biāo)。二級指標(biāo)應(yīng)用效果劃分成三級指標(biāo):用戶滿意度A311、項目使用度A312、應(yīng)用業(yè)務(wù)覆蓋率A313和應(yīng)用系統(tǒng)實現(xiàn)率A314;二級指標(biāo)廠商服務(wù)力劃分成三級指標(biāo):售后服務(wù)團隊A321、響應(yīng)時間A322和問題解決A323;二級指標(biāo)系統(tǒng)性能劃分成三級指標(biāo):系統(tǒng)穩(wěn)定性A331、硬件設(shè)備利用率A332、數(shù)據(jù)正確性A333、系統(tǒng)響應(yīng)時間A334和可持續(xù)性A335;二級指標(biāo)項目影響力劃分成三級指標(biāo):系統(tǒng)兼容性A341和功能擴展性A342;二級指標(biāo)運行維護劃分成三級指標(biāo):運維管理滿意度A351和日常運行及維護執(zhí)行A352;二級指標(biāo)系統(tǒng)安全性劃分成三級指標(biāo):數(shù)據(jù)災(zāi)備情況A361和安全事件A362。
(四)項目效益實現(xiàn)A4。將指標(biāo)A4細劃成間接經(jīng)濟效益A41和影響力A42等2個二級指標(biāo)。二級指標(biāo)間接經(jīng)濟效益劃分成三級指標(biāo):工作流程優(yōu)化A411、業(yè)務(wù)效率提高率A412、成本節(jié)約度A413、數(shù)據(jù)共享率A414、項目資源有效利用率A415和系統(tǒng)維護的經(jīng)濟性A416;二級指標(biāo)影響力劃分成三級指標(biāo):項目認(rèn)可度A421、知識產(chǎn)權(quán)獲得A422、技術(shù)成果A423和項目差異A424。
(五)項目可持續(xù)性A5。將指標(biāo)A5細劃成系統(tǒng)適用性A51和系統(tǒng)擴充性A52等2個二級指標(biāo)。二級指標(biāo)系統(tǒng)適用性劃分成三級指標(biāo):業(yè)務(wù)增長滿足A511、功能滿足A512和技術(shù)框架的開放性A513;二級指標(biāo)系統(tǒng)擴充性劃分成三級指標(biāo):功能擴張滿足A521和模塊變更便利性A522。
本文從項目目標(biāo)實現(xiàn)、項目實施過程、項目使用情況、項目效益實現(xiàn)與項目持續(xù)發(fā)展等5個維度出發(fā),最終構(gòu)建出具有三層指標(biāo)結(jié)構(gòu)的信息項目后評估指標(biāo)體系??紤]到不同類別信息化項目客觀存在的差異,今后可根據(jù)各自類型項目的特點,分別建立相應(yīng)的指標(biāo)體系,如軟件開發(fā)類項目指標(biāo)體系、信息化硬件設(shè)備類項目指標(biāo)體系等,這樣會使得煙草行業(yè)開展信息化項目后評估工作更加全面客觀,更具有科學(xué)性。