于超 房芳
近年來,隨著大數(shù)據(jù)、云計算、區(qū)塊鏈、虛擬現(xiàn)實、人工智能等現(xiàn)代信息技術(shù)取得突破性進展,以及智能制造和工業(yè)互聯(lián)網(wǎng)等技術(shù)平臺的不斷發(fā)展,信息化引領(lǐng)創(chuàng)新和驅(qū)動轉(zhuǎn)型的先導(dǎo)性作用日益凸顯。企業(yè)的發(fā)展離不開信息化的支撐,信息化在企業(yè)發(fā)展中發(fā)揮越來越重要的作用。企業(yè)信息化項目實施效果的好壞,直接決定著企業(yè)整體信息化水平的高低。因此,科學(xué)、合理地評價企業(yè)信息化項目的效果和價值尤為重要,這就需要企業(yè)做好信息化項目的后評價工作。
信息化項目后評價研究的現(xiàn)狀
目前,國內(nèi)信息化項目后評價理論及應(yīng)用研究大多針對的是固定資產(chǎn)投資建設(shè)項目,對信息化項目后評價研究還不多。高偉(2007)探討了企業(yè)信息化后評價工作的重要性,建議在信息化項目后評價過程應(yīng)分階段進行。王華、郭梅等(2009)認為信息化項目后評價的重點是項目目標(biāo)實現(xiàn)度、項目管理情況、應(yīng)用效果、影響和持續(xù)性。朱士松、肖瑾等(2013)把平衡計分卡融入項目后評價之中,為信息化管理人員的實際操作提供了規(guī)范和便利。李旭(2014)研究通用性信息化項目投資效益的評估方法,提出一種評價估計信息化項目的投入和產(chǎn)出的方法。
隨著我國信息化進入快速發(fā)展期,對信息化項目后評價的需求也越來越迫切,此前我們對企業(yè)信息化項目后評價的研究尚未形成成熟的體系,不同企業(yè)信息化后評價的方法也存在較大差異。因此,本文提出一套企業(yè)信息化項目后評價指標(biāo)體系,并結(jié)合實例進行分析,可以為后續(xù)企業(yè)開展信息化項目后評價工作提供參考。
信息化項目后評價的原則和方法
原則
(1)獨立性原則。后評價工作必須獨立、公正地開展。要獨立進行分析研究,不受外界干擾或干預(yù),在調(diào)查研究、分析問題、做出判斷和提出建議時,要客觀、公正和公平。
(2)科學(xué)性原則。堅持科學(xué)的態(tài)度,注重分析方法的正確性、研究依據(jù)及衡量標(biāo)準(zhǔn)的可靠性、分析結(jié)論的客觀性。
(3)實用性原則。后評價結(jié)論要對決策者產(chǎn)生影響和作用,為決策提供服務(wù)。因此,后評價過程必須具有較強的針對性,后評價方法必須具有較強的可操作性。
(4)可行性原則。后評價過程應(yīng)該考慮數(shù)據(jù)資料收集的方便性,盡量選擇簡單、易于掌握的計算方法等,避免程序煩瑣復(fù)雜。
方法
(1)邏輯框架法。邏輯框架法是把一個復(fù)雜項目的內(nèi)涵和關(guān)系展現(xiàn)在一張簡單的框架圖中來分析,將幾個內(nèi)容緊密相關(guān)、必須同步考慮的動態(tài)概念組合起來,通過分析它們之間的關(guān)系來評價一個項目的方法。
(2)綜合評價法。綜合評價法著重分析考察影響大和存在風(fēng)險的問題,指出影響項目的關(guān)鍵指標(biāo),提出項目綜合性評價結(jié)論的方法,是一種定量分析與定性分析相結(jié)合的評價方法。
(3)成功度法。成功度法是憑借評價專家或成員組的經(jīng)驗,根據(jù)項目總體的執(zhí)行完成情況,綜合考慮后評價的各項指標(biāo)評價,對項目達到預(yù)期目標(biāo)的程度或成敗做出定性判斷并得出結(jié)論。
信息化項目后評價內(nèi)容及評價指標(biāo)的建立
企業(yè)信息化項目可從項目前期評價、項目實施過程評價、項目目標(biāo)實現(xiàn)評價、項目實施效果評價四個方面進行后評價。本文建立了一套涵蓋1個一級指標(biāo)、4個二級指標(biāo)、12個三級指標(biāo)的信息化項目后評價指標(biāo)體系(見圖1)。
項目前期評價
項目前期評價可分必要性評價和立項程序合規(guī)性評價兩個方面。
(1)必要性評價。主要對項目技術(shù)條件、需求狀況、項目可行性等方面對項目建設(shè)的必要性進行評價。
(2)立項程序合規(guī)性評價。主要對立項過程是否合規(guī)、材料是否完整等方面進行評價。
項目實施過程評價
項目實施過程評價可分投資控制評價、進度控制評價、質(zhì)量控制評價、招投標(biāo)及合同管理評價四個方面。
(1)投資控制評價。通過對比項目的估算、概算及結(jié)算金額,計算概算較估算節(jié)余率、結(jié)算較概算節(jié)余率,分析投資下降的原因,對于節(jié)余率較大的工程重點分析原因。
評價指標(biāo):
投資變化率=|估算-概算|/估算×60%+|概算-結(jié)算|/概算×40%
(2)進度控制評價。通過統(tǒng)計開工、竣工計劃時間與實際時間的偏差、計劃工期與實際工期的偏差,分析影響工期和進度的主要因素,評價進度控制措施的制定和執(zhí)行情況。
評價指標(biāo):
進度偏離率=(實際工期-計劃工期)/計劃工期×100%
(3)質(zhì)量控制評價。通過工程合格率、優(yōu)良率等指標(biāo),評價項目前期設(shè)定的質(zhì)量目標(biāo)是否實現(xiàn),若質(zhì)量目標(biāo)未實現(xiàn),分析原因并提出改進建議。
評價指標(biāo):驗收一次通過率(合格率)。
(4)招投標(biāo)及合同管理評價。通過分析招投標(biāo)合法性(程序、范圍等)、招投標(biāo)過程程序的完備性、合同訂立程序的合規(guī)性、雙方是否嚴(yán)格按照合同約定條款履行相關(guān)義務(wù)、合同糾紛處理等方面進行評價。
項目目標(biāo)實現(xiàn)評價
項目目標(biāo)實現(xiàn)評價可以分功能需求實現(xiàn)評價、系統(tǒng)架構(gòu)實現(xiàn)評價和技術(shù)性能實現(xiàn)評價三個方面。
(1)功能需求實現(xiàn)評價。通過對比應(yīng)實現(xiàn)的功能需求數(shù)量和已實現(xiàn)的工程需求數(shù)量,評價其情況。
評價指標(biāo):
功能需求實現(xiàn)率=實際實現(xiàn)的功能需求數(shù)量/應(yīng)實現(xiàn)的功能需求數(shù)量×100%
(2)系統(tǒng)架構(gòu)實現(xiàn)評價??梢詮臄?shù)據(jù)架構(gòu)、應(yīng)用架構(gòu)和技術(shù)架構(gòu)三個維度分析評價。
(3)技術(shù)性能實現(xiàn)評價??蓪φ湛尚行匝芯拷o出的同時在線用戶數(shù)、系統(tǒng)響應(yīng)時間、計算機資源可用率、每秒完成事務(wù)數(shù)量等性能指標(biāo),評價系統(tǒng)性能目標(biāo)實現(xiàn)率。
項目實施效果評價
項目實施效果評價可以分為投入產(chǎn)出評價、系統(tǒng)安全評價和用戶滿意度評價三個方面。
(1)投入產(chǎn)出評價。通過計算系統(tǒng)投入、系統(tǒng)產(chǎn)出,得出投入產(chǎn)出比。根據(jù)投入產(chǎn)出效益評價標(biāo)準(zhǔn),投入產(chǎn)出比大于等于200%,投入產(chǎn)出效益為“優(yōu)秀”;投入產(chǎn)出比大于等于150%且小于200%,投入產(chǎn)出效益為“良好”;投入產(chǎn)出比大于等于100%且小于150%,投入產(chǎn)出效益為“一般”;投入產(chǎn)出比大于等于60%且小于100%,投入產(chǎn)出效益為“較差”;投入產(chǎn)出比小于60%,投入產(chǎn)出效益為“差”。
評價指標(biāo):
投入產(chǎn)出比=系統(tǒng)產(chǎn)出/系統(tǒng)投入×100%
另外,還可以采用系統(tǒng)投資實施效果當(dāng)量作為指標(biāo)進行投資效益分析。
評價指標(biāo):
投資系統(tǒng)價值當(dāng)量=系統(tǒng)實施效果當(dāng)量/系統(tǒng)總投資×100%
可以從三個維度考察實施效果:①提升企業(yè)業(yè)務(wù)能力與水平,以主營業(yè)務(wù)層面的改善情況為衡量依據(jù),如流動資金占用率等;②提升管理效率,以主要管理效率層面的改善情況為衡量依據(jù),如辦公流程電子化程度、信息傳遞效率、管理透明度等;③改善系統(tǒng)架構(gòu)與優(yōu)化資源配置,以主要系統(tǒng)架構(gòu)與資源配置層面的改善情況為衡量依據(jù),如資源共享范圍等。
(2)系統(tǒng)安全評價。可通過第三方風(fēng)險評估中發(fā)現(xiàn)系統(tǒng)存在高危、中危風(fēng)險的情況,進行系統(tǒng)安全評價。
(3)用戶滿意度評價。通過設(shè)計用戶滿意度調(diào)查表,抽查系統(tǒng)用戶的滿意程度,進行評價。
評價指標(biāo):
用戶滿意度=滿意用戶/抽查用戶×100%
具體實例分析
以某公司云系統(tǒng)研發(fā)項目為例,該項目主要對云系統(tǒng)的各模塊進行功能優(yōu)化與增強,包括分布式計算服務(wù)模塊、分布式存儲服務(wù)模塊、集中式存儲服務(wù)模塊、分布式網(wǎng)絡(luò)服務(wù)模塊、認證服務(wù)模塊、資源編排模塊、監(jiān)控計量模塊等。經(jīng)分析,得到以下評價過程。
項目前期評價
(1)必要性評價。該項目的研發(fā)可提高公司的云服務(wù)能力,拓展產(chǎn)品市場,是非常必要的。
(2)立項程序合規(guī)性評價。該項目按時立項,申報材料完整,立項程序合規(guī)。
項目實施過程評價
(1)投資控制評價。該項目可研估算為497萬元,結(jié)算為410萬元,投資變化率=|結(jié)算-估算|/估算=17.5%,結(jié)算較估算節(jié)余率控制在20%以內(nèi),表明投資控制良好。
(2)進度控制評價。該項目計劃開工時間為2018年4月15日,實際開工時間為2018年5月23日,較計劃時間延后38天;計劃最終驗收時間為2018年12月31日,實際最終驗收時間為2018年12月19日,較計劃最終驗收時間提前12天,表明該項目進度控制良好。
(3)質(zhì)量控制評價。該項目一次性驗收通過率為100%,獲得驗收證書,表明項目質(zhì)量控制良好。
(4)招投標(biāo)及合同管理評價。通過統(tǒng)計分析該項目招投標(biāo)資料,該項目招投標(biāo)流程規(guī)范,合同范本使用情況優(yōu)良,合同簽訂規(guī)范、及時,履約情況良好。
項目目標(biāo)實現(xiàn)評價
(1)功能需求實現(xiàn)評價。通過統(tǒng)計,該項目應(yīng)用功能需實現(xiàn)24項,已實現(xiàn)24項;系統(tǒng)集成需實現(xiàn)4項,已實現(xiàn)4項。功能需求實現(xiàn)率為100%,表明項目在開發(fā)實施階段對功能需求的實現(xiàn)有良好的控制過程,保證了實際功能與功能需求的一致性。
(2)技術(shù)性能實現(xiàn)評價。該項目的技術(shù)性能主要體現(xiàn)為網(wǎng)絡(luò)性能、存儲性能。經(jīng)內(nèi)外網(wǎng)測試,項目的網(wǎng)絡(luò)性能與物理網(wǎng)卡速率相近,符合預(yù)期;存儲性能的測試結(jié)果也較為滿意。
項目實施效果評價
(1)投入產(chǎn)出評價。通過收資計算,統(tǒng)計該項目的投入產(chǎn)出情況如下:系統(tǒng)初設(shè)投資為410萬元,系統(tǒng)運行費用為500萬元。系統(tǒng)銷售收入為1 900萬元。通過計算,該項目投入產(chǎn)出比209%。根據(jù)投入產(chǎn)出效益評價標(biāo)準(zhǔn),該項目經(jīng)濟效益水平為“優(yōu)秀”。
(2)系統(tǒng)安全評價。經(jīng)過網(wǎng)絡(luò)安全測試,測試結(jié)果未發(fā)現(xiàn)高風(fēng)險漏洞,存在中、低風(fēng)險安全漏洞,經(jīng)過安全整改后,修復(fù)了部分中、低風(fēng)險安全漏洞,基本滿足了公司對系統(tǒng)、網(wǎng)絡(luò)安全的要求,表明該項目系統(tǒng)安全良好。
(3)用戶滿意度評價。該項目共發(fā)放用戶滿意度調(diào)查表20份,收回20份,用戶滿意份數(shù)為19份,滿意度為95%。
結(jié)論
本文根據(jù)信息化項目的特點,從項目前期評價、項目實施過程評價、項目目標(biāo)實現(xiàn)評價、項目實施效果評價四大方面,建立了一套適用于企業(yè)信息化項目的三級后評價指標(biāo)體系,并在某企業(yè)云系統(tǒng)開發(fā)項目中進行了實證分析,證明該指標(biāo)體系對評價信息化項目建設(shè)全過程可行、有效,可為后續(xù)企業(yè)開展信息化項目后評價工作提供參考。綜上所述,信息化項目后評價可以全面反映和掌握信息化項目的投資績效,有效控制管理信息化項目的全過程。