■文/張 楓
淺析信息化項目績效評估
■文/張楓
企業(yè)信息化是一個循環(huán)往復(fù)、持續(xù)改進提升的過程。對信息化項目的績效評估,始終貫穿于信息化建設(shè)和應(yīng)用的全始終。信息化項目的績效評估是對企業(yè)績效評估系統(tǒng)的完善和必要補充。
信息化;績效評估;后評估
當(dāng)前,隨著企業(yè)信息化建設(shè)進入到管理、應(yīng)用的更深層次,信息化建設(shè)的成果與應(yīng)用直接影響企業(yè)績效和形象體現(xiàn),是企業(yè)中最富有活力的無形資產(chǎn)。加強對財政資金支持建設(shè)的信息化項目進行績效評估,有利于轉(zhuǎn)變政府職能和完善公共財政體系;有利于提高部門和單位績效觀念和責(zé)任意識;提高資金管理部門和項目建設(shè)單位項目和資金管理水平;提高資金管理部門優(yōu)化財政預(yù)算支出方向和結(jié)構(gòu),合理配置資源;提高財政資金使用的透明度。
信息化項目主要是指運用科學(xué)技術(shù)手段,滿足自身業(yè)務(wù)及管理需要的信息網(wǎng)絡(luò)、信息應(yīng)用、信息安全和信息資源開發(fā)利用等系統(tǒng)的新建、升級和改造。
信息化項目是典型的多學(xué)科合作項目,在項目建設(shè)過程中,每一個信息化項目由于使用需求和使用特點的不同,都需要結(jié)合自身業(yè)務(wù)模式,進行定制開發(fā)。這就使信息化建設(shè)項目行業(yè)特征性明顯,差異性較大,成果不能被完全復(fù)制。
信息化項目的績效評價是對項目實施管理工作進行的評估,目的是總結(jié)項目實施中各種管理經(jīng)驗教訓(xùn),提高對項目實施的管理水平,使項目更好地達到建設(shè)目標(biāo)。項目績效評價是以項目建設(shè)目標(biāo)、各項技術(shù)指標(biāo)與項目建設(shè)成果進行對比,對已完成項目的管理水平、效益和影響進行系統(tǒng)、客觀的分析、檢查和總結(jié),以確定目標(biāo)是否達到,結(jié)果是否合理有效??偨Y(jié)經(jīng)驗和吸取教訓(xùn),為未來的決策提供參考依據(jù)。
信息化項目關(guān)鍵的評價要素應(yīng)該是時間、成本和質(zhì)量。信息化項目投入都很巨大,無論是資金還是人力,它的實施風(fēng)險比較大。判斷信息化項目是否成功最直觀的方法是在預(yù)定的時間內(nèi),看它能不能如期投入使用。實施過程中出現(xiàn)一些不可預(yù)期的困難,導(dǎo)致項目延誤,最終因無限延期而擱淺;項目的支出能否控制在預(yù)算范圍內(nèi),如果超出能承受的范圍,項目很難成功。在保證時間、成本的前提下,信息化項目的質(zhì)量更為重要,是評價信息化成功與否的核心內(nèi)容。
專業(yè)性強,可見性差。信息化項目建設(shè)一般與業(yè)務(wù)管理活動密切相關(guān)。因此評估需要圍繞信息化項目需要解決的具體問題,對項目單位的管理范圍、業(yè)務(wù)處理流程、業(yè)務(wù)特點等相關(guān)內(nèi)容進行分析。
成本核算難度大。隨著政府加大對信息化項目投資力度,信息化項目中,應(yīng)用系統(tǒng)軟件開發(fā)在項目總投資的占比越來越大,而對于軟件開發(fā)成本的核定一直是評估工作的難點。軟件開發(fā)成本受開發(fā)人員技術(shù)熟練程度、軟件組織管理水平、項目經(jīng)理組織能力,采用的開發(fā)語言等多種因素的影響,不同的軟件開發(fā)企業(yè)的開發(fā)成本差別很大,很難統(tǒng)一量化。
信息化項目涵蓋內(nèi)容多,專業(yè)化水平要求高。涉及的專業(yè)內(nèi)容非常多,常規(guī)的信息化項目包含的專業(yè)技術(shù)有:網(wǎng)絡(luò)及主機集成技術(shù)、存儲備份技術(shù)、軟件開發(fā)及數(shù)據(jù)庫設(shè)計技術(shù)等,專業(yè)化較強的項目還可能包含有機房設(shè)計施工、GIS應(yīng)用、視頻會議及多媒體應(yīng)用、樓宇自動化等多個方面的技術(shù)。
為健全政府投資項目后評價制度,規(guī)范項目后評價工作,提高政府投資決策水平和投資效益,加強中央政府投資項目全過程管理,根據(jù)《國務(wù)院關(guān)于投資體制改革的決定》要求,2014年9月21日國家發(fā)展改革委關(guān)于印發(fā)中央政府投資項目后評價管理辦法和中央政府投資項目后評價報告編制大綱(試行)的通知(發(fā)改投資【2014】2129號)。這是《國務(wù)院關(guān)于投資體制改革的決定》的重要配套文件,也是國家發(fā)展改革委首次發(fā)布的針對項目后評價的管理辦法。
建立項目后評價制度,是投資體制改革的一項重大措施,一方面按照“誰投資、誰決策、誰受益、誰承擔(dān)風(fēng)險”實行項目核準(zhǔn)制和登記備案制,真正落實建設(shè)投資自主權(quán);另一方面對投資項目要逐步強化監(jiān)督管理,以確保投資項目的投資效益。因此,對于投資項目必須加強監(jiān)督管理,確保有限投入能產(chǎn)生較大的投資效益。
4.1后評價概述
項目后評價是指在項目建成、竣工驗收并投產(chǎn)一段時間后,根據(jù)項目實際效果及系統(tǒng)前期立項相關(guān)資料及準(zhǔn)備階段的相關(guān)資料和項目后期運行狀況及使用狀況綜合分析和評價而做的項目評估。
項目后評價與項目驗收不同,不屬于項目建設(shè)過程中的工作步驟。按照項目建設(shè)實施周期劃分,項目后評價應(yīng)在項目建成投產(chǎn)、竣工驗收以后一段時間,項目運行效率或者使用效果等逐漸顯現(xiàn)出來時進行;應(yīng)對照項目立項文件、詳細設(shè)計方案等技術(shù)需求文件,評價項目的建設(shè)成果、產(chǎn)生的效益、發(fā)揮的作用和帶來的影響,判斷項目目標(biāo)的完成情況,總結(jié)經(jīng)驗教訓(xùn),對計劃建設(shè)項目、調(diào)整在建項目、完善已建項目提出指導(dǎo)建議。
績效評價遵循的原則:科學(xué)規(guī)范原則。績效評價應(yīng)當(dāng)嚴(yán)格執(zhí)行規(guī)定的程序,按照科學(xué)可行的要求,采用定量與定性分析相結(jié)合的方法;公正公開原則。績效評價應(yīng)當(dāng)符合真實、客觀、公正的要求,依法公開并接受監(jiān)督;績效相關(guān)原則??冃гu價應(yīng)當(dāng)針對具體支出及其產(chǎn)出績效進行,評價結(jié)果應(yīng)清晰反映支出和產(chǎn)出績效之間的緊密對應(yīng)關(guān)系。
項目管理工作是做好績效評價的基礎(chǔ),在項目結(jié)束后,項目承擔(dān)單位應(yīng)組織對項目績效實現(xiàn)情況進行事后評估。績效評價,是針對各項目特點,對評價項目采取全面評價和重點評價相結(jié)合、現(xiàn)場評價和非現(xiàn)場評價相結(jié)合的方法進行評價??冃гu價三大特點是“對照目標(biāo)談績效”“對照管理談效率”和“對照預(yù)算談執(zhí)行” 。
“對照目標(biāo)談績效”是指在項目評價過程中,應(yīng)該對照項目定位和計劃的績效目標(biāo),判斷項目完成內(nèi)容、完成進度、完成質(zhì)量的績效情況。
“對照管理談效率”是指管理要貫穿于項目始終,包括項目立項、實施、結(jié)果以及應(yīng)用。要有明確的項目管理者和承擔(dān)者職責(zé),制定有效的管理辦法,和加強項目績效信息管理工作。
“對照預(yù)算談執(zhí)行”是指在財務(wù)指標(biāo)評價中,應(yīng)該從預(yù)算執(zhí)行金額、內(nèi)容、科目范圍和進度等與預(yù)算批復(fù)的相符程度,以及財務(wù)制度的健全性來判斷該項目財務(wù)執(zhí)行情況。
4.2后評價實例
對國際互聯(lián)網(wǎng)絡(luò)新聞宣傳系統(tǒng)工程門戶網(wǎng)站的后評估,首先評估的范圍,依據(jù)項目周期劃分,包括前期決策、工程準(zhǔn)備、建設(shè)實施、竣工投產(chǎn)等方面的評估。也可依據(jù)關(guān)注重點,選取幾個方面進行,例如:對項目文檔進行梳理與評審。梳理工作包括對該項目及子項的文檔按時間、項目周期以及業(yè)務(wù)等幾個維度進行清理、建表;評審主要是指針對項目文檔進行完整性、可用性等進行評價,指出存在的不足或缺失并提出相應(yīng)的建議。
對項目目標(biāo)實現(xiàn)情況進行比對分析。從立項相關(guān)文件及項目建設(shè)合同中抽提出項目目標(biāo)與對應(yīng)的指標(biāo),采用對比法,輔以現(xiàn)場調(diào)查與問卷調(diào)查,對項目目標(biāo)實現(xiàn)的情況進行分析與評價,并提出相應(yīng)的建議。
對項目建成的應(yīng)用系統(tǒng)的運行效率和使用效果進行評價。圍繞項目采、編、發(fā)所涉及的應(yīng)用系統(tǒng),重點評估業(yè)務(wù)系統(tǒng)的運行效率與使用效果、用戶滿意度等。
評估的目的是通過對項目文檔進行梳理與評審,對項目目標(biāo)實現(xiàn)情況進行比對分析,對項目建成的應(yīng)用系統(tǒng)的運行效率和使用效果進行評價,為后期的項目建設(shè)提出建議。
a.對項目文檔的梳理與評審
評估對象包含,項目前期文檔:項目立項申報書、項目可行性研究報告、項目立項專家評審意見及相關(guān)管理部門的批復(fù);項目實施文檔:招投標(biāo)文件、詳細設(shè)計報告、項目建設(shè)合同、工程變更報告、監(jiān)理意見、用戶培訓(xùn)及用戶反饋意見、項目驗收報告及相關(guān)的文件與資料;運行維護文檔 :運行維護記錄、問題處理與跟蹤記錄、運行維護管理制度與崗位職責(zé)。
采用的評估方法,依據(jù)行業(yè)標(biāo)準(zhǔn)與規(guī)范,對項目合同進行梳理,形成《項目合同梳理記錄》,以正規(guī)的項目建設(shè)合同為主線,整理出《項目業(yè)務(wù)系統(tǒng)列表》。 制作《文檔檢查記錄表》,審核各項目的前期文檔、實施過程文擋、運行維護文檔等,評價文檔的完整性、可用性,對存在的問題進行分析,并提出改進建議。
b.對項目建成的應(yīng)用系統(tǒng)的運行效率和使用效果的評價
評估對象包括:
項目前期文檔:項目立項申報書、項目可行性研究報告、項目立項專家評審意見及相關(guān)管理部門的批復(fù)。
項目實施文檔:招投標(biāo)文件、詳細設(shè)計報告、項目建設(shè)合同、工程變更報告、監(jiān)理意見、用戶培訓(xùn)及用戶反饋意見、項目驗收報告及相關(guān)的文件與資料。
運行維護文檔:運行維護記錄、問題處理與跟蹤記錄、運行維護管理制度與崗位職責(zé)。
評估方法簡述,項目后評價主要采用的方法是對比法,即根據(jù)在后評價過程中,調(diào)查得到的項目實際建設(shè)完成情況,與項目立項時所確定的項目建設(shè)目標(biāo)、經(jīng)濟效益和社會效益,以及其它各種指標(biāo)相對比,根據(jù)出現(xiàn)的差異和變化,分析原因,給出結(jié)論和經(jīng)驗教訓(xùn)。
項目后評價對比法分為前后對比、有無對比和橫向?qū)Ρ?。前后對比法是項目實施前后相關(guān)指標(biāo)的對比,用以直接估量項目實施的相對成效。有無對比法是指在項目周期內(nèi)已經(jīng)實施項目的指標(biāo)實際值與未實施項目的預(yù)測指標(biāo)值對比,用以衡量項目真實的效益、作用及影響。橫向?qū)Ρ仁峭袠I(yè)相似項目指標(biāo)的對比,用以評價項目的績效或企業(yè)的競爭力。
c. 對項目建成的應(yīng)用系統(tǒng)的運行效率和使用效果的評價
評估對象包括:現(xiàn)場及電話訪談記錄、Alexa網(wǎng)站排名信息、問卷調(diào)查結(jié)果。
評估方法簡述:通過對用戶及系統(tǒng)管理員進行問卷調(diào)查,直接取得使用者對系統(tǒng)的運行效率與使用效果的評價。發(fā)放問卷是常用的一種調(diào)查方法。它在一次調(diào)查中對很多變量進行觀察和衡量,而且不受空間的限制,可以進行遠距離的調(diào)查。但是,這種調(diào)查對問卷的設(shè)計要求較高,而且該方法還要受到發(fā)放、填寫、回收問卷的時間上的限制。通過這種方法取得的數(shù)據(jù)可以有效地應(yīng)用于描述性的分析。
整個調(diào)查的重點是問卷的設(shè)計,問卷應(yīng)該科學(xué)、準(zhǔn)確、客觀,盡可能排除個人的主觀意志。由于問卷的完整性難以掌握,為提高調(diào)查結(jié)果的可靠性,要盡一切努力去多回收問卷,以保證有效問卷的數(shù)量。問卷的設(shè)計要遵循的基本原則有:
盡量采用口語以適應(yīng)文化層次不同的調(diào)查對象;
盡量使用通用的語匯,避免特殊群體的專用語匯、專業(yè)語匯和縮寫詞;
用語應(yīng)當(dāng)科學(xué)、明確,避免出現(xiàn)曖昧、多義的詞語;
問題不要脫離現(xiàn)實,不要做虛構(gòu)想象式的提問;
不要做主觀誘導(dǎo)式的提問,不帶傾向性;
問題要簡捷明了,不會引起調(diào)查對象的反感;
問題與考察的內(nèi)容要有相關(guān)性;
答案設(shè)置要盡可能涵蓋所有的情況,以免使調(diào)查對象覺得沒有適合自己的答案;
不要使用調(diào)查對象記憶模糊的問題;
在一個問項中不要出現(xiàn)詢問性質(zhì)相同的兩個問題,也就是要避免雙重提問;
某些問題的提問順序,避免前項提問對后項提問的回答產(chǎn)生特定影響的情況;
盡可能能把調(diào)查對象容易拒絕回答的問題放在問卷的后面;
答案不要太過復(fù)雜,以免使調(diào)查對象難以回答。
d. 評估建議
明確并嚴(yán)格項目文檔管理制度,統(tǒng)一歸口部門,責(zé)任到人。
建議對每個項目都統(tǒng)一文檔的歸口(一般為項目監(jiān)理)。在項目完成時,對文檔進行必要的驗收,然后移交給建設(shè)方。建設(shè)方需由相對固定的單一部門和人員負責(zé)文檔的備案與管理,完善文檔的管理制度。
引入項目監(jiān)理,協(xié)助建設(shè)方開展工作,提升項目管理的科學(xué)性與規(guī)范性。
項目監(jiān)理方是獨立于建設(shè)單位和承建單位的第三方機構(gòu),監(jiān)理的作用是對質(zhì)量、變進度和投資進行監(jiān)督,對項目合同、安全和文檔資料進行管理,協(xié)調(diào)有關(guān)單位間的工作關(guān)系,合格的監(jiān)理有助于在項目管理與具體實施過程中,對整個系統(tǒng)的建設(shè)進度和質(zhì)量有一個完整的把握,同時有效地管理項目建設(shè)合同和項目文檔。
加強階段性IT獨立評估。
IT評估能恰當(dāng)?shù)貙^去進行總結(jié)、對現(xiàn)狀進行評估、對未來進行建議,可以有效地提供“投資效果”方面的反饋。評估不僅可以在項目完成后做,也可以在項目實施過程中進行,特別是對時間跨度較長的大型系統(tǒng)工程的里程碑。這樣不僅可以客觀地評價階段成果,為后面的實施打下基礎(chǔ),而且有利于項目的管理、事后的總結(jié)與問題追溯。建議在信息系統(tǒng)的建設(shè)過程中,特別是分步驟多期實施的項目中,可以考慮使用IT階段評估。
加強對項目進度的控制。
由于項目在實施的過程中變數(shù)很多,進度已成為信息系統(tǒng)工程建設(shè)中最難控制的要素。建議委托方在項目啟動階段,認真對影響進度的因素進行分析,對項目工作和目標(biāo)進行分解,編制可行的進度計劃。在項目實施過程中,嚴(yán)格地、動態(tài)地監(jiān)控進度計劃的實施。針對項目的一些關(guān)鍵點或關(guān)鍵里程碑,要加大協(xié)調(diào)與督促力度,盡量避免項目拖延。
優(yōu)化網(wǎng)站結(jié)構(gòu),減少訪客關(guān)注內(nèi)容的鏈接層次。
如果對網(wǎng)站的結(jié)構(gòu)做進一步優(yōu)化,讓訪客能更方便地找到所關(guān)注的信息,便能有效地提高網(wǎng)站的粘度和訪問人數(shù)。
進一步提升系統(tǒng)的運行效率,優(yōu)化業(yè)務(wù)系統(tǒng)的操作。
業(yè)務(wù)應(yīng)用系統(tǒng)的運行效率還有提升的空間,系統(tǒng)操作還可以優(yōu)化。建議加大在軟件升級、人員培訓(xùn)、系統(tǒng)調(diào)優(yōu)等方面的投入,通過后續(xù)的項目建設(shè),將網(wǎng)站進一步做大做強。
項目后評價對提高項目決策科學(xué)化水平,改進項目管理和提高投資效益發(fā)揮著極其重要的作用。具體地說,項目后評價的作用主要表現(xiàn)在以下兩個方面:
5.1總結(jié)經(jīng)驗教訓(xùn),提高管理水平
由于項目管理是一項極其復(fù)雜的工作,項目建設(shè)一般都涉及多個部門,部門之間的配合與協(xié)調(diào)工作,直接關(guān)系到項目能否順利完成。通過對已經(jīng)建成項目管理的實際情況進行分析研究,有利于指導(dǎo)今后項目的管理實踐,提高項目管理的水平。
5.2提高決策科學(xué)化水平
項目決策的依據(jù)是項目前評價,前評價所做預(yù)測的準(zhǔn)確性,可以通過后評價來驗證。通過完善的項目后評價制度和科學(xué)的方法體系產(chǎn)生的反饋信息,可以及時糾正項目決策中存在的問題,提高決策科學(xué)化水平。
[1]財政部.關(guān)于推進預(yù)算績效管理的指導(dǎo)意見.財預(yù),2011.
[2]財政部.財政支出績效評價管理暫行辦法.財預(yù),2011.
[3]郭慶光.傳播學(xué)教程[M].北京:中國人民大學(xué)出版社,2001.
[4]劉旭濤.政府績效管理:制度、戰(zhàn)略與方法[M].北京:機械工業(yè)出版社,2004.
[5]陳慶云,王明杰.電子政務(wù)行政與社會管理[M].北京:電子工業(yè)出版社,2002.
(作者單位:新華社技術(shù)局)
G20
A