周 柯 姜 飛 董泰青

（1.廣西電網(wǎng)公司電力科學(xué)研究院，南寧 430072；2.湖南大學(xué)電氣與信息工程學(xué)院，長(zhǎng)沙 410082）

隨著電網(wǎng)企業(yè)科技創(chuàng)新投入的持續(xù)增大，科技項(xiàng)目管理工作變得越來越重要，迫切需要一套符合自身電網(wǎng)特征的后評(píng)估理論與方法[1-4]。

目前，國(guó)內(nèi)外很多先進(jìn)企業(yè)針對(duì)項(xiàng)目后評(píng)估工作已進(jìn)行了富有成果的探索和研究。后評(píng)估方法大致分為：定性評(píng)價(jià)、定量評(píng)價(jià)、半定量評(píng)價(jià)以及定性與定量相結(jié)合評(píng)價(jià)四類[5]。研究?jī)?nèi)容包括后評(píng)估指標(biāo)體系建立、指標(biāo)權(quán)重確定及后評(píng)估應(yīng)用。文獻(xiàn)[6]提出了一種模糊區(qū)間層次分析的電網(wǎng)改造項(xiàng)目綜合后評(píng)估模型。文獻(xiàn)[7]運(yùn)用層次分析法建立了綜合評(píng)估質(zhì)保。文獻(xiàn)[8]研究了電網(wǎng)技術(shù)性能后評(píng)估指標(biāo)體系，通過熵值法對(duì)初步給定的指標(biāo)權(quán)重進(jìn)行調(diào)整。但是，現(xiàn)有研究?jī)H局限在單個(gè)科技項(xiàng)目，較少涉及多個(gè)科技項(xiàng)目的綜合后評(píng)估工作，無法準(zhǔn)確描述由多個(gè)子項(xiàng)目構(gòu)成的一類科技項(xiàng)目。

本文結(jié)合某電力公司科技項(xiàng)目管理工作的實(shí)際，首先建立了一種科技項(xiàng)目后評(píng)估指標(biāo)體系模型，介紹了層次分析法確定指標(biāo)權(quán)重的步驟；重點(diǎn)建立了多項(xiàng)目的后評(píng)估模型，提出了多項(xiàng)目綜合評(píng)估貢獻(xiàn)度因子概念，并介紹了開發(fā)的一種符合電網(wǎng)實(shí)際特征的科技項(xiàng)目后評(píng)估軟件。某電力公司科技項(xiàng)目的實(shí)例應(yīng)用證明了所建立模型和后評(píng)估軟件的有效和實(shí)用性。

1 科技項(xiàng)目后評(píng)估指標(biāo)體系建立

科技項(xiàng)目后評(píng)估工作作為公司科技項(xiàng)目管理機(jī)制的重要組成部分，科學(xué)客觀的評(píng)估過程是科技活動(dòng)中的重要環(huán)節(jié)[9-10]。根據(jù)電網(wǎng)公司科技工作指導(dǎo)思想要求，結(jié)合科技項(xiàng)目后評(píng)估實(shí)際特點(diǎn)，本文采用專家法確定科技項(xiàng)目后評(píng)估指標(biāo)體系。

1.1 指標(biāo)體系模型

廣西電網(wǎng)公司科技項(xiàng)目后評(píng)估指標(biāo)體系由5 個(gè)一級(jí)指標(biāo)，12 個(gè)二級(jí)指標(biāo)，20 個(gè)三級(jí)指標(biāo)構(gòu)成，包含了對(duì)科技項(xiàng)目進(jìn)行后評(píng)估的各個(gè)關(guān)鍵要素，能夠解決科技項(xiàng)目后評(píng)估管理的要求。指標(biāo)體系模型詳見表1。

表1 某電力企業(yè)科技項(xiàng)目后評(píng)估指標(biāo)體系模型

1.2 各級(jí)指標(biāo)細(xì)則說明

通過實(shí)際工作調(diào)研，資料查閱和專家交流的途徑確立了科技項(xiàng)目后評(píng)估模型的各指標(biāo)描述。

1）技術(shù)價(jià)值

（1）技術(shù)水平。技術(shù)重要性：所提出的研究方向、研究?jī)?nèi)容與電網(wǎng)安全生產(chǎn)與運(yùn)營(yíng)聯(lián)系的緊密程度與重要程度。技術(shù)先進(jìn)性：指所提出的新知識(shí)達(dá)到的技術(shù)水平，技術(shù)的創(chuàng)新性。技術(shù)可行性：指技術(shù)實(shí)現(xiàn)的難易程度。

（2）研究結(jié)論。項(xiàng)目建設(shè)：指項(xiàng)目是否按照實(shí)施方案建設(shè)成功，系統(tǒng)運(yùn)行穩(wěn)定性情況。項(xiàng)目推廣使用：研究成果的推廣使用情況。

（3）成果?？萍吉?jiǎng)勵(lì)：指獲得科技獎(jiǎng)勵(lì)（包含科技進(jìn)步或技改貢獻(xiàn)）層次?？萍颊撐模褐阜想娋W(wǎng)公司項(xiàng)目實(shí)際情況的論文檔次及質(zhì)量。著作、標(biāo)準(zhǔn)與規(guī)程：制定標(biāo)準(zhǔn)、規(guī)程，出版著作情況。專利和軟件著作權(quán)：指申請(qǐng)專利、軟件著作權(quán)數(shù)量。

2）推廣價(jià)值

技術(shù)成熟度：所采取技術(shù)的成熟水平，是否具有良好的推廣價(jià)值。設(shè)備應(yīng)用效果：項(xiàng)目實(shí)際運(yùn)行情況。

3）組織管理

（1）前期工作。指項(xiàng)目工作完成時(shí)間是否合理，各項(xiàng)工作是否按照規(guī)范流程完成。

（2）經(jīng)費(fèi)管理。指經(jīng)費(fèi)結(jié)算的規(guī)范性。

（3）運(yùn)維管理。指運(yùn)維職責(zé)是否明晰、規(guī)程制度是否健全。

（4）檔案管理。資料檔案是否齊全，存在地點(diǎn)是否符合相關(guān)規(guī)定。

4）綜合效益

（1）經(jīng)濟(jì)效益。指投資收益比。

（2）環(huán)境效益。項(xiàng)目研究成果改善環(huán)境（社會(huì)、自然）程度，企業(yè)社會(huì)形象是否顯著提升。

（3）其他效益。降低安全風(fēng)險(xiǎn)，優(yōu)化管理流程等無法量化的效益。

5）人才培養(yǎng)

參與程度：公司系統(tǒng)人員在研究工作過程中的深入?yún)⑴c程度和對(duì)關(guān)鍵技術(shù)的掌握程度。人員培訓(xùn)：成果應(yīng)用人員對(duì)研究成果的使用熟練程度。

2 后評(píng)估模型

2.1 指標(biāo)權(quán)重設(shè)置

后評(píng)估指標(biāo)權(quán)重的確定可參考層次分析法。根據(jù)指標(biāo)體系的層次結(jié)構(gòu)構(gòu)造判斷矩陣，按照1～9 級(jí)的標(biāo)度法采用專家打分的辦法對(duì)建立的后評(píng)估指標(biāo)進(jìn)行權(quán)重設(shè)置[11-12]。

從專家打分的調(diào)研表中獲取判斷矩陣B，以計(jì)算一級(jí)指標(biāo)對(duì)于評(píng)估目標(biāo)的權(quán)重為例說明該工作方法。倘若bij，(i,j= 1 ,2,3,4,5)表示由調(diào)研表得到的判斷矩陣，即i元素對(duì)j的重要程度。具體計(jì)算如下。

步驟1：計(jì)算判斷矩陣每一列元素的乘積

步驟2：Mi的5次方根

步驟3：將矩陣B的列正規(guī)化

步驟4：將正規(guī)化后的矩陣按行相加，得到列向量

步驟5：再對(duì)向量s正規(guī)化，得特征向量

式中，w表示第二層對(duì)于第一層的相對(duì)權(quán)重系數(shù)。

步驟6：檢驗(yàn)比較判斷矩陣一致性。設(shè)有n個(gè)（此處為5個(gè)）進(jìn)行比較的指標(biāo)，對(duì)任意一個(gè)判斷矩陣A，當(dāng)矩陣完全保持一致時(shí)，最大特征根λmax=n；當(dāng)矩陣不完全保持一致時(shí)，λmax＞n。于是一致性檢驗(yàn)指標(biāo)

式中，CI為矩陣的一致性檢驗(yàn)指標(biāo)。由以上規(guī)律：當(dāng)矩陣完全保持一致時(shí)，CI= 0；當(dāng)矩陣不完全保持一致時(shí)，CI＞ 0。

步驟7：重復(fù)步驟1至6，可求得二級(jí)、三級(jí)指標(biāo)的權(quán)重值。

2.2 單項(xiàng)目后評(píng)估模型

假若第i層的第j個(gè)指標(biāo)wij權(quán)重計(jì)為rij，且有對(duì)于該指標(biāo)若干個(gè)專家打分平均值為tij，則單項(xiàng)目評(píng)估結(jié)果為

對(duì)于專家打分值采用10 分值，因此0 ≤T≤ 10，對(duì)于科技項(xiàng)目后評(píng)估結(jié)果等級(jí)描述如表2所示。可見，項(xiàng)目后評(píng)估結(jié)果按照得分高低，共分：不合格、基本達(dá)標(biāo)、良好、優(yōu)秀、標(biāo)桿項(xiàng)目五個(gè)等級(jí)。

表2 科技項(xiàng)目后評(píng)估結(jié)果等級(jí)描述

2.3 多項(xiàng)目后評(píng)估模型

與單項(xiàng)目評(píng)估相比，多項(xiàng)目評(píng)估是一種全新的評(píng)估模式，它是站在整個(gè)組織層面上，對(duì)一大類項(xiàng)目開展情況進(jìn)行綜合評(píng)判。多項(xiàng)目評(píng)估的核心是如何確定各子項(xiàng)目之間的權(quán)重關(guān)系。本文將多項(xiàng)目間的關(guān)系采用定量和定性兩方面描述。

定義1：倘若項(xiàng)目A可表示為

其中，Ai表示項(xiàng)目A的第i個(gè)子項(xiàng)目，n= 1 ,2,3,···，則對(duì)項(xiàng)目A的后評(píng)估包含了對(duì)各個(gè)子項(xiàng)目Ai的后評(píng)估。

其中各個(gè)子項(xiàng)目的后評(píng)估模型如表1所示，然而對(duì)于項(xiàng)目A所開展的后評(píng)估工作應(yīng)該包含了各個(gè)子項(xiàng)目的評(píng)估及各個(gè)子項(xiàng)目對(duì)其貢獻(xiàn)度大小，由貢獻(xiàn)度因子λ表示。

定義2：假若各子項(xiàng)目Ai對(duì)于項(xiàng)目A成功所做出的努力程度為貢獻(xiàn)因子λi，計(jì)

其中，αi為定量因子，為子項(xiàng)目金額所占總項(xiàng)目金額的比例大小，且0 ＜αi＜ 1；βi為定性因子，由專家經(jīng)驗(yàn)確定，且0 ＜βi＜ 1。

若各子項(xiàng)目Ai的得分已計(jì)算出為φi，則項(xiàng)目A的得分Φ為

其中，表示 {λ1,···,λi,···,λn}歸一化后的值。因此，由Φ大小可以得出項(xiàng)目A開展的優(yōu)劣程度。并且，Φi的大小表征出了各子項(xiàng)目對(duì)項(xiàng)目A成功的實(shí)際貢獻(xiàn)值。

3 科技項(xiàng)目評(píng)估的主要步驟

在上所述評(píng)估方法基礎(chǔ)上，根據(jù)層次分析的方法和原理，確定廣西電網(wǎng)公司科技項(xiàng)目后評(píng)估指標(biāo)權(quán)重，然后依據(jù)專家打分原則確定各指標(biāo)得分具體實(shí)施如下。

1）依據(jù)2.1 內(nèi)容，確定后評(píng)估體系中各指標(biāo)權(quán)重系數(shù)rij。

2）組織專家嚴(yán)格依據(jù)項(xiàng)目評(píng)分細(xì)則對(duì)各指標(biāo)進(jìn)行打分，分值介于0～10。

3）計(jì)算評(píng)估結(jié)果，求得單項(xiàng)目得分φi。

4）循環(huán)步驟2 至3，確定多個(gè)單項(xiàng)目得分值。

5）依據(jù)公式（9），計(jì)算子項(xiàng)目Ai的貢獻(xiàn)因子λi，并求得歸一化后的值。

6）由公式（10），求解項(xiàng)目A的得分。

7）同理，依據(jù)參考表1，給出科技項(xiàng)目后評(píng)估結(jié)論。

4 軟件開發(fā)

為實(shí)現(xiàn)后評(píng)估工作的軟件智能化，研究開發(fā)了廣西電網(wǎng)公司科技項(xiàng)目后評(píng)估軟件。其軟件管理界面，如圖1所示。

圖1 科技項(xiàng)目后評(píng)估軟件管理界面

本軟件設(shè)置評(píng)分員和管理者兩種權(quán)限。系統(tǒng)主要包括：指標(biāo)管理模塊、項(xiàng)目管理模塊、項(xiàng)目評(píng)估模塊和系統(tǒng)管理模塊。各模塊的結(jié)構(gòu)功能圖如圖2所示。

圖2 軟件模塊結(jié)構(gòu)圖

圖3 多項(xiàng)目后評(píng)估流程圖

5 實(shí)例

選擇某電網(wǎng)公司近5年完成的“一類在線監(jiān)測(cè)項(xiàng)目A”，其包括4 個(gè)子項(xiàng)目：大跨越導(dǎo)地線微風(fēng)振動(dòng)在線監(jiān)測(cè)系統(tǒng)A1、輸電線路綜合狀態(tài)在線監(jiān)測(cè)系統(tǒng)研究開發(fā)A2、輸變電設(shè)備外絕緣表面污穢在線監(jiān)測(cè)技術(shù)應(yīng)用研究A3、電網(wǎng)主設(shè)備安全預(yù)警監(jiān)測(cè)平臺(tái)建設(shè)及應(yīng)用A4，即A={A1,A2,A3,A4}。

項(xiàng)目后評(píng)估過程

選擇相應(yīng)的后評(píng)估體系模型，其中后評(píng)估專家為6 人，首先按照單項(xiàng)目后評(píng)估流程得出各單項(xiàng)目后評(píng)估結(jié)果，如表3所示。

表3 單項(xiàng)目后評(píng)估結(jié)果

由于各子項(xiàng)目對(duì)項(xiàng)目A的貢獻(xiàn)度不同，依據(jù)公式（9），按照各子項(xiàng)目的投資金額，求得定量因子α= (0.4646,0.0491,0.4432,0.0432)，并且由專家綜合給出的定性因子β= (0.3,0.15,0.15,0.4)，歸一化后得貢獻(xiàn)因子λ= (0.6045,0.0321,0.2884,0.0750)。如圖4所示，綜合考慮定量因子和定性因子后，雖然定量描述中A1和A3所占比重較為接近，但是考慮定性描述后更加突出了A1對(duì)項(xiàng)目A成功的貢獻(xiàn)度。這說明了項(xiàng)目成功與否并不完全由其金額所占大小決定，還牽扯到項(xiàng)目的對(duì)整個(gè)系統(tǒng)的重要程度。

圖4 定量因子、定性因子和貢獻(xiàn)度因子對(duì)比

依據(jù)式（10），可求得項(xiàng)目A的得分為8.9017，各子項(xiàng)目得分分別為5.598、0.2410、2.3937、0.6690，可得出本類項(xiàng)目整體達(dá)到了優(yōu)秀程度，具有良好的社會(huì)推廣價(jià)值。

6 結(jié)論

文本建立了一種新的科技項(xiàng)目后評(píng)估體系模型，并對(duì)模型的各指標(biāo)進(jìn)行了詳細(xì)說明，最終開發(fā)了一套科技項(xiàng)目后評(píng)估軟件，通過具體項(xiàng)目實(shí)例驗(yàn)證了評(píng)估體系及方法的有效性。實(shí)踐證明，本文研究理論與方法可推廣應(yīng)用到后評(píng)估工作中。

[1] 陳志莉.電網(wǎng)建設(shè)項(xiàng)目后評(píng)價(jià)理論及應(yīng)用研究[D].北京:華北電力大學(xué)(北京),2005.

[2] 張文泉,王泓艷,程美山.項(xiàng)目后評(píng)估方法與項(xiàng)目后評(píng)估制度[J].電力技術(shù)經(jīng)濟(jì),2005(5):42-45.

[3] 薛玉蘭.技術(shù)改造項(xiàng)目的后評(píng)估管理[J].華東電力,2006,34(6): 28-31.

[4] 趙彪,劉海波,韓豐,等.跨區(qū)聯(lián)網(wǎng)效益后評(píng)估方法的探討[J].電網(wǎng)技術(shù),2004,28(13):1-5.

[5] 姚雨辰.科技基礎(chǔ)研究計(jì)劃項(xiàng)目后評(píng)估研究[D].南京:南京理工大學(xué),2010.

[6] 楊衛(wèi)紅,何永秀,李德智,等.模糊區(qū)間評(píng)價(jià)與層次分析相結(jié)合的電網(wǎng)改造項(xiàng)目綜合后評(píng)估方法[J].電網(wǎng)技術(shù),2009,33(5):33-37.

[7] 胡蓉,張焰,范超,等.配電網(wǎng)規(guī)劃后評(píng)估指標(biāo)體系的研究[J].華東電力,2007,35(8):70-74.

[8] 賴敏,王廣生.電力企業(yè)科技項(xiàng)目后評(píng)估指標(biāo)權(quán)重系數(shù)的調(diào)研和計(jì)算[J].華中電力,2009(5):36-39.

[9] 姚剛,劉速飛,馬勁東,等.配電網(wǎng)評(píng)估指標(biāo)體系建立與評(píng)估方法[J].華東電力,2009,37(12): 2038-2040.

[10] 舒慧芬.脫硫工程后評(píng)估的必要性及對(duì)后評(píng)估工作的建議[J].中國(guó)電力,2005,38(11):66-68.

[11] 朱鶴,楊麗徙,朱延偉,等.計(jì)及地理空間信息的農(nóng)網(wǎng)投資效益后評(píng)估方法[J].電力系統(tǒng)及其自動(dòng)化學(xué)報(bào),2012,24(5):31-35.