●雷蕾,吳 潔,李 婷
(第一作者單位:成都信息工程大學(xué)物流學(xué)院)
一套科學(xué)的績效評價(jià)體系不僅能夠豐富政府部門績效評價(jià)管理理論,還可以在實(shí)際應(yīng)用中幫助自然資源主管部門發(fā)現(xiàn)存在的問題,提高專業(yè)監(jiān)測預(yù)警能力。因此,構(gòu)建一套科學(xué)的績效評價(jià)體系是十分有必要的。
研究小組分析了地質(zhì)災(zāi)害專業(yè)監(jiān)測預(yù)警項(xiàng)目供應(yīng)商績效評價(jià)的特點(diǎn)、內(nèi)涵以及績效評價(jià)體系等內(nèi)容,運(yùn)用層次分析法建立績效評價(jià)模型,并在四川省S縣進(jìn)行實(shí)證研究。
四川省地質(zhì)災(zāi)害專業(yè)監(jiān)測預(yù)警項(xiàng)目自2017年開始,各級自然資源主管部門按照四川省自然資源廳相關(guān)要求對供應(yīng)商進(jìn)行績效評價(jià)。隨著項(xiàng)目建設(shè)規(guī)模的不斷擴(kuò)大,績效評價(jià)取得了一定進(jìn)展,但是在實(shí)踐中也存在著一些問題。
四川省自然資源主管部門對供應(yīng)商績效評價(jià)重視程度不夠,缺少專人負(fù)責(zé)機(jī)制,績效評價(jià)工作存在拖延心理和應(yīng)付現(xiàn)象。由于部分工作人員對績效評價(jià)工作的重要作用存在認(rèn)識上的不足,致使有些市縣的績效評價(jià)工作中仍存在“走過場”現(xiàn)象,嚴(yán)重影響了績效評價(jià)結(jié)果的有效性。
績效評價(jià)主要針對結(jié)果評價(jià),缺乏過程的考核,即主要在項(xiàng)目驗(yàn)收階段對供應(yīng)商進(jìn)行考核,在運(yùn)維服務(wù)階段時監(jiān)督考核缺失。地質(zhì)災(zāi)害專業(yè)監(jiān)測預(yù)警項(xiàng)目周期一般為3年,主要包含項(xiàng)目建設(shè)和運(yùn)維服務(wù)2個重要階段。供應(yīng)商在項(xiàng)目驗(yàn)收通過后,由于缺少相應(yīng)的績效評價(jià),供應(yīng)商在進(jìn)行運(yùn)維服務(wù)時積極性低,出現(xiàn)設(shè)備損壞后延期處理、不及時維修更換等問題。
在對以往的供應(yīng)商績效評價(jià)中,撥付款按照進(jìn)度撥付,供應(yīng)商在項(xiàng)目中的表現(xiàn)優(yōu)劣并不是最主要的考核因素,部分供應(yīng)商的工作積極性降低,由此出現(xiàn)響應(yīng)不及時、甚至不處理等問題。
自然資源主管部門對供應(yīng)商的績效評價(jià)多是根據(jù)采用定性的文字描述進(jìn)行評價(jià),缺少量化指標(biāo)。這導(dǎo)致績效評價(jià)主觀性較強(qiáng),不同評價(jià)人員對同一供應(yīng)商的評價(jià)結(jié)果不同,不利于形成統(tǒng)一的監(jiān)督和考核體系。
關(guān)于績效評價(jià)概念的界定,主要有4種方式。第1種是強(qiáng)調(diào)績效評價(jià)結(jié)果的內(nèi)涵;第2種是從過程界定績效評價(jià)概念;第3種是從被評價(jià)對象能力界定績效評價(jià)概念;第4種是結(jié)合以往學(xué)者對績效評價(jià)的觀點(diǎn)進(jìn)行拓展。目前,對地質(zhì)災(zāi)害監(jiān)測專業(yè)預(yù)警項(xiàng)目供應(yīng)商績效評價(jià)的內(nèi)涵還沒有明確、統(tǒng)一。研究小組認(rèn)為,地質(zhì)災(zāi)害專業(yè)預(yù)警是地質(zhì)災(zāi)害防治的重要組成部分,因此,此次研究主要采用第4種界定方式,即結(jié)合地質(zhì)災(zāi)害防治績效評價(jià)內(nèi)涵和地質(zhì)災(zāi)害專業(yè)預(yù)警項(xiàng)目特點(diǎn),由自然資源主管部門為實(shí)現(xiàn)一定經(jīng)濟(jì)效益和社會效益,采用定性和定量分析相結(jié)合而制定的績效評價(jià)體系。評價(jià)體系的指標(biāo)要充分體現(xiàn)科學(xué)性,能夠?qū)?yīng)商在地質(zhì)災(zāi)害監(jiān)測預(yù)警項(xiàng)目服務(wù)過程和結(jié)果進(jìn)行綜合評價(jià)。
地質(zhì)災(zāi)害專業(yè)監(jiān)測預(yù)警項(xiàng)目屬于政府項(xiàng)目,由自然資源主管部門組織實(shí)施。自然資源主管部門作為組織單位,對整個項(xiàng)目負(fù)責(zé),對供應(yīng)商進(jìn)行監(jiān)管;供應(yīng)商為地質(zhì)災(zāi)害專業(yè)監(jiān)測預(yù)警項(xiàng)目提供服務(wù),對自然資源主管部門負(fù)責(zé),受自然資源主管部門監(jiān)督。因此,供應(yīng)商績效評價(jià)的主體、客體分別為自然資源主管部門和項(xiàng)目供應(yīng)商。
以往,自然資源主管部門經(jīng)常采用定性評價(jià)的方式對供應(yīng)商進(jìn)行績效評價(jià)。這種方式缺少量化指標(biāo),主觀性較強(qiáng)、流于形式,違背了績效評價(jià)的初衷。層次分析法是一種定性和定量結(jié)合的方法,能夠?qū)?fù)雜問題簡單化、減小主觀因素影響、應(yīng)用廣泛,因此,研究小組選用層次分析法建立績效評價(jià)模型。
過程考核:供應(yīng)商為實(shí)現(xiàn)項(xiàng)目預(yù)期效果所進(jìn)行的一系列活動,包括儀器的靈敏度、應(yīng)急響應(yīng)等指標(biāo)。
結(jié)果考核:供應(yīng)商采取監(jiān)測預(yù)警技術(shù)和管理手段實(shí)現(xiàn)項(xiàng)目的預(yù)期結(jié)果,包括互聯(lián)互通、設(shè)備在線率等指標(biāo)。
設(shè)備在線率:同一時間段內(nèi),設(shè)備的在線率要求高于95%。設(shè)備在線率是一項(xiàng)長期性的指標(biāo),它關(guān)系到項(xiàng)目能否穩(wěn)定運(yùn)行。
應(yīng)急響應(yīng):項(xiàng)目設(shè)備多在山區(qū),服務(wù)周期長,設(shè)備面臨著較多的不可控因素。該指標(biāo)要求供應(yīng)商在斷電等緊急情況下,可以保證設(shè)備可短期運(yùn)行。應(yīng)急響應(yīng)性能是項(xiàng)目的必然要求。
互聯(lián)互通:設(shè)備系統(tǒng)平臺建設(shè)與省、市、縣平臺對接情況及數(shù)據(jù)上傳頻率?;ヂ?lián)互通體現(xiàn)在數(shù)據(jù)的實(shí)時傳輸上,對設(shè)備在線率起決定性影響。
監(jiān)測數(shù)據(jù)上傳報(bào)告:監(jiān)測點(diǎn)的計(jì)算結(jié)果數(shù)據(jù)(觀測點(diǎn)原始數(shù)據(jù)等資料),監(jiān)測數(shù)據(jù)上傳報(bào)告的原始數(shù)據(jù)為模型優(yōu)化、預(yù)警值的設(shè)置提供了重要依據(jù)。
運(yùn)行維護(hù):定期維護(hù)儀器設(shè)備和設(shè)施,確保監(jiān)測設(shè)備、數(shù)據(jù)傳輸、預(yù)警。運(yùn)行維護(hù)響應(yīng)及時性是互聯(lián)互通、設(shè)備在線率穩(wěn)定的重要保障。供應(yīng)商要在儀器出現(xiàn)異常后3個工作日內(nèi)使其恢復(fù),特殊時段至少應(yīng)于5個工作日內(nèi)使其恢復(fù)。
儀器的靈敏度:儀器對被測物變化量的反應(yīng)程度。地質(zhì)災(zāi)害具有突發(fā)性,儀器如果不能及時、快速、準(zhǔn)確地實(shí)現(xiàn)預(yù)警、預(yù)報(bào),就無法為轉(zhuǎn)移受災(zāi)人群提供緩沖時間,難以保障人民生命財(cái)產(chǎn)安全。因此,要求監(jiān)測儀器具備良好的靈敏度。
儀器的安全性:儀器安裝完成后,需考慮人為破壞、牲畜破壞等因素造成儀器的損壞。供應(yīng)商須通過選用材質(zhì)優(yōu)良的支架、圍欄,設(shè)置警示標(biāo)志等方式保障儀器的安全。
儀器的故障率:儀器的故障率對項(xiàng)目穩(wěn)定運(yùn)行產(chǎn)生重要影響,一旦儀器出現(xiàn)故障,發(fā)生地質(zhì)災(zāi)害,會造成巨大的損失。因此,要求儀器具有較低的故障率。
分區(qū)預(yù)警模型:針對不同的地質(zhì)災(zāi)害建立適合的預(yù)警模型,供應(yīng)商根據(jù)現(xiàn)場情況、歷史數(shù)據(jù)優(yōu)化預(yù)警模型,提升監(jiān)測預(yù)警的準(zhǔn)確性和及時性。
預(yù)警值設(shè)置:供應(yīng)商要結(jié)合監(jiān)測歷史數(shù)據(jù)、現(xiàn)場情況等設(shè)置預(yù)警值,避免儀器出現(xiàn)誤報(bào),給附近居民帶來不便。
依據(jù)四川省自然資源廳績效考評管理辦法,經(jīng)相關(guān)單位調(diào)研、專家論證,研究小組建立了專業(yè)監(jiān)測預(yù)警項(xiàng)目供應(yīng)商綜合績效評價(jià)模型(見圖1)。評價(jià)模型分為3層,目標(biāo)層即供應(yīng)商綜合績效;準(zhǔn)則層即績效評價(jià)要素集,包括過程考核、結(jié)果考核;指標(biāo)層即績效評價(jià)要素,包括互聯(lián)互通等10項(xiàng)指標(biāo)。
圖1 專業(yè)監(jiān)測預(yù)警項(xiàng)目供應(yīng)商績效評價(jià)層次分析模型圖
考察準(zhǔn)則層各影響要素和指標(biāo)層各觀測指標(biāo)對目標(biāo)層的影響程度,用成對比較法和 1~9 比較尺度構(gòu)造成對比較陣。比較尺度主要分為1~9共9個標(biāo)度。其中1、3、5、7、9分別代表兩個要素相比較,具有相同重要性、前者比后者稍重要、前者比后者明顯重要、前者比后者強(qiáng)烈重要、前者比后者極端重要;2、4、6、8分別代表上述含義中的中間值。
通過Matlab計(jì)算出最大特征值和一致性指標(biāo),檢驗(yàn)一致性,獲得各層權(quán)向量,從而確定各指標(biāo)層間權(quán)重及權(quán)值(見表1)。
研究小組應(yīng)用構(gòu)建的層次分析法評價(jià)模型,在四川省S縣進(jìn)行實(shí)證檢驗(yàn),結(jié)合四川省自然資源主管部門對績效評價(jià)的可操作性和簡易性需求,采用評判等級和分值范圍對應(yīng),實(shí)施評價(jià)。
在實(shí)例中,四川省自然資源主管部門按照表1中的二級指標(biāo)權(quán)值進(jìn)行分項(xiàng)評分,計(jì)算出總分,根據(jù)分值范圍得出評價(jià)等級,等級設(shè)置為優(yōu)秀、合格、不合格,分別對應(yīng)的分值范圍為80~100分、60~80分和60分以下。在項(xiàng)目招投標(biāo)文件中明確考核周期采用績效評價(jià)和付款相掛鉤的模式按年度計(jì)算。經(jīng)四川自然資源主管部門考評后,供應(yīng)商得分在80(含)分以上的,支付當(dāng)年度100%的服務(wù)費(fèi);得分在60(含)~80(不含)分的,只支付當(dāng)年度95%的服務(wù)費(fèi);得分在60(不含)分以下的,只支付當(dāng)年度90%的服務(wù)費(fèi)并要求供應(yīng)商提供整改報(bào)告,如整改后仍不合格,則按違約處理。
表1 各指標(biāo)層間權(quán)重及權(quán)值表
通過在四川省S縣的實(shí)踐,績效評價(jià)結(jié)果與實(shí)際情況一致(如表2所示)。從評價(jià)結(jié)果來看,S縣供應(yīng)商在設(shè)備在線率、互通互聯(lián)、運(yùn)行維護(hù)方面還存在不足,四川省自然資源主管部門根據(jù)績效評價(jià)辦法撥付其95%的年度服務(wù)費(fèi),以督促供應(yīng)商改進(jìn)服務(wù),該供應(yīng)商后期作出了相應(yīng)改進(jìn),提高了供應(yīng)商的服務(wù)效率和水平。
表2 四川省S 縣供應(yīng)商績效評價(jià)得分表
(1)堅(jiān)持過程考核和結(jié)果考核并重的原則,對項(xiàng)目全過程績效評價(jià)。對供應(yīng)商績效評價(jià)指標(biāo)選取時,既要重視過程指標(biāo)也要重視結(jié)果指標(biāo);從四川省S縣的實(shí)例來看,構(gòu)建了全過程績效評價(jià)指標(biāo)體系,既考慮到過程指標(biāo),如:運(yùn)行維護(hù)、儀器故障率等,也考慮到了結(jié)果指標(biāo),如:設(shè)備在線率、互聯(lián)互通等,各級自然資源主管部門堅(jiān)持對供應(yīng)商在項(xiàng)目全生命周期的行為進(jìn)行考評,確保了供應(yīng)商在監(jiān)測預(yù)警項(xiàng)目全過程中發(fā)揮技術(shù)與服務(wù)支撐作用。
(2)堅(jiān)持全面和重點(diǎn)相結(jié)合,注重指標(biāo)選取的科學(xué)性、全面性。采用多項(xiàng)指標(biāo)績效評價(jià),促進(jìn)績效評價(jià)全面、客觀。重點(diǎn)突出設(shè)備在線率、應(yīng)急響應(yīng)、運(yùn)行維護(hù)、互聯(lián)互通、預(yù)警值設(shè)置等指標(biāo)的權(quán)重;廣泛征求供應(yīng)商、主管部門及專家的意見,盡最大可能降低主觀因素對績效評價(jià)指標(biāo)的影響,以反映供應(yīng)商的真實(shí)水平。
(3)建立績效評價(jià)長效機(jī)制,將績效評價(jià)納入供應(yīng)商撥付服務(wù)費(fèi)款的依據(jù)。從四川省S縣的實(shí)例來看,將績效評價(jià)和付款相掛鉤,也就是將績效評價(jià)結(jié)果作為撥付款的依據(jù),可以倒逼供應(yīng)商提升服務(wù)質(zhì)量,確保項(xiàng)目取得防災(zāi)、減災(zāi)的預(yù)期效果。
(4)建立績效評價(jià)監(jiān)督機(jī)制,保證績效評價(jià)反映真實(shí)情況,保障績效評價(jià)工作的客觀性和公平性。制定績效評價(jià)監(jiān)督制度,成立績效評價(jià)監(jiān)督小組,規(guī)范績效評價(jià)流程,切實(shí)解決績效評價(jià)主觀性強(qiáng)、流于形式等問題。
(5)實(shí)施績效評價(jià)模型動態(tài)調(diào)整機(jī)制。地質(zhì)災(zāi)害監(jiān)測預(yù)警項(xiàng)目是動態(tài)的,項(xiàng)目周期長、涉及內(nèi)容多、控制因素多、復(fù)雜性強(qiáng),因此績效評價(jià)模型指標(biāo)和權(quán)重要根據(jù)實(shí)際情況動態(tài)調(diào)整。自然資源主管部門要積極收集績效評價(jià)相關(guān)問題及建議,檢查績效評價(jià)結(jié)果和供應(yīng)商實(shí)施情況是否相符,組織專家對績效評價(jià)模型進(jìn)行優(yōu)化調(diào)整。