【摘要】績效評估方法的魯棒性是指模型內(nèi)部參數(shù)或環(huán)境參數(shù)發(fā)生變化時,運用績效評估方法使得政府應(yīng)對社會安全事件績效評估的結(jié)果能夠保持相對穩(wěn)定的能力。本文基于相關(guān)理論,深入剖析地方政府應(yīng)對行為績效評估方法魯棒性分析的參數(shù)內(nèi)涵,并討論參數(shù)的變化規(guī)律,采用Kendall和諧系數(shù)作為績效評估方法魯棒性分析的度量指標(biāo),為提高地方政府應(yīng)對社會安全事件績效評估方法的魯棒性提供方法依據(jù)。
【關(guān)鍵詞】績效評估方法? 魯棒性? 社會安全事件
一、引言
選擇科學(xué)的方法評價政府應(yīng)對社會安全事件的績效既是重要的理論和現(xiàn)實問題,地方政府應(yīng)對社會安全事件績效評估方法的魯棒性是指應(yīng)對行為績效評估系統(tǒng)內(nèi)部或環(huán)境參數(shù)發(fā)生變化時,運用某種績效評估方法對若干個同一層級地方政府應(yīng)對行為的績效水平進(jìn)行排序時,績效評估的結(jié)果能夠保持相對穩(wěn)定可靠的能力。
國內(nèi)外對魯棒性的分析研究主要集中在控制理論方面,將其應(yīng)用于綜合評價方面的研究還比較缺乏,毫無疑問提升績效評估方法的魯棒性是應(yīng)對不確定因素影響的重要手段之一,現(xiàn)有研究大多都是針對環(huán)境參數(shù)、模型參數(shù)或模型偏好結(jié)構(gòu),較少研究決策方案或系統(tǒng)結(jié)構(gòu)對結(jié)果魯棒性的影響導(dǎo)致評價模型魯棒性度量結(jié)果不準(zhǔn)確。然而在不確定性和危機(jī)出現(xiàn)的情況下,地方政府應(yīng)對社會安全實踐評估方法的魯棒性已經(jīng)成為績效評估系統(tǒng)能否正常運行的關(guān)鍵,評估方法在運行過程中受環(huán)境因素的影響,績效評估要容許在實際控制中會出現(xiàn)能夠承受的偏差,因此評估方法必須是魯棒的。本文討論方法魯棒性的參數(shù)控制與指標(biāo)設(shè)置,能夠為績效評估方法的魯棒性分析提供方法依據(jù)。
二、應(yīng)對社會安全事件績效評估方法魯棒性分析的參數(shù)
2.1參數(shù)類型
2.1.1方法的內(nèi)部參數(shù)
績效評估方法的內(nèi)部參數(shù)指績效指標(biāo)信息數(shù)據(jù)處理方式,是指政府應(yīng)對行為績效評估指標(biāo)體系指標(biāo)原始數(shù)據(jù)處理的各種方法??冃гu估指標(biāo)體系是由多個相互聯(lián)系指標(biāo)組成的復(fù)雜多維系統(tǒng),涵蓋地方政府應(yīng)對行為的綜合職能,全面衡量績效水平。應(yīng)對行為績效指標(biāo)信息處理是對績效評估指標(biāo)的信息加以匯集整理,從整體上認(rèn)識評價對象的優(yōu)劣狀況??冃гu估指標(biāo)中由于各指標(biāo)的內(nèi)涵和信息形式各異,需要將其轉(zhuǎn)化為統(tǒng)一的數(shù)據(jù)形式,進(jìn)行無量綱化方法處理,顯示了評估者對每個指標(biāo)原值變動與評價信息量之間函數(shù)關(guān)系形式。
針對同一個應(yīng)對社會安全事件行為績效評估問題,一個績效評估方法在不同無量綱化方法,其評估結(jié)果的排序可能非一致。那么在指標(biāo)信息無量綱化處理方式變化的情況下,可對不同績效評估方法進(jìn)行魯棒性分析,判定針對同一問題魯棒性強(qiáng)的績效評估方法。如果采用某種績效評估方法對政府行為績效水平進(jìn)行評價時,當(dāng)改變評估指標(biāo)的數(shù)據(jù)信息時,如果評估結(jié)果的變化不大,則表明該種方法的魯棒性強(qiáng);如果評估結(jié)果變化很大,則表明該種方法的魯棒性差。
2.1.2方法的環(huán)境參數(shù)
環(huán)境參數(shù)主要指應(yīng)對社會安全事件績效評估的客體數(shù)量。地方政府應(yīng)對社會安全事件績效評估是對參與政府管理活動的效果及社會影響進(jìn)行全面和客觀評價,并劃分績效等級的過程??冃гu估的客體主要指負(fù)責(zé)應(yīng)對社會安全事件的市級政府、縣級政府以及鄉(xiāng)級政府三個層次。各級政府依據(jù)法律法規(guī),結(jié)合本轄區(qū)內(nèi)的實際情況,承擔(dān)有效預(yù)防和妥善安全事件的職責(zé),各層級地方政府的數(shù)量存在差異。
在應(yīng)對社會安全事件績效評估的實踐活動中,績效評估的評估客體數(shù)量并不是固定不變的,在不同的評估目標(biāo)和要求下,評估客體的數(shù)量各不相同。在一定的績效評估指標(biāo)下,采用一種績效評估方法,如果被評估對象數(shù)量變化,而評估結(jié)果的排序有很大差異且對數(shù)量變化敏感,則說明此種績效評估方法的魯棒性較差;如果評估結(jié)果的排序?qū)Ρ辉u估對象數(shù)量變化不敏感,即被評估對象數(shù)量的變化對評估結(jié)果有很大影響,則此種績效評估方法魯棒性較好。
2.2參數(shù)控制
2.2.1應(yīng)對社會安全事件績效評估指標(biāo)的無量綱化方法變化
績效評估的指標(biāo)性質(zhì)和數(shù)據(jù)形式各異,不同的原始績效數(shù)據(jù)無量綱化處理方法是績效評估方法的內(nèi)部參數(shù),從改變指標(biāo)無量綱化方法角度,分析績效評估方法的魯棒性。為了消除數(shù)據(jù)量綱對評價結(jié)果的影響,對類型一致的評價指標(biāo)進(jìn)行無量綱化處理,一般有五種方法:
2.2.2 應(yīng)對社會安全事件績效評估客體的數(shù)量變化
應(yīng)對社會安全事件績效評估客體的數(shù)量屬于績效評估方法的環(huán)境參數(shù),從改變客體的數(shù)量的角度,分析績效評估方法魯棒性。
假設(shè)要對n個評估對象的應(yīng)對行為績效進(jìn)行評價,從少到多改變被評估對象的數(shù)量,設(shè)一個基準(zhǔn)評估對象數(shù)量n0,該評估對象數(shù)量為績效評估對象的最低值,從n0開始逐個增加評估對象的數(shù)量直到n,可得(n- n0+1)種評估對象樣本量,然后運用績效評估方法對(n- n0+1)種情況進(jìn)行評估,可得第 i個評估對象在j個評估對象數(shù)量下的排名為pij,(? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?)。這里通過從少到多的逐個增加被評估對象的樣本數(shù)量,采用多種績效評估方法對評價結(jié)果排序,觀察被評估對象的數(shù)量變化對評估排序的差異影響大小,據(jù)此可以對若干績效評估方法的魯棒性進(jìn)行分析比較。
當(dāng)選擇某一種績效評估方法對應(yīng)對社會安全事件績效進(jìn)行評價時,如果被評估對象數(shù)量變化,而評估結(jié)果的排序有很大差異,則此種績效評估方法的魯棒性較差;如果被評估對象數(shù)量的變化對評估結(jié)果排序有很大影響,則此種績效評估方法魯棒性較好。
三、應(yīng)對社會安全事件績效評估方法魯棒性分析的度量指標(biāo)
3.1 度量指標(biāo)的含義
績效評價方法魯棒性的度量指標(biāo)一般有最優(yōu)方案一致率、方案排序匹配率、均方差、平均絕對差以及Kendall和諧系數(shù)。綜合評價的目的就是要找到一個合理排序或最佳排序,本文選擇Kendall和諧系數(shù)來分析應(yīng)對社會安全事件績效評估方法的魯棒性。Kendall和諧系數(shù)是用于度量多種績效評估方法評價結(jié)果排序的密切程度,或者稱之為一致性、相關(guān)性。采用Kendall系數(shù)計算排序結(jié)果之間的一致性或相關(guān)性程度,通過觀測Kendall系數(shù)的變化情況來分析績效評估方法的魯棒性問題。
3.2 度量指標(biāo)的計算
Kendall和諧系數(shù)的計算步驟如下:
(1)設(shè)多種績效評估方法所得評價結(jié)果為一個排序矩陣
四、小結(jié)
本文深入討論了地方政府應(yīng)對社會安全事件績效評估方法魯棒性評價中的參數(shù)設(shè)置與指標(biāo)分析,根據(jù)績效評估參數(shù)的變化,觀測評估指標(biāo)的大小,并以此來判斷綜合評價方法的魯棒性。如果某績效評估方法的Kendall和諧系數(shù)越大,表示改變模型內(nèi)部參數(shù)無量綱化方法對該績效評估方法的結(jié)果影響越小,那么這種績效評估方法在各種無量綱化方法下的評估結(jié)果排序沒有太大差異,這種方法的魯棒性強(qiáng);反之,Kendall和諧系數(shù)越小,評估排序結(jié)果差異大,則該評估方法的魯棒性差。
參考文獻(xiàn):
[1]P.Vincke. Robust solutions and methods in??decision-aid[J].Journal of Multi-Criteria Decision?Analysis,2015,8(3):181-187.
[2]R. Hites,Y.D.Smet,N.Risse,M.Salazar-Neumann,?P.Vincke. About the application of MCDA to somerobustness problems[J].European Journal of?Operational Research,2006,174(1):322-332.
[3]孫世巖,邱志明,張雄飛.多屬性決策魯棒性評價的仿真方法研究[J].武漢理工大學(xué)學(xué)報(信息與管理工程版),2006,28(12):58-61.
[4]張立軍,陶璐.多指標(biāo)綜合評價模型魯棒性度量方法研究[J].統(tǒng)計與信息論壇,2011,26(5):16-20.
課題項目:湖北省教育廳科學(xué)技術(shù)研究計劃指導(dǎo)性項目《地方政府應(yīng)對社會安全事件績效評估方法的魯棒性研究》(B2017283) 階段性成果。
作者簡介:賈晶,女,1983.11,武漢商學(xué)院副教授,博士。研究方向:土地管理,房地產(chǎn)管理。