應對社會安全事件績效評估方法魯棒性分析的參數(shù)與指標研究

【摘要】績效評估方法的魯棒性是指模型內部參數(shù)或環(huán)境參數(shù)發(fā)生變化時，運用績效評估方法使得政府應對社會安全事件績效評估的結果能夠保持相對穩(wěn)定的能力。本文基于相關理論，深入剖析地方政府應對行為績效評估方法魯棒性分析的參數(shù)內涵，并討論參數(shù)的變化規(guī)律，采用Kendall和諧系數(shù)作為績效評估方法魯棒性分析的度量指標，為提高地方政府應對社會安全事件績效評估方法的魯棒性提供方法依據(jù)。

【關鍵詞】績效評估方法? 魯棒性? 社會安全事件

一、引言

選擇科學的方法評價政府應對社會安全事件的績效既是重要的理論和現(xiàn)實問題，地方政府應對社會安全事件績效評估方法的魯棒性是指應對行為績效評估系統(tǒng)內部或環(huán)境參數(shù)發(fā)生變化時，運用某種績效評估方法對若干個同一層級地方政府應對行為的績效水平進行排序時，績效評估的結果能夠保持相對穩(wěn)定可靠的能力。

國內外對魯棒性的分析研究主要集中在控制理論方面，將其應用于綜合評價方面的研究還比較缺乏，毫無疑問提升績效評估方法的魯棒性是應對不確定因素影響的重要手段之一，現(xiàn)有研究大多都是針對環(huán)境參數(shù)、模型參數(shù)或模型偏好結構，較少研究決策方案或系統(tǒng)結構對結果魯棒性的影響導致評價模型魯棒性度量結果不準確。然而在不確定性和危機出現(xiàn)的情況下，地方政府應對社會安全實踐評估方法的魯棒性已經(jīng)成為績效評估系統(tǒng)能否正常運行的關鍵，評估方法在運行過程中受環(huán)境因素的影響，績效評估要容許在實際控制中會出現(xiàn)能夠承受的偏差，因此評估方法必須是魯棒的。本文討論方法魯棒性的參數(shù)控制與指標設置，能夠為績效評估方法的魯棒性分析提供方法依據(jù)。

二、應對社會安全事件績效評估方法魯棒性分析的參數(shù)

2.1參數(shù)類型

2.1.1方法的內部參數(shù)

績效評估方法的內部參數(shù)指績效指標信息數(shù)據(jù)處理方式，是指政府應對行為績效評估指標體系指標原始數(shù)據(jù)處理的各種方法。績效評估指標體系是由多個相互聯(lián)系指標組成的復雜多維系統(tǒng)，涵蓋地方政府應對行為的綜合職能，全面衡量績效水平。應對行為績效指標信息處理是對績效評估指標的信息加以匯集整理，從整體上認識評價對象的優(yōu)劣狀況?？冃гu估指標中由于各指標的內涵和信息形式各異，需要將其轉化為統(tǒng)一的數(shù)據(jù)形式，進行無量綱化方法處理，顯示了評估者對每個指標原值變動與評價信息量之間函數(shù)關系形式。

針對同一個應對社會安全事件行為績效評估問題，一個績效評估方法在不同無量綱化方法，其評估結果的排序可能非一致。那么在指標信息無量綱化處理方式變化的情況下，可對不同績效評估方法進行魯棒性分析，判定針對同一問題魯棒性強的績效評估方法。如果采用某種績效評估方法對政府行為績效水平進行評價時，當改變評估指標的數(shù)據(jù)信息時，如果評估結果的變化不大，則表明該種方法的魯棒性強;如果評估結果變化很大，則表明該種方法的魯棒性差。

2.1.2方法的環(huán)境參數(shù)

環(huán)境參數(shù)主要指應對社會安全事件績效評估的客體數(shù)量。地方政府應對社會安全事件績效評估是對參與政府管理活動的效果及社會影響進行全面和客觀評價，并劃分績效等級的過程。績效評估的客體主要指負責應對社會安全事件的市級政府、縣級政府以及鄉(xiāng)級政府三個層次。各級政府依據(jù)法律法規(guī)，結合本轄區(qū)內的實際情況，承擔有效預防和妥善安全事件的職責，各層級地方政府的數(shù)量存在差異。

在應對社會安全事件績效評估的實踐活動中，績效評估的評估客體數(shù)量并不是固定不變的，在不同的評估目標和要求下，評估客體的數(shù)量各不相同。在一定的績效評估指標下，采用一種績效評估方法，如果被評估對象數(shù)量變化，而評估結果的排序有很大差異且對數(shù)量變化敏感，則說明此種績效評估方法的魯棒性較差;如果評估結果的排序對被評估對象數(shù)量變化不敏感，即被評估對象數(shù)量的變化對評估結果有很大影響，則此種績效評估方法魯棒性較好。

2.2參數(shù)控制

2.2.1應對社會安全事件績效評估指標的無量綱化方法變化

績效評估的指標性質和數(shù)據(jù)形式各異，不同的原始績效數(shù)據(jù)無量綱化處理方法是績效評估方法的內部參數(shù)，從改變指標無量綱化方法角度，分析績效評估方法的魯棒性。為了消除數(shù)據(jù)量綱對評價結果的影響，對類型一致的評價指標進行無量綱化處理，一般有五種方法：

2.2.2 應對社會安全事件績效評估客體的數(shù)量變化

應對社會安全事件績效評估客體的數(shù)量屬于績效評估方法的環(huán)境參數(shù)，從改變客體的數(shù)量的角度，分析績效評估方法魯棒性。

假設要對n個評估對象的應對行為績效進行評價，從少到多改變被評估對象的數(shù)量，設一個基準評估對象數(shù)量n0，該評估對象數(shù)量為績效評估對象的最低值，從n0開始逐個增加評估對象的數(shù)量直到n，可得（n- n0+1）種評估對象樣本量，然后運用績效評估方法對（n- n0+1）種情況進行評估，可得第 i個評估對象在j個評估對象數(shù)量下的排名為pij，（? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?）。這里通過從少到多的逐個增加被評估對象的樣本數(shù)量，采用多種績效評估方法對評價結果排序，觀察被評估對象的數(shù)量變化對評估排序的差異影響大小，據(jù)此可以對若干績效評估方法的魯棒性進行分析比較。

當選擇某一種績效評估方法對應對社會安全事件績效進行評價時，如果被評估對象數(shù)量變化，而評估結果的排序有很大差異，則此種績效評估方法的魯棒性較差;如果被評估對象數(shù)量的變化對評估結果排序有很大影響，則此種績效評估方法魯棒性較好。

三、應對社會安全事件績效評估方法魯棒性分析的度量指標

3.1 度量指標的含義

績效評價方法魯棒性的度量指標一般有最優(yōu)方案一致率、方案排序匹配率、均方差、平均絕對差以及Kendall和諧系數(shù)。綜合評價的目的就是要找到一個合理排序或最佳排序，本文選擇Kendall和諧系數(shù)來分析應對社會安全事件績效評估方法的魯棒性。Kendall和諧系數(shù)是用于度量多種績效評估方法評價結果排序的密切程度，或者稱之為一致性、相關性。采用Kendall系數(shù)計算排序結果之間的一致性或相關性程度，通過觀測Kendall系數(shù)的變化情況來分析績效評估方法的魯棒性問題。

3.2 度量指標的計算

Kendall和諧系數(shù)的計算步驟如下：

（1）設多種績效評估方法所得評價結果為一個排序矩陣

四、小結

本文深入討論了地方政府應對社會安全事件績效評估方法魯棒性評價中的參數(shù)設置與指標分析，根據(jù)績效評估參數(shù)的變化，觀測評估指標的大小，并以此來判斷綜合評價方法的魯棒性。如果某績效評估方法的Kendall和諧系數(shù)越大，表示改變模型內部參數(shù)無量綱化方法對該績效評估方法的結果影響越小，那么這種績效評估方法在各種無量綱化方法下的評估結果排序沒有太大差異，這種方法的魯棒性強;反之，Kendall和諧系數(shù)越小，評估排序結果差異大，則該評估方法的魯棒性差。

參考文獻：

[1]P.Vincke. Robust solutions and methods in??decision-aid[J].Journal of Multi-Criteria Decision?Analysis，2015，8（3）：181-187.

[2]R. Hites，Y.D.Smet，N.Risse，M.Salazar-Neumann，?P.Vincke. About the application of MCDA to somerobustness problems[J].European Journal of?Operational Research，2006，174（1）：322-332.

[3]孫世巖，邱志明，張雄飛.多屬性決策魯棒性評價的仿真方法研究[J].武漢理工大學學報（信息與管理工程版），2006，28（12）：58-61.

[4]張立軍，陶璐.多指標綜合評價模型魯棒性度量方法研究[J].統(tǒng)計與信息論壇，2011，26（5）：16-20.

課題項目：湖北省教育廳科學技術研究計劃指導性項目《地方政府應對社會安全事件績效評估方法的魯棒性研究》（B2017283） 階段性成果。

作者簡介：賈晶，女，1983.11，武漢商學院副教授，博士。研究方向：土地管理，房地產(chǎn)管理。