楊蓮芬、唐韻
(1浙江工業(yè)大學(xué)之江學(xué)院、2浙江工業(yè)大學(xué)經(jīng)貿(mào)學(xué)院,浙江 杭州 310024)
浙江省高??蒲许?xiàng)目績(jī)效評(píng)價(jià)指標(biāo)體系研究1
楊蓮芬1、唐韻2
(1浙江工業(yè)大學(xué)之江學(xué)院、2浙江工業(yè)大學(xué)經(jīng)貿(mào)學(xué)院,浙江 杭州 310024)
根據(jù)科研項(xiàng)目績(jī)效評(píng)價(jià)的四大原則,建立了浙江省高??蒲许?xiàng)目績(jī)效評(píng)價(jià)指標(biāo)體系,并應(yīng)用層次分析法(AHP)對(duì)指標(biāo)體系進(jìn)行主觀賦權(quán),采用曲線參數(shù)標(biāo)定法確定指標(biāo)隸屬度,進(jìn)而采用熵權(quán)法確定各指標(biāo)客觀權(quán)重,最終計(jì)算組合權(quán)重。該體系為評(píng)價(jià)高校科研項(xiàng)目提供了方法和途徑,但樣本需要進(jìn)一步擴(kuò)大與完善、評(píng)價(jià)方法的實(shí)際應(yīng)用有待進(jìn)一步驗(yàn)證。
高校科研項(xiàng)目;隸屬度;AHP;熵權(quán)法
在科學(xué)技術(shù)迅猛發(fā)展的形勢(shì)下,如何建立行之有效的科研項(xiàng)目績(jī)效評(píng)價(jià)體系,已成亟待研究的熱點(diǎn)課題。
本文重點(diǎn)研究績(jī)效評(píng)價(jià)體系各指標(biāo)的計(jì)算值與評(píng)價(jià)值之間的轉(zhuǎn)換、主客觀權(quán)重以及組合權(quán)重的計(jì)算,并為后續(xù)研究提供理論支持。根據(jù)科研項(xiàng)目績(jī)效評(píng)價(jià)的時(shí)限性、可衡量性、可獲取性和特定性四大原則,文中的評(píng)價(jià)體系設(shè)有項(xiàng)目執(zhí)行情況、項(xiàng)目人員情況等7個(gè)一級(jí)指標(biāo)和21項(xiàng)二級(jí)指標(biāo)。2各層級(jí)指標(biāo)的具體內(nèi)容詳見(jiàn)表1指標(biāo)層相關(guān)內(nèi)容。
(一)AHP層次分析法確定指標(biāo)主觀權(quán)重
1.建立兩兩比較判斷矩陣
對(duì)指標(biāo)體系自上而下將各層因素相對(duì)上一層因素的重要性,采用Satty提出的1-9比率標(biāo)度法構(gòu)造兩兩比較的判斷矩陣。假設(shè)一級(jí)指標(biāo)層E中的指標(biāo)Ek與二級(jí)指標(biāo)層F中各元素F1,F(xiàn)2,F(xiàn)3…Fn有重要性的關(guān)聯(lián),則構(gòu)造F層元素相互間兩兩比較的判斷矩陣。fij表示對(duì)于Ek而言Fi對(duì)于Fj的相對(duì)重要性,通常fij取1-9以及他們的倒數(shù),標(biāo)度的含義:1為Fi比Fj同樣重要;3為Fi比Fj稍重要;5為Fi比Fj重要;7為Fi比Fj強(qiáng)烈重要;9為Fi比Fj極端重要;2、4、6、8表示Fi比Fj的影響介于上述兩個(gè)相鄰等級(jí)之間;1/2,1/3,…,1/9表示Fi比Fj的影響為上述各標(biāo)度互反數(shù)。
2.計(jì)算權(quán)重
對(duì)通過(guò)一致性檢驗(yàn)的目標(biāo)數(shù)據(jù)計(jì)算判斷矩陣的每一行乘積,假設(shè)W為本層次單排序過(guò)程中各因素的權(quán)重,則計(jì)算步驟如下:,再計(jì)算,然后對(duì)向量歸一化,即,對(duì)于多級(jí)指標(biāo)的AHP組合權(quán)重,最低層次的指標(biāo)權(quán)重為各對(duì)應(yīng)層指標(biāo)權(quán)重相乘之積。
3.AHP主觀權(quán)重
邀請(qǐng)領(lǐng)域?qū)<覍?duì)各標(biāo)度進(jìn)行客觀打分。本研究邀請(qǐng)了來(lái)自浙江大學(xué)、天津大學(xué)、上海交大、華中科技大學(xué)、華北電力大學(xué)、河海大學(xué)、浙江工業(yè)大學(xué)等省內(nèi)外知名高校的教授學(xué)者以及科技部門(mén)的領(lǐng)域?qū)<?,回收?zhuān)家打分問(wèn)卷調(diào)查74份,通過(guò)AHP一致性檢驗(yàn)的有49份,通過(guò)率為76.56%,其中人文社科類(lèi)專(zhuān)家打分調(diào)查表為22份,自然科學(xué)類(lèi)專(zhuān)家打分調(diào)查表為27份。AHP層次分析法確定的指標(biāo)權(quán)重如表1。
表1 主觀權(quán)重
(二)熵值法確定指標(biāo)客觀權(quán)重
1.熵權(quán)法的原理
熵權(quán)理論認(rèn)為,對(duì)于某一指標(biāo)的樣本觀測(cè)值,數(shù)據(jù)差別越大則該指標(biāo)對(duì)系統(tǒng)的比較作用就越大,即該項(xiàng)指標(biāo)包含和傳遞的信息越多,賦予較高的權(quán)重。
2.指標(biāo)隸屬度的確定-曲線參數(shù)標(biāo)定法
熵權(quán)法需要對(duì)部分指標(biāo)數(shù)據(jù)處理為評(píng)價(jià)數(shù)據(jù)。浙江省高??蒲许?xiàng)目績(jī)效評(píng)價(jià)指標(biāo)的計(jì)算采用兩種方法:第一,通過(guò)鑒定標(biāo)準(zhǔn)評(píng)定打分獲得二級(jí)指標(biāo)的評(píng)價(jià)值,包括項(xiàng)目進(jìn)展情況、項(xiàng)目主要技術(shù)經(jīng)濟(jì)指標(biāo)完成情況等12個(gè)二級(jí)指標(biāo);第二,通過(guò)統(tǒng)計(jì)指標(biāo)的加權(quán)求和獲得二級(jí)指標(biāo)的計(jì)算值,包括參研人員學(xué)歷、論文著作等9項(xiàng)二級(jí)指標(biāo)。2Lian-fen YANG,Yun TANG. Performance Evaluation of Scientific Research Program in Zhejiang Colleges Based on Uncertainty Analysis. The Springer book series on “Computational Risk Management”. ISSN: 2191-1436。采用第一種方法時(shí),評(píng)價(jià)指標(biāo)的評(píng)價(jià)值直接參與指標(biāo)加權(quán)求和計(jì)算;而采用第二種方法,所得的計(jì)算值不僅量綱不同,值域也不同,需要通過(guò)對(duì)這9項(xiàng)指標(biāo)進(jìn)行隸屬度的設(shè)計(jì)將指標(biāo)的計(jì)算值轉(zhuǎn)化為指標(biāo)評(píng)價(jià)值。
采用曲線參數(shù)標(biāo)定法對(duì)指標(biāo)隸屬度進(jìn)行確定。首先需要確定一條曲線,該曲線必須滿足:(1)單調(diào)性。(2)收斂性。隸屬度曲線的值域應(yīng) [0-10],當(dāng)曲線的自變量(計(jì)算值)趨于無(wú)窮大時(shí),因變量(指標(biāo)評(píng)價(jià)值)趨近于10;自變量趨于0,因變量也趨近于0;(3)待定系數(shù)應(yīng)盡量少,便于參數(shù)的標(biāo)定?;谶@三點(diǎn)的考慮,該指標(biāo)的隸屬度曲線選擇了形如的曲線。并將(,5)定義為指標(biāo)i的計(jì)算值的均值相當(dāng)于評(píng)價(jià)指標(biāo)隸屬度的中間值,由此可以確定待定系數(shù)A的值。
3.熵權(quán)法客觀賦權(quán)的步驟
設(shè)ej為第j個(gè)評(píng)價(jià)指標(biāo)的熵值,根據(jù)熵值的計(jì)算公式,其中為第j個(gè)指標(biāo)在第i個(gè)系統(tǒng)中的特征比重,xij為第i各系統(tǒng)中第j項(xiàng)指標(biāo)的觀測(cè)數(shù)據(jù)為第j項(xiàng)指標(biāo)的所有系統(tǒng)觀測(cè)數(shù)據(jù)之和。設(shè)為第j個(gè)評(píng)價(jià)指標(biāo)的熵權(quán),根據(jù)熵權(quán)計(jì)算公式由此計(jì)算的熵權(quán)即該指標(biāo)的權(quán)重。
4.熵權(quán)確定的客觀權(quán)重
回收省內(nèi)外高??蒲许?xiàng)目評(píng)價(jià)問(wèn)卷79份,獲得客觀的項(xiàng)目評(píng)價(jià)數(shù)據(jù)作為確定客觀權(quán)重的樣本。其中浙江省211院校浙江大學(xué)5份,省外211院校14份。浙江工業(yè)大學(xué)、寧波理工大學(xué)、浙江外國(guó)語(yǔ)學(xué)院、省委黨校等省內(nèi)一般院校60份。按學(xué)科分自然科學(xué)類(lèi)項(xiàng)目評(píng)價(jià)問(wèn)卷38份,人文社科41份。按上述計(jì)算步驟及方法,對(duì)各個(gè)指標(biāo)客觀賦權(quán)。熵值法確定的評(píng)價(jià)指標(biāo)權(quán)重如表2所示。
(三)基于組合賦權(quán)的高??蒲许?xiàng)目績(jī)效評(píng)價(jià)模型的建立
設(shè)w為組合權(quán)重,w**為AHP確定的指標(biāo)權(quán)重,w*為熵權(quán)法確定的權(quán)重,建立三者的線性組合,設(shè)主觀偏好系數(shù)權(quán)重占組合權(quán)重比例為線性組合為(1),以兩者偏差平方和最小建立函數(shù)。將(1)式代人函數(shù),解得=0.5,該值不失一般性。因此,各指標(biāo)的組合權(quán)重分別為,則組合權(quán)重如下表3所示,由此,建立了浙江省高??蒲许?xiàng)目績(jī)效評(píng)價(jià)指標(biāo)體系。
(四)實(shí)證結(jié)果的具體應(yīng)用
考慮到浙江省各高?;A(chǔ)實(shí)力、承擔(dān)科研項(xiàng)目的能力和研究側(cè)重點(diǎn)各有不同,因此將浙江省高校分為211重點(diǎn)院校與一般院校進(jìn)行研究。此外,自然科學(xué)類(lèi)科研項(xiàng)目和人文社科類(lèi)項(xiàng)目在績(jī)效評(píng)價(jià)上也各有側(cè)重,本研究也對(duì)不同的學(xué)科類(lèi)型進(jìn)行分類(lèi)研究。例如,從各指標(biāo)間的橫向比較看,省內(nèi)人文社科類(lèi)的科研項(xiàng)目在直接經(jīng)濟(jì)效益賦予的權(quán)重為0,而自然科學(xué)類(lèi)則為0.153718,兩者懸殊較大。項(xiàng)目產(chǎn)出成果、間接社會(huì)影響、人才培養(yǎng)在不同的學(xué)科間賦予權(quán)重的差別不明顯,且都被賦予了較高的權(quán)重。
從構(gòu)建的指標(biāo)體系來(lái)看:第一,浙江省一般院校自然科學(xué)類(lèi)科研項(xiàng)目指標(biāo)按重要性程度依次是:項(xiàng)目產(chǎn)出成果、人才培養(yǎng)、直接經(jīng)濟(jì)效益、項(xiàng)目執(zhí)行情況、項(xiàng)目人員情況、項(xiàng)目經(jīng)費(fèi)情況、間接社會(huì)影響;第二,浙江省一般院校人文社科類(lèi)科研項(xiàng)目指標(biāo)按重要性程度依次是:間接社會(huì)影響、人才培養(yǎng)、項(xiàng)目產(chǎn)出成果、項(xiàng)目執(zhí)行情況、項(xiàng)目經(jīng)費(fèi)情況、項(xiàng)目人員情況、直接經(jīng)濟(jì)效益;第三,浙江省211院校自然科學(xué)類(lèi)科研項(xiàng)目按指標(biāo)重要性程度依次是:間接社會(huì)影響、人才培養(yǎng)、項(xiàng)目產(chǎn)出成果、項(xiàng)目人員情況、項(xiàng)目執(zhí)行情況、直接經(jīng)濟(jì)效益、項(xiàng)目經(jīng)費(fèi)情況。
表2 客觀權(quán)重
表3 組合權(quán)重
(一)樣本需要進(jìn)一步擴(kuò)大與完善
從已收集到的樣本數(shù)據(jù)結(jié)構(gòu)來(lái)看,浙江省211重點(diǎn)院校自然科學(xué)類(lèi)和人文社科類(lèi)的數(shù)據(jù)樣本較一般院校明顯偏少,使績(jī)效評(píng)價(jià)體系缺乏全面性。而作為省外參照組的省外211重點(diǎn)院校,也缺乏自然科學(xué)類(lèi)科研項(xiàng)目的相關(guān)數(shù)據(jù),給評(píng)價(jià)帶來(lái)一定的難度。因此,在已收集數(shù)據(jù)的基礎(chǔ)上,應(yīng)進(jìn)一步分發(fā)回收省內(nèi)外各院校各學(xué)科的科研項(xiàng)目問(wèn)卷,特別需要收集浙江省211院校與省外211院校的相關(guān)數(shù)據(jù),進(jìn)一步擴(kuò)大本研究的樣本容量,完善科研項(xiàng)目績(jī)效評(píng)價(jià)體系。
(二)評(píng)價(jià)方法的實(shí)際應(yīng)用有待進(jìn)一步驗(yàn)證
基于AHP層次分析法和熵值法相結(jié)合的賦權(quán)法,既尊重領(lǐng)域?qū)<医o予的意見(jiàn),又站在客觀數(shù)據(jù)的角度給出各指標(biāo)的權(quán)重。該指標(biāo)體系的組合權(quán)重是進(jìn)一步研究的基礎(chǔ),在后續(xù)的研究中可得出相應(yīng)的分值。浙江省高??蒲许?xiàng)目績(jī)效評(píng)價(jià)體系是一個(gè)動(dòng)態(tài)的體系,對(duì)不同地區(qū)、不同類(lèi)型的高校、不同學(xué)科的科研項(xiàng)目進(jìn)行績(jī)效評(píng)價(jià),驗(yàn)證該體系的可行性,并為提高科研項(xiàng)目的效益與效率提供理論依據(jù)。
10.3969/j.issn.1674-8905.2011.03.007
注:1本文是浙江省科技廳軟科學(xué)項(xiàng)目“基于績(jī)效評(píng)價(jià)的浙江高??蒲许?xiàng)目資助模式研究(2009C25018)”研究成果。
(責(zé)任編輯:張巧燕)