基于目標(biāo)預(yù)測(cè)法的高職院?？蒲锌冃гu(píng)價(jià)指標(biāo)體系權(quán)重設(shè)置

趙發(fā)賓

(昆明冶金高等?？茖W(xué)?？萍继?，云南 昆明 650033)

科學(xué)合理的績效評(píng)價(jià)指標(biāo)體系是保證績效評(píng)價(jià)工作有效性的基礎(chǔ)，也是應(yīng)用其評(píng)價(jià)結(jié)果鼓勵(lì)先進(jìn)、督促落后、創(chuàng)造良性競爭環(huán)境的前提。為實(shí)現(xiàn)單位、企業(yè)預(yù)定的中長期目標(biāo)，單位、企業(yè)希望近期在某一領(lǐng)域、某一方面取得突破，決策者通常將評(píng)價(jià)指標(biāo)體系構(gòu)建作為一種完成規(guī)劃、實(shí)現(xiàn)目標(biāo)的手段或舉措?；诟呗氃盒？蒲新氊?zé)、定位與普通本科院校有較大差距和不同的實(shí)際，本文將在研究目標(biāo)預(yù)測(cè)法的基礎(chǔ)上，結(jié)合高職院校實(shí)際，構(gòu)建能科學(xué)、多角度、多維度評(píng)價(jià)二級(jí)部門科研績效的評(píng)價(jià)指標(biāo)體系，并對(duì)相關(guān)單元設(shè)置權(quán)重，以期為決策者開展科研績效的評(píng)價(jià)提供理論依據(jù)和技術(shù)支持。

1 目標(biāo)預(yù)測(cè)法

1.1 目標(biāo)預(yù)測(cè)法簡介

目標(biāo)預(yù)測(cè)法即規(guī)范性預(yù)測(cè)法，由美國霍尼韋爾公司首先開發(fā)并應(yīng)用。其特點(diǎn)是探索如何、何時(shí)實(shí)現(xiàn)某目標(biāo)。核心是將目標(biāo)自上而下逐級(jí)分解，且每級(jí)包括一系列單元，在每一級(jí)、每一個(gè)單元按質(zhì)、按量、按時(shí)完成的基礎(chǔ)上，自下而上實(shí)現(xiàn)總目標(biāo)，可應(yīng)用于宏觀、中觀和微觀問題的探索，也可用于目標(biāo)優(yōu)選，權(quán)重設(shè)置等問題的研究。

1.2 預(yù)測(cè)程序

1)確定準(zhǔn)則與分解單元。體系構(gòu)建方聘請(qǐng)相關(guān)領(lǐng)域的專家組成專家組，對(duì)決策對(duì)象進(jìn)行定性分析；圍繞總目標(biāo)選取評(píng)價(jià)準(zhǔn)則，該步驟即確定準(zhǔn)則；同時(shí)選取實(shí)現(xiàn)總目標(biāo)須包含的相關(guān)單元，即分解單元。

2)確定權(quán)數(shù)。權(quán)數(shù)確定包含準(zhǔn)則權(quán)數(shù)的確定和單元權(quán)數(shù)的確定，即受聘專家根據(jù)自己的知識(shí)、閱歷，對(duì)每一準(zhǔn)則在評(píng)價(jià)總目標(biāo)過程中的作用，同一準(zhǔn)則下各單元相對(duì)其他單元的重要性，分別賦予一定權(quán)數(shù)。在確定權(quán)數(shù)時(shí)，專家組可以直接賦值，也可以通過成對(duì)比較法確定其權(quán)重。因成對(duì)比較法更科學(xué)、合理，所以本文重點(diǎn)介紹成對(duì)比較法。成對(duì)比較法，就是專家根據(jù)每一準(zhǔn)則對(duì)總目標(biāo)的重要性，或同一準(zhǔn)則下某一單元對(duì)其他單元的重要性成對(duì)比較，重要的賦1分，不重要的賦0分，逐一比較，最終完成成對(duì)比較矩陣表的構(gòu)建。以成對(duì)比較矩陣表中的比較得分為基礎(chǔ)，對(duì)各準(zhǔn)則的重要性排序，以最不重要的準(zhǔn)則為基準(zhǔn)，借助受聘專家的賦值，完成準(zhǔn)則的絕對(duì)排隊(duì)和準(zhǔn)則原始權(quán)數(shù)的計(jì)算，同時(shí)對(duì)原始權(quán)數(shù)進(jìn)行歸一化處理。某一準(zhǔn)則下各單元權(quán)數(shù)的確定參照準(zhǔn)則權(quán)數(shù)的確定步驟完成。

3)計(jì)算相關(guān)系數(shù)和確定相關(guān)權(quán)重。圍繞總目標(biāo)的達(dá)成，各單元的重要性可能不同，因此需要給各單元確定權(quán)重。目標(biāo)預(yù)測(cè)法中各單元權(quán)重的確定就是計(jì)算各單元的相關(guān)系數(shù)。各單元的相關(guān)系數(shù)為各準(zhǔn)則的權(quán)數(shù)分別乘以各單元相對(duì)某一準(zhǔn)則的權(quán)數(shù)，然后求和。

為保證判斷的一致性，整個(gè)過程需引用2個(gè)歸一化條件。

(1)

相關(guān)系數(shù)的計(jì)算公式可表示為：

(2)

2 高職院校二級(jí)機(jī)構(gòu)科研績效評(píng)價(jià)指標(biāo)體系準(zhǔn)則確定及單元分解

2.1 準(zhǔn)則確定

開展二級(jí)機(jī)構(gòu)科研績效評(píng)價(jià)的目的是為了落實(shí)《國務(wù)院關(guān)于優(yōu)化科研管理提升科研績效若干措施的通知》(國發(fā)〔2018〕25號(hào))中強(qiáng)化科研項(xiàng)目績效評(píng)價(jià)和完善有利于創(chuàng)新的評(píng)價(jià)激勵(lì)制度等相關(guān)要求，為了更好、更優(yōu)地服務(wù)院?？蒲泄ぷ鳎苿?dòng)院?？蒲谐晒霓D(zhuǎn)移轉(zhuǎn)化和落實(shí)落地。本文選取的評(píng)價(jià)科研工作的準(zhǔn)則主要包括以下6個(gè)方面——社會(huì)影響力(α)：指能提高學(xué)校社會(huì)影響，增加政府機(jī)構(gòu)、社會(huì)組織對(duì)院?？蒲信琶臏?zhǔn)則；成果貢獻(xiàn)度(β)：指科研及其成果的科學(xué)價(jià)值、技術(shù)價(jià)值、經(jīng)濟(jì)價(jià)值、社會(huì)價(jià)值、文化價(jià)值，最終能直接或間接產(chǎn)生的經(jīng)濟(jì)或社會(huì)效益的準(zhǔn)則；創(chuàng)新質(zhì)量(γ)：指開展科研工作過程中，科研項(xiàng)目的新發(fā)現(xiàn)、新原理、新方法和新規(guī)律的原創(chuàng)性和科學(xué)價(jià)值，反映新技術(shù)、新方法、新產(chǎn)品、關(guān)鍵部件等的創(chuàng)新性、成熟度、穩(wěn)定性和可靠性的準(zhǔn)則；經(jīng)費(fèi)預(yù)算的合理性(δ)：指項(xiàng)目負(fù)責(zé)人依據(jù)相關(guān)預(yù)算準(zhǔn)則對(duì)經(jīng)費(fèi)預(yù)算科學(xué)性、相關(guān)性、經(jīng)濟(jì)性評(píng)價(jià)的準(zhǔn)則；協(xié)調(diào)及共享性(ε)：指院校在開展科研工作時(shí)對(duì)教學(xué)、人才培養(yǎng)和文化傳承的支撐及可能得到其他業(yè)務(wù)處室、部門支持的準(zhǔn)則；科研環(huán)境(ζ)：指為開展科研工作單位在科研設(shè)備、科研人才、科研信息和激勵(lì)機(jī)制等方面的儲(chǔ)備和配備情況的準(zhǔn)則。

2.2 單元分解

為體現(xiàn)高職院校二級(jí)機(jī)構(gòu)科研績效評(píng)價(jià)工作的“差異化 ”“多維度” 和“針對(duì)性”的評(píng)價(jià)原則，推動(dòng)高職院校科研項(xiàng)目管理從重?cái)?shù)量、重過程向重質(zhì)量、重結(jié)果的轉(zhuǎn)變，結(jié)合高職院?？蒲泄ぷ鏖_展實(shí)際，本評(píng)價(jià)指標(biāo)體系包含的組成單元為“科研項(xiàng)目立項(xiàng)及結(jié)題”“科研成果獎(jiǎng)項(xiàng)”“科研論文”“學(xué)術(shù)著作類”“咨詢報(bào)告類”“知識(shí)產(chǎn)權(quán)類” “指導(dǎo)學(xué)生參加挑戰(zhàn)杯、體育類等競賽”“文學(xué)作品、藝術(shù)類成果”和“科研項(xiàng)目成果轉(zhuǎn)移轉(zhuǎn)化類”共9個(gè)單元，具體組成詳見單元分解結(jié)構(gòu)圖(圖1)。

圖1 高職院校二級(jí)機(jī)構(gòu)科研績效評(píng)價(jià)單元分解結(jié)構(gòu)

基于高職院校與本科院?？蒲泄ぷ鱾?cè)重點(diǎn)不同的實(shí)際，特別是在科研項(xiàng)目立項(xiàng)及結(jié)題和成果轉(zhuǎn)移轉(zhuǎn)化類2個(gè)單元有較大差異的實(shí)際，本文將科研項(xiàng)目立項(xiàng)及結(jié)題和成果轉(zhuǎn)移轉(zhuǎn)化類應(yīng)包括的具體項(xiàng)目、任務(wù)作如下定義和區(qū)別：科研項(xiàng)目立項(xiàng)及結(jié)題指學(xué)校的縱橫向各級(jí)各類項(xiàng)目立項(xiàng)及結(jié)題情況和學(xué)校各級(jí)各類教改項(xiàng)目、教學(xué)建設(shè)項(xiàng)目的立項(xiàng)及驗(yàn)收情況；成果轉(zhuǎn)移轉(zhuǎn)化類是指對(duì)學(xué)校教師在科研過程中形成的具有實(shí)用價(jià)值的成果所進(jìn)行的后續(xù)開發(fā)、應(yīng)用、推廣直至形成新產(chǎn)品、新工藝、新材料，發(fā)展為新產(chǎn)業(yè)的情況；在承擔(dān)教改項(xiàng)目、教學(xué)建設(shè)項(xiàng)目過程中形成且經(jīng)同行專家論證具有推廣使用價(jià)值、示范輻射作用的情況。所以，本文對(duì)科研項(xiàng)目立項(xiàng)及結(jié)題和成果轉(zhuǎn)移轉(zhuǎn)化類在單元分解結(jié)構(gòu)圖中進(jìn)行了二次分解。

體系可包括的單元及各單元下應(yīng)包括的單元級(jí)數(shù)、具體項(xiàng)目和工作，可由學(xué)校根據(jù)科研工作的實(shí)際選取和細(xì)化。

3 高職院校二級(jí)機(jī)構(gòu)科研績效評(píng)價(jià)指標(biāo)體系權(quán)數(shù)確定

3.1 準(zhǔn)則權(quán)數(shù)的確定

對(duì)高職院校二級(jí)機(jī)構(gòu)科研績效評(píng)價(jià)指標(biāo)體系而言，根據(jù)成對(duì)比較法對(duì)權(quán)數(shù)確定的步驟，準(zhǔn)則的專家組成對(duì)比較結(jié)果如下：社會(huì)影響力(α)的重要性不及成果貢獻(xiàn)度(β)，則α得0分，β得1分；社會(huì)影響力(α)的重要性不及創(chuàng)新質(zhì)量(γ)，則α得0分，γ得1分；社會(huì)影響力(α)比經(jīng)費(fèi)預(yù)算的合理性(δ)重要，則α得1分，δ得0分；社會(huì)影響力(α)的重要性不及協(xié)調(diào)及共享性(ε)，則α的得0分，ε得1分；社會(huì)影響力(α)的重要性不及科研環(huán)境(ζ)，則α得0分，ζ得1分，依次類推，逐一比較，直至完成α、β、γ、δ、ε和ζ彼此的成對(duì)比較，并構(gòu)建準(zhǔn)則成對(duì)比較矩陣表(表1)。矩陣表中，分子為1的得1分，分子為0的不得分。

表1 準(zhǔn)則成對(duì)比較矩陣

表2 準(zhǔn)則權(quán)數(shù)矩陣

至此，由表2已可清晰地看出各準(zhǔn)則在高職院校二級(jí)機(jī)構(gòu)科研績效評(píng)價(jià)體系中的相對(duì)重要性。

3.2 各單元相對(duì)準(zhǔn)則權(quán)數(shù)的確定

本文選取的準(zhǔn)則共包含成果貢獻(xiàn)度(β)等6個(gè)，分解成的單元共包含科研項(xiàng)目立項(xiàng)及結(jié)題等9個(gè)。在各單元相對(duì)準(zhǔn)則權(quán)數(shù)的確定環(huán)節(jié)，本文僅以所分解的9個(gè)單元相對(duì)成果貢獻(xiàn)度(β)這一準(zhǔn)則權(quán)數(shù)的確定步驟為例進(jìn)行詳細(xì)說明。根據(jù)成對(duì)比較法對(duì)權(quán)數(shù)的確定步驟，相對(duì)成果貢獻(xiàn)度(β)，此環(huán)節(jié)專家組成對(duì)比較的結(jié)果如下：科研項(xiàng)目立項(xiàng)及結(jié)題(a)的重要性不及科研成果獎(jiǎng)項(xiàng)(b)，a得0分，b得1分；科研項(xiàng)目立項(xiàng)及結(jié)題(a)的重要性不及科研論文(c)，a得0分，c得1分；科研項(xiàng)目立項(xiàng)及結(jié)題(a)的重要性不及學(xué)術(shù)著作類(d)重要，a得0分，d得1分；科研項(xiàng)目立項(xiàng)及結(jié)題(a)的重要性不及咨詢報(bào)告類(e)，a得0分，e得1分；科研項(xiàng)目立項(xiàng)及結(jié)題(a)的重要性不及知識(shí)產(chǎn)權(quán)類(f)重要，a得0分，f得1分；科研項(xiàng)目立項(xiàng)及結(jié)題(a)比指導(dǎo)學(xué)生參加挑戰(zhàn)杯、體育類等競賽(g)重要，a得1分，g得0分；科研項(xiàng)目立項(xiàng)及結(jié)題(a)比文學(xué)作品、藝術(shù)類成果(h)重要，a得1分，h得0分?？蒲许?xiàng)目立項(xiàng)及結(jié)題(a)的重要性不及科研成果轉(zhuǎn)移轉(zhuǎn)化類(i)，a得0分，i得1分。

依次類推，逐一比較，直至完成a、b、c、d、e、f、g、h和i彼此的成對(duì)比較。此環(huán)節(jié)構(gòu)建的成對(duì)比較矩陣見表3。

表3 各單元相對(duì)成果貢獻(xiàn)度準(zhǔn)則成對(duì)比較矩陣

在各單元相對(duì)成果貢獻(xiàn)度準(zhǔn)則成對(duì)比較矩陣表和專家組對(duì)各單元相對(duì)重要性賦值的基礎(chǔ)上，遵循權(quán)數(shù)確定步驟，各單元相對(duì)成果貢獻(xiàn)度準(zhǔn)則確定的權(quán)數(shù)矩陣見表4。

表4 各單元相對(duì)成果貢獻(xiàn)度準(zhǔn)則確定的權(quán)數(shù)矩陣

按照相同的方法和步驟，可以完成各單元相對(duì)創(chuàng)新質(zhì)量(γ)、科研環(huán)境(ζ)、協(xié)調(diào)及共享性(ε)、社會(huì)影響力(α)和經(jīng)費(fèi)預(yù)算的合理性(δ)準(zhǔn)則權(quán)數(shù)的確定，結(jié)果詳見表5。

3.3 相關(guān)系數(shù)和權(quán)重的確定

根據(jù)各準(zhǔn)則的權(quán)數(shù)和各單元相對(duì)各準(zhǔn)則的權(quán)數(shù)已知，結(jié)合各單元相關(guān)系數(shù)的計(jì)算步驟和公式，就可完成高職院校二級(jí)機(jī)構(gòu)科研績效評(píng)價(jià)指標(biāo)體系優(yōu)選矩陣表的編制，即權(quán)重的最終確定，結(jié)果見表5。

表5 高職院校二級(jí)機(jī)構(gòu)科研績效評(píng)價(jià)體系優(yōu)選矩陣

由表5的計(jì)算結(jié)果可知，高職院校二級(jí)機(jī)構(gòu)科研績效評(píng)價(jià)體系各單元的權(quán)重值已知，至此權(quán)重設(shè)置工作已完成。以此權(quán)重值為基礎(chǔ)，即可對(duì)各單元的科研績效權(quán)重賦值。

4 結(jié) 語

目標(biāo)預(yù)測(cè)法作為一種權(quán)重設(shè)置工具，因操作過程的簡捷性和結(jié)果的科學(xué)性，且受主觀因素的影響較小，已被越來越多的領(lǐng)域廣泛應(yīng)用。當(dāng)用此方法設(shè)置高職院校二級(jí)機(jī)構(gòu)科研績效評(píng)價(jià)指標(biāo)體系的權(quán)重時(shí)，各準(zhǔn)則、各單元權(quán)數(shù)的多少，參評(píng)專家的閱歷、知識(shí)面對(duì)其的影響較大。評(píng)價(jià)指標(biāo)體系所包含的單元，各單元具體包含的項(xiàng)目等因素對(duì)相關(guān)權(quán)數(shù)的影響也較大。為保證所設(shè)置權(quán)重的科學(xué)性和合理性，職能部門在權(quán)重設(shè)置過程中，需對(duì)參評(píng)專家、體系應(yīng)包含的單元、各單元應(yīng)包含的項(xiàng)目等，嚴(yán)格把關(guān)、選取和甄別。同時(shí)，職能部門也不能把一次設(shè)置的結(jié)果當(dāng)成一勞永逸的事情，應(yīng)根據(jù)學(xué)校的發(fā)展、定位，在保證其相對(duì)穩(wěn)定性的基礎(chǔ)上，適時(shí)對(duì)權(quán)重進(jìn)行動(dòng)態(tài)設(shè)置。此外，根據(jù)目標(biāo)預(yù)測(cè)法相關(guān)路徑的概念及計(jì)算公式，當(dāng)同一評(píng)價(jià)指標(biāo)體系有多個(gè)評(píng)價(jià)方案可供選擇時(shí)，把同一評(píng)價(jià)指標(biāo)體系各單元權(quán)重值相乘，即可得到各體系的相關(guān)路徑值，相關(guān)路徑值越大，則該評(píng)價(jià)指標(biāo)體系也越好。