科研項(xiàng)目效益評(píng)估指標(biāo)體系構(gòu)建＊

盧冰，陶泉

（中國(guó)氣象局氣象干部培訓(xùn)學(xué)院，北京100081）

1 科研項(xiàng)目效益評(píng)估作用與內(nèi)涵

黨的十八大以來(lái)，在以習(xí)近平同志為核心的黨中央堅(jiān)強(qiáng)領(lǐng)導(dǎo)下，中國(guó)發(fā)展堅(jiān)持把科技創(chuàng)新擺在核心位置，科技創(chuàng)新能力顯著提高，科研項(xiàng)目數(shù)量大幅提升，科研項(xiàng)目的科學(xué)管理研究也越來(lái)越重要。具體到每一個(gè)項(xiàng)目，其作用如何，需要開(kāi)展科學(xué)的綜合效益分析和評(píng)估研究，真實(shí)反映項(xiàng)目完成的綜合效益，指導(dǎo)未來(lái)項(xiàng)目的開(kāi)展，為科技決策提供參考依據(jù)，使有限的科技資源投入產(chǎn)出更好的經(jīng)濟(jì)效益和社會(huì)效益?？蒲许?xiàng)目效益評(píng)估是項(xiàng)目后評(píng)估的核心內(nèi)容，從效益方面對(duì)科研項(xiàng)目的綜合評(píng)估，其目的在于考核科研項(xiàng)目是否實(shí)現(xiàn)了預(yù)期的效益并衡量效益的大小。科研項(xiàng)目效益評(píng)估實(shí)際就是對(duì)科研項(xiàng)目運(yùn)行結(jié)果評(píng)價(jià)，即對(duì)項(xiàng)目?jī)r(jià)值、項(xiàng)目完成質(zhì)量、項(xiàng)目影響、項(xiàng)目時(shí)間、成本、人力、產(chǎn)出等經(jīng)濟(jì)效益、社會(huì)效益和平臺(tái)效益進(jìn)行全面綜合的評(píng)價(jià)。而科研項(xiàng)目以其研究目的和特點(diǎn)，一般分為三大類：基礎(chǔ)研究類、應(yīng)用研究類和標(biāo)準(zhǔn)規(guī)范類。不同類別的科研項(xiàng)目效益評(píng)估的側(cè)重點(diǎn)和指標(biāo)應(yīng)該有所區(qū)分。

2 指標(biāo)體系的構(gòu)建原則

科研項(xiàng)目效益評(píng)估指標(biāo)體系是評(píng)估科研項(xiàng)目效益的基礎(chǔ)和依據(jù)，直接關(guān)系到評(píng)估結(jié)果的客觀、公正、準(zhǔn)確、有效。構(gòu)建科研項(xiàng)目效益指標(biāo)體系是個(gè)復(fù)雜系統(tǒng)的過(guò)程，必須理清思路，遵循正確的原則，運(yùn)用正確的方法，才能少走彎路。一般有以下4 個(gè)基本原則。

2.1 科學(xué)合理性原則

科研項(xiàng)目效益評(píng)估指標(biāo)是否具有代表性，能否真實(shí)反映科研項(xiàng)目的總體面貌、本質(zhì)特征和基本水平，是評(píng)估指標(biāo)設(shè)計(jì)是否科學(xué)的關(guān)鍵。

選取指標(biāo)應(yīng)注重運(yùn)用定性與定量相結(jié)合的方法，對(duì)難以直接測(cè)量的因素可以考慮用間接方法測(cè)量[2]，從而優(yōu)化指標(biāo)結(jié)構(gòu)。

2.2 系統(tǒng)均衡原則

科研項(xiàng)目效益評(píng)估是一個(gè)多目標(biāo)決策，不能用局限性較大的單一指標(biāo)進(jìn)行評(píng)價(jià)，應(yīng)建立一套各有側(cè)重，又相互聯(lián)系的指標(biāo)系統(tǒng)來(lái)反映項(xiàng)目的總體效益[3]，突出有限目標(biāo)，盡量選擇那些有代表性的綜合指標(biāo)，對(duì)項(xiàng)目的直接效果和間接效果都能給予反映，保證效益評(píng)估的全面性。

2.3 靈活穩(wěn)定原則

科研項(xiàng)目效益評(píng)估應(yīng)盡可能選取具有共同特性的綜合指標(biāo)和專業(yè)指標(biāo)，或相對(duì)成熟、公認(rèn)的指標(biāo)。主體指標(biāo)需長(zhǎng)時(shí)期處于穩(wěn)定的狀態(tài)也要易于修訂，在實(shí)際運(yùn)用中能根據(jù)客觀條件的變化而進(jìn)行適當(dāng)?shù)恼{(diào)整，而不對(duì)整個(gè)指標(biāo)體系造成太大的影響。

2.4 擇重性原則

為避免主觀片面的決策，科研項(xiàng)目效益評(píng)估指標(biāo)應(yīng)進(jìn)行量化管理，根據(jù)各級(jí)、各項(xiàng)評(píng)估指標(biāo)對(duì)項(xiàng)目效益的重要程度不甚相同，合理分配各項(xiàng)指標(biāo)的權(quán)重。

3 科研項(xiàng)目效益評(píng)估指標(biāo)體系

科研項(xiàng)目效益是指項(xiàng)目對(duì)國(guó)民經(jīng)濟(jì)所作的貢獻(xiàn)，它包括得到的直接效益和由項(xiàng)目引起的間接效益?？蒲许?xiàng)目的效益有其獨(dú)特的內(nèi)涵和規(guī)律，其效益目標(biāo)是多元化的，涉及范圍很廣，既有經(jīng)濟(jì)效益、社會(huì)效益，也有平臺(tái)效益。作為對(duì)科研項(xiàng)目進(jìn)行評(píng)估的重要基礎(chǔ)和支撐，科研項(xiàng)目效益評(píng)估是建立在大量的原始數(shù)據(jù)、統(tǒng)計(jì)分析、調(diào)研基礎(chǔ)上提出的具有科學(xué)性、完整性、系統(tǒng)性的反映科研項(xiàng)目各要素現(xiàn)狀及發(fā)展趨勢(shì)的數(shù)據(jù)。

本文根據(jù)科研項(xiàng)目的分類和特點(diǎn)，在選擇和設(shè)置效益評(píng)估指標(biāo)時(shí)，將歸類、層次結(jié)構(gòu)、綜合分析結(jié)合在一起，逐層分解，建立層次分明的指標(biāo)結(jié)構(gòu)。本文針對(duì)效益評(píng)估的主要內(nèi)容，在遵循指標(biāo)構(gòu)建原則的基礎(chǔ)上，結(jié)合有關(guān)專家和管理人員的征詢和反饋意見(jiàn)，嘗試進(jìn)行科研項(xiàng)目效益分析，設(shè)計(jì)了一套既具有普適性，又具特殊性的指標(biāo)體系，如表1 所示。

表1 科研項(xiàng)目效益評(píng)估指標(biāo)框架

指標(biāo)內(nèi)涵簡(jiǎn)要說(shuō)明如下。

3.1 經(jīng)濟(jì)效益

科研項(xiàng)目的經(jīng)濟(jì)效益是指科研成果帶來(lái)的效益和科研活動(dòng)耗費(fèi)的比較，應(yīng)從項(xiàng)目完成情況和投入與產(chǎn)出的角度考察項(xiàng)目的經(jīng)濟(jì)效益：①項(xiàng)目預(yù)期目標(biāo)實(shí)現(xiàn)。根據(jù)項(xiàng)目的總體目標(biāo)、進(jìn)度、經(jīng)費(fèi)的完成情況，對(duì)項(xiàng)目本身進(jìn)行預(yù)判。②項(xiàng)目投入。綜合計(jì)算用于項(xiàng)目的人員、資源、時(shí)間、經(jīng)費(fèi)投入。③項(xiàng)目產(chǎn)出。綜合計(jì)算項(xiàng)目研究成果的數(shù)量、質(zhì)量及獲獎(jiǎng)情況以及先進(jìn)程度、創(chuàng)新程度和示范作用。④將項(xiàng)目的產(chǎn)出和投入的綜合計(jì)算結(jié)果進(jìn)行比較。

3.2 社會(huì)效益

科研項(xiàng)目的社會(huì)效益是指研究成果對(duì)整個(gè)社會(huì)的貢獻(xiàn)，主要從成果推廣應(yīng)用和學(xué)術(shù)技術(shù)影響兩個(gè)方面綜合評(píng)估：①成果推廣應(yīng)用。從成果推廣應(yīng)用的時(shí)間、空間、深度三個(gè)維度來(lái)評(píng)估應(yīng)用情況，以及成果對(duì)相關(guān)決策、管理的影響大小、成果對(duì)社會(huì)中人們素質(zhì)提高的貢獻(xiàn)大小。②學(xué)術(shù)技術(shù)影響。評(píng)估研究成果對(duì)科學(xué)理論體系的完善和擴(kuò)充作用；對(duì)提高現(xiàn)有技術(shù)能力水平的作用；形成了新的可用的學(xué)術(shù)技術(shù)標(biāo)準(zhǔn)；對(duì)建立相關(guān)學(xué)科發(fā)展模式上的作用來(lái)綜合評(píng)價(jià)項(xiàng)目的學(xué)術(shù)技術(shù)影響，從而反映項(xiàng)目對(duì)社會(huì)的貢獻(xiàn)。

3.3 平臺(tái)效益

科研項(xiàng)目的平臺(tái)效益是指以項(xiàng)目研究為平臺(tái)，在技術(shù)開(kāi)發(fā)、研究團(tuán)隊(duì)建設(shè)、人才培養(yǎng)方面取得效益：①技術(shù)開(kāi)發(fā)。評(píng)估項(xiàng)目研究過(guò)程中，對(duì)國(guó)際、國(guó)內(nèi)相關(guān)先進(jìn)技術(shù)引進(jìn)的情況以及自主創(chuàng)新開(kāi)發(fā)技術(shù)情況。②團(tuán)隊(duì)建設(shè)。評(píng)估創(chuàng)新團(tuán)隊(duì)組建情況和團(tuán)隊(duì)的創(chuàng)新能力提升情況。③人才培養(yǎng)。評(píng)估依托項(xiàng)目研究的平臺(tái)，對(duì)團(tuán)隊(duì)成員管理能力、創(chuàng)新能力等個(gè)人能力的提升情況以及學(xué)術(shù)、行業(yè)影響力的提升情況。

為區(qū)分各類型科研項(xiàng)目的效益評(píng)估標(biāo)準(zhǔn)、增強(qiáng)指標(biāo)體系在實(shí)際操作中的適用性，本文將指標(biāo)框架進(jìn)行了歸類和細(xì)分，分別按照“經(jīng)濟(jì)效益”“社會(huì)效益”“平臺(tái)效益”三大類開(kāi)展效益評(píng)估，如表2 所示。

三類科研項(xiàng)目都可按照本文將表1 指標(biāo)框架中的9 個(gè)一級(jí)指標(biāo)和29 個(gè)二級(jí)指標(biāo)分為“通用指標(biāo)”和“個(gè)性指標(biāo)”兩類?！巴ㄓ弥笜?biāo)”反映科研項(xiàng)目效益評(píng)估的共性特點(diǎn)，是各類科研項(xiàng)目開(kāi)展效益評(píng)估的必選指標(biāo)?！皞€(gè)性指標(biāo)”反映了各類科研項(xiàng)目效益的突出亮點(diǎn)和個(gè)性特點(diǎn)。

4 指標(biāo)權(quán)重的確定方法

科研項(xiàng)目效益評(píng)估設(shè)計(jì)多項(xiàng)指標(biāo)，而指標(biāo)間作用并不均衡，因此，應(yīng)選用合適的評(píng)估方法對(duì)評(píng)估指標(biāo)之間進(jìn)行權(quán)值大小的判斷，以便確認(rèn)哪項(xiàng)指標(biāo)影響較強(qiáng)或較弱。

權(quán)重的確定是否科學(xué)直接關(guān)系到評(píng)估結(jié)果的合理與否[1]。國(guó)內(nèi)外在科技評(píng)估方面采用的定量評(píng)估方法很多，但就評(píng)估而言并沒(méi)有通用的方法庫(kù)。每種方法都有一定的使用范圍、適用性和局限性。因而必須根據(jù)評(píng)估對(duì)象的實(shí)際情況和指標(biāo)體系來(lái)選擇相應(yīng)的權(quán)重確定方法，提高評(píng)估的科學(xué)性。對(duì)于科研項(xiàng)目的效益評(píng)估而言，其評(píng)估指標(biāo)權(quán)重的確定需要遵循一些具體要求：①權(quán)重的確定方法要體現(xiàn)決策機(jī)構(gòu)開(kāi)展評(píng)估的目的，滿足科研項(xiàng)目決策調(diào)整的要求；②權(quán)重確定方法盡可能做到簡(jiǎn)單、實(shí)用、易于理解和操作，評(píng)估結(jié)果易被決策機(jī)構(gòu)采納接受；③權(quán)重的確定方法必須較成熟可行，適用范圍有比較清晰的界定，并對(duì)局限性有較為清楚的認(rèn)識(shí)[1]。

層次分析法是美國(guó)匹茲堡大學(xué)運(yùn)籌學(xué)家托馬斯·塞蒂（SAATY T L）于20 世紀(jì)70 年代初，提出的一種層次權(quán)重決策分析方法。它本質(zhì)上是一種決策思維方式，它把復(fù)雜的決策問(wèn)題分解為各個(gè)組成因素，并將這些因素按支配關(guān)系分組，形成有序的遞階層次結(jié)構(gòu)，通過(guò)兩兩比較的方式確定層次中諸因素的相對(duì)重要性，然后綜合人的判斷以決定決策諸因素相對(duì)重要性總的順序[4]，計(jì)算指標(biāo)權(quán)重。本文力求對(duì)科研項(xiàng)項(xiàng)目效益評(píng)估指標(biāo)進(jìn)行重要程度的定量分配，使得指標(biāo)體系更加科學(xué)，使用層次分析法（Analytic Hierarchy Process，簡(jiǎn)稱AHP）作為確定權(quán)重的手段。

AHP 能把決策過(guò)程中定性與定量因素有機(jī)地結(jié)合在一起，用一種統(tǒng)一的方式進(jìn)行處理，既能保證模型的系統(tǒng)性、合理性，又能使決策管理專家充分運(yùn)用其有價(jià)值的經(jīng)驗(yàn)與判斷能力。它是將決策者的思維過(guò)程實(shí)現(xiàn)數(shù)量化，從而解決多目標(biāo)、多層次、多準(zhǔn)則決策問(wèn)題的方法[5]。AHP 體現(xiàn)了人們決策思維的基本特征，即分解、判斷、排序、綜合使用層次分析法建立數(shù)學(xué)模型可分為五步：建立遞階層次結(jié)構(gòu)模型、構(gòu)造兩兩比較判斷矩陣、層次單排序、層次總排序、層次總排序一致性檢驗(yàn)。這種方法該方法所具有系統(tǒng)性、靈活性、綜合性、簡(jiǎn)便性和準(zhǔn)確性的特點(diǎn)，使其成為非常實(shí)用的決策方法，并得到了廣泛應(yīng)用。只是無(wú)論是建立層次結(jié)構(gòu)還是構(gòu)造判斷矩陣，人的主觀判斷、選擇對(duì)結(jié)果的影響較大，存在一定的局限性[6]。

5 結(jié)語(yǔ)

科研項(xiàng)目效益評(píng)估是項(xiàng)目后期管理的必要過(guò)程和手段，有利于科研管理部門(mén)對(duì)項(xiàng)目的決策、管理、監(jiān)督等工作的提升。建立一套合理、科學(xué)、實(shí)的科研項(xiàng)目效益評(píng)估指標(biāo)體系，強(qiáng)化科研管理意識(shí)，制定合適的項(xiàng)目后期考核與監(jiān)管機(jī)制，建立良好的反饋機(jī)制是適應(yīng)科學(xué)管理發(fā)展的需要。本文在深入研究國(guó)內(nèi)外效益評(píng)估政策措施和技術(shù)路線的基礎(chǔ)上，提出了全面反映科研項(xiàng)目效益評(píng)估的若干關(guān)鍵通用性和指標(biāo)，根據(jù)科研項(xiàng)目的不同類型，給出了建議選取的評(píng)估指標(biāo)系列，進(jìn)一步增強(qiáng)了科研項(xiàng)目效益評(píng)估指標(biāo)體系的適用性。