衛(wèi)生科研課題立項(xiàng)評審指標(biāo)的建立及應(yīng)用

*基金項(xiàng)目：上海市衛(wèi)生和計(jì)劃生育委員會面上項(xiàng)目（20134271）

**通信作者：劉薇群。E-mail：lwqzcz@aliyun.com

摘 要 科研項(xiàng)目的立項(xiàng)評估是保證篩選高質(zhì)量課題的首要工作，科研項(xiàng)目立項(xiàng)評審指標(biāo)體系是科研項(xiàng)目立項(xiàng)評審的主要工具，我國的醫(yī)學(xué)科研評價研究已廣泛采用了評價指標(biāo)體系，本文就科研立項(xiàng)的評價指標(biāo)及應(yīng)用進(jìn)行綜述。

文獻(xiàn)標(biāo)識碼：A

文章編號：1006-1533（2015）20-0017-05

Establishment and application of the evaluation index for the health research project

WANG Xiaqing 1, CHENG Lushan 2, NIU Yuhong 3, LIU Weiqun 4**

(1. Shanghai Pudong Health Development Institute, Shanghai 200129, China; 2. Shanghai East Hospital, Shanghai 200120, China; 3. Shanghai Information Institute of Medical Science and Technology, Shanghai1 200031, China; 4. Zhoupu Hospital of Pudong New District, Shanghai 201318, China)

ABSTRACT The evaluation of the research project is the primary work for selecting the projects with the high quality, and its index system is a major tool of the evaluation of the research project. In our country, this evaluation index system has been widely applied in the medical scientific evaluation research. This article summarizes the evaluation index of the scientific research project and its application.

KEY WORDS scientific research evaluation; index; index system; scientific research project evaluation

隨著科學(xué)技術(shù)事業(yè)的快速發(fā)展，科研項(xiàng)目評估已成為科研管理工作的重要組成部分。在科研項(xiàng)目管理中，按科研項(xiàng)目實(shí)施階段可分為立項(xiàng)評估、執(zhí)行評估、績效評估等 [1]?？蒲许?xiàng)目的立項(xiàng)評估是保證篩選高質(zhì)量課題的首要工作。歐美國家中，科研項(xiàng)目評價開展較為成熟，世界衛(wèi)生組織及其他基金組織均需依靠專業(yè)的評價機(jī)構(gòu)參與各種衛(wèi)生服務(wù)項(xiàng)目的評價和運(yùn)行 [2-3]。我國科研評價起步于20世紀(jì)80年代，評價早期以定性為主 [4]，隨著對評價方法研究的深入，研究者逐步采用模型和指標(biāo)體系進(jìn)行定量評價，目前我國的醫(yī)學(xué)科研評價研究已廣泛采用評價指標(biāo)體系 [5]。

1　國內(nèi)相關(guān)醫(yī)學(xué)科研立項(xiàng)評價指標(biāo)體系的建立

1.1　國家自然科學(xué)基金委科研評審指標(biāo)

國家自然科學(xué)基金委員會“申請項(xiàng)目同行評議表”是國內(nèi)較早的科研立項(xiàng)評審指標(biāo) [6]，該指標(biāo)體系共包括3大類16項(xiàng)。三類分別是項(xiàng)目的意義和立項(xiàng)依據(jù)，項(xiàng)目的研究內(nèi)容和預(yù)期目標(biāo)、完成項(xiàng)目的條件和能力。

項(xiàng)目的意義和立項(xiàng)依據(jù)共4項(xiàng)：科學(xué)意義、學(xué)術(shù)思想、立項(xiàng)依據(jù)、對國內(nèi)、外研究現(xiàn)狀的了解。②項(xiàng)目的研究內(nèi)容和預(yù)期目標(biāo)共5項(xiàng)，擬解決的關(guān)鍵問題、采用的研究方法（研究手段）、設(shè)計(jì)的技術(shù)路線（實(shí)驗(yàn)方案）、項(xiàng)目的研究對象（實(shí)驗(yàn)材料）、預(yù)期目標(biāo)實(shí)現(xiàn)的可能性和明確性。③完成項(xiàng)目的條件和能力共7項(xiàng)，申請者以往從事的工作與本次申請內(nèi)容的聯(lián)系、申請者近3年來已發(fā)表的有關(guān)主要文章、申請者已具備的實(shí)驗(yàn)室條件和設(shè)備條件、項(xiàng)目組成員構(gòu)成、此次申請與申請者以往研究項(xiàng)目的聯(lián)系、項(xiàng)目的學(xué)術(shù)水平程度、與其它學(xué)科的交叉情況。以上16項(xiàng)評估指標(biāo)，每個指標(biāo)均劃分為四個等級，可進(jìn)行量化計(jì)分。

·社區(qū)衛(wèi)生管理·

繼自然科學(xué)基金評價指標(biāo)建立之后，相當(dāng)多的科研項(xiàng)目評審依據(jù)此指標(biāo)進(jìn)行，隨著科研工作的進(jìn)一步發(fā)展，國內(nèi)其他學(xué)者在國家自然科學(xué)基金同行評議表的基礎(chǔ)上對其進(jìn)行了修改和完善。

齊松仁

劉興太

1）科學(xué)意義：包括4個二級指標(biāo)，分別為立題依據(jù)、科學(xué)意義、課題設(shè)計(jì)、起點(diǎn)水平。

2）先進(jìn)性：包括3個二級指標(biāo)①學(xué)術(shù)思想；②指標(biāo)與方法，即為研究評價的指標(biāo)是否先進(jìn)，有創(chuàng)新性和革新性。③預(yù)期研究成果，其評估論文發(fā)表期刊的影響力和是否獲得科技成果。

3）可行性：包括3個二級指標(biāo)①研究人員的科研能力，包括其學(xué)術(shù)水平、課題組人員結(jié)構(gòu)等。②工作基礎(chǔ)與條件，主要為前期研究基礎(chǔ)和實(shí)驗(yàn)條件等。③經(jīng)費(fèi)預(yù)算是否合理等。

劉興太

評價指標(biāo)體系是由各級各項(xiàng)評價指標(biāo)及其相應(yīng)的指標(biāo)權(quán)重和評價標(biāo)準(zhǔn)所構(gòu)成的有機(jī)整體

1.2　中醫(yī)藥衛(wèi)生項(xiàng)目專科評價指標(biāo)體系

科研項(xiàng)目的申報(bào)分為不同的學(xué)科和專業(yè)領(lǐng)域，不同學(xué)科和專業(yè)的研究存在一定的特殊性和差異性。為此，有研究者對專業(yè)性較強(qiáng)的研究項(xiàng)目設(shè)計(jì)了專門的立項(xiàng)評審標(biāo)準(zhǔn)。林端宜

該研究中5個要素層分別為：①研究實(shí)力：包括課題組成員人數(shù)、平均年齡、學(xué)科組合。②研究基礎(chǔ)：主要包括已有課題狀況、已有課題與本課題相關(guān)度、已有成果獲獎狀況。③研究條件：實(shí)驗(yàn)室條件、設(shè)備投入比例、自籌資金比例。④科學(xué)性：與標(biāo)書指南相符度、方法與技術(shù)路線可行性、創(chuàng)新點(diǎn)與國、內(nèi)外比較。⑤預(yù)期效益：研究成果狀態(tài)、社會效益

1.3　醫(yī)學(xué)科研項(xiàng)目全程評價指標(biāo)體系

國內(nèi)李俊勇

1.3.1　項(xiàng)目的必要性

包括針對國家或地區(qū)當(dāng)前急需解決的實(shí)際問題、針對學(xué)術(shù)領(lǐng)域急待解決的關(guān)鍵問題、預(yù)期結(jié)果具有可推廣性或應(yīng)用前景等3個三級指標(biāo)。項(xiàng)目必要性的權(quán)重指標(biāo)為0.2551，其3個三級指標(biāo)權(quán)重基本一致，均大于0.3，而國家或地區(qū)急需解決的實(shí)際問題，權(quán)重最高，為0.3524

1.3.2　科學(xué)性

包括立題依據(jù)充分、研究目標(biāo)明確、準(zhǔn)確選擇擬解決的關(guān)鍵問題等3個三級指標(biāo)?？茖W(xué)性的權(quán)重指標(biāo)為0.2538，3個三級指標(biāo)中，研究目標(biāo)明確項(xiàng)指標(biāo)權(quán)重較大，為0.3442

1.3.3　創(chuàng)新性

包括學(xué)術(shù)思想新穎、研究方法創(chuàng)新等2個三級指標(biāo)。創(chuàng)新性的指標(biāo)權(quán)重系數(shù)為0.241 4

·社區(qū)衛(wèi)生管理·

1.3.4　可行性

包括技術(shù)路線、技術(shù)指標(biāo)、研究周期、經(jīng)費(fèi)預(yù)算、實(shí)驗(yàn)條件和設(shè)備能滿足項(xiàng)目要求、合作各方優(yōu)勢互補(bǔ)、申請者以往從事的研究工作、申請者既往承擔(dān)項(xiàng)目完成情況、申請者已完成項(xiàng)目的成果水平、項(xiàng)目組主要成員職稱結(jié)構(gòu)、項(xiàng)目組主要成員年齡結(jié)構(gòu)、項(xiàng)目組成員學(xué)歷構(gòu)成等12個三級指標(biāo)?？尚行灾笜?biāo)權(quán)重為0.249 7

從對以上科研立項(xiàng)評價指標(biāo)體系的分析可以看出，大部分的研究將立項(xiàng)評價指標(biāo)劃分為一級指標(biāo)和相應(yīng)的二、三級指標(biāo)。一級指標(biāo)基本為科學(xué)性、先進(jìn)性、可行性和效益評價四類。其下屬又分為不同的二級指標(biāo)。當(dāng)前研究中，科研立項(xiàng)評價指標(biāo)體系的建立較為明確和成熟。同時有研究者指出

2　項(xiàng)目立項(xiàng)評價指標(biāo)體系在科研立項(xiàng)申報(bào)中的應(yīng)用

立項(xiàng)評價指標(biāo)體系的建立，為科研立項(xiàng)提供了評審標(biāo)準(zhǔn)，成為科研管理部門和項(xiàng)目研究者的工具。國內(nèi)蔣寧 [5]指出，項(xiàng)目指標(biāo)體系對科研項(xiàng)目有導(dǎo)向功能、鑒別優(yōu)選以及診斷功能。這些功能可為項(xiàng)目管理部門服務(wù)，評選出合適及可行的項(xiàng)目立項(xiàng)?？蒲许?xiàng)目指標(biāo)建立之后，得到科研機(jī)構(gòu)和相關(guān)科研工作者的關(guān)注，應(yīng)用的主體包括科研管理和評審機(jī)構(gòu)、醫(yī)療衛(wèi)生機(jī)構(gòu)的科研管理部門以及科研申報(bào)人員。

2.1　科研項(xiàng)目管理機(jī)構(gòu)

評價指標(biāo)體系建立后，為各級科研管理機(jī)構(gòu)所采用。對于項(xiàng)目管理機(jī)構(gòu)來說，指標(biāo)體系是課題立項(xiàng)的主要參考標(biāo)準(zhǔn)和工具，科研管理部門根據(jù)不同項(xiàng)目的特點(diǎn)和國家政策要求，選擇適合的評價指標(biāo)體系和權(quán)重值，確保對申報(bào)的科研項(xiàng)目進(jìn)行科學(xué)、客觀的評價和篩選。研究高校指標(biāo)體系應(yīng)用的學(xué)者 [13]指出，指標(biāo)選取體現(xiàn)被評價對象的性質(zhì)特點(diǎn)及指標(biāo)體系設(shè)計(jì)的指導(dǎo)原則，指標(biāo)權(quán)重則可以反映出當(dāng)前科研工作的重點(diǎn)與導(dǎo)向。

科研基金管理部門選取指標(biāo)體系后，進(jìn)而采用適合的立項(xiàng)評審流程和方法，對申報(bào)課題進(jìn)行篩選評估，鑒別創(chuàng)新性及可行性強(qiáng)的課題，把經(jīng)費(fèi)投入到社會急需、效益較好的項(xiàng)目中，保證科研基金的合理分配 [9]。

2.2　醫(yī)院科研管理部門

在項(xiàng)目申報(bào)之前，科研管理較為規(guī)范的醫(yī)療衛(wèi)生機(jī)構(gòu)會對申報(bào)項(xiàng)目進(jìn)行初審，其目的一是篩選出符合各基金資助指導(dǎo)原則、目的明確并可操作實(shí)現(xiàn)的項(xiàng)目；二是對申報(bào)項(xiàng)目進(jìn)行評估，指出問題，進(jìn)一步指導(dǎo)申報(bào) [9]。

醫(yī)院科研項(xiàng)目管理中根據(jù)不同類別的項(xiàng)目，以同行專家評審方式進(jìn)行：對于有申報(bào)數(shù)量限制的項(xiàng)目，采取函審的形式，聘請數(shù)位院外專家，對所有項(xiàng)目進(jìn)行評分，并提出修改意見 [1]，專家評審的主要依據(jù)即為衛(wèi)生類科研立項(xiàng)評價指標(biāo)。有的醫(yī)療科研管理部門主要以專家評審方式，通過對組織申報(bào)課題進(jìn)行申報(bào)答辯。學(xué)術(shù)委員會專家使用評分體系對課題進(jìn)行打分排序，再確定向各級基金項(xiàng)目的申報(bào) [14]。

2.3　課題項(xiàng)目申報(bào)者

立項(xiàng)評價指標(biāo)標(biāo)準(zhǔn)作為項(xiàng)目評審的主要工具，對于項(xiàng)目申報(bào)者來說，在課題申報(bào)方面具備重要的參考和指導(dǎo)作用 [15]。立項(xiàng)評審指標(biāo)在申報(bào)課題項(xiàng)目中的指導(dǎo)作用首先是引導(dǎo)申報(bào)者選題，申報(bào)者在選題時必須緊扣課題申報(bào)指南及評審要求，結(jié)合自身的研究領(lǐng)域擬定具體項(xiàng)目，使課題遵循緊扣指南的原則 [16]。其次，立項(xiàng)評審指標(biāo)還是申報(bào)者課題論證的標(biāo)準(zhǔn) [17]，申報(bào)者通過項(xiàng)目申報(bào)書，把課題項(xiàng)目的整體設(shè)計(jì)和研究思路以清晰的邏輯表達(dá)出來，力求完全達(dá)到評審各項(xiàng)指標(biāo)的要求。

科研立項(xiàng)評價指標(biāo)對課題申報(bào)的作用不容忽視，馮莉 [18]分析了課題申報(bào)失敗的項(xiàng)目，在這些項(xiàng)目中，出現(xiàn)的問題包括立題依據(jù)不充分、科研設(shè)計(jì)不合理、研究方法落后、預(yù)期目標(biāo)不明確、前期工作薄弱等，這些均為立項(xiàng)評價指標(biāo)體系中的內(nèi)容。

3　立項(xiàng)評價指標(biāo)體系的應(yīng)用方法和形式

目前對科研項(xiàng)目進(jìn)行立項(xiàng)評價采用的方法主要包括同行評議法，模糊層次評價法 [19]，還有逼近理想解排序法、網(wǎng)絡(luò)分析法以及計(jì)算機(jī)規(guī)則關(guān)聯(lián)法等。各類方法均是以立項(xiàng)評審指標(biāo)為基礎(chǔ)，根據(jù)專業(yè)特點(diǎn)和項(xiàng)目需求的不同而采取不同的項(xiàng)目立項(xiàng)評審方法和形式。

3.1　同行專家評議法

同行評議法為某一或若干領(lǐng)域的專家采用同一種評議標(biāo)準(zhǔn)，共同對涉及相關(guān)領(lǐng)域的某一事項(xiàng)進(jìn)行評價的活動 [20-21]，醫(yī)學(xué)科研立項(xiàng)評價也較多地應(yīng)用同行專家評議法。醫(yī)院科

·社區(qū)衛(wèi)生管理·

研管理機(jī)構(gòu)邀請?jiān)簝?nèi)有經(jīng)驗(yàn)的專家或院外專家對預(yù)申報(bào)課題進(jìn)行初步評審和篩選

同行評議是世界各國在做評價工作時應(yīng)用最多的方法之一，在科研評價中有著不可代替的作用。但有研究者認(rèn)為，同行專家評議法是以專家意見為主，存在一定的主觀性和片面性，若應(yīng)用不夠規(guī)范，則可能影響評審的客觀性和公平性

3.2　層次分析法

層次分析法（Analytic Hierarchy Process，AHP）是指通過一定的計(jì)算方法，基于判斷矩陣設(shè)定各個指標(biāo)權(quán)重。在不同的科研項(xiàng)目中，不同因素的權(quán)重不同

3.3　逼近理想解排序法

逼近理想解排序法（Technique for Order Preference by Similarity to Ideal Solution, TOPSIS）是近年來開始采用的一種項(xiàng)目立項(xiàng)篩選方法，該方法是在科研項(xiàng)目立項(xiàng)評價指標(biāo)體系與指標(biāo)權(quán)重值已定的情況下，根據(jù)特定的設(shè)計(jì)，建立評價模型，對各決策方案進(jìn)行排序比較，利用標(biāo)準(zhǔn)化后的數(shù)據(jù)矩陣，找出有限方案中的最優(yōu)方案，從而對科研項(xiàng)目進(jìn)行立項(xiàng)和選優(yōu)的篩選工作

3.4　網(wǎng)絡(luò)分析法

網(wǎng)絡(luò)分析法（Analytical Network Process，ANP），其基本思想是將系統(tǒng)內(nèi)各元素的關(guān)系用類似的網(wǎng)絡(luò)結(jié)構(gòu)表示。其理論的核心是充分考慮各層次之間以及同一層各元素之間的相互作用關(guān)系，對各方案進(jìn)行綜合評價并得出最佳決策

3.5　計(jì)算機(jī)信息關(guān)聯(lián)規(guī)則技術(shù)的應(yīng)用

關(guān)聯(lián)規(guī)則分析是數(shù)據(jù)挖掘技術(shù)中一項(xiàng)重要的功能，何煒

除了以上常用方法，項(xiàng)目評審還包括集對分析法、綜合指數(shù)法

立項(xiàng)指標(biāo)的建立是科研過程中，科學(xué)共同體對科研課題的標(biāo)準(zhǔn)達(dá)成的共識。在此基礎(chǔ)上，研究者不斷的修改完善科研的立項(xiàng)評審指標(biāo)，形成具體量化的分級評分指標(biāo)，體現(xiàn)著科研要求的提升和細(xì)化。立項(xiàng)評審指標(biāo)能夠?yàn)榭蒲泄ぷ髡叩墓ぷ鲙碇笇?dǎo)作用，在未來的研究中，科研申報(bào)指標(biāo)應(yīng)向著更為客觀和系統(tǒng)的方面發(fā)展，便于在今后的課題申報(bào)中，使科研項(xiàng)目工作者的研究和申報(bào)方向更為明確，篩選出更多有價值有意義的科研項(xiàng)目。