基于模糊層次分析法的學(xué)科建設(shè)項(xiàng)目后評價(jià)指標(biāo)體系

金 賽，魏法杰，張所鵬

北京航空航天大學(xué)，北京 100191

0 引言

學(xué)科建設(shè)就是指通過合理的規(guī)劃，對學(xué)科隊(duì)伍、基地、環(huán)境進(jìn)行改善，促進(jìn)學(xué)科發(fā)展，提升學(xué)科水平。加強(qiáng)學(xué)科建設(shè)不僅有利于調(diào)整和優(yōu)化學(xué)校的學(xué)科結(jié)構(gòu)和學(xué)科方向，充實(shí)師資隊(duì)伍，加強(qiáng)科研基地與科研環(huán)境建設(shè)，更有利于提高高層次創(chuàng)新型人才的培養(yǎng)質(zhì)量，增強(qiáng)所在高等學(xué)校的整體實(shí)力，帶動高等教育整體水平的提高。

1993年2月13日，國務(wù)院啟動“211工程”，概括來說就是面向21世紀(jì)，重點(diǎn)建設(shè)100所左右的高等學(xué)校和一批重點(diǎn)學(xué)科點(diǎn)。通過“九五”“十五”期間的建設(shè)，“211工程”的學(xué)校在辦學(xué)條件、隊(duì)伍建設(shè)、人才培養(yǎng)、科學(xué)研究和服務(wù)社會等方面的能力得到很大的提升。目前，“211”工程已步入三期階段，一些大學(xué)的重點(diǎn)學(xué)科已基本形成特色，一些還正處于起步和建設(shè)階段，總結(jié)和借鑒前期的經(jīng)驗(yàn)教訓(xùn)是當(dāng)前工作的重中之重。

項(xiàng)目后評價(jià)起步于20世紀(jì)30年代，現(xiàn)在已廣泛應(yīng)用于西方發(fā)達(dá)國家以及一些發(fā)展中國家的政府國會、國際金融組織和多邊機(jī)構(gòu)，但其應(yīng)用于“非工程項(xiàng)目”還處于探索階段。雖然國內(nèi)外均有機(jī)構(gòu)對學(xué)科進(jìn)行排名和評估，教育部也從1994年開始對部分工科院校進(jìn)行本科教學(xué)工作合格評價(jià)，國家自然科學(xué)基金也在一定程度上對科研項(xiàng)目進(jìn)行了后評價(jià)，但在適合我國國情的學(xué)科建設(shè)方面，尚無統(tǒng)一權(quán)威機(jī)構(gòu)或相關(guān)法規(guī)文件對學(xué)科建設(shè)項(xiàng)目進(jìn)行后評價(jià)。

本文擬結(jié)合國內(nèi)“211”工程一期二期開展情況構(gòu)建學(xué)科建設(shè)項(xiàng)目后評價(jià)體系，旨在深入剖析項(xiàng)目活動實(shí)踐的過程，透視項(xiàng)目預(yù)期目標(biāo)的達(dá)成情況，檢驗(yàn)項(xiàng)目的合理合法性，解讀項(xiàng)目成敗的關(guān)鍵，系統(tǒng)科學(xué)地總結(jié)經(jīng)驗(yàn)，提出改進(jìn)建議，從而有效避免失誤，為學(xué)科建設(shè)新項(xiàng)目建設(shè)提供可資借鑒的啟迪。

1 學(xué)科建設(shè)項(xiàng)目后評價(jià)指標(biāo)體系構(gòu)建原則

學(xué)科建設(shè)項(xiàng)目后評價(jià)指的是在學(xué)科建設(shè)項(xiàng)目已完成預(yù)定的建設(shè)計(jì)劃、接受審查驗(yàn)收之后3～5年內(nèi)，對學(xué)科建設(shè)的目的、建設(shè)過程、社會及環(huán)境影響、可持續(xù)性所進(jìn)行的系統(tǒng)的客觀的分析。構(gòu)建學(xué)科建設(shè)項(xiàng)目后評價(jià)指標(biāo)體系需要把握一致性、科學(xué)性、可行性和動態(tài)性的原則，具體分述如下：

1）一致性

項(xiàng)目后評價(jià)有別于項(xiàng)目前評估，主要由于在項(xiàng)目開始前已經(jīng)有了既定的標(biāo)準(zhǔn)，所以在進(jìn)行學(xué)科建設(shè)項(xiàng)目后評價(jià)工作時(shí)，需要保持與項(xiàng)目目標(biāo)的一致性。

2）科學(xué)性

學(xué)科建設(shè)項(xiàng)目有別于其他工程項(xiàng)目，許多產(chǎn)出價(jià)值無法用經(jīng)濟(jì)值來衡量，也就無法計(jì)算經(jīng)濟(jì)效益。因此，在進(jìn)行評價(jià)時(shí)，需要科學(xué)設(shè)置評價(jià)指標(biāo)，系統(tǒng)分析因果關(guān)系，使后評價(jià)結(jié)果全面客觀。

3）可行性

為保證學(xué)科建設(shè)項(xiàng)目后評價(jià)工作的切實(shí)開展，在指標(biāo)選取時(shí)需考慮是否能定量賦值，數(shù)據(jù)采集是否方便可行；在制定實(shí)施及操作流程時(shí)需考慮是否能據(jù)此正常開展工作。

4）動態(tài)性

學(xué)科建設(shè)是一項(xiàng)復(fù)雜的系統(tǒng)工程，不可能一蹴而就，且基于原有學(xué)科基礎(chǔ)之上不斷投入建設(shè)。因此，學(xué)科建設(shè)項(xiàng)目后評價(jià)工作應(yīng)該體現(xiàn)該學(xué)科通過一段時(shí)間的建設(shè)所取得的進(jìn)展，既要立足于高校學(xué)科當(dāng)前的實(shí)際，同時(shí)又要有開放、超前和創(chuàng)新意識。

2 后評價(jià)指標(biāo)體系

2.1 建立三級層次結(jié)構(gòu)

根據(jù)學(xué)科建設(shè)項(xiàng)目后評價(jià)體系的原則和邏輯框架，本課題采用三級層次型指標(biāo)體系對學(xué)科建設(shè)項(xiàng)目進(jìn)行后評價(jià)。將指標(biāo)體系分為目標(biāo)層、準(zhǔn)則層和指標(biāo)層3個(gè)層次，其中目標(biāo)層指標(biāo)即為學(xué)科建設(shè)項(xiàng)目后評價(jià)，指標(biāo)層圍繞準(zhǔn)則層進(jìn)行設(shè)置。結(jié)合學(xué)科建設(shè)項(xiàng)目的特點(diǎn)，根據(jù)邏輯框架分析的結(jié)果，通過大量搜集和整理與學(xué)科建設(shè)項(xiàng)目的有關(guān)的評價(jià)指標(biāo)設(shè)計(jì)案例，以及相關(guān)項(xiàng)目的后評價(jià)指標(biāo)設(shè)計(jì)案例，確定8個(gè)二級指標(biāo)：1）人才培養(yǎng)。碩、博士生培養(yǎng)質(zhì)量，從目的角度進(jìn)行后評價(jià)；2）師資隊(duì)伍。學(xué)術(shù)帶頭人和主要學(xué)術(shù)骨干的科研水平，從目的角度進(jìn)行后評價(jià)；3）學(xué)科結(jié)構(gòu)。學(xué)位、學(xué)科點(diǎn)設(shè)置，教材、課程改進(jìn)情況，從目的角度進(jìn)行后評價(jià)；4）條件建設(shè)?？蒲谢?、大型精密貴重儀器設(shè)備建設(shè)情況，從目的角度進(jìn)行后評價(jià)；5）科學(xué)研究。重大科研項(xiàng)目及對應(yīng)經(jīng)費(fèi)，科研成果及其轉(zhuǎn)化情況，從實(shí)施過程角度進(jìn)行后評價(jià)；6）學(xué)術(shù)活動。舉辦、參加重大學(xué)術(shù)會議情況，從實(shí)施過程角度進(jìn)行后評價(jià)；7）社會經(jīng)濟(jì)影響。項(xiàng)目對社會、經(jīng)濟(jì)、科技發(fā)展的影響；8）可持續(xù)發(fā)展：項(xiàng)目的可持續(xù)發(fā)展情況。

在三級指標(biāo)的選取時(shí)采用定性和定量相結(jié)合的分析方法。首先，根據(jù)現(xiàn)有資料結(jié)合確定的二級指標(biāo)和邏輯框架，主觀確定三級指標(biāo)，形成初步完整的指標(biāo)體系；其次，利用德爾菲法將該指標(biāo)體系以問卷調(diào)查方式問詢領(lǐng)域?qū)＜一蚱渌麑?shí)踐經(jīng)驗(yàn)豐富的相關(guān)人員，得到豐富的三級指標(biāo)庫；第三，進(jìn)行指標(biāo)的相關(guān)性分析，去除相關(guān)程度高的指標(biāo)，保持指標(biāo)之間的相對獨(dú)立性，同時(shí)保證該二級指標(biāo)下三級指標(biāo)群的完備性，從而篩選出較為合理的三級指標(biāo)；最后，將該指標(biāo)體系再次問詢專家，得出較為一致的結(jié)果，結(jié)合共性和差異化因素形成最終的學(xué)科建設(shè)項(xiàng)目評價(jià)指標(biāo)體系如表1所示。

表1 學(xué)科建設(shè)項(xiàng)目評價(jià)指標(biāo)體系

2.2 設(shè)定權(quán)重

1）列寫判斷矩陣

判斷矩陣表示針對上一層的某因素，本層次有關(guān)因素之間的相對重要性。判斷矩陣的元素反映了各因素間的相對重要程度，通常采用德爾菲法咨詢專家意見，采用1～9的標(biāo)度方法（見表3），構(gòu)建出各級指標(biāo)的判斷矩陣。

以準(zhǔn)則層為例：

（1）構(gòu)造初級判斷矩陣（aij）n×n，n為該層指標(biāo)的個(gè)數(shù)。

（2）將初級判斷矩陣歸一化，得到新的判斷矩陣（bij）n×n。

2）計(jì)算權(quán)重

（1）各行元素相加求和得。

（2）歸一化向量得權(quán)重ω。

3）一致性檢驗(yàn)

（1）計(jì)算最大特征根。

（2）進(jìn)行一致性檢驗(yàn)，平均一致性指標(biāo)RI見表4。

當(dāng)一致性檢驗(yàn)通過時(shí)，設(shè)定的權(quán)重有效。其他各層指標(biāo)按照這個(gè)方法計(jì)算可得，由此得出學(xué)科建設(shè)項(xiàng)目后評價(jià)項(xiàng)目指標(biāo)體系的權(quán)重表。

2.3 方案評價(jià)

每個(gè)指標(biāo)的當(dāng)量主要參考項(xiàng)目前評估確定的指標(biāo)、不同學(xué)科的行業(yè)標(biāo)準(zhǔn)，以及專家意見的統(tǒng)一結(jié)果。

采用問卷調(diào)查法，讓專家依據(jù)標(biāo)準(zhǔn)給各指標(biāo)賦值，得到該方案的模糊互補(bǔ)判斷矩陣R，將各指標(biāo)值加權(quán)計(jì)算，即可得到學(xué)科建設(shè)項(xiàng)目后評價(jià)結(jié)果S，在實(shí)例運(yùn)用時(shí)，最好同時(shí)評估兩個(gè)不同高校的相同學(xué)科，以此來排除外界因素，總結(jié)出學(xué)科建設(shè)的實(shí)際成效。

3 結(jié)論

本文將項(xiàng)目后評價(jià)理論及方法引入學(xué)科建設(shè)中，結(jié)合我國學(xué)科建設(shè)項(xiàng)目的特點(diǎn)，通過分析邏輯框架，采用模糊層次分析法建立后評價(jià)指標(biāo)體系。該體系可以用于對“211”工程一期、二期中已完成的重點(diǎn)建設(shè)學(xué)科進(jìn)行后評價(jià)，找出實(shí)際情況與預(yù)期目標(biāo)間的差異及其原因，以便提出應(yīng)對策略，為三期工程更好地開展指引方向。