• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于ANP和GRAP組合的區(qū)域創(chuàng)新能力評(píng)價(jià)指標(biāo)權(quán)重的最小偏差計(jì)算方法研究

    2015-12-15 03:19:55傅為忠李寧馨
    軟科學(xué) 2015年11期
    關(guān)鍵詞:評(píng)價(jià)

    傅為忠 李寧馨

    摘要:針對(duì)以往研究中忽略評(píng)價(jià)指標(biāo)之間復(fù)雜聯(lián)系和相互影響的不足,提出了一種基于網(wǎng)絡(luò)層次分析法和灰色關(guān)聯(lián)分析法相結(jié)合的評(píng)價(jià)指標(biāo)權(quán)重計(jì)算方法,其方法既能充分考慮受訪專家主觀認(rèn)知,又能反映出統(tǒng)計(jì)數(shù)據(jù)所隱含的客觀信息;采用最小偏差組合權(quán)重方法最大限度兼顧兩方面結(jié)果,比使用單一權(quán)重確定方法更加合理,并為關(guān)聯(lián)指標(biāo)權(quán)重計(jì)算問題提供了一個(gè)有效的解決辦法;最后以實(shí)例證明了該方法的科學(xué)性和可行性。

    關(guān)鍵詞:網(wǎng)絡(luò)層次分析法;灰色關(guān)聯(lián)分析法;最小偏差;區(qū)域創(chuàng)新能力;評(píng)價(jià);指標(biāo)權(quán)重

    DOI:10.13956/j.ss.1001-8409.2015.11.28

    中圖分類號(hào):F0615;F224 文獻(xiàn)標(biāo)識(shí)碼:A 文章編號(hào):1001-8409(2015)11-0130-05

    Abstract:Previous studies ignored the complex linkages and interaction between the evaluation indexes during the evaluation. This paper puts forward a new comprehensive index weight calculation method based on combination of AHP and GRAP. This method not only can fully take the subjective perception of experts interviewed into account, but also reflect the objective information that the statistical statistics implied. Then the weight calculation model with minimum deviation is built, which integrates the evaluating methods to the maximum degree. Thus, it is more reasonable than just using a single weight determination method. The method can provide an effective solution for the index weight calculation problems. Finally, an example is given to prove that it is both scientific and practical.

    Key words:ANP; GRAP; minimum deviation; regional innovation capability; evidence; index weight

    1引言

    科技發(fā)展與技術(shù)創(chuàng)新是衡量社會(huì)生產(chǎn)力發(fā)展水平的重要標(biāo)志,也是推動(dòng)社會(huì)發(fā)展和經(jīng)濟(jì)增長(zhǎng)的主要力量?,F(xiàn)代社會(huì)科技發(fā)展步伐不斷加快,國(guó)家與國(guó)家、地區(qū)與地區(qū)之間的競(jìng)爭(zhēng)越來越體現(xiàn)在區(qū)域創(chuàng)新能力的競(jìng)爭(zhēng)上。習(xí)近平總書記指出:“我國(guó)科技發(fā)展的方向就是創(chuàng)新、創(chuàng)新、再創(chuàng)新”[1]。然而我國(guó)各個(gè)地區(qū)長(zhǎng)期以來由于經(jīng)濟(jì)發(fā)展、地理位置、歷史條件、國(guó)家政策等方面的原因,在區(qū)域創(chuàng)新能力的分布上存在極大的不平衡性,因此科學(xué)而準(zhǔn)確地測(cè)定區(qū)域創(chuàng)新能力具有重要的現(xiàn)實(shí)意義。

    國(guó)內(nèi)外學(xué)者對(duì)區(qū)域創(chuàng)新能力進(jìn)行了相對(duì)豐富而深入的研究,并從多個(gè)不同角度提出對(duì)應(yīng)的區(qū)域創(chuàng)新能力指標(biāo)體系[2~6]。區(qū)域創(chuàng)新能力測(cè)度屬于多屬性決策問題,解決這類問題的一個(gè)關(guān)鍵步驟就是要確定屬性的權(quán)重信息[7]。確定評(píng)價(jià)體系中指標(biāo)權(quán)重的已有方法主要有:德爾菲法[8]、層次分析法[9]、主成分分析法[10]、CRITIC法[11]、粗糙集[12]、熵值法[13]等,這些方法或基于專家主觀經(jīng)驗(yàn),或基于客觀數(shù)據(jù)信息,或多或少都具有一定的局限和片面性。針對(duì)這個(gè)問題本文提出一種基于ANP和GRAP的區(qū)域創(chuàng)新能力評(píng)價(jià)指標(biāo)權(quán)重計(jì)算方法,這種方法不僅可以充分考慮到專家主觀知識(shí),還克服了AHP忽略指標(biāo)間相互聯(lián)系的不足;同時(shí)還可以利用灰色關(guān)聯(lián)分析法在處理少數(shù)據(jù)、貧信息、不確定性問題上的優(yōu)勢(shì)[14],我國(guó)現(xiàn)有統(tǒng)計(jì)數(shù)據(jù)十分有限,傳統(tǒng)數(shù)理方法難以奏效,而灰色系統(tǒng)理論方法能夠從有限的已知信息中得出令人較為滿意的結(jié)果。

    2 相關(guān)基礎(chǔ)理論

    21基于ANP的主觀指標(biāo)權(quán)重計(jì)算方法

    AHP(層次分析法)是最常用的主觀權(quán)重計(jì)算方法之一,一直以來都受到國(guó)內(nèi)外學(xué)者的青睞。但是這種方法將系統(tǒng)內(nèi)元素關(guān)系劃分為完全獨(dú)立的遞階層次結(jié)構(gòu),而忽略了他們之間相互依存和反饋的關(guān)系,與現(xiàn)實(shí)情況不符[15]。為了解決這個(gè)問題,1996年Satty在AHP方法的基礎(chǔ)上做出改進(jìn),提出了一種適應(yīng)復(fù)雜結(jié)構(gòu)的決策方法—ANP(網(wǎng)絡(luò)層次分析法)[16]。ANP將元素間的關(guān)系用網(wǎng)絡(luò)循環(huán)結(jié)構(gòu)來表示,能夠更為準(zhǔn)確地刻畫出事物之間的聯(lián)系,是一種更符合現(xiàn)實(shí)情況和更為有效的權(quán)重確定方法[17]。

    典型的ANP結(jié)構(gòu)包括控制層與網(wǎng)絡(luò)層兩部分,如圖1所示。設(shè)控制層中元素分別為B1,B2,……,BN;元素集分別為C1,C2,……,CN;元素集Ci包含元素ei1,ei2,……;eini(i=1,2,……,N)。控制層各準(zhǔn)則相互獨(dú)立,與AHP結(jié)構(gòu)相同,每個(gè)準(zhǔn)則相對(duì)于目標(biāo)的權(quán)重可由AHP方法求得。網(wǎng)絡(luò)層是存在著依賴和反饋的網(wǎng)絡(luò)結(jié)構(gòu),因此進(jìn)行元素兩兩比較時(shí)須采用間接優(yōu)勢(shì)度,即給定主準(zhǔn)則Bs,次準(zhǔn)則Cj中元素ejk,Ci中的元素兩兩比較相對(duì)于次準(zhǔn)則的影響程度構(gòu)成判斷矩陣。若該判斷矩陣通過一致性檢驗(yàn)則它的歸一化特征向量構(gòu)成矩陣Wij的第k列,最終可得到在Bs準(zhǔn)則下的超矩陣W=(Wij)。同樣方法可求出在準(zhǔn)則Bs準(zhǔn)則下元素組權(quán)重矩陣A,再計(jì)算加權(quán)超矩陣W=A×W=(aij×Wij),最后根據(jù)加權(quán)超矩陣構(gòu)造極限超矩陣,再由極限超矩陣得出權(quán)重。

    22 基于灰色關(guān)聯(lián)分析的客觀指標(biāo)權(quán)重計(jì)算方法

    灰色系統(tǒng)理論[18]是由我國(guó)學(xué)者鄧聚龍于1982年創(chuàng)立的不確定性系統(tǒng)研究方法,灰色關(guān)聯(lián)分析是灰色系統(tǒng)理論的主要分支之一,它是一種新的量化分析系統(tǒng)動(dòng)態(tài)過程的因素分析方法?;疑P(guān)聯(lián)分析的基本思想是根據(jù)因素序列曲線的相似程度來判斷其關(guān)聯(lián)程度是否緊密,若曲線相似度越大,則因素關(guān)聯(lián)度越大;反之越小[19]。

    應(yīng)用灰色關(guān)聯(lián)分析方法確定指標(biāo)權(quán)重首先要選定反映區(qū)域創(chuàng)新系統(tǒng)行為特征的測(cè)度指標(biāo)。研究表明,專利已成為科技的核心和最具有經(jīng)濟(jì)價(jià)值部分[20],也是科技發(fā)展的重要指示器[21]。李習(xí)保[22]和漆艷茹[20]等學(xué)者都選擇專利數(shù)據(jù)來作為衡量區(qū)域創(chuàng)新能力的測(cè)度指標(biāo),并得出了較為科學(xué)和可信的結(jié)論。因此本文選定發(fā)明專利申請(qǐng)量作為反映區(qū)域創(chuàng)新系統(tǒng)行為特征的指標(biāo),同時(shí)由于從研發(fā)投入到專利申請(qǐng)之間存在時(shí)滯[20],故將滯后期3年內(nèi)的指標(biāo)數(shù)據(jù)都納入考慮范圍。

    基于GRAP方法求解區(qū)域創(chuàng)新能力指標(biāo)權(quán)重的過程可以描述如下:

    (1)計(jì)算各序列始點(diǎn)零化像

    將專利申請(qǐng)量設(shè)為母因素e0,選擇初值化算子將母因素和子因素原始數(shù)據(jù)作無量綱化處理。設(shè)因素ei的原始數(shù)據(jù)行為數(shù)列為

    23基于最小偏差的組合指標(biāo)權(quán)重計(jì)算方法

    利用以上所述ANP和GRAP分別計(jì)算出對(duì)應(yīng)的主、客觀指標(biāo)權(quán)重以后,對(duì)得到的結(jié)果進(jìn)行簡(jiǎn)單線性加權(quán),最后得到的組合指標(biāo)權(quán)重即:

    wif=(1-u)wia+uwigi=1,2, ……,n(6)

    其中wif表示第i項(xiàng)指標(biāo)的綜合權(quán)重,wia表示第i項(xiàng)指標(biāo)用ANP方法求出的主觀權(quán)重,wig表示第i項(xiàng)指標(biāo)用GRAP方法求出的客觀權(quán)重。u表示客觀權(quán)重在最后的綜合權(quán)重中所占的比例,這里u一般根據(jù)決策者主觀偏好來確定。為了兼顧權(quán)重指標(biāo)決策過程中的主客觀性,本文采用基于最小偏差的組合賦權(quán)法來確定最終的綜合權(quán)重。

    3實(shí)例分析

    基于以上所述權(quán)重計(jì)算方法,研究對(duì)我國(guó)區(qū)域創(chuàng)新能力評(píng)價(jià)指標(biāo)賦予權(quán)重的問題。以我國(guó)31個(gè)省級(jí)行政區(qū)2012年的區(qū)域創(chuàng)新能力為研究對(duì)象,先利用ANP方法計(jì)算主觀權(quán)重,再利用擴(kuò)展灰色關(guān)聯(lián)方法計(jì)算客觀權(quán)重,最后綜合這兩種方法得出最終權(quán)重結(jié)果。

    31主觀權(quán)重計(jì)算

    本文選取我國(guó)31個(gè)省級(jí)行政區(qū)作為研究對(duì)象計(jì)算區(qū)域創(chuàng)新能力評(píng)價(jià)指標(biāo)權(quán)重信息。根據(jù)區(qū)域創(chuàng)新能力的內(nèi)涵及特點(diǎn),從三個(gè)維度B={區(qū)域創(chuàng)新投入能力,區(qū)域創(chuàng)新環(huán)境能力,區(qū)域創(chuàng)新產(chǎn)出能力}來評(píng)價(jià)區(qū)域創(chuàng)新能力,其中區(qū)域投入能力元素集C1={R&D經(jīng)費(fèi)內(nèi)部支出e11,地方財(cái)政科學(xué)技術(shù)支出e12,各地區(qū)研究與開發(fā)機(jī)構(gòu)R&D課題數(shù)e13},區(qū)域環(huán)境能力元素集C2={普通高等學(xué)校數(shù)量e21,地區(qū)生產(chǎn)總值e22,城鎮(zhèn)居民年人均可支配收入e23},區(qū)域產(chǎn)出能力元素集C3={各地區(qū)高技術(shù)產(chǎn)業(yè)主營(yíng)業(yè)務(wù)收入e31,規(guī)模以上企業(yè)新產(chǎn)品銷售收入e32,SCI收錄科技論文數(shù)e33}。

    (1)建立ANP模型

    結(jié)合該區(qū)域創(chuàng)新能力體系中各指標(biāo)之間的相互關(guān)系,應(yīng)用Super Decisions軟件來構(gòu)建區(qū)域創(chuàng)新能力的ANP結(jié)構(gòu)圖(如圖2)。

    (2)計(jì)算超矩陣、加權(quán)超矩陣和極限矩陣

    這一步的核心步驟是建立判斷矩陣,本文采用1~9標(biāo)度問卷法來比較指標(biāo)間重要性。當(dāng)所有的比較都完成之后就可以得到超矩陣、加權(quán)超矩陣和極限矩陣。

    (3)確定各指標(biāo)權(quán)重信息

    經(jīng)上述兩步操作直接得到各指標(biāo)對(duì)應(yīng)的二級(jí)權(quán)重和極限權(quán)重,極限權(quán)重就是該指標(biāo)相對(duì)于目標(biāo)變量的最終權(quán)重(如圖3)。

    32客觀權(quán)重計(jì)算

    本文選取全國(guó)31個(gè)省2012年區(qū)域創(chuàng)新能力為樣本,指標(biāo)數(shù)據(jù)全部來源于《中國(guó)統(tǒng)計(jì)年鑒》和《中國(guó)科技統(tǒng)計(jì)年鑒》等國(guó)家權(quán)威部門發(fā)布的相關(guān)年鑒公報(bào)。因篇幅限制略去具體數(shù)據(jù),下同。

    (1)計(jì)算各序列始點(diǎn)零化像

    按照式(1)將母因素和子因素原始數(shù)據(jù)作無量綱化處理,初值化處理后得到無量綱數(shù)據(jù)表。

    (2)計(jì)算灰色關(guān)聯(lián)系數(shù)

    分別根據(jù)式(2)和式(3)計(jì)算絕對(duì)差Δmax和Δmin,得到Δmin=0,Δmax=492。根據(jù)式(4)取ρ=05計(jì)算出關(guān)聯(lián)系數(shù)序列表。

    (3)計(jì)算灰色關(guān)聯(lián)度

    根據(jù)式(5)計(jì)算各子因素與母因素的灰色關(guān)聯(lián)度,最終計(jì)算出的關(guān)聯(lián)度如表1所示。

    33綜合主客觀確定組合權(quán)重

    通過ANP和GRAP分別獲得每個(gè)指標(biāo)i對(duì)應(yīng)的主觀權(quán)重wia和客觀權(quán)重wig,把計(jì)算結(jié)果代入方程組(12)中得到方程組(14):

    (∑ni=1μ21i)α1-(∑ni=1μ2iμ1i)α2+λ2=0

    -(∑ni=1μ1iμ2i)α1+(∑ni=1μ22i)α2+λ2=0

    α1+α2=0(14)

    代入數(shù)據(jù)即可求得α*=(α1,α2)=(04539,05461),那么

    wif=04539wia+05461wig,從而得到最終的綜合權(quán)重計(jì)算結(jié)果如表2所示。

    從表2看出:采用ANP方法得到的主觀權(quán)重過于集中在區(qū)域創(chuàng)新環(huán)境能力,而忽略了區(qū)域創(chuàng)新投入能力和區(qū)域創(chuàng)新產(chǎn)出能力的重要性;采用GRAP方法得到的客觀權(quán)重區(qū)分度較小,不能有效地區(qū)分各個(gè)指標(biāo)的重要性權(quán)重,很可能會(huì)掩蓋重要性較強(qiáng)的指標(biāo)應(yīng)該賦予的權(quán)重。而本文提出的綜合權(quán)重確定方法可以規(guī)避兩種方法的不足,最大限度地兼顧主觀權(quán)重和客觀權(quán)重賦權(quán)結(jié)果,因此比采取單一的GRAP方法確定權(quán)重更加合理、可信。

    4結(jié)論

    通過以上分析,得出如下結(jié)論:

    (1)以ANP方法計(jì)算出的主觀權(quán)重克服了AHP方法忽視指標(biāo)間聯(lián)系和反饋關(guān)系的不足,更加符合實(shí)際情況;以GRAP方法計(jì)算出的客觀權(quán)重可以充分有限地統(tǒng)計(jì)數(shù)據(jù),計(jì)算指標(biāo)間的關(guān)聯(lián)度進(jìn)而得出他們的客觀權(quán)重。但是單一的依靠ANP方法或者GRAP方法過于片面,只有將他們以一種恰當(dāng)?shù)姆绞浇Y(jié)合起來,綜合主觀和客觀兩方面才能全面地確定指標(biāo)權(quán)重。本文采用最小偏差組合偏差的方法確定ANP和GRAP方法的權(quán)重,兼顧兩種方法的優(yōu)點(diǎn)和克服各自的不足。因此,基于ANP和GRAP的組合權(quán)重計(jì)算方法具有較大的理論價(jià)值。

    (2)在實(shí)際應(yīng)用基于ANP和GRAP方法的組合權(quán)重計(jì)算方法時(shí),可以利用專門的軟件Super Decisions和Matlab在計(jì)算機(jī)上輕松實(shí)現(xiàn),這種方法在大數(shù)據(jù)樣本下也可以保持較高的計(jì)算效率,因此,基于ANP和GRAP的組合權(quán)重計(jì)算方法具有較好的運(yùn)用前景和推廣價(jià)值。

    5結(jié)語

    本文針對(duì)以往區(qū)域創(chuàng)新能力評(píng)價(jià)研究中只注重主觀權(quán)重或只注重客觀權(quán)重的缺點(diǎn),提出一種基于ANP和GRAP相結(jié)合的主客觀權(quán)重計(jì)算方法,將ANP和GRAP結(jié)合起來確定區(qū)域創(chuàng)新能力指標(biāo)權(quán)重是一個(gè)新的嘗試。這種方法不僅有一定的創(chuàng)新性,也具有較強(qiáng)的可操作性,易于在計(jì)算機(jī)上實(shí)現(xiàn)。需要指出的是,本文提出的權(quán)重計(jì)算方法不僅適用于區(qū)域創(chuàng)新能力指標(biāo)權(quán)重,同時(shí)也可廣泛適用于其他評(píng)價(jià)問題中關(guān)聯(lián)指標(biāo)的權(quán)重計(jì)算。另外,本文是將ANP和GRAP方法組合起來用最小偏差原則確定權(quán)重,也可以根據(jù)實(shí)際情況將多種權(quán)重計(jì)算方法以相同方法結(jié)合起來確定權(quán)重。最后選用2012年的區(qū)域創(chuàng)新能力權(quán)重計(jì)算為實(shí)例,確定每個(gè)指標(biāo)對(duì)應(yīng)的權(quán)重,進(jìn)一步說明了本文提出的基于ANP-GRAP的指標(biāo)權(quán)重計(jì)算方法是一種科學(xué)有效而全面的權(quán)重計(jì)算方法。

    參考文獻(xiàn):

    [1]習(xí)近平.在中國(guó)科學(xué)院第十七次院士大會(huì)、中國(guó)工程院第十二次院士大會(huì)上的講話[N].人民日?qǐng)?bào),2014-6-10.

    [2]Antonio K W, Lau William Lo.Regional Innovation System,Absorptive Capacity and Innovation Performance:An Empirical Study[J].Technological Forecasting Social Change,2015(92):99-114.

    [3]Tao Huaye,Sui Jinxue,Liu Hui etc.Synthetic Evaluation of Science and Technical Innovation Ability Based on Extension[A].Jiang Y.Modelling and SimulationWorld Academic Union[C].Manchester:World Acadamy Press,2009523-530.

    [4]Shu Liang Zhao,Wei Song,Dong Yun Zhu,Xiao Bao Peng,Wenjing Cai.Evaluating Chinas Regional Innovation Capacity from the Innovation Actors Perspective——An AHP and Cluster Analytical Approach[J].Technology in Society,2013,3(35):182-190.

    [5]Rinaldo Evangelista,Simona Iammarino,Valeria Mastrostefano,Alberto Silvani.Measuring the Regional Dimension of Innovation,Lessons from the Italian Innovation Survey[J].Technovation,2001,11(21):733-745.

    [6]柳卸林,胡志堅(jiān).中國(guó)區(qū)域創(chuàng)新能力的分布與成因[J].科學(xué)學(xué)研究,2002(5):550-556.

    [7]劉業(yè)政,徐德鵬,姜元春.多屬性群決策中權(quán)重自適應(yīng)調(diào)整的方法[J].系統(tǒng)工程與電子技術(shù),2007,29(1):45-48.

    [8]徐磊.技術(shù)預(yù)見方法的探索與實(shí)踐思考——基于德爾菲法和技術(shù)路線圖的對(duì)接[J].科學(xué)學(xué)與科學(xué)技術(shù)管理,2011,32(11):37-48.

    [9]賓光富,李學(xué)軍,DHILLON BalbirS,楚萬文.基于模糊層次分析法的設(shè)備狀態(tài)系統(tǒng)量化評(píng)價(jià)新方法[J].系統(tǒng)工程理論與實(shí)踐,2010,30(4):744-750.

    [10]鈔小靜,任保平.中國(guó)經(jīng)濟(jì)增長(zhǎng)質(zhì)量的時(shí)序變化與地區(qū)差異分析[J].經(jīng)濟(jì)研究,2011,(4):26-40.

    [11]曹瑋,王瑛.基于改進(jìn)CRITIC-CPM的科技獎(jiǎng)勵(lì)評(píng)價(jià)模型[J].科學(xué)學(xué)與科學(xué)技術(shù)管理,2012,33(2):17-21.

    [12]張曉明.基于粗糙集——AHM的裝備制造業(yè)企業(yè)創(chuàng)新能力評(píng)價(jià)指標(biāo)權(quán)重計(jì)算研究[J].中國(guó)軟科學(xué),2014,6:151-158.

    [13]章穗,張梅,遲國(guó)泰.基于熵權(quán)法的科學(xué)技術(shù)評(píng)價(jià)模型及其實(shí)證研究[J].管理學(xué)報(bào),2010,7(1):34-42.

    [14]劉思峰,黨耀國(guó),方志耕,謝乃明,等.灰色系統(tǒng)理論及其應(yīng)用(第五版)[M].北京:科學(xué)出版社,2010.

    [15]孫宏才,田平,王蓮芬.網(wǎng)絡(luò)層次分析法與決策科學(xué)[M].北京:國(guó)防工業(yè)出版社,2011.

    [16]Satty T L.Decision Making with Dependence and Feedback[M].RWS Publication,1996.

    [17]Ozer Uygun, Hasan Kacamak, ünal Atakan Kahraman.An Integrated Dematel and Fuzzy Anp Techniques for Evaluation and Selection of Outsourcing Provider for a Telecommunication Company[J].Computers Industrial Engineering,2015(86):137-146.

    [18]Deng Ju Long.The Control Problems of Grey Systems[J].System Control Letters, 1982,1(5):288-294.

    [19]Cai Fu, Xiang Gao, Ming Liu, et al.Grap:Grey Risk Assessment Based on Projection in Ad Hoc Networks[J].Journal of Parallel and Distributed Computing,2011,71(9):1249-1260.

    [20]漆艷茹,劉云,侯媛媛.基于專利影響因素分析的區(qū)域創(chuàng)新能力比較研究[J].中國(guó)管理科學(xué),2013,11(21):594-599.

    [21]王燕玲.基于專利分析的行業(yè)技術(shù)創(chuàng)新研究[J].科學(xué)學(xué)研究,2009,(27):622-628.

    [22]李習(xí)保.中國(guó)區(qū)域創(chuàng)新能力變遷的實(shí)證分析:基于創(chuàng)新系統(tǒng)的觀點(diǎn)[J].管理世界,2007,12:18-30.

    [23]劉德海,于倩,馬曉南,等.基于最小偏差組合權(quán)重的突發(fā)事件應(yīng)急能力評(píng)價(jià)模型[J].中國(guó)管理科學(xué),2014,11(22):79-86.

    (責(zé)任編輯:王惠萍)

    猜你喜歡
    評(píng)價(jià)
    SBR改性瀝青的穩(wěn)定性評(píng)價(jià)
    石油瀝青(2021年4期)2021-10-14 08:50:44
    中藥治療室性早搏系統(tǒng)評(píng)價(jià)再評(píng)價(jià)
    自制C肽質(zhì)控品及其性能評(píng)價(jià)
    寫作交流與評(píng)價(jià):詞的欣賞
    基于Moodle的學(xué)習(xí)評(píng)價(jià)
    關(guān)于項(xiàng)目后評(píng)價(jià)中“專項(xiàng)”后評(píng)價(jià)的探討
    HBV-DNA提取液I的配制和應(yīng)用評(píng)價(jià)
    有效評(píng)價(jià)讓每朵花兒都綻放
    模糊數(shù)學(xué)評(píng)價(jià)法在水質(zhì)評(píng)價(jià)中的應(yīng)用
    治淮(2013年1期)2013-03-11 20:05:18
    保加利亞轉(zhuǎn)軌20年評(píng)價(jià)
    一区二区三区激情视频| 亚洲 国产 在线| 人妻 亚洲 视频| 国产成人精品在线电影| 最新的欧美精品一区二区| 国产成人av教育| 三级毛片av免费| 熟女少妇亚洲综合色aaa.| 免费在线观看日本一区| 欧美日韩黄片免| 国产欧美日韩一区二区三 | 91老司机精品| 999精品在线视频| 一区二区日韩欧美中文字幕| 亚洲国产精品一区二区三区在线| 大码成人一级视频| 手机成人av网站| 国产野战对白在线观看| 男女之事视频高清在线观看| 99热网站在线观看| 亚洲专区字幕在线| 丁香六月天网| 国产成人精品无人区| 国产成人欧美在线观看 | 国产99久久九九免费精品| 国产日韩欧美视频二区| 国产欧美日韩一区二区三 | 欧美 亚洲 国产 日韩一| 乱人伦中国视频| 大香蕉久久网| 精品一区二区三区四区五区乱码| 亚洲成人手机| 国产亚洲精品第一综合不卡| 日本a在线网址| 桃花免费在线播放| 不卡av一区二区三区| 日本91视频免费播放| 90打野战视频偷拍视频| 首页视频小说图片口味搜索| 老司机影院成人| 午夜影院在线不卡| 亚洲激情五月婷婷啪啪| 欧美中文综合在线视频| 777久久人妻少妇嫩草av网站| 亚洲第一av免费看| 久久人妻熟女aⅴ| 国产97色在线日韩免费| 五月天丁香电影| 免费少妇av软件| 少妇裸体淫交视频免费看高清 | 成人国产一区最新在线观看| 亚洲性夜色夜夜综合| 19禁男女啪啪无遮挡网站| 国产日韩一区二区三区精品不卡| 久热爱精品视频在线9| h视频一区二区三区| 69av精品久久久久久 | 啦啦啦在线免费观看视频4| 久久久久久久大尺度免费视频| 欧美黑人欧美精品刺激| 人人妻人人澡人人看| 99国产精品99久久久久| 日韩制服丝袜自拍偷拍| 黄频高清免费视频| 黑人猛操日本美女一级片| 精品福利观看| 亚洲成av片中文字幕在线观看| 久久九九热精品免费| 亚洲情色 制服丝袜| 动漫黄色视频在线观看| 欧美日韩中文字幕国产精品一区二区三区 | 日韩精品免费视频一区二区三区| 免费人妻精品一区二区三区视频| 天堂8中文在线网| 999久久久精品免费观看国产| 亚洲av美国av| 国产精品秋霞免费鲁丝片| 亚洲av片天天在线观看| 精品一区二区三卡| 嫁个100分男人电影在线观看| 国产精品一区二区免费欧美 | 日本vs欧美在线观看视频| 99九九在线精品视频| 午夜福利视频在线观看免费| 国产成人精品无人区| 午夜久久久在线观看| 欧美精品亚洲一区二区| 十八禁网站网址无遮挡| 精品一区二区三区四区五区乱码| 夜夜骑夜夜射夜夜干| 国产又爽黄色视频| a在线观看视频网站| 久久久久久久久免费视频了| 女人高潮潮喷娇喘18禁视频| 亚洲国产欧美一区二区综合| 中文字幕最新亚洲高清| 嫩草影视91久久| 午夜福利在线免费观看网站| 国产精品 欧美亚洲| 亚洲欧美日韩另类电影网站| 视频区欧美日本亚洲| 亚洲国产av影院在线观看| 欧美乱码精品一区二区三区| 美女中出高潮动态图| 亚洲国产欧美一区二区综合| 国精品久久久久久国模美| 嫩草影视91久久| 免费观看人在逋| 欧美日韩亚洲国产一区二区在线观看 | 亚洲美女黄色视频免费看| 久久99热这里只频精品6学生| 纯流量卡能插随身wifi吗| 性高湖久久久久久久久免费观看| 夜夜夜夜夜久久久久| 国产精品久久久久成人av| 精品国产一区二区三区四区第35| 亚洲激情五月婷婷啪啪| 丝袜美足系列| 国产精品久久久人人做人人爽| 亚洲人成电影观看| 王馨瑶露胸无遮挡在线观看| 久热这里只有精品99| 国产成人影院久久av| 黄色a级毛片大全视频| 欧美+亚洲+日韩+国产| 大陆偷拍与自拍| av又黄又爽大尺度在线免费看| 日韩 亚洲 欧美在线| 一本一本久久a久久精品综合妖精| 欧美人与性动交α欧美精品济南到| 中文字幕高清在线视频| 两个人免费观看高清视频| 超色免费av| 亚洲精品av麻豆狂野| 亚洲成人免费av在线播放| 久久99一区二区三区| 中文字幕最新亚洲高清| videos熟女内射| 天天操日日干夜夜撸| 中文字幕最新亚洲高清| 99久久人妻综合| 国产成人精品无人区| 丰满迷人的少妇在线观看| 18禁观看日本| 国产福利在线免费观看视频| 精品国产乱子伦一区二区三区 | 亚洲精品国产一区二区精华液| 秋霞在线观看毛片| 91av网站免费观看| 日本av手机在线免费观看| av线在线观看网站| 视频在线观看一区二区三区| 亚洲国产欧美网| 啦啦啦免费观看视频1| 久久久久国内视频| 精品国产国语对白av| 欧美97在线视频| 欧美亚洲 丝袜 人妻 在线| 一级毛片精品| 美女中出高潮动态图| 久久精品亚洲av国产电影网| 午夜福利影视在线免费观看| 热99久久久久精品小说推荐| 视频区图区小说| 老司机深夜福利视频在线观看 | 亚洲中文日韩欧美视频| h视频一区二区三区| 国产欧美日韩一区二区精品| 午夜激情av网站| www.999成人在线观看| 女人精品久久久久毛片| 国产无遮挡羞羞视频在线观看| 人人妻人人澡人人爽人人夜夜| 一级片'在线观看视频| 一区二区三区激情视频| 亚洲一码二码三码区别大吗| 国产成人精品久久二区二区免费| 亚洲成人国产一区在线观看| 老司机午夜十八禁免费视频| 国产亚洲一区二区精品| 亚洲欧美一区二区三区黑人| 男男h啪啪无遮挡| 免费少妇av软件| 日本av免费视频播放| 精品久久久精品久久久| 国产欧美日韩一区二区三 | 欧美国产精品va在线观看不卡| 欧美午夜高清在线| 老司机午夜福利在线观看视频 | 国产野战对白在线观看| 黄片大片在线免费观看| 亚洲一区中文字幕在线| 人人妻人人澡人人爽人人夜夜| 国产激情久久老熟女| 女人被躁到高潮嗷嗷叫费观| 99国产精品一区二区蜜桃av | 欧美大码av| 99国产极品粉嫩在线观看| 欧美精品一区二区大全| 美女福利国产在线| 一本一本久久a久久精品综合妖精| 欧美黄色淫秽网站| 12—13女人毛片做爰片一| 男女之事视频高清在线观看| 国产成人a∨麻豆精品| 亚洲精品久久成人aⅴ小说| 精品熟女少妇八av免费久了| 一级黄色大片毛片| 黄频高清免费视频| 99久久综合免费| 在线永久观看黄色视频| 中文精品一卡2卡3卡4更新| 另类精品久久| 肉色欧美久久久久久久蜜桃| 制服人妻中文乱码| 在线观看人妻少妇| 日本av免费视频播放| 免费日韩欧美在线观看| 成年人免费黄色播放视频| 亚洲第一欧美日韩一区二区三区 | 日本91视频免费播放| 91国产中文字幕| 亚洲自偷自拍图片 自拍| 日本精品一区二区三区蜜桃| 一级毛片电影观看| 极品少妇高潮喷水抽搐| 久久精品久久久久久噜噜老黄| a 毛片基地| 日韩熟女老妇一区二区性免费视频| 欧美国产精品一级二级三级| 99国产极品粉嫩在线观看| 免费人妻精品一区二区三区视频| 欧美日韩精品网址| 国产伦人伦偷精品视频| 国产成人a∨麻豆精品| 国产精品国产av在线观看| 操美女的视频在线观看| 狠狠精品人妻久久久久久综合| 亚洲av欧美aⅴ国产| 国产成人a∨麻豆精品| 国产欧美日韩一区二区三 | 韩国精品一区二区三区| 这个男人来自地球电影免费观看| 美女国产高潮福利片在线看| 美女脱内裤让男人舔精品视频| 9色porny在线观看| 80岁老熟妇乱子伦牲交| 婷婷丁香在线五月| 91成人精品电影| 久久久国产成人免费| 国产精品99久久99久久久不卡| 人人妻人人澡人人爽人人夜夜| 精品第一国产精品| 两个人免费观看高清视频| 色婷婷av一区二区三区视频| 男人舔女人的私密视频| 男人操女人黄网站| 激情视频va一区二区三区| 男女之事视频高清在线观看| 天天躁日日躁夜夜躁夜夜| 亚洲国产精品999| 久久久久国产一级毛片高清牌| 久久久久久久国产电影| 国产熟女午夜一区二区三区| 又紧又爽又黄一区二区| 精品国产乱码久久久久久男人| 一级毛片女人18水好多| 高清视频免费观看一区二区| 成人三级做爰电影| 午夜视频精品福利| 欧美精品一区二区免费开放| 欧美成人午夜精品| 在线看a的网站| 亚洲成人手机| 国产一区二区激情短视频 | 成在线人永久免费视频| 黄色毛片三级朝国网站| 亚洲精品美女久久av网站| 国产人伦9x9x在线观看| 人妻 亚洲 视频| 中文字幕色久视频| 在线观看人妻少妇| 亚洲免费av在线视频| 飞空精品影院首页| 成年人黄色毛片网站| 日韩 亚洲 欧美在线| 免费观看av网站的网址| 久久精品国产综合久久久| 老汉色av国产亚洲站长工具| 黄片播放在线免费| 热99久久久久精品小说推荐| 国产成人一区二区三区免费视频网站| 咕卡用的链子| 日韩视频在线欧美| 日韩大码丰满熟妇| 国产精品免费视频内射| 亚洲精华国产精华精| av不卡在线播放| 午夜福利免费观看在线| 91精品伊人久久大香线蕉| 高清视频免费观看一区二区| 久久综合国产亚洲精品| 欧美老熟妇乱子伦牲交| 正在播放国产对白刺激| 一区二区日韩欧美中文字幕| 亚洲国产中文字幕在线视频| 国产成人系列免费观看| 精品欧美一区二区三区在线| 欧美av亚洲av综合av国产av| 日韩大片免费观看网站| 男女午夜视频在线观看| 亚洲av男天堂| 97在线人人人人妻| 国产一区二区三区av在线| 日韩免费高清中文字幕av| 亚洲成人国产一区在线观看| 欧美国产精品一级二级三级| 国产精品久久久人人做人人爽| 国产亚洲欧美精品永久| 日韩电影二区| √禁漫天堂资源中文www| 欧美精品高潮呻吟av久久| 日本一区二区免费在线视频| 男人舔女人的私密视频| 国产精品秋霞免费鲁丝片| 亚洲国产成人一精品久久久| 国产欧美日韩综合在线一区二区| 纯流量卡能插随身wifi吗| 亚洲熟女精品中文字幕| 少妇粗大呻吟视频| 国产极品粉嫩免费观看在线| 男人舔女人的私密视频| 久久精品久久久久久噜噜老黄| 老汉色∧v一级毛片| 桃红色精品国产亚洲av| 亚洲精品在线美女| 亚洲一卡2卡3卡4卡5卡精品中文| 热re99久久精品国产66热6| 亚洲精品自拍成人| 亚洲欧美激情在线| 在线观看免费日韩欧美大片| 热re99久久精品国产66热6| 欧美亚洲 丝袜 人妻 在线| 少妇 在线观看| av超薄肉色丝袜交足视频| 亚洲午夜精品一区,二区,三区| 亚洲欧美一区二区三区黑人| 曰老女人黄片| 亚洲国产欧美一区二区综合| 秋霞在线观看毛片| 成人手机av| 在线观看www视频免费| 桃红色精品国产亚洲av| 丰满饥渴人妻一区二区三| 麻豆av在线久日| 老熟妇乱子伦视频在线观看 | 女人爽到高潮嗷嗷叫在线视频| 国产男女超爽视频在线观看| 夜夜骑夜夜射夜夜干| 999精品在线视频| 免费人妻精品一区二区三区视频| 国产无遮挡羞羞视频在线观看| 国产色视频综合| 啦啦啦啦在线视频资源| 一区在线观看完整版| 黑人巨大精品欧美一区二区mp4| 亚洲精品自拍成人| 侵犯人妻中文字幕一二三四区| 欧美精品一区二区大全| 黑人巨大精品欧美一区二区mp4| 亚洲av国产av综合av卡| 亚洲熟女毛片儿| 久久性视频一级片| 午夜视频精品福利| 少妇人妻久久综合中文| 乱人伦中国视频| 日本vs欧美在线观看视频| 女人高潮潮喷娇喘18禁视频| 大码成人一级视频| 国产日韩欧美在线精品| svipshipincom国产片| 久久亚洲精品不卡| 国产精品一区二区在线不卡| 一二三四社区在线视频社区8| 黄片播放在线免费| www.999成人在线观看| 久久青草综合色| 美女高潮到喷水免费观看| 亚洲中文日韩欧美视频| 免费女性裸体啪啪无遮挡网站| 不卡av一区二区三区| 国产免费福利视频在线观看| 国产精品熟女久久久久浪| 69av精品久久久久久 | 18禁国产床啪视频网站| 久久人人爽av亚洲精品天堂| 国产欧美亚洲国产| 搡老熟女国产l中国老女人| 国产精品一区二区在线观看99| 在线观看舔阴道视频| 免费女性裸体啪啪无遮挡网站| 欧美精品啪啪一区二区三区 | 女人爽到高潮嗷嗷叫在线视频| 精品国产乱码久久久久久男人| 亚洲va日本ⅴa欧美va伊人久久 | 99国产精品一区二区三区| 男女下面插进去视频免费观看| 美女国产高潮福利片在线看| 亚洲人成电影观看| 亚洲精品国产av蜜桃| 99久久国产精品久久久| 丝袜喷水一区| 欧美另类一区| 欧美黑人欧美精品刺激| 色播在线永久视频| 国产成人精品久久二区二区91| 水蜜桃什么品种好| 亚洲美女黄色视频免费看| 午夜精品国产一区二区电影| 欧美黄色淫秽网站| 久热这里只有精品99| 亚洲国产精品一区三区| 成人免费观看视频高清| 两性午夜刺激爽爽歪歪视频在线观看 | 一本综合久久免费| 欧美在线一区亚洲| 黄网站色视频无遮挡免费观看| 久9热在线精品视频| 丝瓜视频免费看黄片| 99热网站在线观看| 亚洲精品久久成人aⅴ小说| 国产精品一区二区在线不卡| av有码第一页| 夜夜骑夜夜射夜夜干| 亚洲黑人精品在线| 国产亚洲一区二区精品| 久久久精品国产亚洲av高清涩受| 一本久久精品| 国产主播在线观看一区二区| 91老司机精品| 99精国产麻豆久久婷婷| 黄色视频在线播放观看不卡| 91国产中文字幕| 天天躁夜夜躁狠狠躁躁| 成年女人毛片免费观看观看9 | 秋霞在线观看毛片| 免费在线观看黄色视频的| 91成人精品电影| 法律面前人人平等表现在哪些方面 | 女人精品久久久久毛片| 久久久精品免费免费高清| 久久国产精品人妻蜜桃| 视频区欧美日本亚洲| 欧美 亚洲 国产 日韩一| 中亚洲国语对白在线视频| 超碰97精品在线观看| 国产极品粉嫩免费观看在线| 搡老岳熟女国产| 亚洲第一欧美日韩一区二区三区 | 91成年电影在线观看| 国产精品熟女久久久久浪| 又大又爽又粗| 黑人巨大精品欧美一区二区蜜桃| 久久久久视频综合| 亚洲第一青青草原| 99国产精品99久久久久| cao死你这个sao货| 妹子高潮喷水视频| 99热网站在线观看| 国产免费av片在线观看野外av| 一级毛片女人18水好多| 国产伦人伦偷精品视频| 日韩中文字幕欧美一区二区| 久久这里只有精品19| 男人添女人高潮全过程视频| 9色porny在线观看| 俄罗斯特黄特色一大片| 一级a爱视频在线免费观看| 成人黄色视频免费在线看| 国产日韩欧美亚洲二区| www.熟女人妻精品国产| 岛国毛片在线播放| a级毛片黄视频| tocl精华| videos熟女内射| 男女高潮啪啪啪动态图| 久久久国产精品麻豆| 成年人午夜在线观看视频| 欧美精品一区二区免费开放| 国产亚洲av片在线观看秒播厂| 法律面前人人平等表现在哪些方面 | 欧美中文综合在线视频| 欧美激情极品国产一区二区三区| 欧美精品啪啪一区二区三区 | 久久国产精品影院| 国产国语露脸激情在线看| 国产xxxxx性猛交| 青春草亚洲视频在线观看| 亚洲av电影在线进入| 老司机在亚洲福利影院| 欧美日韩福利视频一区二区| 亚洲第一av免费看| 精品国产乱子伦一区二区三区 | 亚洲中文字幕日韩| 色婷婷av一区二区三区视频| 欧美午夜高清在线| 午夜91福利影院| 亚洲一区二区三区欧美精品| 99久久人妻综合| 欧美国产精品一级二级三级| 久久精品人人爽人人爽视色| 美女国产高潮福利片在线看| 精品熟女少妇八av免费久了| 成年动漫av网址| 免费在线观看日本一区| 大型av网站在线播放| 亚洲国产欧美日韩在线播放| 亚洲综合色网址| 国产在线视频一区二区| 欧美精品啪啪一区二区三区 | 一边摸一边做爽爽视频免费| 日本wwww免费看| 考比视频在线观看| 午夜福利视频精品| 国产精品 国内视频| 成年av动漫网址| 午夜成年电影在线免费观看| 国产免费现黄频在线看| 又紧又爽又黄一区二区| 操美女的视频在线观看| 免费在线观看完整版高清| 一本久久精品| 如日韩欧美国产精品一区二区三区| 波多野结衣av一区二区av| 丰满迷人的少妇在线观看| 香蕉丝袜av| 啦啦啦啦在线视频资源| 精品欧美一区二区三区在线| 亚洲国产日韩一区二区| 岛国在线观看网站| 国产欧美日韩综合在线一区二区| 日韩欧美一区视频在线观看| 亚洲国产欧美网| 亚洲av国产av综合av卡| 精品亚洲成a人片在线观看| 久久影院123| 狠狠婷婷综合久久久久久88av| 超碰97精品在线观看| 91麻豆av在线| 美女高潮到喷水免费观看| 九色亚洲精品在线播放| 性少妇av在线| 一本一本久久a久久精品综合妖精| 国产精品久久久久成人av| 麻豆国产av国片精品| 啦啦啦免费观看视频1| 日日爽夜夜爽网站| 1024视频免费在线观看| 国产在线一区二区三区精| 国产片内射在线| 成年美女黄网站色视频大全免费| 国产无遮挡羞羞视频在线观看| 自拍欧美九色日韩亚洲蝌蚪91| 亚洲精品粉嫩美女一区| 九色亚洲精品在线播放| e午夜精品久久久久久久| 亚洲成av片中文字幕在线观看| 国产精品熟女久久久久浪| 在线观看免费午夜福利视频| 日韩欧美一区二区三区在线观看 | 各种免费的搞黄视频| 考比视频在线观看| netflix在线观看网站| 亚洲第一青青草原| 热99国产精品久久久久久7| 久久久国产成人免费| 久热这里只有精品99| 欧美日韩国产mv在线观看视频| a在线观看视频网站| 欧美精品高潮呻吟av久久| 啦啦啦在线免费观看视频4| 午夜福利在线观看吧| 女人高潮潮喷娇喘18禁视频| 高清在线国产一区| 免费观看人在逋| 老熟妇仑乱视频hdxx| www.熟女人妻精品国产| 免费女性裸体啪啪无遮挡网站| 欧美 日韩 精品 国产| 男女高潮啪啪啪动态图| 中文字幕人妻丝袜制服| 免费在线观看影片大全网站| 国产精品 欧美亚洲| 久久中文字幕一级| 午夜视频精品福利| 亚洲欧洲精品一区二区精品久久久| 肉色欧美久久久久久久蜜桃| 国产欧美日韩一区二区三区在线| 亚洲欧洲精品一区二区精品久久久| 免费女性裸体啪啪无遮挡网站| 久久久久久久国产电影| 久久影院123| 99国产精品一区二区蜜桃av | 婷婷成人精品国产| 欧美少妇被猛烈插入视频| 狠狠婷婷综合久久久久久88av| 狠狠精品人妻久久久久久综合| av天堂久久9| 国产福利在线免费观看视频| 老熟女久久久| 精品国产乱子伦一区二区三区 | 嫩草影视91久久| 天堂8中文在线网| 老鸭窝网址在线观看| 午夜福利视频在线观看免费|