• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    兼顧重要性與可靠性的科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)方法*

    2018-08-31 05:45:24杜元偉王素素
    關(guān)鍵詞:補(bǔ)償性結(jié)題基金項(xiàng)目

    杜元偉 楊 寧 陳 群 王素素

    (1.中國(guó)海洋大學(xué) 管理學(xué)院,山東 青島 266100;2.中國(guó)海洋大學(xué) 海洋發(fā)展研究院,山東 青島 266100)

    一、引言

    《科技評(píng)價(jià)工作規(guī)定(試行)辦法》指出,政府管理部門(mén)及相關(guān)方面要委托評(píng)價(jià)機(jī)構(gòu)或組織專(zhuān)家評(píng)價(jià)組,運(yùn)用合理、規(guī)范的程序和方法,對(duì)科技活動(dòng)及其相關(guān)責(zé)任主體所進(jìn)行的專(zhuān)業(yè)化評(píng)價(jià)與咨詢活動(dòng),旨在優(yōu)化科技管理決策,加強(qiáng)科技監(jiān)督問(wèn)責(zé),提高科技活動(dòng)實(shí)施效果和財(cái)政支出績(jī)效。國(guó)家863計(jì)劃、國(guó)家973計(jì)劃、國(guó)家自然科學(xué)基金、國(guó)家社科基金、教育部人文社科基金等科學(xué)基金項(xiàng)目是科技活動(dòng)的重要組成部分,它們對(duì)提升科技水平、促進(jìn)經(jīng)濟(jì)增長(zhǎng)、提高社會(huì)福利、增強(qiáng)國(guó)家競(jìng)爭(zhēng)力起到了重要的支撐作用。目前已有專(zhuān)家學(xué)者從影響因素分析、指標(biāo)權(quán)重確定、評(píng)價(jià)方法構(gòu)建等方面對(duì)科學(xué)基金項(xiàng)目的績(jī)效評(píng)價(jià)問(wèn)題進(jìn)行了研究。其一,在影響因素分析方面,現(xiàn)有成果主要是通過(guò)定量或者定性分析找出影響科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)的因素,為科學(xué)構(gòu)建科學(xué)基金項(xiàng)目指標(biāo)體系提供依據(jù)。[1-3]例如:王長(zhǎng)峰利用灰色模型及柯布道格拉斯生產(chǎn)函數(shù)就互聯(lián)網(wǎng)的發(fā)展對(duì)科學(xué)基金項(xiàng)目的績(jī)效影響進(jìn)行定量分析。[4]其二,在指標(biāo)權(quán)重確定方面,現(xiàn)有成果主要是應(yīng)用主觀賦權(quán)、客觀賦權(quán)、主客觀交叉賦權(quán)等方法確定科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)指標(biāo)的權(quán)重,進(jìn)而依據(jù)該權(quán)重對(duì)各項(xiàng)指標(biāo)上的績(jī)效表現(xiàn)信息進(jìn)行綜合集成計(jì)算項(xiàng)目取得的績(jī)效。如:Jung采用網(wǎng)絡(luò)分析法(Analytic Network Process, ANP)、[5]Nilashi采用決策試驗(yàn)和評(píng)價(jià)實(shí)驗(yàn)室(Decision Making Trial and Evaluation Laboratory, DEMATEL)和ANP相結(jié)合的主觀賦權(quán)方法確定各項(xiàng)指標(biāo)的權(quán)重;[6]Charttirot采用逼近理想解排序法(Technique for Order Preference by Similarity to Ideal Solution, TOPSIS)等客觀賦權(quán)方法確定指標(biāo)權(quán)重;[7]關(guān)于主客觀交叉賦權(quán)法,Mohaghar采用將模糊集與ANP相結(jié)合的方法確定指標(biāo)權(quán)重,[8]Sangaiah等采用將模糊集、DEMATEL、TOPSIS等進(jìn)行結(jié)合的主客觀交叉賦權(quán)方法確定指標(biāo)權(quán)重。[9-10]其三,在評(píng)價(jià)方法構(gòu)建方面,現(xiàn)有成果或者側(cè)重于從項(xiàng)目產(chǎn)出視角構(gòu)建能夠確定項(xiàng)目績(jī)效效果的評(píng)價(jià)方法,或者側(cè)重于從項(xiàng)目投入與產(chǎn)出雙重視角構(gòu)建能夠確定項(xiàng)目績(jī)效效率的評(píng)價(jià)方法。如:在項(xiàng)目績(jī)效產(chǎn)出評(píng)價(jià)方面,肖人毅、Feng、Liu、Gül?in分別采用統(tǒng)動(dòng)力學(xué)仿真、專(zhuān)家系統(tǒng)整合法、智能決策支持法、多準(zhǔn)則妥協(xié)解排序法(VIKOR)進(jìn)行項(xiàng)目產(chǎn)出績(jī)效評(píng)價(jià);[11-14]在項(xiàng)目績(jī)效投入產(chǎn)出評(píng)價(jià)方面,吳建南、楊方娟、宋志紅基于循證設(shè)計(jì)和傾向得分分層等方法得出科學(xué)基金資助確實(shí)提高科研產(chǎn)出的結(jié)論;[15-17]李志蘭、Chun、Karasaka采用數(shù)據(jù)包絡(luò)分析(Data Envelopment Analysis,DEA)對(duì)科學(xué)基金的整體投入產(chǎn)出效率進(jìn)行分析,得出加大科學(xué)基金的投入力度有助于提高產(chǎn)出效率的結(jié)論;[18-20]段慶鋒、楊雨昆采用DEA兩階段模型分析了科學(xué)基金項(xiàng)目投入產(chǎn)出效率問(wèn)題并指出效率瓶頸在于知識(shí)生產(chǎn)階段。[21-22]

    上述研究成果對(duì)豐富科學(xué)基金項(xiàng)目的績(jī)效評(píng)價(jià)理論和方法起到了重要作用,也為啟發(fā)本文研究思路、構(gòu)建理論方法起到了借鑒作用。上述成果中的決策信息主要來(lái)源于專(zhuān)家對(duì)科學(xué)基金項(xiàng)目在各項(xiàng)評(píng)價(jià)指標(biāo)上績(jī)效表現(xiàn)的主觀判斷,最終績(jī)效評(píng)價(jià)結(jié)果是對(duì)專(zhuān)家主觀判斷信息的綜合集成。一些成果認(rèn)識(shí)到知識(shí)經(jīng)驗(yàn)、認(rèn)知能力等諸多方面的差異可能會(huì)導(dǎo)致源于不同專(zhuān)家的決策信息的可利用程度并不相同,為此借鑒在多屬性決策中利用指標(biāo)權(quán)重對(duì)決策信息進(jìn)行線性加權(quán)的融合思路,提出了利用專(zhuān)家權(quán)重對(duì)主觀判斷信息進(jìn)行綜合集成的應(yīng)對(duì)策略。然而,多屬性決策中的指標(biāo)權(quán)重與群體決策中的專(zhuān)家可靠性是兩個(gè)截然不同的概念。前者用于反映一個(gè)指標(biāo)相對(duì)于另一個(gè)指標(biāo)的重要程度,取決于決策者偏好,具有主觀性和相對(duì)性,而后者常用于反映一個(gè)信源在一段時(shí)間內(nèi)和一定條件下無(wú)故障地執(zhí)行特定功能的能力或可能性,具有客觀性和絕對(duì)性。需要注意的是,目前對(duì)于指標(biāo)權(quán)重的內(nèi)涵及其確定方法已經(jīng)在業(yè)界達(dá)成共識(shí),而專(zhuān)家可靠性確是一個(gè)近幾年剛剛被關(guān)注的新概念。在群體決策領(lǐng)域,有關(guān)專(zhuān)家可靠性的研究成果并不多見(jiàn),個(gè)別成果提出了專(zhuān)家可靠性的計(jì)算方法,如熵值法、偏離目標(biāo)測(cè)算法等,[23-25]其他成果則是直接根據(jù)統(tǒng)計(jì)信息給出專(zhuān)家可靠性的具體數(shù)值。[26-27]本文中的專(zhuān)家可靠性將遵循第二種思路予以確定。由信息融合理論可知,基于指標(biāo)權(quán)重的融合策略和基于可靠性的融合策略并不相同,前者應(yīng)采用補(bǔ)償性策略、后者應(yīng)采用非補(bǔ)償性策略(原因詳見(jiàn)后文)?,F(xiàn)有成果因融合策略選擇不當(dāng)而造成對(duì)科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)結(jié)果的科學(xué)有效性是有待商榷的。有鑒于此,本文在考慮指標(biāo)權(quán)重與專(zhuān)家可靠系數(shù)之間性質(zhì)差異的基礎(chǔ)上,提出了兼顧重要性與可靠性的科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)方法。

    二、科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)機(jī)理

    科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)問(wèn)題一般是基于專(zhuān)家對(duì)待評(píng)項(xiàng)目在各項(xiàng)評(píng)價(jià)指標(biāo)上績(jī)效表現(xiàn)判斷來(lái)確定項(xiàng)目綜合績(jī)效表現(xiàn)的等級(jí)。下面從專(zhuān)家評(píng)價(jià)信息表達(dá)、個(gè)體補(bǔ)償性融合、群體非補(bǔ)償性融合三個(gè)層面構(gòu)建科學(xué)基金項(xiàng)目的績(jī)效評(píng)價(jià)機(jī)理。

    基于基本信任函數(shù)的信息表達(dá)機(jī)理。在進(jìn)行項(xiàng)目績(jī)效評(píng)價(jià)時(shí),專(zhuān)家需要對(duì)待評(píng)價(jià)項(xiàng)目在各項(xiàng)評(píng)價(jià)指標(biāo)上的績(jī)效表現(xiàn)情況進(jìn)行判斷,但是工作經(jīng)驗(yàn)、專(zhuān)業(yè)背景等方面的差異使得各類(lèi)專(zhuān)家都有自己擅長(zhǎng)的領(lǐng)域,他們能對(duì)與自己領(lǐng)域相關(guān)性高的指標(biāo)做出完備性評(píng)價(jià),對(duì)相關(guān)性一般的指標(biāo)做出相對(duì)完備的評(píng)價(jià),對(duì)相關(guān)性低指標(biāo)可能做不出任何的評(píng)價(jià)。因?yàn)閷?zhuān)家在各項(xiàng)指標(biāo)上給出評(píng)價(jià)信息的完備程度可能并不相同,所以為了有效地提取專(zhuān)家對(duì)科學(xué)基金項(xiàng)目在各個(gè)指標(biāo)上績(jī)效表現(xiàn)的不完備性評(píng)價(jià)信息,合理地描述專(zhuān)家的真實(shí)推斷情況,本文利用證據(jù)理論中的基本信任分配函數(shù)(Basic Belief function,BBA)構(gòu)建提取專(zhuān)家判斷信息的表達(dá)機(jī)理。BBA函數(shù)是證據(jù)理論中的一種證據(jù)信息表達(dá)方式,能夠利用局部不確定和全局不確定描述相對(duì)完備和不完備的推斷信息。

    基于指標(biāo)權(quán)重的個(gè)體信息補(bǔ)償性融合機(jī)理。個(gè)體信息融合是指為了得到某一專(zhuān)家對(duì)科學(xué)基金項(xiàng)目的綜合性評(píng)價(jià)信息而對(duì)其在所有指標(biāo)上給出的績(jī)效評(píng)價(jià)信息進(jìn)行融合的過(guò)程。當(dāng)項(xiàng)目在某一指標(biāo)上表現(xiàn)優(yōu)秀,在另一項(xiàng)指標(biāo)(如人才培養(yǎng))表現(xiàn)中等,利用指標(biāo)權(quán)重對(duì)兩方面信息進(jìn)行融合后得到的綜合評(píng)價(jià)等級(jí)為良好是可能的。上述過(guò)程體現(xiàn)了專(zhuān)家評(píng)價(jià)在信息在不同指標(biāo)之間是可以相互補(bǔ)償?shù)?,故基于指?biāo)權(quán)重的個(gè)體信息融合要遵循補(bǔ)償性融合策略??紤]到證據(jù)推理(Evidential Reasoning, ER)規(guī)則常被用于解決指標(biāo)之間具有補(bǔ)償性的多屬性決策問(wèn)題,[28]故本文采用ER規(guī)則對(duì)專(zhuān)家在各項(xiàng)指標(biāo)上的評(píng)價(jià)信息進(jìn)行融合。

    基于專(zhuān)家可靠系數(shù)的群體信息非補(bǔ)償性融合機(jī)理。群體信息融合是指為了從專(zhuān)家群體視角得到他們對(duì)科學(xué)基金項(xiàng)目的綜合性評(píng)價(jià)信息而對(duì)所有專(zhuān)家個(gè)體融合結(jié)果進(jìn)行再融合的過(guò)程。如果某位專(zhuān)家認(rèn)為科學(xué)基金項(xiàng)目整體績(jī)效表現(xiàn)(經(jīng)過(guò)個(gè)體融合得到的結(jié)果)一定不是優(yōu)秀,而他又是絕對(duì)可靠的(給出無(wú)誤信息的可能性是100%),那么顯然該項(xiàng)目最終評(píng)價(jià)等級(jí)一定不應(yīng)該是優(yōu)秀(否則會(huì)與該專(zhuān)家具有絕對(duì)可靠性相沖突)。這體現(xiàn)了專(zhuān)家之間非補(bǔ)償性的特點(diǎn),故基于專(zhuān)家可靠系數(shù)的群體信息融合應(yīng)遵循非補(bǔ)償性融合策略??紤]到證據(jù)理論(Dempster-Shafer Theory of Evidence, DS)中的Dempster規(guī)則具有“一票否決”的性質(zhì),能夠反映證據(jù)融合的非補(bǔ)償性特征,故本文采用該規(guī)則對(duì)群體信息進(jìn)行融合。[29]

    兼顧重要性與可靠性的科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)機(jī)理可以描述為:先基于基本信任分配函數(shù)信息表達(dá)機(jī)理提取專(zhuān)家對(duì)科學(xué)基金項(xiàng)目在各項(xiàng)指標(biāo)上的不完備性評(píng)價(jià)信息,再以專(zhuān)家個(gè)體為單位、利用ER規(guī)則對(duì)各項(xiàng)指標(biāo)上的評(píng)價(jià)信息進(jìn)行補(bǔ)償性融合,最后利用Dempster規(guī)則對(duì)所有專(zhuān)家的個(gè)體評(píng)價(jià)結(jié)果進(jìn)行非補(bǔ)償性融合。上述績(jī)效評(píng)價(jià)機(jī)理可描述為下圖形式。

    圖1 科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)機(jī)理

    三、科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)方法

    (一)評(píng)價(jià)信息提取

    (1)

    (二)個(gè)體信息的補(bǔ)償性融合

    (2)

    (3)

    (4)

    (5)

    (6)

    (三)群體信息的非補(bǔ)償性融合

    (7)

    (8)

    由式(8)的性質(zhì)可知,若只要有一位絕對(duì)可靠的專(zhuān)家反對(duì)科學(xué)基金項(xiàng)目的績(jī)效評(píng)價(jià)結(jié)果隸屬于某個(gè)或某幾個(gè)等級(jí),則無(wú)論其他專(zhuān)家的意見(jiàn)如何,該項(xiàng)目的績(jī)效評(píng)價(jià)結(jié)果一定不會(huì)隸屬于這些評(píng)價(jià)等級(jí)。這體現(xiàn)了Dempster規(guī)則能夠反映群體信息融合具有非補(bǔ)償性的特點(diǎn)。

    (四)評(píng)價(jià)等級(jí)確定方法

    由式(8)可知,mk(θ)為所有專(zhuān)家對(duì)項(xiàng)目ak最終績(jī)效隸屬評(píng)價(jià)等級(jí)的評(píng)價(jià)結(jié)果。因?yàn)閙k(θ)依然是一種BBA函數(shù)形式,其中可能存在著局部確定和全局不確定,所以為了確定項(xiàng)目ak的最終隸屬評(píng)價(jià)等級(jí),需要對(duì)該結(jié)果進(jìn)行轉(zhuǎn)換處理。這里采用被業(yè)界學(xué)者廣泛接受的且能兼顧信度函數(shù)和似然函數(shù)雙重優(yōu)勢(shì)的Pignistic概率進(jìn)行轉(zhuǎn)換。[30]依據(jù)Pignistic概率計(jì)算規(guī)則,確定項(xiàng)目ak最終績(jī)效隸屬評(píng)價(jià)等級(jí)θn的計(jì)算公式如下:

    (9)

    其中,Belk(θn)=∑θ?θnmk(θ),Plk(θn)=∑θn∩θ≠?mk(θ),εk=[1-∑θn?ΘBelk(θn)]∑θn?ΘPlk(θn)。

    (五)專(zhuān)家可靠系數(shù)計(jì)算方法

    關(guān)于可靠性的描述,多出現(xiàn)在電氣工程領(lǐng)域,常用可靠性系數(shù)來(lái)刻畫(huà)可靠性,以此為鑒,專(zhuān)家的可靠性由專(zhuān)家的可靠性系數(shù)來(lái)表示。[33-38]在科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)中,每位專(zhuān)家都可以視為一個(gè)信源,則專(zhuān)家的可靠系數(shù)是專(zhuān)家對(duì)科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)問(wèn)題給出無(wú)誤信息的可能性,其值的確定可根據(jù)專(zhuān)家歷史評(píng)價(jià)信息予以確定。由實(shí)際情況可知,大部分的科學(xué)基金項(xiàng)目都是可以順利結(jié)題,只有極個(gè)別項(xiàng)目會(huì)存在不能結(jié)題或者延遲結(jié)題的情況。如果采用準(zhǔn)確率,即專(zhuān)家認(rèn)為可以結(jié)題的項(xiàng)目數(shù)和已經(jīng)結(jié)題的項(xiàng)目數(shù)進(jìn)行比較,則可能會(huì)導(dǎo)致這樣一個(gè)現(xiàn)象,一位評(píng)審專(zhuān)家總是給出建議結(jié)題的評(píng)價(jià)結(jié)果,不考慮項(xiàng)目完成的質(zhì)量,這位專(zhuān)家仍然具有較高的可靠性系數(shù),這并不能很好地區(qū)分專(zhuān)家之間的可靠程度,故采用該種方法處理刻畫(huà)專(zhuān)家可靠性系數(shù)存在問(wèn)題??紤]到上述情況,本文建議構(gòu)建混淆矩陣方法確定專(zhuān)家可靠系數(shù)。[39]混淆矩陣也稱誤差矩陣,是表示精度評(píng)價(jià)的一種標(biāo)準(zhǔn)格式,不僅具有很好地描述誤差的能力,且計(jì)算方法簡(jiǎn)單,易于理解和實(shí)際應(yīng)用。

    設(shè)Y、N分別表示專(zhuān)家建議結(jié)題、不建議結(jié)題的項(xiàng)目數(shù),T、F分別表示該項(xiàng)目實(shí)際結(jié)題、實(shí)際未結(jié)題的項(xiàng)目數(shù),則YT表示建議結(jié)題并實(shí)際已結(jié)題的項(xiàng)目數(shù),YF為專(zhuān)家建議結(jié)題而實(shí)際沒(méi)有結(jié)題的項(xiàng)目數(shù),NT為不建議結(jié)題但實(shí)際已結(jié)題的項(xiàng)目數(shù),NF為不建議結(jié)題且實(shí)際結(jié)果并沒(méi)有結(jié)題的項(xiàng)目數(shù)。為計(jì)算專(zhuān)家可靠性,構(gòu)造如下表所示的混淆矩陣。[28]

    表1 混淆矩陣

    專(zhuān)家的可靠性系數(shù)可由式(10)予以計(jì)算。

    (10)

    例如:若專(zhuān)家共評(píng)價(jià)項(xiàng)目20項(xiàng),給出評(píng)價(jià)結(jié)果中,“建議結(jié)題”16個(gè),“不建議結(jié)題”4個(gè),其中“建議結(jié)題”且“實(shí)際已結(jié)題”項(xiàng)目數(shù)為13,“不建議結(jié)題”且“實(shí)際未結(jié)題”項(xiàng)目數(shù)為2。根據(jù)式(10)計(jì)算可得到專(zhuān)家評(píng)價(jià)的可靠性r=0.75。不難發(fā)現(xiàn),專(zhuān)家的可靠性并非一成不變,而是會(huì)根據(jù)專(zhuān)家評(píng)審結(jié)果的準(zhǔn)確率予以動(dòng)態(tài)調(diào)整。

    (六)方法步驟

    遵循前文提出的科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)機(jī)理,基于評(píng)價(jià)信息提取、個(gè)體信息的補(bǔ)償性融合、群體信息的非補(bǔ)償性融合、評(píng)價(jià)等級(jí)確定方法等構(gòu)建兼顧重要性和可靠性的科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)方法步驟。具體如下:

    步驟2:設(shè)定初始評(píng)價(jià)項(xiàng)目。令k=1,設(shè)定當(dāng)前評(píng)價(jià)項(xiàng)目為ak=a1。

    步驟7:判斷是否完成評(píng)價(jià)。令k=k+1。若k≤K,則說(shuō)明還有項(xiàng)目ak需要進(jìn)行績(jī)效評(píng)價(jià),轉(zhuǎn)到步驟3;若k>K,則說(shuō)明已完成對(duì)所有項(xiàng)目的績(jī)效評(píng)價(jià),結(jié)束。

    四、案例模擬分析——以某國(guó)家自然科學(xué)基金項(xiàng)目為例

    為驗(yàn)證提出方法的科學(xué)有效性,本文以某國(guó)家自然科學(xué)基金項(xiàng)目為例進(jìn)行案例分析。該科學(xué)基金項(xiàng)目于2012年立項(xiàng),預(yù)期目標(biāo)是通過(guò)借鑒吸收知識(shí)管理、行為科學(xué)、管理決策、信息融合等理論的基本觀點(diǎn)和技術(shù)方法,針對(duì)知識(shí)網(wǎng)絡(luò)中知識(shí)數(shù)量龐大、知識(shí)類(lèi)型多樣、知識(shí)主體復(fù)雜等特點(diǎn),對(duì)知識(shí)網(wǎng)絡(luò)中決策信息的提取問(wèn)題開(kāi)展研究,以期能夠明確知識(shí)網(wǎng)絡(luò)中關(guān)鍵知識(shí)主體的識(shí)別方法、揭示多元決策信息智能提取機(jī)理、建立多元決策信息智能提取模型。

    參照《國(guó)家自然科學(xué)基金資助項(xiàng)目研究成果管理辦法》和《國(guó)家自然科學(xué)基金資助項(xiàng)目結(jié)題/成果報(bào)告》,這里選用項(xiàng)目執(zhí)行情況(c1)、項(xiàng)目取得成果的總體情況(c2)、成果轉(zhuǎn)化應(yīng)用(c3)、人才培養(yǎng)情況(c4)、應(yīng)用前景情況(c5)作為項(xiàng)目的績(jī)效評(píng)價(jià)指標(biāo)。設(shè)指標(biāo)權(quán)重為(ω1,…,ω5)=(1.00,1.00,0.64,0.92,0.52)。為給專(zhuān)家開(kāi)展績(jī)效評(píng)價(jià)提供依據(jù)信息,在此給出項(xiàng)目原計(jì)劃目標(biāo)以及實(shí)際完成情況,具體如表2所示。

    表2 項(xiàng)目計(jì)劃情況以及完成情況信息表

    表3 專(zhuān)家歷史評(píng)價(jià)結(jié)果

    表4 專(zhuān)家評(píng)價(jià)信息

    表5 個(gè)體/群體融合結(jié)果

    表6 評(píng)價(jià)等級(jí)的概率分布

    因?yàn)楸疚暮诵乃枷胧腔谥笜?biāo)權(quán)重的個(gè)體融合采用補(bǔ)償性融合策略、基于可靠性的群體融合采用非補(bǔ)償性策略,所以這里分別從個(gè)體融合結(jié)果和群體融合結(jié)果兩個(gè)方面對(duì)上述融合策略進(jìn)行科學(xué)性分析。

    從個(gè)體融合結(jié)果看可以得到以下結(jié)論:(1)專(zhuān)家e1認(rèn)為該項(xiàng)目績(jī)效表現(xiàn)等級(jí)有46.49%的可能性為優(yōu)秀,53.51%可能性為良好,該評(píng)價(jià)信息是否科學(xué)呢?由表5可知,專(zhuān)家e1在c1、c2、c4三項(xiàng)指標(biāo)上的評(píng)價(jià)信息與其他專(zhuān)家略有差距,專(zhuān)家e1認(rèn)為該項(xiàng)目在這些指標(biāo)上的績(jī)效表現(xiàn)為良好的可能性很大、其次為優(yōu)秀,而其他專(zhuān)家則認(rèn)為績(jī)效表現(xiàn)為優(yōu)秀可能性較大。由表3可知,該項(xiàng)目在上述三項(xiàng)指標(biāo)上的績(jī)效表現(xiàn)均達(dá)到并超額完成了原計(jì)劃目標(biāo),這說(shuō)明專(zhuān)家e1的評(píng)價(jià)信息可能是存在偏差的。本文方法通過(guò)可靠系數(shù)80%對(duì)存在偏差的信息進(jìn)行了折扣處理,并未對(duì)項(xiàng)目最終績(jī)效評(píng)價(jià)結(jié)果(優(yōu)秀)產(chǎn)生不利影響,這體現(xiàn)了本文方法對(duì)評(píng)價(jià)信息進(jìn)行折扣處理具有科學(xué)性。(2)專(zhuān)家e4的個(gè)體融合結(jié)果是該項(xiàng)目100%屬于優(yōu)秀。由表5可知,雖然專(zhuān)家e4并沒(méi)有認(rèn)為該項(xiàng)目在指標(biāo)c3、c4、c5上100%為優(yōu)秀,但是由于指標(biāo)c1、c2的權(quán)重都為1(即這兩項(xiàng)指標(biāo)是絕對(duì)重要的),而專(zhuān)家e4又認(rèn)為該項(xiàng)目在這兩項(xiàng)指標(biāo)上絕對(duì)優(yōu)秀,所以其個(gè)體融合結(jié)果為絕對(duì)優(yōu)秀,符合直覺(jué)判斷。(3)專(zhuān)家e5對(duì)項(xiàng)目在c1、c2的績(jī)效表現(xiàn)均給出完全不知道的評(píng)價(jià)信息,這并未對(duì)其個(gè)體評(píng)價(jià)結(jié)果造成影響,體現(xiàn)了本文信息表達(dá)機(jī)理在允許專(zhuān)家結(jié)合自己的知識(shí)經(jīng)驗(yàn)給出評(píng)價(jià)信息方面具有獨(dú)特優(yōu)勢(shì)。

    從群體融合結(jié)果看可以得到以下結(jié)論:(1)由表6可知,專(zhuān)家e2、e3認(rèn)為該項(xiàng)目有屬于優(yōu)秀的等級(jí)的可能性約為95%,二者可靠系數(shù)分別為100%、95%,可靠性強(qiáng),項(xiàng)目的最終評(píng)價(jià)結(jié)果與二者的個(gè)體判斷相一致,符合直覺(jué)邏輯。(2)專(zhuān)家e4認(rèn)為該項(xiàng)目100%一定屬于優(yōu)秀,即認(rèn)為該項(xiàng)目一定不會(huì)是其他等級(jí)(如良好),而最終評(píng)價(jià)結(jié)果并非100%優(yōu)秀,在其他等級(jí)(良好)上也賦予了信度。由前文可知,當(dāng)專(zhuān)家絕對(duì)可靠且他/她認(rèn)為該項(xiàng)目一定不會(huì)是良好時(shí),則該項(xiàng)目最終評(píng)價(jià)結(jié)果一定不會(huì)是良好。但專(zhuān)家e4的可靠系數(shù)是90%而非100%,這與非補(bǔ)償性融合中的“一票否定”規(guī)則并不沖突。(3)由表5可知,該項(xiàng)目的每一項(xiàng)指標(biāo)每位專(zhuān)家都沒(méi)有給出較差、很差的評(píng)價(jià)信息,專(zhuān)家個(gè)體融合結(jié)果、群體融合結(jié)果在較差、很差等級(jí)上也均未賦予信度,符合直覺(jué)邏輯,這體現(xiàn)了本文采用ER規(guī)則和Dempster規(guī)則進(jìn)行信息融合具有科學(xué)性。

    五、結(jié)束語(yǔ)

    現(xiàn)有科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)并未區(qū)分指標(biāo)權(quán)重與專(zhuān)家可靠性之間的性質(zhì)差異,從而容易導(dǎo)致評(píng)價(jià)結(jié)果可能存在科學(xué)有效性差的問(wèn)題。為了解決上述問(wèn)題,本文首先基于基本信任分配函數(shù)給出了能夠反映指標(biāo)權(quán)重與專(zhuān)家可靠性兩種參數(shù)性質(zhì)特征和專(zhuān)家認(rèn)知能力的科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)機(jī)理。然后,基于ER折扣和ER規(guī)則構(gòu)建了能夠?qū)?zhuān)家在不同指標(biāo)上評(píng)價(jià)信息進(jìn)行補(bǔ)償性融合的個(gè)體融合方法,基于Shafer折扣和Dempster規(guī)則構(gòu)建了能夠?qū)λ袑?zhuān)家個(gè)體融合結(jié)果進(jìn)行再融合的群體融合方法。在此基礎(chǔ)上,結(jié)合Pignistic概率和結(jié)果有效性閾值提出了科學(xué)基金項(xiàng)目隸屬評(píng)價(jià)等級(jí)的確定方法,并基于專(zhuān)家歷史評(píng)價(jià)信息構(gòu)建了專(zhuān)家可靠系數(shù)的計(jì)算方法。最后,遵循本文提出的科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)機(jī)理,結(jié)合評(píng)價(jià)信息提取、個(gè)體融合方法、群體融合方法等給出了科學(xué)基金項(xiàng)目績(jī)效評(píng)價(jià)的方法步驟。本文還以某國(guó)家自然科學(xué)基金項(xiàng)目為案例背景模擬了提出方法的具體操作過(guò)程、分析了方法在解決實(shí)際問(wèn)題過(guò)程中的科學(xué)性。需要說(shuō)明的是,本文方法側(cè)重于從靜態(tài)決策視角基于專(zhuān)家給出的評(píng)價(jià)信息予以綜合集成,實(shí)現(xiàn)對(duì)科學(xué)基金項(xiàng)目績(jī)效表現(xiàn)的最終評(píng)價(jià),而對(duì)于需要專(zhuān)家之間通過(guò)彼此交互對(duì)科學(xué)基金項(xiàng)目績(jī)效進(jìn)行評(píng)價(jià)的動(dòng)態(tài)決策問(wèn)題并未涉及,這也是下一步要研究的重點(diǎn)問(wèn)題。

    猜你喜歡
    補(bǔ)償性結(jié)題基金項(xiàng)目
    我校承擔(dān)的國(guó)家社科基金項(xiàng)目以“優(yōu)秀”等級(jí)結(jié)題
    權(quán)重望寡:如何化解低地位領(lǐng)導(dǎo)的補(bǔ)償性辱虐管理行為?*
    我校徐衛(wèi)紅教授主持的教育教學(xué)改革研究課題結(jié)題
    我校4項(xiàng)省教育廳課題結(jié)題并通過(guò)評(píng)審
    山西省中藥材資源共享服務(wù)平臺(tái)通過(guò)結(jié)題驗(yàn)收
    常見(jiàn)基金項(xiàng)目的英文名稱(二)
    常見(jiàn)基金項(xiàng)目的英文名稱(一)
    中學(xué)英語(yǔ)教學(xué)中對(duì)“音”的重視——補(bǔ)償性閱讀探索
    體育課堂教學(xué)中發(fā)展“補(bǔ)償性體能”的探索——以水平五“跨欄跑”教學(xué)為例
    體育師友(2013年6期)2013-03-11 18:52:17
    基金項(xiàng)目
    久久天躁狠狠躁夜夜2o2o| 国产单亲对白刺激| 国产精品无大码| 啦啦啦啦在线视频资源| 国产成年人精品一区二区| 亚洲av中文av极速乱 | 18禁在线播放成人免费| 亚洲性久久影院| 久久午夜福利片| 欧美一区二区精品小视频在线| 国产成人av教育| 婷婷色综合大香蕉| 联通29元200g的流量卡| 欧美一区二区亚洲| 在线a可以看的网站| 直男gayav资源| 欧美色欧美亚洲另类二区| 男插女下体视频免费在线播放| 中国美女看黄片| 国产伦人伦偷精品视频| 男女下面进入的视频免费午夜| 国产免费一级a男人的天堂| 国产毛片a区久久久久| 国产亚洲精品av在线| 国内精品久久久久精免费| 色av中文字幕| 51国产日韩欧美| 久久久久国内视频| 18禁在线播放成人免费| 久久精品国产清高在天天线| 午夜福利欧美成人| 99久久久亚洲精品蜜臀av| 欧美最新免费一区二区三区| 日韩欧美在线乱码| 国产精品一区二区免费欧美| 欧美日韩亚洲国产一区二区在线观看| 真人一进一出gif抽搐免费| 欧美成人a在线观看| av在线天堂中文字幕| 深夜精品福利| 自拍偷自拍亚洲精品老妇| 国产女主播在线喷水免费视频网站 | 久久6这里有精品| 亚洲精品国产成人久久av| 日韩欧美三级三区| 精华霜和精华液先用哪个| 国产爱豆传媒在线观看| 麻豆一二三区av精品| 国产精品久久电影中文字幕| 欧美黑人巨大hd| 亚洲精品国产成人久久av| 丰满的人妻完整版| eeuss影院久久| 999久久久精品免费观看国产| 在线观看66精品国产| 久久久久国产精品人妻aⅴ院| 国产精品人妻久久久久久| 直男gayav资源| 国产69精品久久久久777片| 国产真实乱freesex| 欧美黑人巨大hd| 俄罗斯特黄特色一大片| 成年女人永久免费观看视频| 婷婷六月久久综合丁香| 亚洲欧美日韩无卡精品| 成年女人看的毛片在线观看| 特级一级黄色大片| 亚洲人成网站高清观看| 51国产日韩欧美| 1024手机看黄色片| 国产精品久久久久久av不卡| 麻豆国产97在线/欧美| 少妇丰满av| 国产av在哪里看| 两个人的视频大全免费| 色哟哟哟哟哟哟| 免费观看在线日韩| 亚洲av二区三区四区| 国产伦一二天堂av在线观看| 赤兔流量卡办理| 国产av麻豆久久久久久久| 十八禁国产超污无遮挡网站| 欧美丝袜亚洲另类 | 精品99又大又爽又粗少妇毛片 | 三级国产精品欧美在线观看| 国产伦在线观看视频一区| 国产亚洲精品综合一区在线观看| 成人一区二区视频在线观看| 男人和女人高潮做爰伦理| 色哟哟·www| 精品乱码久久久久久99久播| 嫩草影视91久久| 亚洲人成网站在线播放欧美日韩| 久久久久国产精品人妻aⅴ院| 成人综合一区亚洲| 十八禁国产超污无遮挡网站| 色尼玛亚洲综合影院| 亚洲av成人精品一区久久| 人妻丰满熟妇av一区二区三区| 国产大屁股一区二区在线视频| 蜜桃亚洲精品一区二区三区| 国产精品一区www在线观看 | 欧美绝顶高潮抽搐喷水| 尤物成人国产欧美一区二区三区| 99热6这里只有精品| 97超级碰碰碰精品色视频在线观看| 最近在线观看免费完整版| 久久久色成人| 久久久久国内视频| 欧美xxxx黑人xx丫x性爽| 一夜夜www| 听说在线观看完整版免费高清| 久久人人爽人人爽人人片va| 亚洲国产欧洲综合997久久,| avwww免费| 美女大奶头视频| 美女大奶头视频| 五月伊人婷婷丁香| 婷婷色综合大香蕉| 又紧又爽又黄一区二区| 国产精品美女特级片免费视频播放器| 精品乱码久久久久久99久播| 欧美日韩综合久久久久久 | 欧美丝袜亚洲另类 | 日韩欧美精品免费久久| 精品国产三级普通话版| 婷婷亚洲欧美| 色av中文字幕| 97热精品久久久久久| 亚洲av.av天堂| 日本成人三级电影网站| 日韩欧美国产在线观看| 久久国内精品自在自线图片| 久久婷婷人人爽人人干人人爱| 国产精品久久久久久久电影| av.在线天堂| 在线观看66精品国产| 精品一区二区三区视频在线观看免费| 欧美日韩黄片免| 亚洲 国产 在线| 亚洲成人中文字幕在线播放| 欧美bdsm另类| 黄片wwwwww| 五月伊人婷婷丁香| 高清日韩中文字幕在线| 色噜噜av男人的天堂激情| 国产91精品成人一区二区三区| АⅤ资源中文在线天堂| 舔av片在线| 一区二区三区四区激情视频 | 国产精品国产高清国产av| 成人国产综合亚洲| 网址你懂的国产日韩在线| 欧美日韩黄片免| 此物有八面人人有两片| av国产免费在线观看| 美女黄网站色视频| 久久精品综合一区二区三区| 丝袜美腿在线中文| 久久午夜亚洲精品久久| 麻豆精品久久久久久蜜桃| 直男gayav资源| 欧美最黄视频在线播放免费| 精品久久久久久久人妻蜜臀av| 色综合色国产| 女同久久另类99精品国产91| 国产极品精品免费视频能看的| 嫩草影视91久久| 搡女人真爽免费视频火全软件 | 三级男女做爰猛烈吃奶摸视频| 麻豆成人av在线观看| 亚洲av二区三区四区| 国产免费一级a男人的天堂| 日韩精品青青久久久久久| 国产 一区精品| 国产高清激情床上av| 男女边吃奶边做爰视频| 校园人妻丝袜中文字幕| 精品久久久久久久末码| 亚洲国产色片| 校园春色视频在线观看| 天堂网av新在线| 亚洲图色成人| 成人性生交大片免费视频hd| 日韩亚洲欧美综合| 色视频www国产| 简卡轻食公司| 国产成人aa在线观看| 春色校园在线视频观看| 夜夜爽天天搞| 成人无遮挡网站| 男人的好看免费观看在线视频| 少妇人妻精品综合一区二区 | 国产探花极品一区二区| 国产探花极品一区二区| 亚洲一区二区三区色噜噜| 嫩草影视91久久| www.色视频.com| 亚洲性夜色夜夜综合| 天天躁日日操中文字幕| 男人和女人高潮做爰伦理| 精品午夜福利视频在线观看一区| 九色国产91popny在线| 91狼人影院| 日本黄色视频三级网站网址| 嫩草影视91久久| 丰满人妻一区二区三区视频av| 成人特级av手机在线观看| 日韩欧美免费精品| 桃红色精品国产亚洲av| 欧美中文日本在线观看视频| 一本精品99久久精品77| 小蜜桃在线观看免费完整版高清| 变态另类成人亚洲欧美熟女| 精品久久久久久久久亚洲 | 啦啦啦啦在线视频资源| 窝窝影院91人妻| 中国美白少妇内射xxxbb| 亚洲专区国产一区二区| 久久久午夜欧美精品| 黄色女人牲交| 国产伦人伦偷精品视频| 久久久色成人| 国产v大片淫在线免费观看| 精品一区二区三区av网在线观看| 人妻制服诱惑在线中文字幕| 久久久久久九九精品二区国产| 午夜a级毛片| 有码 亚洲区| 成人无遮挡网站| 啦啦啦啦在线视频资源| 啦啦啦观看免费观看视频高清| 久久国产精品大桥未久av | 日韩av在线免费看完整版不卡| 在线观看av片永久免费下载| 国产精品偷伦视频观看了| 26uuu在线亚洲综合色| 亚洲精品乱久久久久久| 丰满迷人的少妇在线观看| 一区二区三区免费毛片| 麻豆成人午夜福利视频| 亚洲人成网站在线播| 青春草视频在线免费观看| 久久av网站| 国产又色又爽无遮挡免| 五月开心婷婷网| 亚洲av日韩在线播放| 国产一区二区三区av在线| 一本色道久久久久久精品综合| 视频中文字幕在线观看| 热99国产精品久久久久久7| 国产乱来视频区| 欧美成人精品欧美一级黄| 新久久久久国产一级毛片| 久久毛片免费看一区二区三区| 亚洲成人av在线免费| 亚洲精品自拍成人| 哪个播放器可以免费观看大片| 一本—道久久a久久精品蜜桃钙片| 99热网站在线观看| 亚洲精品国产色婷婷电影| 免费观看性生交大片5| 高清欧美精品videossex| 亚洲精品456在线播放app| 国产 一区 欧美 日韩| 秋霞伦理黄片| 在线精品无人区一区二区三 | 久久影院123| 久久久久久久精品精品| a级毛片免费高清观看在线播放| 18禁裸乳无遮挡动漫免费视频| 丰满迷人的少妇在线观看| 人妻少妇偷人精品九色| 高清在线视频一区二区三区| 青春草视频在线免费观看| 亚洲中文av在线| 亚洲真实伦在线观看| 七月丁香在线播放| 夫妻午夜视频| 91在线精品国自产拍蜜月| 狂野欧美激情性xxxx在线观看| 男人添女人高潮全过程视频| 九色成人免费人妻av| 嫩草影院入口| 一本—道久久a久久精品蜜桃钙片| 精品久久久久久电影网| 偷拍熟女少妇极品色| 啦啦啦视频在线资源免费观看| 国产 精品1| 国产成人a区在线观看| av.在线天堂| 国产伦精品一区二区三区视频9| 亚洲欧洲日产国产| 日本欧美国产在线视频| 中文字幕人妻熟人妻熟丝袜美| h日本视频在线播放| 欧美日韩在线观看h| 18禁在线播放成人免费| 人妻少妇偷人精品九色| 国产大屁股一区二区在线视频| 亚洲性久久影院| 边亲边吃奶的免费视频| 亚洲国产精品专区欧美| 久久久久人妻精品一区果冻| 一本久久精品| 蜜桃亚洲精品一区二区三区| 国产伦精品一区二区三区四那| 欧美日韩一区二区视频在线观看视频在线| 深夜a级毛片| 国国产精品蜜臀av免费| 国模一区二区三区四区视频| 天堂俺去俺来也www色官网| 中文字幕制服av| 中国美白少妇内射xxxbb| 免费观看在线日韩| 日韩制服骚丝袜av| 视频中文字幕在线观看| 最近的中文字幕免费完整| 精品亚洲成a人片在线观看 | 高清av免费在线| 王馨瑶露胸无遮挡在线观看| 极品少妇高潮喷水抽搐| 国产探花极品一区二区| 在线观看免费日韩欧美大片 | 欧美+日韩+精品| 亚洲精品自拍成人| 我要看日韩黄色一级片| 久久精品夜色国产| 国产淫语在线视频| 永久免费av网站大全| 自拍欧美九色日韩亚洲蝌蚪91 | 国精品久久久久久国模美| 国产精品国产三级国产专区5o| 99久久精品一区二区三区| 精品国产露脸久久av麻豆| 男女下面进入的视频免费午夜| 丰满乱子伦码专区| 久久国内精品自在自线图片| 老熟女久久久| 久久久久久久久久人人人人人人| 美女主播在线视频| 亚洲精品久久午夜乱码| 91精品国产九色| 日韩国内少妇激情av| 中文天堂在线官网| 国产一区亚洲一区在线观看| 亚洲aⅴ乱码一区二区在线播放| 美女视频免费永久观看网站| 欧美人与善性xxx| 亚洲精品日韩av片在线观看| 国精品久久久久久国模美| 亚洲成人一二三区av| 人人妻人人看人人澡| freevideosex欧美| 一级毛片电影观看| 18禁裸乳无遮挡免费网站照片| 一级爰片在线观看| 国产av精品麻豆| 中文欧美无线码| 免费观看性生交大片5| 欧美 日韩 精品 国产| 日日摸夜夜添夜夜添av毛片| 日韩av在线免费看完整版不卡| 精品国产乱码久久久久久小说| 多毛熟女@视频| 国产 精品1| kizo精华| 国产黄色免费在线视频| 丰满乱子伦码专区| 少妇熟女欧美另类| h视频一区二区三区| 制服丝袜香蕉在线| 在线观看三级黄色| 毛片女人毛片| h视频一区二区三区| 亚洲欧美精品自产自拍| 亚洲综合色惰| 中文字幕精品免费在线观看视频 | 欧美性感艳星| 美女cb高潮喷水在线观看| 精品一品国产午夜福利视频| 国产乱人视频| 大片电影免费在线观看免费| 少妇 在线观看| 欧美变态另类bdsm刘玥| 男女边摸边吃奶| 青春草亚洲视频在线观看| 麻豆乱淫一区二区| 国产成人精品福利久久| 久久99蜜桃精品久久| 高清不卡的av网站| 九九爱精品视频在线观看| 肉色欧美久久久久久久蜜桃| 精品久久久久久电影网| 99久久综合免费| 蜜桃久久精品国产亚洲av| 成人亚洲精品一区在线观看 | 国产精品精品国产色婷婷| 欧美成人精品欧美一级黄| 人妻一区二区av| 国产精品国产三级专区第一集| 91久久精品国产一区二区三区| 一级黄片播放器| 人妻制服诱惑在线中文字幕| 26uuu在线亚洲综合色| 男女无遮挡免费网站观看| 国产精品无大码| 高清不卡的av网站| 午夜视频国产福利| 国产一区亚洲一区在线观看| 欧美 日韩 精品 国产| 亚洲精品日韩在线中文字幕| 亚洲va在线va天堂va国产| 亚洲欧美日韩东京热| 我要看日韩黄色一级片| 欧美97在线视频| 我的女老师完整版在线观看| 国产淫片久久久久久久久| 成人高潮视频无遮挡免费网站| 观看美女的网站| 五月开心婷婷网| 欧美xxxx黑人xx丫x性爽| 亚洲国产高清在线一区二区三| 日韩亚洲欧美综合| 日日啪夜夜撸| 纯流量卡能插随身wifi吗| www.色视频.com| 国产日韩欧美在线精品| 成人影院久久| 欧美激情极品国产一区二区三区 | 国内少妇人妻偷人精品xxx网站| 99热全是精品| 亚洲精品,欧美精品| 黄色视频在线播放观看不卡| 夜夜看夜夜爽夜夜摸| 免费人成在线观看视频色| 国内揄拍国产精品人妻在线| 人妻少妇偷人精品九色| 少妇高潮的动态图| 一本—道久久a久久精品蜜桃钙片| 久久ye,这里只有精品| 久久久久性生活片| 成人毛片a级毛片在线播放| 国语对白做爰xxxⅹ性视频网站| 色综合色国产| 18禁在线播放成人免费| av视频免费观看在线观看| 自拍欧美九色日韩亚洲蝌蚪91 | 亚洲不卡免费看| 五月伊人婷婷丁香| 干丝袜人妻中文字幕| 午夜日本视频在线| 欧美精品亚洲一区二区| av在线蜜桃| 色视频在线一区二区三区| 美女中出高潮动态图| 中文精品一卡2卡3卡4更新| 欧美精品亚洲一区二区| 国产白丝娇喘喷水9色精品| 亚洲自偷自拍三级| 丝瓜视频免费看黄片| 亚洲美女黄色视频免费看| 韩国av在线不卡| 中文天堂在线官网| 久久久久网色| 成年美女黄网站色视频大全免费 | 97超碰精品成人国产| 久久精品国产鲁丝片午夜精品| 亚洲欧美精品专区久久| 国产黄色视频一区二区在线观看| 天堂中文最新版在线下载| 性色avwww在线观看| 成人亚洲精品一区在线观看 | 建设人人有责人人尽责人人享有的 | 三级国产精品欧美在线观看| 成年免费大片在线观看| 亚洲怡红院男人天堂| 大又大粗又爽又黄少妇毛片口| 丰满迷人的少妇在线观看| 久久久久久久久久久免费av| 在线免费十八禁| 亚洲欧美日韩无卡精品| 精品亚洲成国产av| 久久久久人妻精品一区果冻| 波野结衣二区三区在线| 亚洲欧美一区二区三区国产| 黄片wwwwww| 精品久久久噜噜| 深爱激情五月婷婷| 精品国产一区二区三区久久久樱花 | 亚洲三级黄色毛片| 在线观看美女被高潮喷水网站| 大陆偷拍与自拍| 51国产日韩欧美| 最新中文字幕久久久久| 联通29元200g的流量卡| 国产高清有码在线观看视频| 在线看a的网站| 美女高潮的动态| 七月丁香在线播放| 欧美老熟妇乱子伦牲交| 成人无遮挡网站| 男人舔奶头视频| 成年av动漫网址| 2018国产大陆天天弄谢| 国产欧美亚洲国产| 麻豆成人午夜福利视频| 最黄视频免费看| 亚洲人成网站在线播| 亚洲怡红院男人天堂| 少妇的逼好多水| 尤物成人国产欧美一区二区三区| 国产精品秋霞免费鲁丝片| 纯流量卡能插随身wifi吗| 在线观看一区二区三区| 美女高潮的动态| 久久久久国产网址| 国国产精品蜜臀av免费| 国产精品麻豆人妻色哟哟久久| 2022亚洲国产成人精品| 2021少妇久久久久久久久久久| 男女免费视频国产| 亚洲自偷自拍三级| 最近手机中文字幕大全| 国产熟女欧美一区二区| 18禁裸乳无遮挡免费网站照片| 高清午夜精品一区二区三区| 亚洲国产色片| 国产精品偷伦视频观看了| 色视频www国产| 国产一区二区三区av在线| 国产69精品久久久久777片| 日本av免费视频播放| 中文字幕免费在线视频6| 十分钟在线观看高清视频www | 多毛熟女@视频| 联通29元200g的流量卡| 国产欧美另类精品又又久久亚洲欧美| 又黄又爽又刺激的免费视频.| 一本—道久久a久久精品蜜桃钙片| 熟妇人妻不卡中文字幕| 欧美日韩精品成人综合77777| 国产精品久久久久久久久免| 精华霜和精华液先用哪个| 超碰97精品在线观看| 成人黄色视频免费在线看| 中文字幕制服av| 色婷婷av一区二区三区视频| 在线观看人妻少妇| 国产亚洲91精品色在线| 成人午夜精彩视频在线观看| 成人特级av手机在线观看| 中文资源天堂在线| 国语对白做爰xxxⅹ性视频网站| 免费人妻精品一区二区三区视频| 最近最新中文字幕大全电影3| 天堂8中文在线网| 亚洲欧美精品自产自拍| 久久这里有精品视频免费| 欧美成人a在线观看| 午夜福利在线在线| 久久久a久久爽久久v久久| 黄色怎么调成土黄色| 两个人的视频大全免费| 亚洲美女搞黄在线观看| 中国国产av一级| 欧美三级亚洲精品| 亚洲av不卡在线观看| 亚洲综合色惰| 在线观看免费视频网站a站| 国产精品精品国产色婷婷| 久久久精品免费免费高清| 亚洲国产高清在线一区二区三| 国产精品女同一区二区软件| 看十八女毛片水多多多| 最后的刺客免费高清国语| 免费观看av网站的网址| 午夜激情福利司机影院| 成人国产麻豆网| 男人添女人高潮全过程视频| 色视频在线一区二区三区| 久久久久久久久久人人人人人人| 国产精品熟女久久久久浪| 久久久亚洲精品成人影院| 蜜桃亚洲精品一区二区三区| 精品国产三级普通话版| 免费人成在线观看视频色| 久久影院123| 精品国产一区二区三区久久久樱花 | 国产精品女同一区二区软件| 美女脱内裤让男人舔精品视频| 美女福利国产在线 | 一级毛片久久久久久久久女| 久久久久久久久久久免费av| 中文乱码字字幕精品一区二区三区| 亚洲欧美日韩无卡精品| 精品亚洲成国产av| 亚洲精品国产色婷婷电影| 国产精品一区二区在线观看99| 国产成人aa在线观看| 亚洲欧美成人综合另类久久久| 久久精品熟女亚洲av麻豆精品| 久久99热这里只频精品6学生| 全区人妻精品视频| 亚洲人与动物交配视频| 亚洲国产av新网站| 国产欧美日韩精品一区二区| 国产高清有码在线观看视频| 1000部很黄的大片| 国产亚洲一区二区精品| 十分钟在线观看高清视频www | 精品视频人人做人人爽| 亚洲欧美日韩卡通动漫| 国产高潮美女av| 欧美丝袜亚洲另类|