• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    時(shí)序動(dòng)態(tài)視角下的學(xué)術(shù)影響力評(píng)價(jià)方法及實(shí)證研究

    2017-11-22 12:45:03舒予張黎俐
    現(xiàn)代情報(bào) 2017年11期
    關(guān)鍵詞:評(píng)價(jià)方法實(shí)證研究

    舒予+張黎俐

    〔摘 要〕[目的/意義]論文發(fā)表時(shí)間和所屬學(xué)科的不同會(huì)對(duì)論文在后續(xù)的引文產(chǎn)生稀釋效應(yīng)的影響,發(fā)生在不同時(shí)間的引文也代表了不同的學(xué)術(shù)價(jià)值。從時(shí)序動(dòng)態(tài)的視角設(shè)計(jì)一種學(xué)術(shù)影響力的評(píng)價(jià)指標(biāo),消除稀釋效應(yīng)的影響并能夠體現(xiàn)不同時(shí)期的引文價(jià)值。[方法/過(guò)程]引入?yún)⒖嘉墨I(xiàn)集合的篇均被引次數(shù)作為論文集合的基準(zhǔn)值,消除由于發(fā)表時(shí)間和所屬學(xué)科不同造成的稀釋效應(yīng),進(jìn)而再對(duì)不同統(tǒng)計(jì)時(shí)間點(diǎn)的被引次數(shù)賦予不同的權(quán)重,用以表征發(fā)生在不同時(shí)期的引文的不同價(jià)值。[結(jié)果/結(jié)論]以四川大學(xué)為例,選取ESI學(xué)科和研究人員作為評(píng)價(jià)對(duì)象進(jìn)行實(shí)證研究,結(jié)果表明這一指標(biāo)可以對(duì)學(xué)術(shù)影響力發(fā)展趨勢(shì)不同的研究實(shí)體進(jìn)行有效的區(qū)分。

    〔關(guān)鍵詞〕時(shí)序動(dòng)態(tài);學(xué)術(shù)影響力;評(píng)價(jià)方法;實(shí)證研究

    DOI:10.3969/j.issn.1008-0821.2017.11.012

    〔中圖分類號(hào)〕G304 〔文獻(xiàn)標(biāo)識(shí)碼〕A 〔文章編號(hào)〕1008-0821(2017)11-0074-07

    An Empirical Study on the Evaluation of Academic Influence from the Perspective of Time Series

    Shu Yu Zhang Lili

    (Library,Sichuan University,Chengdu 610065,China)

    〔Abstract〕[Purpose/Significance]The difference between the time of publication and the discipline of the study will cause an effect on the dilution of the citations in the following citations.This paper designed an evaluation index of academic influence from the perspective of temporal dynamics,which could eliminate the influence of dilution effect and can reflect the value of citation in different periods.[Method/Process]The Average number of citations per paper of the reference set was choosen as a benchmark to eliminate the dilution effect caused by the publication time and different discipline,furthermore,different weights were given to the citations that happen on different statistical time points,which could be used to characterize the different values of citations in different periods.[Result/Conclusion]Taking Sichuan University as an example,this paper selected the ESI discipline and the scientific research personnel as the evaluation object to carry on the empirical research,the results showed that this index could effectively distinguish the different research entities with different academic development trends.

    〔Key words〕time series dynamics;academic influence;evaluation method;empirical study

    學(xué)術(shù)影響力的評(píng)價(jià)則是科研績(jī)效評(píng)價(jià)中的一個(gè)主要組成部分,在學(xué)科、高校乃至國(guó)家層面的科研評(píng)價(jià)體系中發(fā)揮了極其重要的作用[1-2]。文獻(xiàn)計(jì)量分析為學(xué)術(shù)影響力的測(cè)度提供了相應(yīng)的定量指標(biāo),是對(duì)同行評(píng)議等定性評(píng)價(jià)方式的重要補(bǔ)充[3-4]。基于文獻(xiàn)計(jì)量分析方法設(shè)計(jì)的定量評(píng)價(jià)指標(biāo)可以分為綜合性指標(biāo)和單一指標(biāo)兩種方式[5]。綜合性指標(biāo)包括h指數(shù)、g指數(shù)、p指數(shù)等,而單一指標(biāo)主要從論文的產(chǎn)出、質(zhì)量、利用率等各個(gè)方面進(jìn)行單一維度的評(píng)價(jià)[6-7]。綜合性指標(biāo)和單一指標(biāo)在科研績(jī)效評(píng)價(jià)中都得到的廣泛的應(yīng)用,但是往往忽略了對(duì)文獻(xiàn)老化過(guò)程中引文變化規(guī)律的描述,由于論文的施引文獻(xiàn)發(fā)生的年度代表了在不同時(shí)期被利用的情況,自然也就具有不同的價(jià)值,例如一位科研人員的論文引用文獻(xiàn)逐年上升,而另一位科研人員的論文引用文獻(xiàn)卻逐年下降,顯然這兩位科研人員學(xué)術(shù)影響力的發(fā)展態(tài)勢(shì)是不一樣的,因此需要從時(shí)序動(dòng)態(tài)的視角設(shè)計(jì)學(xué)術(shù)影響力的評(píng)價(jià)指標(biāo),使之能夠真實(shí)的反映出文獻(xiàn)在不同時(shí)期的引用文獻(xiàn)的價(jià)值。學(xué)術(shù)影響力的動(dòng)態(tài)評(píng)價(jià)指標(biāo)多集中在綜合性指標(biāo)的改造上,Sidiropoulos A以與論文發(fā)表年度的時(shí)長(zhǎng)呈反比的系數(shù)為權(quán)重,降低早期發(fā)表的論文的引文數(shù)量,再以修正后的引文數(shù)量定義了一種當(dāng)代的h指數(shù)[10],韓毅針對(duì)時(shí)間因素的稀釋效應(yīng)和凝聚效應(yīng),在P指數(shù)的計(jì)算框架下構(gòu)建了Pt1和Pt2指數(shù),分別用以評(píng)價(jià)不同發(fā)表時(shí)間和不同老化速度的文獻(xiàn)價(jià)值[5],此外高志等對(duì)各種學(xué)術(shù)影響力的動(dòng)態(tài)評(píng)價(jià)方法也做了深入的對(duì)比與分析[11],并針對(duì)科學(xué)家個(gè)人學(xué)術(shù)影響力隨時(shí)間變化的計(jì)算方法進(jìn)行了研究[12]。endprint

    綜合性指標(biāo)的優(yōu)點(diǎn)在于可以用一個(gè)指標(biāo)將研究實(shí)體在不同角度的科研績(jī)效綜合起來(lái)表征,在一定程度上體現(xiàn)了研究實(shí)體的整體面貌,但是在某些時(shí)候,我們又希望學(xué)術(shù)影響力的評(píng)價(jià)指標(biāo)能夠從某一個(gè)獨(dú)立的角度展現(xiàn)研究實(shí)體的科研績(jī)效,這樣更有利于我們對(duì)研究實(shí)體在某一個(gè)具體的方面存在的問(wèn)題進(jìn)行分析,而綜合性指標(biāo)顯然無(wú)法達(dá)到這一目的。以h指數(shù)為例,h指數(shù)是論文產(chǎn)出和學(xué)術(shù)質(zhì)量的綜合表征,但是卻無(wú)法告知我們研究實(shí)體在學(xué)術(shù)質(zhì)量這一單一維度上的表現(xiàn),Van Raan便指出不應(yīng)該用“一個(gè)音符”對(duì)研究人員或者研究團(tuán)隊(duì)的學(xué)術(shù)表現(xiàn)進(jìn)行闡述[8],Glnzel也指出設(shè)計(jì)多個(gè)評(píng)價(jià)指標(biāo)可以從不同的角度更加充分地反映學(xué)術(shù)的實(shí)際績(jī)效[9]。事實(shí)上,學(xué)術(shù)影響力的內(nèi)涵是多樣的,不僅意味著學(xué)術(shù)的傳播面和活躍度,也是學(xué)術(shù)質(zhì)量的一種表征,同時(shí)還體現(xiàn)了學(xué)術(shù)成果的重要性,例如論文數(shù)量、論文總被引次數(shù)可以描述研究實(shí)體學(xué)術(shù)的傳播度、輻射面,論文的篇均被引次數(shù)可以描述研究實(shí)體學(xué)術(shù)的質(zhì)量,論文的被引率可以描述研究實(shí)體學(xué)術(shù)上的轉(zhuǎn)化率、利用率,高被引論文、熱點(diǎn)論文等又可以描述研究實(shí)體在前沿研究上的學(xué)術(shù)影響力?;谶@種考慮,本文從篇均被引次數(shù)這一單一的維度出發(fā),引入時(shí)間因素,設(shè)計(jì)一種時(shí)序動(dòng)態(tài)視角下的學(xué)術(shù)影響力評(píng)價(jià)指標(biāo),以期將研究實(shí)體學(xué)術(shù)質(zhì)量的發(fā)展趨勢(shì)有效地描述出來(lái)。

    1 時(shí)序動(dòng)態(tài)視角下學(xué)術(shù)影響力評(píng)價(jià)指標(biāo)的設(shè)計(jì)

    研究實(shí)體(如科研人員、研究團(tuán)隊(duì),機(jī)構(gòu)、機(jī)構(gòu)的某一學(xué)科或者機(jī)構(gòu)下屬的二級(jí)單位等)的學(xué)術(shù)成果通??梢杂闷浒l(fā)表的論文集合體現(xiàn),現(xiàn)假設(shè)某一研究實(shí)體的論文集合中文獻(xiàn)數(shù)量為N,截至到統(tǒng)計(jì)時(shí)間點(diǎn)(比如進(jìn)行被引次數(shù)統(tǒng)計(jì)的當(dāng)天)時(shí),被引用的總次數(shù)為C次,那么該研究實(shí)體的學(xué)術(shù)影響力可以用論文集合的篇均被引次數(shù)Cpp=CN表征。顯然C是由發(fā)生在不同時(shí)間節(jié)點(diǎn)的引文數(shù)量C1,C2,…,組成的,即C=∑iCi ,例如一篇當(dāng)前被引用總次數(shù)為10的論文,其被引總次數(shù)可能是由來(lái)自2015年的2次被引和2016年的8次被引組成的。由于不同時(shí)期的引文數(shù)量所代表的價(jià)值是不一樣的,例如兩篇被引次數(shù)相同的論文,一篇引文量逐年上升,另一篇引文量逐年下降,其表征的學(xué)術(shù)價(jià)值顯然是不同的。因此為了區(qū)分其價(jià)值的差異,我們希望能夠?yàn)椴煌瑫r(shí)間節(jié)點(diǎn)上的引文數(shù)量賦予不同的權(quán)重系數(shù)λ1,λ2…,λi,…,最終該研究實(shí)體的總被引次數(shù)可以表示為各時(shí)期引文數(shù)量的線性加權(quán),即=∑iλiCi,進(jìn)而將研究實(shí)體學(xué)術(shù)影響力表征為

    但是注意到,論文集合在某一個(gè)時(shí)間點(diǎn)的引文數(shù)量Ci往往又是由不同時(shí)期發(fā)表的論文在該時(shí)間點(diǎn)的被引次數(shù)組成的,即Ci=∑jCji ,不同發(fā)表時(shí)間j的論文在時(shí)間點(diǎn)i上的被引次數(shù)Cji是不具可比性的,例如一篇2010年發(fā)表并在2015年被引用15次的論文與另一篇2012年發(fā)表并在2015年被引用12次的論文,其學(xué)術(shù)影響力是無(wú)法比較的,韓毅稱這種導(dǎo)致不可比性的影響因素為稀釋效應(yīng),并根據(jù)發(fā)文時(shí)間對(duì)Cji進(jìn)行簡(jiǎn)單平均作為修正稀釋效應(yīng)的加權(quán)[6]。如果把這種稀釋效應(yīng)推廣至更一般的情況,即這些論文還來(lái)自不同學(xué)科,于是Ci可進(jìn)一步地描述為Ci=∑i∑kCj,ki ,其中Cj,ki表示第j年發(fā)表的來(lái)自學(xué)科k的論文在第i年的引文數(shù)量,顯然論文發(fā)表時(shí)間和論文所屬學(xué)科的不同都會(huì)對(duì)引文數(shù)量產(chǎn)生影響,因此Cj,ki之間是有明顯差異的,彼此之間同樣是不具可比性的,這樣由Cj,ki累加得到的各時(shí)間點(diǎn)上的被引次數(shù)Ci是非標(biāo)準(zhǔn)非規(guī)范的,在此基礎(chǔ)上對(duì)Ci賦予權(quán)值也就缺乏合理性,并且嚴(yán)格來(lái)說(shuō)直接把不同的Cj,ki相加也是沒有任何意義的,例如一位科研人員在2010年發(fā)表了一篇計(jì)算機(jī)方向的論文,在2015年被引用10次,在2012年發(fā)表了一篇數(shù)學(xué)方向的論文,在2015年被引用6次,那么這兩篇論文在2015年的被引用總次數(shù)C2015不能簡(jiǎn)單的看作是C2015=10+6,因?yàn)?015年的被引次數(shù)來(lái)自發(fā)表于不同的時(shí)期且屬于不同的學(xué)科的兩篇論文,其被引次數(shù)10次與6次是在不同的尺度下測(cè)度得到的,直接取和10+6是沒有任何實(shí)際意義的。對(duì)于這種情況我們考慮引入學(xué)科的篇均被引次數(shù)對(duì)Cj,ki進(jìn)行修正,消除不同發(fā)文時(shí)間和不同學(xué)科對(duì)引文帶來(lái)的差異性,這樣既保證了對(duì)各時(shí)期的被引次數(shù)Ci進(jìn)行賦值的合理性,還能使得這樣設(shè)計(jì)的評(píng)價(jià)指標(biāo)可以消除學(xué)科之間的引用差異,實(shí)現(xiàn)對(duì)不同學(xué)科的學(xué)術(shù)影響力的橫向比較?;谏鲜隹紤],我們?cè)O(shè)計(jì)的時(shí)序動(dòng)態(tài)學(xué)術(shù)影響力評(píng)價(jià)指標(biāo)分為以下兩步完成:

    Step 1.對(duì)于發(fā)表于不同年代、屬于不同學(xué)科的文獻(xiàn)在同一個(gè)統(tǒng)計(jì)時(shí)間點(diǎn)上的引文標(biāo)準(zhǔn)化處理。

    假設(shè)論文集合中屬于學(xué)科k發(fā)表于第j年的所有論文在第i年的被引總次數(shù)為Cj,ki。其中,k=1,2,…,K,表示待評(píng)價(jià)論文集合共涉及K個(gè)學(xué)科;j=1,2,…,J,表示將該論文集合中最早發(fā)表的論文時(shí)間作為統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)的第1年,最晚發(fā)表的論文時(shí)間作為第J年;i=1,2,…,I,表示將該論文集合中最早發(fā)表的論文時(shí)間作為統(tǒng)計(jì)被引次數(shù)的時(shí)間節(jié)點(diǎn)的第1年,將統(tǒng)計(jì)被引次數(shù)的時(shí)間節(jié)點(diǎn)的最后一年記為第I年。

    我們首先按照發(fā)表時(shí)間和所屬學(xué)科將論文集合中的論文劃分到不同的組,每一組的論文均發(fā)表于相同年份、屬于相同學(xué)科,然后對(duì)每個(gè)組的論文引入一個(gè)對(duì)應(yīng)的參考文獻(xiàn)集合,例如,可以選擇為第j年發(fā)表的屬于學(xué)科k的全球論文,顯然同一組的論文在后續(xù)時(shí)間段被他人引用應(yīng)當(dāng)具有相同的共性,因此用該參考文獻(xiàn)集合的論文篇均被引次數(shù)作為基準(zhǔn)值可以修正由于論文之間發(fā)表年份不同、所屬學(xué)科不同帶來(lái)的稀釋效應(yīng)的影響。設(shè)第j年發(fā)表的屬于學(xué)科k的論文的篇均被引次數(shù)為ej,ki,于是第j年發(fā)表的屬于學(xué)科k的論文在任意一個(gè)統(tǒng)計(jì)時(shí)間點(diǎn)i的被引次數(shù)j,ki可以修正為:

    需要說(shuō)明的是,由于通常選擇的學(xué)科劃分是ESI學(xué)科,按照論文與ESI學(xué)科的對(duì)應(yīng)規(guī)則,一篇論文只對(duì)應(yīng)一個(gè)ESI學(xué)科,但是如果學(xué)科選取的Web of Science的學(xué)科劃分方法,則會(huì)出現(xiàn)一篇論文對(duì)應(yīng)多個(gè)學(xué)科的情況,為此我們是這樣考慮的:將修正論文被引次數(shù)的基準(zhǔn)值ej,k取作論文對(duì)應(yīng)的相應(yīng)學(xué)科的論文篇均被引次數(shù)的平均值。例如,一篇2012年的論文在2015年的被引次數(shù)為15次,這篇論文對(duì)應(yīng)Mathematics、Mathemitics,Applied和Mathemitics,Interdisciplinary Application 3個(gè)學(xué)科,而這3個(gè)學(xué)科2012年的論文篇均被引次數(shù)分別為3.46、4.89和6.81,那么則將3個(gè)學(xué)科2012年的論文篇均被引次數(shù)的平均值作為修正這篇論文被引次數(shù)的基準(zhǔn)值,即e=((3.46+4.89+6.81))/3=5.05,這篇論文在2015年修正后的被引次數(shù)則為15/5.05=2.97,這樣把論文集合中2012年的每篇論文在2015年修正后的被引次數(shù)加起來(lái),則為論文集合中2012年的論文在2015年的修正后的被引次數(shù)。不失一般性,如果論文集合中的每篇論文均對(duì)應(yīng)一個(gè)學(xué)科,那么這樣的處理方法則與上述Step1的方法是一致的。endprint

    Step 2.對(duì)于發(fā)生于不同時(shí)間的引用,其引文的加權(quán)處理。

    可以看到,在上一步我們將不同年代發(fā)表的文獻(xiàn)在后續(xù)各統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)上的引文做了標(biāo)準(zhǔn)化的處理,得到的標(biāo)準(zhǔn)化引文數(shù)據(jù)既保證了對(duì)于發(fā)表于不同年代、屬于不同學(xué)科的文獻(xiàn)在某一個(gè)時(shí)間點(diǎn)的被引用次數(shù)的價(jià)值都是等同的,同時(shí)也保證在第二步對(duì)于不同時(shí)間點(diǎn)的被引次數(shù)的加權(quán)是合理科學(xué)的。從(1)式可知,傳統(tǒng)的論文集合篇均被引次數(shù)Cpp=∑I1Ci/N是論文集合在某一時(shí)間段的各統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)上的篇均被引次數(shù)的線性加權(quán),并且認(rèn)為每一統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)的權(quán)重是相等的,而DAI則可以看作是該論文集合在各統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)上修正后的篇均被引次數(shù)的線性加權(quán),并且對(duì)每一統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)賦予了不同的權(quán)重,這樣便可以對(duì)在不同時(shí)期學(xué)術(shù)影響力表現(xiàn)不同的研究實(shí)體進(jìn)行有效的區(qū)分。

    2 實(shí)證分析

    2.1 針對(duì)機(jī)構(gòu)ESI學(xué)科的學(xué)術(shù)影響力評(píng)價(jià)

    為驗(yàn)證我們?cè)O(shè)計(jì)的DAI指標(biāo)的合理性,以四川大學(xué)的化學(xué)、物理、計(jì)算機(jī)科學(xué)等18個(gè)ESI學(xué)科作為評(píng)價(jià)對(duì)象,利用DAI指標(biāo)對(duì)各ESI學(xué)科的學(xué)術(shù)影響力進(jìn)行評(píng)價(jià)??紤]到引文有一定的滯后性,在近年發(fā)表的論文其引文還可能存在較大幅度的增長(zhǎng),目前還不能完全體現(xiàn)其真實(shí)的價(jià)值,因此文獻(xiàn)發(fā)表時(shí)間限定為2009-2013年。

    在InCites數(shù)據(jù)庫(kù)中可以下載到四川大學(xué)各ESI學(xué)科論文的列表(下稱ESI學(xué)科論文列表),論文列表中包含該學(xué)科各論文的標(biāo)題、作者、來(lái)源期刊等信息,但是InCites數(shù)據(jù)庫(kù)并不提供這些論文在隨后各年的被引用次數(shù),所以需要再在Web of Science數(shù)據(jù)庫(kù)中以Sichuan Univ*作為檢索地址,并限定檢索年份為2009-2013年檢索四川大學(xué)的科研人員在這一期間發(fā)表的所有文獻(xiàn),通過(guò)Web of Science提供的“創(chuàng)建引文報(bào)告”功能下載到這些文獻(xiàn)的所有引文列表(下稱WoS論文列表),列表中包括了被引文獻(xiàn)的標(biāo)題、作者、發(fā)表時(shí)間、來(lái)源期刊以及在隨后各年的被引用次數(shù)。然后依據(jù)ESI學(xué)科論文列表中的每一篇論文的標(biāo)題在WoS論文列表中找到同一篇論文并由此獲得該論文在隨后各年的被引用次數(shù)。按照這一步驟,可以獲得所需的四川大學(xué)18各ESI學(xué)科在2009-2013年發(fā)表的論文及其在隨后各年的被引用次數(shù)。計(jì)算過(guò)程通過(guò)python和matlab編程實(shí)現(xiàn)。下面以計(jì)算機(jī)科學(xué)學(xué)科為例對(duì)DAI指標(biāo)的計(jì)算方式進(jìn)行介紹:

    Step 1.首先對(duì)該學(xué)科每一年發(fā)表的論文在隨后各年被引次數(shù)進(jìn)行修正。例如,2009年計(jì)算機(jī)科學(xué)學(xué)科發(fā)表的論文在隨后各年被引用次數(shù)C2009j(其中j=2009,2010,…,2016)見表1。

    而2009年發(fā)表的計(jì)算機(jī)科學(xué)學(xué)科全球的論文截止到2017年4月的篇均被引次數(shù)為e2009=9.41。于是該學(xué)科2009年發(fā)表的論文在隨后各年被引次數(shù)則按照下式進(jìn)行修正:

    修正后的各年被引用次數(shù)見表2。

    同理,可得計(jì)算機(jī)學(xué)科在其它年份發(fā)表的論文在隨后各年的修正被引用次數(shù),見表3。

    此時(shí),表中各列都是修正后的標(biāo)準(zhǔn)化數(shù)據(jù),也就是說(shuō)論文由于發(fā)表時(shí)間不同而造成的稀釋效應(yīng)已經(jīng)被消除,從而在不同發(fā)表年份的論文在同一時(shí)間節(jié)點(diǎn)被引用的次數(shù)(即是同一列的數(shù)據(jù))已經(jīng)修正到了統(tǒng)一的尺度下,因此可以保證表中數(shù)據(jù)按列相加的合理性。按表3各列相加,可得計(jì)算機(jī)科學(xué)學(xué)科2009-2013年發(fā)表的論文在2009-2016各年份修正后的被引用次數(shù),而2009-2013年計(jì)算機(jī)科學(xué)學(xué)科論文數(shù)量為204篇,因此再用修正后的被引次數(shù)除以論文數(shù)量即可得計(jì)算機(jī)科學(xué)學(xué)科2009-2013年發(fā)表的論文在2009-2016各年份修正后的篇均被引次數(shù),見表4。

    Step 2.對(duì)各統(tǒng)計(jì)時(shí)間點(diǎn)的修正篇均被引用次數(shù)進(jìn)行線性加權(quán)。取在第i年被引用次數(shù)所對(duì)應(yīng)的動(dòng)態(tài)權(quán)重為e0.4*ki,其中i=2009,2010,…,2016,ki是第i年距離2009年的時(shí)間間隔,例如k2010=2010-2009=1,顯然這一權(quán)重設(shè)計(jì)意味著越靠近當(dāng)前時(shí)期的引文具有越高的權(quán)重,從而可以用以突出近期學(xué)術(shù)影響力較好的研究實(shí)體。于是計(jì)算機(jī)學(xué)科的動(dòng)態(tài)學(xué)術(shù)影響力DAI指標(biāo)值為:

    DAIcomputer=0.0047*e0.4*0+0.0289*e0.4*1+0.0646*e0.4*2+0.1161*e0.4*3+0.1928*e0.4*4+0.2861*e0.4*5+0.2833*e0.4*6+0.1950*e0.4*7=14.88

    同理,可以計(jì)算其它17個(gè)學(xué)科的DAI指標(biāo)值。為與其它指標(biāo)對(duì)比,同時(shí)也分別計(jì)算了這18個(gè)學(xué)科的篇均被引次數(shù)Cpp、MNCS值、總引用次數(shù)、論文總篇數(shù)、h指數(shù),并按DAI指標(biāo)值降序排序。見表5。

    根據(jù)表5的計(jì)算結(jié)果可以看到,DAI指標(biāo)比h指數(shù)的區(qū)分度更高,說(shuō)明DAI指標(biāo)作為一種單一性指標(biāo)與h這種綜合性指標(biāo)相比,區(qū)分度更高,也更能展示研究實(shí)體在篇均被引次數(shù)這一單一維度上的細(xì)節(jié)。DAI、Cpp和MNCS 3個(gè)指標(biāo)在某些學(xué)科的排序上出現(xiàn)了不一致,例如分子生物學(xué)與遺傳學(xué)學(xué)科的DAI指標(biāo)值高于臨床醫(yī)學(xué)學(xué)科,但是前者的Cpp和MNCS均低于后者,這說(shuō)明雖然在被引次數(shù)的累積上前者低于后者,但是前者被引次數(shù)的累積大多出現(xiàn)在近期,后者被引次數(shù)的累積大多出現(xiàn)在早期,DAI指標(biāo)通過(guò)對(duì)不同時(shí)間的引文進(jìn)行了加權(quán)處理,從而突出了在近期學(xué)術(shù)影響力表現(xiàn)較好的分子生物學(xué)與遺傳學(xué)學(xué)科??傮w來(lái)說(shuō),心理學(xué)/精神病學(xué)、農(nóng)業(yè)科學(xué)、藥理學(xué)與毒物學(xué)3個(gè)學(xué)科不僅在近期有較高的影響力,在整個(gè)統(tǒng)計(jì)時(shí)間段的學(xué)術(shù)影響力也高于其它學(xué)科。

    從表5的計(jì)算結(jié)果同時(shí)也可以看到,DAI、h指數(shù)、MNCS等指標(biāo)均可用于描述研究實(shí)體的學(xué)術(shù)影響力,但是描述研究實(shí)體學(xué)術(shù)影響力的細(xì)致程度有所不同。h指數(shù)并未區(qū)分不同學(xué)科論文的被引次數(shù),因此不能將由于學(xué)科引用差異性造成的學(xué)術(shù)影響力的差異刻畫出來(lái),而DAI指標(biāo)包括MNCS指標(biāo)均考慮到了論文的所屬學(xué)科在引用上的差異性,并利用學(xué)科論文篇均被引次數(shù)消除了這種差異性,這是DAI指標(biāo)或者M(jìn)NCS指標(biāo)區(qū)分度高于h指數(shù)的原因,并且也更為合理科學(xué)。而DAI指標(biāo)和MNCS指標(biāo)相比,又進(jìn)一步地考慮到了論文被引時(shí)間的差異同樣也反映了不同的學(xué)術(shù)影響力,因此DAI指標(biāo)相對(duì)于MNCS指標(biāo)在描述研究實(shí)體的學(xué)術(shù)影響力(特別是在描述學(xué)術(shù)影響力的發(fā)展趨勢(shì))方面又要更為精準(zhǔn)細(xì)致。endprint

    進(jìn)一步地,引入Pearson相關(guān)系數(shù)分析6個(gè)指標(biāo)值的相關(guān)程度,見表6。

    從表6可以看到,DAI、Cpp和MNCS 3個(gè)指標(biāo)與論文被引總次數(shù)和論文總篇數(shù)2個(gè)指標(biāo)之間的相關(guān)性均較低,說(shuō)明DAI、Cpp和MNCS具有較相似的特性,主要體現(xiàn)的是研究實(shí)體的學(xué)術(shù)質(zhì)量,與研究實(shí)體整體上的學(xué)術(shù)影響力和學(xué)術(shù)產(chǎn)出能力沒有太大的關(guān)系。DAI、篇均被引次數(shù)和MNCS 3個(gè)指標(biāo)中,DAI與Cpp相關(guān)性較低,但與MNCS卻高度相關(guān),說(shuō)明DAI指標(biāo)確實(shí)能夠像MNCS一樣,消除學(xué)科之間由于引用規(guī)律的不同而造成的差異性。

    2.2 針對(duì)個(gè)人的的學(xué)術(shù)影響力評(píng)價(jià)

    為進(jìn)一步探討DAI指標(biāo)的性質(zhì)下面選取來(lái)自四川大學(xué)的12名學(xué)者作為評(píng)價(jià)對(duì)象,對(duì)其學(xué)術(shù)論文的影響力進(jìn)行評(píng)價(jià)分析,進(jìn)而對(duì)比DAI和MNCS 2個(gè)指標(biāo)的不同。12名學(xué)者分別來(lái)自8個(gè)不同的院系,學(xué)術(shù)論文涉及化學(xué)、物理、計(jì)算機(jī)科學(xué)、數(shù)學(xué)、臨床醫(yī)學(xué)等19個(gè)ESI學(xué)科。

    2.2.1 DAI指標(biāo)“突出當(dāng)前引用”的性質(zhì)

    計(jì)算12名學(xué)者的DAI和MNCS指標(biāo)值,并以DAI指標(biāo)值高低排序,見表7。

    從表7可知,序號(hào)為2、3、4、6、7、8的學(xué)者在DAI和MNCS 2個(gè)指標(biāo)值上的排序發(fā)生了較大的變化。選取學(xué)者2和學(xué)者4做進(jìn)一步的對(duì)比,分析二者DAI和MNCS指標(biāo)值排序出現(xiàn)差異的原因。由于學(xué)者的MNCS值是他們?cè)?009-2013年5年的MNCSi值的平均值,因此首先對(duì)兩位學(xué)者在2009-2013年5年的MNCS值進(jìn)行分析,見表8。

    由表8可知,學(xué)者4在2009年、2010年、2012年和2013年4年的MNCS值都高于學(xué)者2,因此使得學(xué)者4五年的總MNCS值也高于學(xué)者2。從上文的分析中可知,DAI是對(duì)論文集合在各統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)上的修正篇均被引次數(shù)進(jìn)行的加權(quán)平均,因此以學(xué)者2和學(xué)者4在2009年發(fā)表的論文集合為例,兩個(gè)學(xué)者的論文集合在各統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)上的修正篇均被引次數(shù)形成的趨勢(shì)圖如圖1所示。

    由圖1可知,學(xué)者2在2009-2013年這5年修正篇均次數(shù)低于學(xué)者4,但是從2014年后的3年均高于學(xué)者4,由于各學(xué)者在2009年的MNCS值與其論文在2009-2016年總共8年累積的被引次數(shù)有關(guān),顯然,學(xué)者4在論文的被引次數(shù)在累積量上高于學(xué)者2,因此使得學(xué)者4在2009年的MNCS2009也高于學(xué)者2。但是學(xué)者4論文的被引次數(shù)大多來(lái)源于早期的、遠(yuǎn)離當(dāng)前的引用,而學(xué)者2的引用累積雖然低于學(xué)者4,但是在近期的引用量卻明顯高于學(xué)者4,由于DAI指標(biāo)具有“突出當(dāng)前、遺忘過(guò)去”的作用,因此放大了學(xué)者2在近期引用高于學(xué)者4的“優(yōu)勢(shì)”,而忽略了學(xué)者2在早期引用低于學(xué)者4的“劣勢(shì)”??傮w來(lái)看,學(xué)者2雖然在被引次數(shù)的累積量上低于學(xué)者4,導(dǎo)致其MNCS值低于學(xué)者4,但是學(xué)者2的引用大多聚集在近期,學(xué)者4的引用大多聚集在早期,因此DAI突出了近期引用表現(xiàn)出色的學(xué)者2,這說(shuō)明DAI能夠?qū)⒔趯W(xué)術(shù)影響力不同的學(xué)者進(jìn)行有效的區(qū)分。

    2.2.2 DAI指標(biāo)“突出主要研究方向”的性質(zhì)

    從上式可以看到,這種標(biāo)準(zhǔn)化處理本質(zhì)上是將各學(xué)科在某一年份的論文的相對(duì)影響力(即MNCS值)按照該學(xué)科論文產(chǎn)出份額的歸一化。對(duì)上式進(jìn)一步分析還可以看到,對(duì)學(xué)科k第i年發(fā)表的論文的被引次數(shù)Cj,ki的修正首先是采用該學(xué)科在第i年的一個(gè)參考論文集合(本文中選擇為該學(xué)科全世界的論文)的篇均被引次數(shù)作為這一論文集合的篇均被引次數(shù)的一個(gè)比較基準(zhǔn)值,在此基礎(chǔ)上對(duì)這一標(biāo)準(zhǔn)化的值(實(shí)際上就是該學(xué)科的MNCS值)按照該論文集合占總論文集合的比例賦予一個(gè)權(quán)重,保證了比例較大的某一論文集合的學(xué)術(shù)影響力能夠?qū)φ麄€(gè)論文集合的學(xué)術(shù)影響力起到更大的作用。因此,影響研究實(shí)體DAI指標(biāo)值的因素有兩個(gè):一是該研究實(shí)體論文在不同時(shí)期引文數(shù)量,靠近當(dāng)前的引文越多,DAI指數(shù)越高;二是該研究實(shí)體中主要的學(xué)科論文的相對(duì)影響力(即該學(xué)科的MNCS值),主要學(xué)科論文的相對(duì)影響力越高,DAI指數(shù)也越高。

    為此我們以學(xué)者7和學(xué)者8為例作進(jìn)一步的闡述。學(xué)者7的論文共涉及生物學(xué)與分子生物學(xué)、材料科學(xué)等6個(gè)ESI學(xué)科,學(xué)者8的論文共涉及生物學(xué)與分子生物學(xué)、材料科學(xué)等6個(gè)ESI學(xué)科,兩位學(xué)者各個(gè)學(xué)科上的論文MNCS值分別見表9和表10。

    從表9和表10的對(duì)比可以看到,學(xué)者8的MNCS值高于學(xué)者7的重要原因在于他在生物學(xué)與分子生物學(xué)學(xué)科的論文表現(xiàn)較好(MNCS值為2.15,明顯高于2位學(xué)者的其他11個(gè)學(xué)科論文的MNCS),這一學(xué)科的MNCS值極大的拉高了他整體的MNCS值,使得學(xué)者8的MNCS值最終高于學(xué)者7,但是生物學(xué)與分子生物學(xué)學(xué)科并非學(xué)者8的主要研究方向(在他發(fā)表的所以論文中生物學(xué)與分子生物學(xué)學(xué)科論文僅占3.3%),根據(jù)DAI的性質(zhì),這一較小比例論文的學(xué)術(shù)影響力并不能對(duì)學(xué)者8的DAI值產(chǎn)生較大的影響。實(shí)際上,學(xué)者7和學(xué)者8的主要研究方向均為化學(xué)學(xué)科(在他們發(fā)表的論文中化學(xué)學(xué)科各占76.1%和81.3%),但是2位學(xué)者在化學(xué)學(xué)科的表現(xiàn)卻不盡相同,學(xué)者7在化學(xué)學(xué)科的MNCS(1.7)明顯高于學(xué)者8的MNCS(1.25),根據(jù)DAI的性質(zhì),2位學(xué)者的DAI值受到其主要研究方向(化學(xué)學(xué)科)的論文的MNCS值影響,這使得學(xué)者7的DAI高于學(xué)者8。這說(shuō)明DAI指標(biāo)體現(xiàn)的是研究實(shí)體主要研究方向上論文的表現(xiàn)。

    3 結(jié) 論

    本文我們?cè)O(shè)計(jì)了一種時(shí)序動(dòng)態(tài)的學(xué)術(shù)影響力評(píng)價(jià)指標(biāo),將待評(píng)價(jià)的論文集合中的論文按照發(fā)表時(shí)間和所屬學(xué)科的不同劃分為不同的組別,對(duì)每一個(gè)組別的論文引入一個(gè)對(duì)應(yīng)的參考文獻(xiàn)集合,引入?yún)⒖嘉墨I(xiàn)集合的篇均被引次數(shù)作為該組別論文的基準(zhǔn)值,消除了由于發(fā)表時(shí)間和所屬學(xué)科不同造成的稀釋效應(yīng),進(jìn)而再對(duì)不同統(tǒng)計(jì)時(shí)間點(diǎn)的被引次數(shù)賦予不同的權(quán)重,用以表征發(fā)生在不同時(shí)期的引文的不同價(jià)值。通過(guò)實(shí)證研究可知,這一指標(biāo)受到兩個(gè)因素的影響:一是論文集合在后續(xù)各時(shí)間段的引文分布,靠近當(dāng)前的被引次數(shù)越高,DAI指標(biāo)值越高;二是論文集合中主要學(xué)科的論文相對(duì)影響力,占較大份額的學(xué)科論文相對(duì)影響力越高,DAI指標(biāo)值越高。這說(shuō)明DAI指標(biāo)可以對(duì)主要研究方向上學(xué)術(shù)發(fā)展趨勢(shì)不同的研究實(shí)體進(jìn)行有效的區(qū)分,有助于決策者更好地了解到各個(gè)研究實(shí)體整體層面更為細(xì)致和精準(zhǔn)的學(xué)術(shù)表現(xiàn)。endprint

    參考文獻(xiàn)

    [1]King D A.The scientific impact of nations[J].NATURE,2004,430(6997):311-316.

    [2]Garfield E.CITATION ANALYSIS AS A TOOL IN JOURNAL EVALUATION - JOURNALS CAN BE RANKED BY FREQUENCY AND IMPACT OF CITATIONS FOR SCIENCE POLICY STUDIES[J].SCIENCE,1972,178(4060):471.

    [3]Bornmann L,Daniel H D.Functional use of frequently and infrequently cited articles in citing publications.A content analysis of citations to articles with low and high citation counts.Proceedings of ISSI 2007:11th International Conference of the International Society for Scientometrics and Informetrics,Vols I and II,2007:149-153.

    [4]Daniel H D.Publications as a measure of scientific advancement and of scientists' productivity[J].LEARNED PUBLISHING,2005,18(2):143-148.

    [5]韓毅,夏慧.時(shí)間因素視角下科研人員評(píng)價(jià)的Pt指數(shù)研究[J].中國(guó)圖書館學(xué)報(bào),2015,(6):73-85.

    [6]花芳.學(xué)科基準(zhǔn)化的科研績(jī)效定量評(píng)價(jià)方法及指標(biāo)研究[J].圖書情報(bào)工作,2014,(3):78-84.

    [7]Moed H F.New developments in the use of citation analysis in research evaluation[J].ARCHIVUM IMMUNOLOGIAE ET THERAPIAE EXPERIMENTALIS,2009,57(1):13-18..

    [8]Van Raan A.Comparison of the Hirsch-index with standard bibliometric indicators and with peer judgment for 147 chemistry research groups[J].SCIENTOMETRICS,2006,67(3):491-502

    [9]Glnzel,wolfgang.On the opportunities and limitations of the H-index[J].Science focus,2006.

    [10]Sidiropoulos A,Katsaros D,Manolopoulos Y.Generalized Hirsch h-index for disclosing latent facts in citation networks[J].SCIENTOMETRICS,2007,72(2):253-280.

    [11]高志,張志強(qiáng).個(gè)人學(xué)術(shù)影響力的動(dòng)態(tài)評(píng)價(jià)方法研究綜述[J].情報(bào)雜志,2015,(11):40-43,78.

    [12]高志,張志強(qiáng).科學(xué)家個(gè)人學(xué)術(shù)影響力隨時(shí)間變化的計(jì)算方法研究[J].現(xiàn)代情報(bào),2017,37(5):66-71.endprint

    猜你喜歡
    評(píng)價(jià)方法實(shí)證研究
    程序設(shè)計(jì)類課程多維評(píng)價(jià)方法探索
    商用車動(dòng)力性、經(jīng)濟(jì)性評(píng)價(jià)方法研究
    汽車科技(2016年6期)2016-12-19 20:28:28
    信息技術(shù)支撐下的課堂應(yīng)如何評(píng)價(jià)
    現(xiàn)代教育技術(shù)在數(shù)學(xué)教學(xué)中的作用
    中國(guó)在新農(nóng)村建設(shè)中金融支持的實(shí)證研究
    簡(jiǎn)述翻譯研究中實(shí)證研究法的應(yīng)用
    科技視界(2016年18期)2016-11-03 22:59:51
    玉雕專業(yè)學(xué)生專業(yè)認(rèn)同的實(shí)證研究
    人間(2016年26期)2016-11-03 18:10:25
    溫州小微企業(yè)融資環(huán)境及能力分析
    認(rèn)知語(yǔ)言視角下英語(yǔ)詞匯多義習(xí)得的實(shí)證研究
    科技視界(2016年21期)2016-10-17 19:05:25
    實(shí)證分析會(huì)計(jì)信息對(duì)股價(jià)的影響
    商(2016年27期)2016-10-17 05:39:59
    亚洲中文av在线| 激情五月婷婷亚洲| 无限看片的www在线观看| 国产精品久久久久久精品古装| 国产淫语在线视频| 亚洲国产欧美一区二区综合| 国产成人91sexporn| 少妇人妻久久综合中文| 极品人妻少妇av视频| 激情五月婷婷亚洲| 天堂俺去俺来也www色官网| 肉色欧美久久久久久久蜜桃| 午夜老司机福利片| 精品一区二区三区av网在线观看 | 精品亚洲成a人片在线观看| 久久鲁丝午夜福利片| 久久99精品国语久久久| 久久影院123| 一级毛片我不卡| 国产黄色视频一区二区在线观看| 国产一级毛片在线| 韩国高清视频一区二区三区| 女人被躁到高潮嗷嗷叫费观| 国产日韩欧美亚洲二区| 久热这里只有精品99| 亚洲国产精品999| 欧美日本中文国产一区发布| 欧美最新免费一区二区三区| 满18在线观看网站| 街头女战士在线观看网站| 午夜老司机福利片| 国产男女内射视频| 校园人妻丝袜中文字幕| 少妇 在线观看| 日韩一区二区视频免费看| 国产免费福利视频在线观看| 多毛熟女@视频| a 毛片基地| 人人妻,人人澡人人爽秒播 | 国产黄色免费在线视频| 搡老乐熟女国产| 国产老妇伦熟女老妇高清| 啦啦啦啦在线视频资源| 成人手机av| 永久免费av网站大全| 国产av精品麻豆| 美女高潮到喷水免费观看| 99国产综合亚洲精品| 欧美在线一区亚洲| 亚洲美女黄色视频免费看| 精品国产一区二区久久| 男女高潮啪啪啪动态图| 国产成人a∨麻豆精品| 超碰成人久久| 亚洲五月色婷婷综合| 十八禁高潮呻吟视频| 热99久久久久精品小说推荐| 国产欧美亚洲国产| 亚洲av日韩在线播放| 人人妻人人澡人人看| 国产精品三级大全| 久久青草综合色| 国产精品99久久99久久久不卡 | 亚洲国产精品999| 尾随美女入室| 久热爱精品视频在线9| videos熟女内射| 欧美在线黄色| 另类亚洲欧美激情| 精品国产露脸久久av麻豆| 在线观看免费午夜福利视频| 男女边吃奶边做爰视频| 欧美人与性动交α欧美软件| 国产 精品1| 纯流量卡能插随身wifi吗| 欧美黄色片欧美黄色片| 一级,二级,三级黄色视频| 日韩伦理黄色片| 日韩av免费高清视频| 欧美乱码精品一区二区三区| 久久精品久久久久久久性| 久久精品aⅴ一区二区三区四区| 女人久久www免费人成看片| 免费高清在线观看视频在线观看| 在线观看三级黄色| 中文字幕av电影在线播放| 久久久久网色| 晚上一个人看的免费电影| 国产在线一区二区三区精| 午夜福利乱码中文字幕| 性高湖久久久久久久久免费观看| 欧美在线一区亚洲| 日韩伦理黄色片| 国产成人啪精品午夜网站| 国产1区2区3区精品| 亚洲欧美精品综合一区二区三区| 亚洲精品一区蜜桃| 另类亚洲欧美激情| 亚洲成人av在线免费| 国产精品国产三级专区第一集| 纵有疾风起免费观看全集完整版| 亚洲人成电影观看| 国产成人91sexporn| 一区二区三区乱码不卡18| 国产野战对白在线观看| 久久免费观看电影| xxxhd国产人妻xxx| 高清在线视频一区二区三区| 亚洲国产精品一区二区三区在线| 丰满乱子伦码专区| 日韩中文字幕视频在线看片| 精品一区二区三区四区五区乱码 | av一本久久久久| 亚洲情色 制服丝袜| 丝袜美足系列| 国产精品久久久久久人妻精品电影 | www.自偷自拍.com| 午夜影院在线不卡| 国产一卡二卡三卡精品 | 亚洲欧洲国产日韩| www.熟女人妻精品国产| 99九九在线精品视频| 韩国av在线不卡| 晚上一个人看的免费电影| 久久国产精品男人的天堂亚洲| www.av在线官网国产| 亚洲av国产av综合av卡| 少妇人妻久久综合中文| 黄片播放在线免费| a级毛片黄视频| 国产日韩欧美亚洲二区| 岛国毛片在线播放| 哪个播放器可以免费观看大片| 在线观看国产h片| 秋霞在线观看毛片| av在线老鸭窝| 色精品久久人妻99蜜桃| 日本爱情动作片www.在线观看| 亚洲精品中文字幕在线视频| 宅男免费午夜| 又大又爽又粗| 欧美少妇被猛烈插入视频| 青春草国产在线视频| 亚洲精华国产精华液的使用体验| 亚洲久久久国产精品| 日韩欧美精品免费久久| a级毛片黄视频| 国产精品久久久av美女十八| 亚洲成人av在线免费| 操美女的视频在线观看| 国产精品久久久久成人av| 老熟女久久久| 老司机影院毛片| 日本wwww免费看| 国精品久久久久久国模美| 天堂俺去俺来也www色官网| 美女午夜性视频免费| 国产精品.久久久| 街头女战士在线观看网站| 国产亚洲午夜精品一区二区久久| 久久精品久久精品一区二区三区| 丝袜脚勾引网站| 免费看不卡的av| 最黄视频免费看| 咕卡用的链子| 欧美黄色片欧美黄色片| 日本vs欧美在线观看视频| 国产老妇伦熟女老妇高清| 午夜福利,免费看| 精品国产一区二区久久| 夜夜骑夜夜射夜夜干| 久热这里只有精品99| 亚洲天堂av无毛| 99久久99久久久精品蜜桃| 男人添女人高潮全过程视频| 日本一区二区免费在线视频| 下体分泌物呈黄色| 国产高清不卡午夜福利| 亚洲av电影在线观看一区二区三区| 国产精品蜜桃在线观看| 黄频高清免费视频| av在线播放精品| 亚洲国产毛片av蜜桃av| 久久99精品国语久久久| 国产精品熟女久久久久浪| av视频免费观看在线观看| 亚洲熟女毛片儿| 日本wwww免费看| 亚洲欧洲日产国产| 99久国产av精品国产电影| 久久天躁狠狠躁夜夜2o2o | 国产男女超爽视频在线观看| 免费久久久久久久精品成人欧美视频| www.自偷自拍.com| 在线观看免费日韩欧美大片| 国产精品久久久久成人av| 熟女av电影| 菩萨蛮人人尽说江南好唐韦庄| 午夜激情av网站| 黄色视频不卡| 国产男女内射视频| 九九爱精品视频在线观看| 久久久久久久久久久久大奶| 天美传媒精品一区二区| 一区二区日韩欧美中文字幕| 亚洲美女视频黄频| 精品国产超薄肉色丝袜足j| 欧美日韩亚洲综合一区二区三区_| 男女边吃奶边做爰视频| av在线app专区| 日韩大码丰满熟妇| www日本在线高清视频| 亚洲国产精品999| 十分钟在线观看高清视频www| 建设人人有责人人尽责人人享有的| 夫妻性生交免费视频一级片| 黄色怎么调成土黄色| 国产成人系列免费观看| 又大又黄又爽视频免费| 亚洲熟女毛片儿| 欧美日韩亚洲综合一区二区三区_| 久久午夜综合久久蜜桃| 国产色婷婷99| 一级毛片 在线播放| 青春草国产在线视频| 精品国产乱码久久久久久男人| 成人影院久久| 国产精品麻豆人妻色哟哟久久| 街头女战士在线观看网站| 国产精品久久久久成人av| 十八禁网站网址无遮挡| av天堂久久9| 亚洲国产毛片av蜜桃av| 精品一区二区免费观看| 国产一级毛片在线| 国产极品天堂在线| 曰老女人黄片| 久久久久久久久久久免费av| 亚洲精品久久午夜乱码| 久久天堂一区二区三区四区| 中文精品一卡2卡3卡4更新| 国产精品久久久久久精品古装| 亚洲国产精品一区二区三区在线| 久久 成人 亚洲| 日韩 欧美 亚洲 中文字幕| 久久久久精品久久久久真实原创| 啦啦啦啦在线视频资源| 18在线观看网站| 欧美 亚洲 国产 日韩一| 国产在线视频一区二区| 成人影院久久| 亚洲第一av免费看| 日韩精品有码人妻一区| 老汉色∧v一级毛片| 永久免费av网站大全| 精品卡一卡二卡四卡免费| 宅男免费午夜| 大码成人一级视频| 涩涩av久久男人的天堂| 日韩制服骚丝袜av| 欧美 日韩 精品 国产| 一级片免费观看大全| netflix在线观看网站| 人人妻人人爽人人添夜夜欢视频| 精品一区在线观看国产| 久久国产精品男人的天堂亚洲| 亚洲一卡2卡3卡4卡5卡精品中文| 热re99久久精品国产66热6| 亚洲七黄色美女视频| 午夜福利视频精品| 国产一区二区三区综合在线观看| 国产高清国产精品国产三级| h视频一区二区三区| 99热网站在线观看| 亚洲国产欧美日韩在线播放| 香蕉国产在线看| 国产精品久久久久久精品电影小说| 人人妻人人澡人人爽人人夜夜| 丰满迷人的少妇在线观看| 国产精品久久久av美女十八| 最新在线观看一区二区三区 | 日韩制服丝袜自拍偷拍| 欧美日韩福利视频一区二区| 亚洲国产欧美日韩在线播放| 亚洲熟女精品中文字幕| 日韩中文字幕欧美一区二区 | 国产成人啪精品午夜网站| 91成人精品电影| 美女主播在线视频| 飞空精品影院首页| 一区在线观看完整版| 国产亚洲av高清不卡| 永久免费av网站大全| 人妻人人澡人人爽人人| 精品国产一区二区三区久久久樱花| 一区二区三区四区激情视频| 精品人妻熟女毛片av久久网站| 国产精品 欧美亚洲| 久久久国产欧美日韩av| 精品福利永久在线观看| 91老司机精品| 欧美在线黄色| 国产精品无大码| 中文字幕av电影在线播放| 亚洲第一av免费看| 国产精品久久久久久人妻精品电影 | 少妇人妻 视频| 亚洲欧美清纯卡通| avwww免费| 99精品久久久久人妻精品| 婷婷色综合www| 久久久精品免费免费高清| 中文欧美无线码| 免费观看性生交大片5| 晚上一个人看的免费电影| 精品国产露脸久久av麻豆| 日本wwww免费看| 美女国产高潮福利片在线看| 午夜免费观看性视频| 欧美日韩视频精品一区| 久久国产亚洲av麻豆专区| 亚洲成人免费av在线播放| 天天躁夜夜躁狠狠久久av| 色视频在线一区二区三区| 十八禁高潮呻吟视频| 中文天堂在线官网| 亚洲精品av麻豆狂野| 日韩 欧美 亚洲 中文字幕| 一级毛片 在线播放| 狠狠精品人妻久久久久久综合| 国产黄频视频在线观看| 久久精品久久久久久久性| 丝袜人妻中文字幕| 国产日韩欧美视频二区| 日韩大码丰满熟妇| 激情视频va一区二区三区| 亚洲国产欧美一区二区综合| 日韩欧美精品免费久久| 亚洲国产精品999| 18禁裸乳无遮挡动漫免费视频| 一边摸一边做爽爽视频免费| 日韩欧美一区视频在线观看| 汤姆久久久久久久影院中文字幕| 午夜日韩欧美国产| 国产xxxxx性猛交| 观看av在线不卡| 国产精品熟女久久久久浪| 久久精品国产亚洲av涩爱| 桃花免费在线播放| 麻豆乱淫一区二区| 久久精品国产亚洲av涩爱| 亚洲美女视频黄频| 国产老妇伦熟女老妇高清| 国产精品二区激情视频| 日本wwww免费看| 日韩 亚洲 欧美在线| 啦啦啦 在线观看视频| 国产成人91sexporn| 狂野欧美激情性bbbbbb| 五月开心婷婷网| 欧美中文综合在线视频| 欧美 日韩 精品 国产| 免费女性裸体啪啪无遮挡网站| av天堂久久9| 女人高潮潮喷娇喘18禁视频| 老鸭窝网址在线观看| 黑人欧美特级aaaaaa片| 亚洲成人免费av在线播放| 久久久亚洲精品成人影院| 亚洲色图综合在线观看| h视频一区二区三区| 免费不卡黄色视频| 欧美国产精品va在线观看不卡| 亚洲人成网站在线观看播放| 女人精品久久久久毛片| 国产一级毛片在线| 精品福利永久在线观看| 亚洲婷婷狠狠爱综合网| 大片免费播放器 马上看| 久热爱精品视频在线9| 日韩,欧美,国产一区二区三区| 国产精品 欧美亚洲| av在线app专区| 国产极品天堂在线| 精品久久久精品久久久| 深夜精品福利| 黄色怎么调成土黄色| 国产在线视频一区二区| 中文字幕高清在线视频| av.在线天堂| 我要看黄色一级片免费的| 欧美最新免费一区二区三区| 两个人免费观看高清视频| 久久久国产欧美日韩av| 国产一区二区三区av在线| 午夜日韩欧美国产| h视频一区二区三区| 人人妻人人澡人人看| 九色亚洲精品在线播放| videosex国产| 国产极品粉嫩免费观看在线| a级毛片黄视频| 波野结衣二区三区在线| 中文字幕av电影在线播放| 美女高潮到喷水免费观看| 精品卡一卡二卡四卡免费| 丝袜美腿诱惑在线| 丝袜脚勾引网站| 亚洲精品日韩在线中文字幕| 婷婷成人精品国产| 午夜老司机福利片| 天天影视国产精品| 久久久精品94久久精品| 中文字幕人妻丝袜一区二区 | 黄片小视频在线播放| 精品少妇久久久久久888优播| 亚洲精品美女久久av网站| 男男h啪啪无遮挡| 亚洲av电影在线进入| 一本大道久久a久久精品| 在线看a的网站| 欧美精品亚洲一区二区| 街头女战士在线观看网站| 亚洲国产成人一精品久久久| 十分钟在线观看高清视频www| 国产色婷婷99| 丰满迷人的少妇在线观看| 成年人免费黄色播放视频| 亚洲婷婷狠狠爱综合网| 亚洲一码二码三码区别大吗| 黄网站色视频无遮挡免费观看| 免费观看a级毛片全部| 黑人巨大精品欧美一区二区蜜桃| 可以免费在线观看a视频的电影网站 | 亚洲天堂av无毛| 嫩草影视91久久| 爱豆传媒免费全集在线观看| 国产精品国产av在线观看| 我的亚洲天堂| 亚洲av日韩精品久久久久久密 | 亚洲欧美激情在线| 国产欧美日韩综合在线一区二区| 久久久国产欧美日韩av| 激情五月婷婷亚洲| 岛国毛片在线播放| 老司机深夜福利视频在线观看 | 欧美日韩亚洲综合一区二区三区_| 色婷婷久久久亚洲欧美| 免费人妻精品一区二区三区视频| 伊人久久大香线蕉亚洲五| 国产成人欧美在线观看 | 男女午夜视频在线观看| 免费久久久久久久精品成人欧美视频| 激情视频va一区二区三区| 久久久久久人人人人人| 亚洲熟女精品中文字幕| 丰满饥渴人妻一区二区三| 18在线观看网站| 国产精品99久久99久久久不卡 | 亚洲精品久久午夜乱码| 老汉色av国产亚洲站长工具| 欧美少妇被猛烈插入视频| 一区二区日韩欧美中文字幕| 欧美另类一区| 女人高潮潮喷娇喘18禁视频| 极品人妻少妇av视频| 99久久人妻综合| 国产国语露脸激情在线看| 国产精品久久久久久久久免| 亚洲人成电影观看| 一区二区三区激情视频| 日韩一本色道免费dvd| 在线 av 中文字幕| 国产有黄有色有爽视频| 国产免费视频播放在线视频| 亚洲成人国产一区在线观看 | 国产精品一区二区在线不卡| 午夜福利乱码中文字幕| 自拍欧美九色日韩亚洲蝌蚪91| 涩涩av久久男人的天堂| 爱豆传媒免费全集在线观看| 宅男免费午夜| av国产久精品久网站免费入址| 国产成人精品久久二区二区91 | 久久免费观看电影| 久久久久久人人人人人| 亚洲av福利一区| 欧美黄色片欧美黄色片| 女人爽到高潮嗷嗷叫在线视频| 国产精品 国内视频| 女人被躁到高潮嗷嗷叫费观| 国产男人的电影天堂91| 亚洲成av片中文字幕在线观看| 亚洲欧美一区二区三区久久| 一级,二级,三级黄色视频| 国产欧美日韩一区二区三区在线| 各种免费的搞黄视频| 亚洲成人国产一区在线观看 | 亚洲成人免费av在线播放| 精品一区在线观看国产| 人人妻人人澡人人爽人人夜夜| 一边摸一边抽搐一进一出视频| 日本av免费视频播放| 欧美亚洲日本最大视频资源| 大香蕉久久成人网| 国产一级毛片在线| 91aial.com中文字幕在线观看| 国产精品一二三区在线看| 汤姆久久久久久久影院中文字幕| 97精品久久久久久久久久精品| 男女边摸边吃奶| 国产精品免费视频内射| 亚洲一区二区三区欧美精品| 亚洲精品成人av观看孕妇| 亚洲av国产av综合av卡| 一区二区三区激情视频| 七月丁香在线播放| 熟女av电影| 日韩欧美精品免费久久| 欧美日韩成人在线一区二区| 伊人久久国产一区二区| av天堂久久9| 色网站视频免费| 99热全是精品| 在线观看免费午夜福利视频| 精品一品国产午夜福利视频| 91精品国产国语对白视频| av网站免费在线观看视频| 国产无遮挡羞羞视频在线观看| 中文字幕人妻熟女乱码| 十八禁高潮呻吟视频| 亚洲av福利一区| 男女无遮挡免费网站观看| 成人影院久久| 国产在线视频一区二区| 精品卡一卡二卡四卡免费| 国产伦人伦偷精品视频| www日本在线高清视频| 永久免费av网站大全| 宅男免费午夜| 国产精品亚洲av一区麻豆 | 如日韩欧美国产精品一区二区三区| 一二三四在线观看免费中文在| 高清视频免费观看一区二区| 少妇被粗大猛烈的视频| 国产精品蜜桃在线观看| 美女主播在线视频| 国产亚洲精品第一综合不卡| 大片电影免费在线观看免费| 精品人妻在线不人妻| 高清av免费在线| 国产成人午夜福利电影在线观看| 看免费av毛片| 国产成人精品在线电影| 老司机深夜福利视频在线观看 | 国产一级毛片在线| 久久久精品国产亚洲av高清涩受| 波多野结衣av一区二区av| 亚洲一级一片aⅴ在线观看| 亚洲欧美色中文字幕在线| 国产精品免费大片| 另类亚洲欧美激情| 色视频在线一区二区三区| 午夜福利免费观看在线| 一本久久精品| 亚洲国产精品一区二区三区在线| 少妇人妻精品综合一区二区| 亚洲国产欧美一区二区综合| 国产亚洲一区二区精品| 国产高清国产精品国产三级| a级片在线免费高清观看视频| 人人妻人人添人人爽欧美一区卜| 岛国毛片在线播放| 欧美日韩国产mv在线观看视频| 天堂中文最新版在线下载| 狂野欧美激情性bbbbbb| 成人手机av| 精品亚洲成国产av| 综合色丁香网| 纵有疾风起免费观看全集完整版| 亚洲av成人不卡在线观看播放网 | 91aial.com中文字幕在线观看| 日韩视频在线欧美| 啦啦啦视频在线资源免费观看| 亚洲激情五月婷婷啪啪| 久久久国产欧美日韩av| 免费观看性生交大片5| 久久久亚洲精品成人影院| 精品亚洲成a人片在线观看| 日韩成人av中文字幕在线观看| 精品福利永久在线观看| 十八禁高潮呻吟视频| 日本av手机在线免费观看| 纵有疾风起免费观看全集完整版| 老熟女久久久| 欧美日韩视频高清一区二区三区二| 国产福利在线免费观看视频| 老熟女久久久| 观看美女的网站| 亚洲国产欧美一区二区综合| 精品亚洲乱码少妇综合久久| 午夜久久久在线观看| 国产在线视频一区二区| 亚洲精品国产av成人精品| 亚洲欧美一区二区三区国产| 久久天躁狠狠躁夜夜2o2o | 在现免费观看毛片| 日韩av不卡免费在线播放| 天堂俺去俺来也www色官网| 中文字幕色久视频| 亚洲国产精品国产精品| 啦啦啦在线观看免费高清www| 日韩精品免费视频一区二区三区| 久久久精品94久久精品| 成年人免费黄色播放视频|