• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    時(shí)序動(dòng)態(tài)視角下的學(xué)術(shù)影響力評(píng)價(jià)方法及實(shí)證研究

    2017-11-22 12:45:03舒予張黎俐
    現(xiàn)代情報(bào) 2017年11期
    關(guān)鍵詞:評(píng)價(jià)方法實(shí)證研究

    舒予+張黎俐

    〔摘 要〕[目的/意義]論文發(fā)表時(shí)間和所屬學(xué)科的不同會(huì)對(duì)論文在后續(xù)的引文產(chǎn)生稀釋效應(yīng)的影響,發(fā)生在不同時(shí)間的引文也代表了不同的學(xué)術(shù)價(jià)值。從時(shí)序動(dòng)態(tài)的視角設(shè)計(jì)一種學(xué)術(shù)影響力的評(píng)價(jià)指標(biāo),消除稀釋效應(yīng)的影響并能夠體現(xiàn)不同時(shí)期的引文價(jià)值。[方法/過(guò)程]引入?yún)⒖嘉墨I(xiàn)集合的篇均被引次數(shù)作為論文集合的基準(zhǔn)值,消除由于發(fā)表時(shí)間和所屬學(xué)科不同造成的稀釋效應(yīng),進(jìn)而再對(duì)不同統(tǒng)計(jì)時(shí)間點(diǎn)的被引次數(shù)賦予不同的權(quán)重,用以表征發(fā)生在不同時(shí)期的引文的不同價(jià)值。[結(jié)果/結(jié)論]以四川大學(xué)為例,選取ESI學(xué)科和研究人員作為評(píng)價(jià)對(duì)象進(jìn)行實(shí)證研究,結(jié)果表明這一指標(biāo)可以對(duì)學(xué)術(shù)影響力發(fā)展趨勢(shì)不同的研究實(shí)體進(jìn)行有效的區(qū)分。

    〔關(guān)鍵詞〕時(shí)序動(dòng)態(tài);學(xué)術(shù)影響力;評(píng)價(jià)方法;實(shí)證研究

    DOI:10.3969/j.issn.1008-0821.2017.11.012

    〔中圖分類號(hào)〕G304 〔文獻(xiàn)標(biāo)識(shí)碼〕A 〔文章編號(hào)〕1008-0821(2017)11-0074-07

    An Empirical Study on the Evaluation of Academic Influence from the Perspective of Time Series

    Shu Yu Zhang Lili

    (Library,Sichuan University,Chengdu 610065,China)

    〔Abstract〕[Purpose/Significance]The difference between the time of publication and the discipline of the study will cause an effect on the dilution of the citations in the following citations.This paper designed an evaluation index of academic influence from the perspective of temporal dynamics,which could eliminate the influence of dilution effect and can reflect the value of citation in different periods.[Method/Process]The Average number of citations per paper of the reference set was choosen as a benchmark to eliminate the dilution effect caused by the publication time and different discipline,furthermore,different weights were given to the citations that happen on different statistical time points,which could be used to characterize the different values of citations in different periods.[Result/Conclusion]Taking Sichuan University as an example,this paper selected the ESI discipline and the scientific research personnel as the evaluation object to carry on the empirical research,the results showed that this index could effectively distinguish the different research entities with different academic development trends.

    〔Key words〕time series dynamics;academic influence;evaluation method;empirical study

    學(xué)術(shù)影響力的評(píng)價(jià)則是科研績(jī)效評(píng)價(jià)中的一個(gè)主要組成部分,在學(xué)科、高校乃至國(guó)家層面的科研評(píng)價(jià)體系中發(fā)揮了極其重要的作用[1-2]。文獻(xiàn)計(jì)量分析為學(xué)術(shù)影響力的測(cè)度提供了相應(yīng)的定量指標(biāo),是對(duì)同行評(píng)議等定性評(píng)價(jià)方式的重要補(bǔ)充[3-4]。基于文獻(xiàn)計(jì)量分析方法設(shè)計(jì)的定量評(píng)價(jià)指標(biāo)可以分為綜合性指標(biāo)和單一指標(biāo)兩種方式[5]。綜合性指標(biāo)包括h指數(shù)、g指數(shù)、p指數(shù)等,而單一指標(biāo)主要從論文的產(chǎn)出、質(zhì)量、利用率等各個(gè)方面進(jìn)行單一維度的評(píng)價(jià)[6-7]。綜合性指標(biāo)和單一指標(biāo)在科研績(jī)效評(píng)價(jià)中都得到的廣泛的應(yīng)用,但是往往忽略了對(duì)文獻(xiàn)老化過(guò)程中引文變化規(guī)律的描述,由于論文的施引文獻(xiàn)發(fā)生的年度代表了在不同時(shí)期被利用的情況,自然也就具有不同的價(jià)值,例如一位科研人員的論文引用文獻(xiàn)逐年上升,而另一位科研人員的論文引用文獻(xiàn)卻逐年下降,顯然這兩位科研人員學(xué)術(shù)影響力的發(fā)展態(tài)勢(shì)是不一樣的,因此需要從時(shí)序動(dòng)態(tài)的視角設(shè)計(jì)學(xué)術(shù)影響力的評(píng)價(jià)指標(biāo),使之能夠真實(shí)的反映出文獻(xiàn)在不同時(shí)期的引用文獻(xiàn)的價(jià)值。學(xué)術(shù)影響力的動(dòng)態(tài)評(píng)價(jià)指標(biāo)多集中在綜合性指標(biāo)的改造上,Sidiropoulos A以與論文發(fā)表年度的時(shí)長(zhǎng)呈反比的系數(shù)為權(quán)重,降低早期發(fā)表的論文的引文數(shù)量,再以修正后的引文數(shù)量定義了一種當(dāng)代的h指數(shù)[10],韓毅針對(duì)時(shí)間因素的稀釋效應(yīng)和凝聚效應(yīng),在P指數(shù)的計(jì)算框架下構(gòu)建了Pt1和Pt2指數(shù),分別用以評(píng)價(jià)不同發(fā)表時(shí)間和不同老化速度的文獻(xiàn)價(jià)值[5],此外高志等對(duì)各種學(xué)術(shù)影響力的動(dòng)態(tài)評(píng)價(jià)方法也做了深入的對(duì)比與分析[11],并針對(duì)科學(xué)家個(gè)人學(xué)術(shù)影響力隨時(shí)間變化的計(jì)算方法進(jìn)行了研究[12]。endprint

    綜合性指標(biāo)的優(yōu)點(diǎn)在于可以用一個(gè)指標(biāo)將研究實(shí)體在不同角度的科研績(jī)效綜合起來(lái)表征,在一定程度上體現(xiàn)了研究實(shí)體的整體面貌,但是在某些時(shí)候,我們又希望學(xué)術(shù)影響力的評(píng)價(jià)指標(biāo)能夠從某一個(gè)獨(dú)立的角度展現(xiàn)研究實(shí)體的科研績(jī)效,這樣更有利于我們對(duì)研究實(shí)體在某一個(gè)具體的方面存在的問(wèn)題進(jìn)行分析,而綜合性指標(biāo)顯然無(wú)法達(dá)到這一目的。以h指數(shù)為例,h指數(shù)是論文產(chǎn)出和學(xué)術(shù)質(zhì)量的綜合表征,但是卻無(wú)法告知我們研究實(shí)體在學(xué)術(shù)質(zhì)量這一單一維度上的表現(xiàn),Van Raan便指出不應(yīng)該用“一個(gè)音符”對(duì)研究人員或者研究團(tuán)隊(duì)的學(xué)術(shù)表現(xiàn)進(jìn)行闡述[8],Glnzel也指出設(shè)計(jì)多個(gè)評(píng)價(jià)指標(biāo)可以從不同的角度更加充分地反映學(xué)術(shù)的實(shí)際績(jī)效[9]。事實(shí)上,學(xué)術(shù)影響力的內(nèi)涵是多樣的,不僅意味著學(xué)術(shù)的傳播面和活躍度,也是學(xué)術(shù)質(zhì)量的一種表征,同時(shí)還體現(xiàn)了學(xué)術(shù)成果的重要性,例如論文數(shù)量、論文總被引次數(shù)可以描述研究實(shí)體學(xué)術(shù)的傳播度、輻射面,論文的篇均被引次數(shù)可以描述研究實(shí)體學(xué)術(shù)的質(zhì)量,論文的被引率可以描述研究實(shí)體學(xué)術(shù)上的轉(zhuǎn)化率、利用率,高被引論文、熱點(diǎn)論文等又可以描述研究實(shí)體在前沿研究上的學(xué)術(shù)影響力?;谶@種考慮,本文從篇均被引次數(shù)這一單一的維度出發(fā),引入時(shí)間因素,設(shè)計(jì)一種時(shí)序動(dòng)態(tài)視角下的學(xué)術(shù)影響力評(píng)價(jià)指標(biāo),以期將研究實(shí)體學(xué)術(shù)質(zhì)量的發(fā)展趨勢(shì)有效地描述出來(lái)。

    1 時(shí)序動(dòng)態(tài)視角下學(xué)術(shù)影響力評(píng)價(jià)指標(biāo)的設(shè)計(jì)

    研究實(shí)體(如科研人員、研究團(tuán)隊(duì),機(jī)構(gòu)、機(jī)構(gòu)的某一學(xué)科或者機(jī)構(gòu)下屬的二級(jí)單位等)的學(xué)術(shù)成果通??梢杂闷浒l(fā)表的論文集合體現(xiàn),現(xiàn)假設(shè)某一研究實(shí)體的論文集合中文獻(xiàn)數(shù)量為N,截至到統(tǒng)計(jì)時(shí)間點(diǎn)(比如進(jìn)行被引次數(shù)統(tǒng)計(jì)的當(dāng)天)時(shí),被引用的總次數(shù)為C次,那么該研究實(shí)體的學(xué)術(shù)影響力可以用論文集合的篇均被引次數(shù)Cpp=CN表征。顯然C是由發(fā)生在不同時(shí)間節(jié)點(diǎn)的引文數(shù)量C1,C2,…,組成的,即C=∑iCi ,例如一篇當(dāng)前被引用總次數(shù)為10的論文,其被引總次數(shù)可能是由來(lái)自2015年的2次被引和2016年的8次被引組成的。由于不同時(shí)期的引文數(shù)量所代表的價(jià)值是不一樣的,例如兩篇被引次數(shù)相同的論文,一篇引文量逐年上升,另一篇引文量逐年下降,其表征的學(xué)術(shù)價(jià)值顯然是不同的。因此為了區(qū)分其價(jià)值的差異,我們希望能夠?yàn)椴煌瑫r(shí)間節(jié)點(diǎn)上的引文數(shù)量賦予不同的權(quán)重系數(shù)λ1,λ2…,λi,…,最終該研究實(shí)體的總被引次數(shù)可以表示為各時(shí)期引文數(shù)量的線性加權(quán),即=∑iλiCi,進(jìn)而將研究實(shí)體學(xué)術(shù)影響力表征為

    但是注意到,論文集合在某一個(gè)時(shí)間點(diǎn)的引文數(shù)量Ci往往又是由不同時(shí)期發(fā)表的論文在該時(shí)間點(diǎn)的被引次數(shù)組成的,即Ci=∑jCji ,不同發(fā)表時(shí)間j的論文在時(shí)間點(diǎn)i上的被引次數(shù)Cji是不具可比性的,例如一篇2010年發(fā)表并在2015年被引用15次的論文與另一篇2012年發(fā)表并在2015年被引用12次的論文,其學(xué)術(shù)影響力是無(wú)法比較的,韓毅稱這種導(dǎo)致不可比性的影響因素為稀釋效應(yīng),并根據(jù)發(fā)文時(shí)間對(duì)Cji進(jìn)行簡(jiǎn)單平均作為修正稀釋效應(yīng)的加權(quán)[6]。如果把這種稀釋效應(yīng)推廣至更一般的情況,即這些論文還來(lái)自不同學(xué)科,于是Ci可進(jìn)一步地描述為Ci=∑i∑kCj,ki ,其中Cj,ki表示第j年發(fā)表的來(lái)自學(xué)科k的論文在第i年的引文數(shù)量,顯然論文發(fā)表時(shí)間和論文所屬學(xué)科的不同都會(huì)對(duì)引文數(shù)量產(chǎn)生影響,因此Cj,ki之間是有明顯差異的,彼此之間同樣是不具可比性的,這樣由Cj,ki累加得到的各時(shí)間點(diǎn)上的被引次數(shù)Ci是非標(biāo)準(zhǔn)非規(guī)范的,在此基礎(chǔ)上對(duì)Ci賦予權(quán)值也就缺乏合理性,并且嚴(yán)格來(lái)說(shuō)直接把不同的Cj,ki相加也是沒有任何意義的,例如一位科研人員在2010年發(fā)表了一篇計(jì)算機(jī)方向的論文,在2015年被引用10次,在2012年發(fā)表了一篇數(shù)學(xué)方向的論文,在2015年被引用6次,那么這兩篇論文在2015年的被引用總次數(shù)C2015不能簡(jiǎn)單的看作是C2015=10+6,因?yàn)?015年的被引次數(shù)來(lái)自發(fā)表于不同的時(shí)期且屬于不同的學(xué)科的兩篇論文,其被引次數(shù)10次與6次是在不同的尺度下測(cè)度得到的,直接取和10+6是沒有任何實(shí)際意義的。對(duì)于這種情況我們考慮引入學(xué)科的篇均被引次數(shù)對(duì)Cj,ki進(jìn)行修正,消除不同發(fā)文時(shí)間和不同學(xué)科對(duì)引文帶來(lái)的差異性,這樣既保證了對(duì)各時(shí)期的被引次數(shù)Ci進(jìn)行賦值的合理性,還能使得這樣設(shè)計(jì)的評(píng)價(jià)指標(biāo)可以消除學(xué)科之間的引用差異,實(shí)現(xiàn)對(duì)不同學(xué)科的學(xué)術(shù)影響力的橫向比較?;谏鲜隹紤],我們?cè)O(shè)計(jì)的時(shí)序動(dòng)態(tài)學(xué)術(shù)影響力評(píng)價(jià)指標(biāo)分為以下兩步完成:

    Step 1.對(duì)于發(fā)表于不同年代、屬于不同學(xué)科的文獻(xiàn)在同一個(gè)統(tǒng)計(jì)時(shí)間點(diǎn)上的引文標(biāo)準(zhǔn)化處理。

    假設(shè)論文集合中屬于學(xué)科k發(fā)表于第j年的所有論文在第i年的被引總次數(shù)為Cj,ki。其中,k=1,2,…,K,表示待評(píng)價(jià)論文集合共涉及K個(gè)學(xué)科;j=1,2,…,J,表示將該論文集合中最早發(fā)表的論文時(shí)間作為統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)的第1年,最晚發(fā)表的論文時(shí)間作為第J年;i=1,2,…,I,表示將該論文集合中最早發(fā)表的論文時(shí)間作為統(tǒng)計(jì)被引次數(shù)的時(shí)間節(jié)點(diǎn)的第1年,將統(tǒng)計(jì)被引次數(shù)的時(shí)間節(jié)點(diǎn)的最后一年記為第I年。

    我們首先按照發(fā)表時(shí)間和所屬學(xué)科將論文集合中的論文劃分到不同的組,每一組的論文均發(fā)表于相同年份、屬于相同學(xué)科,然后對(duì)每個(gè)組的論文引入一個(gè)對(duì)應(yīng)的參考文獻(xiàn)集合,例如,可以選擇為第j年發(fā)表的屬于學(xué)科k的全球論文,顯然同一組的論文在后續(xù)時(shí)間段被他人引用應(yīng)當(dāng)具有相同的共性,因此用該參考文獻(xiàn)集合的論文篇均被引次數(shù)作為基準(zhǔn)值可以修正由于論文之間發(fā)表年份不同、所屬學(xué)科不同帶來(lái)的稀釋效應(yīng)的影響。設(shè)第j年發(fā)表的屬于學(xué)科k的論文的篇均被引次數(shù)為ej,ki,于是第j年發(fā)表的屬于學(xué)科k的論文在任意一個(gè)統(tǒng)計(jì)時(shí)間點(diǎn)i的被引次數(shù)j,ki可以修正為:

    需要說(shuō)明的是,由于通常選擇的學(xué)科劃分是ESI學(xué)科,按照論文與ESI學(xué)科的對(duì)應(yīng)規(guī)則,一篇論文只對(duì)應(yīng)一個(gè)ESI學(xué)科,但是如果學(xué)科選取的Web of Science的學(xué)科劃分方法,則會(huì)出現(xiàn)一篇論文對(duì)應(yīng)多個(gè)學(xué)科的情況,為此我們是這樣考慮的:將修正論文被引次數(shù)的基準(zhǔn)值ej,k取作論文對(duì)應(yīng)的相應(yīng)學(xué)科的論文篇均被引次數(shù)的平均值。例如,一篇2012年的論文在2015年的被引次數(shù)為15次,這篇論文對(duì)應(yīng)Mathematics、Mathemitics,Applied和Mathemitics,Interdisciplinary Application 3個(gè)學(xué)科,而這3個(gè)學(xué)科2012年的論文篇均被引次數(shù)分別為3.46、4.89和6.81,那么則將3個(gè)學(xué)科2012年的論文篇均被引次數(shù)的平均值作為修正這篇論文被引次數(shù)的基準(zhǔn)值,即e=((3.46+4.89+6.81))/3=5.05,這篇論文在2015年修正后的被引次數(shù)則為15/5.05=2.97,這樣把論文集合中2012年的每篇論文在2015年修正后的被引次數(shù)加起來(lái),則為論文集合中2012年的論文在2015年的修正后的被引次數(shù)。不失一般性,如果論文集合中的每篇論文均對(duì)應(yīng)一個(gè)學(xué)科,那么這樣的處理方法則與上述Step1的方法是一致的。endprint

    Step 2.對(duì)于發(fā)生于不同時(shí)間的引用,其引文的加權(quán)處理。

    可以看到,在上一步我們將不同年代發(fā)表的文獻(xiàn)在后續(xù)各統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)上的引文做了標(biāo)準(zhǔn)化的處理,得到的標(biāo)準(zhǔn)化引文數(shù)據(jù)既保證了對(duì)于發(fā)表于不同年代、屬于不同學(xué)科的文獻(xiàn)在某一個(gè)時(shí)間點(diǎn)的被引用次數(shù)的價(jià)值都是等同的,同時(shí)也保證在第二步對(duì)于不同時(shí)間點(diǎn)的被引次數(shù)的加權(quán)是合理科學(xué)的。從(1)式可知,傳統(tǒng)的論文集合篇均被引次數(shù)Cpp=∑I1Ci/N是論文集合在某一時(shí)間段的各統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)上的篇均被引次數(shù)的線性加權(quán),并且認(rèn)為每一統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)的權(quán)重是相等的,而DAI則可以看作是該論文集合在各統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)上修正后的篇均被引次數(shù)的線性加權(quán),并且對(duì)每一統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)賦予了不同的權(quán)重,這樣便可以對(duì)在不同時(shí)期學(xué)術(shù)影響力表現(xiàn)不同的研究實(shí)體進(jìn)行有效的區(qū)分。

    2 實(shí)證分析

    2.1 針對(duì)機(jī)構(gòu)ESI學(xué)科的學(xué)術(shù)影響力評(píng)價(jià)

    為驗(yàn)證我們?cè)O(shè)計(jì)的DAI指標(biāo)的合理性,以四川大學(xué)的化學(xué)、物理、計(jì)算機(jī)科學(xué)等18個(gè)ESI學(xué)科作為評(píng)價(jià)對(duì)象,利用DAI指標(biāo)對(duì)各ESI學(xué)科的學(xué)術(shù)影響力進(jìn)行評(píng)價(jià)??紤]到引文有一定的滯后性,在近年發(fā)表的論文其引文還可能存在較大幅度的增長(zhǎng),目前還不能完全體現(xiàn)其真實(shí)的價(jià)值,因此文獻(xiàn)發(fā)表時(shí)間限定為2009-2013年。

    在InCites數(shù)據(jù)庫(kù)中可以下載到四川大學(xué)各ESI學(xué)科論文的列表(下稱ESI學(xué)科論文列表),論文列表中包含該學(xué)科各論文的標(biāo)題、作者、來(lái)源期刊等信息,但是InCites數(shù)據(jù)庫(kù)并不提供這些論文在隨后各年的被引用次數(shù),所以需要再在Web of Science數(shù)據(jù)庫(kù)中以Sichuan Univ*作為檢索地址,并限定檢索年份為2009-2013年檢索四川大學(xué)的科研人員在這一期間發(fā)表的所有文獻(xiàn),通過(guò)Web of Science提供的“創(chuàng)建引文報(bào)告”功能下載到這些文獻(xiàn)的所有引文列表(下稱WoS論文列表),列表中包括了被引文獻(xiàn)的標(biāo)題、作者、發(fā)表時(shí)間、來(lái)源期刊以及在隨后各年的被引用次數(shù)。然后依據(jù)ESI學(xué)科論文列表中的每一篇論文的標(biāo)題在WoS論文列表中找到同一篇論文并由此獲得該論文在隨后各年的被引用次數(shù)。按照這一步驟,可以獲得所需的四川大學(xué)18各ESI學(xué)科在2009-2013年發(fā)表的論文及其在隨后各年的被引用次數(shù)。計(jì)算過(guò)程通過(guò)python和matlab編程實(shí)現(xiàn)。下面以計(jì)算機(jī)科學(xué)學(xué)科為例對(duì)DAI指標(biāo)的計(jì)算方式進(jìn)行介紹:

    Step 1.首先對(duì)該學(xué)科每一年發(fā)表的論文在隨后各年被引次數(shù)進(jìn)行修正。例如,2009年計(jì)算機(jī)科學(xué)學(xué)科發(fā)表的論文在隨后各年被引用次數(shù)C2009j(其中j=2009,2010,…,2016)見表1。

    而2009年發(fā)表的計(jì)算機(jī)科學(xué)學(xué)科全球的論文截止到2017年4月的篇均被引次數(shù)為e2009=9.41。于是該學(xué)科2009年發(fā)表的論文在隨后各年被引次數(shù)則按照下式進(jìn)行修正:

    修正后的各年被引用次數(shù)見表2。

    同理,可得計(jì)算機(jī)學(xué)科在其它年份發(fā)表的論文在隨后各年的修正被引用次數(shù),見表3。

    此時(shí),表中各列都是修正后的標(biāo)準(zhǔn)化數(shù)據(jù),也就是說(shuō)論文由于發(fā)表時(shí)間不同而造成的稀釋效應(yīng)已經(jīng)被消除,從而在不同發(fā)表年份的論文在同一時(shí)間節(jié)點(diǎn)被引用的次數(shù)(即是同一列的數(shù)據(jù))已經(jīng)修正到了統(tǒng)一的尺度下,因此可以保證表中數(shù)據(jù)按列相加的合理性。按表3各列相加,可得計(jì)算機(jī)科學(xué)學(xué)科2009-2013年發(fā)表的論文在2009-2016各年份修正后的被引用次數(shù),而2009-2013年計(jì)算機(jī)科學(xué)學(xué)科論文數(shù)量為204篇,因此再用修正后的被引次數(shù)除以論文數(shù)量即可得計(jì)算機(jī)科學(xué)學(xué)科2009-2013年發(fā)表的論文在2009-2016各年份修正后的篇均被引次數(shù),見表4。

    Step 2.對(duì)各統(tǒng)計(jì)時(shí)間點(diǎn)的修正篇均被引用次數(shù)進(jìn)行線性加權(quán)。取在第i年被引用次數(shù)所對(duì)應(yīng)的動(dòng)態(tài)權(quán)重為e0.4*ki,其中i=2009,2010,…,2016,ki是第i年距離2009年的時(shí)間間隔,例如k2010=2010-2009=1,顯然這一權(quán)重設(shè)計(jì)意味著越靠近當(dāng)前時(shí)期的引文具有越高的權(quán)重,從而可以用以突出近期學(xué)術(shù)影響力較好的研究實(shí)體。于是計(jì)算機(jī)學(xué)科的動(dòng)態(tài)學(xué)術(shù)影響力DAI指標(biāo)值為:

    DAIcomputer=0.0047*e0.4*0+0.0289*e0.4*1+0.0646*e0.4*2+0.1161*e0.4*3+0.1928*e0.4*4+0.2861*e0.4*5+0.2833*e0.4*6+0.1950*e0.4*7=14.88

    同理,可以計(jì)算其它17個(gè)學(xué)科的DAI指標(biāo)值。為與其它指標(biāo)對(duì)比,同時(shí)也分別計(jì)算了這18個(gè)學(xué)科的篇均被引次數(shù)Cpp、MNCS值、總引用次數(shù)、論文總篇數(shù)、h指數(shù),并按DAI指標(biāo)值降序排序。見表5。

    根據(jù)表5的計(jì)算結(jié)果可以看到,DAI指標(biāo)比h指數(shù)的區(qū)分度更高,說(shuō)明DAI指標(biāo)作為一種單一性指標(biāo)與h這種綜合性指標(biāo)相比,區(qū)分度更高,也更能展示研究實(shí)體在篇均被引次數(shù)這一單一維度上的細(xì)節(jié)。DAI、Cpp和MNCS 3個(gè)指標(biāo)在某些學(xué)科的排序上出現(xiàn)了不一致,例如分子生物學(xué)與遺傳學(xué)學(xué)科的DAI指標(biāo)值高于臨床醫(yī)學(xué)學(xué)科,但是前者的Cpp和MNCS均低于后者,這說(shuō)明雖然在被引次數(shù)的累積上前者低于后者,但是前者被引次數(shù)的累積大多出現(xiàn)在近期,后者被引次數(shù)的累積大多出現(xiàn)在早期,DAI指標(biāo)通過(guò)對(duì)不同時(shí)間的引文進(jìn)行了加權(quán)處理,從而突出了在近期學(xué)術(shù)影響力表現(xiàn)較好的分子生物學(xué)與遺傳學(xué)學(xué)科??傮w來(lái)說(shuō),心理學(xué)/精神病學(xué)、農(nóng)業(yè)科學(xué)、藥理學(xué)與毒物學(xué)3個(gè)學(xué)科不僅在近期有較高的影響力,在整個(gè)統(tǒng)計(jì)時(shí)間段的學(xué)術(shù)影響力也高于其它學(xué)科。

    從表5的計(jì)算結(jié)果同時(shí)也可以看到,DAI、h指數(shù)、MNCS等指標(biāo)均可用于描述研究實(shí)體的學(xué)術(shù)影響力,但是描述研究實(shí)體學(xué)術(shù)影響力的細(xì)致程度有所不同。h指數(shù)并未區(qū)分不同學(xué)科論文的被引次數(shù),因此不能將由于學(xué)科引用差異性造成的學(xué)術(shù)影響力的差異刻畫出來(lái),而DAI指標(biāo)包括MNCS指標(biāo)均考慮到了論文的所屬學(xué)科在引用上的差異性,并利用學(xué)科論文篇均被引次數(shù)消除了這種差異性,這是DAI指標(biāo)或者M(jìn)NCS指標(biāo)區(qū)分度高于h指數(shù)的原因,并且也更為合理科學(xué)。而DAI指標(biāo)和MNCS指標(biāo)相比,又進(jìn)一步地考慮到了論文被引時(shí)間的差異同樣也反映了不同的學(xué)術(shù)影響力,因此DAI指標(biāo)相對(duì)于MNCS指標(biāo)在描述研究實(shí)體的學(xué)術(shù)影響力(特別是在描述學(xué)術(shù)影響力的發(fā)展趨勢(shì))方面又要更為精準(zhǔn)細(xì)致。endprint

    進(jìn)一步地,引入Pearson相關(guān)系數(shù)分析6個(gè)指標(biāo)值的相關(guān)程度,見表6。

    從表6可以看到,DAI、Cpp和MNCS 3個(gè)指標(biāo)與論文被引總次數(shù)和論文總篇數(shù)2個(gè)指標(biāo)之間的相關(guān)性均較低,說(shuō)明DAI、Cpp和MNCS具有較相似的特性,主要體現(xiàn)的是研究實(shí)體的學(xué)術(shù)質(zhì)量,與研究實(shí)體整體上的學(xué)術(shù)影響力和學(xué)術(shù)產(chǎn)出能力沒有太大的關(guān)系。DAI、篇均被引次數(shù)和MNCS 3個(gè)指標(biāo)中,DAI與Cpp相關(guān)性較低,但與MNCS卻高度相關(guān),說(shuō)明DAI指標(biāo)確實(shí)能夠像MNCS一樣,消除學(xué)科之間由于引用規(guī)律的不同而造成的差異性。

    2.2 針對(duì)個(gè)人的的學(xué)術(shù)影響力評(píng)價(jià)

    為進(jìn)一步探討DAI指標(biāo)的性質(zhì)下面選取來(lái)自四川大學(xué)的12名學(xué)者作為評(píng)價(jià)對(duì)象,對(duì)其學(xué)術(shù)論文的影響力進(jìn)行評(píng)價(jià)分析,進(jìn)而對(duì)比DAI和MNCS 2個(gè)指標(biāo)的不同。12名學(xué)者分別來(lái)自8個(gè)不同的院系,學(xué)術(shù)論文涉及化學(xué)、物理、計(jì)算機(jī)科學(xué)、數(shù)學(xué)、臨床醫(yī)學(xué)等19個(gè)ESI學(xué)科。

    2.2.1 DAI指標(biāo)“突出當(dāng)前引用”的性質(zhì)

    計(jì)算12名學(xué)者的DAI和MNCS指標(biāo)值,并以DAI指標(biāo)值高低排序,見表7。

    從表7可知,序號(hào)為2、3、4、6、7、8的學(xué)者在DAI和MNCS 2個(gè)指標(biāo)值上的排序發(fā)生了較大的變化。選取學(xué)者2和學(xué)者4做進(jìn)一步的對(duì)比,分析二者DAI和MNCS指標(biāo)值排序出現(xiàn)差異的原因。由于學(xué)者的MNCS值是他們?cè)?009-2013年5年的MNCSi值的平均值,因此首先對(duì)兩位學(xué)者在2009-2013年5年的MNCS值進(jìn)行分析,見表8。

    由表8可知,學(xué)者4在2009年、2010年、2012年和2013年4年的MNCS值都高于學(xué)者2,因此使得學(xué)者4五年的總MNCS值也高于學(xué)者2。從上文的分析中可知,DAI是對(duì)論文集合在各統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)上的修正篇均被引次數(shù)進(jìn)行的加權(quán)平均,因此以學(xué)者2和學(xué)者4在2009年發(fā)表的論文集合為例,兩個(gè)學(xué)者的論文集合在各統(tǒng)計(jì)時(shí)間節(jié)點(diǎn)上的修正篇均被引次數(shù)形成的趨勢(shì)圖如圖1所示。

    由圖1可知,學(xué)者2在2009-2013年這5年修正篇均次數(shù)低于學(xué)者4,但是從2014年后的3年均高于學(xué)者4,由于各學(xué)者在2009年的MNCS值與其論文在2009-2016年總共8年累積的被引次數(shù)有關(guān),顯然,學(xué)者4在論文的被引次數(shù)在累積量上高于學(xué)者2,因此使得學(xué)者4在2009年的MNCS2009也高于學(xué)者2。但是學(xué)者4論文的被引次數(shù)大多來(lái)源于早期的、遠(yuǎn)離當(dāng)前的引用,而學(xué)者2的引用累積雖然低于學(xué)者4,但是在近期的引用量卻明顯高于學(xué)者4,由于DAI指標(biāo)具有“突出當(dāng)前、遺忘過(guò)去”的作用,因此放大了學(xué)者2在近期引用高于學(xué)者4的“優(yōu)勢(shì)”,而忽略了學(xué)者2在早期引用低于學(xué)者4的“劣勢(shì)”??傮w來(lái)看,學(xué)者2雖然在被引次數(shù)的累積量上低于學(xué)者4,導(dǎo)致其MNCS值低于學(xué)者4,但是學(xué)者2的引用大多聚集在近期,學(xué)者4的引用大多聚集在早期,因此DAI突出了近期引用表現(xiàn)出色的學(xué)者2,這說(shuō)明DAI能夠?qū)⒔趯W(xué)術(shù)影響力不同的學(xué)者進(jìn)行有效的區(qū)分。

    2.2.2 DAI指標(biāo)“突出主要研究方向”的性質(zhì)

    從上式可以看到,這種標(biāo)準(zhǔn)化處理本質(zhì)上是將各學(xué)科在某一年份的論文的相對(duì)影響力(即MNCS值)按照該學(xué)科論文產(chǎn)出份額的歸一化。對(duì)上式進(jìn)一步分析還可以看到,對(duì)學(xué)科k第i年發(fā)表的論文的被引次數(shù)Cj,ki的修正首先是采用該學(xué)科在第i年的一個(gè)參考論文集合(本文中選擇為該學(xué)科全世界的論文)的篇均被引次數(shù)作為這一論文集合的篇均被引次數(shù)的一個(gè)比較基準(zhǔn)值,在此基礎(chǔ)上對(duì)這一標(biāo)準(zhǔn)化的值(實(shí)際上就是該學(xué)科的MNCS值)按照該論文集合占總論文集合的比例賦予一個(gè)權(quán)重,保證了比例較大的某一論文集合的學(xué)術(shù)影響力能夠?qū)φ麄€(gè)論文集合的學(xué)術(shù)影響力起到更大的作用。因此,影響研究實(shí)體DAI指標(biāo)值的因素有兩個(gè):一是該研究實(shí)體論文在不同時(shí)期引文數(shù)量,靠近當(dāng)前的引文越多,DAI指數(shù)越高;二是該研究實(shí)體中主要的學(xué)科論文的相對(duì)影響力(即該學(xué)科的MNCS值),主要學(xué)科論文的相對(duì)影響力越高,DAI指數(shù)也越高。

    為此我們以學(xué)者7和學(xué)者8為例作進(jìn)一步的闡述。學(xué)者7的論文共涉及生物學(xué)與分子生物學(xué)、材料科學(xué)等6個(gè)ESI學(xué)科,學(xué)者8的論文共涉及生物學(xué)與分子生物學(xué)、材料科學(xué)等6個(gè)ESI學(xué)科,兩位學(xué)者各個(gè)學(xué)科上的論文MNCS值分別見表9和表10。

    從表9和表10的對(duì)比可以看到,學(xué)者8的MNCS值高于學(xué)者7的重要原因在于他在生物學(xué)與分子生物學(xué)學(xué)科的論文表現(xiàn)較好(MNCS值為2.15,明顯高于2位學(xué)者的其他11個(gè)學(xué)科論文的MNCS),這一學(xué)科的MNCS值極大的拉高了他整體的MNCS值,使得學(xué)者8的MNCS值最終高于學(xué)者7,但是生物學(xué)與分子生物學(xué)學(xué)科并非學(xué)者8的主要研究方向(在他發(fā)表的所以論文中生物學(xué)與分子生物學(xué)學(xué)科論文僅占3.3%),根據(jù)DAI的性質(zhì),這一較小比例論文的學(xué)術(shù)影響力并不能對(duì)學(xué)者8的DAI值產(chǎn)生較大的影響。實(shí)際上,學(xué)者7和學(xué)者8的主要研究方向均為化學(xué)學(xué)科(在他們發(fā)表的論文中化學(xué)學(xué)科各占76.1%和81.3%),但是2位學(xué)者在化學(xué)學(xué)科的表現(xiàn)卻不盡相同,學(xué)者7在化學(xué)學(xué)科的MNCS(1.7)明顯高于學(xué)者8的MNCS(1.25),根據(jù)DAI的性質(zhì),2位學(xué)者的DAI值受到其主要研究方向(化學(xué)學(xué)科)的論文的MNCS值影響,這使得學(xué)者7的DAI高于學(xué)者8。這說(shuō)明DAI指標(biāo)體現(xiàn)的是研究實(shí)體主要研究方向上論文的表現(xiàn)。

    3 結(jié) 論

    本文我們?cè)O(shè)計(jì)了一種時(shí)序動(dòng)態(tài)的學(xué)術(shù)影響力評(píng)價(jià)指標(biāo),將待評(píng)價(jià)的論文集合中的論文按照發(fā)表時(shí)間和所屬學(xué)科的不同劃分為不同的組別,對(duì)每一個(gè)組別的論文引入一個(gè)對(duì)應(yīng)的參考文獻(xiàn)集合,引入?yún)⒖嘉墨I(xiàn)集合的篇均被引次數(shù)作為該組別論文的基準(zhǔn)值,消除了由于發(fā)表時(shí)間和所屬學(xué)科不同造成的稀釋效應(yīng),進(jìn)而再對(duì)不同統(tǒng)計(jì)時(shí)間點(diǎn)的被引次數(shù)賦予不同的權(quán)重,用以表征發(fā)生在不同時(shí)期的引文的不同價(jià)值。通過(guò)實(shí)證研究可知,這一指標(biāo)受到兩個(gè)因素的影響:一是論文集合在后續(xù)各時(shí)間段的引文分布,靠近當(dāng)前的被引次數(shù)越高,DAI指標(biāo)值越高;二是論文集合中主要學(xué)科的論文相對(duì)影響力,占較大份額的學(xué)科論文相對(duì)影響力越高,DAI指標(biāo)值越高。這說(shuō)明DAI指標(biāo)可以對(duì)主要研究方向上學(xué)術(shù)發(fā)展趨勢(shì)不同的研究實(shí)體進(jìn)行有效的區(qū)分,有助于決策者更好地了解到各個(gè)研究實(shí)體整體層面更為細(xì)致和精準(zhǔn)的學(xué)術(shù)表現(xiàn)。endprint

    參考文獻(xiàn)

    [1]King D A.The scientific impact of nations[J].NATURE,2004,430(6997):311-316.

    [2]Garfield E.CITATION ANALYSIS AS A TOOL IN JOURNAL EVALUATION - JOURNALS CAN BE RANKED BY FREQUENCY AND IMPACT OF CITATIONS FOR SCIENCE POLICY STUDIES[J].SCIENCE,1972,178(4060):471.

    [3]Bornmann L,Daniel H D.Functional use of frequently and infrequently cited articles in citing publications.A content analysis of citations to articles with low and high citation counts.Proceedings of ISSI 2007:11th International Conference of the International Society for Scientometrics and Informetrics,Vols I and II,2007:149-153.

    [4]Daniel H D.Publications as a measure of scientific advancement and of scientists' productivity[J].LEARNED PUBLISHING,2005,18(2):143-148.

    [5]韓毅,夏慧.時(shí)間因素視角下科研人員評(píng)價(jià)的Pt指數(shù)研究[J].中國(guó)圖書館學(xué)報(bào),2015,(6):73-85.

    [6]花芳.學(xué)科基準(zhǔn)化的科研績(jī)效定量評(píng)價(jià)方法及指標(biāo)研究[J].圖書情報(bào)工作,2014,(3):78-84.

    [7]Moed H F.New developments in the use of citation analysis in research evaluation[J].ARCHIVUM IMMUNOLOGIAE ET THERAPIAE EXPERIMENTALIS,2009,57(1):13-18..

    [8]Van Raan A.Comparison of the Hirsch-index with standard bibliometric indicators and with peer judgment for 147 chemistry research groups[J].SCIENTOMETRICS,2006,67(3):491-502

    [9]Glnzel,wolfgang.On the opportunities and limitations of the H-index[J].Science focus,2006.

    [10]Sidiropoulos A,Katsaros D,Manolopoulos Y.Generalized Hirsch h-index for disclosing latent facts in citation networks[J].SCIENTOMETRICS,2007,72(2):253-280.

    [11]高志,張志強(qiáng).個(gè)人學(xué)術(shù)影響力的動(dòng)態(tài)評(píng)價(jià)方法研究綜述[J].情報(bào)雜志,2015,(11):40-43,78.

    [12]高志,張志強(qiáng).科學(xué)家個(gè)人學(xué)術(shù)影響力隨時(shí)間變化的計(jì)算方法研究[J].現(xiàn)代情報(bào),2017,37(5):66-71.endprint

    猜你喜歡
    評(píng)價(jià)方法實(shí)證研究
    程序設(shè)計(jì)類課程多維評(píng)價(jià)方法探索
    商用車動(dòng)力性、經(jīng)濟(jì)性評(píng)價(jià)方法研究
    汽車科技(2016年6期)2016-12-19 20:28:28
    信息技術(shù)支撐下的課堂應(yīng)如何評(píng)價(jià)
    現(xiàn)代教育技術(shù)在數(shù)學(xué)教學(xué)中的作用
    中國(guó)在新農(nóng)村建設(shè)中金融支持的實(shí)證研究
    簡(jiǎn)述翻譯研究中實(shí)證研究法的應(yīng)用
    科技視界(2016年18期)2016-11-03 22:59:51
    玉雕專業(yè)學(xué)生專業(yè)認(rèn)同的實(shí)證研究
    人間(2016年26期)2016-11-03 18:10:25
    溫州小微企業(yè)融資環(huán)境及能力分析
    認(rèn)知語(yǔ)言視角下英語(yǔ)詞匯多義習(xí)得的實(shí)證研究
    科技視界(2016年21期)2016-10-17 19:05:25
    實(shí)證分析會(huì)計(jì)信息對(duì)股價(jià)的影響
    商(2016年27期)2016-10-17 05:39:59
    久久久久久国产a免费观看| 真人一进一出gif抽搐免费| 国产91精品成人一区二区三区| 动漫黄色视频在线观看| 精品国产乱子伦一区二区三区| 日本一区二区免费在线视频| 亚洲成人中文字幕在线播放| 老熟妇仑乱视频hdxx| 欧美乱码精品一区二区三区| 欧美黄色淫秽网站| 欧美在线一区亚洲| 一a级毛片在线观看| 成人特级黄色片久久久久久久| 精品国内亚洲2022精品成人| 两人在一起打扑克的视频| 国产高清有码在线观看视频 | 国产精品,欧美在线| 每晚都被弄得嗷嗷叫到高潮| 在线国产一区二区在线| 91麻豆av在线| www.www免费av| 色综合站精品国产| 色噜噜av男人的天堂激情| 一边摸一边做爽爽视频免费| 国产精品一区二区免费欧美| 一进一出抽搐动态| 丝袜美腿诱惑在线| 午夜a级毛片| 午夜福利高清视频| 欧美乱色亚洲激情| 成人亚洲精品av一区二区| 一本久久中文字幕| 久久久久久大精品| 色在线成人网| 亚洲专区国产一区二区| 脱女人内裤的视频| 色av中文字幕| 给我免费播放毛片高清在线观看| 国产三级黄色录像| 精品久久久久久,| 成人国产综合亚洲| 国产精品一区二区免费欧美| 国产单亲对白刺激| 午夜免费激情av| 天天添夜夜摸| 国产精品av视频在线免费观看| 999精品在线视频| 亚洲一区二区三区不卡视频| 午夜福利成人在线免费观看| 男人的好看免费观看在线视频 | www国产在线视频色| 午夜免费激情av| 性色av乱码一区二区三区2| 欧美黑人欧美精品刺激| 日韩成人在线观看一区二区三区| av福利片在线观看| 看片在线看免费视频| 精品久久久久久成人av| 午夜精品久久久久久毛片777| 最近最新免费中文字幕在线| 亚洲人成77777在线视频| av欧美777| 黄色 视频免费看| 国产精品国产高清国产av| 亚洲 欧美一区二区三区| 国产精品 欧美亚洲| 亚洲人成电影免费在线| 亚洲av第一区精品v没综合| 黄色视频不卡| 欧美午夜高清在线| 日韩欧美精品v在线| 身体一侧抽搐| www.自偷自拍.com| www日本黄色视频网| 不卡一级毛片| 成人国产综合亚洲| 亚洲av中文字字幕乱码综合| 欧美国产日韩亚洲一区| 国产精品美女特级片免费视频播放器 | 亚洲国产中文字幕在线视频| 一进一出抽搐动态| 2021天堂中文幕一二区在线观| 国产午夜精品论理片| 伦理电影免费视频| 免费在线观看黄色视频的| 国产成人精品无人区| 亚洲精品美女久久av网站| 国产一区在线观看成人免费| 久久婷婷成人综合色麻豆| 手机成人av网站| 9191精品国产免费久久| 国产aⅴ精品一区二区三区波| 97超级碰碰碰精品色视频在线观看| 十八禁人妻一区二区| 搡老妇女老女人老熟妇| 亚洲精品美女久久av网站| 日本 av在线| 国产亚洲精品第一综合不卡| 国产精品久久久久久久电影 | 精品久久久久久久毛片微露脸| 婷婷六月久久综合丁香| 国产麻豆成人av免费视频| a级毛片在线看网站| 精品久久久久久久毛片微露脸| 国产又色又爽无遮挡免费看| 久久人人精品亚洲av| 国产三级在线视频| 亚洲中文字幕一区二区三区有码在线看 | 99国产精品一区二区蜜桃av| 久久天躁狠狠躁夜夜2o2o| 欧美黑人巨大hd| 久久久久国内视频| 午夜福利免费观看在线| 日韩欧美精品v在线| 亚洲精品在线美女| 天天一区二区日本电影三级| 天堂av国产一区二区熟女人妻 | 无限看片的www在线观看| 精品久久久久久久久久免费视频| 久久这里只有精品19| 男女之事视频高清在线观看| 久久精品影院6| 日本 av在线| 人人妻,人人澡人人爽秒播| 成人特级黄色片久久久久久久| 国产精品乱码一区二三区的特点| 国产亚洲精品av在线| 久久 成人 亚洲| 一本精品99久久精品77| 欧美中文日本在线观看视频| 毛片女人毛片| 日本 欧美在线| 久久中文字幕一级| 国产一区二区在线av高清观看| 宅男免费午夜| 亚洲成人国产一区在线观看| 国产又色又爽无遮挡免费看| 波多野结衣高清无吗| 亚洲专区国产一区二区| 国产伦一二天堂av在线观看| 黄色a级毛片大全视频| 国产av一区在线观看免费| 非洲黑人性xxxx精品又粗又长| 色精品久久人妻99蜜桃| 岛国在线免费视频观看| 国内毛片毛片毛片毛片毛片| 亚洲无线在线观看| 国产午夜精品久久久久久| 亚洲18禁久久av| 亚洲美女视频黄频| 国产av在哪里看| 亚洲精品中文字幕在线视频| 国产精品免费视频内射| 国产亚洲精品一区二区www| 亚洲av中文字字幕乱码综合| 真人做人爱边吃奶动态| 人人妻人人看人人澡| 窝窝影院91人妻| 久久久久久久久免费视频了| 在线播放国产精品三级| 国产单亲对白刺激| 18禁黄网站禁片午夜丰满| 很黄的视频免费| 午夜激情福利司机影院| 国产成人av教育| 狂野欧美白嫩少妇大欣赏| 99热6这里只有精品| x7x7x7水蜜桃| 亚洲人与动物交配视频| 波多野结衣高清作品| 亚洲美女视频黄频| 美女大奶头视频| 神马国产精品三级电影在线观看 | 黄频高清免费视频| 国产成人精品久久二区二区91| 俄罗斯特黄特色一大片| 成人国产一区最新在线观看| 又黄又爽又免费观看的视频| www.精华液| 色尼玛亚洲综合影院| 国产av一区在线观看免费| 91大片在线观看| 亚洲欧美日韩高清在线视频| 91老司机精品| 国产精品一区二区免费欧美| 法律面前人人平等表现在哪些方面| 亚洲av电影不卡..在线观看| 特大巨黑吊av在线直播| 午夜福利成人在线免费观看| 蜜桃久久精品国产亚洲av| 伦理电影免费视频| 欧美大码av| 欧美绝顶高潮抽搐喷水| 久久久久久人人人人人| 国产精品免费一区二区三区在线| 中国美女看黄片| 亚洲国产精品久久男人天堂| 国产精品99久久99久久久不卡| 一a级毛片在线观看| 免费在线观看完整版高清| 国产精品九九99| 欧美一区二区国产精品久久精品 | 精品国产乱码久久久久久男人| 久久久久久大精品| 亚洲av日韩精品久久久久久密| 最近视频中文字幕2019在线8| 制服丝袜大香蕉在线| 最近最新免费中文字幕在线| 久久精品成人免费网站| 久久久久九九精品影院| 麻豆av在线久日| 国模一区二区三区四区视频 | 天天添夜夜摸| 国产黄色小视频在线观看| 国产高清有码在线观看视频 | 一进一出抽搐动态| 精品无人区乱码1区二区| 精品一区二区三区四区五区乱码| 午夜老司机福利片| 女人被狂操c到高潮| 一卡2卡三卡四卡精品乱码亚洲| 伦理电影免费视频| 国产激情偷乱视频一区二区| 香蕉久久夜色| 不卡av一区二区三区| 日韩国内少妇激情av| 日韩精品中文字幕看吧| 欧美成人午夜精品| 久热爱精品视频在线9| 每晚都被弄得嗷嗷叫到高潮| 亚洲精品一区av在线观看| 国产成人系列免费观看| 亚洲精品久久成人aⅴ小说| 久久久久亚洲av毛片大全| 免费看a级黄色片| 一级a爱片免费观看的视频| 亚洲精品久久成人aⅴ小说| 国产精品一及| 亚洲熟妇中文字幕五十中出| 精品免费久久久久久久清纯| 中亚洲国语对白在线视频| 一本久久中文字幕| 欧美成狂野欧美在线观看| 国产麻豆成人av免费视频| 精品午夜福利视频在线观看一区| 欧美久久黑人一区二区| 国产亚洲精品综合一区在线观看 | 波多野结衣高清作品| 中文字幕熟女人妻在线| 啪啪无遮挡十八禁网站| 午夜精品久久久久久毛片777| 夜夜夜夜夜久久久久| 欧美成人免费av一区二区三区| 亚洲avbb在线观看| 久久热在线av| 欧美日本视频| 午夜免费成人在线视频| 91成年电影在线观看| 国产亚洲av嫩草精品影院| 一本精品99久久精品77| 每晚都被弄得嗷嗷叫到高潮| 我要搜黄色片| 伦理电影免费视频| 久久婷婷成人综合色麻豆| 99热只有精品国产| 午夜福利在线观看吧| 给我免费播放毛片高清在线观看| 香蕉国产在线看| 国产单亲对白刺激| 精品第一国产精品| 少妇熟女aⅴ在线视频| 51午夜福利影视在线观看| 亚洲av电影在线进入| 亚洲精品中文字幕一二三四区| 亚洲色图 男人天堂 中文字幕| x7x7x7水蜜桃| 天堂影院成人在线观看| 黑人操中国人逼视频| 手机成人av网站| 夜夜看夜夜爽夜夜摸| 一进一出抽搐gif免费好疼| 一a级毛片在线观看| 久久香蕉国产精品| 两个人视频免费观看高清| 制服诱惑二区| 国产亚洲欧美98| √禁漫天堂资源中文www| 免费一级毛片在线播放高清视频| 久久久久免费精品人妻一区二区| 中文亚洲av片在线观看爽| 亚洲成人中文字幕在线播放| 日本精品一区二区三区蜜桃| 90打野战视频偷拍视频| 69av精品久久久久久| 亚洲人成伊人成综合网2020| 久久午夜综合久久蜜桃| 好看av亚洲va欧美ⅴa在| 在线观看www视频免费| 亚洲乱码一区二区免费版| 亚洲精品久久成人aⅴ小说| 九九热线精品视视频播放| 久久天躁狠狠躁夜夜2o2o| 亚洲免费av在线视频| 中文字幕久久专区| 久久久久国产精品人妻aⅴ院| 中文亚洲av片在线观看爽| 日本 av在线| 精品国产乱码久久久久久男人| 亚洲国产精品成人综合色| 热99re8久久精品国产| 最近最新中文字幕大全电影3| 99国产精品一区二区三区| 色哟哟哟哟哟哟| 美女大奶头视频| 长腿黑丝高跟| 欧美成人一区二区免费高清观看 | 搡老妇女老女人老熟妇| 亚洲人成电影免费在线| xxx96com| 欧美激情久久久久久爽电影| 老司机靠b影院| 亚洲美女视频黄频| а√天堂www在线а√下载| 美女 人体艺术 gogo| 一本精品99久久精品77| 香蕉久久夜色| 久久精品91蜜桃| 搡老岳熟女国产| a级毛片a级免费在线| 精品欧美国产一区二区三| 欧洲精品卡2卡3卡4卡5卡区| 日日摸夜夜添夜夜添小说| 欧美 亚洲 国产 日韩一| 黄色 视频免费看| 在线免费观看的www视频| 99久久无色码亚洲精品果冻| 免费在线观看成人毛片| 亚洲欧美日韩高清在线视频| 亚洲电影在线观看av| 天天躁狠狠躁夜夜躁狠狠躁| 亚洲国产欧洲综合997久久,| a在线观看视频网站| 欧美极品一区二区三区四区| 亚洲午夜理论影院| 悠悠久久av| 国产精品久久久人人做人人爽| 国产一区二区在线av高清观看| 母亲3免费完整高清在线观看| 久久久国产成人精品二区| 99久久99久久久精品蜜桃| 悠悠久久av| 国产免费av片在线观看野外av| 欧美日韩亚洲综合一区二区三区_| 热99re8久久精品国产| 日日夜夜操网爽| 麻豆久久精品国产亚洲av| 一区福利在线观看| 视频区欧美日本亚洲| 桃红色精品国产亚洲av| 一卡2卡三卡四卡精品乱码亚洲| 91九色精品人成在线观看| www.自偷自拍.com| 美女高潮喷水抽搐中文字幕| av超薄肉色丝袜交足视频| 久久久国产成人精品二区| 亚洲自偷自拍图片 自拍| 国产野战对白在线观看| 舔av片在线| 成人av在线播放网站| 最近最新中文字幕大全电影3| 一级黄色大片毛片| 久久精品国产亚洲av香蕉五月| 母亲3免费完整高清在线观看| 亚洲avbb在线观看| 久久久久国产精品人妻aⅴ院| 午夜免费成人在线视频| 黄色视频不卡| 狂野欧美白嫩少妇大欣赏| 麻豆一二三区av精品| 91字幕亚洲| 长腿黑丝高跟| 给我免费播放毛片高清在线观看| 亚洲av成人精品一区久久| 国产一级毛片七仙女欲春2| 免费在线观看完整版高清| 18美女黄网站色大片免费观看| 特大巨黑吊av在线直播| 岛国在线观看网站| 色噜噜av男人的天堂激情| 日韩av在线大香蕉| 亚洲欧美一区二区三区黑人| 97超级碰碰碰精品色视频在线观看| 亚洲成av人片在线播放无| 人人妻,人人澡人人爽秒播| 黄色视频,在线免费观看| 精品一区二区三区四区五区乱码| 国产精品电影一区二区三区| 国产高清视频在线播放一区| 免费高清视频大片| 亚洲一卡2卡3卡4卡5卡精品中文| 99精品在免费线老司机午夜| 亚洲中文字幕一区二区三区有码在线看 | 久久久久精品国产欧美久久久| 在线a可以看的网站| 亚洲美女视频黄频| 人成视频在线观看免费观看| 久久久国产成人精品二区| 国产精品国产高清国产av| 久久婷婷人人爽人人干人人爱| 中亚洲国语对白在线视频| 成人18禁在线播放| 国产精品98久久久久久宅男小说| 丰满人妻一区二区三区视频av | 久久九九热精品免费| 日本一本二区三区精品| 12—13女人毛片做爰片一| 久久久久久国产a免费观看| 操出白浆在线播放| 精品久久久久久久人妻蜜臀av| 神马国产精品三级电影在线观看 | 中文在线观看免费www的网站 | 国内毛片毛片毛片毛片毛片| 亚洲第一欧美日韩一区二区三区| 欧美精品啪啪一区二区三区| 婷婷六月久久综合丁香| 国产精品 国内视频| 国产精品 欧美亚洲| 亚洲国产高清在线一区二区三| 老汉色av国产亚洲站长工具| 免费在线观看黄色视频的| 一本综合久久免费| 美女大奶头视频| 国产精品久久久久久人妻精品电影| 两个人看的免费小视频| 无限看片的www在线观看| 成人特级黄色片久久久久久久| 精品乱码久久久久久99久播| 成人手机av| 中文字幕高清在线视频| 无遮挡黄片免费观看| av视频在线观看入口| 夜夜夜夜夜久久久久| 成年版毛片免费区| 亚洲av美国av| 三级毛片av免费| 欧美乱码精品一区二区三区| 天天躁狠狠躁夜夜躁狠狠躁| 亚洲五月天丁香| 亚洲av成人精品一区久久| 999精品在线视频| 亚洲狠狠婷婷综合久久图片| 欧美丝袜亚洲另类 | 久久精品aⅴ一区二区三区四区| 亚洲黑人精品在线| 91老司机精品| 亚洲真实伦在线观看| 母亲3免费完整高清在线观看| 久久人妻av系列| 一区二区三区高清视频在线| 国产亚洲精品久久久久5区| 国产精品 欧美亚洲| 色哟哟哟哟哟哟| 亚洲性夜色夜夜综合| 熟女少妇亚洲综合色aaa.| 三级国产精品欧美在线观看 | 国产又色又爽无遮挡免费看| 国产亚洲av嫩草精品影院| 亚洲av片天天在线观看| 午夜a级毛片| 亚洲成av人片免费观看| 啦啦啦韩国在线观看视频| 97人妻精品一区二区三区麻豆| 中亚洲国语对白在线视频| 脱女人内裤的视频| 村上凉子中文字幕在线| 免费人成视频x8x8入口观看| 精品国产乱子伦一区二区三区| 亚洲成人久久性| 两个人视频免费观看高清| 久久国产精品人妻蜜桃| 亚洲 国产 在线| 久久精品国产亚洲av高清一级| 高潮久久久久久久久久久不卡| 久久国产乱子伦精品免费另类| 在线观看午夜福利视频| 日日爽夜夜爽网站| 婷婷六月久久综合丁香| 国产麻豆成人av免费视频| 久久久久国产精品人妻aⅴ院| 久久精品国产清高在天天线| 久久这里只有精品19| 国产精品1区2区在线观看.| 久久久久久久午夜电影| 老司机福利观看| 国产一区二区三区视频了| 国产成人精品无人区| 可以在线观看毛片的网站| 国产在线观看jvid| 国产精华一区二区三区| 久久久久久久久中文| 1024香蕉在线观看| 欧美黄色淫秽网站| 亚洲成人免费电影在线观看| 欧美性猛交黑人性爽| 亚洲天堂国产精品一区在线| 女人高潮潮喷娇喘18禁视频| 身体一侧抽搐| 午夜福利免费观看在线| 特大巨黑吊av在线直播| 两个人的视频大全免费| 国内毛片毛片毛片毛片毛片| 国产精品一区二区免费欧美| 久久人人精品亚洲av| 精品久久久久久久末码| 午夜日韩欧美国产| 天堂动漫精品| 成人亚洲精品av一区二区| 人妻夜夜爽99麻豆av| 日韩三级视频一区二区三区| 亚洲国产精品久久男人天堂| 12—13女人毛片做爰片一| 一个人观看的视频www高清免费观看 | 精品少妇一区二区三区视频日本电影| 精品久久久久久久毛片微露脸| 国产人伦9x9x在线观看| 日本五十路高清| 欧美黑人巨大hd| 久久久久久久久免费视频了| 国产又色又爽无遮挡免费看| 日本一区二区免费在线视频| 欧美日韩精品网址| 精品久久久久久久毛片微露脸| 久久人妻av系列| 日韩 欧美 亚洲 中文字幕| 一本一本综合久久| 欧美精品亚洲一区二区| 我要搜黄色片| 国产精品电影一区二区三区| 一a级毛片在线观看| 两人在一起打扑克的视频| 每晚都被弄得嗷嗷叫到高潮| 日本 欧美在线| 亚洲成av人片在线播放无| 黄色视频不卡| 久久国产精品人妻蜜桃| 国产真人三级小视频在线观看| 精品熟女少妇八av免费久了| 精品一区二区三区视频在线观看免费| 免费搜索国产男女视频| 亚洲成av人片在线播放无| 美女高潮喷水抽搐中文字幕| svipshipincom国产片| 亚洲美女黄片视频| 99在线视频只有这里精品首页| 成年版毛片免费区| 亚洲九九香蕉| 窝窝影院91人妻| 国产精品免费一区二区三区在线| 可以免费在线观看a视频的电影网站| 亚洲全国av大片| 国产av又大| 久久国产精品影院| 日本免费a在线| 成人永久免费在线观看视频| 欧美性猛交黑人性爽| 久久久久久久久免费视频了| 在线观看一区二区三区| 欧美成人免费av一区二区三区| 神马国产精品三级电影在线观看 | 韩国av一区二区三区四区| 黄色视频不卡| 黄色a级毛片大全视频| 99久久精品热视频| 99久久综合精品五月天人人| 久久国产乱子伦精品免费另类| 美女 人体艺术 gogo| 悠悠久久av| 嫁个100分男人电影在线观看| 在线观看免费视频日本深夜| 夜夜爽天天搞| 超碰成人久久| 欧美性猛交╳xxx乱大交人| 99久久99久久久精品蜜桃| 黄色视频不卡| 精品久久久久久久久久免费视频| 在线免费观看的www视频| 日韩欧美在线二视频| 国产真人三级小视频在线观看| 成年免费大片在线观看| 色在线成人网| xxxwww97欧美| 伊人久久大香线蕉亚洲五| 久久久国产成人免费| 国产精品综合久久久久久久免费| 禁无遮挡网站| 国产亚洲av高清不卡| 成人手机av| 亚洲中文字幕日韩| a级毛片在线看网站| 老司机在亚洲福利影院| 最近最新免费中文字幕在线| 欧美日韩瑟瑟在线播放| 男女之事视频高清在线观看| 国产精品乱码一区二三区的特点| 久久中文字幕人妻熟女| 麻豆一二三区av精品| 久久精品综合一区二区三区| 可以在线观看毛片的网站| 岛国视频午夜一区免费看| 国产aⅴ精品一区二区三区波| 男女床上黄色一级片免费看| 男女那种视频在线观看| 在线永久观看黄色视频| 日韩欧美国产在线观看| 久久精品aⅴ一区二区三区四区|