• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    單篇論著評價指標(biāo)的綜合比較研究

    2016-03-29 07:22:46李盛慶葉鷹
    圖書與情報 2016年1期
    關(guān)鍵詞:學(xué)術(shù)評價

    李盛慶 葉鷹

    摘 要:文章以h指數(shù)、學(xué)術(shù)跡、影響矩等文獻(xiàn)計量指標(biāo)作為學(xué)術(shù)化評價指標(biāo),用補充計量指標(biāo)(Altmetric indicators)作為社會化評價指標(biāo),對應(yīng)用物理學(xué)、環(huán)境科學(xué)、經(jīng)濟(jì)學(xué)、歷史學(xué)四個學(xué)科的各60篇單篇論著的評價效果進(jìn)行綜合比較研究。結(jié)果表明各評價指標(biāo)均具有獨立意義。在揭示h指數(shù)、學(xué)術(shù)跡、影響矩等學(xué)術(shù)化評價指標(biāo)之間存在顯著相關(guān)性的同時,發(fā)現(xiàn)社會化評價指標(biāo)與學(xué)術(shù)化評價指標(biāo)之間沒有顯著相關(guān)性,不可能用補充計量指標(biāo)替代學(xué)術(shù)評價指標(biāo)。

    關(guān)鍵詞:h指數(shù);學(xué)術(shù)跡;影響矩;學(xué)術(shù)評價;學(xué)術(shù)指標(biāo);補充計量指標(biāo)

    中圖分類號: G250.252 文獻(xiàn)標(biāo)識碼: A DOI:10.11968/tsyqb.1003-6938.2016014

    A Synthetic Comparative Study of Academic and Altmetric Indicators Acting on Single Publication

    Abstract Applying h-index, academic trace and impact torque as academic indicators, Altmetric score as social indicators, comparative studies were done with 240 articles, 60 from each of the four fields of physics applied, environmental sciences, economics, and history. The results show that each indicator has its independent meaning. There are obvious correlations among h-index, academic trace and impact torque, but no obvious correlation between academic indicators and altmetric indicators is found, so it is impossible to substitute academic indicators by altmetric indicators.

    Key words h-index; academic trace; impact torque; academic assessment; academic indicator; altmetric indicator

    1 引言

    隨著社會媒體的出現(xiàn),文獻(xiàn)信息在社會媒體中的傳播和影響隨之形成,討論某論著社會影響的補充計量指標(biāo)開始出現(xiàn),補充計量學(xué)(Altmetrics,國內(nèi)翻譯已有多種,如補充計量學(xué)、選擇性計量學(xué)、替代計量學(xué)、社媒計量學(xué)等,其含義應(yīng)為補充傳統(tǒng)計量,故建議采用補充計量學(xué))應(yīng)運而生[1]。由于補充計量一開始就主要針對單篇論著,并已被一些出版機構(gòu)所采用,所以構(gòu)成評價單篇論著的社會化指標(biāo)。

    正如本課題組前期研究所指出[2]:任何偉大的發(fā)現(xiàn)或發(fā)明,都必然要落實到具體的論著或?qū)@铩R虼?,?yīng)當(dāng)把學(xué)術(shù)評價更多地聚焦于針對單篇論著或?qū)@脑u價,這對那些具有深遠(yuǎn)影響的作品尤其重要。如果評價是針對作者,則也應(yīng)通過其作品來進(jìn)行評價,該評價不是以數(shù)量多少論英雄,只要有單篇論著產(chǎn)生了學(xué)術(shù)影響力,就應(yīng)該承認(rèn)作者對學(xué)術(shù)的貢獻(xiàn)。

    在已有的學(xué)術(shù)評價指標(biāo)中,由Garfield創(chuàng)立的影響因子(Impact Factor, IF)[3]無疑是影響最大的一個,但該指標(biāo)針對期刊設(shè)計,而期刊是文獻(xiàn)集合,故IF不適用于單篇論著。從信息計量學(xué)涵義看,IF本質(zhì)上是CPP(Citations per publication),針對單篇論著就退化成引文C,也就失去其獨立意義。2005年,h指數(shù)[4]被發(fā)現(xiàn),并很快成為影響巨大的評價指標(biāo)[5],其不僅能用于評價學(xué)術(shù)主體,而且通過基于施引文獻(xiàn)的施引h指數(shù)可用于評價以單篇論著為代表的學(xué)術(shù)客體[6-7]。隨后,學(xué)術(shù)跡[8]和影響矩[9]先后被提出,為單篇論著的評價增添了新測度[10],構(gòu)成評價單篇論著的學(xué)術(shù)化指標(biāo)。

    由于補充計量學(xué)發(fā)展很快,已形成新熱點[11-14],令人產(chǎn)生有替代傳統(tǒng)計量的錯覺,因此厘清學(xué)術(shù)化傳統(tǒng)評價指標(biāo)與社會化補充計量指標(biāo)之間的關(guān)聯(lián)非常必要和重要。目前,美國國家信息標(biāo)準(zhǔn)組織(American National Information Standards Organization)已擬訂補充計量標(biāo)準(zhǔn)的草稿[15]。由慶斌等[16]利用主成分分析的方法基于補充計量數(shù)據(jù)構(gòu)建論文影響力模型,該模型與引文評價模型在高學(xué)術(shù)影響力論文的評價上具有一致性。Hammarfelt[17]分析了Swedish universities 2012年出版的期刊和圖書在社會媒體中的分布情況和影響力,指出補充計量在人文科學(xué)的研究成果評價中能夠發(fā)展成為一個有價值的工具。Zahedi 等[18]從Web of Science數(shù)據(jù)庫中隨機選取20,000篇文獻(xiàn),分析這些文獻(xiàn)在社會媒體中的出現(xiàn)和分布情況,指出Mendeley中含有大量的補充計量數(shù)據(jù),發(fā)現(xiàn)Mendeley readership counts與citation indicators的spearman相關(guān)系數(shù)r = 0.49。Alhoori等[19]研究補充計量在國家層面的影響力評價問題,發(fā)現(xiàn)通過補充計量能對所有國家的研究成果進(jìn)行評估,發(fā)現(xiàn)國家層面的補充計量指標(biāo)與幾個傳統(tǒng)計量指標(biāo)有顯著相關(guān)關(guān)系。Costas等[20]發(fā)現(xiàn)補充計量指標(biāo)與引文指標(biāo)存在正相關(guān)性,但相關(guān)性較弱,補充計量指標(biāo)僅能作為引文指標(biāo)的補充工具。Ortega[21]研究了補充計量指標(biāo)和傳統(tǒng)文獻(xiàn)計量指標(biāo)在作者層面上的相關(guān)性,發(fā)現(xiàn)相關(guān)性很弱,補充計量指標(biāo)還不能成為引文影響力評價指標(biāo)的替代物。然而,這些研究以及國內(nèi)新近發(fā)表的研究[22]均未系統(tǒng)闡明學(xué)術(shù)化評價指標(biāo)與社會化評價指標(biāo)的關(guān)聯(lián)。

    因此,本文考慮以h指數(shù)、學(xué)術(shù)跡、影響矩等文獻(xiàn)計量指標(biāo)作為學(xué)術(shù)化評價指標(biāo)代表,用補充計量指標(biāo)作為社會化評價指標(biāo)代表,對單篇論著的評價進(jìn)行系統(tǒng)的綜合比較研究。

    2 方法與數(shù)據(jù)

    2.1 方法

    學(xué)術(shù)化文獻(xiàn)計量指標(biāo)的根基是發(fā)表量P(包括論文和專利)和引用量C,由此可構(gòu)造出CPP(Citations per publication,影響因子為其特例)、以CPP為核心的皇冠指數(shù)(Crown Indicator, CI),以及進(jìn)一步產(chǎn)生的h指數(shù)、學(xué)術(shù)跡、影響矩等指標(biāo)[23]。

    2.1.1 單篇論著的h指數(shù)

    Schubert把單篇論著的h指數(shù)定義為該篇論著的被引文獻(xiàn)中至多有h篇論文被引用了h次,具體數(shù)學(xué)表達(dá)式如下[6]:

    設(shè)TC是按被引次數(shù)降序排列的序列,(1,2,…r,…z)表示論文的序次,TCr 是論文r的被引總數(shù),則有以下序列:

    TC=(TC1 ,TC2,...TCr,...TCz) (1)

    式(1)中TC1 ≥TC2≥...TCr≥...TCz

    h指數(shù)的數(shù)學(xué)含義是:

    h=max{r:r≤TCr} (2)

    2.1.2 單篇論著的學(xué)術(shù)跡

    Ye和Leydesdorff定義學(xué)術(shù)跡為學(xué)術(shù)矩陣(Academic Matrices)的跡,而學(xué)術(shù)矩陣是引文曲線按發(fā)文的被引量排布構(gòu)成的三階矩陣[8],唐繼瑞和葉鷹將學(xué)術(shù)跡應(yīng)用于單篇論著的測度,單篇論著學(xué)術(shù)跡的具體數(shù)學(xué)公式如下[2]:

    用P= Pc + Pt + Pz 代表單篇論著的評價論文總數(shù),C = Cc + Ct + Ce 代表單篇論著評價論文的被引總數(shù),其中Pc 是h核中的評價論文量,Pt 是h尾中的評價論文量, Pz 是零引(未被引)評價論文量,Ch = Cc + Ce = h2 + e2 是h核中評價論文的引文量, Ct = t2 是h尾中評價論文的引文量, Ce =e2 是超引區(qū)評價論文的引文量、e為e指數(shù)[24],結(jié)合I3思想[25],設(shè) xc=Pc/(Pc+Pt+Pz), xt=Pt/(Pc+Pt+Pz), xz=Pz/(Pc+Pt+Pz), yc=Cc/(Cc+Ct+Ce), yt=Ct/(Cc+Ct+Ce), ye=Ce/(Cc+Ct+Ce) 分別作為相應(yīng)權(quán)重,則有:

    I3X=xcPc+xtPt+xzPz=X1+X2+X3 (3)

    式(3)中xc+xt+xz=1

    I3Y=ycCc+ytCt+yeCe=Y1+Y2+Y3 (4)

    式(4)中yc+yt+ye=1

    于是可用兩個向量 X=(X1, X2, X3) 、 Y=(Y1, Y2, Y3) 來標(biāo)記所有發(fā)文量和引文量分布,構(gòu)成如下學(xué)術(shù)矩陣:

    V=Y■ Y■ Y■X■ X■ X■Z■ Z■ Z■= X Y Z=(Y X Z)T (5)

    其中Zi=Yi-Xi(i=1,2,3)屬人為設(shè)計。

    該矩陣的跡就是學(xué)術(shù)跡(用于測量學(xué)術(shù)客體時即影響跡):

    T=tr(V)=Y1+X2+Z3 (6)

    經(jīng)過演算[2],T值的計算可以歸結(jié)為式(7),以方便后面編程計算。

    T=■+■ (7)

    2.1.3 單篇論著的影響矩

    影響矩通過考察單篇論著的影響規(guī)模和影響時效兩個層面來測評其影響力,單篇論著的影響矩M則定義為影響學(xué)者力A和影響跨度D的乘積[9]:

    M=A×D=A×■(t■×■)=■×■(t■×c■) (8)

    其中tj是論著自發(fā)表以來所經(jīng)歷年限,Cj為對應(yīng)年限施引文獻(xiàn)被引數(shù),C為施引文獻(xiàn)集總被引量,A被直接規(guī)定為引用該論著的施引作者總數(shù)。

    2.1.4 單篇論著的補充計量指標(biāo)

    補充計量指標(biāo)用于評價單篇論著的社會影響力,目前主要來源于提供補充計量服務(wù)的機構(gòu),其計算公式尚未完全公開。本文的補充計量數(shù)據(jù)來源于Altmetric.com公司提供的數(shù)據(jù),主要考慮到其收錄的補充計量數(shù)據(jù)相對完備,具體有Altmetric score(由Altmetric.com公司給特定媒體分配一定權(quán)值計算得到)和通過主成分方法計算的Score(主分)兩個指標(biāo)。

    通過主成分方法計算Score(主分)的原理及具體計算步驟如下[26]:

    (1)原始數(shù)據(jù)的標(biāo)準(zhǔn)化

    原始數(shù)據(jù)為n個樣本、p維向量組成的矩陣X,對矩陣元素xij進(jìn)行標(biāo)準(zhǔn)化得到標(biāo)準(zhǔn)化矩陣Z=[zij]n×p :

    z■=■(i=1,2,...,n;j=1,2,...,p) (9)

    其中, ■ 、s■ 分別表示矩陣x的第j列數(shù)據(jù)的均值和標(biāo)準(zhǔn)差,計算公式如下:

    ■=■ (10)

    s■■=■ (11)

    (2)計算標(biāo)準(zhǔn)化矩陣Z的協(xié)方差矩陣S=[sij]p×p:

    s■=■∑■■(z■-■)(z■-■)(i,j=1,2,...,p)(12)

    其中, ■ 、■ 分別表示矩陣Z中第i、j列數(shù)據(jù)的均值,計算公式為:

    ■=■,j=1,2,...,p (13)

    (3)計算協(xié)方差矩陣S的特征值λi及相應(yīng)的正交化單位特征向量αi

    解矩陣S的特征方程S-λI■=0 得p個特征根,其中前m個較大的特征值λ1≥λ2≥···≥λm就是m個主成分對應(yīng)的方差,λi對應(yīng)的單位特征向量αi就是主成分Fi關(guān)于原p維向量Xj的系數(shù)。

    (4)確定主成分的個數(shù)

    單個主成分的方差貢獻(xiàn)率為:

    g(i)=λ■∑■■λ■■(i=1,2,...,m) (14)

    m個主成分的累積方差貢獻(xiàn)率為:

    G(m)=∑■■■ (15)

    當(dāng)累積方差貢獻(xiàn)率G(m)大于80%時,就認(rèn)為足夠反映原來變量的信息,對應(yīng)的m就是抽取的前m個主成分。

    (5)計算主成分載荷

    主成分載荷1(Fi,Xj)反映主成分Fi與原變量Xj之間的相互關(guān)聯(lián)程度,在SPSS軟件中主成分分析結(jié)果中,“成分矩陣”反應(yīng)的就是主成分載荷矩陣。

    1(F■,X■)=■a■(i=1,2,...,m;j=1,2,...,p) (16)

    ai表示λi相對應(yīng)的正交化單位特征向量。

    (6)計算第i個主成分的得分

    F■=∑■■a■Z■(i=1,2,...,m) (17)

    (7)計算m個主成分的綜合主分值F

    F=∑■■■ (18)

    2.2 數(shù)據(jù)

    為了綜合考慮各指標(biāo)的學(xué)科差異,我們選擇2010年部分學(xué)科(文科2個、理科2個)的論著作為分析對象。另外,由于各學(xué)科論著在Altmetric Explorer平臺上的收錄情況不一樣,為了比較的便利,最后每個學(xué)科各取60個樣本數(shù)據(jù)。數(shù)據(jù)的收集和處理過程如下:

    (1)以Web of Science平臺為基準(zhǔn),在核心合集(SCI-EXPANDED, SSCI, A&HCI;, CPCI-S, CPCI-SSH)范圍內(nèi)對2010年的文獻(xiàn)進(jìn)行查找,在初次檢索的基礎(chǔ)上進(jìn)行精煉,文獻(xiàn)類型選擇“ARTICLE”,再按學(xué)科PHYSICS APPLIED(應(yīng)用物理學(xué))、ENVIRONMENTAL SCIENCES(環(huán)境科學(xué))、ECONOMICS(經(jīng)濟(jì)學(xué))、HISTORY(歷史學(xué))進(jìn)行精煉,分別下載四個學(xué)科領(lǐng)域被引次數(shù)排前250的全記錄數(shù)據(jù)。

    (2)利用(1)中數(shù)據(jù)的DOI字段信息在Altmetric Explorer平臺上利用“article identifiers”途徑批量提取單篇論著的補充度量數(shù)據(jù)(每次取50條記錄),將各學(xué)科補充度量得分排在前60的數(shù)據(jù)作為最后的樣本數(shù)據(jù)。在導(dǎo)出的數(shù)據(jù)中,包含了Altmetric score和15種媒體(Reddit threads、Bloggers、Tweeters、Google+ authors、F1000 reviews、Pinterest posts、News outlets、Q&A; site users、Facebook walls、Weibo users、Peer review sites、Wikipedia pages、Policy documents、Mendeley readers、CiteULike readers)對各篇論著的計量數(shù)據(jù)。

    (3)利用(2)中得到的四個學(xué)科的樣本數(shù)據(jù),逐條在Web of Science平臺核心合集范圍內(nèi)查找每篇論著的施引文獻(xiàn),利用WoS數(shù)據(jù)庫的導(dǎo)出功能下載每一篇論著相應(yīng)施引文獻(xiàn)的全記錄數(shù)據(jù)。

    (4)利用自編Python程序,提取每一篇論著相應(yīng)施引文獻(xiàn)數(shù)據(jù)中的被引頻次(TC字段信息)、作者信息(AF字段信息,AF字段相比AU字段更能避免重名問題)、出版年(PY字段信息)。

    (5)對(2)中得到的15種媒體工具收錄的補充度量數(shù)據(jù),利用SPSS軟件中的主成分分析功能計算各篇論著的綜合主分值Score。

    為了提高數(shù)據(jù)處理的效率,本文所有參數(shù)的計算都寫成Python程序,通過相應(yīng)程序可以算得論著的施引文獻(xiàn)篇數(shù)P、施引文獻(xiàn)的被引次數(shù)C、施引文獻(xiàn)的篇均被引次數(shù)CPP(Average citations per item)、h指數(shù)、學(xué)術(shù)跡(Academic trace)、影響矩(Impact torque)。

    已有研究多用先取Altmetric數(shù)據(jù)再取WoS數(shù)據(jù)的流程,本文則用在WoS數(shù)據(jù)基礎(chǔ)上取Altmetric數(shù)據(jù)再經(jīng)WoS獲得最終數(shù)據(jù)的程序,是對數(shù)據(jù)處理方法的更新和改善。

    3 結(jié)果

    四個學(xué)科各60篇論著代表性指標(biāo)的分布圖見圖1,為使線條清晰,學(xué)術(shù)化評價指標(biāo)和社會化評價指標(biāo)各取幾個典型,略去P、C、CPP、影響矩、Altmetric score五個指標(biāo)。其中橫坐標(biāo)為60個樣本數(shù)的標(biāo)記號,縱坐標(biāo)為指標(biāo)數(shù)值,為區(qū)別不同數(shù)值幅度,左縱標(biāo)用于學(xué)術(shù)跡,右縱標(biāo)用于h index和Score(主分)。

    利用SPSS軟件對四個學(xué)科60篇論著各評價指標(biāo)進(jìn)行Spearman相關(guān)分析,所得相關(guān)系數(shù)見表1~表4(經(jīng)K-S檢驗,各指標(biāo)不符合正態(tài)分布)。

    4 討論與分析

    從表1~表4可見學(xué)術(shù)化評價指標(biāo)之間相關(guān)性明顯,而與社會化評價指標(biāo)之間的相關(guān)性大多不顯著甚至負(fù)相關(guān)。這里,側(cè)重于討論h指數(shù)、學(xué)術(shù)跡、影響矩、補充計量指標(biāo)之間的關(guān)聯(lián)及差別。

    4.1 h指數(shù)的獨立性及其與其他指標(biāo)的相關(guān)性

    h指數(shù)已經(jīng)成為被廣泛認(rèn)可的高影響力評價指標(biāo),在其基礎(chǔ)上已擴展出一系列h型指標(biāo)(如g指數(shù)等)。h指數(shù)在評價單篇論著時通過考察單篇論著施引文獻(xiàn)的數(shù)量和質(zhì)量,從中選取施引文獻(xiàn)中h核的數(shù)量作為評價參數(shù),這是一種簡單而又很巧妙的指標(biāo)。從表1~表4可以看出,h指數(shù)與傳統(tǒng)的P、C、CPP指標(biāo)具有較強相關(guān)性,可以認(rèn)為h指數(shù)表征了P、C、CPP指標(biāo)的大部分特征。h指數(shù)和其他h型指標(biāo)在評價其他客體時具有較強相關(guān)性,在實際測度過程中,我們也發(fā)現(xiàn)h指數(shù)和g指數(shù)在評價單篇論著時也具有較強相關(guān)性。因此,可將h指數(shù)和各種h型指標(biāo)作為同類評價指標(biāo)。

    4.2 學(xué)術(shù)跡的獨立性及其與其他指標(biāo)的相關(guān)性

    學(xué)術(shù)跡指標(biāo)在測量單篇論著的學(xué)術(shù)影響力時綜合考察單篇論著的施引文獻(xiàn)數(shù)量與質(zhì)量分布,將施引文獻(xiàn)分成三個部分:h核、h尾和零被引部分,并結(jié)合I3指數(shù)思想構(gòu)建學(xué)術(shù)矩陣,最后通過矩陣的跡來度量論著的學(xué)術(shù)影響力。從表1~表4可以看出,學(xué)術(shù)跡與傳統(tǒng)的C、CPP指標(biāo)具有較強相關(guān)性,在環(huán)境、應(yīng)用物理、經(jīng)濟(jì)三個學(xué)科中學(xué)術(shù)跡與P指標(biāo)具有中等強度相關(guān)性,在歷史學(xué)樣本中學(xué)術(shù)跡與P指標(biāo)沒有顯著相關(guān)性。另外,學(xué)術(shù)跡指標(biāo)與h指數(shù)有較強相關(guān)性,這也說明學(xué)術(shù)跡指標(biāo)是建立在h指數(shù)之上的一種拓展。作為新近發(fā)展的學(xué)術(shù)評價指標(biāo),與純粹被引數(shù)和h指數(shù)等相比,學(xué)術(shù)跡具有覆蓋信息全面的優(yōu)勢并體現(xiàn)出作為獨立指標(biāo)存在的必要性,可望為后續(xù)研究提供參考。當(dāng)然,學(xué)術(shù)跡的構(gòu)建相對復(fù)雜,但通過程序計算則不成問題。

    4.3 影響矩的獨立性及其與其他指標(biāo)的相關(guān)性

    影響矩是類比物理概念力矩(Torque) 建立的測度量,通過綜合單篇論著的影響規(guī)模和影響時效兩個參量來測評其影響力,其實質(zhì)為論著影響力與時間跨度的累積,論著影響力又是通過引用該論著的作者數(shù)來定義。從表1~表4可以看出,影響矩與傳統(tǒng)的P、C指標(biāo)具有較強相關(guān)性,在環(huán)境、應(yīng)用物理、經(jīng)濟(jì)三個學(xué)科中影響矩與CPP指標(biāo)具有較低強度相關(guān)性,在歷史學(xué)樣本中影響矩與CPP指標(biāo)沒有顯著相關(guān)性。另外,影響矩指標(biāo)與h指數(shù)有較強相關(guān)性,但相對于學(xué)術(shù)跡指標(biāo),其與h指數(shù)的相關(guān)性系數(shù)要小一些。影響矩與學(xué)術(shù)跡指標(biāo)在環(huán)境、應(yīng)用物理、經(jīng)濟(jì)三個學(xué)科中具有中等強度相關(guān)性,在歷史學(xué)樣本中影響矩與學(xué)術(shù)跡沒有顯著相關(guān)性。影響矩指標(biāo)可以部分消除作者自引、團(tuán)體互引等問題,并考慮影響力在時間上的累積效果,是一個比較獨特的指標(biāo)。影響矩指標(biāo)的問題主要在于其與經(jīng)典指標(biāo)之間的理論關(guān)聯(lián)尚未建立。另外,從圖1中環(huán)境學(xué)科和經(jīng)濟(jì)學(xué)科影響矩指標(biāo)的波動來看,其相比其他指標(biāo)有較大幅度的震蕩,其指標(biāo)細(xì)節(jié)方面還有待改進(jìn)。

    4.4 補充計量指標(biāo)的獨立性及與其他指標(biāo)的相關(guān)性

    補充計量指標(biāo)由提供Altmetrics服務(wù)的機構(gòu)通過搜羅傳統(tǒng)網(wǎng)絡(luò)媒體、社會媒體、在線參考工具等媒介中用戶對論著的收錄、轉(zhuǎn)發(fā)、評論、閱讀、收藏等行為數(shù)據(jù),再通過一定的賦權(quán),綜合計算得到每篇論著的補充計量指標(biāo),是一種評價論著社會影響力的新指標(biāo),現(xiàn)已被一些出版機構(gòu)所使用。因Altmetrics數(shù)據(jù)來源廣泛,數(shù)據(jù)源性質(zhì)不同,數(shù)據(jù)生成的模式不同,部分研究者采用基于主成分的方法提取綜合主成分值作為補充計量指標(biāo)。本文將兩個指標(biāo)都納入了比較體系,從表1~表4可以看出,補充計量指標(biāo)Altmetric Score與P、C、CPP、h指數(shù)、學(xué)術(shù)跡、影響矩在四個學(xué)科的樣本數(shù)據(jù)中均沒有顯著相關(guān)性,這說明Altmetric Score指標(biāo)是一種顯著不同于現(xiàn)有指標(biāo)的新指標(biāo)。在置信度(雙測)為 0.01 時,補充計量指標(biāo)Score(主分)在物理學(xué)科的樣本數(shù)據(jù)中與P、影響矩指標(biāo)有中低程度顯著相關(guān)性,在其他情況與其他指標(biāo)均沒有顯著相關(guān)性。因此,可以認(rèn)為補充計量指標(biāo)現(xiàn)階段其作用仍只能定位在補充測度論著社會影響力的地位。正是基于此種考慮,本文在數(shù)據(jù)收集時,先是從WoS數(shù)據(jù)庫中選取高被引論文,再去Altmetric Explorer中采集Altmetric Score得分排前60的論著數(shù)據(jù),而現(xiàn)有的研究一般是先在Altmetrics工具中采集數(shù)據(jù)[16,26],再在WoS等數(shù)據(jù)庫中比對傳統(tǒng)指標(biāo),導(dǎo)致最終相關(guān)性分析的結(jié)論有所差別。基于主成分分析方法得到的綜合主成分值,在本文四個學(xué)科論著的分析中,效果也不太明顯,主要原因在于本文的樣本數(shù)據(jù)并不能很好地滿足使用主成分分析方法所需要的條件。比如:應(yīng)用物理學(xué)科樣本的Kaiser-Meyer-Olkin值為0.464、主成分的累積貢獻(xiàn)率81.2%,環(huán)境學(xué)科樣本的Kaiser-Meyer-Olkin值為0.578、主成分的累積貢獻(xiàn)率74.8%,經(jīng)濟(jì)學(xué)科樣本的Kaiser-Meyer-Olkin值為0.373、主成分的累積貢獻(xiàn)率80.7%,歷史學(xué)科樣本的Kaiser-Meyer-Olkin值為0.465、主成分的累積貢獻(xiàn)率81%,部分學(xué)科樣本數(shù)據(jù)的Kaiser-Meyer-Olkin值過低,不適合主成分方法的計算。另外,從各學(xué)科論著在Altmetric Explorer所收錄15種媒體工具的分布情況來看,絕大部分?jǐn)?shù)據(jù)產(chǎn)生于Mendeley readers,其他大部分媒介只有少量分布,而Mendeley本身就是學(xué)者們廣泛使用的文獻(xiàn)參考工具,因此在本文的樣本數(shù)據(jù)中使用主成分分析方法得到的綜合主分值去評價論著的社會影響力還有很大局限。

    利用SPSS因子分析功能的方差最大正交旋轉(zhuǎn)選項,可得各指標(biāo)的方差正交旋轉(zhuǎn)分布(見圖2)。

    從圖2中,明顯可見h指數(shù)和學(xué)術(shù)跡、Altmetric score和Score(主分)兩兩較為接近,而學(xué)術(shù)化評價指標(biāo)和社會化評價指標(biāo)之間則較為疏遠(yuǎn),這表明學(xué)術(shù)化評價指標(biāo)和社會化評價指標(biāo)各有不同的評價指向,不可能用補充計量指標(biāo)替代學(xué)術(shù)評價指標(biāo)。引言中提及已有研究揭示補充計量指標(biāo)與引文指標(biāo)等傳統(tǒng)學(xué)術(shù)指標(biāo)存在弱相關(guān),而與已有研究相比,由于更新了數(shù)據(jù)處理方法并考慮了多學(xué)科多指標(biāo),本文獲得的證據(jù)和論斷均更強。

    5 結(jié)語

    綜上所述,在測量單篇論著的學(xué)術(shù)影響力時,h指數(shù)、學(xué)術(shù)跡、影響矩、補充計量指標(biāo)都能從各自的角度取得一定的評價效度,也表現(xiàn)出各自的獨立性。h指數(shù)反映出高被引和優(yōu)質(zhì)論著的特征點;學(xué)術(shù)跡體現(xiàn)了單篇論著被引文獻(xiàn)數(shù)量與質(zhì)量的綜合面;影響矩考察單篇論著影響的作者規(guī)模與影響時效;補充計量指標(biāo)則關(guān)注在公共網(wǎng)絡(luò)媒介中測度單篇論著的社會影響力。

    由于所選四個學(xué)科分別代表了基礎(chǔ)科學(xué)、應(yīng)用科技、社會科學(xué)、人文學(xué)科,本文結(jié)論應(yīng)當(dāng)適合各學(xué)科;在更新了數(shù)據(jù)處理方法和多學(xué)科多指標(biāo)考量下,本文論斷不可能用補充計量指標(biāo)替代學(xué)術(shù)評價指標(biāo)。又因任何單一評價指標(biāo)都會有不同程度的局限,綜合應(yīng)用多種指標(biāo)可以提供多維度的參考,故建議在評價單篇論著時同時應(yīng)用多指標(biāo)測度,以真正實現(xiàn)綜合評價。

    參考文獻(xiàn):

    [1] Torres D, Cabezasá,Jiménez E. Altmetrics:New Indicators for Scientific Communication in Web 2.0[J].Comunicar, 2013, 21(41):53-60.

    [2] 唐繼瑞, 葉鷹. 單篇論著學(xué)術(shù)跡與影響矩比較研究[J].中國圖書館學(xué)報, 2015, 41(2): 4-16.

    [3] Garfield, E. Citation Indexing: Its Theory and Applications in Science, Technology and Humanities[M]. New York: Wiley,1979.

    [4] Hirsch, J. An index to quantify an individuals scientific research output[J]. Proceedings of the National Academy of Sciences of the USA, 2005, 102(46): 6569-16572.

    [5] Ball, P. Index to aims for fair ranking of scientists[J]. Nature, 2005, 436(7053): 900.

    [6] Schubert, A. Using the h-index for assessing single publications[J]. Scientometrics, 2009,78(3): 559-565.

    [7] 楊建林,嚴(yán)明. 單篇期刊論文h指數(shù)的實證研究——以圖書情報學(xué)為例[J]. 圖書情報工作, 2010, 54(12): 145-148.

    [8] Ye, F. Y. and Leydesdorff, L. The “Academic Trace” of the Performance Matrix: A Mathematical Synthesis of the h-Index and the Integrated Impact Indicator (I3)[J]. Journal of the Association for Information Science and Technology, 2014, 65(4): 742-750.

    [9] 王術(shù), 葉鷹. 影響矩作為測度單篇論著影響力的評價指標(biāo)探討[J].大學(xué)圖書館學(xué)報, 2014,32(5): 12-18.

    [10] 薛霏, 葉鷹. 大學(xué)的學(xué)術(shù)矩陣和學(xué)術(shù)跡探討[J]. 大學(xué)圖書館學(xué)報, 2014, 32(1): 25-29.

    [11] 邱均平,余厚強.論推動替代計量學(xué)發(fā)展的若干基本問題[J].中國圖書館學(xué)報,2015(1):1-11.

    [12] 劉春麗. altmetrics:從理論假說、術(shù)語提出到內(nèi)涵的重新界定[J].圖書情報工作,2015(6):82-89.

    [13] 魏思廷. 結(jié)合替代計量學(xué)的數(shù)字圖書館知識服務(wù)新模式[J].圖書情報知識,2015(2):87-92.

    [14] 邱均平,張心源,董克. Altmetrics指標(biāo)在機構(gòu)知識庫中的應(yīng)用研究[J].圖書情報工作,2015(2):100-105.

    [15] Mazov N A, Gureev V N. Alternative approaches to assessing scientific results[J].Herald of the Russian Academy of Sciences, 2015, 85(1): 26-32.

    [16] 由慶斌,韋博,湯珊紅.基于補充計量學(xué)的論文影響力評價模型構(gòu)建[J].圖書情報工作,2014(22):5-11.

    [17] Hammarfelt B. Using altmetrics for assessing research impact in the humanities[J]. Scientometrics, 2014, 101(2): 1419-1430.

    [18] Zahedi Z, Costas R, Wouters P. How well developed are altmetrics? A cross-disciplinary analysis of the presence of ‘a(chǎn)lternative metrics in scientific publications[J]. Scientometrics, 2014, 101(2): 1491-1513.

    [19] Alhoori H, Furuta R, Tabet M, et al. Altmetrics for Country-Level Research Assessment[M].The Emergence of Digital Libraries–Research and Practices. Springer International Publishing, 2014: 59-64.

    [20] Costas R, Zahedi Z, Wouters P. Do “altmetrics” correlate with citations? Extensive comparison of altmetric indicators with citations from a multidisciplinary perspective[J]. Journal of the Association for Information Science and Technology,2014:1-17.

    [21] Ortega J L. Relationship between altmetric and bibliometric indicators across academic social sites: The case of CSIC's members[J].Journal of Informetrics,2015,9(1): 39-49.

    [22] 劉曉娟,周建華,尤斌. 基于Mendeley與WoS的選擇性計量指標(biāo)與傳統(tǒng)科學(xué)計量指標(biāo)相關(guān)性研究[J].圖書情報工作,2015(3):112-118.

    [23] 葉鷹. 國際學(xué)術(shù)評價指標(biāo)研究現(xiàn)狀及發(fā)展綜述[J]. 情報學(xué)報, 2014, 33(2): 215-224.

    [24] Zhang, C.T. The e-index, complementing the h-index for excess citations[J].PLoS ONE, 2009, 4(5): e5429.

    [25] Leydesdorff, L.and Bornmann, L. Integrated impact indicators compared with impact factors: an alternative research design with policy implications[J].Journal of the American Society for Information Science and Technology, 2011, 62(11): 2133-2146.

    [26] LI S S, Fred Y. Evaluating journals yearly impact with altmetric indicators[J].Chinese Journal of Library and Information Science, 2015, 8(2): 25-38.

    猜你喜歡
    學(xué)術(shù)評價
    現(xiàn)實困境與制度突破:學(xué)術(shù)評價體系發(fā)展的時代進(jìn)路
    高校學(xué)術(shù)評價制度之我見
    學(xué)術(shù)領(lǐng)域馬太效應(yīng)及其評價調(diào)控準(zhǔn)則漫談
    屠呦呦獲“諾獎”對大學(xué)學(xué)術(shù)管理的啟示
    教育研究推動政府決策的問題及路徑
    學(xué)術(shù)不端行為防范機制的構(gòu)建
    學(xué)術(shù)圖書評價實證研究
    出版廣角(2016年14期)2016-12-13 01:53:31
    高校創(chuàng)新人才評價機制探索
    成才之路(2016年29期)2016-10-31 16:05:39
    注重實績的高層次創(chuàng)新人才評價機制研究
    成才之路(2016年26期)2016-10-08 10:55:52
    國外期刊評價的知識圖譜研究
    netflix在线观看网站| 99国产精品一区二区三区| 简卡轻食公司| 我要搜黄色片| 亚州av有码| 波多野结衣高清无吗| 欧美日韩综合久久久久久 | 国内毛片毛片毛片毛片毛片| 日韩欧美一区二区三区在线观看| 亚洲av成人不卡在线观看播放网| 黄色日韩在线| 国产午夜精品论理片| 天堂av国产一区二区熟女人妻| 国产成人啪精品午夜网站| 亚洲人与动物交配视频| 久久久久九九精品影院| 欧美zozozo另类| 亚洲最大成人av| 久久人人爽人人爽人人片va | 麻豆国产97在线/欧美| 国产欧美日韩精品亚洲av| 久久精品国产清高在天天线| 五月伊人婷婷丁香| 全区人妻精品视频| 亚洲午夜理论影院| 在线播放国产精品三级| 免费在线观看成人毛片| 亚洲五月婷婷丁香| 女人十人毛片免费观看3o分钟| 成年女人永久免费观看视频| 色综合亚洲欧美另类图片| 久久亚洲精品不卡| 久久人人精品亚洲av| 大型黄色视频在线免费观看| 三级男女做爰猛烈吃奶摸视频| 午夜日韩欧美国产| 免费观看精品视频网站| 精品久久久久久久久久久久久| 国产精品亚洲av一区麻豆| 美女 人体艺术 gogo| 免费观看的影片在线观看| 久久久久久久精品吃奶| 午夜亚洲福利在线播放| АⅤ资源中文在线天堂| 久久精品国产亚洲av香蕉五月| 深夜a级毛片| 日韩人妻高清精品专区| 国内少妇人妻偷人精品xxx网站| 一区二区三区激情视频| 国产毛片a区久久久久| 日本一本二区三区精品| 国产v大片淫在线免费观看| 久9热在线精品视频| 国产精品久久久久久人妻精品电影| 欧美一区二区亚洲| 少妇的逼好多水| 国产精品免费一区二区三区在线| 亚洲自拍偷在线| 亚洲 国产 在线| 动漫黄色视频在线观看| 一个人看的www免费观看视频| 99国产精品一区二区三区| 色5月婷婷丁香| 一本综合久久免费| 中文资源天堂在线| 韩国av一区二区三区四区| 天堂av国产一区二区熟女人妻| 久久久久久久亚洲中文字幕 | 少妇被粗大猛烈的视频| 精品久久久久久久久亚洲 | 亚洲精品在线观看二区| 老司机午夜十八禁免费视频| 老鸭窝网址在线观看| 日本a在线网址| 美女高潮喷水抽搐中文字幕| 婷婷六月久久综合丁香| eeuss影院久久| 亚洲国产精品sss在线观看| 婷婷精品国产亚洲av在线| 日韩人妻高清精品专区| 欧美一区二区精品小视频在线| 欧美区成人在线视频| 少妇熟女aⅴ在线视频| 欧美高清成人免费视频www| 日日夜夜操网爽| 日日夜夜操网爽| 亚洲成av人片在线播放无| 人人妻人人看人人澡| 亚洲午夜理论影院| 国产乱人伦免费视频| 18+在线观看网站| 国产成人a区在线观看| 老师上课跳d突然被开到最大视频 久久午夜综合久久蜜桃 | av在线老鸭窝| www.熟女人妻精品国产| 欧洲精品卡2卡3卡4卡5卡区| 成人鲁丝片一二三区免费| 国产69精品久久久久777片| 久久草成人影院| 欧美极品一区二区三区四区| 如何舔出高潮| 亚洲国产精品久久男人天堂| 日本三级黄在线观看| 级片在线观看| 午夜久久久久精精品| 高清在线国产一区| 欧美乱色亚洲激情| 精品99又大又爽又粗少妇毛片 | 中文字幕精品亚洲无线码一区| 国产人妻一区二区三区在| 男人和女人高潮做爰伦理| 在线观看午夜福利视频| 欧美日韩乱码在线| 男女之事视频高清在线观看| 乱人视频在线观看| 欧美一区二区亚洲| 夜夜爽天天搞| 免费搜索国产男女视频| 综合色av麻豆| 少妇裸体淫交视频免费看高清| 国产伦人伦偷精品视频| 琪琪午夜伦伦电影理论片6080| 精品久久久久久久久av| 噜噜噜噜噜久久久久久91| 久久久精品欧美日韩精品| 国产成人福利小说| 国产一区二区亚洲精品在线观看| 黄片小视频在线播放| 国产91精品成人一区二区三区| 精品乱码久久久久久99久播| 国内揄拍国产精品人妻在线| 精品一区二区免费观看| 国产高清激情床上av| 久久精品国产自在天天线| 久久精品国产清高在天天线| 亚洲av免费在线观看| 在线免费观看的www视频| 波多野结衣高清作品| 亚洲18禁久久av| 国产av不卡久久| 国产一区二区激情短视频| 十八禁网站免费在线| 床上黄色一级片| 欧美性感艳星| 免费观看人在逋| 久久久久国内视频| 亚洲成av人片免费观看| 美女xxoo啪啪120秒动态图 | 少妇的逼水好多| 亚洲国产日韩欧美精品在线观看| 免费在线观看日本一区| 亚洲欧美激情综合另类| 99热这里只有是精品在线观看 | 嫩草影视91久久| 国产不卡一卡二| 国产精品一及| 亚洲av成人av| 午夜福利免费观看在线| 色播亚洲综合网| 青草久久国产| 亚洲人成电影免费在线| 亚洲一区高清亚洲精品| 精品人妻一区二区三区麻豆 | 在线播放无遮挡| 欧美一级a爱片免费观看看| 精品一区二区三区av网在线观看| 亚洲三级黄色毛片| 国产伦精品一区二区三区四那| 精品国内亚洲2022精品成人| 波多野结衣巨乳人妻| 网址你懂的国产日韩在线| 久久精品91蜜桃| 此物有八面人人有两片| 午夜免费成人在线视频| 欧美日本亚洲视频在线播放| 99国产极品粉嫩在线观看| 美女大奶头视频| 婷婷六月久久综合丁香| 亚洲18禁久久av| 听说在线观看完整版免费高清| 欧美zozozo另类| 精品欧美国产一区二区三| 欧美3d第一页| 在线免费观看不下载黄p国产 | 欧美成狂野欧美在线观看| 成人性生交大片免费视频hd| 欧美极品一区二区三区四区| 亚洲天堂国产精品一区在线| 可以在线观看毛片的网站| 国产伦精品一区二区三区四那| 亚洲va日本ⅴa欧美va伊人久久| 精品不卡国产一区二区三区| 国产三级中文精品| 无遮挡黄片免费观看| 国产高清激情床上av| 琪琪午夜伦伦电影理论片6080| 一个人免费在线观看电影| 狠狠狠狠99中文字幕| 久久久色成人| 极品教师在线视频| 亚洲天堂国产精品一区在线| 两性午夜刺激爽爽歪歪视频在线观看| 小说图片视频综合网站| 午夜免费成人在线视频| 久久精品国产清高在天天线| 欧美性猛交╳xxx乱大交人| 精品久久久久久久末码| x7x7x7水蜜桃| 久久国产精品人妻蜜桃| 搞女人的毛片| 亚洲专区中文字幕在线| 国产伦精品一区二区三区视频9| 成人特级av手机在线观看| 国产精华一区二区三区| 亚洲第一欧美日韩一区二区三区| 精品国内亚洲2022精品成人| 一个人看的www免费观看视频| 嫩草影视91久久| 国产精品一及| 亚洲狠狠婷婷综合久久图片| 99riav亚洲国产免费| 又爽又黄无遮挡网站| 日日夜夜操网爽| 麻豆成人av在线观看| av欧美777| 一级毛片久久久久久久久女| 好男人在线观看高清免费视频| 如何舔出高潮| 国产精品人妻久久久久久| 欧美日韩国产亚洲二区| 天堂av国产一区二区熟女人妻| netflix在线观看网站| 欧美乱色亚洲激情| 午夜福利在线观看免费完整高清在 | 日本一二三区视频观看| 美女高潮的动态| 中文字幕久久专区| 又黄又爽又免费观看的视频| 午夜免费成人在线视频| 波多野结衣高清作品| 久久午夜福利片| 又爽又黄无遮挡网站| 国产av麻豆久久久久久久| 麻豆成人av在线观看| 在线观看一区二区三区| 欧美性感艳星| 欧美日韩福利视频一区二区| 老师上课跳d突然被开到最大视频 久久午夜综合久久蜜桃 | 欧美区成人在线视频| 久久精品夜夜夜夜夜久久蜜豆| 午夜福利免费观看在线| 欧美色视频一区免费| 亚洲国产精品久久男人天堂| 老司机深夜福利视频在线观看| 亚洲真实伦在线观看| 国产高清视频在线观看网站| 在线观看午夜福利视频| 直男gayav资源| 熟妇人妻久久中文字幕3abv| 国产乱人视频| 久久中文看片网| 国产精品久久久久久人妻精品电影| 亚洲精品456在线播放app | 一本精品99久久精品77| 成人国产综合亚洲| 久久国产乱子伦精品免费另类| 亚洲av日韩精品久久久久久密| 亚洲五月婷婷丁香| 国产精品久久久久久久久免 | 亚洲国产日韩欧美精品在线观看| 亚洲人成网站高清观看| 欧美高清成人免费视频www| 日本成人三级电影网站| 亚洲精品成人久久久久久| 嫩草影院精品99| 能在线免费观看的黄片| 高清在线国产一区| 国产毛片a区久久久久| eeuss影院久久| 制服丝袜大香蕉在线| 欧美黄色淫秽网站| 久久久久久久久中文| 麻豆成人av在线观看| 久久婷婷人人爽人人干人人爱| 欧美成人性av电影在线观看| 国产麻豆成人av免费视频| 观看免费一级毛片| 在线a可以看的网站| 精品久久久久久,| 国产亚洲欧美在线一区二区| 免费观看的影片在线观看| 色尼玛亚洲综合影院| 老熟妇乱子伦视频在线观看| 国产午夜精品久久久久久一区二区三区 | 色噜噜av男人的天堂激情| 国产成人福利小说| 熟女人妻精品中文字幕| 日日夜夜操网爽| 久久精品91蜜桃| 日韩欧美三级三区| 十八禁人妻一区二区| 高清在线国产一区| 激情在线观看视频在线高清| 久久国产乱子伦精品免费另类| 听说在线观看完整版免费高清| 国产精品美女特级片免费视频播放器| 夜夜躁狠狠躁天天躁| 成年版毛片免费区| 搡女人真爽免费视频火全软件 | 欧美丝袜亚洲另类 | 色综合欧美亚洲国产小说| 亚洲一区二区三区不卡视频| av在线观看视频网站免费| 久久久久久久久久黄片| 日韩欧美精品免费久久 | 亚洲av成人不卡在线观看播放网| 五月玫瑰六月丁香| 一本一本综合久久| 老师上课跳d突然被开到最大视频 久久午夜综合久久蜜桃 | av福利片在线观看| 男女下面进入的视频免费午夜| 亚洲av熟女| 亚洲精品456在线播放app | 日韩大尺度精品在线看网址| 久久精品91蜜桃| 亚洲激情在线av| 性插视频无遮挡在线免费观看| 国产v大片淫在线免费观看| 欧美最黄视频在线播放免费| 国产免费一级a男人的天堂| 亚州av有码| 久久久色成人| 国产高清三级在线| 日本成人三级电影网站| 男女下面进入的视频免费午夜| 天美传媒精品一区二区| 中文字幕精品亚洲无线码一区| 成人美女网站在线观看视频| 国产精品久久久久久久电影| 在线免费观看的www视频| 日本 欧美在线| 午夜久久久久精精品| 九九在线视频观看精品| 国产蜜桃级精品一区二区三区| 嫩草影院入口| 亚洲天堂国产精品一区在线| 动漫黄色视频在线观看| 天堂√8在线中文| 男插女下体视频免费在线播放| 国产色爽女视频免费观看| 一区二区三区激情视频| 亚洲av美国av| 1024手机看黄色片| 99久久精品一区二区三区| av中文乱码字幕在线| 深爱激情五月婷婷| 两人在一起打扑克的视频| 一本综合久久免费| 久久精品国产自在天天线| 夜夜爽天天搞| 中文字幕人妻熟人妻熟丝袜美| 欧美日韩综合久久久久久 | 成年版毛片免费区| 草草在线视频免费看| 18美女黄网站色大片免费观看| 看免费av毛片| 久久精品人妻少妇| 超碰av人人做人人爽久久| 欧美黄色淫秽网站| 亚洲色图av天堂| 久久精品国产清高在天天线| 亚洲av免费高清在线观看| 99热精品在线国产| 久久精品人妻少妇| 嫩草影院新地址| 人妻久久中文字幕网| 亚洲色图av天堂| 我的女老师完整版在线观看| 久久久色成人| 国产伦一二天堂av在线观看| 婷婷六月久久综合丁香| 国产人妻一区二区三区在| 特级一级黄色大片| 久久亚洲精品不卡| 在现免费观看毛片| 在线国产一区二区在线| 色噜噜av男人的天堂激情| 中国美女看黄片| 国产色婷婷99| 人人妻人人澡欧美一区二区| 免费看光身美女| avwww免费| 99在线视频只有这里精品首页| 日韩欧美在线乱码| av在线观看视频网站免费| 免费人成视频x8x8入口观看| 99热这里只有是精品50| 中文字幕av成人在线电影| 在线观看美女被高潮喷水网站 | 欧美日韩瑟瑟在线播放| 亚洲综合色惰| 久99久视频精品免费| 一个人看视频在线观看www免费| 国产私拍福利视频在线观看| 能在线免费观看的黄片| 久久久久久久久久成人| 国产精品av视频在线免费观看| 国产欧美日韩一区二区精品| 好看av亚洲va欧美ⅴa在| 黄色女人牲交| 亚洲成人久久爱视频| h日本视频在线播放| 国产精品爽爽va在线观看网站| 成熟少妇高潮喷水视频| 熟女电影av网| 久久久久久国产a免费观看| 天堂影院成人在线观看| 午夜两性在线视频| 亚洲国产欧洲综合997久久,| 亚洲人成伊人成综合网2020| 又紧又爽又黄一区二区| 噜噜噜噜噜久久久久久91| 亚洲av不卡在线观看| 亚洲第一区二区三区不卡| 精品久久国产蜜桃| 直男gayav资源| 久久久久久九九精品二区国产| 天天躁日日操中文字幕| 窝窝影院91人妻| 18禁黄网站禁片免费观看直播| 青草久久国产| 成人永久免费在线观看视频| 高清日韩中文字幕在线| 美女高潮的动态| 亚洲 欧美 日韩 在线 免费| 午夜亚洲福利在线播放| 人妻丰满熟妇av一区二区三区| 男人舔女人下体高潮全视频| 国产美女午夜福利| 在线十欧美十亚洲十日本专区| 五月玫瑰六月丁香| 99久国产av精品| 精品人妻偷拍中文字幕| 免费搜索国产男女视频| 免费av观看视频| 久久精品国产清高在天天线| 欧美黄色淫秽网站| 日韩中文字幕欧美一区二区| 变态另类丝袜制服| 国产69精品久久久久777片| 亚洲精品在线美女| 亚洲av第一区精品v没综合| 久久人人爽人人爽人人片va | 久久精品影院6| 午夜激情欧美在线| 欧美日韩综合久久久久久 | 久久热精品热| 日韩欧美精品免费久久 | 色综合站精品国产| 成人亚洲精品av一区二区| 国产高清视频在线播放一区| 性色av乱码一区二区三区2| 十八禁国产超污无遮挡网站| 婷婷色综合大香蕉| 午夜精品在线福利| 欧美不卡视频在线免费观看| 欧美精品国产亚洲| 直男gayav资源| 国产男靠女视频免费网站| 日本一二三区视频观看| 一本综合久久免费| 波多野结衣高清作品| 极品教师在线视频| 97碰自拍视频| 久久久久九九精品影院| 老司机深夜福利视频在线观看| 九色成人免费人妻av| 91麻豆av在线| 大型黄色视频在线免费观看| 日韩高清综合在线| 色5月婷婷丁香| 他把我摸到了高潮在线观看| 亚洲欧美日韩高清专用| 欧美日韩亚洲国产一区二区在线观看| 赤兔流量卡办理| 国产精品一区二区三区四区免费观看 | 日本免费a在线| 国产久久久一区二区三区| 国内少妇人妻偷人精品xxx网站| 亚洲欧美日韩卡通动漫| 国产伦精品一区二区三区四那| 久久精品久久久久久噜噜老黄 | 1000部很黄的大片| 性色av乱码一区二区三区2| 久久人妻av系列| 自拍偷自拍亚洲精品老妇| 久久久色成人| 免费无遮挡裸体视频| 亚洲性夜色夜夜综合| 亚洲在线自拍视频| 国产一区二区在线观看日韩| x7x7x7水蜜桃| 永久网站在线| 精品久久久久久久末码| 国产精品一区二区三区四区免费观看 | 99在线视频只有这里精品首页| 网址你懂的国产日韩在线| 中文字幕熟女人妻在线| 高潮久久久久久久久久久不卡| 久久99热这里只有精品18| 亚洲av不卡在线观看| 日韩成人在线观看一区二区三区| 日本a在线网址| 尤物成人国产欧美一区二区三区| 成人国产一区最新在线观看| 桃红色精品国产亚洲av| 一个人看的www免费观看视频| 两个人视频免费观看高清| 91狼人影院| 一个人免费在线观看的高清视频| 久久久久久久亚洲中文字幕 | 国产中年淑女户外野战色| 亚洲 欧美 日韩 在线 免费| 免费人成视频x8x8入口观看| 亚洲,欧美,日韩| 精品久久国产蜜桃| 亚洲在线观看片| 男女做爰动态图高潮gif福利片| 国产精品久久久久久久久免 | 宅男免费午夜| 中出人妻视频一区二区| 国产男靠女视频免费网站| 欧美xxxx性猛交bbbb| 国产高清视频在线播放一区| 给我免费播放毛片高清在线观看| 又紧又爽又黄一区二区| 欧美激情在线99| 人人妻人人看人人澡| 亚洲国产欧美人成| 国内精品久久久久精免费| 国产精品,欧美在线| 国产精品久久电影中文字幕| 婷婷色综合大香蕉| 婷婷丁香在线五月| 国产精品影院久久| 无人区码免费观看不卡| 精品人妻偷拍中文字幕| 成人性生交大片免费视频hd| av在线蜜桃| 男人和女人高潮做爰伦理| 亚洲精品在线美女| 欧美乱妇无乱码| 亚洲国产高清在线一区二区三| 18美女黄网站色大片免费观看| 国内精品一区二区在线观看| 日日干狠狠操夜夜爽| 99久久九九国产精品国产免费| 69人妻影院| 国产精品乱码一区二三区的特点| 亚洲最大成人av| 色综合婷婷激情| 琪琪午夜伦伦电影理论片6080| 麻豆一二三区av精品| 变态另类丝袜制服| 脱女人内裤的视频| 床上黄色一级片| 男女那种视频在线观看| 国产精品一及| 国产av一区在线观看免费| 宅男免费午夜| 真实男女啪啪啪动态图| 欧美黄色片欧美黄色片| 日日夜夜操网爽| 成人特级av手机在线观看| 国产亚洲精品综合一区在线观看| a级毛片免费高清观看在线播放| 中文字幕av在线有码专区| 淫秽高清视频在线观看| 亚洲无线观看免费| 免费大片18禁| 色5月婷婷丁香| 狠狠狠狠99中文字幕| 国产毛片a区久久久久| 最近最新免费中文字幕在线| 精品不卡国产一区二区三区| 午夜老司机福利剧场| 在线天堂最新版资源| 1024手机看黄色片| ponron亚洲| 免费在线观看成人毛片| 国产真实伦视频高清在线观看 | 亚洲av不卡在线观看| 热99在线观看视频| 国产在视频线在精品| 一二三四社区在线视频社区8| 丁香六月欧美| 俄罗斯特黄特色一大片| 757午夜福利合集在线观看| 性插视频无遮挡在线免费观看| 成人特级黄色片久久久久久久| 精品一区二区三区视频在线| 97碰自拍视频| 欧美黄色淫秽网站| 国产主播在线观看一区二区| 真实男女啪啪啪动态图| 国产黄a三级三级三级人| 午夜免费男女啪啪视频观看 | 国产免费男女视频| 性插视频无遮挡在线免费观看| 小说图片视频综合网站| 亚洲最大成人手机在线| 亚洲中文字幕一区二区三区有码在线看| 精品一区二区三区视频在线| av天堂在线播放| 欧美日韩亚洲国产一区二区在线观看|