• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    中文學(xué)術(shù)成果評(píng)價(jià)的Altmetrics發(fā)展及實(shí)踐路徑

    2018-02-09 11:59:58
    關(guān)鍵詞:成果計(jì)量學(xué)術(shù)

    韓 毅

    進(jìn)一步推動(dòng)中國(guó)科學(xué)技術(shù)的發(fā)展,目前需要解決三方面的問(wèn)題:一是構(gòu)建有中國(guó)特色的完整科學(xué)技術(shù)體系,二是創(chuàng)新與引領(lǐng)世界科學(xué)技術(shù)的發(fā)展,三是構(gòu)建科學(xué)技術(shù)的評(píng)價(jià)方法體系。前兩個(gè)方面是科學(xué)技術(shù)的發(fā)展目標(biāo)問(wèn)題,涉及科學(xué)研究的生產(chǎn)及傳播,主要由科學(xué)研究工作者及科學(xué)交流系統(tǒng)來(lái)完成;第三個(gè)方面是科學(xué)技術(shù)的價(jià)值引領(lǐng)問(wèn)題,關(guān)乎科學(xué)研究的目標(biāo)規(guī)范與價(jià)值導(dǎo)向,主要由科學(xué)評(píng)價(jià)系統(tǒng)來(lái)實(shí)現(xiàn)。

    科研成果的社會(huì)評(píng)價(jià)歷來(lái)爭(zhēng)論較多。無(wú)論是成果的定性評(píng)價(jià)還是定量評(píng)價(jià),依據(jù)成果數(shù)量或質(zhì)量的單一評(píng)價(jià)還是集成數(shù)量質(zhì)量的綜合評(píng)價(jià),都不同程度地存在一些不夠完善的地方。相對(duì)來(lái)說(shuō),自然科學(xué)評(píng)價(jià)的國(guó)際標(biāo)準(zhǔn)化程度更高,而人文社會(huì)科學(xué)的文化地域特征使得其評(píng)價(jià)具有更為明顯的獨(dú)特性。在當(dāng)前非正式交流強(qiáng)勁回歸情境下,如何在復(fù)雜情境中開(kāi)發(fā)具有融合性的評(píng)價(jià)方法與技術(shù)就成為必須解決的核心問(wèn)題[1]。Altmetrics的提出為非正式交流渠道科研成果評(píng)價(jià)提供了新的契機(jī),然而,其工具及方法主要針對(duì)西方學(xué)術(shù)環(huán)境。如何開(kāi)發(fā)合適的工具與選擇合適的方法進(jìn)行中文非正式交流環(huán)境下科學(xué)成果評(píng)價(jià)就成為當(dāng)前科技評(píng)價(jià)的重要問(wèn)題。本文正是基于此來(lái)討論中文學(xué)術(shù)成果的Altmetrics實(shí)踐路徑問(wèn)題。

    一、相關(guān)研究工作

    隨著科學(xué)正式交流功能的不斷異化,尋找由出版商主導(dǎo)的正式交流之外的以科研人員為主導(dǎo)的科學(xué)交流渠道一直是科學(xué)工作者的樸素愿望。網(wǎng)絡(luò)技術(shù)的發(fā)展,尤其是自媒體技術(shù)的普及,為該愿望的實(shí)現(xiàn)提供了新的契機(jī)。國(guó)外的一項(xiàng)調(diào)查研究發(fā)現(xiàn):人文社會(huì)科學(xué)研究者正在頻繁使用多種社交軟件(如Google Scholar、ResearchGate、LinkedIn、Facebook、Google+、Twitter、ResearcherID和 Mendeley等)來(lái)交流思想,這一趨勢(shì)也在自然科學(xué)研究者中蔓延[2]。這種以科學(xué)工作者為主導(dǎo)的非正式交流回歸要求科研評(píng)價(jià)工作必須把非正式交流內(nèi)容納入到科研成果評(píng)價(jià)體系中,在 2010年,Altmetrics就應(yīng)運(yùn)而生了[3]。

    Altmetrics一經(jīng)提出就成為科學(xué)計(jì)量學(xué)、科學(xué)出版、社交媒體等領(lǐng)域的熱點(diǎn)話題,也迅速得到自然科學(xué)權(quán)威出版物(如Nature、Science等)和生物醫(yī)學(xué)領(lǐng)域的核心出版物(如PLoS ONE、PLoS Biology等)的青睞,與之相對(duì)應(yīng)的各種評(píng)價(jià)工具也不斷涌現(xiàn)[4]。

    2013年,威爾科姆信托(Wellcome Trust)基金開(kāi)展了一項(xiàng)旨在探索ALMs(Article Level Metrics)/Altmetrics支持組織學(xué)習(xí)及基金策略的研究項(xiàng)目。研究發(fā)現(xiàn)ALMs/Altmetrics不僅可用來(lái)探測(cè)政策制定者對(duì)科學(xué)研究的早期關(guān)注,還可以用來(lái)探索科研成果對(duì)政策制定和應(yīng)用實(shí)踐的影響,且效果在時(shí)間上遠(yuǎn)遠(yuǎn)優(yōu)于學(xué)術(shù)引文[5]。2014年,英格蘭高等教育基金委員會(huì)(HEFCE)委托一個(gè)獨(dú)立評(píng)審小組探索研究杰出框架(Research Excellent Framework,REF)質(zhì)量評(píng)價(jià)結(jié)果的影響因素,結(jié)果發(fā)現(xiàn)一些Altmetrics指標(biāo)(如Google Scholar引文量、Twitter推送量等)對(duì)科研質(zhì)量有重要影響[6]。

    尤其值得關(guān)注的是,2013年NISO(美國(guó)國(guó)家信息標(biāo)準(zhǔn)協(xié)會(huì))介入Altmetrics應(yīng)用實(shí)踐研究,一年后發(fā)布《NISO Altmetrics標(biāo)準(zhǔn)項(xiàng)目白皮書(shū)》,從定義、研究產(chǎn)出、科學(xué)發(fā)現(xiàn)、研究評(píng)估、數(shù)據(jù)質(zhì)量和不當(dāng)操縱、指標(biāo)分組和聚類(lèi)、利益相關(guān)者視角、使用采納等9個(gè)方面總結(jié)了Altmetrics的標(biāo)準(zhǔn)和最佳實(shí)踐成果[7]。2016年,NISO公布了最終成果《NISO Altmetrics評(píng)價(jià)指標(biāo)項(xiàng)目成果》[8]。該項(xiàng)目是由美國(guó)國(guó)家信息技術(shù)協(xié)會(huì)負(fù)責(zé),因此具有國(guó)家層面的風(fēng)向標(biāo)作用,一方面意味著美國(guó)科學(xué)管理層面認(rèn)識(shí)到把非正式交流納入到科技評(píng)價(jià)中的重要價(jià)值,另一方面期望通過(guò)廣泛的社會(huì)調(diào)研及研究來(lái)規(guī)范與之相關(guān)的政策、技術(shù)與方法。

    關(guān)于中文學(xué)術(shù)成果評(píng)價(jià)中如何引入Altmetrics問(wèn)題,學(xué)者做了大量的研究工作。文獻(xiàn)研究發(fā)現(xiàn),關(guān)于中文學(xué)術(shù)成果評(píng)價(jià)的Altmetrics應(yīng)用主要集中在以下幾個(gè)方面:一是從普泛的方法論、工具等層面或者針對(duì)特定學(xué)科及領(lǐng)域討論如何在學(xué)術(shù)成果評(píng)價(jià)中引入Altmetrics,如韓毅關(guān)于傳統(tǒng)引文指標(biāo)與Altmetrics指標(biāo)融合的理論分析[1],劉曉娟關(guān)于Altmetrics在學(xué)術(shù)評(píng)價(jià)中的可用性研究[9],李燕波關(guān)于Altmetrics對(duì)學(xué)術(shù)生態(tài)系統(tǒng)的影響研究[10],雷淑義等關(guān)于中文人文社會(huì)科學(xué)學(xué)術(shù)圖書(shū)的Altmetrics評(píng)價(jià)問(wèn)題[11]以及中文學(xué)術(shù)圖書(shū)Altmetrics評(píng)價(jià)實(shí)踐中各種方法選擇問(wèn)題[12],等等;二是Altmetrics方法的指標(biāo)體系構(gòu)建問(wèn)題,如姚莉等針對(duì)《國(guó)家哲學(xué)社會(huì)科學(xué)成果文庫(kù)》的學(xué)術(shù)著作綜合評(píng)價(jià)問(wèn)題構(gòu)建了綜合性的評(píng)價(jià)指標(biāo)體系[13],何峻等將借閱頻次、被摘頻次、網(wǎng)絡(luò)下載頻次等納入到中國(guó)大陸1949—2004年出版的中文圖書(shū)評(píng)價(jià)指標(biāo)體系中[14],李勇等針對(duì)Altmetrics背景下期刊的多維評(píng)價(jià)指標(biāo)體系構(gòu)建[15],等等;三是實(shí)證探討應(yīng)用Altmetrics指標(biāo)對(duì)特定學(xué)科、特定對(duì)象的計(jì)量特征研究,如趙蓉英等關(guān)于將Altmetrics指標(biāo)應(yīng)用于漢語(yǔ)言文學(xué)學(xué)科和開(kāi)源軟件的學(xué)術(shù)影響力評(píng)價(jià)[16-17],余厚強(qiáng)等關(guān)于中文微博Altmetrics特征研究[18],趙潔潔等關(guān)于 Altmetrics工具應(yīng)用于高校機(jī)構(gòu)知識(shí)庫(kù)學(xué)術(shù)功能的評(píng)價(jià)[19],等等。

    從國(guó)內(nèi)外的相關(guān)研究成果看,在學(xué)術(shù)成果評(píng)價(jià)中引入Altmetrics指標(biāo)已經(jīng)成為不可逆轉(zhuǎn)的趨勢(shì),但其理論研究與應(yīng)用實(shí)踐以英文學(xué)術(shù)成果為主,關(guān)于中文學(xué)術(shù)成果的Altmetrics評(píng)價(jià)相對(duì)比較薄弱?;诖?,本文主要從邏輯上分析Altmetrics應(yīng)用于中文環(huán)境下學(xué)術(shù)成果評(píng)價(jià)的發(fā)展與實(shí)踐路徑。

    二、中文學(xué)術(shù)成果評(píng)價(jià)的Altmetrics實(shí)踐路徑

    (一)解析Altmetrics相關(guān)利益者訴求

    網(wǎng)絡(luò)空間的空前繁榮,促成了中文學(xué)術(shù)出版物通過(guò)各種媒體的廣泛傳播,也擴(kuò)展了純電子形式學(xué)術(shù)出版物的擴(kuò)散渠道。然而,在傳統(tǒng)的水平與質(zhì)量評(píng)估指標(biāo)中沒(méi)有或很少包含這些內(nèi)容,這不僅對(duì)于學(xué)術(shù)成果本身的質(zhì)量評(píng)價(jià)存在不公允之處,還會(huì)對(duì)學(xué)術(shù)成果相關(guān)聯(lián)的行為歸屬主體產(chǎn)生負(fù)面影響。

    以引文為基礎(chǔ)的傳統(tǒng)學(xué)術(shù)評(píng)價(jià)中,事實(shí)上隱含著一些基本前提,任何經(jīng)同行評(píng)議而發(fā)表的學(xué)術(shù)成果都存在科學(xué)交流價(jià)值,其價(jià)值的高低取決于以引文為載體的時(shí)間維度上的知識(shí)流通速度。因此,以引文為基礎(chǔ)的計(jì)量學(xué)評(píng)價(jià)測(cè)度的是學(xué)術(shù)成果的學(xué)術(shù)價(jià)值,是科學(xué)共同體對(duì)學(xué)術(shù)成果的認(rèn)同,盡管由于客觀條件的影響可能出現(xiàn)價(jià)值認(rèn)同的異化[20-21],但在眾多引用關(guān)系的稀釋中這種異化會(huì)最大程度地最小化,也即是說(shuō)即使有精通引用指標(biāo)與引用評(píng)價(jià)機(jī)理的人想通過(guò)作弊方式實(shí)現(xiàn)異化目標(biāo),其代價(jià)也必然是巨大的,尤其是評(píng)價(jià)不注重短期效應(yīng)的話更是如此。

    學(xué)術(shù)成果不僅標(biāo)志的是對(duì)自然、社會(huì)、思維等的認(rèn)識(shí)過(guò)程,評(píng)價(jià)時(shí)還應(yīng)該關(guān)注這些成果對(duì)自然、社會(huì)、思維的改造過(guò)程,體現(xiàn)為一種學(xué)術(shù)成果的社會(huì)影響效應(yīng)。隨著Altmetrics的誕生,這種缺失在一定程度上可以得到改善。

    然而,以網(wǎng)絡(luò)空間為流通域的眾多非正式交流體系,顯然缺乏必須的同行評(píng)議過(guò)程,盡管用戶在瀏覽、下載、轉(zhuǎn)發(fā)、評(píng)論相關(guān)信息時(shí)也體現(xiàn)了其對(duì)相關(guān)信息的價(jià)值判斷,但其同時(shí)存在不可控性及脆弱性。因此,如果把Altmetrics所計(jì)量的網(wǎng)絡(luò)空間信息環(huán)境也納入到科技評(píng)價(jià)范疇體系的話,如何提升其作為數(shù)據(jù)基礎(chǔ)設(shè)施的結(jié)構(gòu)魯棒性、數(shù)據(jù)可信性、過(guò)程可追蹤性就成為一種現(xiàn)實(shí)需求。

    傳統(tǒng)科學(xué)計(jì)量的數(shù)據(jù)基礎(chǔ)設(shè)施建設(shè)經(jīng)過(guò)幾百年的發(fā)展,盡管在結(jié)構(gòu)魯棒性、數(shù)據(jù)可信性、過(guò)程可追蹤性或多或少地還存在一些問(wèn)題,但至少目前還能滿足基本需求。因而,要解決網(wǎng)絡(luò)空間的這些數(shù)據(jù)基礎(chǔ)設(shè)施建設(shè)問(wèn)題,最主要的是要明確利益相關(guān)者的訴求有哪些及這些訴求的強(qiáng)烈程度與合理程度。

    根據(jù)NISO的調(diào)研結(jié)果大致可以發(fā)現(xiàn),目前Altmetrics計(jì)量的利益相關(guān)者主要包括作者、作者機(jī)構(gòu)、出版商、圖書(shū)館、資助機(jī)構(gòu)、內(nèi)容平臺(tái)提供者及媒體官員等[8]。從目前各類(lèi)研究進(jìn)展來(lái)看,出版商與內(nèi)容平臺(tái)提供者顯得尤為積極,其他各方還處于試用與觀望階段。

    因而,在理論與實(shí)踐中需要解決以下問(wèn)題:Altmetrics計(jì)量的學(xué)理基礎(chǔ)是什么,它對(duì)評(píng)價(jià)數(shù)據(jù)基礎(chǔ)設(shè)施的結(jié)構(gòu)魯棒性有什么要求,其數(shù)據(jù)可信性的保障條件是什么,過(guò)程可追蹤性的技術(shù)環(huán)境要求是什么,各個(gè)不同利益相關(guān)者在實(shí)踐中的具體要求是什么,這些要求體現(xiàn)了怎樣的計(jì)量功能,在計(jì)量過(guò)程中可能用哪些指標(biāo)來(lái)反映,這些指標(biāo)間呈現(xiàn)怎樣的內(nèi)在關(guān)系,它們與傳統(tǒng)的以引文為基礎(chǔ)的計(jì)量指標(biāo)間是怎樣的關(guān)系,在評(píng)價(jià)體系中的相對(duì)重要性如何鑒別與評(píng)估,如何構(gòu)建統(tǒng)一的使用行為理論模型,等等。

    只有把這些利益相關(guān)者訴求整合成可實(shí)現(xiàn)的有機(jī)指標(biāo)體系,并厘清這些指標(biāo)間的作用機(jī)理,以此為依據(jù)的數(shù)據(jù)基礎(chǔ)設(shè)施高額投資才可能獲得預(yù)期的回報(bào),也才會(huì)有各種社會(huì)資源投入的可能。因此,中文學(xué)術(shù)成果的Altmetrics評(píng)價(jià)實(shí)踐首先需要解決的就是利益相關(guān)者的基本訴求,這將是一個(gè)耗時(shí)費(fèi)力的宏大工程,也是基礎(chǔ)性的奠基工程。

    (二)開(kāi)發(fā)Altmetrics數(shù)據(jù)搜集與分析工具

    網(wǎng)絡(luò)科學(xué)社區(qū)的蓬勃發(fā)展、開(kāi)放存?。∣pen Ac-cess)運(yùn)動(dòng)和大型預(yù)印本數(shù)據(jù)庫(kù)的涌現(xiàn)已悄然改變科學(xué)交流的格局,非正式交流借助數(shù)字化網(wǎng)絡(luò)化信息環(huán)境強(qiáng)勁回歸。這些實(shí)踐打破了科學(xué)交流僅囿于狹小科學(xué)共同體范圍的樊籬,允許任何用戶借助網(wǎng)絡(luò)工具檢索、瀏覽、下載和鏈接論文全文,提高了科學(xué)研究成果在更廣泛空間傳播的可能性。

    隨著國(guó)際開(kāi)放科學(xué)和開(kāi)放數(shù)據(jù)的理論和實(shí)踐的迅速發(fā)展,作為在線參考文獻(xiàn)管理軟件的Mendeley在Altmetrics工具開(kāi)發(fā)上做了開(kāi)創(chuàng)性工作[22]。2010年4月,Mendeley啟動(dòng)“開(kāi)放應(yīng)用程序編程接口API”項(xiàng)目,旨在鼓勵(lì)網(wǎng)絡(luò)環(huán)境下的API應(yīng)用創(chuàng)新實(shí)踐,激發(fā)更多人支持、參與和推動(dòng)開(kāi)放科學(xué)運(yùn)動(dòng)。2011年6月,Mendeley舉辦了兩次基于API的產(chǎn)品大賽,不僅激發(fā)了學(xué)術(shù)社交軟件愛(ài)好者對(duì)API數(shù)據(jù)的再次產(chǎn)品開(kāi)發(fā),同時(shí)吸引了眾多數(shù)據(jù)庫(kù)出版商的關(guān)注,從而奠基了Altmetrics評(píng)價(jià)的數(shù)據(jù)采集基礎(chǔ)。

    2009年,作為開(kāi)放存取運(yùn)動(dòng)主要支持者的PLoS(Public Library of Science)開(kāi)發(fā)了論文層面(Article-Level Metrics)指標(biāo)[23]。2011年 9月,PLoS和 Mendeley聯(lián)合舉辦關(guān)于 API的產(chǎn)品大賽“Mendeley/PLOSAPI Binary Battle”,包括 PLoSImpact Explorer、Total-Impact、Reader Meter、Collabgraph等在內(nèi)的 10余個(gè)產(chǎn)品獲得了較好成績(jī)[22]。其中,Total-Impact(目前已經(jīng)更名為ImpactStory)和 PLoS Impact Explorer二者經(jīng)過(guò)不斷研發(fā)和完善,今天仍然是 Altmetrics應(yīng)用實(shí)踐的重要工具。

    2011年,Altmetric.com模仿傳統(tǒng)科技評(píng)價(jià)構(gòu)建了指標(biāo)加權(quán)綜合得分(Altmetric Score),通過(guò)對(duì)各個(gè)數(shù)據(jù)源分配不同的權(quán)重,采用加權(quán)累積自動(dòng)算法實(shí)現(xiàn)科研成果按得分情況進(jìn)行排名,從而反映科研成果獲得的關(guān)注度大?。?4]。

    2012年,Plum Analytics公司研發(fā)出Plum X,作為專門(mén)面向機(jī)構(gòu)的Altmetrics工具可提取包括傳統(tǒng)引文、下載、瀏覽、收藏、評(píng)論等多個(gè)維度的數(shù)據(jù),并可按照機(jī)構(gòu)層級(jí)聚類(lèi)輸出用戶需要的結(jié)果[25]。

    然而,到目前為止所有當(dāng)前應(yīng)用的各類(lèi)Altmetrics工具基本上都是國(guó)外的公益機(jī)構(gòu)或盈利機(jī)構(gòu)開(kāi)發(fā)的[26],我國(guó)不僅沒(méi)有相應(yīng)的大型應(yīng)用工具,即使相關(guān)的網(wǎng)絡(luò)基礎(chǔ)數(shù)據(jù)也僅有新浪微博數(shù)據(jù)在Altmetrics工具有所體現(xiàn)[18]。我國(guó)作為擁有7億多網(wǎng)民的網(wǎng)絡(luò)大國(guó),其科技信息的網(wǎng)絡(luò)傳播不僅有利于提升國(guó)民的基本素養(yǎng),其傳播模式可能也與國(guó)外有所不同。因而,如何針對(duì)中文學(xué)術(shù)成果的傳播特征開(kāi)發(fā)具有中國(guó)特色的Altmetrics計(jì)量工具,不僅有利于反映我國(guó)科技文化的網(wǎng)絡(luò)傳播特征,也有利于識(shí)別出我國(guó)學(xué)術(shù)成果的社會(huì)影響,同時(shí)基于Altmetrics的中文環(huán)境測(cè)度要求倒逼網(wǎng)絡(luò)數(shù)據(jù)描述框架的重構(gòu)與革新,從而體現(xiàn)中國(guó)科學(xué)對(duì)世界的貢獻(xiàn)并引領(lǐng)世界的發(fā)展。

    因此,識(shí)別中文環(huán)境下Altmetrics利益相關(guān)者訴求并抽象出Altmetrics功能需求,不僅能夠有利于中文環(huán)境下Altmetrics工具的開(kāi)發(fā),也有利中文環(huán)境下網(wǎng)絡(luò)數(shù)據(jù)基礎(chǔ)設(shè)施的建設(shè)規(guī)范設(shè)計(jì),為開(kāi)創(chuàng)中國(guó)的科技引領(lǐng)作用搭建基礎(chǔ)性數(shù)據(jù)平臺(tái)。在實(shí)踐過(guò)程中,需要解決以下幾方面的問(wèn)題:一是數(shù)據(jù)采集的指標(biāo)范疇,確定各指標(biāo)范疇的結(jié)構(gòu)關(guān)系;二是數(shù)據(jù)規(guī)范及互操作規(guī)則,為中文環(huán)境下的Altmetrics數(shù)據(jù)采集制定相關(guān)標(biāo)準(zhǔn)規(guī)范,為不同平臺(tái)數(shù)據(jù)、中外文數(shù)據(jù)間的互操作提供技術(shù)標(biāo)準(zhǔn);三是基于利益相關(guān)者功能需求開(kāi)發(fā)各類(lèi)分析工具,尤其是可視化分析工具。

    (三)構(gòu)建Altmetrics與傳統(tǒng)評(píng)價(jià)方法的融合模型

    科技評(píng)價(jià)作為科學(xué)職業(yè)監(jiān)督及自省的一種社會(huì)自發(fā)或自覺(jué)功能,一方面須具有面向科學(xué)共同體的評(píng)估、遴選、引領(lǐng)功能,評(píng)估個(gè)人及機(jī)構(gòu)科研績(jī)效水平,主要表征為學(xué)術(shù)影響力評(píng)價(jià),另一方面也需要向社會(huì)環(huán)境宣揚(yáng)科技成果的社會(huì)效果,體現(xiàn)文明傳承及社會(huì)服務(wù)功能,主要表征為社會(huì)影響力評(píng)估[1]。這兩種功能在現(xiàn)實(shí)需求中都不可或缺,在當(dāng)前非正式交流強(qiáng)勁回歸的情境下,科學(xué)正式交流和非正式交流的兩翼正在逐漸走向平衡,因而是時(shí)候把反映正式交流與非正式交流的兩種評(píng)價(jià)功能有機(jī)融合起來(lái)了。

    2014年,在英國(guó)倫敦舉辦的Altmetrics會(huì)議上,對(duì)其內(nèi)涵達(dá)成以下共識(shí):Altmetrics是對(duì)傳統(tǒng)計(jì)量方法的補(bǔ)充,是取締單一使用引文計(jì)量方法的創(chuàng)新,可促進(jìn)科學(xué)評(píng)價(jià)方法的多元化[27]。這一理念對(duì)相關(guān)Altmetrics工具開(kāi)發(fā)與實(shí)踐應(yīng)用產(chǎn)生了重要影響。在主要的計(jì)算工具中,如ImpactStory、Article Level Metrics、Plum X等均包括傳統(tǒng)文獻(xiàn)引用次數(shù)、瀏覽與下載量及Altmetrics指標(biāo)。這些實(shí)踐表明,Altmetrics評(píng)價(jià)是已經(jīng)超越自身并與傳統(tǒng)文獻(xiàn)計(jì)量指標(biāo)相融合的科技評(píng)價(jià)方法。

    目前主要的Altmetrics數(shù)據(jù)處理方法是采用百分位數(shù)(percentiles)及“上下文語(yǔ)境分析+底層定性數(shù)據(jù)”來(lái)解決計(jì)算結(jié)果表示及意義識(shí)別,在如何清除數(shù)據(jù)作弊方面也采用了諸多方法予以解決。然而,如何構(gòu)建集成傳統(tǒng)計(jì)量指標(biāo)與Altmetrics計(jì)量指標(biāo)的統(tǒng)一理論模型并沒(méi)有達(dá)成共識(shí),這不僅涉及計(jì)算方法與計(jì)算工具的設(shè)計(jì)與計(jì)算過(guò)程的可靠性問(wèn)題,更多涉及到對(duì)科學(xué)交流的正式過(guò)程與非正式過(guò)程的深刻理解,尤其是后一方面的研究相當(dāng)欠缺。這不僅影響到計(jì)算結(jié)果的精確性與可靠性,更體現(xiàn)出對(duì)科學(xué)交流過(guò)程深刻洞見(jiàn)及機(jī)制認(rèn)知的缺失,這也是科學(xué)計(jì)量學(xué)必須解決的核心問(wèn)題。

    三、結(jié)語(yǔ)

    在當(dāng)前中國(guó)科技發(fā)展的嶄新時(shí)期,如何引領(lǐng)世界科技的發(fā)展,不僅是科學(xué)技術(shù)本身的發(fā)展問(wèn)題,也涉及到科學(xué)評(píng)價(jià)體系標(biāo)準(zhǔn)與方法的重構(gòu)問(wèn)題,尤其是后者在國(guó)際科技話語(yǔ)權(quán)的建構(gòu)中更為重要。Altmetrics指標(biāo)的提出為學(xué)術(shù)成果評(píng)價(jià)提出了新的挑戰(zhàn),也給中國(guó)學(xué)術(shù)成果評(píng)價(jià)方法創(chuàng)新提供了新的機(jī)遇。針對(duì)Altmetrics的評(píng)價(jià)現(xiàn)狀,深入細(xì)致地研究中文環(huán)境下相關(guān)利益者的現(xiàn)實(shí)需求并構(gòu)建具有結(jié)構(gòu)魯棒性、數(shù)據(jù)可信性、過(guò)程可追蹤性的中文學(xué)術(shù)成果評(píng)價(jià)數(shù)據(jù)基礎(chǔ)設(shè)施,開(kāi)發(fā)體現(xiàn)中文學(xué)術(shù)成果特征的Altmetrics數(shù)據(jù)采集與分析工具,在理論上解決融合傳統(tǒng)計(jì)量指標(biāo)與Altmetrics計(jì)量指標(biāo)的統(tǒng)一理論模型,必將成為未來(lái)一段時(shí)間的重點(diǎn)研究?jī)?nèi)容。

    [1] 韓毅.非正式交流回歸語(yǔ)境下科技評(píng)價(jià)的融合路徑取向[J].中國(guó)圖書(shū)館學(xué)報(bào),2016,42(4):64-74.

    [2] NOORDEN R V.Online collaboration:scientists and the social network[J].Nature,2014,512(7513):126-129.

    [3] PRIEM J,HEMMINGER B H.Scientometrics2.0:New metrics of scholarly impact on the social Web[EB/OL].[2017-10-06].http://firstmonday.org/ojs/index.php/fm/article/view/2874/.

    [4] 王睿,胡文靜,郭瑋.常用Altmetrics工具比較[J].現(xiàn)代圖書(shū)情報(bào)技術(shù),2014,30(12):18-26.

    [5] DINSMORE A,ALLEN L,DOLBY K.Alternative perspectives on impact:the potential of ALMs and altmetrics to inform funders about research impact[DB/OL].[2017-11-12].http://journals.plos.org/plosbiology/article?id=10.1371/journal.pbio.1002003&utm_source=web&utm_medium=pdf&utm_campaign=ppu15.

    [6] The metric tide:report of the independent review of the role of metrics in research assessment and management[EB/OL].[2017-11-06].http://www.hefce.ac.uk/pubs/rereports/Year/2015/metrictide/.

    [7] NISO Alternative assessment metrics(Altmetrics)initiative[EB/OL].[2017-11-06].http://www.niso.org/topics/tl/altmetrics_initiative/.

    [8] Outputs of the NISO Alternative assessment metrics project[EB/OL].[2017-11-09].http://www.niso.org/apps/group_public/download.php/17090/NISO%20RP-25-2016%20Outputs%20of%20the%20NISO%20Alternative%20Assessment%20Project.pdf.

    [9] 劉曉娟,趙卓婧,宋婉姿.Altmetrics在學(xué)術(shù)評(píng)價(jià)中的可用性研究綜述[J].數(shù)字圖書(shū)館論壇,2017(8):38-45.

    [10] 李燕波.Altmetrics對(duì)學(xué)術(shù)生態(tài)系統(tǒng)的影響研究[J].圖書(shū)館工作與研究,2015(12):19-22.

    [11] 雷淑義,呂先競(jìng).我國(guó)人文社會(huì)科學(xué)學(xué)術(shù)圖書(shū)Altmetrics評(píng)價(jià):挑戰(zhàn)及應(yīng)用[J].圖書(shū)情報(bào)工作,2017,61(11):133-139.

    [12] 雷淑義,呂先競(jìng).Altmetrics視角下的學(xué)術(shù)圖書(shū)影響力評(píng)價(jià)研究[J].西南民族大學(xué)學(xué)報(bào)(人文社科版),2017,38(6):225-231.

    [13] 姚莉,陳祖琴.《國(guó)家哲學(xué)社會(huì)科學(xué)成果文庫(kù)》影響力評(píng)價(jià)體系研究[J].西南民族大學(xué)學(xué)報(bào)(人文社科版),2016(6):232-236.

    [14] 何峻,蔡蓉華.中文圖書(shū)評(píng)價(jià)體系研究[J].大學(xué)圖書(shū)館學(xué)報(bào),2016,34(3):51-58.

    [15] 李勇,邵鐘鈺,趙星.Altmetrics背景下的期刊多維度測(cè)評(píng)指標(biāo)研究[J].情報(bào)學(xué)報(bào),2017,36(2):190-196.

    [16] 趙蓉英,郭鳳嬌,譚潔.基于Altmetrics的學(xué)術(shù)論文影響力評(píng)價(jià)研究——以漢語(yǔ)言文學(xué)學(xué)科為例[J].中國(guó)圖書(shū)館學(xué)報(bào),2016,42(1):96-108.

    [17] 趙蓉英,魏明坤,汪少震.基于Altmetrics的開(kāi)源軟件學(xué)術(shù)影響力評(píng)價(jià)研究[J].中國(guó)圖書(shū)館學(xué)報(bào),2017,43(2):80-95.

    [18] 余厚強(qiáng),HEMMINGER B M,肖婷婷,等.新浪微博替代計(jì)量指標(biāo)特征分析[J].中國(guó)圖書(shū)館學(xué)報(bào),2016,42(4):20-36.

    [19] 趙潔潔,詹華清,介鳳.高校機(jī)構(gòu)知識(shí)庫(kù)學(xué)術(shù)評(píng)價(jià)功能研究[J].圖書(shū)館雜志,2017(9):20-25.

    [20] 劉玉仙,武夷山.關(guān)于引文本質(zhì)的思考[J].科學(xué)學(xué)研究,2015,33(12):1779-1786,1882.

    [21] 曹進(jìn)軍.學(xué)術(shù)計(jì)量本質(zhì)的異化與科研績(jī)效的溢價(jià)現(xiàn)象研究[J].情報(bào)資料工作,2017(3):18-25.

    [22] MENDELEY.Winners of the first binary battle Apps for science contest[EB/OL].[2017-11-12].http://blog.mendeley.com/design-research-tools/winners-of-the-first-binary-battleapps-for-science-contest/.

    [23] 顧立平.論文級(jí)別計(jì)量研究:應(yīng)用案例分析[J].現(xiàn)代圖書(shū)情報(bào)技術(shù),2013(11):1-7.

    [24] How is the Altmetric score calculated?[EB/OL].[2017-11-12].http://support.altmetric.com/knowledgebase/articles/83337-how-is-the-altmetric-score-calculated.

    [25] PLUM Analytics.New product Plum X gives researchers an edge.[EB/OL].[2017-11-13].http://www.plumanalytics.com/pr/plum-analytics-new-product-plumx-gives-researchers-an-edge.html.

    [26] 劉恩濤,李國(guó)俊,邱小花,等.Altmetrics工具比較研究[J].圖書(shū)館雜志,2015(8):85-92.

    [27] 劉春麗.Altmetrics:從理論假說(shuō)、術(shù)語(yǔ)提出到內(nèi)涵的重新界定[J].圖書(shū)情報(bào)工作,2015(6):82-89.

    猜你喜歡
    成果計(jì)量學(xué)術(shù)
    《化學(xué)分析計(jì)量》2020年第6期目次
    如何理解“Curator”:一個(gè)由翻譯引發(fā)的學(xué)術(shù)思考
    工大成果
    對(duì)學(xué)術(shù)造假重拳出擊
    商周刊(2019年2期)2019-02-20 01:14:22
    關(guān)注日常 計(jì)量幸福
    特別健康(2018年4期)2018-07-03 00:38:26
    計(jì)量自動(dòng)化在線損異常中的應(yīng)用
    “走出去”成果斐然
    “健康照明”成果聚焦
    “三醫(yī)聯(lián)動(dòng)”擴(kuò)大醫(yī)改成果
    基于因子分析的人力資本計(jì)量研究
    国产欧美日韩精品亚洲av| 成人国产综合亚洲| 很黄的视频免费| 国产真实乱freesex| 中出人妻视频一区二区| 亚洲中文日韩欧美视频| 亚洲欧美精品综合一区二区三区| 精品人妻1区二区| 99久久精品热视频| 国产精品久久视频播放| 成人三级做爰电影| 国产精品野战在线观看| 亚洲电影在线观看av| 日韩 欧美 亚洲 中文字幕| АⅤ资源中文在线天堂| 桃红色精品国产亚洲av| 九色国产91popny在线| 成人高潮视频无遮挡免费网站| 成人国产一区最新在线观看| videosex国产| 久久香蕉激情| 黄色毛片三级朝国网站| 日本免费一区二区三区高清不卡| 床上黄色一级片| 老鸭窝网址在线观看| 亚洲一区高清亚洲精品| 国产亚洲精品一区二区www| 嫩草影视91久久| 亚洲熟妇中文字幕五十中出| 午夜精品在线福利| 亚洲中文日韩欧美视频| 亚洲精品一区av在线观看| 国产午夜精品久久久久久| 男人的好看免费观看在线视频 | 久热爱精品视频在线9| 亚洲成人中文字幕在线播放| 一夜夜www| 欧美黄色淫秽网站| 亚洲欧洲精品一区二区精品久久久| 女人被狂操c到高潮| 制服丝袜大香蕉在线| av有码第一页| 亚洲成人国产一区在线观看| 国产男靠女视频免费网站| avwww免费| 精品乱码久久久久久99久播| 国产一区二区三区在线臀色熟女| 麻豆av在线久日| 日韩大尺度精品在线看网址| 欧美高清成人免费视频www| 亚洲精品在线美女| 亚洲美女黄片视频| 欧美午夜高清在线| 日韩精品免费视频一区二区三区| 国产一区二区在线观看日韩 | 免费av毛片视频| 99精品欧美一区二区三区四区| 69av精品久久久久久| 狂野欧美激情性xxxx| 亚洲一区二区三区不卡视频| 欧美在线黄色| 国产精品 国内视频| 国产成人啪精品午夜网站| 国产精品一区二区精品视频观看| 黄色女人牲交| 精品欧美国产一区二区三| 国产aⅴ精品一区二区三区波| 亚洲熟女毛片儿| 1024香蕉在线观看| 国产成人aa在线观看| 日日摸夜夜添夜夜添小说| 成人av一区二区三区在线看| 亚洲av电影在线进入| 国产亚洲欧美98| 91九色精品人成在线观看| 日本五十路高清| 极品教师在线免费播放| 亚洲男人的天堂狠狠| 亚洲av五月六月丁香网| 色av中文字幕| 久久国产精品影院| 变态另类丝袜制服| bbb黄色大片| 99久久99久久久精品蜜桃| 国产精品影院久久| 69av精品久久久久久| 亚洲欧美精品综合久久99| 国产区一区二久久| 久久精品国产清高在天天线| 欧美乱色亚洲激情| 亚洲人成网站在线播放欧美日韩| 小说图片视频综合网站| 国内精品一区二区在线观看| 色哟哟哟哟哟哟| 99久久精品热视频| 一区福利在线观看| 免费电影在线观看免费观看| 黄频高清免费视频| 国产精品 国内视频| 成人亚洲精品av一区二区| 欧美大码av| 波多野结衣巨乳人妻| 一本综合久久免费| 在线十欧美十亚洲十日本专区| av欧美777| 国产精品久久视频播放| 日日爽夜夜爽网站| 天天躁狠狠躁夜夜躁狠狠躁| 母亲3免费完整高清在线观看| www.熟女人妻精品国产| 少妇粗大呻吟视频| 国产麻豆成人av免费视频| 婷婷亚洲欧美| 99久久精品热视频| 亚洲狠狠婷婷综合久久图片| 琪琪午夜伦伦电影理论片6080| 欧美日本视频| 黄色成人免费大全| 人人妻,人人澡人人爽秒播| 亚洲精品国产精品久久久不卡| 99riav亚洲国产免费| 国产区一区二久久| 亚洲国产中文字幕在线视频| 日韩欧美在线二视频| 精品久久久久久久久久免费视频| 757午夜福利合集在线观看| 国产三级中文精品| 久久精品国产亚洲av香蕉五月| 中文字幕人妻丝袜一区二区| 在线观看免费午夜福利视频| 亚洲最大成人中文| 搡老岳熟女国产| 90打野战视频偷拍视频| 五月玫瑰六月丁香| 一级黄色大片毛片| 亚洲av成人不卡在线观看播放网| 一级a爱片免费观看的视频| 色综合站精品国产| 青草久久国产| 日韩欧美国产在线观看| av福利片在线观看| av中文乱码字幕在线| 19禁男女啪啪无遮挡网站| www.www免费av| 在线播放国产精品三级| 又黄又粗又硬又大视频| 亚洲真实伦在线观看| 亚洲人成77777在线视频| 久久天躁狠狠躁夜夜2o2o| 18禁裸乳无遮挡免费网站照片| 三级毛片av免费| 亚洲欧美日韩东京热| 国产av一区二区精品久久| 青草久久国产| 欧美精品啪啪一区二区三区| 一二三四社区在线视频社区8| x7x7x7水蜜桃| 久热爱精品视频在线9| 97人妻精品一区二区三区麻豆| 色在线成人网| 午夜日韩欧美国产| 久久久久国产精品人妻aⅴ院| 麻豆成人av在线观看| 两个人的视频大全免费| 婷婷六月久久综合丁香| 亚洲国产精品成人综合色| 欧美一级毛片孕妇| 亚洲国产日韩欧美精品在线观看 | 国产激情久久老熟女| 亚洲国产高清在线一区二区三| 视频区欧美日本亚洲| 国产视频内射| 色哟哟哟哟哟哟| 久久人妻福利社区极品人妻图片| 久久热在线av| 久久久久亚洲av毛片大全| 日本a在线网址| 男女那种视频在线观看| 国产成人系列免费观看| 久9热在线精品视频| 欧美日韩国产亚洲二区| 免费av毛片视频| 狂野欧美白嫩少妇大欣赏| 欧美性长视频在线观看| 国产高清视频在线观看网站| 熟女少妇亚洲综合色aaa.| 国产午夜福利久久久久久| 叶爱在线成人免费视频播放| 脱女人内裤的视频| 亚洲精品久久成人aⅴ小说| 欧美人与性动交α欧美精品济南到| 一本大道久久a久久精品| 一进一出好大好爽视频| 久久久久久亚洲精品国产蜜桃av| 亚洲精品在线美女| 69av精品久久久久久| 精品国产乱子伦一区二区三区| av天堂在线播放| 国产精品久久久久久人妻精品电影| 久久人妻av系列| 久久久久久亚洲精品国产蜜桃av| 两个人的视频大全免费| 欧美在线一区亚洲| 久久久久免费精品人妻一区二区| 欧美黑人欧美精品刺激| 久久草成人影院| 日本黄色视频三级网站网址| 最近视频中文字幕2019在线8| 首页视频小说图片口味搜索| 日韩欧美 国产精品| 日本免费a在线| 最新美女视频免费是黄的| 波多野结衣高清无吗| 夜夜爽天天搞| 好看av亚洲va欧美ⅴa在| 国产精品免费一区二区三区在线| 欧美成人免费av一区二区三区| 成人av一区二区三区在线看| 久久久久九九精品影院| 成年版毛片免费区| 制服丝袜大香蕉在线| 亚洲人成网站高清观看| 国产精品久久久av美女十八| 日本一区二区免费在线视频| 日本成人三级电影网站| 亚洲欧美一区二区三区黑人| 亚洲 欧美一区二区三区| 美女午夜性视频免费| 久9热在线精品视频| 在线十欧美十亚洲十日本专区| 99在线人妻在线中文字幕| 熟女少妇亚洲综合色aaa.| 久热爱精品视频在线9| 午夜福利免费观看在线| 精品久久蜜臀av无| 精品电影一区二区在线| 日本一二三区视频观看| 手机成人av网站| av有码第一页| 怎么达到女性高潮| av欧美777| 久久这里只有精品19| 麻豆成人av在线观看| 日韩欧美免费精品| 亚洲在线自拍视频| 91麻豆精品激情在线观看国产| 亚洲一区高清亚洲精品| 亚洲全国av大片| 精品久久久久久久末码| 国产精品一区二区三区四区免费观看 | 99热这里只有精品一区 | 国产不卡一卡二| 精品欧美国产一区二区三| 亚洲av五月六月丁香网| 成在线人永久免费视频| 精品高清国产在线一区| 国产欧美日韩精品亚洲av| 欧美极品一区二区三区四区| 亚洲乱码一区二区免费版| 高清毛片免费观看视频网站| 黄色成人免费大全| 最近最新中文字幕大全免费视频| 黑人操中国人逼视频| 免费在线观看完整版高清| 国产单亲对白刺激| 在线观看免费视频日本深夜| 久久人妻福利社区极品人妻图片| 免费在线观看日本一区| 美女黄网站色视频| 欧美国产日韩亚洲一区| 国内揄拍国产精品人妻在线| 可以免费在线观看a视频的电影网站| 久久精品91蜜桃| 久久精品国产亚洲av高清一级| 一区二区三区国产精品乱码| 老汉色av国产亚洲站长工具| 久久人妻av系列| 午夜福利欧美成人| 性欧美人与动物交配| 亚洲专区中文字幕在线| 好男人在线观看高清免费视频| 婷婷亚洲欧美| 大型av网站在线播放| 99久久99久久久精品蜜桃| www.999成人在线观看| 法律面前人人平等表现在哪些方面| 两个人的视频大全免费| 真人一进一出gif抽搐免费| 国产精品98久久久久久宅男小说| 免费看美女性在线毛片视频| 久久久久免费精品人妻一区二区| 国产三级黄色录像| 啦啦啦观看免费观看视频高清| 久久精品aⅴ一区二区三区四区| 成年免费大片在线观看| 午夜福利在线在线| 国产欧美日韩一区二区精品| 亚洲一区二区三区色噜噜| 免费搜索国产男女视频| 少妇熟女aⅴ在线视频| 国产精品九九99| 国产又黄又爽又无遮挡在线| 在线永久观看黄色视频| 欧洲精品卡2卡3卡4卡5卡区| 久久亚洲精品不卡| 精品久久蜜臀av无| av国产免费在线观看| 两人在一起打扑克的视频| 18禁观看日本| 别揉我奶头~嗯~啊~动态视频| 日本成人三级电影网站| 亚洲国产欧美一区二区综合| 成人国产综合亚洲| 亚洲av日韩精品久久久久久密| 人妻久久中文字幕网| 亚洲av五月六月丁香网| 日本 av在线| www.www免费av| 91大片在线观看| 成人av一区二区三区在线看| 久久人妻福利社区极品人妻图片| 日韩欧美在线二视频| 久久久久久免费高清国产稀缺| 91成年电影在线观看| 黄色a级毛片大全视频| 91麻豆精品激情在线观看国产| 欧美中文综合在线视频| 男人舔女人下体高潮全视频| 成人三级做爰电影| 日韩精品免费视频一区二区三区| 法律面前人人平等表现在哪些方面| 午夜福利18| 99久久国产精品久久久| 久久久久久九九精品二区国产 | 三级国产精品欧美在线观看 | 中文字幕久久专区| 九色成人免费人妻av| 观看免费一级毛片| 深夜精品福利| 高清在线国产一区| 国产精品,欧美在线| 伦理电影免费视频| 18禁国产床啪视频网站| 91大片在线观看| 亚洲激情在线av| 黄色丝袜av网址大全| 草草在线视频免费看| 特大巨黑吊av在线直播| 亚洲片人在线观看| 蜜桃久久精品国产亚洲av| 欧美av亚洲av综合av国产av| 少妇的丰满在线观看| 色在线成人网| 婷婷丁香在线五月| 亚洲精品久久成人aⅴ小说| 一卡2卡三卡四卡精品乱码亚洲| 在线视频色国产色| 午夜福利成人在线免费观看| 一a级毛片在线观看| 成熟少妇高潮喷水视频| 在线观看一区二区三区| 国产激情久久老熟女| 国产精品香港三级国产av潘金莲| 成熟少妇高潮喷水视频| 久久婷婷人人爽人人干人人爱| 成熟少妇高潮喷水视频| 黄色女人牲交| 亚洲人成网站高清观看| 床上黄色一级片| 国产激情欧美一区二区| 亚洲中文av在线| 高潮久久久久久久久久久不卡| 免费电影在线观看免费观看| 精品国产乱子伦一区二区三区| 中文字幕人妻丝袜一区二区| 中文字幕久久专区| 亚洲av日韩精品久久久久久密| 99精品在免费线老司机午夜| 国产精品日韩av在线免费观看| 欧美最黄视频在线播放免费| 淫秽高清视频在线观看| 人妻丰满熟妇av一区二区三区| 亚洲欧美日韩无卡精品| 国产av不卡久久| 久久精品91蜜桃| 国产精品av视频在线免费观看| 国模一区二区三区四区视频 | 非洲黑人性xxxx精品又粗又长| 国内精品久久久久精免费| 999久久久国产精品视频| 久久久久国内视频| 国产伦在线观看视频一区| 99在线人妻在线中文字幕| 熟女少妇亚洲综合色aaa.| 嫩草影视91久久| 久久性视频一级片| 欧美 亚洲 国产 日韩一| 日韩欧美免费精品| 成年版毛片免费区| 亚洲五月婷婷丁香| 日韩免费av在线播放| 99热6这里只有精品| 午夜福利在线在线| 婷婷丁香在线五月| 亚洲激情在线av| 亚洲在线自拍视频| 视频区欧美日本亚洲| 亚洲国产日韩欧美精品在线观看 | 亚洲av日韩精品久久久久久密| 亚洲av成人一区二区三| 欧美日韩乱码在线| 国产精品1区2区在线观看.| 精品久久久久久久末码| 身体一侧抽搐| x7x7x7水蜜桃| 中文字幕人成人乱码亚洲影| 天堂影院成人在线观看| 欧美黑人欧美精品刺激| 国产成人精品久久二区二区免费| 丝袜美腿诱惑在线| 又黄又爽又免费观看的视频| 久久久久九九精品影院| 亚洲全国av大片| 两人在一起打扑克的视频| 巨乳人妻的诱惑在线观看| 国产精品永久免费网站| 亚洲精品色激情综合| 免费在线观看日本一区| 亚洲九九香蕉| 国产乱人伦免费视频| 俺也久久电影网| 99久久久亚洲精品蜜臀av| 国产成人aa在线观看| 免费看a级黄色片| 色综合欧美亚洲国产小说| 亚洲精品久久成人aⅴ小说| 国产又黄又爽又无遮挡在线| 国产三级黄色录像| 不卡av一区二区三区| cao死你这个sao货| 999久久久精品免费观看国产| 一级作爱视频免费观看| 亚洲成人精品中文字幕电影| www.熟女人妻精品国产| 变态另类丝袜制服| 熟妇人妻久久中文字幕3abv| 日本 欧美在线| 国产99白浆流出| 美女 人体艺术 gogo| 国产精品久久久av美女十八| 一本精品99久久精品77| 黄色视频不卡| 欧美日韩国产亚洲二区| 久久天躁狠狠躁夜夜2o2o| 国产一区二区三区视频了| 久久这里只有精品19| 五月伊人婷婷丁香| 日韩欧美国产在线观看| 久久久久久久午夜电影| 欧美日韩瑟瑟在线播放| 一边摸一边抽搐一进一小说| 我的老师免费观看完整版| 国产精品美女特级片免费视频播放器 | 一级a爱片免费观看的视频| 99热这里只有精品一区 | 我要搜黄色片| 精品不卡国产一区二区三区| 99久久国产精品久久久| 搡老岳熟女国产| 日韩欧美国产在线观看| 午夜福利免费观看在线| 欧美日韩精品网址| 麻豆成人午夜福利视频| 国产在线观看jvid| 黑人欧美特级aaaaaa片| 欧美性猛交╳xxx乱大交人| 免费无遮挡裸体视频| 亚洲国产欧美一区二区综合| 老司机在亚洲福利影院| 精品国产乱码久久久久久男人| 日日干狠狠操夜夜爽| 久久久久精品国产欧美久久久| 国产成人系列免费观看| x7x7x7水蜜桃| 日韩精品青青久久久久久| 亚洲人成伊人成综合网2020| 男女做爰动态图高潮gif福利片| 一级毛片女人18水好多| 欧美日韩亚洲综合一区二区三区_| 国产精品免费视频内射| 别揉我奶头~嗯~啊~动态视频| 天天躁狠狠躁夜夜躁狠狠躁| 精品第一国产精品| 中文字幕熟女人妻在线| 国语自产精品视频在线第100页| 成人手机av| 亚洲精品一区av在线观看| 熟女少妇亚洲综合色aaa.| 波多野结衣高清作品| 国产伦在线观看视频一区| 18美女黄网站色大片免费观看| 免费在线观看影片大全网站| 中出人妻视频一区二区| 亚洲国产欧洲综合997久久,| 又黄又粗又硬又大视频| 久久九九热精品免费| 午夜福利在线在线| 国产高清videossex| 19禁男女啪啪无遮挡网站| 在线十欧美十亚洲十日本专区| 给我免费播放毛片高清在线观看| 女人高潮潮喷娇喘18禁视频| 国产精品永久免费网站| a级毛片a级免费在线| av免费在线观看网站| 免费在线观看黄色视频的| 男人舔女人下体高潮全视频| 国产精品电影一区二区三区| 日韩av在线大香蕉| 999久久久国产精品视频| 一卡2卡三卡四卡精品乱码亚洲| 免费高清视频大片| www日本在线高清视频| 91国产中文字幕| 日本五十路高清| 日韩欧美国产在线观看| 俄罗斯特黄特色一大片| 久久精品91蜜桃| 欧美3d第一页| 亚洲,欧美精品.| 91在线观看av| 男插女下体视频免费在线播放| 人人妻人人澡欧美一区二区| 九色国产91popny在线| 香蕉丝袜av| 久久香蕉精品热| 国产亚洲欧美98| 日韩欧美三级三区| 老司机深夜福利视频在线观看| 成年人黄色毛片网站| 午夜影院日韩av| 精品久久久久久久久久免费视频| 日本a在线网址| 每晚都被弄得嗷嗷叫到高潮| 中出人妻视频一区二区| 变态另类丝袜制服| 国产乱人伦免费视频| 国产成人一区二区三区免费视频网站| 少妇被粗大的猛进出69影院| 黑人操中国人逼视频| 午夜免费激情av| 精品久久久久久,| 欧美久久黑人一区二区| 亚洲av第一区精品v没综合| 每晚都被弄得嗷嗷叫到高潮| www.精华液| 亚洲人成77777在线视频| 五月伊人婷婷丁香| 国产精品一区二区免费欧美| 狠狠狠狠99中文字幕| ponron亚洲| 日本在线视频免费播放| 九九热线精品视视频播放| 精品不卡国产一区二区三区| 亚洲一区高清亚洲精品| 一二三四社区在线视频社区8| 岛国在线观看网站| 女警被强在线播放| 国产欧美日韩一区二区三| 一本综合久久免费| 99在线视频只有这里精品首页| avwww免费| 国产亚洲精品综合一区在线观看 | 777久久人妻少妇嫩草av网站| 久久久精品国产亚洲av高清涩受| 国产蜜桃级精品一区二区三区| 国产熟女xx| 午夜福利视频1000在线观看| 三级国产精品欧美在线观看 | av免费在线观看网站| 免费在线观看亚洲国产| 岛国视频午夜一区免费看| 757午夜福利合集在线观看| bbb黄色大片| 国产免费av片在线观看野外av| 最近最新中文字幕大全电影3| 日本精品一区二区三区蜜桃| 十八禁网站免费在线| 91老司机精品| 日韩欧美三级三区| 亚洲欧美日韩高清在线视频| 久久精品影院6| 国产精品电影一区二区三区| 国产精品精品国产色婷婷| 国产精品亚洲美女久久久| cao死你这个sao货| 亚洲 欧美 日韩 在线 免费| 国产精品美女特级片免费视频播放器 | 精品日产1卡2卡| 欧美午夜高清在线| 国产精品野战在线观看| 日本免费a在线| 又紧又爽又黄一区二区| 在线观看日韩欧美| 国产男靠女视频免费网站| 精品欧美一区二区三区在线| 久久精品国产清高在天天线| 国产激情偷乱视频一区二区| 亚洲欧美一区二区三区黑人| 亚洲成人免费电影在线观看| 非洲黑人性xxxx精品又粗又长| 欧美在线黄色| 精品一区二区三区av网在线观看| 嫩草影院精品99| 亚洲一区中文字幕在线|