• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    大數(shù)據(jù)時代計量學(xué)在學(xué)科評價中的應(yīng)用研究

    2016-10-21 09:26:46何文靜邱均平
    圖書與情報 2016年4期
    關(guān)鍵詞:計量學(xué)評價指標(biāo)大數(shù)據(jù)

    何文靜 邱均平

    摘 要:計量學(xué)在學(xué)科評價中的應(yīng)用歷史已久,大數(shù)據(jù)的涌現(xiàn)和計算機(jī)網(wǎng)絡(luò)技術(shù)的發(fā)展,給計量學(xué)研究模式帶來了機(jī)遇和挑戰(zhàn)。文章從研究方法、研究工具、計量對象、評價結(jié)果四個角度,探究了大數(shù)據(jù)時代對計量學(xué)應(yīng)用于學(xué)科評價的影響。認(rèn)為自動化計量平臺將成為計量學(xué)應(yīng)用于學(xué)科發(fā)展網(wǎng)絡(luò)的下一步趨勢,學(xué)科評價中的計量學(xué)將主要從理論方法研究和在學(xué)科發(fā)展脈絡(luò)深層次粒度研究兩個方面展開。

    關(guān)鍵詞:學(xué)科評價;計量學(xué);大數(shù)據(jù);評價指標(biāo)

    中圖分類號: G25 文獻(xiàn)標(biāo)識碼: A DOI:10.11968/tsyqb.1003-6938.2016080

    Metrological Application in Discipline Evaluation in the Background of Big Data

    Abstract Metrology has been effectively applied in discipline evaluation for a long time, and now it confronts with challenges due to big data and rapid development of computer network. The paper analyzed the influences of big data on metrology-based discipline evaluation from the perspective of research methods, research tools, metric objects and evaluation results. The paper also claimed that the automated metric platform were supposed to come to stage soon. Then the metric researches of discipline evaluation will mainly focus on two sides, one is about theory and method of metrology, and the other lies in in-depth analysis of discipline development.

    Key words discipline evaluation; metrology; big data; evaluation index

    學(xué)科評價,即利用相關(guān)學(xué)術(shù)信息對學(xué)科發(fā)展的階段、現(xiàn)狀、水平、前景和學(xué)科結(jié)構(gòu)及學(xué)科之間的相關(guān)度等進(jìn)行評價。大數(shù)據(jù)時代下,越來越多的事物都以數(shù)據(jù)的形式存在,造成數(shù)據(jù)的海量增長。數(shù)據(jù)量龐大和計算機(jī)技術(shù)的發(fā)展,給基于計量的學(xué)科評價研究帶來了機(jī)遇和挑戰(zhàn),計量對象、計量方法得到了極大地擴(kuò)充。因此,分析大數(shù)據(jù)對計量學(xué)應(yīng)用于學(xué)科評價帶來的影響,明晰基于計量的學(xué)科評價研究今后的研究方向,將具有重要的理論意義。

    1 計量學(xué)在學(xué)科評價中的應(yīng)用

    計量學(xué)是揭示學(xué)科發(fā)展脈絡(luò)的經(jīng)典方法,主要用于揭示學(xué)科發(fā)展脈絡(luò)的引用網(wǎng)絡(luò)、研究主題、研究熱點(diǎn)和學(xué)科前沿等內(nèi)容特征以及期刊、研究機(jī)構(gòu)、年度分布、作者分布等結(jié)構(gòu)特征。隨著時代的發(fā)展,計量學(xué)在學(xué)科發(fā)展脈絡(luò)中的應(yīng)用有著不同的體現(xiàn)。

    20世紀(jì)40、50年代,隨著科技的發(fā)展,圖書、期刊、論文等學(xué)術(shù)文獻(xiàn)膨脹式發(fā)展,為了揭示文獻(xiàn)特征,逐漸形成文獻(xiàn)計量學(xué)。此時的文獻(xiàn)計量需要研究者手工收集整理龐大的文獻(xiàn)信息,費(fèi)時費(fèi)力。這一時期,解決計量分析的數(shù)據(jù)量龐大問題是主要需求。同時,早期文獻(xiàn)計量研究者克服困難,在對物理、化學(xué)等學(xué)科科技文獻(xiàn)的計量分析實(shí)踐中逐漸發(fā)現(xiàn)了布拉德福定律、齊普夫定律等定律,奠定了計量學(xué)的理論基礎(chǔ)、方法基礎(chǔ)。

    20世紀(jì)70年代,索引數(shù)據(jù)庫的建立形成了引文數(shù)據(jù)庫,解決了計量分析的數(shù)據(jù)源問題,使研究者無需考慮計量數(shù)據(jù)源龐大的問題,極大地提高了計量的效率。眾多學(xué)者也紛紛以索引數(shù)據(jù)庫作為計量分析的數(shù)據(jù)源,采用計量方法揭示學(xué)科研究熱點(diǎn)、研究趨勢等研究脈絡(luò)。隨著信息技術(shù)的發(fā)展和各種計量軟件的出現(xiàn),研究者無需考慮計算方法復(fù)雜的問題,可以方便快捷地發(fā)現(xiàn)某學(xué)科的研究脈絡(luò)并通過可視化手段直觀呈現(xiàn)。計量學(xué)在學(xué)科發(fā)展脈絡(luò)服務(wù)的效率得到進(jìn)一步提升。

    可以說,索引數(shù)據(jù)庫、計量軟件的出現(xiàn),解決了計量數(shù)據(jù)源、計量方法的難題,方便了研究者使用計量學(xué)方法研究學(xué)科發(fā)展脈絡(luò),提升了科研效率。然而在大數(shù)據(jù)時代,索引數(shù)據(jù)庫和各種索引軟件無法完全解決數(shù)據(jù)量龐大、數(shù)據(jù)類型多樣、數(shù)據(jù)處理速度慢這些大數(shù)據(jù)帶來的問題。這是因為,索引數(shù)據(jù)庫是對結(jié)構(gòu)化數(shù)據(jù)的存儲,對于更多的半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)無法直接處理,而大數(shù)據(jù)科學(xué)評價數(shù)據(jù)來源不僅局限于傳統(tǒng)的結(jié)構(gòu)化數(shù)據(jù),數(shù)據(jù)的多樣性和復(fù)雜性給信息計量帶來了新的挑戰(zhàn),索引數(shù)據(jù)庫只能作為大數(shù)據(jù)時代計量分析數(shù)據(jù)來源的一種;計量軟件雖然進(jìn)一步解決了計量方法的問題,但是處理的數(shù)據(jù)類型是固定的,不能對多類型數(shù)據(jù)進(jìn)行整合處理;索引數(shù)據(jù)庫和計量軟件都無法實(shí)現(xiàn)數(shù)據(jù)自動化快速處理,都需要研究者的人工參與。

    為了解決上述問題,就需要進(jìn)一步推動計量學(xué)在學(xué)科發(fā)展脈絡(luò)中的應(yīng)用深度。對多種數(shù)據(jù)源、數(shù)據(jù)類型進(jìn)行多維聚合,將多種計量方法集成為數(shù)據(jù)模式,實(shí)現(xiàn)計量自動化,學(xué)科發(fā)展脈絡(luò)實(shí)時可視化展示的計量平臺,則是計量學(xué)應(yīng)用于學(xué)科發(fā)展網(wǎng)絡(luò)的下一步趨勢。

    2 大數(shù)據(jù)時代對計量學(xué)應(yīng)用于學(xué)科評價的影響

    信息網(wǎng)站及其學(xué)術(shù)論壇、專家博客等Web新型學(xué)術(shù)資源的不斷涌現(xiàn),計算機(jī)技術(shù)、計量工具的不斷發(fā)展,對傳統(tǒng)的基于計量學(xué)的學(xué)科評價研究過程中的研究對象、研究方法、研究結(jié)果都產(chǎn)生了較大影響。

    2.1 研究方法多元化

    傳統(tǒng)計量方法主要依據(jù)科學(xué)文獻(xiàn)產(chǎn)出的數(shù)量和質(zhì)量,從文獻(xiàn)的內(nèi)容特征和結(jié)構(gòu)特征兩個方面對學(xué)科的發(fā)展現(xiàn)狀和水平做出客觀評價,主要運(yùn)用的研究方法是內(nèi)容分析法。隨著文獻(xiàn)數(shù)據(jù)庫的引入,基于引用行為、閱讀行為和下載行為的計量研究越來越多,引文分析方法和社會網(wǎng)絡(luò)分析方法被廣泛使用。社交媒體的發(fā)展給計量學(xué)研究方法也帶來了許多革新,隨著越來越多的科研人員在各種學(xué)術(shù)社區(qū)和社交媒體中發(fā)布、推薦、轉(zhuǎn)載學(xué)術(shù)信息,Altmetrics也應(yīng)運(yùn)而生,它作為一種Web2.0環(huán)境下新的計量方法,更多關(guān)注Web2.0環(huán)境下用戶行為的計量,可以計算用戶對于一篇文獻(xiàn)的瀏覽、下載、注釋、評分、推薦、引用等使用場景[1],不再局限于依靠引文數(shù)據(jù)和信息系統(tǒng)上有限的用戶日志數(shù)據(jù)。

    早期文獻(xiàn)計量學(xué)在學(xué)科評價中的應(yīng)用方法,主要集中在文獻(xiàn)增長、老化規(guī)律及文獻(xiàn)作者分布規(guī)律方面。傳統(tǒng)學(xué)科評價方法包括定量方法、定性方法,其中定量方法中的文獻(xiàn)計量法使用最廣泛,主要是引文分析法、內(nèi)容分析法、聚類分析法等。單一的計量方法對于跨學(xué)科評價并不合適,對自然科學(xué)和社會科學(xué)評價要區(qū)別對待,對受關(guān)注程度小的新領(lǐng)域的識別能力較差。因此,研究方法的整合顯得尤為重要,整合具體體現(xiàn)在定量方法與定性方法的結(jié)合,將不同分析方法組合起來揭示學(xué)科發(fā)展。越來越多的學(xué)者考慮將多種分析方法加以綜合利用。如共引聚類分析與詞頻分析的結(jié)合、共詞分析與引文網(wǎng)絡(luò)的結(jié)合以及同被引分析和文獻(xiàn)耦合分析的結(jié)合等[2]。隨著計算機(jī)技術(shù)的發(fā)展,科研人員在進(jìn)行計量研究時不再局限于簡單的數(shù)理統(tǒng)計分析,可以借助某些工具自動抓取網(wǎng)絡(luò)中可獲取的學(xué)術(shù)信息,并使用機(jī)器學(xué)習(xí)算法實(shí)現(xiàn)去人工化計量。此外,可視化方法的發(fā)展彌補(bǔ)了傳統(tǒng)只羅列數(shù)字和文字的簡單統(tǒng)計圖表的缺陷,合作網(wǎng)絡(luò)圖、關(guān)鍵詞圖、雷達(dá)圖等可視化展示方法能更清晰直觀地揭示學(xué)科結(jié)構(gòu)和發(fā)展脈絡(luò)[3],使得評價指標(biāo)生動易讀。

    2.2 計量工具平臺化

    計量工具的發(fā)展主要經(jīng)歷了手工書目統(tǒng)計分析處理階段、系統(tǒng)支持的各種索引數(shù)據(jù)庫階段、各種計算機(jī)輔助數(shù)據(jù)處理分析工具階段、網(wǎng)絡(luò)化專用數(shù)據(jù)處理軟件階段、可視化和人工智能階段。目前,學(xué)科評價研究中使用的計量工具主要有SCI、Scopus、CSSCI等引文數(shù)據(jù)庫。由于不同數(shù)據(jù)庫的資源內(nèi)容以及內(nèi)容的揭示程度存在一定的差異,導(dǎo)致傳統(tǒng)使用單一計量工具對揭示學(xué)科結(jié)構(gòu)與發(fā)展存在的局限性,增加了科研人員處理和規(guī)范來源數(shù)據(jù)的難度。同時,不同計量工具對于輸入數(shù)據(jù)的格式不盡相同,對學(xué)科評價的側(cè)重點(diǎn)也存在較大差異,不同計量工具之間存在較強(qiáng)的互補(bǔ)性和結(jié)果上的對比性,多種工具的綜合和集成可以使得結(jié)果更全面準(zhǔn)確。計量工具的平臺化是大數(shù)據(jù)環(huán)境下學(xué)科評價的需要,平臺的典型特征是整合,不僅貢獻(xiàn)資源和服務(wù),還形成網(wǎng)絡(luò),充分利用外部資源和服務(wù),對自有資源、外部資源進(jìn)行深度整合。計量平臺是對跨領(lǐng)域跨系統(tǒng)資源的深度整合,需要一種滿足不同來源、不同種類資源總體需求的抽象的框架化的數(shù)據(jù)模型,同時還要求數(shù)據(jù)在成熟的網(wǎng)絡(luò)框架基礎(chǔ)上與更多的外部數(shù)據(jù)相關(guān)聯(lián)。

    現(xiàn)有階段的學(xué)科評價分析多是分項分析,或者是對分項的簡單總結(jié),缺乏對學(xué)科發(fā)展的全局性總結(jié)分析。大量數(shù)據(jù)的易獲取性和評價方法的不斷優(yōu)化使得學(xué)科發(fā)展總結(jié)性描述與關(guān)鍵性突出同等重要,每個學(xué)科主題下的亮點(diǎn)分析、背景介紹及關(guān)鍵結(jié)論都可通過計量平臺進(jìn)行自動化展現(xiàn)??蒲腥藛T不再受限于計量工具和計量方法,平臺可以自動整合不同資源,系統(tǒng)化輸出宏觀及微觀層面的學(xué)科評價結(jié)果,實(shí)現(xiàn)對學(xué)科發(fā)展、結(jié)構(gòu)及學(xué)科之間關(guān)系的精準(zhǔn)化、自動化揭示。

    2.3 計量對象全面化

    數(shù)據(jù)庫中科學(xué)論文作為計量的主要數(shù)據(jù)來源,為其提供了數(shù)量龐大且內(nèi)容豐富的研究對象。然而在大數(shù)據(jù)時代背景下,數(shù)據(jù)生成速度加快,采集實(shí)現(xiàn)自動化,運(yùn)輸和存儲成本降低,數(shù)據(jù)量膨脹,這些特點(diǎn)都對基于科學(xué)論文的傳統(tǒng)計量提出了挑戰(zhàn)。大數(shù)據(jù)和云存儲的發(fā)展為學(xué)科評價研究提供了良好的機(jī)遇,計量對象不再局限于科學(xué)論文,學(xué)術(shù)社區(qū)中的學(xué)術(shù)信息以及網(wǎng)絡(luò)中普遍存在的學(xué)術(shù)信息都可以作為計量研究對象。社會媒體工具打破了傳統(tǒng)以專著和期刊作為主要科學(xué)交流媒介的思想,越來越多的學(xué)者傾向于將自己的學(xué)術(shù)觀點(diǎn)發(fā)布在博客、社區(qū)論壇等非正式媒介上,將開放存取平臺和社交網(wǎng)絡(luò)媒體中的交流行為考慮在內(nèi),使得計量學(xué)的研究對象得到了極大地擴(kuò)充。

    科學(xué)計量的研究對象囊括了一切與科學(xué)發(fā)展相關(guān)的數(shù)據(jù),隨著開放存取平臺的不斷完善,科研數(shù)據(jù)共享發(fā)展迅速,學(xué)者不再受制于文獻(xiàn)和信息載體,更多關(guān)注數(shù)據(jù)、學(xué)術(shù)記錄和研究者個人。與僅僅反映文獻(xiàn)參考文獻(xiàn)的引用記錄相比,數(shù)據(jù)層面的計量更全面、系統(tǒng)和科學(xué)。將科研生命周期中每個環(huán)節(jié)的科研數(shù)據(jù)視為計量對象,為超越文獻(xiàn)計量提供了全新的視角和觀念,擴(kuò)充了評價的計量對象。從科研人員的角度而言,科研內(nèi)容需要按學(xué)科、主題組織,只有一個研究內(nèi)容是不行的,按主題組織的開放出版物是符合這些要求的學(xué)術(shù)內(nèi)容集合,可以包括科研觀點(diǎn)、學(xué)術(shù)博客、學(xué)術(shù)論文、科研數(shù)據(jù)等內(nèi)容。隨著數(shù)據(jù)庫的不斷優(yōu)化和發(fā)展,傳統(tǒng)統(tǒng)計資料和調(diào)查報告均實(shí)現(xiàn)了電子化,科學(xué)計量的對象不僅僅局限于文獻(xiàn)數(shù)據(jù)庫中的科學(xué)論文,還可以擴(kuò)展使用其他數(shù)據(jù)來源,如國家統(tǒng)計資料、相關(guān)機(jī)構(gòu)網(wǎng)站上的數(shù)據(jù)、調(diào)查報告等。此外,隨著圖書專著的電子化,圖書作為傳統(tǒng)全面的學(xué)術(shù)信息資源,在一定程度上補(bǔ)充了學(xué)科評價體系。

    2.4 評價結(jié)果系統(tǒng)化

    大數(shù)據(jù)時代的計量是對所有學(xué)術(shù)信息的全面計量,隨著開放存取平臺的發(fā)展、數(shù)據(jù)獲取成本的降低,學(xué)科評價中的計量對象囊括了數(shù)據(jù)庫層面的學(xué)術(shù)文獻(xiàn)信息、學(xué)術(shù)社區(qū)中的學(xué)術(shù)信息以及網(wǎng)絡(luò)中普遍存在的學(xué)術(shù)信息,計量的結(jié)果也更加全面化、系統(tǒng)化。選擇不同的計量對象對于評價的結(jié)果往往會產(chǎn)生顛覆性的影響,在保證評價的合理性和客觀性的基礎(chǔ)上,盡可能選擇可以全面地揭示學(xué)科發(fā)展和結(jié)構(gòu)的對象,將極大地提高評價結(jié)果的科學(xué)性和可靠性。同時,對所有評價指標(biāo)的系統(tǒng)綜合計量也使得評價結(jié)果更加可靠。以閱讀數(shù)、標(biāo)簽數(shù)為代表的新型Altmetrics指標(biāo)與傳統(tǒng)計量指標(biāo)在評價上具有非對稱性,能從不同維度對文獻(xiàn)進(jìn)行揭示,結(jié)合當(dāng)前的學(xué)術(shù)信息環(huán)境,引入恰當(dāng)?shù)脑u價指標(biāo),可以補(bǔ)充完善傳統(tǒng)的以被引數(shù)量為代表的計量評價指標(biāo)體系。評價對象的全面擴(kuò)充和評價指標(biāo)的優(yōu)化完善很大程度上提高了基于計量學(xué)的學(xué)科評價結(jié)果的科學(xué)性和系統(tǒng)性。

    3 大數(shù)據(jù)時代計量學(xué)應(yīng)用于學(xué)科評價的發(fā)展方向

    3.1 計量學(xué)基礎(chǔ)理論與方法研究

    傳統(tǒng)的學(xué)科評價研究是理論、技術(shù)方法、應(yīng)用共同發(fā)展的。計量平臺化后,應(yīng)用都通過平臺自動化展現(xiàn),研究方向則主要側(cè)重于對理論和方法的創(chuàng)新、完善和補(bǔ)充計量平臺底層的數(shù)據(jù)模式。以往學(xué)科評價研究中的計量結(jié)果是研究者自己計量統(tǒng)計的,現(xiàn)在通過平臺自動實(shí)現(xiàn)了,所以研究者只需查看結(jié)果即可。既然結(jié)果呈現(xiàn)的難題已經(jīng)解決,值得科研人員關(guān)注的是理論方法的深入研究。

    3.1.1 基于多維數(shù)據(jù)聚合的學(xué)科評價

    在目前的學(xué)科評價研究中,多數(shù)學(xué)者基于大型分析性數(shù)據(jù)庫對學(xué)科領(lǐng)域的科學(xué)論文進(jìn)行計量分析,運(yùn)用論文數(shù)、引文數(shù)、篇均被引數(shù)、高被引論文數(shù)等指標(biāo)對科研產(chǎn)出進(jìn)行評價。但現(xiàn)有的文獻(xiàn)計量研究中,其數(shù)據(jù)來源仍不足以全面客觀地對學(xué)科發(fā)展進(jìn)行評價,之所以不全面,是因為學(xué)科的發(fā)展水平和前景不僅體現(xiàn)在科學(xué)論文上,還體現(xiàn)在專利成果、研究報告和專著中。而且,隨著開放存取的不斷發(fā)展,網(wǎng)絡(luò)發(fā)表也成為了科研人員公開其科研成果的重要途徑,使得傳統(tǒng)的基于文獻(xiàn)數(shù)據(jù)庫中科研論文的計量方法缺乏全面性、系統(tǒng)性和科學(xué)性。

    社交網(wǎng)絡(luò)環(huán)境下,學(xué)者們更愿意使用學(xué)術(shù)社交在線社區(qū)與開放存取平臺進(jìn)行學(xué)術(shù)交流和評論。基于出版物的引用已經(jīng)不是學(xué)術(shù)成果傳播的主要渠道,科學(xué)思想并不總是通過科學(xué)論文的出版進(jìn)行傳播[4]。越來越多的學(xué)者選擇在學(xué)術(shù)網(wǎng)絡(luò)社區(qū)中進(jìn)行評論和推薦。通過分析這些社會化數(shù)據(jù),了解這些非結(jié)構(gòu)化內(nèi)容中所表達(dá)的學(xué)科發(fā)展趨勢和科研人員的學(xué)術(shù)觀點(diǎn),使得學(xué)科評價研究能夠迅速準(zhǔn)確地捕捉學(xué)科領(lǐng)域研究前沿和熱點(diǎn),從而使科研人員能夠更為主動地把握研究走向。這種通過正式文獻(xiàn)引用被程序忽視的科學(xué)知識,在基于科學(xué)交流的過程評價中需要被足夠重視。此外,國外已經(jīng)展開了數(shù)據(jù)級別計量所面對的數(shù)據(jù)出版、引用、共享等問題的相關(guān)研究,實(shí)現(xiàn)科研數(shù)據(jù)知識庫注冊系統(tǒng)以及數(shù)據(jù)元數(shù)據(jù)的整合,同時參考文獻(xiàn)服務(wù)就數(shù)字資源唯一標(biāo)識符(DOI)開展合作。此外,科研人員還可以整合檢索系統(tǒng)中的用戶行為數(shù)據(jù),作為一種讀者的匿名開放數(shù)據(jù),支持?jǐn)?shù)據(jù)級別計量的發(fā)展,數(shù)據(jù)級別的計量可為學(xué)科評價提供更為細(xì)致的分析和服務(wù)[5]。通過引入基于數(shù)據(jù)級別的計量,激勵科研人員共享科研數(shù)據(jù),并為學(xué)科評價提供更為全面的計量對象。

    由于期刊發(fā)表具有滯后性,增加學(xué)術(shù)開放平臺、學(xué)術(shù)社區(qū)、社交學(xué)術(shù)信息是否更能反映最新的研究進(jìn)展,都決定著評價結(jié)果的質(zhì)量。如何從海量分散的信息源中獲取準(zhǔn)確有效的揭示學(xué)科發(fā)展動態(tài)的信息,如何組織和處理大量的非結(jié)構(gòu)化數(shù)據(jù),這些問題都需要科研人員解決。實(shí)現(xiàn)基于期刊文獻(xiàn)庫、學(xué)術(shù)博客、學(xué)術(shù)社區(qū)中的學(xué)術(shù)信息和網(wǎng)絡(luò)中普遍存在的學(xué)術(shù)信息的多維數(shù)據(jù)聚合,是未來計量學(xué)的主要研究方向。

    3.1.2 計量評價指標(biāo)的拓展革新

    傳統(tǒng)的學(xué)術(shù)文獻(xiàn)的計量評價指標(biāo)主要包括被引頻次和期刊影響因子等,但僅僅通過被引頻次等信息無法全面評估學(xué)術(shù)文獻(xiàn)的影響力[6]。JCR(Journal Citation Report)從期刊層面對學(xué)科的發(fā)展現(xiàn)狀、水平和前景等做出評價,共有六個評價指標(biāo):總引文數(shù)、論文數(shù)、學(xué)科期刊數(shù)、學(xué)科集合影響因子、學(xué)科集合被引半衰期和學(xué)科集合即時指標(biāo)。有學(xué)者基于社會科學(xué)和自然科學(xué)兩個不同分類對學(xué)科進(jìn)行評價,認(rèn)為傳統(tǒng)JCR的六個指標(biāo)在學(xué)科評價中具有局限性,利用JCR或SCI的引文數(shù)據(jù)進(jìn)行科研評價只適用于單一學(xué)科,并不適用于邊緣學(xué)科或交叉學(xué)科[7]。

    在新的學(xué)術(shù)交流模式下,傳統(tǒng)的計量評價指標(biāo)無法適應(yīng)大眾化參與的特點(diǎn),如隨著數(shù)字化的不斷發(fā)展,科研成果的發(fā)布不再局限于期刊、圖書等正式出版渠道,更多科研成果會發(fā)布在提供開放存取的數(shù)字交流平臺中,科研人員也積極在各種學(xué)術(shù)社區(qū)中進(jìn)行多樣化學(xué)術(shù)交流,如評論、推薦、標(biāo)注、下載、轉(zhuǎn)發(fā)等。因此,新環(huán)境下必須引入多元化的指標(biāo)來對文獻(xiàn)影響力進(jìn)行更全面、更廣泛的測度。

    Altmetrics是在社交網(wǎng)絡(luò)工具和開放存取廣泛應(yīng)用于科學(xué)交流活動和科學(xué)成果出版的背景下產(chǎn)生的[8]。它將開放存取平臺和學(xué)術(shù)社交網(wǎng)絡(luò)視為引文網(wǎng)絡(luò),引入了知名度、熱點(diǎn)和標(biāo)簽密度等評價指標(biāo)。它是基于社會資源多樣化組合的計量,能夠提供更廣泛、更豐富、更及時的學(xué)科評價結(jié)果。Finbar G等[9]檢驗了社會網(wǎng)絡(luò)服務(wù)的計量應(yīng)用結(jié)果,證實(shí)了它們在單篇論文實(shí)際影響力的評估能力。美國國家信息標(biāo)準(zhǔn)組織項目部Nettie Lagace[10]認(rèn)為,引文分析無法對新的、普遍的文獻(xiàn)所產(chǎn)生的影響進(jìn)行衡量,如Twitter、Facebook、博客等社交網(wǎng)絡(luò)工具所產(chǎn)生的文獻(xiàn)。而且,新的學(xué)術(shù)成果形式,如數(shù)據(jù)集、軟件工具、算法或分子結(jié)構(gòu)等,已經(jīng)很常見但是不容易,甚至無法通過傳統(tǒng)的引用指標(biāo)來衡量??紤]到將其他超越傳統(tǒng)期刊影響因子的新指標(biāo)納入評價體系,不再局限于使用期刊論文的引用數(shù)據(jù)來衡量科研成果的影響力。劉曉娟等[11]將以被引頻次為代表的傳統(tǒng)計量指標(biāo)與以閱讀數(shù)、標(biāo)簽數(shù)為代表的新型Altmetrics指標(biāo)互相結(jié)合,證實(shí)了以閱讀數(shù)和標(biāo)簽數(shù)為代表的選擇性計量指標(biāo)可以在一定程度上評估文獻(xiàn)的影響力,網(wǎng)絡(luò)影響力也應(yīng)當(dāng)作為重要評價指標(biāo),二者的綜合利用會成為學(xué)科評價的主流。隨著Altmetrics評價內(nèi)容的豐富,會出現(xiàn)按學(xué)科、主題組織的開放出版物,這樣就形成了對開放出版物的評價。

    評價內(nèi)容要更加全面,不僅考慮論文數(shù)、引文數(shù)、篇均被引數(shù)、高被引論文數(shù)等發(fā)文和合作主題的指標(biāo),同時需要將資金投入產(chǎn)出、人員建設(shè)情況、人員流動及其影響考慮進(jìn)來,細(xì)致分析科研人員、機(jī)構(gòu)的合作水平,使得評價指標(biāo)體系更加全面科學(xué)。選擇合適的計量指標(biāo), 思考和評價計量指標(biāo)在學(xué)科評價中的適用范圍和評價功能, 對于合理使用計量方法進(jìn)行學(xué)科評價顯得十分必要。隨著計量方法的改善和發(fā)展,學(xué)科評價會更加完善、合理和權(quán)威。其中,評價指標(biāo)從期刊粒度有核心期刊、論文粒度有被引次數(shù),是否可以加上閱讀量、下載量、收藏、轉(zhuǎn)發(fā)這樣的指標(biāo),指標(biāo)的權(quán)重如何設(shè)置,這些都是計量評價指標(biāo)需要研究的問題。

    3.2 計量學(xué)在學(xué)科發(fā)展脈絡(luò)深層次粒度方面的研究

    3.2.1 全文本計量

    從手工計量到索引數(shù)據(jù)庫再到全文本數(shù)據(jù)庫、從計算機(jī)技術(shù)到大數(shù)據(jù)技術(shù)的發(fā)展帶來了計量模式的巨大變化?,F(xiàn)階段學(xué)科發(fā)展脈絡(luò)的計量研究中,科研人員在確定數(shù)據(jù)源后,主要通過學(xué)科類目、關(guān)鍵詞和期刊三種途徑進(jìn)行檢索,對于全文本的利用較少。而全文數(shù)據(jù)庫為科研人員提供了豐富的內(nèi)容資源,可以直接閱讀文獻(xiàn)全文,為學(xué)科發(fā)展脈絡(luò)的研究提供了完備的文本數(shù)據(jù)。因此,基于全文本的計量是未來學(xué)科發(fā)展脈絡(luò)研究的趨勢。

    不同于以往的題錄或文摘等二次文獻(xiàn),科研人員可直接獲取全文數(shù)據(jù)庫中的文獻(xiàn)原文,原文系統(tǒng)全面地展示了著者的研究思路及研究成果,囊括了研究方法、目的、數(shù)據(jù)來源等研究所涉及的各個方面。因此,不論是在文獻(xiàn)揭示的深度還是廣度方面,原文都優(yōu)于文摘或關(guān)鍵詞。由于數(shù)量限制,文摘或關(guān)鍵詞只能選取有限的能夠反映文獻(xiàn)內(nèi)容的信息,不能全面地揭示文獻(xiàn)主題,在一定程度上削弱了基于關(guān)鍵詞的計量研究的全面性和準(zhǔn)確性?;谌牡臋z索可以提高檢全率,從而改善計量效果。此外,依據(jù)關(guān)鍵詞對文獻(xiàn)內(nèi)容的揭示程度,可利用全文本分析方法給關(guān)鍵詞分配權(quán)重,關(guān)鍵詞越能反映文獻(xiàn)主題內(nèi)容,其分配的權(quán)重就越高。通過關(guān)鍵詞區(qū)分化,可以更準(zhǔn)確直觀地展示文獻(xiàn)主題,從而提高計量精度。

    引文分析法常常用來解釋學(xué)科發(fā)展演化過程,傳統(tǒng)的計量研究中,引文網(wǎng)絡(luò)分析只是簡單利用各種數(shù)學(xué)模型和統(tǒng)計指標(biāo),對文獻(xiàn)之間的引用和被引用現(xiàn)象進(jìn)行統(tǒng)計分析,通過這些數(shù)據(jù)揭示文獻(xiàn)引用的規(guī)律和特征,以此達(dá)到對學(xué)科發(fā)展趨勢的分析,然而,隨著研究的深入,引文分析也暴露出了一些不足。如引文信息不全面、作者的引用目的不清晰等,單純依靠數(shù)量指標(biāo),將所有的引用關(guān)系做同等的對待,會造成一些問題。引用行為的復(fù)雜性決定了單純依靠引用和被引相關(guān)的統(tǒng)計指標(biāo)是無法準(zhǔn)確的進(jìn)行引文分析的。只有將引文內(nèi)容加入到引文分析中來,才能解決單純依靠被引頻次帶來的問題。全文本為引文內(nèi)容分析提供了可靠地支持,有學(xué)者就從引用功能[12]、引用重要性[13]、引用情感[14]等對引用內(nèi)容進(jìn)行分析。引文內(nèi)容分析可以彌補(bǔ)傳統(tǒng)計量研究中通過被引量來衡量文獻(xiàn)質(zhì)量的不足,能更為準(zhǔn)確全面地評價文獻(xiàn)的價值和作用,從而使得計量結(jié)果更加可靠。

    3.2.2 研究軟件計量

    隨著科學(xué)技術(shù)的飛速發(fā)展,學(xué)者在進(jìn)行科學(xué)研究時越來越依賴研究軟件或工具。學(xué)者在進(jìn)行科學(xué)研究時所使用的研究軟件或工具,在一定程度上也與相應(yīng)的科研發(fā)展現(xiàn)狀呈現(xiàn)正相關(guān)性,因此,研究軟件從側(cè)面反映了學(xué)科的發(fā)展脈絡(luò)及現(xiàn)狀。研究方法在各個學(xué)科領(lǐng)域的學(xué)術(shù)研究中都發(fā)揮著至關(guān)重要的作用,許多研究表明了研究方法在各學(xué)科領(lǐng)域的重要性[15-16],以及領(lǐng)域內(nèi)研究人員對研究方法的重視程度?,F(xiàn)階段的學(xué)科評價研究主要是研究人員基于文獻(xiàn)內(nèi)容的研究主題提取論文中的研究方法、研究軟件,實(shí)現(xiàn)研究軟件和方法級別的計量,從而識別某學(xué)科研究方法、研究軟件的發(fā)展脈絡(luò),以及規(guī)范軟件的引用。研究軟件和方法級別的計量使得研究人員對學(xué)科領(lǐng)域內(nèi)的研究方法的發(fā)展趨勢有更為清晰全面的了解,研究人員可以更好地選擇合適的研究方法或軟件來開展科學(xué)研究。研究軟件計量主要是通過全文分析提取所使用的研究軟件或研究方法,展示學(xué)科領(lǐng)域內(nèi)研究軟件或方法的發(fā)展脈絡(luò),并直觀展現(xiàn)其所適用的研究問題和研究環(huán)境,為研究人員的選擇和使用提供可靠地參考。

    參考文獻(xiàn):

    [1] 邱均平,余厚強(qiáng).替代計量學(xué)的提出過程與研究進(jìn)展[J].圖書情報工作,2013,57(19):5-12.

    [2] 蘇娜,張志強(qiáng).科學(xué)計量學(xué)中多重關(guān)系融合方法研究進(jìn)展及分析[J].情報科學(xué),2010,28(9):1309-1313.

    [3] 胡澤文,孫建軍,武夷山.國內(nèi)知識圖譜應(yīng)用研究綜述[J].圖書情報工作,2013,57(3):131-137.

    [4] Priem J,Costello K L.How and why scholars cite on Twitter[J].Proceedings of the American Society for Information Science and Technology,2010,47(1):1-4.

    [5] 顧立平.數(shù)據(jù)級別計量——概念辨析與實(shí)踐進(jìn)展[J].中國圖書館學(xué)報,2015(2):56-71.

    [6] MacRoberts M,MacRoberts R.Problems of citation analysis:A critical review[J].Journal of the American Society for Informat

    ion Science,1989,40(5):342-349.

    [7] 余以勝.JCR指標(biāo)的學(xué)科計量與評價研究——以JCR Social Sciences Edition為例[J].重慶大學(xué)學(xué)報(社會科學(xué)版),2008

    (1):76-80.

    [8] 邱均平,余厚強(qiáng).論推動替代計量學(xué)發(fā)展的若干基本問題[J].中國圖書館學(xué)報,2015(1):4-15.

    [9] Finbar G,Sharon D C.Altmetrics:rethinking the way we measure[J].Serials Review,2013,1(39):56-61.

    [10] National Information Standard Organization.NISO to develop standards and recommended practices for Altmetrics[EB/OL].[2016-03-23].http://www.niso.org/news/pr/view?item_key=72efc1097d4caf7b7b5bdf9c54a165818399ec86.

    [11] 劉曉娟,周建華,尤斌.基于Mendeley與WoS的選擇性計量指標(biāo)與傳統(tǒng)科學(xué)計量指標(biāo)相關(guān)性研究[J].圖書情報工作,2015,59(3):112-118.

    [12] Abu-Jbara A,Ezra J,Radev D.Purpose and Polarity of Citation:Towards NLP-based Bibliometrics.[J].Hlt-Naacl,2013(6):596-606.

    [13] Wan X,Liu F.Are all literature citations equally important?Automatic citation strength estimation and its applications[J].Journal of the Association for Information Science and Technology,2014,65(9):1929-1938.

    [14] Athar A.Sentiment analysis of citations using sentence structure-based features[C].Proceedings of the ACL 2011 student session.Association for Computational Linguistics,2011:81-87.

    [15] 張力,唐健輝,劉永濤,等.中外圖書情報學(xué)研究方法量化比較[J].中國圖書館學(xué)報,2012(2):21-27.

    [16] Ma L.Some philosophical considerations in using mixed methods in library and information science research[J].Journal of American Society for Information Science & Technology,2012,63(9):1859-1867.

    作者簡介:何文靜(1992-),女,武漢大學(xué)信息管理學(xué)院碩士研究生,研究方向:信息計量和科學(xué)評價;邱均平(1947-),男,武漢大學(xué)信息管理學(xué)院教授,博士生導(dǎo)師,研究方向:信息計量和科學(xué)評價。

    猜你喜歡
    計量學(xué)評價指標(biāo)大數(shù)據(jù)
    生物化學(xué)計量學(xué)原理在離散生物動力系統(tǒng)的應(yīng)用
    云南化工(2021年5期)2021-12-21 07:41:34
    針刺治療失眠癥的文獻(xiàn)計量學(xué)分析
    第三方物流企業(yè)績效評價研究綜述
    商(2016年33期)2016-11-24 23:50:25
    基于UML的高校思想政治教育工作評價系統(tǒng)的分析與研究
    公共文化服務(wù)體系評價指標(biāo)的國際經(jīng)驗與啟示
    中國市場(2016年38期)2016-11-15 00:01:08
    資源型企業(yè)財務(wù)競爭力評價研究
    中國市場(2016年33期)2016-10-18 13:33:29
    基于大數(shù)據(jù)背景下的智慧城市建設(shè)研究
    科技視界(2016年20期)2016-09-29 10:53:22
    基于科學(xué)計量學(xué)的公安院??蒲信c評價
    2004-2013年中醫(yī)藥治療性早熟的文獻(xiàn)計量學(xué)分析
    狠狠精品人妻久久久久久综合| 中文字幕人妻丝袜制服| av网站免费在线观看视频| 国产午夜精品一二区理论片| 青春草视频在线免费观看| 97精品久久久久久久久久精品| 性色avwww在线观看| 国产免费一区二区三区四区乱码| 国产片内射在线| 日韩大片免费观看网站| av免费观看日本| 久久女婷五月综合色啪小说| 午夜免费男女啪啪视频观看| 精品99又大又爽又粗少妇毛片| 天堂俺去俺来也www色官网| 亚洲精品国产av成人精品| xxxhd国产人妻xxx| 一级片'在线观看视频| 色婷婷av一区二区三区视频| 91aial.com中文字幕在线观看| 亚洲国产精品一区二区三区在线| av有码第一页| 欧美老熟妇乱子伦牲交| tube8黄色片| 久久精品国产鲁丝片午夜精品| 国产视频内射| 女性被躁到高潮视频| 91久久精品国产一区二区成人| 久久久久人妻精品一区果冻| 2018国产大陆天天弄谢| 免费播放大片免费观看视频在线观看| 欧美日韩成人在线一区二区| 人成视频在线观看免费观看| 美女脱内裤让男人舔精品视频| 亚洲av二区三区四区| 亚洲国产精品999| 熟妇人妻不卡中文字幕| 一级毛片电影观看| 免费高清在线观看视频在线观看| 麻豆成人av视频| 午夜免费观看性视频| 亚洲美女搞黄在线观看| 欧美日韩av久久| 99九九在线精品视频| 精品久久国产蜜桃| 精品久久久久久久久亚洲| 亚洲第一区二区三区不卡| 黄色欧美视频在线观看| 狠狠精品人妻久久久久久综合| 一本一本综合久久| 久久青草综合色| √禁漫天堂资源中文www| 日韩中文字幕视频在线看片| av免费观看日本| 亚洲天堂av无毛| 国产精品成人在线| 精品人妻熟女毛片av久久网站| 亚洲国产欧美日韩在线播放| 老司机影院成人| a级毛片黄视频| 日本猛色少妇xxxxx猛交久久| 日产精品乱码卡一卡2卡三| 国产男女超爽视频在线观看| 99久久精品一区二区三区| 午夜精品国产一区二区电影| 一区二区三区乱码不卡18| 夫妻午夜视频| 成人国产av品久久久| 成人午夜精彩视频在线观看| 狂野欧美激情性bbbbbb| 丰满少妇做爰视频| 黑人欧美特级aaaaaa片| 下体分泌物呈黄色| 91久久精品国产一区二区三区| 国产成人免费观看mmmm| 国产一区二区在线观看日韩| 亚洲激情五月婷婷啪啪| 在线看a的网站| 精品国产一区二区三区久久久樱花| 看十八女毛片水多多多| 五月开心婷婷网| 黑丝袜美女国产一区| 色94色欧美一区二区| 日韩成人伦理影院| 欧美老熟妇乱子伦牲交| 在线观看免费视频网站a站| 免费人成在线观看视频色| 久久精品国产亚洲av天美| 晚上一个人看的免费电影| 91精品国产九色| 91精品国产九色| 熟妇人妻不卡中文字幕| 在线亚洲精品国产二区图片欧美 | 欧美最新免费一区二区三区| 免费高清在线观看日韩| 久久久国产精品麻豆| 女人久久www免费人成看片| 性高湖久久久久久久久免费观看| 免费高清在线观看日韩| 国产成人精品久久久久久| 我的老师免费观看完整版| 国产精品国产三级专区第一集| av在线观看视频网站免费| 永久免费av网站大全| 大香蕉久久成人网| 欧美bdsm另类| 日韩不卡一区二区三区视频在线| 又大又黄又爽视频免费| 亚洲熟女精品中文字幕| 精品国产乱码久久久久久小说| 亚洲激情五月婷婷啪啪| 亚洲av中文av极速乱| 美女大奶头黄色视频| 这个男人来自地球电影免费观看 | 亚洲国产日韩一区二区| 尾随美女入室| 久久av网站| 内地一区二区视频在线| 日韩成人av中文字幕在线观看| 亚洲精品久久午夜乱码| 人人妻人人添人人爽欧美一区卜| 丰满迷人的少妇在线观看| 大话2 男鬼变身卡| 全区人妻精品视频| 全区人妻精品视频| 久久热精品热| 亚洲一区二区三区欧美精品| 亚洲精品,欧美精品| 久久久午夜欧美精品| 超色免费av| 免费观看a级毛片全部| 久久精品久久久久久噜噜老黄| 日韩不卡一区二区三区视频在线| 99久久中文字幕三级久久日本| 午夜久久久在线观看| xxxhd国产人妻xxx| 最后的刺客免费高清国语| 精品一区二区三区视频在线| 国产日韩欧美视频二区| 99热6这里只有精品| 免费看av在线观看网站| 免费黄网站久久成人精品| 亚洲欧美成人精品一区二区| 日本黄大片高清| av播播在线观看一区| 成人手机av| 久久精品久久久久久噜噜老黄| 最近最新中文字幕免费大全7| 国产男人的电影天堂91| 精品久久久久久久久av| 国产视频首页在线观看| 黑人欧美特级aaaaaa片| 美女内射精品一级片tv| 美女国产高潮福利片在线看| a级毛色黄片| 狠狠精品人妻久久久久久综合| av在线app专区| 国产午夜精品一二区理论片| 91精品三级在线观看| 日韩熟女老妇一区二区性免费视频| 99视频精品全部免费 在线| 久久99一区二区三区| 免费播放大片免费观看视频在线观看| 亚洲国产精品专区欧美| 亚洲欧洲日产国产| 国产高清有码在线观看视频| 狂野欧美激情性bbbbbb| 秋霞伦理黄片| 天天操日日干夜夜撸| xxx大片免费视频| 人妻少妇偷人精品九色| 亚洲精品久久成人aⅴ小说 | 一级,二级,三级黄色视频| 国产一区二区在线观看av| 一区二区三区四区激情视频| 熟女人妻精品中文字幕| 老女人水多毛片| 伦理电影大哥的女人| 在线观看免费日韩欧美大片 | 99热6这里只有精品| 国产视频内射| 精品久久久噜噜| 亚洲经典国产精华液单| 肉色欧美久久久久久久蜜桃| 欧美日韩视频精品一区| 国产精品免费大片| 中文字幕av电影在线播放| 亚洲精品456在线播放app| 伦精品一区二区三区| 色婷婷av一区二区三区视频| 成人二区视频| 精品人妻偷拍中文字幕| 久久午夜福利片| 日韩一区二区视频免费看| 69精品国产乱码久久久| 99热6这里只有精品| .国产精品久久| 丰满乱子伦码专区| 免费黄网站久久成人精品| 交换朋友夫妻互换小说| 男男h啪啪无遮挡| 精品人妻在线不人妻| 日韩精品有码人妻一区| 韩国高清视频一区二区三区| 人成视频在线观看免费观看| 精品久久久精品久久久| 十八禁网站网址无遮挡| 男女边吃奶边做爰视频| 亚洲不卡免费看| 久久久久久久久久久久大奶| 亚洲欧美清纯卡通| 精品酒店卫生间| 精品久久国产蜜桃| av线在线观看网站| 日本色播在线视频| 在线免费观看不下载黄p国产| 波野结衣二区三区在线| 精品少妇久久久久久888优播| 日本欧美视频一区| 亚洲av成人精品一二三区| 少妇 在线观看| .国产精品久久| av天堂久久9| 新久久久久国产一级毛片| 只有这里有精品99| 水蜜桃什么品种好| 日韩熟女老妇一区二区性免费视频| 男女边吃奶边做爰视频| 亚洲精品一区蜜桃| 五月伊人婷婷丁香| 久久99热6这里只有精品| 国产av精品麻豆| 丰满乱子伦码专区| 男女无遮挡免费网站观看| 3wmmmm亚洲av在线观看| 亚洲人与动物交配视频| 满18在线观看网站| 亚洲综合精品二区| 久久精品人人爽人人爽视色| 日本av手机在线免费观看| 免费少妇av软件| 精品国产乱码久久久久久小说| 熟女人妻精品中文字幕| 亚洲av日韩在线播放| av在线播放精品| 80岁老熟妇乱子伦牲交| 亚洲综合色网址| 纯流量卡能插随身wifi吗| 欧美精品人与动牲交sv欧美| 久久国内精品自在自线图片| 黑丝袜美女国产一区| 青青草视频在线视频观看| 亚洲三级黄色毛片| 成人国产麻豆网| 韩国av在线不卡| 成年美女黄网站色视频大全免费 | 国产精品久久久久久久电影| 嫩草影院入口| 大香蕉久久网| 国产黄片视频在线免费观看| 尾随美女入室| 欧美另类一区| 国产色爽女视频免费观看| 欧美人与性动交α欧美精品济南到 | 卡戴珊不雅视频在线播放| 午夜免费观看性视频| 精品久久久久久电影网| 午夜精品国产一区二区电影| 国产午夜精品久久久久久一区二区三区| av不卡在线播放| 成人免费观看视频高清| 国精品久久久久久国模美| 高清av免费在线| 中文字幕免费在线视频6| 亚洲精品自拍成人| 欧美精品亚洲一区二区| 永久网站在线| 国语对白做爰xxxⅹ性视频网站| 欧美+日韩+精品| 国国产精品蜜臀av免费| 一级毛片aaaaaa免费看小| 99热网站在线观看| 国产爽快片一区二区三区| 亚洲精品日韩在线中文字幕| 久久久久精品性色| 两个人的视频大全免费| 老司机影院成人| 欧美最新免费一区二区三区| 精品少妇内射三级| 国产白丝娇喘喷水9色精品| 亚洲情色 制服丝袜| 久久精品熟女亚洲av麻豆精品| 色婷婷av一区二区三区视频| 蜜桃久久精品国产亚洲av| 午夜av观看不卡| 亚洲五月色婷婷综合| 欧美xxⅹ黑人| av不卡在线播放| 国产男女超爽视频在线观看| 91精品国产国语对白视频| 欧美激情 高清一区二区三区| 高清av免费在线| 久久久国产欧美日韩av| 成人国语在线视频| 一个人免费看片子| av免费在线看不卡| 在线观看人妻少妇| 美女国产视频在线观看| 国产精品久久久久成人av| 乱人伦中国视频| 一区在线观看完整版| 麻豆精品久久久久久蜜桃| 伊人亚洲综合成人网| 免费日韩欧美在线观看| 日本-黄色视频高清免费观看| 91精品伊人久久大香线蕉| 国产成人一区二区在线| 天堂8中文在线网| 久久久精品免费免费高清| 777米奇影视久久| av黄色大香蕉| 欧美日韩视频精品一区| 午夜免费鲁丝| 久久久久久久大尺度免费视频| 精品国产露脸久久av麻豆| 免费av中文字幕在线| 青春草视频在线免费观看| 免费不卡的大黄色大毛片视频在线观看| 18禁观看日本| 久久精品国产自在天天线| 超碰97精品在线观看| 汤姆久久久久久久影院中文字幕| 秋霞在线观看毛片| 欧美亚洲 丝袜 人妻 在线| 欧美xxxx性猛交bbbb| 满18在线观看网站| 欧美日韩av久久| 三级国产精品欧美在线观看| 亚洲国产色片| 久久免费观看电影| 亚洲精品成人av观看孕妇| 欧美精品人与动牲交sv欧美| 狂野欧美白嫩少妇大欣赏| 男的添女的下面高潮视频| 日本欧美国产在线视频| 国产免费一级a男人的天堂| 亚洲四区av| 一级毛片黄色毛片免费观看视频| 丝袜美足系列| 99视频精品全部免费 在线| 亚洲婷婷狠狠爱综合网| 欧美最新免费一区二区三区| 精品久久久精品久久久| 天堂中文最新版在线下载| 午夜老司机福利剧场| 色94色欧美一区二区| 91精品伊人久久大香线蕉| 五月开心婷婷网| 久久 成人 亚洲| 少妇高潮的动态图| 18禁在线无遮挡免费观看视频| 岛国毛片在线播放| 少妇猛男粗大的猛烈进出视频| 国产成人精品福利久久| 丝袜美足系列| 一级毛片黄色毛片免费观看视频| 在现免费观看毛片| 人成视频在线观看免费观看| 午夜激情福利司机影院| 成人手机av| 亚洲av综合色区一区| av播播在线观看一区| 在线观看www视频免费| 成人手机av| 国产精品久久久久久精品古装| 欧美日韩视频精品一区| 久久久久久久国产电影| 久久久久久伊人网av| 乱码一卡2卡4卡精品| 一级毛片 在线播放| 精品亚洲成国产av| 久久久国产一区二区| 美女中出高潮动态图| 日本猛色少妇xxxxx猛交久久| 亚洲精品久久成人aⅴ小说 | tube8黄色片| 亚洲精品色激情综合| 一个人免费看片子| 九色成人免费人妻av| 日韩欧美一区视频在线观看| 有码 亚洲区| 国产av一区二区精品久久| 激情五月婷婷亚洲| 久久久久久久久久成人| 久久 成人 亚洲| 亚洲成色77777| 亚洲国产最新在线播放| 亚洲第一区二区三区不卡| 五月天丁香电影| 亚洲欧美精品自产自拍| 最近2019中文字幕mv第一页| 日本与韩国留学比较| 免费看av在线观看网站| 亚洲欧美成人综合另类久久久| 伊人久久国产一区二区| 又粗又硬又长又爽又黄的视频| 男女无遮挡免费网站观看| 国国产精品蜜臀av免费| 亚洲久久久国产精品| 亚洲色图综合在线观看| 亚洲av二区三区四区| 人妻人人澡人人爽人人| 91久久精品电影网| 99热这里只有是精品在线观看| 欧美日韩视频精品一区| 亚洲精品一区蜜桃| 又粗又硬又长又爽又黄的视频| 一区二区日韩欧美中文字幕 | 王馨瑶露胸无遮挡在线观看| 日本黄色日本黄色录像| 中国国产av一级| 久久av网站| 9色porny在线观看| 午夜视频国产福利| 久久人人爽人人爽人人片va| kizo精华| 啦啦啦中文免费视频观看日本| 国产精品一区二区三区四区免费观看| 亚洲精品国产av成人精品| 国产免费一级a男人的天堂| 少妇人妻精品综合一区二区| 欧美日韩在线观看h| 亚洲人成网站在线播| 国产成人免费观看mmmm| 一区二区日韩欧美中文字幕 | 人妻人人澡人人爽人人| 久久久久久久久久久久大奶| 啦啦啦啦在线视频资源| 亚洲国产av影院在线观看| 国产一区有黄有色的免费视频| 一级片'在线观看视频| 国产成人午夜福利电影在线观看| 一区二区三区四区激情视频| 全区人妻精品视频| 少妇人妻精品综合一区二区| 国产一区二区在线观看日韩| 少妇精品久久久久久久| 黑人猛操日本美女一级片| 久久久久久久久久成人| 成人国产av品久久久| 九九久久精品国产亚洲av麻豆| tube8黄色片| 亚洲欧洲日产国产| 日本黄色日本黄色录像| 一本久久精品| 亚洲av国产av综合av卡| 特大巨黑吊av在线直播| 爱豆传媒免费全集在线观看| 考比视频在线观看| 高清不卡的av网站| 国产av码专区亚洲av| 亚洲国产精品成人久久小说| 日本av免费视频播放| 99久久人妻综合| 大码成人一级视频| 尾随美女入室| 精品卡一卡二卡四卡免费| 久久99一区二区三区| 国产视频内射| 日本vs欧美在线观看视频| 黄色欧美视频在线观看| 国产综合精华液| 夫妻性生交免费视频一级片| 熟女人妻精品中文字幕| 国产一区二区在线观看日韩| 国产成人精品一,二区| 丰满乱子伦码专区| 性高湖久久久久久久久免费观看| 免费观看的影片在线观看| 婷婷色麻豆天堂久久| 中文字幕免费在线视频6| 国产一区亚洲一区在线观看| 熟女av电影| 欧美变态另类bdsm刘玥| av在线播放精品| 欧美日韩一区二区视频在线观看视频在线| 99热6这里只有精品| 99热国产这里只有精品6| videos熟女内射| 免费av中文字幕在线| 看免费成人av毛片| 五月天丁香电影| 街头女战士在线观看网站| 18禁观看日本| 免费久久久久久久精品成人欧美视频 | 国产亚洲av片在线观看秒播厂| 国产欧美另类精品又又久久亚洲欧美| 中国美白少妇内射xxxbb| 少妇猛男粗大的猛烈进出视频| 满18在线观看网站| 91精品国产九色| 97超视频在线观看视频| 国产毛片在线视频| 王馨瑶露胸无遮挡在线观看| 亚洲精品自拍成人| 乱人伦中国视频| 精品久久国产蜜桃| 伦理电影大哥的女人| 男人爽女人下面视频在线观看| 午夜av观看不卡| 少妇精品久久久久久久| 人人澡人人妻人| 久久国产精品大桥未久av| 日韩 亚洲 欧美在线| 观看av在线不卡| 国产免费又黄又爽又色| 久久青草综合色| 寂寞人妻少妇视频99o| 在线观看www视频免费| 我的女老师完整版在线观看| 国产精品不卡视频一区二区| 一级毛片我不卡| 视频在线观看一区二区三区| 国产在线一区二区三区精| 国国产精品蜜臀av免费| 人人妻人人澡人人爽人人夜夜| 成年人午夜在线观看视频| 免费观看a级毛片全部| 欧美一级a爱片免费观看看| 人人妻人人添人人爽欧美一区卜| 国产成人精品久久久久久| 婷婷成人精品国产| 爱豆传媒免费全集在线观看| 欧美老熟妇乱子伦牲交| 最后的刺客免费高清国语| 亚洲精品久久久久久婷婷小说| 老熟女久久久| 国国产精品蜜臀av免费| 人人妻人人澡人人爽人人夜夜| 亚洲人与动物交配视频| 国产一区二区在线观看av| 另类亚洲欧美激情| 亚洲婷婷狠狠爱综合网| 免费高清在线观看视频在线观看| 精品亚洲成国产av| 色视频在线一区二区三区| 日本黄大片高清| 国产精品蜜桃在线观看| 精品久久国产蜜桃| 波野结衣二区三区在线| 国产乱来视频区| 国产成人免费观看mmmm| 欧美+日韩+精品| 国产精品嫩草影院av在线观看| 亚洲熟女精品中文字幕| 中文字幕久久专区| 卡戴珊不雅视频在线播放| 天天躁夜夜躁狠狠久久av| 成年av动漫网址| 不卡视频在线观看欧美| 国产成人午夜福利电影在线观看| 久久影院123| 亚洲国产精品999| 91在线精品国自产拍蜜月| 亚洲av二区三区四区| 最近手机中文字幕大全| 免费高清在线观看日韩| 国产免费一区二区三区四区乱码| 亚洲成人av在线免费| 日韩亚洲欧美综合| 亚洲av国产av综合av卡| 纯流量卡能插随身wifi吗| 亚洲精品乱久久久久久| 国产午夜精品一二区理论片| 亚洲色图综合在线观看| 一级毛片黄色毛片免费观看视频| 成年人午夜在线观看视频| 久久国产精品大桥未久av| 精品国产国语对白av| 大陆偷拍与自拍| 能在线免费看毛片的网站| 熟女电影av网| 一本久久精品| 国产成人精品久久久久久| 亚洲精品日本国产第一区| 91久久精品电影网| 51国产日韩欧美| 汤姆久久久久久久影院中文字幕| 国产精品国产三级国产专区5o| 亚洲精品日韩在线中文字幕| 99热6这里只有精品| 久久99精品国语久久久| 免费看av在线观看网站| 五月伊人婷婷丁香| 黑人巨大精品欧美一区二区蜜桃 | 大香蕉久久网| 国模一区二区三区四区视频| 伦理电影大哥的女人| 美女福利国产在线| 亚洲人成77777在线视频| 一本久久精品| 人成视频在线观看免费观看| 少妇人妻精品综合一区二区| 久久99蜜桃精品久久| 中文字幕亚洲精品专区| 亚洲国产av新网站| tube8黄色片| 多毛熟女@视频| 国产成人一区二区在线| 国产成人免费无遮挡视频| 国产av精品麻豆| 亚洲国产色片| 只有这里有精品99| 国产欧美日韩一区二区三区在线 | 婷婷成人精品国产|