• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    大數(shù)據(jù)時(shí)代學(xué)術(shù)評(píng)價(jià)的數(shù)據(jù)化難點(diǎn)及其應(yīng)對

    2020-11-06 07:27楊紅艷
    現(xiàn)代情報(bào) 2020年11期
    關(guān)鍵詞:數(shù)據(jù)化難點(diǎn)大數(shù)據(jù)

    基金項(xiàng)目:國家社會(huì)科學(xué)基金項(xiàng)目“大數(shù)據(jù)時(shí)代學(xué)術(shù)評(píng)價(jià)理論方法改進(jìn)研究”(項(xiàng)目編號(hào):17BTQ015)。

    作者簡介:楊紅艷(1981-),女,編審,博士,研究方向:學(xué)術(shù)評(píng)價(jià)、信息資源管理。

    摘要:[目的/意義]大數(shù)據(jù)時(shí)代的學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化,是指對有關(guān)評(píng)價(jià)的學(xué)術(shù)活動(dòng)進(jìn)行全面記錄、存儲(chǔ)、統(tǒng)計(jì)并形成有價(jià)值數(shù)據(jù)的過程,這是支撐對學(xué)術(shù)生態(tài)中各類對象的質(zhì)量或水平做出判斷的必要環(huán)節(jié)。數(shù)據(jù)化是實(shí)現(xiàn)“基于大數(shù)據(jù)的學(xué)術(shù)評(píng)價(jià)”的前提。[研究設(shè)計(jì)/方法]本文對相關(guān)文獻(xiàn)、概念和實(shí)踐進(jìn)行歸納分析,探討了大數(shù)據(jù)時(shí)代學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的難點(diǎn)及其應(yīng)對策略。[結(jié)論/發(fā)現(xiàn)]數(shù)據(jù)化的難點(diǎn)包括數(shù)據(jù)缺失或“隱形”、數(shù)據(jù)難獲取、數(shù)據(jù)質(zhì)量低、數(shù)據(jù)化成本高、數(shù)據(jù)化意識(shí)不足。應(yīng)對策略包括3個(gè)方面,即搭建學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的基本框架、變革學(xué)術(shù)評(píng)價(jià)的體系和流程、制定學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的關(guān)鍵策略。[創(chuàng)新/價(jià)值]數(shù)據(jù)化是當(dāng)前學(xué)術(shù)評(píng)價(jià)急需卻缺乏系統(tǒng)研究的一個(gè)領(lǐng)域,也是本文選題和觀點(diǎn)的主要價(jià)值所在。

    關(guān)鍵詞:學(xué)術(shù)評(píng)價(jià);數(shù)據(jù)化;大數(shù)據(jù);難點(diǎn);策略

    DOI:10.3969/j.issn.1008-0821.2020.11.014

    〔中圖分類號(hào)〕G30〔文獻(xiàn)標(biāo)識(shí)碼〕A〔文章編號(hào)〕1008-0821(2020)11-0136-08

    The Difficulties and Solutions of Research Evaluation

    Datamizing in the Era of Big Data

    Yang Hongyan

    (Center for Research Evaluation of Humanities and Social Sciences,Renmin University of China,

    Beijing 100872,China)

    Abstract:[Purpose/Significance]In the era of big data,DATAMIZING of research evaluation refers to the process of comprehensively recording,storing,statistics and forming valuable data for academic activities related to evaluation,which is necessary to support the judgment of the quality or level of various entities in academic ecology.DATAMIZING is the premise of RESEARCH EVALUATION BASED ON BIG DATA.[Design/Methodology]In this paper,by summarizing and analyzing the relevant literature,concepts and practices,the difficulties and countermeasures of research evaluation DATAMIZING in the era of big data were discussed.[Findings/Conclusion]The difficulties of DATAMIZING process include lack of data or invisible data,difficulty in data acquisition,low quality of data,high cost of DATAMIZING and insufficient awareness of DATAMIZING.Accordingly,coping strategies include three aspects:building the fundamental framework of research evaluation data,changing the system and process of research evaluation,and formulating the key strategies for research evaluation DATAMIZING.[Originality/Value]DATAMIZING is an urgent but lack of systematic research topic in the field of research evaluation,which is also the main value of this papers topic and views.

    Key words:research evaluation;data;big data;difficulties;strategies

    大數(shù)據(jù)時(shí)代的到來已成為不爭的事實(shí)。數(shù)據(jù)是新的石油,它正成為一種生產(chǎn)資料、稀有資產(chǎn)、重要戰(zhàn)略資源,并全面融入社會(huì)、生產(chǎn)、生活的各個(gè)方面,深刻改變著世界的經(jīng)濟(jì)格局、利益格局、安全格局[1]。這一時(shí)代的變革是不容忽視的,正如達(dá)文波特的研究指出:“大數(shù)據(jù)將會(huì)引發(fā)大事件,應(yīng)盡快思考應(yīng)對之策”[2]。而“所有的一切都證明,爆發(fā)無處不在”,如果我們不利用大數(shù)據(jù)未雨綢繆,那便會(huì)在未來中失利[3]。

    大數(shù)據(jù)的影響也滲透到了學(xué)術(shù)領(lǐng)域,悄然改變著學(xué)術(shù)生態(tài)系統(tǒng)。2007年,圖靈獎(jiǎng)得主JIM GRAY指出,“數(shù)據(jù)密集型科學(xué)”的新型研究范式已成為科學(xué)研究的第四范式,該范式以數(shù)據(jù)為中心進(jìn)行思考、設(shè)計(jì)和實(shí)施科學(xué)研究,科學(xué)發(fā)現(xiàn)也依賴于對海量數(shù)據(jù)的收集和處理分析。社會(huì)科學(xué)領(lǐng)域也認(rèn)為,大數(shù)據(jù)對于研究對象、服務(wù)決策、社會(huì)普及和效果評(píng)估等方面均有利于推動(dòng)社會(huì)科學(xué)邁向新的發(fā)展高度[4]。如果將學(xué)術(shù)生態(tài)系統(tǒng)理解為由學(xué)術(shù)、人、環(huán)境組成的一個(gè)可以與外界不斷進(jìn)行物質(zhì)、能量和信息交換的結(jié)構(gòu)系統(tǒng)[5],數(shù)據(jù)均已深度介入并影響著這個(gè)系統(tǒng)的投入、產(chǎn)出和生產(chǎn)成果的運(yùn)轉(zhuǎn)過程。

    作為學(xué)術(shù)生態(tài)系統(tǒng)不可或缺的組成部分之一,學(xué)術(shù)評(píng)價(jià)同樣也受到大數(shù)據(jù)時(shí)代的深刻影響,大數(shù)據(jù)時(shí)代的學(xué)術(shù)評(píng)價(jià)理應(yīng)被提上日程[6]。基于大數(shù)據(jù)的評(píng)價(jià)新模式,應(yīng)著重實(shí)現(xiàn)數(shù)據(jù)化、多元化、全量化、集成化和網(wǎng)絡(luò)化5個(gè)重要趨勢[7],其中首要的是數(shù)據(jù)化。數(shù)據(jù)化也是大數(shù)據(jù)時(shí)代所倡導(dǎo)的理念之一,就像舍恩伯格所說的“世界的本質(zhì)是數(shù)據(jù)”[8]。數(shù)據(jù)化的核心是要解決“缺數(shù)據(jù)”和“數(shù)據(jù)不可用”的問題,這也反映出當(dāng)前學(xué)術(shù)評(píng)價(jià)實(shí)踐對數(shù)據(jù)的迫切需求。無論采用何種評(píng)價(jià)方法,僅依靠“拍腦袋”或“片面的數(shù)據(jù)”不足以得出科學(xué)的評(píng)價(jià)結(jié)論。充足的學(xué)術(shù)評(píng)價(jià)大數(shù)據(jù)是使“基于大數(shù)據(jù)的學(xué)術(shù)評(píng)價(jià)”真正落地的前提,否則“基于大數(shù)據(jù)的學(xué)術(shù)評(píng)價(jià)”將是空談。

    為此,本文在述評(píng)學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化相關(guān)概念的基礎(chǔ)上,分析歸納評(píng)價(jià)數(shù)據(jù)化的難點(diǎn),并探討其應(yīng)對策略。

    1學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的相關(guān)概念

    11數(shù)據(jù)和數(shù)據(jù)化

    “數(shù)據(jù)”在拉丁文里是“已知”的意思,也可以理解為“事實(shí)”,代表對某件事物的描述。在維基百科上,英文Data是未經(jīng)翻譯的信息,從數(shù)據(jù)中可以提取出信息,并進(jìn)一步提取出知識(shí)。覃雄派等認(rèn)為,數(shù)據(jù)是對現(xiàn)實(shí)世界的實(shí)體或事實(shí)的符號(hào)化表示,表現(xiàn)為一系列符號(hào)化的值[1]。在《世界是數(shù)字的》[9]一書中,將數(shù)據(jù)的定義局限在數(shù)字化環(huán)境中,數(shù)據(jù)是指通過硬件及軟件收集、存儲(chǔ)和處理,并通過通信系統(tǒng)傳送到世界各地的全部信息,但這并沒有改變數(shù)據(jù)這一概念的本質(zhì),即數(shù)據(jù)是信息的原始狀態(tài)。同時(shí),數(shù)據(jù)并不一定是指數(shù)值、量值,數(shù)據(jù)是人工形成的,其基本功能包括記錄、測量、存儲(chǔ)、表達(dá)等[10]。

    那么何為“數(shù)據(jù)化”呢?化者,變也。維克托·邁爾-舍恩伯格等[8]把“數(shù)據(jù)化”闡釋為“一種把現(xiàn)象轉(zhuǎn)變?yōu)榭芍票矸治龅牧炕问降倪^程”;數(shù)據(jù)化具有“突變”的本質(zhì),這種全新的思維植根于以數(shù)據(jù)為核心構(gòu)造虛擬世界的技術(shù)哲學(xué)和數(shù)據(jù)友好、數(shù)據(jù)自由的科技倫理中,“反映了現(xiàn)實(shí)世界對信息科技應(yīng)用的非線性、標(biāo)準(zhǔn)化、透明和開放的訴求”。姜浩[10]則認(rèn)為,數(shù)據(jù)化是“將均勻、連續(xù)的數(shù)字比特結(jié)構(gòu)化和可量化,形成標(biāo)準(zhǔn)化的、開放的、非線性的、通用的數(shù)據(jù)對象,并基于不同形態(tài)與類別的數(shù)據(jù)對象,實(shí)現(xiàn)相關(guān)應(yīng)用,開展相關(guān)活動(dòng)”,并認(rèn)為數(shù)據(jù)化是中文中獨(dú)有的一個(gè)重要概念,英文中對應(yīng)的詞應(yīng)是“Datamize”;此處的數(shù)據(jù)不是指狹義的數(shù)量值,而是指可以對應(yīng)于各種信息對象的、數(shù)字比特的結(jié)構(gòu)化集合。這兩個(gè)定義的前者強(qiáng)調(diào)數(shù)據(jù)化是“量化過程”,后者則進(jìn)一步認(rèn)為數(shù)據(jù)化不僅包括“量化過程”,并且強(qiáng)調(diào)了數(shù)據(jù)的“結(jié)構(gòu)化過程”。

    其實(shí),數(shù)據(jù)化是從思維到實(shí)踐的全面變革,指的是數(shù)據(jù)成為人類社會(huì)實(shí)踐中必不可少的工具。數(shù)據(jù)化與量化似乎是不一致的,就像前文定義中所述,既然數(shù)據(jù)不僅包含數(shù)值,也指對事物的描述,那么數(shù)據(jù)化的概念就不僅是量化,也包含量化以外的內(nèi)容。但是“一切皆可量化”[8,11]的觀點(diǎn)主張,所有無形之物均有法可測,從這個(gè)角度來說,盡管數(shù)據(jù)包含非數(shù)量化的內(nèi)容,但是本質(zhì)上仍是可量化的,描述性的數(shù)據(jù)為量化結(jié)論提供了依據(jù),所以數(shù)據(jù)化與量化的宗旨并無實(shí)質(zhì)區(qū)別,可認(rèn)為兩者是一致的。

    12數(shù)字化和大數(shù)據(jù)

    維克托·邁爾-舍恩伯格[8]認(rèn)為,數(shù)據(jù)化和數(shù)字化大相徑庭;數(shù)字化指的是把模擬數(shù)據(jù)轉(zhuǎn)換成二進(jìn)制碼,而計(jì)量和記錄的需求卻是數(shù)據(jù)化的前提;在數(shù)字化時(shí)代來臨的幾個(gè)世紀(jì)前就已經(jīng)奠定好了數(shù)據(jù)化的基礎(chǔ);因此,數(shù)字化帶來了數(shù)據(jù)化,但是數(shù)字化無法取代數(shù)據(jù)化。姜浩[10]認(rèn)為,數(shù)據(jù)化是對數(shù)字化的拓展與推進(jìn),是在電子化、信息化、計(jì)算機(jī)化和網(wǎng)絡(luò)化等術(shù)語之間自然出現(xiàn)的,關(guān)注的焦點(diǎn)更多地集中在數(shù)字比特更復(fù)雜、更高級(jí)的存在形態(tài)上;數(shù)字化對應(yīng)的基本單元是比特,數(shù)據(jù)化對應(yīng)的典型對象則是字節(jié)和字??梢?,數(shù)字化著力關(guān)注信息技術(shù),數(shù)據(jù)化卻著重關(guān)注信息內(nèi)容及形態(tài)。

    筆者認(rèn)為,數(shù)據(jù)化甚至可以先于信息技術(shù)存在,大數(shù)據(jù)的發(fā)展和計(jì)算機(jī)的變革并不是同步的。雖然數(shù)字化讓大數(shù)據(jù)成為了可能,但是大數(shù)據(jù)發(fā)展的核心動(dòng)力來源于人類測量、記錄和分析世界的渴望,即數(shù)據(jù)化的需求和動(dòng)力。數(shù)字化關(guān)注的焦點(diǎn)是技術(shù),而大數(shù)據(jù)關(guān)注的焦點(diǎn)是信息。在大數(shù)據(jù)時(shí)代,數(shù)據(jù)的價(jià)值從它最基本的用途轉(zhuǎn)變?yōu)槲磥淼臐撛谟猛?,這一轉(zhuǎn)變影響并改變了組織看待和使用數(shù)據(jù)的方式[8]。這就注定大數(shù)據(jù)雖然離不開數(shù)字化,但是與數(shù)據(jù)化也是密不可分的。

    13學(xué)術(shù)評(píng)價(jià)的數(shù)據(jù)化

    基于上述分析,數(shù)據(jù)化是指盡可能地將評(píng)價(jià)活動(dòng)形成數(shù)據(jù)并進(jìn)行記錄和管理[7];大數(shù)據(jù)時(shí)代的學(xué)術(shù)評(píng)價(jià)要實(shí)現(xiàn)的數(shù)據(jù)化,是指對學(xué)術(shù)活動(dòng)進(jìn)行全面地記錄、存儲(chǔ)、統(tǒng)計(jì)并形成有價(jià)值數(shù)據(jù)的過程,從而支撐對學(xué)術(shù)生態(tài)中各類對象的質(zhì)量或水平等做出判斷。這樣的學(xué)術(shù)評(píng)價(jià)大數(shù)據(jù)具有全面、廣泛、實(shí)時(shí)更新等特征,能夠充分反映學(xué)術(shù)活動(dòng)各個(gè)環(huán)節(jié)的發(fā)展?fàn)顩r?;谶@樣的數(shù)據(jù)化,將使學(xué)術(shù)評(píng)價(jià)活動(dòng)從直接的主觀判斷或基于小數(shù)據(jù)的判斷,轉(zhuǎn)變?yōu)榛谠u(píng)價(jià)大數(shù)據(jù)的判斷。因此,必須分析學(xué)術(shù)生態(tài)系統(tǒng)的組成要素和活動(dòng)過程,記錄、存儲(chǔ)、統(tǒng)計(jì),甚至創(chuàng)造出評(píng)價(jià)所需的數(shù)據(jù)。

    若把世界分為實(shí)體世界、思維世界、虛擬世界3個(gè)維度,數(shù)據(jù)化則是對實(shí)體世界的表示,也是思維世界的智能外化為虛擬世界數(shù)據(jù)的過程[10]。從這個(gè)角度說,學(xué)術(shù)評(píng)價(jià)的數(shù)據(jù)化,就是對實(shí)體世界中的學(xué)術(shù)活動(dòng)進(jìn)行記錄、存儲(chǔ),學(xué)術(shù)評(píng)價(jià)中評(píng)委的主要任務(wù)就是通過虛擬世界的數(shù)據(jù)充分了解實(shí)體世界的信息,并結(jié)合思維世界中的信息做出學(xué)術(shù)評(píng)價(jià)結(jié)論,即做出基于數(shù)據(jù)的決策(Data Driven Decision Making,DDD),而不僅僅是基于直覺、拍腦袋進(jìn)行決策[1]。研究表明,以這樣的數(shù)據(jù)做參考,傳統(tǒng)專家能夠做出更準(zhǔn)確的建議[12]。這說明,大數(shù)據(jù)將使學(xué)術(shù)評(píng)價(jià)活動(dòng)變得更為智能。

    2學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的難點(diǎn)分析

    21數(shù)據(jù)缺失或“隱形”

    評(píng)價(jià)數(shù)據(jù)的缺失是指評(píng)價(jià)數(shù)據(jù)與需求存在錯(cuò)位,即有些評(píng)價(jià)需求缺少相關(guān)數(shù)據(jù)的支撐。評(píng)價(jià)數(shù)據(jù)首先要滿足學(xué)術(shù)發(fā)展自身的需求,盡可能全面、準(zhǔn)確、及時(shí)地反映學(xué)術(shù)狀況和趨勢。其次,評(píng)價(jià)數(shù)據(jù)要滿足管理部門的需求,為其了解發(fā)展態(tài)勢、判斷發(fā)展水平、遴選人才、資源配置、制定政策等提供數(shù)據(jù)支撐。第三,評(píng)價(jià)數(shù)據(jù)要滿足社會(huì)大眾,尤其是學(xué)術(shù)成果直接用戶或利益相關(guān)者的需求,他們需要了解科研機(jī)構(gòu)實(shí)力、學(xué)者水平、成果質(zhì)量等方面的數(shù)據(jù)。有些評(píng)價(jià)活動(dòng)雖然發(fā)生了,如學(xué)位論文評(píng)審、期刊論文評(píng)審、學(xué)術(shù)會(huì)議交流等,但這些評(píng)價(jià)數(shù)據(jù)有些未被及時(shí)記錄,有些記錄被束之高閣再無人問津,姑且稱之為“隱形數(shù)據(jù)”,本質(zhì)上也是評(píng)價(jià)數(shù)據(jù)的缺失。

    評(píng)價(jià)數(shù)據(jù)覆蓋的評(píng)價(jià)對象不全及其引起的不同類型評(píng)價(jià)數(shù)據(jù)建設(shè)不均衡,是數(shù)據(jù)缺失的顯著表現(xiàn)之一。2020年2月,教育部、科技部印發(fā)的《關(guān)于規(guī)范高等學(xué)校SCI論文相關(guān)指標(biāo)使用樹立正確評(píng)價(jià)導(dǎo)向的若干意見》提出了“摒棄‘以刊評(píng)文”“破除SCI至上”“完善同行評(píng)價(jià)”等具體意見,側(cè)面反映了這一狀況:“以刊評(píng)文”現(xiàn)象說明期刊評(píng)價(jià)數(shù)據(jù)較充分、論文評(píng)價(jià)數(shù)據(jù)相對不足;“SCI至上”說明國內(nèi)外期刊的評(píng)價(jià)數(shù)據(jù)不對等;“須完善同行評(píng)議”則說明引文計(jì)量為主的定量評(píng)價(jià)數(shù)據(jù)較多,但同行評(píng)議數(shù)據(jù)仍然較缺乏。

    盡管目前我國的“千人計(jì)劃”“杰出青年”“長江學(xué)者”等評(píng)價(jià)體系很多,但是關(guān)于學(xué)者的評(píng)價(jià)數(shù)據(jù)仍是相對缺乏的。2018年11月,教育部辦公廳印發(fā)了《關(guān)于開展清理“唯論文、唯帽子、唯職稱、唯學(xué)歷、唯獎(jiǎng)項(xiàng)”專項(xiàng)行動(dòng)的通知》,從一個(gè)側(cè)面說明關(guān)于學(xué)者的評(píng)價(jià)數(shù)據(jù)仍然不能滿足政府遴選人才的需求。

    對于社會(huì)大眾來講,了解各領(lǐng)域的高水平學(xué)術(shù)成果,用于有效的生產(chǎn)轉(zhuǎn)化、升學(xué)報(bào)考等需求的確切數(shù)據(jù)還很不足,這也是評(píng)價(jià)數(shù)據(jù)缺失的表現(xiàn)。學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化是對學(xué)術(shù)活動(dòng)尤其是評(píng)價(jià)相關(guān)活動(dòng)的記錄、存儲(chǔ)、描述,正是解決這一難點(diǎn)的基本思路。

    22數(shù)據(jù)難獲取

    當(dāng)前,中國的學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)主要包括如下類別:

    第一,圖書館館藏或成果數(shù)據(jù)庫,其中包括成果的出版信息和少量可用于學(xué)術(shù)評(píng)價(jià)的下載、使用等數(shù)據(jù)。此類數(shù)據(jù)有些是公共部門掌管,有些則為企業(yè)所有,此類數(shù)據(jù)的數(shù)字化程度較高、可獲取性較強(qiáng),且已覆蓋絕大多數(shù)科研成果。

    第二,引文數(shù)據(jù)庫或評(píng)價(jià)數(shù)據(jù)庫,通常由各類專業(yè)評(píng)價(jià)機(jī)構(gòu)建設(shè)而成,總體上也覆蓋了絕大多數(shù)正式發(fā)表的期刊論文,專著、報(bào)告、會(huì)議論文、學(xué)位論文等類型也有一定程度的涉及,有些評(píng)價(jià)數(shù)據(jù)庫還涉及學(xué)者評(píng)價(jià)、機(jī)構(gòu)評(píng)價(jià)、學(xué)科評(píng)價(jià)等數(shù)據(jù),可獲取性較強(qiáng)。

    第三,科研管理部門、政府管理部門和學(xué)術(shù)發(fā)表載體(如期刊)的評(píng)價(jià)、考核與獎(jiǎng)勵(lì)數(shù)據(jù),這部分?jǐn)?shù)據(jù)盡管整體上數(shù)量不小,但是數(shù)據(jù)通常掌握在采集者的手中,其他人較難獲取。

    第四,互聯(lián)網(wǎng)和社會(huì)網(wǎng)絡(luò)評(píng)價(jià)數(shù)據(jù),如各類學(xué)術(shù)社區(qū)的數(shù)據(jù),具有一定的可獲取性。

    以上所列舉的各類評(píng)價(jià)數(shù)據(jù),掌握在不同主體的手中,這種分散狀態(tài)導(dǎo)致的最大問題是有些數(shù)據(jù)難以被評(píng)價(jià)需求者獲取。商業(yè)性的數(shù)據(jù)庫可以通過交易獲取,但是有些公共部門為了特定目標(biāo)生成的評(píng)價(jià)數(shù)據(jù)如何提供給其他用戶使用,尚無明確的機(jī)制或規(guī)程。然而,“大數(shù)據(jù)的價(jià)值不再單純來源于它的基本用途,而更多源于它的二次利用”[8],一旦解決了獲取性問題,這樣的評(píng)價(jià)大數(shù)據(jù)必然會(huì)對學(xué)術(shù)發(fā)展起到更為直接的推動(dòng)作用。

    23數(shù)據(jù)質(zhì)量低

    在大數(shù)據(jù)時(shí)代,盡管對數(shù)據(jù)細(xì)節(jié)的精確性要求降低了,但是對數(shù)據(jù)整體的質(zhì)量要求仍然很高。谷歌利用大數(shù)據(jù)預(yù)測流感發(fā)生的錯(cuò)誤率是傳統(tǒng)預(yù)測方式的15倍左右[4],正說明即使是大數(shù)據(jù),也不能過度強(qiáng)調(diào)混雜性而完全忽略數(shù)據(jù)質(zhì)量低、甚至不可用的問題。數(shù)據(jù)的質(zhì)量至少包括正確性和唯一性兩方面,其中前者又包括完整性、一致性、密度等內(nèi)容[1]。對于評(píng)價(jià)數(shù)據(jù)來講,對數(shù)據(jù)質(zhì)量的要求更高一些。

    低質(zhì)量的數(shù)據(jù)通常存在如下4類問題,評(píng)價(jià)數(shù)據(jù)也不例外,即數(shù)據(jù)錯(cuò)誤、數(shù)據(jù)異常、數(shù)據(jù)非結(jié)構(gòu)化和數(shù)據(jù)異構(gòu)。數(shù)據(jù)錯(cuò)誤是很常見的,但在大數(shù)據(jù)中只要控制在一定范圍內(nèi)就可以;數(shù)據(jù)異常可以分為語法類、語義類、覆蓋類3類異常[1]。然而,數(shù)據(jù)錯(cuò)誤和數(shù)據(jù)異常的存在要求數(shù)據(jù)化過程中必須進(jìn)行數(shù)據(jù)清洗。

    按數(shù)據(jù)的結(jié)構(gòu)化程度可以分為結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。不同于傳統(tǒng)數(shù)據(jù)的特征之一是,絕大多數(shù)的大數(shù)據(jù)天生是非結(jié)構(gòu)化數(shù)據(jù)或者半結(jié)構(gòu)化數(shù)據(jù),因而需要被有別于傳統(tǒng)的信息處理、分析技術(shù)和工具[13]。嚴(yán)格來說,數(shù)據(jù)非結(jié)構(gòu)化不是錯(cuò)誤,但是對于數(shù)據(jù)的開發(fā)利用卻有很多不便,這就需要通過ETL(抽取、轉(zhuǎn)換和裝載)使描述同樣實(shí)體、事件的數(shù)據(jù)保持內(nèi)在聯(lián)系,還需要通過數(shù)據(jù)集成把不同來源、類型多樣、不同介質(zhì)的異構(gòu)數(shù)據(jù)整合在一起,提升數(shù)據(jù)的價(jià)值。

    24數(shù)據(jù)化成本高

    數(shù)據(jù)化的成本高這一觀點(diǎn),本身就是一個(gè)錯(cuò)誤的判斷,究其根源在于觀念和視角問題。因?yàn)闊o數(shù)的大數(shù)據(jù)實(shí)踐已證明了大數(shù)據(jù)的規(guī)模效應(yīng)和高效率,且能帶來明顯的成本降低的效果。如GroupM廣告?zhèn)髅酵顿Y管理機(jī)構(gòu),追蹤該公司各站點(diǎn)節(jié)目收看的數(shù)據(jù),通過紐約總部集中式的大數(shù)據(jù)追蹤方法,追蹤成本僅為原來的1/3多一點(diǎn);Macys百貨連鎖公司,通過大數(shù)據(jù)可以將商品定價(jià)時(shí)間從27個(gè)多小時(shí)縮減至1個(gè)多小時(shí),在硬件方面也降低了70%的成本;與10年前相比,今天有大量廉價(jià)和免費(fèi)的大數(shù)據(jù)資源可供使用,如亞馬遜的彈性計(jì)算云、谷歌的計(jì)算引擎、微軟的Windows Azure;創(chuàng)業(yè)公司Recorded Future的CEO克里斯托弗·艾爾博格說:“我們使用的云計(jì)算實(shí)際上是相當(dāng)昂貴的。但是,從一個(gè)架構(gòu)到另一個(gè)架構(gòu)的轉(zhuǎn)換成本大幅下降,或許下降了一兩個(gè)數(shù)量級(jí)?!盵2]

    對于學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化來講,關(guān)于成本要考慮的一個(gè)關(guān)鍵問題是“誰來買單”。在學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)建設(shè)中,既有商業(yè)機(jī)構(gòu)也有公共機(jī)構(gòu),商業(yè)機(jī)構(gòu)投資評(píng)價(jià)數(shù)據(jù)的欲望與其他所有大數(shù)據(jù)的企業(yè)一般無二。公共機(jī)構(gòu)則不然,但公共機(jī)構(gòu)組織的各類大學(xué)排名、學(xué)科評(píng)估、人才選拔等評(píng)價(jià)活動(dòng),同樣也面臨實(shí)實(shí)在在的影響力競爭。既然“逃避數(shù)據(jù)化走向衰落”[10]已是不可回避的規(guī)律,那么唯一的選擇是“追求更強(qiáng)的數(shù)據(jù)力”。因此,評(píng)價(jià)數(shù)據(jù)建設(shè)各方的利益協(xié)調(diào)是必須要解決的難點(diǎn)。

    25數(shù)據(jù)化意識(shí)不足

    數(shù)據(jù)化的最后一個(gè)難點(diǎn)是意識(shí)不足。這似乎不能稱其為一個(gè)問題,但絕不能視而不見。數(shù)據(jù)化意識(shí)至少涉及兩個(gè)層面:一是前文提到的數(shù)字化與數(shù)據(jù)化的關(guān)系,此意識(shí)決定關(guān)注焦點(diǎn)是技術(shù)還是內(nèi)容;二是如何看待數(shù)據(jù)的價(jià)值,這將決定包含第一層在內(nèi)的大數(shù)據(jù)思維。這兩層都涉及數(shù)據(jù)相關(guān)的權(quán)利問題。

    在數(shù)字化時(shí)代,數(shù)據(jù)只是被交易的對象,其直接用途被重視但間接作用被忽視。而在大數(shù)據(jù)時(shí)代,數(shù)據(jù)在未來的潛在用途更為重要,這無疑改變了我們看待和使用數(shù)據(jù)的方式。數(shù)據(jù)的直接價(jià)值就像海洋表面能看到的冰山一角,而真實(shí)價(jià)值就像整座冰山,也就是說,大數(shù)據(jù)的綜合價(jià)值比部分更有價(jià)值,而大數(shù)據(jù)價(jià)值鏈應(yīng)由數(shù)據(jù)、技術(shù)和思維3部分構(gòu)成[8]。我們要深刻地認(rèn)識(shí)到,大數(shù)據(jù)特有的價(jià)值源于其規(guī)模效應(yīng),當(dāng)數(shù)據(jù)量足夠大時(shí),其價(jià)值能夠產(chǎn)生從量變到質(zhì)變的效應(yīng)[1],這樣的價(jià)值認(rèn)知意味著大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)存在本質(zhì)區(qū)別。

    對于學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化來講,評(píng)價(jià)大數(shù)據(jù)的價(jià)值不僅在于改變傳統(tǒng)評(píng)價(jià)中依賴“拍腦袋”或“樣本數(shù)據(jù)”的現(xiàn)狀,轉(zhuǎn)變到依賴更為可靠的“大數(shù)據(jù)”,更在于通過數(shù)據(jù)化清晰描述和記錄學(xué)術(shù)發(fā)展的軌跡,從而為更準(zhǔn)確地發(fā)現(xiàn)學(xué)術(shù)發(fā)展的規(guī)律、繁榮學(xué)術(shù)科研、促進(jìn)學(xué)術(shù)成果的轉(zhuǎn)化應(yīng)用,提供源源不斷的數(shù)據(jù)源動(dòng)力。近年來,學(xué)術(shù)評(píng)價(jià)相關(guān)的管理政策一再強(qiáng)調(diào)“科學(xué)的量化評(píng)價(jià)”“加強(qiáng)定性評(píng)價(jià)”,這都需要來自學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的有力支撐。

    3學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化難點(diǎn)的應(yīng)對研究

    為應(yīng)對上述學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的難點(diǎn),須從數(shù)據(jù)化的基本框架、學(xué)術(shù)評(píng)價(jià)體系變革、數(shù)據(jù)化推進(jìn)策略3個(gè)方面著手,理順策略、規(guī)避風(fēng)險(xiǎn)、推動(dòng)實(shí)踐。

    31搭建學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的基本框架

    搭建學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的基本框架,即明確數(shù)據(jù)化相關(guān)要素的組成、實(shí)現(xiàn)模式及相關(guān)作用機(jī)理,是在學(xué)術(shù)生態(tài)系統(tǒng)的內(nèi)部深度認(rèn)識(shí)數(shù)據(jù)化現(xiàn)狀并明確其推進(jìn)路徑的必要過程。

    311數(shù)據(jù)化的對象(即實(shí)體或事件)

    明確數(shù)據(jù)化的對象,是對評(píng)價(jià)所涉及的學(xué)術(shù)生態(tài)系統(tǒng)要素及其關(guān)系的再梳理與優(yōu)化過程。數(shù)據(jù)化是對實(shí)體或事件的描述和量化,那么首先就要確定學(xué)術(shù)評(píng)價(jià)的哪些實(shí)體或事件可以數(shù)據(jù)化、應(yīng)該數(shù)據(jù)化。數(shù)據(jù)化的對象應(yīng)全面覆蓋學(xué)術(shù)生態(tài)系統(tǒng)的組成要素并保持關(guān)聯(lián)度,包括學(xué)術(shù)成果及出版、學(xué)術(shù)活動(dòng)與交流、學(xué)者及其重要行為、科研管理考核與獎(jiǎng)勵(lì)、成果普及與推廣應(yīng)用、學(xué)術(shù)服務(wù)等各類信息。目前,學(xué)術(shù)成果與出版信息的數(shù)據(jù)化程度相對較高,其余實(shí)體或事件的數(shù)據(jù)化程度尚與評(píng)價(jià)需求存在較大差距,其數(shù)據(jù)化也尚未得到充分重視,理應(yīng)作為數(shù)據(jù)化實(shí)踐的難點(diǎn)和重點(diǎn)。

    312數(shù)據(jù)化的主體和用戶

    在數(shù)據(jù)化的推進(jìn)過程中,主體和用戶共同推進(jìn)學(xué)術(shù)生態(tài)系統(tǒng)的升級(jí)換代。數(shù)據(jù)化的主體即學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的實(shí)施者,包括數(shù)據(jù)的建設(shè)者和挖掘者。數(shù)據(jù)化的用戶則是學(xué)術(shù)評(píng)價(jià)大數(shù)據(jù)的需求者或受益者。如前所述,目前,我國的學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)實(shí)施者包括公共機(jī)構(gòu)、商業(yè)機(jī)構(gòu),也包括學(xué)者群體。數(shù)據(jù)化的需求者或受益者則包括學(xué)者、管理者和社會(huì)大眾,其中管理者至少分為科研管理者、公共機(jī)構(gòu)管理者和企業(yè)管理者,社會(huì)大眾則因需求復(fù)雜,組成群體也較為多樣。

    用戶對公正、全面、準(zhǔn)確的學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)的迫切需求,是數(shù)據(jù)化發(fā)展的動(dòng)力所在,也對數(shù)據(jù)化主體提出了更高的要求。其中,學(xué)者和科研管理者既是數(shù)據(jù)化的主體也是用戶,是學(xué)術(shù)生態(tài)系統(tǒng)內(nèi)生的數(shù)據(jù)化核心動(dòng)力。評(píng)價(jià)數(shù)據(jù)化過程既會(huì)改變生態(tài)系統(tǒng)中各要素的組成結(jié)構(gòu)甚至相互關(guān)系,也將改變學(xué)者的行為模式,推動(dòng)學(xué)術(shù)研究向“數(shù)據(jù)密集式研究”發(fā)展[4]。

    313評(píng)價(jià)數(shù)據(jù)的類型

    數(shù)據(jù)類型存在差異,其數(shù)據(jù)化方式也可能不同。評(píng)價(jià)數(shù)據(jù)的分類方式很多,按其產(chǎn)生方式可分為內(nèi)容數(shù)據(jù)、行為數(shù)據(jù)和環(huán)境數(shù)據(jù)[4]。其中,內(nèi)容數(shù)據(jù)主要是指學(xué)術(shù)成果信息,行為數(shù)據(jù)主要是指主體對學(xué)術(shù)成果或?qū)嶓w的評(píng)議、引用、下載、交流等活動(dòng)信息,環(huán)境數(shù)據(jù)是指科研管理政策與制度、網(wǎng)絡(luò)和系統(tǒng)環(huán)境等方面的信息。當(dāng)前,在學(xué)術(shù)評(píng)價(jià)的內(nèi)容數(shù)據(jù)中,正式出版或發(fā)表的成果數(shù)據(jù)化程度較高,數(shù)據(jù)化難點(diǎn)在于非正式出版部分;行為數(shù)據(jù)中引用、下載的數(shù)據(jù)化程度相對較好,評(píng)議、交流等其他活動(dòng)的數(shù)據(jù)化情況較差;環(huán)境數(shù)據(jù)則普遍缺乏有效記錄和規(guī)范管理,可用性不足;三類數(shù)據(jù)之間的關(guān)聯(lián)性更是堪憂。因此,推進(jìn)評(píng)價(jià)行為與環(huán)境兩方面較為缺失數(shù)據(jù)的數(shù)據(jù)化,是提升學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化整體價(jià)值的重心。

    314數(shù)據(jù)的采集方式

    數(shù)據(jù)采集是把相關(guān)的業(yè)務(wù)數(shù)據(jù)采集保存起來[1]。采集方式的設(shè)計(jì)集中體現(xiàn)在數(shù)據(jù)化的智能性和創(chuàng)新性。學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)的采集方式至少包括如下3種:一是從學(xué)術(shù)成果出版物上采集,如出版信息、引文數(shù)據(jù);二是網(wǎng)絡(luò)抓取,如下載率、書評(píng)等;三是面向評(píng)價(jià)活動(dòng)采集,如填寫評(píng)分表。3種方式在科學(xué)性和可行性方面難度各異,更大的難點(diǎn)在于將3種方式采集的數(shù)據(jù)關(guān)聯(lián)整合。大數(shù)據(jù)的理念倡導(dǎo)創(chuàng)造性地、低成本地將數(shù)據(jù)從最不可能的地方、從看上去沒什么用處的事物中提取出來并轉(zhuǎn)化成具有獨(dú)特價(jià)值的信息。評(píng)價(jià)數(shù)據(jù)化就是要基于這樣的理念,深入分析并發(fā)掘適合各類數(shù)據(jù)特征的采集方式,使學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)建設(shè)更科學(xué)、更便捷。

    315數(shù)據(jù)化的實(shí)施分層

    可將數(shù)據(jù)化分為微觀和宏觀兩個(gè)層面。學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的推行,在不同層面有不同的側(cè)重和要求。微觀層面的評(píng)價(jià)數(shù)據(jù)化是指單個(gè)數(shù)據(jù)化主體開展的評(píng)價(jià)活動(dòng),如某學(xué)者為某項(xiàng)研究而做的評(píng)價(jià),某機(jī)構(gòu)對內(nèi)部科研績效的評(píng)價(jià)等。微觀層面的數(shù)據(jù)化要轉(zhuǎn)變觀念,擅于發(fā)現(xiàn)評(píng)價(jià)活動(dòng)的數(shù)據(jù)價(jià)值和需求,注重對日常數(shù)據(jù)的采集和存儲(chǔ),逐步建立個(gè)人或機(jī)構(gòu)的評(píng)價(jià)數(shù)據(jù)池。宏觀層面的評(píng)價(jià)數(shù)據(jù)化則是針對整個(gè)學(xué)術(shù)生態(tài)系統(tǒng)而言的,涉及所有相關(guān)實(shí)體和事件的數(shù)據(jù)化,重點(diǎn)在于不同來源數(shù)據(jù)的集成和宏觀學(xué)術(shù)管理政策的制定,著重解決數(shù)據(jù)權(quán)利、采集方式、集成要求等方面的問題。

    32變革學(xué)術(shù)評(píng)價(jià)的體系和流程

    數(shù)據(jù)化的過程不是孤立的,而是伴隨著學(xué)術(shù)評(píng)價(jià)體系和流程的變革。只有充分認(rèn)識(shí)變革的實(shí)質(zhì),才能使評(píng)價(jià)數(shù)據(jù)化真正落地。

    321重構(gòu)學(xué)術(shù)評(píng)價(jià)體系

    大數(shù)據(jù)時(shí)代,評(píng)價(jià)數(shù)據(jù)化直接改變了學(xué)術(shù)評(píng)價(jià)方法與工具這一要素,但同時(shí)也將對學(xué)術(shù)評(píng)價(jià)目標(biāo)、主體、對象、流程、政策與環(huán)境等評(píng)價(jià)體系中的其他各要素產(chǎn)生變革[14]。具體來講,數(shù)據(jù)化使數(shù)據(jù)在評(píng)價(jià)中的重要性顯著提升,并要求數(shù)據(jù)符合大數(shù)據(jù)的要求,更全面、更高質(zhì)量、更易挖掘,相應(yīng)地,評(píng)價(jià)數(shù)據(jù)統(tǒng)計(jì)分析的技術(shù)、方法和工具也要更先進(jìn)、更豐富、更符合大數(shù)據(jù)的特征,這樣的變化將從本質(zhì)上改變評(píng)價(jià)主體的行為模式,使之從偏重主觀或參考樣本的決策模式,轉(zhuǎn)變到大數(shù)據(jù)驅(qū)動(dòng)決策的模式。為此,數(shù)據(jù)化必然使學(xué)術(shù)評(píng)價(jià)體系的其他要素根據(jù)新情況做出相應(yīng)改變,形成新的學(xué)術(shù)評(píng)價(jià)體系框架。

    322重塑學(xué)術(shù)評(píng)價(jià)流程

    傳統(tǒng)環(huán)境下的學(xué)術(shù)評(píng)價(jià)流程大體如下:先明確評(píng)價(jià)目標(biāo)和對象,再構(gòu)建評(píng)價(jià)指標(biāo)體系,之后根據(jù)目標(biāo)和體系遴選專家或按指標(biāo)采集數(shù)據(jù)(或二者兼有),最后形成評(píng)價(jià)結(jié)果。這樣的流程是以評(píng)價(jià)目的為導(dǎo)向、以指標(biāo)體系為引領(lǐng)、以數(shù)據(jù)分析為輔助的。

    數(shù)據(jù)化必將重塑學(xué)術(shù)評(píng)價(jià)的流程,新的流程將以發(fā)現(xiàn)數(shù)據(jù)的評(píng)價(jià)價(jià)值為導(dǎo)向、以基于數(shù)據(jù)的價(jià)值判斷為引領(lǐng)、以對評(píng)價(jià)活動(dòng)的規(guī)范和監(jiān)督為輔助,從而滿足各類評(píng)價(jià)目標(biāo),其顯著特征是數(shù)據(jù)將處于評(píng)價(jià)流程更前端、更重要的位置。借鑒大數(shù)據(jù)分析生命周期的基本流程[13],數(shù)據(jù)化之后的學(xué)術(shù)評(píng)價(jià)流程如圖1所示。

    根據(jù)圖1,基于大數(shù)據(jù)的評(píng)價(jià)流程可大致概括為:隨時(shí)發(fā)現(xiàn)評(píng)價(jià)需求或潛在數(shù)據(jù)源,采集數(shù)據(jù)和優(yōu)化工具,根據(jù)具體需求設(shè)計(jì)具體的評(píng)價(jià)指標(biāo)體系,落實(shí)評(píng)價(jià)實(shí)施方案并得出評(píng)價(jià)結(jié)果。也就是說,不需為某個(gè)具體的評(píng)價(jià)活動(dòng)專門采集和建設(shè)數(shù)據(jù),評(píng)價(jià)數(shù)據(jù)建設(shè)將成為學(xué)術(shù)生態(tài)系統(tǒng)的一項(xiàng)常規(guī)活動(dòng)。

    33制定學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的關(guān)鍵策略

    面對學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化的難點(diǎn),以下5個(gè)方面應(yīng)作為推進(jìn)數(shù)據(jù)化的進(jìn)程的關(guān)鍵策略。

    331評(píng)價(jià)數(shù)據(jù)采集常態(tài)化

    數(shù)據(jù)采集常態(tài)化是指把評(píng)價(jià)數(shù)據(jù)采集作為數(shù)據(jù)化主體的日?;顒?dòng),及時(shí)記錄、采集、存儲(chǔ)學(xué)術(shù)評(píng)價(jià)活動(dòng)乃至學(xué)術(shù)活動(dòng)的相關(guān)信息。建立這一機(jī)制旨在應(yīng)對數(shù)據(jù)缺失和“隱形”問題。學(xué)術(shù)評(píng)價(jià)是學(xué)術(shù)生態(tài)系統(tǒng)和學(xué)術(shù)發(fā)展不可或缺的組成部分。由于二次利用(或稱再利用)是大數(shù)據(jù)主要價(jià)值來源,評(píng)價(jià)數(shù)據(jù)理應(yīng)被常態(tài)化持續(xù)采集,并作為推進(jìn)學(xué)術(shù)發(fā)展、優(yōu)化管理決策的依據(jù)。唯有如此,才能使學(xué)術(shù)數(shù)據(jù)實(shí)現(xiàn)“一次創(chuàng)造、多次利用”的潛在價(jià)值。因此,無論在微觀層面還是在宏觀層面,無論是商業(yè)機(jī)構(gòu)還是公共機(jī)構(gòu),無論是學(xué)者個(gè)人還是管理部門,建立評(píng)價(jià)數(shù)據(jù)采集的常態(tài)化機(jī)制均是大勢所趨。

    332評(píng)價(jià)數(shù)據(jù)形態(tài)顯形化

    評(píng)價(jià)數(shù)據(jù)形態(tài)顯形化是指評(píng)價(jià)數(shù)據(jù)“看得見、摸得著、用得上”,包含兩層含義:一是指從已發(fā)生的評(píng)價(jià)行為或活動(dòng)中,提取描述這些行為或活動(dòng)的數(shù)據(jù);二是指對已存在的數(shù)據(jù)進(jìn)行處理,使之更規(guī)范、更可用,更好地支撐評(píng)價(jià)決策。“隱形”數(shù)據(jù)因其存在方式或形態(tài)問題,使利用者看不到其價(jià)值,所以通常不會(huì)去挖掘、開發(fā)、利用。顯形化的關(guān)鍵在于擅于發(fā)現(xiàn)那些“隱形”數(shù)據(jù),主要方式是改進(jìn)數(shù)據(jù)的提取、轉(zhuǎn)化、存儲(chǔ)、清洗、檢索、利用等技術(shù),使數(shù)據(jù)價(jià)值顯現(xiàn),數(shù)據(jù)可視化、社交網(wǎng)絡(luò)分析、云計(jì)算平臺(tái)、Hadoop、Spark等均可作為可選的技術(shù)方法。

    333評(píng)價(jià)數(shù)據(jù)存儲(chǔ)集成化

    數(shù)據(jù)存儲(chǔ)集成化是指把不同來源的數(shù)據(jù)整合在一起,提供可以觀察、統(tǒng)計(jì)、分析所有數(shù)據(jù)的統(tǒng)一視圖的過程。這一策略主要針對評(píng)價(jià)數(shù)據(jù)存儲(chǔ)分散、格式不統(tǒng)一導(dǎo)致的數(shù)據(jù)難獲取問題。數(shù)據(jù)集成通常分為物理式和虛擬式2類;集成的方式包括聯(lián)邦式、數(shù)據(jù)倉庫和中介者3種[1]。對于評(píng)價(jià)數(shù)據(jù)來講,數(shù)據(jù)集成首先要確定針對同一實(shí)體或事件的數(shù)據(jù)關(guān)聯(lián)起來,即針對同一期刊、成果、機(jī)構(gòu)、學(xué)者的不同評(píng)價(jià)數(shù)據(jù)之間相關(guān)聯(lián);其次要以成果為紐帶,使學(xué)術(shù)生態(tài)系統(tǒng)中的數(shù)據(jù)實(shí)現(xiàn)有機(jī)關(guān)聯(lián),如論文發(fā)表的期刊、作者、作者機(jī)構(gòu)通過論文關(guān)聯(lián)起來,其附屬的學(xué)科屬性、地區(qū)屬性等也隨之產(chǎn)生關(guān)聯(lián)。評(píng)價(jià)數(shù)據(jù)集成化可把數(shù)據(jù)碎片形成整張“圖畫”,使評(píng)價(jià)數(shù)據(jù)之水流動(dòng)起來,形成既可表達(dá)學(xué)術(shù)活動(dòng)又可供價(jià)值挖掘的大數(shù)據(jù)“活泉”。

    334評(píng)價(jià)數(shù)據(jù)應(yīng)用多樣化

    評(píng)價(jià)數(shù)據(jù)應(yīng)用多樣化是評(píng)價(jià)數(shù)據(jù)化的延伸,在基于大數(shù)據(jù)的學(xué)術(shù)評(píng)價(jià)新模式中,是指數(shù)據(jù)化的目標(biāo)要面向多樣化的目標(biāo)場景,而非僵化地為單一場景而設(shè)計(jì)。為此,評(píng)價(jià)數(shù)據(jù)在采集和處理時(shí)應(yīng)覆蓋多種數(shù)據(jù)源和格式類型、多種評(píng)價(jià)活動(dòng)相關(guān)的實(shí)體和事件、多種評(píng)價(jià)對象和評(píng)價(jià)主體的需求,有利于應(yīng)用多種評(píng)價(jià)標(biāo)準(zhǔn)和指標(biāo)體系、多種評(píng)價(jià)方法,并形成多樣化的評(píng)價(jià)結(jié)果分析和展現(xiàn)方式。

    335評(píng)價(jià)數(shù)據(jù)管理制度化

    學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)的管理尚無完善的制度可依,但管理規(guī)范和制度化應(yīng)是數(shù)據(jù)化的目標(biāo)之一。盡管人們已經(jīng)在如火如荼地挖掘和享用大數(shù)據(jù),但諸多相關(guān)問題仍待解決。如,數(shù)據(jù)屬于誰?誰可以采集數(shù)據(jù)?誰可以掌控?cái)?shù)據(jù)?誰可以使用數(shù)據(jù)?“學(xué)術(shù)乃天下之公器”的共識(shí),使學(xué)術(shù)生態(tài)系統(tǒng)內(nèi)的眾多學(xué)者愿意為這一共同理想和建設(shè)學(xué)術(shù)評(píng)價(jià)大數(shù)據(jù)而努力。然而,在微觀層面上,數(shù)據(jù)化的不同主體、用戶的利益差異和沖突仍是客觀存在的。其中最突出的是數(shù)據(jù)涉及的隱私權(quán)問題和數(shù)據(jù)相關(guān)的商業(yè)利益分配問題。

    在通過制度對評(píng)價(jià)數(shù)據(jù)的權(quán)利進(jìn)行界定時(shí),筆者贊成這樣的原則,即“只要未對實(shí)體造成侵害的數(shù)據(jù)行為,都不應(yīng)該列入法律懲罰范疇”[10],因?yàn)椤凹词鼓稠?xiàng)技術(shù)存在隱患,不管我們多么不安,它的某些好處總能迅速誘使人們接受它”[3]。也就是說,在推進(jìn)學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)化時(shí),我們的制度應(yīng)該傾向于盡可能地挖掘大數(shù)據(jù)的價(jià)值,而不是因?yàn)轱L(fēng)險(xiǎn)畏首畏尾,相關(guān)制度應(yīng)著力使可操作的數(shù)據(jù)化行為落地、合法、有益。在制度化的同時(shí)也要著力打造大數(shù)據(jù)文化,包括對現(xiàn)狀的緊迫感、重視創(chuàng)新和探索、相信技術(shù)是突破的源泉、具備奉獻(xiàn)精神、實(shí)現(xiàn)扁平化管理以及精英式管理等[2]。

    4結(jié)語

    數(shù)據(jù)化是為了讓學(xué)術(shù)評(píng)價(jià)主體更好地判斷,所以評(píng)價(jià)仍然離不開評(píng)委的思考和決策,因?yàn)槿绾问褂脭?shù)據(jù)更重要。通過數(shù)據(jù)化推進(jìn)大數(shù)據(jù)時(shí)代的學(xué)術(shù)評(píng)價(jià),更為重要的目標(biāo)是改進(jìn)學(xué)術(shù)生態(tài)系統(tǒng)的運(yùn)作模式,重塑學(xué)者的學(xué)術(shù)理想。長期以來,對學(xué)術(shù)生態(tài)系統(tǒng)各要素進(jìn)行準(zhǔn)確、及時(shí)、有效地評(píng)價(jià),是學(xué)術(shù)評(píng)價(jià)研究者與實(shí)踐者,乃至于整個(gè)學(xué)術(shù)界和相關(guān)管理者的終極追求,但學(xué)術(shù)評(píng)價(jià)的效果卻不盡如人意。數(shù)據(jù)化是輔助評(píng)價(jià)決策的有力武器,是推動(dòng)“以成果的質(zhì)量和效用論英雄”的有效路徑,也是間接推動(dòng)學(xué)術(shù)生態(tài)系統(tǒng)中“學(xué)術(shù)評(píng)價(jià)民主集中制”的重要抓手。

    學(xué)術(shù)界改革的首要任務(wù)是學(xué)術(shù)評(píng)價(jià)改革,因?yàn)樵u(píng)價(jià)(和獎(jiǎng)勵(lì))是“指揮棒”。數(shù)據(jù)化并不等于“量多者勝”,而是要更全面、更充分地從數(shù)據(jù)中挖掘出價(jià)值。評(píng)價(jià)之權(quán)利,“還政”于學(xué)者。自由的學(xué)術(shù)研究,依靠更為充分的學(xué)術(shù)評(píng)價(jià)、更為客觀的評(píng)價(jià)結(jié)果,這應(yīng)作為促進(jìn)學(xué)術(shù)生態(tài)系統(tǒng)健康發(fā)展的基本機(jī)制。通過大數(shù)據(jù)將學(xué)術(shù)發(fā)展的過去、現(xiàn)在和未來連接起來,用數(shù)據(jù)減少行政干預(yù),充分發(fā)揮學(xué)者參與的評(píng)價(jià)數(shù)據(jù)化的作用,才能實(shí)現(xiàn)數(shù)據(jù)化的初衷。

    參考文獻(xiàn)

    [1]覃雄派,陳躍國,杜小勇.數(shù)據(jù)科學(xué)概論[M].北京:中國人民大學(xué)出版社,2018:74-85.

    [2](美)托馬斯·達(dá)文波特.數(shù)據(jù)化轉(zhuǎn)型[M].盛楊燦,譯.杭州:浙江人民出版社,2018:74-76,145-149,169,188.

    [3](美)艾伯特-拉斯洛·巴拉巴西.爆發(fā):大數(shù)據(jù)時(shí)代預(yù)見未來的新思維[M].馬慧,譯.北京:中國人民大學(xué)出版社,2012:133-144,253.

    [4]林建寧,周忠高.數(shù)據(jù)與社會(huì)科學(xué)發(fā)展[M].濟(jì)南:山東人民出版社,2017:43,100-105,121.

    [5]張風(fēng)帆,夏園園,計(jì)彤.我國學(xué)術(shù)生態(tài)系統(tǒng)的自組織模型研究[J].科教文匯,2013,(10):104-105.

    [6]楊英倫,楊紅艷.學(xué)術(shù)評(píng)價(jià)大數(shù)據(jù)之路的推進(jìn)策略研究[J].情報(bào)理論與實(shí)踐,2019,(5):62-66.

    [7]楊紅艷.順勢而為:基于大數(shù)據(jù)的學(xué)術(shù)評(píng)價(jià)新模式探析[J].甘肅社會(huì)科學(xué),2018,(3):76-81.

    [8](英)維克托·邁爾-舍恩伯格,肯尼思·庫克耶.大數(shù)據(jù)時(shí)代:生活、工作與思維的大變革[M].盛楊燕,周濤,譯.杭州:浙江人民出版社,2013:127-197.

    [9](美)Brian W Kernighan.世界是數(shù)字的[M].李松峰,譯.北京:人民郵電出版社,2013:1-20.

    [10]姜浩.數(shù)據(jù)化:由內(nèi)而外的智能[M].北京:中國傳媒大學(xué)出版社,2017:28,113,161-199.

    [11](美)道格拉斯·W哈伯德.數(shù)據(jù)化決策[M].鄧洪濤,譯.廣東:廣東人民出版社,2018:1-40.

    [12](美)伊恩·艾瑞斯.大數(shù)據(jù)思維與決策[M].宮相真,譯.北京:人民郵電出版社,2014:115.

    [13](美)EMC Education Services.數(shù)據(jù)科學(xué)與大數(shù)據(jù)分析:數(shù)據(jù)的發(fā)現(xiàn)分析可視化與表示[M].曹逾,劉文苗,李楓林,譯.北京:人民郵電出版社,2016:1-5.

    [14]蔣玲,楊紅艷.大數(shù)據(jù)時(shí)代人文社科成果評(píng)價(jià)變革探析[J].情報(bào)資料工作,2015,(3):92-97.

    (責(zé)任編輯:陳媛)

    猜你喜歡
    數(shù)據(jù)化難點(diǎn)大數(shù)據(jù)
    “互聯(lián)網(wǎng)+”背景下的智能互聯(lián)汽車數(shù)據(jù)化媒體服務(wù)
    淺析人力資源管理的E化
    對“未來教室”的初步探索
    檔案管理和檔案服務(wù)
    性色avwww在线观看| 午夜视频精品福利| 国产精品久久久久久精品电影| 国产精品 欧美亚洲| 久久亚洲真实| 日本精品一区二区三区蜜桃| 免费看a级黄色片| 国产一区二区三区视频了| 午夜日韩欧美国产| 欧美中文综合在线视频| 亚洲18禁久久av| 精品一区二区三区视频在线观看免费| 一级毛片女人18水好多| 欧美日韩中文字幕国产精品一区二区三区| 麻豆一二三区av精品| 久久久久久九九精品二区国产| 午夜a级毛片| 不卡av一区二区三区| 日本 欧美在线| 神马国产精品三级电影在线观看| 婷婷精品国产亚洲av| 国产高清videossex| 国产日本99.免费观看| 在线观看午夜福利视频| 日韩av在线大香蕉| 噜噜噜噜噜久久久久久91| 免费av毛片视频| 久久欧美精品欧美久久欧美| 婷婷精品国产亚洲av| xxx96com| 老司机午夜福利在线观看视频| 国产精品久久久av美女十八| 黄色 视频免费看| 国产免费男女视频| 91老司机精品| 欧洲精品卡2卡3卡4卡5卡区| 在线免费观看不下载黄p国产 | 一区二区三区高清视频在线| 欧美色欧美亚洲另类二区| 熟女人妻精品中文字幕| 母亲3免费完整高清在线观看| 国产一区在线观看成人免费| 中文字幕精品亚洲无线码一区| 不卡一级毛片| 欧美在线一区亚洲| 女生性感内裤真人,穿戴方法视频| 亚洲18禁久久av| 亚洲午夜理论影院| 欧美日韩福利视频一区二区| 免费av毛片视频| 久久精品夜夜夜夜夜久久蜜豆| 午夜福利18| 天天躁狠狠躁夜夜躁狠狠躁| 国产精品影院久久| 大型黄色视频在线免费观看| 精品不卡国产一区二区三区| 国产精品乱码一区二三区的特点| 国产伦一二天堂av在线观看| 非洲黑人性xxxx精品又粗又长| 成年人黄色毛片网站| 这个男人来自地球电影免费观看| 一区福利在线观看| 国产成人系列免费观看| 精华霜和精华液先用哪个| 午夜福利在线在线| 日韩欧美 国产精品| 国产高清视频在线播放一区| 国产极品精品免费视频能看的| 一个人看的www免费观看视频| 九色国产91popny在线| 欧美另类亚洲清纯唯美| 非洲黑人性xxxx精品又粗又长| 免费在线观看亚洲国产| 最近视频中文字幕2019在线8| 美女免费视频网站| 国内揄拍国产精品人妻在线| 亚洲人成网站在线播放欧美日韩| 亚洲中文日韩欧美视频| 国产高清三级在线| 色综合欧美亚洲国产小说| 黄色片一级片一级黄色片| 男插女下体视频免费在线播放| 久久天躁狠狠躁夜夜2o2o| 亚洲av熟女| 一进一出好大好爽视频| 久久久久久九九精品二区国产| h日本视频在线播放| 久久久久性生活片| 黄色视频,在线免费观看| 国产主播在线观看一区二区| 免费在线观看影片大全网站| 久久天躁狠狠躁夜夜2o2o| 欧美成人一区二区免费高清观看 | 日本 av在线| 亚洲国产高清在线一区二区三| 岛国在线观看网站| 91在线观看av| 美女被艹到高潮喷水动态| 两人在一起打扑克的视频| 亚洲国产中文字幕在线视频| 欧美乱妇无乱码| 国产精品一区二区三区四区久久| 此物有八面人人有两片| 久久精品人妻少妇| 亚洲精品在线美女| 人妻夜夜爽99麻豆av| 熟女电影av网| 啦啦啦观看免费观看视频高清| 高潮久久久久久久久久久不卡| 欧美国产日韩亚洲一区| 免费看日本二区| 午夜激情欧美在线| 久久久国产成人免费| 毛片女人毛片| 最近最新免费中文字幕在线| 欧美日韩中文字幕国产精品一区二区三区| 黄片小视频在线播放| 国内少妇人妻偷人精品xxx网站 | 亚洲 欧美一区二区三区| 成人精品一区二区免费| 99久久精品国产亚洲精品| 国产欧美日韩一区二区精品| 欧美日韩福利视频一区二区| 亚洲人成伊人成综合网2020| 国产精品久久视频播放| 免费观看的影片在线观看| www.999成人在线观看| 99精品欧美一区二区三区四区| 中文字幕人妻丝袜一区二区| 国产欧美日韩精品亚洲av| 丰满人妻一区二区三区视频av | 久久久久国内视频| 亚洲av免费在线观看| 一二三四在线观看免费中文在| 久久人妻av系列| 狂野欧美激情性xxxx| 日韩国内少妇激情av| av天堂在线播放| 婷婷精品国产亚洲av| 久久人人精品亚洲av| 久久久久久国产a免费观看| 最近最新中文字幕大全免费视频| 成年版毛片免费区| 亚洲国产精品999在线| 老汉色av国产亚洲站长工具| a在线观看视频网站| 精品久久久久久成人av| 久久精品国产综合久久久| 日韩国内少妇激情av| 亚洲成人中文字幕在线播放| 国产成人精品久久二区二区91| 欧美色视频一区免费| 99久久精品热视频| 丁香欧美五月| 国产欧美日韩精品一区二区| 小说图片视频综合网站| 亚洲色图av天堂| 国产一区二区三区视频了| 亚洲欧美日韩无卡精品| 国产精品电影一区二区三区| 最新在线观看一区二区三区| 久99久视频精品免费| 十八禁人妻一区二区| 女人高潮潮喷娇喘18禁视频| 999精品在线视频| 欧美+亚洲+日韩+国产| 亚洲美女视频黄频| 无限看片的www在线观看| 国产熟女xx| 亚洲人成网站在线播放欧美日韩| 一级a爱片免费观看的视频| 久久精品影院6| 欧美激情在线99| 99riav亚洲国产免费| 欧美黄色片欧美黄色片| 岛国视频午夜一区免费看| 国产免费男女视频| 午夜福利成人在线免费观看| 91久久精品国产一区二区成人 | 亚洲一区二区三区不卡视频| 亚洲国产欧美网| 久久精品亚洲精品国产色婷小说| 白带黄色成豆腐渣| 欧美日韩综合久久久久久 | 国产av不卡久久| www.999成人在线观看| 51午夜福利影视在线观看| 又大又爽又粗| 亚洲五月天丁香| 熟女人妻精品中文字幕| 人妻久久中文字幕网| 亚洲在线自拍视频| 一级毛片高清免费大全| 色老头精品视频在线观看| h日本视频在线播放| 老熟妇仑乱视频hdxx| 无遮挡黄片免费观看| 国产精品一及| 亚洲真实伦在线观看| 午夜免费观看网址| 久久精品综合一区二区三区| 色播亚洲综合网| 在线观看免费午夜福利视频| 免费看日本二区| 久久热在线av| 亚洲午夜理论影院| 亚洲国产欧美人成| 丁香欧美五月| 亚洲精品美女久久久久99蜜臀| 偷拍熟女少妇极品色| 成人无遮挡网站| 美女高潮的动态| 欧美一级a爱片免费观看看| 91九色精品人成在线观看| 动漫黄色视频在线观看| 少妇人妻一区二区三区视频| 天堂√8在线中文| 99久久国产精品久久久| 免费在线观看视频国产中文字幕亚洲| 日本 av在线| 亚洲中文av在线| 精品一区二区三区视频在线 | 精品久久蜜臀av无| 老熟妇乱子伦视频在线观看| 最新中文字幕久久久久 | 亚洲国产欧美一区二区综合| 成人鲁丝片一二三区免费| 亚洲最大成人中文| 午夜免费观看网址| 国产成人一区二区三区免费视频网站| 亚洲va日本ⅴa欧美va伊人久久| 草草在线视频免费看| 日韩高清综合在线| 成人精品一区二区免费| 国产不卡一卡二| 18美女黄网站色大片免费观看| 观看免费一级毛片| 日本黄色视频三级网站网址| 黄色视频,在线免费观看| xxxwww97欧美| 手机成人av网站| 国产私拍福利视频在线观看| 国产麻豆成人av免费视频| 波多野结衣巨乳人妻| 国产三级在线视频| 深夜精品福利| 99在线视频只有这里精品首页| 欧美乱色亚洲激情| 国产高清激情床上av| 久久天躁狠狠躁夜夜2o2o| 怎么达到女性高潮| 波多野结衣高清无吗| 丰满的人妻完整版| 午夜精品久久久久久毛片777| 国产69精品久久久久777片 | 久久久久久大精品| 欧美成人一区二区免费高清观看 | 国产三级中文精品| 免费看十八禁软件| 一个人看视频在线观看www免费 | 国产极品精品免费视频能看的| 亚洲av电影在线进入| 操出白浆在线播放| 日韩国内少妇激情av| 18禁黄网站禁片免费观看直播| 欧美xxxx黑人xx丫x性爽| 真实男女啪啪啪动态图| 最好的美女福利视频网| 18美女黄网站色大片免费观看| 成人一区二区视频在线观看| 婷婷六月久久综合丁香| 午夜福利成人在线免费观看| 男人舔女人的私密视频| 精品国产乱子伦一区二区三区| 国产v大片淫在线免费观看| 日本成人三级电影网站| 久久亚洲真实| 国产亚洲精品一区二区www| 一二三四社区在线视频社区8| 国产成人啪精品午夜网站| 人人妻人人澡欧美一区二区| 热99re8久久精品国产| 国产极品精品免费视频能看的| 亚洲国产欧美一区二区综合| 老熟妇乱子伦视频在线观看| 两个人视频免费观看高清| 午夜日韩欧美国产| 琪琪午夜伦伦电影理论片6080| 中文在线观看免费www的网站| 国产一区在线观看成人免费| www国产在线视频色| 欧美+亚洲+日韩+国产| 欧美成狂野欧美在线观看| 亚洲精品一卡2卡三卡4卡5卡| 午夜亚洲福利在线播放| 国产成+人综合+亚洲专区| 国产一区二区激情短视频| 中文在线观看免费www的网站| 国产又色又爽无遮挡免费看| 亚洲精品456在线播放app | 欧美黄色淫秽网站| 亚洲乱码一区二区免费版| 国产真实乱freesex| 日本黄色视频三级网站网址| 桃红色精品国产亚洲av| 亚洲中文字幕日韩| 俺也久久电影网| h日本视频在线播放| 一夜夜www| 欧美日本视频| 女生性感内裤真人,穿戴方法视频| 国产高清三级在线| 美女高潮喷水抽搐中文字幕| 两个人看的免费小视频| 久久久久久久久久黄片| 九色国产91popny在线| 国产精品av视频在线免费观看| 老司机午夜福利在线观看视频| 亚洲真实伦在线观看| 18禁黄网站禁片午夜丰满| 国产一区二区三区视频了| www.www免费av| 亚洲午夜精品一区,二区,三区| 亚洲九九香蕉| 9191精品国产免费久久| 久久久精品欧美日韩精品| 天堂av国产一区二区熟女人妻| 中文字幕人妻丝袜一区二区| 美女扒开内裤让男人捅视频| 国内揄拍国产精品人妻在线| 日本三级黄在线观看| 国产一区二区在线观看日韩 | 久久热在线av| 丰满人妻一区二区三区视频av | 亚洲av中文字字幕乱码综合| 国产黄片美女视频| 我要搜黄色片| 国产伦一二天堂av在线观看| 国产伦人伦偷精品视频| 欧美精品啪啪一区二区三区| 亚洲欧美日韩卡通动漫| 精品福利观看| 成人午夜高清在线视频| 亚洲午夜精品一区,二区,三区| 18禁美女被吸乳视频| 亚洲专区字幕在线| 亚洲欧美一区二区三区黑人| 在线十欧美十亚洲十日本专区| 香蕉丝袜av| 欧美日韩国产亚洲二区| 精品免费久久久久久久清纯| 日韩精品中文字幕看吧| 欧美黑人巨大hd| 国产毛片a区久久久久| 一夜夜www| 超碰成人久久| а√天堂www在线а√下载| 91在线观看av| 久久中文字幕一级| 亚洲国产日韩欧美精品在线观看 | 欧美日韩福利视频一区二区| 日韩精品青青久久久久久| 狂野欧美白嫩少妇大欣赏| 亚洲专区中文字幕在线| 无人区码免费观看不卡| 神马国产精品三级电影在线观看| 国产97色在线日韩免费| 亚洲国产精品sss在线观看| 欧美3d第一页| 日韩精品青青久久久久久| 午夜激情福利司机影院| 国产野战对白在线观看| 精品午夜福利视频在线观看一区| 亚洲片人在线观看| 国产人伦9x9x在线观看| 国产精品一区二区三区四区久久| 人妻丰满熟妇av一区二区三区| 亚洲av成人av| 免费一级毛片在线播放高清视频| 国产精品日韩av在线免费观看| 天堂av国产一区二区熟女人妻| 琪琪午夜伦伦电影理论片6080| 免费一级毛片在线播放高清视频| 最近视频中文字幕2019在线8| 亚洲国产日韩欧美精品在线观看 | 久久久久国产一级毛片高清牌| 国产成人系列免费观看| 亚洲精品乱码久久久v下载方式 | 1024手机看黄色片| 好男人电影高清在线观看| 午夜激情欧美在线| 天天躁狠狠躁夜夜躁狠狠躁| 午夜福利成人在线免费观看| 免费av毛片视频| 观看免费一级毛片| 床上黄色一级片| 麻豆一二三区av精品| 国产成人福利小说| 啦啦啦韩国在线观看视频| 久久久久久国产a免费观看| 人人妻人人看人人澡| 听说在线观看完整版免费高清| 韩国av一区二区三区四区| 黄色视频,在线免费观看| 久久精品亚洲精品国产色婷小说| 免费人成视频x8x8入口观看| 亚洲成人免费电影在线观看| 一级作爱视频免费观看| 神马国产精品三级电影在线观看| 成年女人毛片免费观看观看9| 五月伊人婷婷丁香| 午夜久久久久精精品| 国产精品,欧美在线| 国产成人av激情在线播放| 国产成人福利小说| 国产伦一二天堂av在线观看| 色播亚洲综合网| 日本成人三级电影网站| 国产淫片久久久久久久久 | 精品国产乱子伦一区二区三区| 国产成人福利小说| 国产午夜精品论理片| 国产成人精品久久二区二区91| 婷婷精品国产亚洲av| 午夜福利在线观看吧| 99视频精品全部免费 在线 | 美女免费视频网站| 国产人伦9x9x在线观看| 88av欧美| 久久久久久久久中文| 国产精品精品国产色婷婷| 亚洲va日本ⅴa欧美va伊人久久| 99久久无色码亚洲精品果冻| 国产午夜福利久久久久久| 可以在线观看的亚洲视频| 人人妻,人人澡人人爽秒播| 很黄的视频免费| 村上凉子中文字幕在线| 国产精品永久免费网站| 长腿黑丝高跟| 国产亚洲精品综合一区在线观看| 两个人视频免费观看高清| 在线观看66精品国产| 久久久色成人| 国产精品精品国产色婷婷| 欧美乱色亚洲激情| 久久精品91无色码中文字幕| 老汉色∧v一级毛片| 中文字幕精品亚洲无线码一区| 久久国产乱子伦精品免费另类| 亚洲国产中文字幕在线视频| 波多野结衣高清作品| 国产激情欧美一区二区| 少妇裸体淫交视频免费看高清| 老司机在亚洲福利影院| 欧美色视频一区免费| 精品人妻1区二区| 亚洲av电影不卡..在线观看| 九九久久精品国产亚洲av麻豆 | 久久久成人免费电影| 淫妇啪啪啪对白视频| 亚洲av日韩精品久久久久久密| 国产亚洲精品av在线| 我要搜黄色片| 久久香蕉精品热| 可以在线观看的亚洲视频| 天天躁狠狠躁夜夜躁狠狠躁| 制服人妻中文乱码| 精品久久久久久久毛片微露脸| 欧美日韩瑟瑟在线播放| 成年人黄色毛片网站| 伊人久久大香线蕉亚洲五| 中出人妻视频一区二区| 久久久久久久久久黄片| 亚洲国产日韩欧美精品在线观看 | 高清在线国产一区| 国产亚洲欧美在线一区二区| 两性午夜刺激爽爽歪歪视频在线观看| 俺也久久电影网| 成人国产一区最新在线观看| 欧美另类亚洲清纯唯美| 亚洲精品美女久久久久99蜜臀| 91九色精品人成在线观看| 国产精品 国内视频| 999精品在线视频| 日本撒尿小便嘘嘘汇集6| 一a级毛片在线观看| 亚洲人成网站高清观看| 黄色视频,在线免费观看| 国语自产精品视频在线第100页| 午夜福利视频1000在线观看| 波多野结衣高清无吗| 国产激情久久老熟女| 亚洲18禁久久av| 黑人操中国人逼视频| 免费搜索国产男女视频| 欧美一区二区精品小视频在线| 久久草成人影院| 99热只有精品国产| 久久久久免费精品人妻一区二区| 亚洲五月天丁香| 国产爱豆传媒在线观看| 午夜福利成人在线免费观看| 免费高清视频大片| 搞女人的毛片| 黄片大片在线免费观看| 国产野战对白在线观看| 观看免费一级毛片| 亚洲九九香蕉| 成人特级黄色片久久久久久久| 久久久久性生活片| 日韩欧美一区二区三区在线观看| 中文字幕高清在线视频| 中亚洲国语对白在线视频| 午夜视频精品福利| 色综合欧美亚洲国产小说| www.999成人在线观看| 特级一级黄色大片| 久久九九热精品免费| 村上凉子中文字幕在线| 国产人伦9x9x在线观看| 国产精品自产拍在线观看55亚洲| 一级黄色大片毛片| 精品一区二区三区四区五区乱码| 日韩欧美一区二区三区在线观看| 午夜日韩欧美国产| 性色avwww在线观看| 国产三级中文精品| 99久久成人亚洲精品观看| a级毛片a级免费在线| 国产精品1区2区在线观看.| 久99久视频精品免费| 三级男女做爰猛烈吃奶摸视频| 女警被强在线播放| 日本 av在线| 看片在线看免费视频| 欧美黑人巨大hd| 成人国产一区最新在线观看| 亚洲第一电影网av| 亚洲av日韩精品久久久久久密| 国产精品一区二区精品视频观看| bbb黄色大片| 久久婷婷人人爽人人干人人爱| 中文字幕高清在线视频| 成人无遮挡网站| 国产男靠女视频免费网站| 一本精品99久久精品77| 露出奶头的视频| av福利片在线观看| 亚洲人与动物交配视频| 九九久久精品国产亚洲av麻豆 | 波多野结衣高清作品| 日本熟妇午夜| 麻豆国产av国片精品| 国产一区在线观看成人免费| 99精品在免费线老司机午夜| 久久久久久久精品吃奶| 国产精品综合久久久久久久免费| 欧美中文综合在线视频| 淫秽高清视频在线观看| 亚洲人成网站在线播放欧美日韩| 女人被狂操c到高潮| 91麻豆精品激情在线观看国产| 亚洲中文日韩欧美视频| www.www免费av| 无遮挡黄片免费观看| 精品一区二区三区av网在线观看| 岛国在线免费视频观看| 男人舔女人的私密视频| 级片在线观看| 制服丝袜大香蕉在线| 黄色成人免费大全| 久久这里只有精品19| 国产欧美日韩一区二区三| 亚洲无线观看免费| 午夜福利在线观看吧| 午夜影院日韩av| 中文字幕久久专区| 一个人观看的视频www高清免费观看 | 啦啦啦观看免费观看视频高清| 男女之事视频高清在线观看| 久久久久久九九精品二区国产| 丰满人妻熟妇乱又伦精品不卡| 久久久久久久午夜电影| 九九在线视频观看精品| 久久久国产成人精品二区| 哪里可以看免费的av片| 免费无遮挡裸体视频| 无人区码免费观看不卡| 亚洲,欧美精品.| 日韩国内少妇激情av| 国产精品美女特级片免费视频播放器 | 中文字幕精品亚洲无线码一区| 色吧在线观看| 欧美日韩瑟瑟在线播放| 久久这里只有精品19| 深夜精品福利| 免费在线观看视频国产中文字幕亚洲| 久99久视频精品免费| 国产91精品成人一区二区三区| 亚洲va日本ⅴa欧美va伊人久久| 可以在线观看的亚洲视频| 1024香蕉在线观看| 日本熟妇午夜| 午夜激情欧美在线| 国产精品免费一区二区三区在线| 欧美日韩瑟瑟在线播放| x7x7x7水蜜桃| 亚洲av美国av| 在线十欧美十亚洲十日本专区| 无人区码免费观看不卡| 亚洲片人在线观看| 国产精品亚洲美女久久久| 欧美日韩一级在线毛片| 搡老岳熟女国产|