• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    數(shù)字時(shí)代人文社會(huì)科學(xué)的正確評(píng)價(jià)導(dǎo)向
    ——以數(shù)字學(xué)術(shù)成果的評(píng)價(jià)問(wèn)題為中心*

    2021-03-20 05:19:42
    圖書(shū)館論壇 2021年2期
    關(guān)鍵詞:學(xué)者指南成果

    曾 文

    0 引言

    2020年2月,教育部、科技部發(fā)布《關(guān)于規(guī)范高等學(xué)校SCI論文相關(guān)指標(biāo)使用 樹(shù)立正確評(píng)價(jià)導(dǎo)向的若干意見(jiàn)》(下稱(chēng)《意見(jiàn)》),以“破除論文‘SCI至上’,探索建立科學(xué)的評(píng)價(jià)體系,營(yíng)造高校良好創(chuàng)新環(huán)境,加快提升教育治理體系和治理能力現(xiàn)代化水平”[1],作為清理“四唯”背景下的后續(xù)政策之一,為我國(guó)學(xué)術(shù)界通往正確的評(píng)價(jià)導(dǎo)向提供了重要指引。盡管“SCI至上”的風(fēng)氣主要彌漫于自然科學(xué)領(lǐng)域,但“相關(guān)指標(biāo)片面、過(guò)度、扭曲使用”“以刊評(píng)文”“考核獎(jiǎng)勵(lì)功利化”等問(wèn)題在人文社會(huì)科學(xué)領(lǐng)域同樣存在。以期刊和論文為單一評(píng)價(jià)依據(jù),易導(dǎo)致“犧牲質(zhì)量追求數(shù)量”的現(xiàn)象出現(xiàn),同時(shí)使一大批不以傳統(tǒng)論文為成果產(chǎn)出表達(dá)形式的研究貢獻(xiàn)得不到公平、合理的評(píng)價(jià),多元化學(xué)術(shù)評(píng)價(jià)機(jī)制的缺乏容易弱化甚至喪失其對(duì)人才創(chuàng)新活力與潛力的激發(fā)作用。

    數(shù)字人文作為一個(gè)逐漸崛起的交叉領(lǐng)域,具有區(qū)別于傳統(tǒng)學(xué)科的研究特征,其最典型的特征為開(kāi)放、協(xié)作與多元[2],體現(xiàn)為:數(shù)字工具被頻繁地運(yùn)用在人文學(xué)者開(kāi)展研究的多個(gè)階段,開(kāi)放數(shù)據(jù)庫(kù)、開(kāi)放軟件、開(kāi)放發(fā)表在數(shù)字人文領(lǐng)域中越來(lái)越常見(jiàn);一個(gè)數(shù)字人文項(xiàng)目團(tuán)隊(duì)中可能包含人文學(xué)者、圖書(shū)館員、程序員、網(wǎng)頁(yè)設(shè)計(jì)師等各類(lèi)成員,他們?cè)谄渲懈髡顾L(zhǎng),人文學(xué)者不僅是工具的利用者,也常常成為工具開(kāi)發(fā)團(tuán)隊(duì)的一員[3]。無(wú)論如何,人文學(xué)者的研究視角、方法和成果展現(xiàn)形式正在數(shù)字化轉(zhuǎn)型中得到擴(kuò)展與深化[4]。然而,這些特征也為學(xué)者們的人才考核、職稱(chēng)評(píng)定等帶來(lái)了困難:數(shù)字期刊、數(shù)據(jù)庫(kù)、網(wǎng)站、博客等新媒體產(chǎn)出能否與傳統(tǒng)的印刷論文一樣算作學(xué)術(shù)成果?如何計(jì)算跨學(xué)科的數(shù)字人文團(tuán)隊(duì)合作中各類(lèi)參與人員的貢獻(xiàn)?人文學(xué)者可能隨時(shí)面臨學(xué)術(shù)貢獻(xiàn)不被承認(rèn)的風(fēng)險(xiǎn)。很顯然,新出現(xiàn)的數(shù)字學(xué)術(shù)評(píng)價(jià)問(wèn)題亟待討論和解決。

    許多學(xué)術(shù)團(tuán)體和高校已經(jīng)認(rèn)識(shí)到數(shù)字學(xué)術(shù)評(píng)價(jià)的重要性,他們呼吁擴(kuò)展人文學(xué)科的傳統(tǒng)學(xué)術(shù)定義、承認(rèn)數(shù)字學(xué)術(shù)研究與成果,希望通過(guò)這些方式改善現(xiàn)狀[5]。美國(guó)學(xué)院藝術(shù)協(xié)會(huì)(College Art Association,CAA)和美國(guó)英語(yǔ)教師協(xié)會(huì)(National Council of Teachers of English,NCTE)在20世紀(jì)末已經(jīng)制定相關(guān)文本指導(dǎo)招聘和評(píng)價(jià)部門(mén)及教職員工開(kāi)展數(shù)字人文領(lǐng)域的評(píng)價(jià)工作。進(jìn)入21 世紀(jì)后,美國(guó)現(xiàn)代語(yǔ)言協(xié)會(huì)(Modern Language Association,MLA)、美國(guó)歷史與計(jì)算機(jī)協(xié)會(huì)(American Association for History and Computing,AAHC)、美國(guó)歷史協(xié)會(huì)(American Historical Association,AHA)和美國(guó)建筑史學(xué)家學(xué)會(huì)(Society of Architectural Historians,SAH)等人文協(xié)會(huì)相繼針對(duì)數(shù)字學(xué)術(shù)工作制定評(píng)價(jià)指南,指導(dǎo)相關(guān)部門(mén)在日新月異的數(shù)字環(huán)境中更加開(kāi)放和包容地評(píng)判人文學(xué)者的貢獻(xiàn),同時(shí),為人文學(xué)者的招聘、考核與晉升提供建議。近20多年來(lái),評(píng)價(jià)指南的相繼發(fā)布體現(xiàn)了數(shù)字學(xué)術(shù)成果評(píng)價(jià)日益受到重視,本研究將圍繞這些文本展開(kāi),通過(guò)回顧文本的內(nèi)容,理清歐美評(píng)價(jià)評(píng)估體系的發(fā)展脈絡(luò)以及其中的關(guān)鍵點(diǎn),進(jìn)而為我國(guó)數(shù)字學(xué)術(shù)成果評(píng)價(jià)機(jī)制的建立或進(jìn)一步討論提供思路。

    1 數(shù)字學(xué)術(shù)評(píng)價(jià)研究現(xiàn)狀

    近10年關(guān)于學(xué)術(shù)評(píng)價(jià)的討論不絕于耳,多在反思評(píng)價(jià)為行政權(quán)力部門(mén)服務(wù)的行政主導(dǎo)制度[6]、將學(xué)術(shù)評(píng)價(jià)等同于期刊評(píng)價(jià)的以刊評(píng)文方式和一味追求文章數(shù)量的過(guò)度量化風(fēng)氣[7]。而當(dāng)將學(xué)術(shù)評(píng)價(jià)置于數(shù)字環(huán)境下時(shí),首先映入眼簾的也是期刊和論文評(píng)價(jià)問(wèn)題?,F(xiàn)有研究探討數(shù)字出版時(shí)代期刊評(píng)價(jià)的更多可能性,如通過(guò)定性與定量相結(jié)合、因?qū)W科制宜的方式建立其評(píng)價(jià)體系[8],將公眾納入評(píng)價(jià)主體、對(duì)學(xué)術(shù)評(píng)價(jià)進(jìn)行評(píng)價(jià)的元評(píng)價(jià)[9]。而在論文評(píng)價(jià)上,鑒于互聯(lián)網(wǎng)的交互特點(diǎn),有學(xué)者提出增加讀者評(píng)價(jià)的互動(dòng)機(jī)制,尊重信息的規(guī)律和讀者作為受眾的主體地位[10],使評(píng)價(jià)更客觀、合理,評(píng)價(jià)體系更完善,同時(shí)提升學(xué)術(shù)交流活躍度[11],這類(lèi)似于開(kāi)放同行評(píng)議中的開(kāi)放參與評(píng)審模式。這些研究提出更加靈活和開(kāi)放的評(píng)價(jià)方式,但本質(zhì)上沒(méi)有跳出以期刊和論文為評(píng)價(jià)對(duì)象的框架。對(duì)更多樣化成果的評(píng)價(jià),亦有相關(guān)研究,包括對(duì)數(shù)字人文項(xiàng)目或數(shù)字人文服務(wù)質(zhì)量的考察。比如,對(duì)美國(guó)佛羅里達(dá)大學(xué)數(shù)字人文工作組的評(píng)估戰(zhàn)略的考察發(fā)現(xiàn),圖書(shū)館應(yīng)明確數(shù)字人文服務(wù)評(píng)估范疇、建立多維度的數(shù)字人文評(píng)估體系、構(gòu)建數(shù)字人文服務(wù)最佳模型,對(duì)數(shù)字人文中心服務(wù)過(guò)程和績(jī)效的評(píng)估,可以圍繞數(shù)字資源的可獲取性、服務(wù)影響、數(shù)字學(xué)術(shù)環(huán)境、用戶(hù)個(gè)人控制、館員感知等方面展開(kāi)[12];考慮到在線文檔與傳統(tǒng)物理文獻(xiàn)的不同,為人文學(xué)者構(gòu)建Web文檔的質(zhì)量評(píng)價(jià)框架,包括可信度、客觀性和基本學(xué)術(shù)質(zhì)量3個(gè)維度[13]。但需要注意的是,這些針對(duì)項(xiàng)目和研究本身的價(jià)值認(rèn)定對(duì)于人文學(xué)者的“實(shí)在”作用還有待證實(shí)。

    在2011-2012年間,曾有兩次圍繞數(shù)字學(xué)術(shù)評(píng)價(jià)議題的論文專(zhuān)欄。

    一是MLA 雜志《專(zhuān)業(yè)》(Profession)2011年舉辦的數(shù)字學(xué)術(shù)評(píng)價(jià)專(zhuān)欄,該專(zhuān)欄包括6篇文章,深入討論了數(shù)字學(xué)術(shù)評(píng)價(jià)的具體話題[14]。Anderson和McPherson一方面肯定了學(xué)院和大學(xué)相關(guān)部門(mén)、國(guó)家和國(guó)際組織制定評(píng)價(jià)指導(dǎo)方針的意義,進(jìn)一步提出對(duì)現(xiàn)有指南進(jìn)行評(píng)價(jià)也是必要的;另一方面也認(rèn)為具有實(shí)驗(yàn)性質(zhì)的新生成果形式也應(yīng)當(dāng)?shù)玫阶鹬?,研究過(guò)程也需要被理解[15]。Fitzpatrick以個(gè)人經(jīng)驗(yàn)講述了數(shù)字學(xué)術(shù)成果在進(jìn)行同行評(píng)議時(shí)受到的挑戰(zhàn),包括數(shù)字閱讀材料過(guò)多、公開(kāi)出版受到社會(huì)評(píng)論的影響等問(wèn)題,同時(shí)堅(jiān)持學(xué)術(shù)評(píng)價(jià)工作應(yīng)當(dāng)交由領(lǐng)域?qū)<襕16]。Nowviskie討論了數(shù)字學(xué)術(shù)協(xié)作的評(píng)價(jià)問(wèn)題[17]。

    二是《數(shù)字人文雜志》(Journal of Digital Humanities)2012年秋季第1卷第4期刊登了一系列關(guān)于數(shù)字學(xué)術(shù)評(píng)價(jià)的文章,涉及議題包括對(duì)數(shù)字學(xué)術(shù)評(píng)價(jià)提出的政策建議、實(shí)踐建議、評(píng)價(jià)案例,并提供了現(xiàn)有的評(píng)價(jià)指南入口,旨在為數(shù)字學(xué)術(shù)評(píng)價(jià)的交流與討論提供一個(gè)展示平臺(tái)[18]。學(xué)者們清楚地認(rèn)識(shí)到傳統(tǒng)的學(xué)術(shù)研究方式對(duì)人文學(xué)科發(fā)展的限制,以及數(shù)字技術(shù)為人文學(xué)科研究帶來(lái)的創(chuàng)新與機(jī)遇,但同時(shí),他們也感受到當(dāng)前學(xué)術(shù)環(huán)境對(duì)數(shù)字學(xué)術(shù)并不友好。一方面,研究者呼吁重新定義學(xué)術(shù)研究、重新思考協(xié)作與開(kāi)放獲取、修改過(guò)時(shí)的同行評(píng)議模式,為人文學(xué)者提供更廣闊的研究視野、更放松的研究環(huán)境和更公平的評(píng)價(jià)標(biāo)準(zhǔn)[19-20];另一方面,許多富有可行性與實(shí)踐性的建議也被提出。Presner、Rockwell和Mandell對(duì)人文學(xué)者在招聘、晉升和終身任職中的考察提出了評(píng)價(jià)標(biāo)準(zhǔn),其內(nèi)容涉及項(xiàng)目成果展示方式、項(xiàng)目教學(xué)和服務(wù)作用、團(tuán)隊(duì)分工與協(xié)作、同行評(píng)議、對(duì)領(lǐng)域和公眾的影響、學(xué)術(shù)研究?jī)r(jià)值、可持續(xù)發(fā)展性等方面[21-23]。Smithies構(gòu)建了包含6個(gè)類(lèi)別的數(shù)字人文輸出成果評(píng)價(jià)框架,依據(jù)人文學(xué)者的技術(shù)參與度、創(chuàng)新貢獻(xiàn)和項(xiàng)目的社會(huì)評(píng)價(jià)劃分類(lèi)別,對(duì)學(xué)者進(jìn)行評(píng)價(jià)[24]。

    國(guó)內(nèi)學(xué)界近期也對(duì)相關(guān)議題進(jìn)行了探索。2020年9月12日,南京大學(xué)高研院數(shù)字人文創(chuàng)研中心主辦、南京大學(xué)數(shù)字史學(xué)研究中心和南京大學(xué)數(shù)字人文與超媒體GIS工作室協(xié)辦“數(shù)字人文的學(xué)術(shù)評(píng)價(jià)體系——定義與規(guī)范構(gòu)建”會(huì)議,來(lái)自人文學(xué)界、圖情學(xué)界等不同領(lǐng)域的專(zhuān)家在會(huì)上直擊多個(gè)要點(diǎn):(1)評(píng)價(jià)體系構(gòu)建。是否應(yīng)當(dāng)構(gòu)建獨(dú)立的數(shù)字人文學(xué)術(shù)評(píng)價(jià)體系?現(xiàn)有的學(xué)術(shù)評(píng)價(jià)標(biāo)準(zhǔn)不能很好地適用于數(shù)字人文學(xué)術(shù)評(píng)價(jià),但數(shù)字人文理論體系和領(lǐng)域邊界尚存在諸多不清晰、不充分之處,要確立一套專(zhuān)門(mén)針對(duì)數(shù)字人文的評(píng)價(jià)規(guī)則可能為時(shí)尚早,可以肯定的是,相關(guān)的討論有其積極意義。(2)評(píng)價(jià)主體。誰(shuí)有資格評(píng)價(jià)?學(xué)術(shù)共同體能否建立及有所作為?就目前來(lái)看,同行評(píng)議是較為適合的評(píng)價(jià)方式,但數(shù)字人文的跨學(xué)科特性和諸多不確定性也使評(píng)價(jià)機(jī)構(gòu)面臨挑戰(zhàn),現(xiàn)有評(píng)價(jià)機(jī)構(gòu)可能缺乏評(píng)價(jià)能力。(3)評(píng)價(jià)對(duì)象。評(píng)價(jià)應(yīng)當(dāng)針對(duì)數(shù)字人文研究、項(xiàng)目還是研究者?項(xiàng)目是需要高度關(guān)注的對(duì)象,但對(duì)于其他難以明確界定價(jià)值的成果和研究者的工作,也應(yīng)當(dāng)給予承認(rèn)。(4)如何評(píng)價(jià)。如何判定多樣化的成果形態(tài)的價(jià)值?團(tuán)隊(duì)合作項(xiàng)目中如何計(jì)算成員貢獻(xiàn)?如前所述,對(duì)于多種非傳統(tǒng)形態(tài)的學(xué)術(shù)活動(dòng)和成果評(píng)價(jià)標(biāo)準(zhǔn),還需要進(jìn)一步討論,但應(yīng)當(dāng)存著包容心態(tài);團(tuán)隊(duì)合作成果劃分亦是一大難題,但事先明確分工、署名等規(guī)則必不可少[25]。

    總體而言,人文學(xué)科領(lǐng)域的數(shù)字學(xué)術(shù)評(píng)價(jià)已經(jīng)受到了關(guān)注,許多學(xué)者為其建言獻(xiàn)策,這些聲音一部分為相關(guān)組織所注意,最終得以在人文協(xié)會(huì)的評(píng)價(jià)指南中體現(xiàn),另一部分使該領(lǐng)域的研究有所積累。從這些研究中可以明顯地發(fā)現(xiàn):其一,國(guó)內(nèi)對(duì)于數(shù)字學(xué)術(shù)評(píng)價(jià)的關(guān)注尚處于初始階段,國(guó)外的研究時(shí)間更長(zhǎng)、范圍更廣,且較為關(guān)注人文學(xué)者在數(shù)字學(xué)術(shù)環(huán)境下的遭遇;其二,雖然上述指南文本被多次關(guān)注提及,但尚未發(fā)現(xiàn)對(duì)其的回顧與梳理,這些文本發(fā)布多年,經(jīng)過(guò)協(xié)會(huì)間的交流和文本修訂,在許多方面已達(dá)成共識(shí),對(duì)其進(jìn)行拆解與分析將有利于數(shù)字學(xué)術(shù)評(píng)價(jià)問(wèn)題的逐步明朗。

    2 重要評(píng)價(jià)指南文本介紹

    許多人文院系和專(zhuān)業(yè)組織都會(huì)制定和發(fā)布人文學(xué)科教職員工的考核和晉升指南,在研究、教學(xué)和服務(wù)3 個(gè)方面為評(píng)價(jià)者和被評(píng)價(jià)者提供指導(dǎo)。隨著學(xué)術(shù)環(huán)境的變化,指南也會(huì)不斷更新,數(shù)字人文的興起使部分指南會(huì)在新修版本中與時(shí)俱進(jìn)地增加對(duì)數(shù)字成果的評(píng)價(jià)建議,與此同時(shí),也有部分組織專(zhuān)門(mén)制定了數(shù)字環(huán)境下的員工考核和學(xué)術(shù)評(píng)價(jià)指南。本研究采用網(wǎng)絡(luò)調(diào)查法對(duì)國(guó)際重要人文組織和人文院系制定的政策文件進(jìn)行搜集,經(jīng)過(guò)對(duì)文本的閱讀、整理和篩選,最后納入本研究的文本共6份,均為人文協(xié)會(huì)制定的數(shù)字學(xué)術(shù)評(píng)價(jià)指南,用于指導(dǎo)教學(xué)、科研部門(mén)及人文學(xué)者的數(shù)字學(xué)術(shù)評(píng)價(jià)工作,以促進(jìn)相關(guān)人員招聘和晉升工作的順利開(kāi)展。文本的基本信息見(jiàn)表1。

    表1 重要評(píng)價(jià)指南文本

    《新媒體藝術(shù)教學(xué)標(biāo)準(zhǔn)與指南》最初由從事新媒體工作的成員提交給CAA,1995年10月21日由CAA理事會(huì)一致通過(guò),2007年10月28日修訂。該文件“作為一套指導(dǎo)方針提出,以協(xié)助解決新媒體藝術(shù)領(lǐng)域教職員工的招聘、晉升、終身任職、工作量、薪酬、資金和支持問(wèn)題,同時(shí)提供該領(lǐng)域教職員工的相關(guān)信息,以便相關(guān)部門(mén)做出準(zhǔn)確和全面評(píng)價(jià)”。指南的面向?qū)ο笾饕獮樵u(píng)價(jià)部門(mén)和機(jī)構(gòu),從新媒體藝術(shù)領(lǐng)域教職員工日常開(kāi)展的學(xué)術(shù)研究、教學(xué)和服務(wù)3個(gè)方面闡述評(píng)價(jià)注意事項(xiàng),最后提出建議[26]。其再三強(qiáng)調(diào)相關(guān)機(jī)構(gòu)要考慮新技術(shù)的應(yīng)用給教師所增加的工作量。

    《大學(xué)寫(xiě)作與交流會(huì)議技術(shù)工作的晉升和終身任職指南》于1998年11月編寫(xiě),2015年11月更新,其修訂參考MLA 和AAHC 相關(guān)指南。指南提出,數(shù)字環(huán)境下,教師需要熟悉在線課程管理系統(tǒng)、網(wǎng)站開(kāi)發(fā)與維護(hù)等繁雜的工作,數(shù)字媒體已深深嵌入每一位教職員工的研究、教學(xué)和服務(wù)之中,因此,指南旨在為招聘和評(píng)價(jià)委員會(huì)以及應(yīng)征者提供指導(dǎo)。指南首先對(duì)數(shù)字媒體工作的性質(zhì)作出聲明與解釋?zhuān)纭皵?shù)字媒體工作非常耗時(shí)”“使用技術(shù)的工作通常需要協(xié)作”等,接著分別對(duì)評(píng)價(jià)委員會(huì)和教職員工提出評(píng)價(jià)建議,內(nèi)容分為研究、教學(xué)和服務(wù)3個(gè)方面[27]。該文本同樣提到了許多教師使用數(shù)字媒體開(kāi)展工作的細(xì)節(jié),內(nèi)容具有針對(duì)性。

    《數(shù)字人文與數(shù)字媒體工作評(píng)價(jià)指南》的最初版本于2000年5月在理事會(huì)議上通過(guò),2012年1月信息技術(shù)委員會(huì)(Committee on Information Technology,CIT)對(duì)其進(jìn)行了修訂,新版指南在MLA執(zhí)行委員會(huì)2012年2月的會(huì)議上通過(guò)。指南包括評(píng)價(jià)委員會(huì)指南和教職員工指南,均明確描述了相應(yīng)職責(zé),強(qiáng)調(diào)“技術(shù)變革的步伐使任何一套指南都無(wú)法完全說(shuō)明數(shù)字媒體和數(shù)字人文科學(xué)對(duì)文學(xué)和現(xiàn)代語(yǔ)言教學(xué)的影響方式。盡管如此,總的原則仍然成立:數(shù)字人文學(xué)者所在機(jī)構(gòu)在對(duì)其連任、終身任職和晉升進(jìn)行評(píng)價(jià)審查時(shí)必須充分考慮其工作貢獻(xiàn)而無(wú)論形式”[28]。該文件在發(fā)布后引起了學(xué)界和業(yè)界的注意,被許多人文組織和學(xué)者作為指南制定和研究的參考,自該文件開(kāi)始,人文協(xié)會(huì)制定的評(píng)價(jià)指南核心內(nèi)容逐漸由個(gè)性化走向規(guī)范化。

    利率市場(chǎng)化賦予商業(yè)銀行自主定價(jià)權(quán),加劇了市場(chǎng)競(jìng)爭(zhēng),提高了利率風(fēng)險(xiǎn)。利率定價(jià)關(guān)乎商業(yè)銀行應(yīng)對(duì)風(fēng)險(xiǎn)的能力,以及鞏固甚至提升市場(chǎng)地位的水平,所以是至關(guān)重要的。有效預(yù)見(jiàn)未來(lái)利率趨勢(shì),精確計(jì)算利率定價(jià),提出或確定方案不僅需要大量數(shù)據(jù),建立數(shù)據(jù)庫(kù),還需要高素質(zhì)的專(zhuān)業(yè)人才對(duì)數(shù)據(jù)進(jìn)行篩選分析,構(gòu)建模型。在風(fēng)險(xiǎn)控管方面,除了要牢牢把握市場(chǎng)動(dòng)向,還要善于把控貸款業(yè)務(wù)風(fēng)險(xiǎn),通過(guò)投資轉(zhuǎn)移、分散風(fēng)險(xiǎn),加強(qiáng)商業(yè)銀行內(nèi)部的管理。商業(yè)銀行內(nèi)部管理,往往能決定該行能否穩(wěn)健經(jīng)營(yíng)。如何保持經(jīng)營(yíng)環(huán)境良好、工作人員廉潔、決策執(zhí)行高效也是商業(yè)銀行長(zhǎng)期要面臨的問(wèn)題。

    《數(shù)字媒體活動(dòng)中的終身任職、考核和晉升評(píng)價(jià)建議指南:AAHC 文件》制定于2002 年1月,由AAHC根據(jù)MLA指南改編而成,其主體部分內(nèi)容與MLA指南大同小異,同樣分為評(píng)價(jià)委員會(huì)指南和教職員工指南兩部分。值得注意的是,該文件對(duì)其制定背景進(jìn)行了深刻闡述,文件提到,2000年春季學(xué)期,AAHC調(diào)查了650多個(gè)歷史院系和組織有關(guān)技術(shù)工作的終身任職、考核和晉升政策情況,結(jié)果顯示很少有部門(mén)制定正式政策承認(rèn)數(shù)字技術(shù)在研究、教學(xué)和服務(wù)方面的作用,這對(duì)歷史學(xué)者開(kāi)展數(shù)字學(xué)術(shù)、發(fā)表數(shù)字成果產(chǎn)生了消極影響。基于此,人文院系和相關(guān)組織都應(yīng)依據(jù)自身情況制定書(shū)面指導(dǎo)方針,以便給予從事數(shù)字媒體研究和教學(xué)的教職員工公平的評(píng)價(jià)與獎(jiǎng)勵(lì)[29]。

    《歷史學(xué)者數(shù)字學(xué)術(shù)專(zhuān)業(yè)評(píng)價(jià)指南》制定于2015年,與前幾份指南相比,其出現(xiàn)的時(shí)間較晚,數(shù)字人文方興未艾,因此,它強(qiáng)調(diào)歷史學(xué)者使用數(shù)字工具進(jìn)行學(xué)術(shù)研究的潮流無(wú)法阻擋,拒絕承認(rèn)或無(wú)法正確評(píng)價(jià)數(shù)字學(xué)術(shù)成果的價(jià)值都會(huì)阻礙學(xué)者的創(chuàng)新與交流,相關(guān)評(píng)價(jià)機(jī)構(gòu)亟需加深對(duì)數(shù)字技術(shù)的了解。指南從評(píng)價(jià)委員會(huì)和教職員工的角度提出開(kāi)展評(píng)價(jià)時(shí)需要考慮的問(wèn)題,接著提供建議,最后指南還闡述了AHA在這其中所扮演的角色,強(qiáng)調(diào)AHA一直關(guān)注數(shù)字技術(shù)的發(fā)展,并已建立具有數(shù)字學(xué)術(shù)經(jīng)驗(yàn)的歷史學(xué)者專(zhuān)門(mén)工作組,同時(shí)在其雜志上增加數(shù)字學(xué)術(shù)內(nèi)容,以提供支持[30]。

    《藝術(shù)與建筑史數(shù)字學(xué)術(shù)評(píng)價(jià)指南》由安德魯·W·梅隆基金會(huì)資助成立的評(píng)價(jià)指南工作組于2016 年1 月制定發(fā)布,該工作組成員來(lái)自CAA&SAH,在15個(gè)月內(nèi)對(duì)數(shù)字學(xué)術(shù)評(píng)價(jià)的實(shí)踐、話題進(jìn)行調(diào)研,最終形成文檔。該指南的目的是幫助評(píng)價(jià)委員會(huì)、學(xué)術(shù)部門(mén)和人文學(xué)者評(píng)價(jià)數(shù)字學(xué)術(shù)成果,其篇幅約為其他指南的兩倍,較為全面、細(xì)致地介紹了評(píng)價(jià)的定義和標(biāo)準(zhǔn),出版和評(píng)價(jià)的形式,數(shù)字學(xué)術(shù)中的協(xié)作,管理、保存和訪問(wèn)等問(wèn)題,并提供相關(guān)指南、報(bào)告和論文的參考資源清單[31]。雖然內(nèi)容較多,但該指南相對(duì)完整、清晰的框架使其內(nèi)容明確且易于擴(kuò)展。

    以上文本來(lái)自人文領(lǐng)域不同學(xué)科的專(zhuān)業(yè)組織,最初文本與最新文本發(fā)布時(shí)間跨越20 年,各份指南的關(guān)注重點(diǎn)和指導(dǎo)方式存在著差異,但彼此之間經(jīng)過(guò)交流與參考,在總體方向把握和具體的評(píng)價(jià)建議上有不少已經(jīng)達(dá)成共識(shí),部分指南已經(jīng)成為界內(nèi)的示范性文本,如北卡羅來(lái)納州立大學(xué)英語(yǔ)系[32]、內(nèi)布拉斯加大學(xué)林肯分校人文學(xué)科數(shù)字研究中心[33]公布的評(píng)價(jià)建議均參考了MLA、AHA和CCA&SAH的評(píng)價(jià)指南。

    3 評(píng)價(jià)要素與關(guān)鍵

    3.1 評(píng)價(jià)內(nèi)容與范圍

    明確數(shù)字學(xué)術(shù)的評(píng)價(jià)內(nèi)容和范圍是公平評(píng)價(jià)的基本前提。盡管該部分內(nèi)容僅在CAA&SAH指南中專(zhuān)門(mén)提到,但其表達(dá)的理念和原則在每一份指南的話語(yǔ)中均有體現(xiàn),需要明確的內(nèi)容包括:

    (1)數(shù)字技術(shù)的應(yīng)用和成果的表達(dá)有多種形式,均應(yīng)納入數(shù)字學(xué)術(shù)評(píng)價(jià)的范圍內(nèi)。其一,利用已有的數(shù)字工具解決人文學(xué)科的研究問(wèn)題、開(kāi)發(fā)數(shù)字人文研究工具、結(jié)合數(shù)字與人文方法的實(shí)驗(yàn)研究三者都屬于數(shù)字技術(shù)的應(yīng)用,其中數(shù)字技術(shù)的貢獻(xiàn)各有不同,需要人文學(xué)者來(lái)闡明。其二,無(wú)論學(xué)術(shù)成果以何種數(shù)字形式表達(dá),都應(yīng)得到與傳統(tǒng)印刷品同樣公平的評(píng)價(jià)待遇。美國(guó)應(yīng)用語(yǔ)言學(xué)學(xué)會(huì)(American Association of Applied Linguistics,AAAL)在其不斷修訂的《晉升和終身任職指南》(Promotion & Tenure Guidelines)中亦認(rèn)為,對(duì)于在線期刊和傳統(tǒng)期刊應(yīng)當(dāng)一視同仁,但當(dāng)中也提到語(yǔ)料庫(kù)、學(xué)術(shù)博客等其他在線成果不太可能納入評(píng)價(jià)范圍[34]。就我國(guó)目前情況看,網(wǎng)站、數(shù)據(jù)庫(kù)、程序等學(xué)術(shù)成果形態(tài)仍未進(jìn)入評(píng)價(jià)視野。

    (2)研究過(guò)程、研究方法也應(yīng)該成為學(xué)術(shù)和評(píng)價(jià)的一部分?!斑^(guò)程對(duì)于知識(shí)的創(chuàng)造可能是必不可少的”[35],數(shù)字人文工作因多樣技術(shù)的介入和跨學(xué)科合作而變得復(fù)雜,一項(xiàng)人文研究的開(kāi)展可能有賴(lài)于多年的數(shù)據(jù)庫(kù)構(gòu)建,而這個(gè)復(fù)雜的構(gòu)建過(guò)程本身就值得被評(píng)價(jià)。此外,使用數(shù)字技術(shù)開(kāi)展學(xué)術(shù)研究常常會(huì)催生或者改進(jìn)一種研究方法,與傳統(tǒng)學(xué)術(shù)一樣,研究方法的創(chuàng)新也應(yīng)當(dāng)被承認(rèn)為學(xué)術(shù)貢獻(xiàn)。

    3.2 相關(guān)部門(mén)/機(jī)構(gòu)職責(zé)

    招聘或評(píng)價(jià)委員會(huì)直接決定著人文學(xué)者的“去留”和“升降”,其對(duì)于數(shù)字學(xué)術(shù)的理解和態(tài)度體現(xiàn)著整個(gè)人文部門(mén)和機(jī)構(gòu)對(duì)數(shù)字學(xué)術(shù)的態(tài)度,影響著教師結(jié)構(gòu),以及院系未來(lái)的學(xué)術(shù)發(fā)展道路。評(píng)價(jià)委員會(huì)扮演的重要角色使得多份指南花費(fèi)大篇幅強(qiáng)調(diào)公平、開(kāi)放、包容評(píng)價(jià)的重要性:

    (1)明確自身計(jì)劃,傳達(dá)工作職責(zé)。人文院系和機(jī)構(gòu)在招聘人才之前,首先必須非常清楚自身在新興數(shù)字環(huán)境中謀求怎樣的發(fā)展,包括具體要吸納哪方面的數(shù)字人文人才,在哪些主題領(lǐng)域開(kāi)展研究,并將這些內(nèi)容形成文本,納入招聘與評(píng)價(jià)指南,進(jìn)行具體說(shuō)明;在招聘中,需要向候選人“明確提及此類(lèi)工作,并應(yīng)告知候選人與此工作相關(guān)的職責(zé)”[37]。一項(xiàng)針對(duì)歷史學(xué)者數(shù)字人文接受意愿影響因素的研究表明,學(xué)者所處的社會(huì)學(xué)習(xí)環(huán)境、學(xué)習(xí)資源環(huán)境和社交環(huán)境會(huì)直接影響學(xué)者對(duì)數(shù)字人文的接受意愿[38],因此,提前知會(huì)學(xué)者機(jī)構(gòu)的現(xiàn)狀以及機(jī)構(gòu)對(duì)數(shù)字技術(shù)使用的期望和要求是十分有必要的。

    (2)聘請(qǐng)合格的評(píng)價(jià)專(zhuān)家。根據(jù)數(shù)字人文的特性,評(píng)價(jià)委員會(huì)應(yīng)覆蓋數(shù)字技術(shù)專(zhuān)家、人文學(xué)者、具有數(shù)字學(xué)術(shù)研究經(jīng)驗(yàn)的學(xué)者這三類(lèi)人員。CAA&SAH指南特別指出:“評(píng)價(jià)委員會(huì)應(yīng)至少包括一名熟悉數(shù)字技術(shù)的成員?!盵39]但由于數(shù)字技術(shù)應(yīng)用的多樣性和數(shù)字人文的跨學(xué)科特性,單一機(jī)構(gòu)很容易出現(xiàn)缺乏專(zhuān)業(yè)人士的情況,此時(shí)指南給出的建議是“尋求外部評(píng)審人員的幫助”[40]。相關(guān)部門(mén)/機(jī)構(gòu)應(yīng)當(dāng)意識(shí)到,研究團(tuán)隊(duì)的跨學(xué)科性必須導(dǎo)致評(píng)價(jià)團(tuán)隊(duì)的跨學(xué)科性,否則就無(wú)法有效評(píng)價(jià)所有參與者的貢獻(xiàn)。

    (3)尊重?cái)?shù)字媒介的特殊性。數(shù)字學(xué)術(shù)成果常常通過(guò)多種形式呈現(xiàn),如數(shù)據(jù)庫(kù)、視頻、網(wǎng)站、程序等,評(píng)價(jià)委員會(huì)需要明確,“只要同行評(píng)議的過(guò)程嚴(yán)格且明確,學(xué)術(shù)出版物的格式就無(wú)關(guān)緊要”[41],學(xué)術(shù)價(jià)值不應(yīng)因成果的表達(dá)形式而改變。只通過(guò)印刷形式查看和考察其成果會(huì)在很大程度上無(wú)法體現(xiàn)原有成果的效果與價(jià)值,如部分成果需要使用動(dòng)態(tài)效果展現(xiàn)歷史演變過(guò)程、通過(guò)立體模型還原城市風(fēng)貌等。評(píng)價(jià)委員會(huì)應(yīng)尊重媒介的特殊性,“在產(chǎn)生作品的媒介中評(píng)價(jià)作品”[42]。當(dāng)前的學(xué)術(shù)評(píng)價(jià)中,成果材料往往只能通過(guò)文字和圖片的形式提交和展示,這限制了數(shù)字學(xué)術(shù)成果的呈現(xiàn)效果。多樣化的成果形態(tài)無(wú)法被承認(rèn),學(xué)者又怎會(huì)愿意大費(fèi)周章再去利用新技術(shù)?

    (4)考慮數(shù)字學(xué)術(shù)的合作性。長(zhǎng)期以來(lái)人文學(xué)者都熱衷于獨(dú)立研究,而并不習(xí)慣開(kāi)展學(xué)術(shù)合作[43],數(shù)字技術(shù)的出現(xiàn)打破了這種局面,數(shù)字學(xué)術(shù)通常具有跨學(xué)科性質(zhì)。這對(duì)評(píng)價(jià)委員會(huì)提出的要求包括:第一,評(píng)價(jià)委員會(huì)需要意識(shí)到合作“需要建立與其他學(xué)科的聯(lián)系,還要求助計(jì)算機(jī)領(lǐng)域的同事,因此會(huì)增加工作量”[44];第二,要認(rèn)真衡量每個(gè)學(xué)者的貢獻(xiàn),在評(píng)價(jià)時(shí)“具有更廣闊的視野,不要被作者姓名順序、身份所約束”[45],過(guò)程編輯者與內(nèi)容創(chuàng)作者一樣需要得到公平的考核;第三,團(tuán)隊(duì)合作通常在尋找資金支持方面需要花費(fèi)更多的時(shí)間和精力,這個(gè)過(guò)程也應(yīng)當(dāng)被關(guān)注。

    3.3 對(duì)人文學(xué)者的要求

    越來(lái)越多的歷史、文學(xué)、藝術(shù)等人文學(xué)者感受到數(shù)字技術(shù)帶來(lái)的視野擴(kuò)展、方法創(chuàng)新和結(jié)果深化,但數(shù)字學(xué)術(shù)成果評(píng)價(jià)機(jī)制的不完善使他們?cè)谡衅负蜁x升中陷入困境。如何在評(píng)價(jià)中展現(xiàn)自我的學(xué)術(shù)價(jià)值、與評(píng)價(jià)委員會(huì)進(jìn)行談判是需要考慮的關(guān)鍵問(wèn)題。指南為人文學(xué)者提出了相應(yīng)建議:

    (1)了解相關(guān)部門(mén)對(duì)數(shù)字學(xué)術(shù)的支持和自身職責(zé)。在招聘過(guò)程中,商討工作條件時(shí),人文學(xué)者應(yīng)當(dāng)重點(diǎn)關(guān)注三方面信息,以便未來(lái)的學(xué)術(shù)與職業(yè)道路規(guī)劃和研究開(kāi)展:第一,詢(xún)問(wèn)清楚該機(jī)構(gòu)在終身任職、晉升考核中數(shù)字工作所占的分量;第二,確認(rèn)自己能夠得到的開(kāi)展數(shù)字學(xué)術(shù)研究的硬件與軟件支持;第三,清楚了解自身在研究、教學(xué)和服務(wù)中的工作職責(zé),尤其是兼具行政和教職職責(zé)的學(xué)者,“必須對(duì)其工作的評(píng)估條件進(jìn)行談判”[46],因?yàn)樾姓ぷ鞅厝粫?huì)分散教學(xué)和研究的精力,有可能影響學(xué)術(shù)成果的產(chǎn)出,因此,有必要明確不同類(lèi)型工作的評(píng)價(jià)標(biāo)準(zhǔn),以獲得公平、合理的評(píng)價(jià)。

    (2)闡明自身工作的性質(zhì)、價(jià)值和復(fù)雜性,包括工作細(xì)節(jié)。在面對(duì)評(píng)價(jià)的整個(gè)過(guò)程中,人文學(xué)者都要十分清晰地解釋自己的工作,這是最重要的一點(diǎn)。即使評(píng)價(jià)委員會(huì)做好了招聘和晉升數(shù)字人文學(xué)者的準(zhǔn)備,并為此制定了相當(dāng)詳細(xì)的指導(dǎo)方針與計(jì)劃,人文學(xué)者也不應(yīng)該“假定評(píng)審已經(jīng)熟悉某些技術(shù)”[47]。數(shù)字學(xué)術(shù)研究所涉及的工作有時(shí)候是評(píng)價(jià)委員會(huì)難以想象和理解的,許多工作量可能產(chǎn)生于傳統(tǒng)學(xué)術(shù)研究與數(shù)字學(xué)術(shù)研究之間的過(guò)渡與轉(zhuǎn)變。因此,在日常工作中人文學(xué)者需要記錄其工作細(xì)節(jié),清楚每個(gè)步驟的截止日期、最終成果和評(píng)價(jià)期望,在考核時(shí)清晰解釋學(xué)術(shù)成果的復(fù)雜性以及自身的貢獻(xiàn)程度,包括:其工作如何“重新定義了傳統(tǒng)意義上的研究、教學(xué)和服務(wù),或是擴(kuò)展了其邊界”[48];數(shù)字學(xué)術(shù)工作開(kāi)展的基本流程;工作中與用戶(hù)、公眾、同事、其他部門(mén)及學(xué)生建立的新協(xié)作關(guān)系。

    (3)制定并說(shuō)明數(shù)字學(xué)術(shù)成果的可持續(xù)發(fā)展計(jì)劃。如果一個(gè)項(xiàng)目不為人所知,且無(wú)法長(zhǎng)期保存和繼續(xù)訪問(wèn),在評(píng)審眼中它的價(jià)值就會(huì)大打折扣。當(dāng)前許多學(xué)術(shù)研究成果都存在只為評(píng)價(jià)考核服務(wù)的問(wèn)題,考核過(guò)后便荒廢,既沒(méi)有轉(zhuǎn)化為領(lǐng)域內(nèi)的實(shí)際貢獻(xiàn),也沒(méi)有為后來(lái)研究者提供素材,因此,學(xué)者可以計(jì)劃將成果面向公眾開(kāi)放,并且與本校圖書(shū)館合作,為成果制定保存和可持續(xù)發(fā)展計(jì)劃,這是體現(xiàn)學(xué)者們數(shù)字學(xué)術(shù)成果長(zhǎng)期價(jià)值的一種方式。在計(jì)劃中,以成果的原生格式保存為最佳方式,若不能,則選取其他備選方案,但仍舊應(yīng)當(dāng)保證成果所含的知識(shí)內(nèi)容能夠展現(xiàn)且能被訪問(wèn)。

    4 結(jié)語(yǔ)

    人文學(xué)者在招聘、考核、晉升中面臨的窘境已經(jīng)伴隨數(shù)字人文這一領(lǐng)域的興起存在多年,學(xué)者和相關(guān)組織為此進(jìn)行學(xué)術(shù)討論、制定相關(guān)指南、尋找最佳實(shí)踐,雖然目前這一問(wèn)題尚未能得到解決,但這些努力對(duì)歐美高校人文學(xué)科的數(shù)字學(xué)術(shù)評(píng)價(jià)產(chǎn)生了影響。本文分析了重要人文協(xié)會(huì)制定的數(shù)字學(xué)術(shù)評(píng)價(jià)指南,提煉和歸納出不同角度、身份與角色在評(píng)價(jià)中的注意事項(xiàng),指南并未提供標(biāo)準(zhǔn)化的評(píng)價(jià)框架與規(guī)范,更多的是一種列舉式指引,一種定性考量,當(dāng)中涉及了許多細(xì)枝末節(jié),傳遞的更多是對(duì)各種形式數(shù)字學(xué)術(shù)成果認(rèn)可的強(qiáng)調(diào),以及對(duì)團(tuán)隊(duì)合作中不同類(lèi)型學(xué)者的關(guān)懷,而無(wú)論其貢獻(xiàn)大小。這對(duì)我國(guó)學(xué)界的啟示在于,快速變化的學(xué)術(shù)環(huán)境中,單一、量化的評(píng)價(jià)體系已經(jīng)不再適用,數(shù)字學(xué)術(shù)成果的評(píng)價(jià)應(yīng)當(dāng)更多從定性的角度出發(fā),在認(rèn)可數(shù)字工作的學(xué)術(shù)價(jià)值、了解數(shù)字技術(shù)的多樣性和特殊性、尊重?cái)?shù)字人文團(tuán)隊(duì)的跨學(xué)科合作性的基礎(chǔ)上開(kāi)展,正如《意見(jiàn)》所提到的,要“建立健全分類(lèi)評(píng)價(jià)體系”“完善學(xué)術(shù)同行評(píng)價(jià)”,以創(chuàng)新水平、科學(xué)價(jià)值和實(shí)際貢獻(xiàn)作為評(píng)價(jià)依據(jù),突出創(chuàng)新精神和服務(wù)貢獻(xiàn)、回歸學(xué)術(shù)初心,這才是評(píng)價(jià)工作正確的引導(dǎo)方向[49]。

    猜你喜歡
    學(xué)者指南成果
    學(xué)者介紹
    學(xué)者簡(jiǎn)介
    學(xué)者介紹
    工大成果
    “走出去”成果斐然
    “健康照明”成果聚焦
    指南數(shù)讀
    電視指南(2016年12期)2017-02-05 15:08:06
    學(xué)者介紹
    “三醫(yī)聯(lián)動(dòng)”擴(kuò)大醫(yī)改成果
    論碰撞的混搭指南
    Coco薇(2015年12期)2015-12-10 02:55:48
    女生性感内裤真人,穿戴方法视频| 亚洲人成伊人成综合网2020| 午夜久久久久精精品| 国产亚洲精品一区二区www| 亚洲 欧美 日韩 在线 免费| 欧美激情 高清一区二区三区| 一二三四社区在线视频社区8| 麻豆久久精品国产亚洲av| 老司机靠b影院| 午夜免费观看网址| 禁无遮挡网站| 日本在线视频免费播放| 亚洲国产精品合色在线| 伊人久久大香线蕉亚洲五| 欧美黑人欧美精品刺激| 好男人在线观看高清免费视频 | 精品国产国语对白av| 亚洲熟女毛片儿| avwww免费| 黄频高清免费视频| 夜夜夜夜夜久久久久| 免费在线观看日本一区| 身体一侧抽搐| 欧美激情极品国产一区二区三区| 国产精品美女特级片免费视频播放器 | 一本综合久久免费| 精品久久久久久,| or卡值多少钱| av片东京热男人的天堂| 日韩国内少妇激情av| 亚洲精品在线观看二区| 欧美日韩亚洲综合一区二区三区_| 男人操女人黄网站| 国产精品野战在线观看| 神马国产精品三级电影在线观看 | av在线播放免费不卡| 制服丝袜大香蕉在线| 亚洲欧美激情综合另类| 免费一级毛片在线播放高清视频 | 成人国语在线视频| 好看av亚洲va欧美ⅴa在| 好男人电影高清在线观看| 99在线人妻在线中文字幕| 在线观看午夜福利视频| 9色porny在线观看| 少妇粗大呻吟视频| 亚洲av电影在线进入| 精品熟女少妇八av免费久了| 久久久久久久久中文| 久久久久久人人人人人| or卡值多少钱| 免费不卡黄色视频| 757午夜福利合集在线观看| 久久国产乱子伦精品免费另类| 久久久精品欧美日韩精品| 黄色片一级片一级黄色片| 久久 成人 亚洲| 免费在线观看影片大全网站| 美女高潮到喷水免费观看| 久久九九热精品免费| 成人18禁高潮啪啪吃奶动态图| 久热爱精品视频在线9| 亚洲精品久久成人aⅴ小说| cao死你这个sao货| 精品久久久久久久久久免费视频| 午夜福利高清视频| 久久香蕉国产精品| 十分钟在线观看高清视频www| 丝袜美足系列| 男女午夜视频在线观看| 成人免费观看视频高清| 桃色一区二区三区在线观看| 国产精品98久久久久久宅男小说| 亚洲男人天堂网一区| 午夜福利视频1000在线观看 | 久久久水蜜桃国产精品网| 久久午夜亚洲精品久久| 高潮久久久久久久久久久不卡| 热re99久久国产66热| 欧美成人午夜精品| 亚洲国产精品999在线| 国产三级黄色录像| 欧美黄色淫秽网站| 欧美日韩精品网址| 日本精品一区二区三区蜜桃| 男人操女人黄网站| 国产伦一二天堂av在线观看| av在线播放免费不卡| 国产精品 国内视频| 天堂影院成人在线观看| 成人av一区二区三区在线看| 国产一区二区三区在线臀色熟女| 在线av久久热| 看片在线看免费视频| 日韩中文字幕欧美一区二区| 国产一区在线观看成人免费| 日韩欧美一区二区三区在线观看| 十八禁网站免费在线| 黄色视频,在线免费观看| av超薄肉色丝袜交足视频| 波多野结衣一区麻豆| 欧美丝袜亚洲另类 | 最新美女视频免费是黄的| 国产亚洲精品av在线| 日韩国内少妇激情av| 一进一出抽搐gif免费好疼| 国产不卡一卡二| 天天添夜夜摸| 免费久久久久久久精品成人欧美视频| 动漫黄色视频在线观看| 国产三级黄色录像| 成人亚洲精品av一区二区| 亚洲色图av天堂| 国产免费av片在线观看野外av| 午夜免费激情av| 我的亚洲天堂| 亚洲全国av大片| 久久久精品欧美日韩精品| 最新在线观看一区二区三区| 中文亚洲av片在线观看爽| 欧美黑人欧美精品刺激| 亚洲成国产人片在线观看| 少妇熟女aⅴ在线视频| 在线观看免费视频网站a站| 1024视频免费在线观看| 丁香六月欧美| 欧美在线黄色| 亚洲色图 男人天堂 中文字幕| 一级毛片高清免费大全| 国产成人欧美| 成人亚洲精品一区在线观看| 自拍欧美九色日韩亚洲蝌蚪91| 欧美精品啪啪一区二区三区| АⅤ资源中文在线天堂| 国产极品粉嫩免费观看在线| 国产伦一二天堂av在线观看| 国产av一区二区精品久久| 亚洲精品中文字幕一二三四区| 欧美中文日本在线观看视频| 黄色成人免费大全| 99在线人妻在线中文字幕| 欧美色欧美亚洲另类二区 | 亚洲一卡2卡3卡4卡5卡精品中文| 一级毛片高清免费大全| 亚洲中文字幕一区二区三区有码在线看 | 久久久久久久久中文| 色婷婷久久久亚洲欧美| 国产午夜福利久久久久久| 日韩欧美一区二区三区在线观看| 久久亚洲真实| 国产av一区在线观看免费| 欧美不卡视频在线免费观看 | 亚洲国产日韩欧美精品在线观看 | 免费在线观看视频国产中文字幕亚洲| 999精品在线视频| 在线永久观看黄色视频| 精品国产美女av久久久久小说| 亚洲性夜色夜夜综合| 日本撒尿小便嘘嘘汇集6| 国产激情久久老熟女| 国产精品乱码一区二三区的特点 | 很黄的视频免费| 久久影院123| 99国产精品一区二区三区| 国产一级毛片七仙女欲春2 | 97人妻精品一区二区三区麻豆 | 涩涩av久久男人的天堂| 精品人妻在线不人妻| 国内毛片毛片毛片毛片毛片| 如日韩欧美国产精品一区二区三区| 欧洲精品卡2卡3卡4卡5卡区| 免费观看精品视频网站| 亚洲熟女毛片儿| 国产xxxxx性猛交| 久久香蕉国产精品| 一级作爱视频免费观看| 国产成人av教育| 精品午夜福利视频在线观看一区| 老汉色∧v一级毛片| 亚洲人成77777在线视频| 成熟少妇高潮喷水视频| 一进一出抽搐gif免费好疼| 18禁美女被吸乳视频| 亚洲av电影不卡..在线观看| 欧美一区二区精品小视频在线| 香蕉丝袜av| 亚洲国产精品久久男人天堂| 亚洲美女黄片视频| 欧美日韩一级在线毛片| 欧美乱色亚洲激情| 国产精品免费一区二区三区在线| 女人被狂操c到高潮| 国产视频一区二区在线看| 91成年电影在线观看| 国产亚洲欧美精品永久| 老司机靠b影院| 亚洲欧美一区二区三区黑人| 波多野结衣巨乳人妻| 久久久国产欧美日韩av| 欧美日韩一级在线毛片| 亚洲成人免费电影在线观看| 国产成人精品无人区| 国产成人av激情在线播放| 女人高潮潮喷娇喘18禁视频| 欧美乱妇无乱码| 精品久久久精品久久久| 国产一区二区在线av高清观看| 久久草成人影院| 夜夜看夜夜爽夜夜摸| 大陆偷拍与自拍| 午夜久久久久精精品| 亚洲少妇的诱惑av| av福利片在线| 手机成人av网站| 亚洲熟妇熟女久久| 久久人妻av系列| 最好的美女福利视频网| 香蕉国产在线看| 无限看片的www在线观看| 久久精品国产清高在天天线| 中出人妻视频一区二区| 亚洲伊人色综图| 99riav亚洲国产免费| 女人爽到高潮嗷嗷叫在线视频| 国产免费av片在线观看野外av| 精品一区二区三区四区五区乱码| 老司机靠b影院| 99国产精品一区二区蜜桃av| 亚洲精品av麻豆狂野| 午夜福利18| 一区二区三区精品91| 日韩国内少妇激情av| 亚洲熟妇熟女久久| √禁漫天堂资源中文www| 大型黄色视频在线免费观看| 大香蕉久久成人网| 亚洲色图av天堂| 淫秽高清视频在线观看| 国内久久婷婷六月综合欲色啪| 18禁观看日本| 欧美成人一区二区免费高清观看 | 欧美成人一区二区免费高清观看 | 国产成人影院久久av| 亚洲av成人一区二区三| 亚洲第一青青草原| 国内久久婷婷六月综合欲色啪| 婷婷精品国产亚洲av在线| 国产亚洲av嫩草精品影院| 欧美乱色亚洲激情| 国产精品自产拍在线观看55亚洲| 国产精品野战在线观看| 一二三四社区在线视频社区8| 亚洲精品国产一区二区精华液| 午夜精品国产一区二区电影| 久久精品成人免费网站| 嫩草影视91久久| 色播亚洲综合网| 久久久久久久久中文| 欧美激情 高清一区二区三区| 大码成人一级视频| 亚洲成人久久性| 亚洲黑人精品在线| 丝袜美足系列| 亚洲成av片中文字幕在线观看| 国产激情久久老熟女| 日本五十路高清| 这个男人来自地球电影免费观看| 色婷婷久久久亚洲欧美| 性色av乱码一区二区三区2| 看免费av毛片| 精品乱码久久久久久99久播| 久久伊人香网站| 精品人妻1区二区| 亚洲五月天丁香| 韩国av一区二区三区四区| 老汉色av国产亚洲站长工具| 欧美中文综合在线视频| 日本欧美视频一区| 欧美丝袜亚洲另类 | 少妇的丰满在线观看| 老汉色∧v一级毛片| 久久精品91无色码中文字幕| 搡老熟女国产l中国老女人| 国产精品二区激情视频| 欧美大码av| 一级a爱片免费观看的视频| 免费在线观看黄色视频的| 亚洲成人免费电影在线观看| 久久久久国内视频| 午夜激情av网站| 国产精品自产拍在线观看55亚洲| 亚洲中文日韩欧美视频| 国产一区二区三区综合在线观看| 久久人妻av系列| 精品一品国产午夜福利视频| 婷婷丁香在线五月| 亚洲自拍偷在线| 久99久视频精品免费| 一二三四在线观看免费中文在| 精品免费久久久久久久清纯| 精品久久久精品久久久| 国产精品av久久久久免费| 国产99久久九九免费精品| 欧美老熟妇乱子伦牲交| 久久人妻av系列| 亚洲片人在线观看| √禁漫天堂资源中文www| 国产在线观看jvid| 精品欧美一区二区三区在线| 亚洲自拍偷在线| 精品无人区乱码1区二区| 动漫黄色视频在线观看| 青草久久国产| 精品不卡国产一区二区三区| 亚洲精华国产精华精| www日本在线高清视频| 免费高清在线观看日韩| 男男h啪啪无遮挡| 欧美黄色片欧美黄色片| 久久影院123| 国产免费av片在线观看野外av| 欧美成人免费av一区二区三区| 欧美日本亚洲视频在线播放| 日本vs欧美在线观看视频| 日韩免费av在线播放| 给我免费播放毛片高清在线观看| 国产免费男女视频| 91av网站免费观看| 欧美日本视频| 少妇裸体淫交视频免费看高清 | 两人在一起打扑克的视频| 每晚都被弄得嗷嗷叫到高潮| 91国产中文字幕| 无限看片的www在线观看| 亚洲性夜色夜夜综合| 国产成人精品久久二区二区免费| 免费高清在线观看日韩| 好看av亚洲va欧美ⅴa在| 精品久久久久久久毛片微露脸| 国产1区2区3区精品| 99在线人妻在线中文字幕| 精品一区二区三区av网在线观看| 亚洲av美国av| 黑人欧美特级aaaaaa片| 岛国视频午夜一区免费看| 国产aⅴ精品一区二区三区波| 黄色女人牲交| 高清在线国产一区| 免费av毛片视频| 高清在线国产一区| 99热只有精品国产| 看免费av毛片| 亚洲av日韩精品久久久久久密| 久久午夜综合久久蜜桃| 国产精品免费一区二区三区在线| 夜夜躁狠狠躁天天躁| 亚洲视频免费观看视频| 久久久久久久久免费视频了| 88av欧美| 最近最新中文字幕大全电影3 | 亚洲人成77777在线视频| 亚洲三区欧美一区| 免费看十八禁软件| 精品国产超薄肉色丝袜足j| 亚洲欧美一区二区三区黑人| 看免费av毛片| 日韩三级视频一区二区三区| 夜夜躁狠狠躁天天躁| 中文字幕人妻丝袜一区二区| 窝窝影院91人妻| av欧美777| 国产av又大| 日本黄色视频三级网站网址| 亚洲人成电影观看| 超碰成人久久| 黄色视频,在线免费观看| 91九色精品人成在线观看| 成人亚洲精品一区在线观看| 精品久久久精品久久久| 日本a在线网址| 岛国在线观看网站| 视频在线观看一区二区三区| 久久香蕉精品热| 这个男人来自地球电影免费观看| 精品一区二区三区视频在线观看免费| 午夜精品在线福利| 大型黄色视频在线免费观看| 亚洲免费av在线视频| 亚洲少妇的诱惑av| 自拍欧美九色日韩亚洲蝌蚪91| 久久狼人影院| 国产精品 欧美亚洲| 日韩精品免费视频一区二区三区| 欧洲精品卡2卡3卡4卡5卡区| 黄片小视频在线播放| 天堂影院成人在线观看| 在线免费观看的www视频| 夜夜躁狠狠躁天天躁| АⅤ资源中文在线天堂| 色播在线永久视频| 国内毛片毛片毛片毛片毛片| 9热在线视频观看99| 日日干狠狠操夜夜爽| 天天一区二区日本电影三级 | 国产一区二区三区视频了| 99在线视频只有这里精品首页| 纯流量卡能插随身wifi吗| 在线观看免费午夜福利视频| 国产精品久久久久久亚洲av鲁大| 久久草成人影院| 亚洲片人在线观看| 国产在线精品亚洲第一网站| 久久久久久久午夜电影| 亚洲午夜理论影院| 少妇裸体淫交视频免费看高清 | 精品久久久久久成人av| 丰满的人妻完整版| 人人澡人人妻人| 91精品三级在线观看| 日日摸夜夜添夜夜添小说| 国产三级黄色录像| 欧美日本视频| 免费人成视频x8x8入口观看| 久热爱精品视频在线9| 在线观看免费日韩欧美大片| 天天躁夜夜躁狠狠躁躁| av片东京热男人的天堂| 在线观看一区二区三区| 国产人伦9x9x在线观看| 免费高清视频大片| 亚洲国产日韩欧美精品在线观看 | 一个人免费在线观看的高清视频| √禁漫天堂资源中文www| 欧美不卡视频在线免费观看 | 久久久久久人人人人人| 亚洲成av人片免费观看| 久久久久精品国产欧美久久久| 久久久国产欧美日韩av| 午夜老司机福利片| 亚洲av五月六月丁香网| 90打野战视频偷拍视频| 亚洲avbb在线观看| 久久国产精品男人的天堂亚洲| 精品欧美国产一区二区三| 亚洲国产高清在线一区二区三 | 国产精品二区激情视频| 久久久水蜜桃国产精品网| 欧美性长视频在线观看| 琪琪午夜伦伦电影理论片6080| 国产精品久久电影中文字幕| avwww免费| 久久这里只有精品19| 色哟哟哟哟哟哟| av在线天堂中文字幕| 成人18禁在线播放| 99国产极品粉嫩在线观看| 69精品国产乱码久久久| 久热爱精品视频在线9| 视频在线观看一区二区三区| 麻豆成人av在线观看| 久久中文字幕人妻熟女| 99香蕉大伊视频| 在线观看舔阴道视频| 91麻豆av在线| 精品电影一区二区在线| 亚洲成av人片免费观看| 欧美绝顶高潮抽搐喷水| 亚洲熟妇熟女久久| 亚洲av片天天在线观看| 女性生殖器流出的白浆| 国内精品久久久久精免费| 国产精品二区激情视频| 最新美女视频免费是黄的| 午夜a级毛片| 性少妇av在线| 波多野结衣av一区二区av| 可以免费在线观看a视频的电影网站| 久久久久亚洲av毛片大全| 一区在线观看完整版| 成年版毛片免费区| 91精品三级在线观看| 一级毛片精品| 亚洲精品国产精品久久久不卡| 亚洲第一电影网av| 97人妻精品一区二区三区麻豆 | 欧美日韩乱码在线| av电影中文网址| 大陆偷拍与自拍| 亚洲自偷自拍图片 自拍| 国产成人精品无人区| 黄色成人免费大全| 十八禁人妻一区二区| 亚洲一区二区三区色噜噜| 别揉我奶头~嗯~啊~动态视频| 日本黄色视频三级网站网址| 天堂√8在线中文| 精品久久久久久成人av| 精品国产一区二区三区四区第35| 99久久综合精品五月天人人| 91成人精品电影| 色av中文字幕| 美女午夜性视频免费| 夜夜夜夜夜久久久久| 啦啦啦免费观看视频1| 国产亚洲欧美精品永久| 午夜a级毛片| 国产亚洲欧美精品永久| 国产在线观看jvid| 首页视频小说图片口味搜索| 丝袜在线中文字幕| 中文字幕人妻熟女乱码| 久久久久久免费高清国产稀缺| 欧美人与性动交α欧美精品济南到| 12—13女人毛片做爰片一| 欧美成人一区二区免费高清观看 | 麻豆久久精品国产亚洲av| 一本久久中文字幕| 亚洲中文字幕日韩| 后天国语完整版免费观看| 18禁观看日本| 久久久久久亚洲精品国产蜜桃av| 免费少妇av软件| 久久久国产成人精品二区| 波多野结衣av一区二区av| 美女扒开内裤让男人捅视频| 一区二区日韩欧美中文字幕| 很黄的视频免费| 巨乳人妻的诱惑在线观看| 亚洲国产精品久久男人天堂| 他把我摸到了高潮在线观看| 淫妇啪啪啪对白视频| 亚洲av成人av| 9191精品国产免费久久| 精品国产乱码久久久久久男人| 欧美最黄视频在线播放免费| 色综合站精品国产| 又黄又粗又硬又大视频| 母亲3免费完整高清在线观看| 精品不卡国产一区二区三区| 别揉我奶头~嗯~啊~动态视频| av天堂在线播放| 亚洲avbb在线观看| 国产精品二区激情视频| 国产亚洲精品综合一区在线观看 | 日韩精品免费视频一区二区三区| 国产精品亚洲av一区麻豆| 好男人电影高清在线观看| 亚洲第一欧美日韩一区二区三区| 国产欧美日韩一区二区三| 久久久精品国产亚洲av高清涩受| 村上凉子中文字幕在线| 成人三级做爰电影| 在线免费观看的www视频| 麻豆一二三区av精品| 狠狠狠狠99中文字幕| 黑人巨大精品欧美一区二区mp4| 在线观看免费午夜福利视频| 最好的美女福利视频网| 欧美一级毛片孕妇| av欧美777| 人妻丰满熟妇av一区二区三区| 淫秽高清视频在线观看| 欧美日韩瑟瑟在线播放| 国产精华一区二区三区| 18禁观看日本| 欧美黄色淫秽网站| 日韩中文字幕欧美一区二区| 在线观看免费午夜福利视频| 婷婷精品国产亚洲av在线| 免费久久久久久久精品成人欧美视频| 男女床上黄色一级片免费看| 看片在线看免费视频| 91av网站免费观看| 国产精品99久久99久久久不卡| 给我免费播放毛片高清在线观看| 国产高清视频在线播放一区| 久久久国产成人精品二区| 国产精品久久久人人做人人爽| 在线播放国产精品三级| 亚洲熟妇中文字幕五十中出| 色综合婷婷激情| 视频区欧美日本亚洲| 91在线观看av| 69av精品久久久久久| 亚洲三区欧美一区| 99久久国产精品久久久| 亚洲国产精品sss在线观看| 伦理电影免费视频| 亚洲中文av在线| 欧美激情久久久久久爽电影 | 欧美乱码精品一区二区三区| 国产精品日韩av在线免费观看 | videosex国产| 欧美日韩瑟瑟在线播放| 又大又爽又粗| 天天躁夜夜躁狠狠躁躁| 精品欧美一区二区三区在线| 午夜免费观看网址| 麻豆一二三区av精品| 狠狠狠狠99中文字幕| 动漫黄色视频在线观看| 日本vs欧美在线观看视频| 日本 av在线| 脱女人内裤的视频| 日韩欧美免费精品| 亚洲欧美日韩另类电影网站| 午夜精品在线福利| 无遮挡黄片免费观看| 国产人伦9x9x在线观看| 一个人免费在线观看的高清视频| 美女国产高潮福利片在线看| 这个男人来自地球电影免费观看| 此物有八面人人有两片| 亚洲男人的天堂狠狠| 国产一区二区三区综合在线观看|