• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    科技數(shù)據(jù)管理與共享服務(wù)效果評(píng)價(jià)研究探索

    2013-03-22 02:07:39朱艷華孫黎然胡良霖黎建輝
    中國(guó)科技資源導(dǎo)刊 2013年4期
    關(guān)鍵詞:數(shù)據(jù)服務(wù)數(shù)據(jù)庫(kù)評(píng)估

    朱艷華 孫黎然 胡良霖 黎建輝

    (中國(guó)科學(xué)院計(jì)算機(jī)網(wǎng)絡(luò)信息中心,北京 100190)

    科技數(shù)據(jù)管理與共享服務(wù)效果評(píng)價(jià)研究探索

    朱艷華 孫黎然 胡良霖 黎建輝

    (中國(guó)科學(xué)院計(jì)算機(jī)網(wǎng)絡(luò)信息中心,北京 100190)

    采用文獻(xiàn)調(diào)研和專(zhuān)家訪(fǎng)談等方式,深入研究科技數(shù)據(jù)資源后評(píng)估方法和機(jī)制,通過(guò)借鑒國(guó)際上科技項(xiàng)目管理后評(píng)估模式以及國(guó)內(nèi)科技數(shù)據(jù)資源建設(shè)和服務(wù)后評(píng)估實(shí)踐,提出科技數(shù)據(jù)應(yīng)用服務(wù)效果評(píng)價(jià)指標(biāo)選擇的基本原則和內(nèi)容框架。期待通過(guò)制定完善的數(shù)據(jù)服務(wù)效果評(píng)價(jià)體系及有效的實(shí)施方案,提高科技數(shù)據(jù)建設(shè)與運(yùn)行管理的規(guī)范性、公正性和科學(xué)性,推進(jìn)數(shù)據(jù)資源檢索和服務(wù)的持續(xù)發(fā)展,提升科技數(shù)據(jù)的集成和共享水平。

    科技數(shù)據(jù);共享服務(wù);資源共享;服務(wù)評(píng)價(jià); 后評(píng)估

    1 引言

    當(dāng)前我國(guó)科技數(shù)據(jù)建設(shè)、共享與應(yīng)用的一個(gè)顯著特點(diǎn)是項(xiàng)目運(yùn)作機(jī)制,這種運(yùn)作模式具有階段離散性的顯著特點(diǎn),與科技數(shù)據(jù)資源持續(xù)積累的連續(xù)性不相適應(yīng)??茖W(xué)數(shù)據(jù)庫(kù)建設(shè)是一個(gè)長(zhǎng)期積累的過(guò)程,尤其對(duì)于那些反映客觀(guān)世界發(fā)展規(guī)律的數(shù)據(jù),長(zhǎng)期收集整理具有更大的分析、研究和利用價(jià)值。以項(xiàng)目形式運(yùn)作,各個(gè)數(shù)據(jù)庫(kù)得到的支持力度不同。那些獲得持續(xù)支持的數(shù)據(jù)庫(kù),建庫(kù)時(shí)間長(zhǎng),資源豐富,更新及時(shí);服務(wù)形式多樣,很大程度上滿(mǎn)足了用戶(hù)的特定需求,逐步形成了穩(wěn)定的用戶(hù)群;相反,那些只得到離散支持的建庫(kù)單位,持續(xù)建庫(kù)時(shí)間短,有些還停留在自建自用階段,能提供的資源有限,服務(wù)形式單調(diào)。數(shù)據(jù)庫(kù)建設(shè)服務(wù)成效與有無(wú)經(jīng)費(fèi)支持以及支持力度有關(guān)。

    數(shù)據(jù)庫(kù)項(xiàng)目運(yùn)作機(jī)制在國(guó)內(nèi)外具有普遍性,因此以上問(wèn)題一直被大家關(guān)注,國(guó)內(nèi)外的研究機(jī)構(gòu)和管理部門(mén)針對(duì)這種情況先后進(jìn)行了深入的探索,后評(píng)估模式就是在這個(gè)過(guò)程中提出并逐漸發(fā)展起來(lái)的。所謂科研項(xiàng)目后評(píng)估,指在科研項(xiàng)目完成后的一段時(shí)間內(nèi),由獨(dú)立的、專(zhuān)業(yè)化咨詢(xún)服務(wù)機(jī)構(gòu)或項(xiàng)目執(zhí)行部門(mén)相對(duì)獨(dú)立的專(zhuān)門(mén)評(píng)估機(jī)構(gòu),遵循一定的原則、程序和評(píng)價(jià)指標(biāo),運(yùn)用科學(xué)、公正和可行的方法,按照有關(guān)規(guī)定和規(guī)范化要求,依據(jù)項(xiàng)目的實(shí)際數(shù)據(jù)和必要的預(yù)測(cè)數(shù)據(jù),對(duì)科研項(xiàng)目的執(zhí)行過(guò)程、效益作用和影響等進(jìn)行系統(tǒng)、客觀(guān)的專(zhuān)業(yè)化評(píng)判[1]。在數(shù)據(jù)庫(kù)科研項(xiàng)目管理中引入后評(píng)估機(jī)制,制定完善的科技數(shù)據(jù)共享效果評(píng)價(jià)體系,可以在一定程度上弱化目前數(shù)據(jù)庫(kù)項(xiàng)目運(yùn)作離散性與數(shù)據(jù)資源持續(xù)積累連續(xù)性之間的矛盾,對(duì)于推進(jìn)數(shù)據(jù)資源持續(xù)發(fā)展具有現(xiàn)實(shí)意義。

    筆者在總結(jié)和借鑒國(guó)內(nèi)外現(xiàn)有科技資源共享效果評(píng)估的理論和實(shí)踐的基礎(chǔ)上,實(shí)地走訪(fǎng)了中國(guó)科學(xué)院具有代表性的6家研究所,收集和整理了這些單位從事科學(xué)數(shù)據(jù)庫(kù)建設(shè)和研究的領(lǐng)域?qū)<覍?duì)數(shù)據(jù)共享效果評(píng)價(jià)的意見(jiàn)和建議。通過(guò)數(shù)據(jù)資源共享評(píng)價(jià)方法和機(jī)制的研究,結(jié)合信息技術(shù)的最新發(fā)展,立足當(dāng)下面向未來(lái),探索科技數(shù)據(jù)共享服務(wù)效益評(píng)價(jià)指標(biāo)選取原則和指導(dǎo)性?xún)?nèi)容框架。下一步計(jì)劃結(jié)合中國(guó)科學(xué)院信息化項(xiàng)目的具體要求和特點(diǎn),細(xì)化指導(dǎo)性框架中的各項(xiàng)指標(biāo),制定面對(duì)科學(xué)數(shù)據(jù)庫(kù)實(shí)施層面的指標(biāo)體系和評(píng)分模型。

    本文將在分析研究國(guó)外科技項(xiàng)目管理評(píng)價(jià)和我國(guó)平臺(tái)認(rèn)定和服務(wù)績(jī)效考核指標(biāo)體系的基礎(chǔ)上,通過(guò)對(duì)中國(guó)科學(xué)院科技數(shù)據(jù)資源及其服務(wù)的建設(shè)與應(yīng)用的調(diào)查分析,提出科學(xué)數(shù)據(jù)服務(wù)效果評(píng)價(jià)指標(biāo)框架。

    2 國(guó)外科技項(xiàng)目管理評(píng)價(jià)研究

    當(dāng)前,國(guó)外在科技資源共享評(píng)估研究和實(shí)踐方面還十分有限,更多的是針對(duì)科技基礎(chǔ)設(shè)施共享政策和科研項(xiàng)目管理的研究。國(guó)外,科技評(píng)估已經(jīng)形成了較為成熟的理論框架體系,科技評(píng)估在一些發(fā)達(dá)國(guó)家已成為制度化、經(jīng)常性的工作行為,并建立了科技評(píng)估支持系統(tǒng)[2]。從更廣的角度看,科技資源共享評(píng)估也屬于科研活動(dòng)的范疇,是科技項(xiàng)目評(píng)價(jià)的組成部分,因此,在科技資源共享評(píng)價(jià)方面,我們可以借鑒國(guó)外績(jī)效管理與評(píng)估的有關(guān)理論和實(shí)踐。為此分別對(duì)美國(guó)、英國(guó)及澳大利亞的科技數(shù)據(jù)績(jī)效評(píng)估機(jī)構(gòu)進(jìn)行了調(diào)研,內(nèi)容涉及數(shù)據(jù)開(kāi)放、數(shù)據(jù)質(zhì)量、數(shù)據(jù)共享及管理評(píng)價(jià)體系等多個(gè)方面。

    2.1 美國(guó)

    美國(guó)科研經(jīng)費(fèi)的來(lái)源主要包括政府基金和非政府基金兩部分。本文著重對(duì)美國(guó)政府基金資助的科研機(jī)構(gòu)績(jī)效評(píng)估模式進(jìn)行調(diào)研,調(diào)研機(jī)構(gòu)主要是美國(guó)國(guó)家科學(xué)基金會(huì)、美國(guó)國(guó)立衛(wèi)生研究院及美國(guó)航空航天局。

    (1)美國(guó)國(guó)家科學(xué)基金會(huì)

    美國(guó)國(guó)家科學(xué)基金會(huì)(National Science Foundation,NSF)是根據(jù)美國(guó)國(guó)家科學(xué)基金法設(shè)立,用于支持美國(guó)國(guó)內(nèi)大學(xué)、學(xué)院和科研機(jī)構(gòu)基礎(chǔ)學(xué)科的研究和教育。NSF的績(jī)效評(píng)估采取一種自下而上的方式,先從項(xiàng)目評(píng)估開(kāi)始,逐步向上到與機(jī)構(gòu)具體的計(jì)劃目標(biāo)相對(duì)應(yīng)的“產(chǎn)出”,再到上一層次與機(jī)構(gòu)戰(zhàn)略性計(jì)劃目標(biāo)相對(duì)應(yīng)的“成果”,最后評(píng)估科技活動(dòng)對(duì)NSF長(zhǎng)期使命以及對(duì)國(guó)家、社會(huì)的整體影響[3]。

    1993年,美國(guó)國(guó)會(huì)通過(guò)《政府績(jī)效與結(jié)果法案》 (Government Perform ance and Results Act,GPRA),第一次以立法的形式引入了績(jī)效評(píng)估對(duì)政府行政管理及結(jié)果的評(píng)估,從以往的“投入—產(chǎn)出”模式改變?yōu)椤澳繕?biāo)—結(jié)果”模式,即根據(jù)各機(jī)構(gòu)所設(shè)定的任務(wù)目標(biāo)來(lái)衡量其結(jié)果,并首次提出要把聯(lián)邦政府機(jī)構(gòu)的“結(jié)果”與制定預(yù)算過(guò)程統(tǒng)一起來(lái),內(nèi)容包括整體戰(zhàn)略計(jì)劃及年度績(jī)效計(jì)劃[4]。美國(guó)國(guó)家科學(xué)基金會(huì)的績(jī)效評(píng)估就在此法案指導(dǎo)下實(shí)施。NSF在2006年9月發(fā)布的2006-2011年度規(guī)劃中將其績(jī)效目標(biāo)定位為發(fā)現(xiàn)、學(xué)習(xí)、基礎(chǔ)設(shè)施研究及服務(wù)?!鞍l(fā)現(xiàn)”旨在鼓勵(lì)前沿領(lǐng)域知識(shí)創(chuàng)新;“學(xué)習(xí)”意在培養(yǎng)有廣泛基礎(chǔ)的科技人力資源、提高公民的科學(xué)素養(yǎng);“基礎(chǔ)設(shè)施研究”通過(guò)建設(shè)關(guān)鍵領(lǐng)域先進(jìn)儀器設(shè)備提升國(guó)家的研究能力;“服務(wù)”著重在為教育和科學(xué)與工程領(lǐng)域研究提供卓越支持。

    (2)美國(guó)國(guó)立衛(wèi)生研究院

    美國(guó)國(guó)立衛(wèi)生研究院(National Institutes of Health,NIH)成立于1887年,是美國(guó)聯(lián)邦政府唯一的國(guó)家級(jí)公立生物醫(yī)學(xué)研究機(jī)構(gòu)。NIH的績(jī)效管理是一個(gè)系統(tǒng)過(guò)程,由相互關(guān)聯(lián)、相互依存的5個(gè)部分組成,即績(jī)效計(jì)劃的制定、實(shí)施與管理、績(jī)效評(píng)估、績(jī)效反饋及評(píng)估結(jié)果的應(yīng)用[5]。NIH 的績(jī)效目標(biāo)按照職能領(lǐng)域來(lái)組織,NIH的每個(gè)科研項(xiàng)目都有5個(gè)功能領(lǐng)域,具體考核科學(xué)研究結(jié)果、研究結(jié)果的交流與轉(zhuǎn)移、能力建設(shè)和研究資源、人力資源的戰(zhàn)略管理和項(xiàng)目監(jiān)管和改進(jìn)[6]。

    (3)美國(guó)國(guó)家航天局

    美國(guó)國(guó)家航天局(National Aeronautics and Space Adm inistration,NASA)是美國(guó)負(fù)責(zé)太空計(jì)劃的政府機(jī)構(gòu),擁有最先進(jìn)的航空航天技術(shù),它在載人空間飛行、航空學(xué)、空間科學(xué)等方面取得很大的成就。由于NASA所從事的項(xiàng)目多以規(guī)模大、周期長(zhǎng)、風(fēng)險(xiǎn)高、復(fù)雜程度高的航天產(chǎn)品和能力的研究、開(kāi)發(fā)為主,而且新項(xiàng)目在NASA內(nèi)部產(chǎn)生的頻率很高。故此,NASA的項(xiàng)目組織形式多以項(xiàng)目和常設(shè)的矩陣組織為主,評(píng)估內(nèi)容包括關(guān)鍵里程碑評(píng)審、技術(shù)監(jiān)控評(píng)審和產(chǎn)品完整性評(píng)審。

    2.2 英國(guó)

    英國(guó)政府有一套完善的科研績(jī)效評(píng)估體系,政府力求通過(guò)績(jī)效評(píng)估保證科技投資滿(mǎn)足國(guó)家的戰(zhàn)略需求。英國(guó)研究理事會(huì)(RCUK)是國(guó)家層面的戰(zhàn)略投資機(jī)構(gòu),其績(jī)效評(píng)估在國(guó)家層面、研究理事會(huì)層面和各獨(dú)立研究理事會(huì)層面遵循一定的程序和準(zhǔn)則開(kāi)展,確保評(píng)估工作的規(guī)范化和日?;?,共同構(gòu)成了在目標(biāo)導(dǎo)向下的績(jī)效評(píng)估與管理體系。英國(guó)研究理事會(huì)績(jī)效管理與評(píng)估包括兩個(gè)層面,一是在整體層面上績(jī)效管理與評(píng)估,二是在各研究理事會(huì)層面上的管理與評(píng)估。政府采用一套完整的科研績(jī)效評(píng)估體系為科技決策、資源分配和科技管理提供支撐,通過(guò)績(jī)效評(píng)估保證其科技投資的價(jià)值和效率。研究理事會(huì)年度執(zhí)行計(jì)劃圍繞國(guó)家戰(zhàn)略計(jì)劃展開(kāi),執(zhí)行報(bào)告以年度執(zhí)行計(jì)劃設(shè)定的目標(biāo)和時(shí)間節(jié)點(diǎn)為依據(jù)展開(kāi)評(píng)估[7]。在研究理事會(huì)層面,學(xué)科評(píng)估、科技影響力評(píng)估以及各研究理事會(huì)圍繞各自使命和學(xué)科特點(diǎn)展開(kāi)的各項(xiàng)評(píng)估,均已在國(guó)家績(jī)效評(píng)價(jià)體系中設(shè)定了目標(biāo),評(píng)估方法與評(píng)估結(jié)果向社會(huì)公布,接受公眾的質(zhì)詢(xún)[8]。

    2.3 澳大利亞

    澳大利亞研究理事會(huì)(ARC)于1988年依據(jù)《就業(yè)、教育與培訓(xùn)法》成立,成為國(guó)家就業(yè)、教育與培訓(xùn)委員會(huì)的組成部分,負(fù)責(zé)資助與管理大學(xué)和大學(xué)以外的科學(xué)研究及其教育計(jì)劃及項(xiàng)目,指導(dǎo)績(jī)效評(píng)估。ARC的資助類(lèi)型分為“發(fā)現(xiàn)”和“合作”兩種?!鞍l(fā)現(xiàn)”旨在發(fā)展和保持澳大利亞在廣泛的學(xué)科領(lǐng)域內(nèi)具有國(guó)際水準(zhǔn)的高水平科學(xué)基礎(chǔ);而“合作”則是試圖通過(guò)加強(qiáng)澳大利亞國(guó)家創(chuàng)新系統(tǒng)內(nèi)部以及與國(guó)外創(chuàng)新系統(tǒng)的聯(lián)系,鼓勵(lì)和拓展各種合作方式,以使科學(xué)研究更好地為社會(huì)經(jīng)濟(jì)發(fā)展服務(wù)[9]。ARC制定計(jì)劃的指導(dǎo)原則為卓越性、集中性、靈活性、戰(zhàn)略性、伙伴關(guān)系、橋梁作用和績(jī)效管理。與之相對(duì)應(yīng)的7個(gè)戰(zhàn)略行動(dòng)領(lǐng)域是:發(fā)現(xiàn)、合作、研究培訓(xùn)與職業(yè)發(fā)展、研究設(shè)施、優(yōu)先領(lǐng)域制定、公眾理解科學(xué)和績(jī)效管理[10]。

    3 我國(guó)平臺(tái)認(rèn)定和服務(wù)績(jī)效考核指標(biāo)體系

    我國(guó)科技部科學(xué)數(shù)據(jù)共享工程采用“平臺(tái)認(rèn)定”和“服務(wù)績(jī)效考核”的工作模式,發(fā)布了國(guó)家科技基礎(chǔ)條件平臺(tái)認(rèn)定和運(yùn)行服務(wù)績(jī)效考核指標(biāo)[11]。其中,認(rèn)定指標(biāo)從科技基礎(chǔ)條件平臺(tái)“整合、共享、完善、提高”的理念出發(fā),重點(diǎn)考察科技基礎(chǔ)條件平臺(tái)資源整合狀況以及運(yùn)行、管理機(jī)制和長(zhǎng)效發(fā)展能力,主要包括數(shù)據(jù)資源整合、組織管理、運(yùn)行服務(wù)和持續(xù)發(fā)展能力等4個(gè)一級(jí)指標(biāo)和13個(gè)二級(jí)指標(biāo)。服務(wù)績(jī)效考核指標(biāo)在“認(rèn)定指標(biāo)”基礎(chǔ)上,突出科技基礎(chǔ)條件平臺(tái)的共享作用,重點(diǎn)考察科技基礎(chǔ)條件平臺(tái)的服務(wù)數(shù)量與服務(wù)成效,重視用戶(hù)評(píng)價(jià)的反饋,主要包括服務(wù)數(shù)量、服務(wù)成效、運(yùn)行管理和資源整合等4個(gè)一級(jí)指標(biāo)和12個(gè)二級(jí)指標(biāo)??己酥笜?biāo)是落實(shí)國(guó)家科技基礎(chǔ)條件平臺(tái)以獎(jiǎng)代補(bǔ)制度、撥發(fā)共享平臺(tái)分中心經(jīng)費(fèi)的重要依據(jù),也是共享平臺(tái)分中心動(dòng)態(tài)調(diào)整的重要參考。

    各平臺(tái)分中心依據(jù)《國(guó)家科技基礎(chǔ)條件平臺(tái)認(rèn)定指標(biāo)》和《國(guó)家科技基礎(chǔ)條件平臺(tái)運(yùn)行服務(wù)績(jī)效考核指標(biāo)》,制定了適合本分中心的認(rèn)定指標(biāo)和績(jī)效考核指標(biāo)。如,地球系統(tǒng)科學(xué)數(shù)據(jù)共享平臺(tái)作為認(rèn)定的國(guó)家科技基礎(chǔ)條件平臺(tái)之一,結(jié)合本平臺(tái)實(shí)際情況,細(xì)化和量化了認(rèn)定指標(biāo)和績(jī)效考核指標(biāo),制定了《地球系統(tǒng)科學(xué)數(shù)據(jù)共享平臺(tái)分中心認(rèn)定指標(biāo)》和《地球系統(tǒng)科學(xué)數(shù)據(jù)共享平臺(tái)分中心運(yùn)行服務(wù)績(jī)效考核指標(biāo)》,對(duì)本中心各項(xiàng)工作完成程度進(jìn)行評(píng)價(jià)。其中,認(rèn)定指標(biāo)包括資源整合、組織管理、網(wǎng)站建設(shè)、運(yùn)行服務(wù)和持續(xù)發(fā)展能力等5個(gè)一級(jí)指標(biāo)和16個(gè)二級(jí)指標(biāo),重點(diǎn)考察平臺(tái)資源整合狀況以及運(yùn)行、管理機(jī)制和長(zhǎng)效發(fā)展能力;績(jī)效考核包括服務(wù)數(shù)量、服務(wù)成效、網(wǎng)站平臺(tái)、運(yùn)行管理和資源整合等5個(gè)一級(jí)指標(biāo)和16個(gè)二級(jí)指標(biāo),重點(diǎn)考核運(yùn)行服務(wù),如服務(wù)的數(shù)量、服務(wù)成效和典型案例,突出對(duì)重大項(xiàng)目的服務(wù)成效以及創(chuàng)新性服務(wù)模式和持續(xù)資源整合機(jī)制的建立。

    政策引導(dǎo)和需求驅(qū)動(dòng)是數(shù)據(jù)庫(kù)平臺(tái)建設(shè)階段有效轉(zhuǎn)入運(yùn)行服務(wù)階段的重要保障。我國(guó)“十二五”科技規(guī)劃中提到要加強(qiáng)重點(diǎn)科技平臺(tái)建設(shè),建立國(guó)家科技平臺(tái)認(rèn)定、績(jī)效考核評(píng)估和以獎(jiǎng)代補(bǔ)制度,推動(dòng)平臺(tái)運(yùn)行服務(wù)???jī)效考核指標(biāo)反映共享平臺(tái)工作重點(diǎn)和發(fā)展導(dǎo)向,是對(duì)共享平臺(tái)分中心各項(xiàng)工作完成程度評(píng)價(jià)的標(biāo)準(zhǔn)和依據(jù)???jī)效評(píng)價(jià)也是確??萍紬l件資源的高效匯聚和利用的重要手段和政策工具,政府需要這樣的評(píng)估結(jié)果信息以確定對(duì)平臺(tái)的支持和獎(jiǎng)勵(lì),以便進(jìn)一步地激勵(lì)其發(fā)展[12]。

    研究國(guó)外科技項(xiàng)目管理后評(píng)估模式,特別是科技數(shù)據(jù)資源建設(shè)和應(yīng)用服務(wù)類(lèi)項(xiàng)目評(píng)估模式的實(shí)踐,對(duì)我們具有重要的借鑒和指導(dǎo)意義。參考國(guó)外績(jī)效指標(biāo)制定的基本原則,如澳大利亞研究理事會(huì)(ARC)制定計(jì)劃的7項(xiàng)指導(dǎo)原則和歐盟通用績(jī)效評(píng)估框架(CAF),制定我們的科技數(shù)據(jù)共享服務(wù)評(píng)價(jià)指標(biāo)選擇原則;通過(guò)借鑒國(guó)外績(jī)效評(píng)估指標(biāo)及其評(píng)價(jià)細(xì)則,拓寬數(shù)據(jù)共享服務(wù)評(píng)價(jià)思路,反思評(píng)價(jià)體系中針對(duì)服務(wù)成效、人才隊(duì)伍、學(xué)生培養(yǎng)等指標(biāo)的評(píng)估方法,如美國(guó)NSF績(jī)效評(píng)估指標(biāo)如何衡量其創(chuàng)意成果、人員成果、基礎(chǔ)設(shè)施和服務(wù)目標(biāo);學(xué)習(xí)吸收國(guó)外績(jī)效評(píng)估流程和評(píng)估工具,體現(xiàn)評(píng)價(jià)工作的公正性、專(zhuān)業(yè)性和靈活性。如,美國(guó)政府為實(shí)施績(jī)效方案開(kāi)發(fā)了專(zhuān)門(mén)的績(jī)效評(píng)價(jià)系統(tǒng)PART,使用者可對(duì)各個(gè)問(wèn)題的分值進(jìn)行調(diào)整;英國(guó)研究理事會(huì)RCUK將績(jī)效評(píng)價(jià)結(jié)果及時(shí)公布于眾,并要求被評(píng)價(jià)機(jī)構(gòu)及時(shí)制定出相應(yīng)的績(jī)效改善計(jì)劃。

    4 案例分析

    4.1 評(píng)價(jià)現(xiàn)狀分析

    中國(guó)科學(xué)院科技數(shù)據(jù)資源及其服務(wù)的建設(shè)與應(yīng)用已經(jīng)持續(xù)了20多年,截至“十一五”“數(shù)據(jù)應(yīng)用環(huán)境的建設(shè)和服務(wù)”項(xiàng)目順利驗(yàn)收,公開(kāi)共享了人地系統(tǒng)數(shù)據(jù)庫(kù)、資源環(huán)境遙感數(shù)據(jù)庫(kù)、空間科學(xué)數(shù)據(jù)庫(kù)、天文科學(xué)數(shù)據(jù)庫(kù)、微生物與病毒數(shù)據(jù)庫(kù)、動(dòng)物數(shù)據(jù)庫(kù)、材料科學(xué)數(shù)據(jù)庫(kù)、化學(xué)數(shù)據(jù)庫(kù)等8個(gè)主題數(shù)據(jù)庫(kù);化學(xué)參考型數(shù)據(jù)庫(kù)和中國(guó)植物物種信息數(shù)據(jù)庫(kù)等2個(gè)參考型數(shù)據(jù)庫(kù);冰雪凍土環(huán)境數(shù)據(jù)庫(kù)、聚變數(shù)據(jù)庫(kù)、青海湖聯(lián)合科研基地?cái)?shù)據(jù)庫(kù)和生態(tài)系統(tǒng)與功能區(qū)劃數(shù)據(jù)庫(kù)等4個(gè)專(zhuān)題數(shù)據(jù)庫(kù);并從“十五”期間已支持且服務(wù)比較好、使用比較廣泛的數(shù)據(jù)庫(kù)中擇優(yōu)確定了37個(gè)重點(diǎn)專(zhuān)業(yè)數(shù)據(jù)庫(kù)。此外,還積極引進(jìn)/鏡像常用的國(guó)際優(yōu)質(zhì)數(shù)據(jù)資源,努力建成國(guó)際重要科學(xué)數(shù)據(jù)資源集結(jié)點(diǎn)[13]??萍紨?shù)據(jù)資源共計(jì)148TB,累計(jì)訪(fǎng)問(wèn)量達(dá)2606萬(wàn)人次,數(shù)據(jù)下載量累計(jì)達(dá)243TB,服務(wù)科研項(xiàng)目120余項(xiàng),取得了豐碩的科技成果和良好的社會(huì)效益。

    目前,中科院科技數(shù)據(jù)建設(shè)、共享服務(wù)與應(yīng)用也是采用項(xiàng)目運(yùn)作機(jī)制,因此科技數(shù)據(jù)共享評(píng)價(jià)也是圍繞著技術(shù)檢查和評(píng)審驗(yàn)收加以實(shí)施。中國(guó)科學(xué)院科技數(shù)據(jù)共享服務(wù)評(píng)價(jià)現(xiàn)狀如圖1所示。

    從圖1中可以看出,中國(guó)科學(xué)院科技數(shù)據(jù)共享服務(wù)評(píng)價(jià)指標(biāo)主要包括數(shù)據(jù)量/訪(fǎng)問(wèn)量/下載量/支持服務(wù)項(xiàng)數(shù)量、技術(shù)檢查、同行專(zhuān)家的定性評(píng)議以及項(xiàng)目評(píng)審驗(yàn)收。數(shù)據(jù)資源量、訪(fǎng)問(wèn)量、下載量和服務(wù)科研項(xiàng)目數(shù)從4個(gè)方面反映了科技數(shù)據(jù)資源建設(shè)和應(yīng)用服務(wù)的情況,也是較為公認(rèn)的客觀(guān)指標(biāo),但這些指標(biāo)尚不能反映數(shù)據(jù)服務(wù)的全貌,不能充分彰顯科技數(shù)據(jù)服務(wù)社會(huì)所得到的綜合效益。

    不完善的科技數(shù)據(jù)應(yīng)用效果評(píng)價(jià)方式可能會(huì)誤導(dǎo)資源建設(shè)者“建設(shè)追求資源量、服務(wù)追求訪(fǎng)問(wèn)量(含下載量)、應(yīng)用(項(xiàng)目)計(jì)數(shù)不計(jì)質(zhì)”??陀^(guān)評(píng)價(jià)科技數(shù)據(jù)的共享應(yīng)用機(jī)制和效益已是科技數(shù)據(jù)資源的持續(xù)建設(shè)和良性發(fā)展的重要內(nèi)容,通過(guò)完善的科技數(shù)據(jù)共享應(yīng)用機(jī)制和效益評(píng)估實(shí)現(xiàn)對(duì)科技數(shù)據(jù)資源建設(shè)的方向性引導(dǎo),實(shí)現(xiàn)科技資源“質(zhì)與量并重”的建設(shè),推進(jìn)科技數(shù)據(jù)資源建設(shè)和共享應(yīng)用的可持續(xù)發(fā)展。通過(guò)后評(píng)估舉措為科技數(shù)據(jù)的持續(xù)建設(shè)和共享應(yīng)用提供科學(xué)的決策依據(jù),促進(jìn)中科院科技數(shù)據(jù)資源工作的良性可持續(xù)發(fā)展。

    圖1 中國(guó)科學(xué)院科技數(shù)據(jù)共享服務(wù)評(píng)價(jià)現(xiàn)狀

    4.2 專(zhuān)家走訪(fǎng)調(diào)研

    我們選取了中國(guó)科學(xué)院地學(xué)遙感、生命科學(xué)、天文、空間和物理等學(xué)科領(lǐng)域,實(shí)地調(diào)研地理科學(xué)與資源研究所、微生物研究所、植物研究所、國(guó)家天文臺(tái)、國(guó)家空間科學(xué)中心和高能物理研究所從事數(shù)據(jù)庫(kù)建設(shè)和研究的專(zhuān)家,詳細(xì)了解這些單位數(shù)據(jù)資源建設(shè)和運(yùn)行服務(wù)情況,總結(jié)和分析一線(xiàn)研究人員對(duì)數(shù)據(jù)服務(wù)效果評(píng)估的意見(jiàn)和建議。

    目前,科技數(shù)據(jù)評(píng)價(jià)指標(biāo)存在不足。有些專(zhuān)家認(rèn)為,現(xiàn)有考核指標(biāo)未能充分體現(xiàn)科技數(shù)據(jù)與商業(yè)數(shù)據(jù)的區(qū)別,建議科技數(shù)據(jù)評(píng)價(jià)重點(diǎn)放在其對(duì)科研的支撐作用,考核科技數(shù)據(jù)的領(lǐng)先性、前瞻性、對(duì)科學(xué)家的作用等。有些專(zhuān)家認(rèn)為,目前的數(shù)據(jù)服務(wù)沒(méi)有考慮到一般民眾的需求,科技數(shù)據(jù)服務(wù)效果評(píng)價(jià)范圍應(yīng)再寬一些。科技數(shù)據(jù)的價(jià)值不僅體現(xiàn)在對(duì)科學(xué)研究的貢獻(xiàn)上,還要體現(xiàn)在全民科普能力的提高上,雖然暫時(shí)不會(huì)產(chǎn)生明顯的經(jīng)濟(jì)效益。

    針對(duì)將來(lái)的數(shù)據(jù)服務(wù)評(píng)價(jià)指標(biāo),專(zhuān)家總體建議評(píng)價(jià)方法要客觀(guān)和簡(jiǎn)單。具體建議包括:(1)目前數(shù)據(jù)服務(wù)缺乏共享的氛圍,影響數(shù)據(jù)公開(kāi)共享和應(yīng)用服務(wù),評(píng)估指標(biāo)應(yīng)對(duì)共享意識(shí)加以引導(dǎo);(2)數(shù)據(jù)質(zhì)量和規(guī)范的提升對(duì)服務(wù)效果影響非常大,是個(gè)漸進(jìn)的過(guò)程,評(píng)價(jià)指標(biāo)應(yīng)予以加強(qiáng);(3)評(píng)價(jià)指標(biāo)要考慮每一個(gè)學(xué)科的實(shí)際情況,有些領(lǐng)域研究范圍窄,難以提供大量數(shù)據(jù)服務(wù)案例,不能單純追求數(shù)量;(4)數(shù)據(jù)服務(wù)效果要考慮其品牌和質(zhì)量,國(guó)際同行影響力也可以作為其評(píng)價(jià)指標(biāo)的重要組成部分;(5)注冊(cè)用戶(hù)是否作為評(píng)價(jià)指標(biāo)值得商榷,注冊(cè)手續(xù)繁瑣影響用戶(hù)的積極性,數(shù)據(jù)量不大的情況下應(yīng)該讓用戶(hù)直接下載,在離線(xiàn)拷貝大數(shù)據(jù)的情況下則可以要求他們填寫(xiě)下載申請(qǐng)表;(6)數(shù)據(jù)工作也是一項(xiàng)研究工作,數(shù)據(jù)下載量和訪(fǎng)問(wèn)量不應(yīng)成為唯一的考核標(biāo)準(zhǔn),應(yīng)充分考慮學(xué)科的差異,采用定量指標(biāo)和定性指標(biāo)相結(jié)合的方式,如考慮數(shù)據(jù)支撐和數(shù)據(jù)加工意義,建立科學(xué)數(shù)據(jù)引用機(jī)制,評(píng)價(jià)數(shù)據(jù)提供者和數(shù)據(jù)集成者的服務(wù)價(jià)值;(7)讓真正使用數(shù)據(jù)庫(kù)的用戶(hù)實(shí)施應(yīng)用效果評(píng)估,建議采用典型用戶(hù)座談會(huì)等形式。

    科學(xué)數(shù)據(jù)庫(kù)建設(shè)是一項(xiàng)長(zhǎng)期性和基礎(chǔ)性的工作,科技數(shù)據(jù)評(píng)價(jià)是數(shù)據(jù)庫(kù)科研項(xiàng)目管理的重要環(huán)節(jié)。在科技數(shù)據(jù)評(píng)價(jià)工作中引入后評(píng)估機(jī)制,制定完善的數(shù)據(jù)共享服務(wù)機(jī)制和效益評(píng)價(jià)標(biāo)準(zhǔn)對(duì)于推進(jìn)數(shù)據(jù)資源良性發(fā)展具有重要意義,在一定程度上解決了目前項(xiàng)目運(yùn)作階段離散性與數(shù)據(jù)資源持續(xù)積累連續(xù)性的矛盾??萍紨?shù)據(jù)服務(wù)后評(píng)估遵照先運(yùn)行服務(wù)后擇優(yōu)補(bǔ)貼的方式,對(duì)數(shù)據(jù)庫(kù)運(yùn)行服務(wù)進(jìn)行統(tǒng)一的監(jiān)控評(píng)估,定期實(shí)施數(shù)據(jù)服務(wù)效果評(píng)價(jià),并根據(jù)評(píng)估結(jié)果以獎(jiǎng)代補(bǔ),支持?jǐn)?shù)據(jù)庫(kù)持續(xù)發(fā)展和運(yùn)行服務(wù)??萍紨?shù)據(jù)服務(wù)效果后評(píng)估的主要目的是:反映數(shù)據(jù)庫(kù)工作的重點(diǎn)并引導(dǎo)數(shù)據(jù)庫(kù)發(fā)展的方向,是數(shù)據(jù)庫(kù)建設(shè)單位各項(xiàng)工作完成情況評(píng)價(jià)的標(biāo)準(zhǔn)和依據(jù);提高數(shù)據(jù)庫(kù)建設(shè)與運(yùn)行管理的規(guī)范性、公正性、科學(xué)性和合理性;作為科技數(shù)據(jù)資源的高效匯聚和利用的重要手段和政策工具,對(duì)建庫(kù)單位進(jìn)行支持和獎(jiǎng)勵(lì),并進(jìn)一步促進(jìn)其發(fā)展。

    5 科技數(shù)據(jù)服務(wù)效果評(píng)價(jià)指標(biāo)框架探索

    5.1 指標(biāo)選取原則

    影響科技數(shù)據(jù)共享應(yīng)用效果的因素有很多,評(píng)估指標(biāo)的確定也是評(píng)估工作的難點(diǎn)和重點(diǎn),參考國(guó)際上歐盟通用績(jī)效評(píng)價(jià)框架(CAF)和澳大利亞研究理事會(huì)(ARC)指導(dǎo)原則以及我國(guó)科技數(shù)據(jù)共享服務(wù)與應(yīng)用的現(xiàn)狀,我們確定了科技數(shù)據(jù)效果評(píng)價(jià)指標(biāo)選擇原則:一是系統(tǒng)全面原則,即為提高評(píng)估的科學(xué)性,需要全面考察影響科技數(shù)據(jù)應(yīng)用效果的各內(nèi)容要素;二是科學(xué)合理原則,即評(píng)價(jià)方法需要客觀(guān)、簡(jiǎn)單,具有較強(qiáng)的可操作性;三是靈活試用原則,即指標(biāo)的選擇要有一定伸縮性,適合不同的情況;四是量化為主(自動(dòng)采集)原則,即遵循科學(xué)數(shù)據(jù)管理與共享服務(wù)的質(zhì)與量并重準(zhǔn)則,采用定量與定性相結(jié)合的評(píng)估方法,其中以量化指標(biāo)為主,盡量減少人為主觀(guān)因素的影響;五是漸進(jìn)完善原則,即評(píng)估指標(biāo)體系是一個(gè)開(kāi)放和擴(kuò)展的系統(tǒng),應(yīng)根據(jù)實(shí)際需要做出調(diào)整和更新。

    5.2 評(píng)價(jià)指標(biāo)框架模型

    一個(gè)富有成效、運(yùn)作良好的數(shù)據(jù)共享服務(wù)系統(tǒng)依賴(lài)于數(shù)據(jù)資源建設(shè)情況、在線(xiàn)服務(wù)能力、組織管理模式以及應(yīng)用服務(wù)實(shí)際產(chǎn)生的效果。現(xiàn)階段科技數(shù)據(jù)建設(shè)已經(jīng)從資源整合和集成發(fā)展到運(yùn)行服務(wù)和維護(hù),平臺(tái)建設(shè)已經(jīng)逐漸由以資源建設(shè)為主轉(zhuǎn)向以數(shù)據(jù)共享和應(yīng)用為主。因此,數(shù)據(jù)服務(wù)效果評(píng)價(jià)指標(biāo)側(cè)重于服務(wù)產(chǎn)生的真實(shí)效果。參考有關(guān)評(píng)價(jià)框架[14],我們提出了科技數(shù)據(jù)服務(wù)效果評(píng)價(jià)指標(biāo)要素關(guān)系圖,詳見(jiàn)圖2所示。

    數(shù)據(jù)資源是共享服務(wù)的基礎(chǔ),重點(diǎn)評(píng)估數(shù)據(jù)所采用的標(biāo)準(zhǔn)規(guī)范和數(shù)據(jù)資源量??己藘?nèi)容包括科技數(shù)據(jù)庫(kù)是否采用學(xué)科領(lǐng)域公認(rèn)的國(guó)際標(biāo)準(zhǔn)、國(guó)家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)等內(nèi)容標(biāo)準(zhǔn)或技術(shù)規(guī)范;發(fā)布數(shù)據(jù)的同時(shí)是否發(fā)布完整的文檔;資源量是否在本領(lǐng)域同類(lèi)資源中具有較高的覆蓋范圍等。

    在線(xiàn)系統(tǒng)是共享服務(wù)的支撐,重點(diǎn)評(píng)估在線(xiàn)平臺(tái)服務(wù)能力,尤其是特色專(zhuān)題服務(wù)??己藘?nèi)容包括是否實(shí)現(xiàn)數(shù)據(jù)瀏覽、檢索、下載等基本服務(wù)功能;保證欄目更新頻率;面向科研人員的各種需求,開(kāi)展多元化、集成化、主動(dòng)式的專(zhuān)題特色數(shù)據(jù)服務(wù),探索數(shù)據(jù)服務(wù)可持續(xù)發(fā)展機(jī)制等。

    組織管理是共享服務(wù)的保障,重點(diǎn)評(píng)估科技數(shù)據(jù)庫(kù)支持服務(wù)團(tuán)隊(duì)。考核內(nèi)容包括領(lǐng)域?qū)<?、平臺(tái)運(yùn)行管理、技術(shù)支撐、共享服務(wù)人員比例合理,并保障落實(shí)等;制定有效的人員績(jī)效考核和激勵(lì)制度等。

    服務(wù)成效是共享服務(wù)的結(jié)果,重點(diǎn)評(píng)估用戶(hù)訪(fǎng)問(wèn)下載和支撐科研情況??己藘?nèi)容包括科技數(shù)據(jù)庫(kù)服務(wù)用戶(hù)的數(shù)量和效果;支撐科學(xué)研究和技術(shù)創(chuàng)新的貢獻(xiàn)情況;支持國(guó)家重大研究課題、企業(yè)自主創(chuàng)新和研發(fā)、國(guó)家宏觀(guān)決策、經(jīng)濟(jì)社會(huì)發(fā)展、服務(wù)民主、提升民眾科學(xué)素養(yǎng)、國(guó)際同行使用等典型應(yīng)用案例等。

    科技數(shù)據(jù)應(yīng)用效果評(píng)估指導(dǎo)性指標(biāo)體系包括4個(gè)一級(jí)指標(biāo)和若干二級(jí)指標(biāo)。其中,二級(jí)指標(biāo)又分為核心二級(jí)指標(biāo)和非核心二級(jí)指標(biāo)。核心二級(jí)指標(biāo)是必選指標(biāo),由評(píng)估單位結(jié)合自身情況,細(xì)化成三級(jí)考核指標(biāo);非核心指標(biāo)是可選指標(biāo),評(píng)估單位可自行決定是否采用以及如何細(xì)化。在此基礎(chǔ)上,我們還探索了指標(biāo)評(píng)估模型。我們的模型包括賦予每個(gè)一級(jí)指標(biāo)相應(yīng)的分值和權(quán)重,賦予每個(gè)二級(jí)指標(biāo)權(quán)重范圍。在實(shí)施評(píng)估的過(guò)程中,評(píng)估單位根據(jù)每個(gè)指標(biāo)完成情況進(jìn)行打分,并按照其所占權(quán)重,計(jì)算出總得分。

    以數(shù)據(jù)資源一級(jí)指標(biāo)為例,我們初步設(shè)計(jì)該指標(biāo)包括“數(shù)據(jù)量”、“標(biāo)準(zhǔn)規(guī)范”、“可持續(xù)發(fā)展”和“整合模式”4個(gè)二級(jí)指標(biāo)。其中,“數(shù)據(jù)量”、“標(biāo)準(zhǔn)規(guī)范”和“可持續(xù)發(fā)展”是核心二級(jí)指標(biāo),也是必選指標(biāo),最低權(quán)重分別為40%、20%和20%;“整合模式”是非核心二級(jí)指標(biāo),屬可選指標(biāo),最高權(quán)重為20%。若評(píng)估機(jī)構(gòu)不采用“整合模式”這個(gè)非核心指標(biāo),那么該指標(biāo)的權(quán)重為0,原有的20%的權(quán)重就可以分配給3個(gè)核心指標(biāo),具體每個(gè)核心指標(biāo)分配多少,也由評(píng)估單位自行決定,但需保證所有二級(jí)指標(biāo)權(quán)重之和不超過(guò)100%。評(píng)估單位可以將整合模式指標(biāo)20%的權(quán)重平均分給數(shù)據(jù)量、標(biāo)準(zhǔn)規(guī)范和可持續(xù)發(fā)展3個(gè)核心二級(jí)指標(biāo),也可以全部分給其中任意一個(gè)二級(jí)指標(biāo)。因此,數(shù)據(jù)量、標(biāo)準(zhǔn)規(guī)范、可持續(xù)發(fā)展、整合模式等指標(biāo)權(quán)重范圍分別為:40% ~60%、20% ~ 40%、20% ~ 40%和0 ~ 20%。

    落實(shí)到中科院科學(xué)數(shù)據(jù)庫(kù)項(xiàng)目實(shí)施性指標(biāo)方案,我們將指導(dǎo)性指標(biāo)體系中的二級(jí)指標(biāo)細(xì)化成多個(gè)三級(jí)指標(biāo),每個(gè)三級(jí)指標(biāo)賦予不同的權(quán)重和分值,并通過(guò)開(kāi)發(fā)“科學(xué)數(shù)據(jù)服務(wù)效果評(píng)測(cè)系統(tǒng)”對(duì)申請(qǐng)中國(guó)科學(xué)院“十二五”科技數(shù)據(jù)資源整合與共享工程資助的專(zhuān)業(yè)數(shù)據(jù)庫(kù)實(shí)施評(píng)估。在該評(píng)估系統(tǒng)中,所有指標(biāo)劃分為定量指標(biāo)和定性指標(biāo)兩大類(lèi)。其中,定量指標(biāo)通過(guò)我們開(kāi)發(fā)的系統(tǒng)工具自動(dòng)采集數(shù)據(jù),并根據(jù)評(píng)分標(biāo)準(zhǔn)計(jì)算得分;定性指標(biāo)由我們邀請(qǐng)的領(lǐng)域?qū)<腋鶕?jù)被評(píng)價(jià)單位提交的說(shuō)明材料,在線(xiàn)評(píng)審打分;以綜合得分作為該數(shù)據(jù)庫(kù)最終得分。

    6 結(jié)語(yǔ)

    通過(guò)對(duì)國(guó)內(nèi)外科技數(shù)據(jù)資源共享后評(píng)估方法和機(jī)制的研究,借鑒國(guó)際上科技項(xiàng)目管理后評(píng)估模式和國(guó)內(nèi)科技數(shù)據(jù)資源建設(shè)和服務(wù)項(xiàng)目評(píng)估實(shí)踐,我們提出了面向科技數(shù)據(jù)服務(wù)應(yīng)用效果的指導(dǎo)性評(píng)價(jià)指標(biāo)框架模型,探索各指標(biāo)要素的評(píng)估重點(diǎn)和主要考核內(nèi)容。研究發(fā)現(xiàn),數(shù)據(jù)資源建設(shè)情況、在線(xiàn)服務(wù)能力、組織管理模式以及共享應(yīng)用服務(wù)成效是影響一個(gè)數(shù)據(jù)服務(wù)系統(tǒng)平臺(tái)有效和穩(wěn)定運(yùn)行的重要因素。本文以此作為科技數(shù)據(jù)應(yīng)用效果評(píng)估指導(dǎo)性指標(biāo)體系的4個(gè)一級(jí)指標(biāo)。同時(shí),在實(shí)踐中,評(píng)估單位可以結(jié)合自身情況,細(xì)化其對(duì)應(yīng)的二級(jí)指標(biāo)和三級(jí)指標(biāo),并根據(jù)各自評(píng)估側(cè)重點(diǎn)的不同,確定每個(gè)二級(jí)指標(biāo)的權(quán)重和三級(jí)指標(biāo)的分值。由此可見(jiàn)該指標(biāo)性評(píng)估指標(biāo)體系具有一定的穩(wěn)定性、靈活性和適用性。我們下一步計(jì)劃基于該指標(biāo)性指標(biāo)框架,結(jié)合中科院科技數(shù)據(jù)共享服務(wù)的現(xiàn)狀和特點(diǎn),制定適合中科院科學(xué)數(shù)據(jù)庫(kù)項(xiàng)目的數(shù)據(jù)服務(wù)評(píng)價(jià)實(shí)施性指標(biāo)體系和評(píng)分模型;在若干領(lǐng)域示范驗(yàn)證完善后,探索符合中科院實(shí)際情況的科技數(shù)據(jù)共享應(yīng)用長(zhǎng)效機(jī)制,指導(dǎo)我院科技數(shù)據(jù)共享服務(wù)評(píng)價(jià)工作的順利開(kāi)展;通過(guò)后評(píng)估舉措為科技數(shù)據(jù)的持續(xù)建設(shè)和共享應(yīng)用提供科學(xué)決策依據(jù),促進(jìn)中科院科技數(shù)據(jù)資源工作的良性發(fā)展。

    [1] 丁娜,王堅(jiān),趙霞,等.中國(guó)科研項(xiàng)目后評(píng)估發(fā)展現(xiàn)狀[J].科技信息,2010(33):64-65.

    [2] 蕭鳴政.現(xiàn)代績(jī)效考評(píng)技術(shù)及其應(yīng)用[M].北京:北京大學(xué)出版社,2007.

    [3] National Science Foundation. FY2006 Performance and Accountability Report [R]. 2006.

    [4] National Science Foundation. National Science Foundation’s GPRA Strategic Plan for Finical Years 1997 -2003[R]. 1997.

    [5] NIH Overview-How NIH Research Has Bene f ted the Nation [EB/OL]. [2007-06-19]. http://www.nih.gov/ about/NIHoverview.htm l.

    [6] 顏敏.美國(guó)國(guó)立衛(wèi)生研究院(NIH)績(jī)效管理研究[J].醫(yī)學(xué)信息學(xué)雜志,2009,30(6):38-41.

    [7] Research Councils UK (RCUK). Research Councils UK’s Updated Position Statement on Access to Research Outputs [EB/OL]. [2013-03-05]. http://www. rcuk.ac.uk/access/Pages/Accessibility.aspx.

    [8] 孟溦,劉智淵.英國(guó)研究理事會(huì)績(jī)效管理與評(píng)估[J].中國(guó)科學(xué)基金,2009(4):247-252.

    [9] Department of Education, Training and Youth A ffairs. Know ledge and Innovation: A Statement on Research and Research Training[EB/OL]. [2013-04-05]. http:// www.detya.gov.au/archive/highered/whitepaper.

    [10] 龔旭.澳大利亞科技政策研究與戰(zhàn)略制定的范例分析[J]. 研究與發(fā)展管理,2004,16(2):26-32.

    [11] 科技部.國(guó)家科技基礎(chǔ)條件平臺(tái)運(yùn)行服務(wù)績(jī)效考核指標(biāo)[EB/OL].[2013-04-15].http://www.most.gov.cn/fggw/ zfw j/zfw j2011/201108/t20110805_88853.htm.

    [12] 劉潤(rùn)達(dá),褚文博,諸云強(qiáng).國(guó)家科技基礎(chǔ)條件平臺(tái)運(yùn)行服務(wù)階段關(guān)鍵問(wèn)題探析[J].現(xiàn)代情報(bào),2012,32(11):51-53.

    [13] 中國(guó)科學(xué)院數(shù)據(jù)應(yīng)用環(huán)境[EB/OL]. [2013-04-18]. http://www.csdb.cn.

    [14] 樊秀娥,龔瓊宇.科學(xué)數(shù)據(jù)共享系統(tǒng)評(píng)估方法的探討[J].中國(guó)衛(wèi)生工程學(xué),2009,8(3):179-180.

    Searching after Estimate of S&T Data M anagement and Sharing Service Effect

    Zhu Yanhua, Sun Liran, Hu Lianglin, Li Jianhui
    (Computer Network Information Center of CAS, Beijing 100190)

    Objective evaluation of scientif c data sharing service and application benef ts has become an important part of continuous construction and healthy development of data resources. We use literature research and expert interviews, studying the post-evaluation’s methods and mechanism s of scientific data resources. By draw ing on international science and technology project management’s post-evaluation pattern and domestic data resources construction and service’s evaluation practice, We present the basic principles of evaluation index selection and content framework of scientific data service evaluation. Through the perfect evaluation system and effective imp lem entation program s, we are looking forward to im proving scientific data construction and m anagement’s normalization, impartiality and scientif city, promoting the sustainable development of data resources and enhancing the level of data integration and sharing.

    scientif c data, sharing service, resources sharing, service evaluation, post-evaluation

    圖2 數(shù)據(jù)服務(wù)效果評(píng)價(jià)指標(biāo)要素關(guān)系圖

    G35

    :ADOI:10.3772/j.issn.1674-1544.2013.04.003

    朱艷華(1982- ),女,工程師,碩士,主要研究方向:為數(shù)據(jù)庫(kù)技術(shù)與標(biāo)準(zhǔn)規(guī)范、數(shù)據(jù)應(yīng)用服務(wù)。

    中國(guó)科學(xué)院信息化專(zhuān)項(xiàng)項(xiàng)目“科技數(shù)據(jù)共享應(yīng)用機(jī)制與效益評(píng)估研究”(XXH12510-02)。

    2013年5月27日。

    猜你喜歡
    數(shù)據(jù)服務(wù)數(shù)據(jù)庫(kù)評(píng)估
    地理空間大數(shù)據(jù)服務(wù)自然資源調(diào)查監(jiān)測(cè)的方向分析
    數(shù)據(jù)庫(kù)
    如何運(yùn)用稅收大數(shù)據(jù)服務(wù)供給側(cè)結(jié)構(gòu)性改革
    基于頻繁子圖挖掘的數(shù)據(jù)服務(wù)Mashup推薦
    數(shù)據(jù)庫(kù)
    數(shù)據(jù)庫(kù)
    數(shù)據(jù)庫(kù)
    評(píng)估依據(jù)
    立法后評(píng)估:且行且盡善
    浙江人大(2014年5期)2014-03-20 16:20:25
    一種基于數(shù)據(jù)服務(wù)超鏈進(jìn)行情景數(shù)據(jù)集成的方法*
    中国美女看黄片| 国产1区2区3区精品| 桃红色精品国产亚洲av| 国产精品久久久久久人妻精品电影 | 在线十欧美十亚洲十日本专区| 青春草亚洲视频在线观看| 狂野欧美激情性xxxx| 亚洲av日韩在线播放| 日本精品一区二区三区蜜桃| av天堂在线播放| 精品亚洲乱码少妇综合久久| 欧美成人午夜精品| 悠悠久久av| 天天躁夜夜躁狠狠躁躁| 美女视频免费永久观看网站| 国产深夜福利视频在线观看| 少妇精品久久久久久久| 亚洲少妇的诱惑av| 在线观看人妻少妇| 欧美国产精品va在线观看不卡| 啦啦啦视频在线资源免费观看| 狂野欧美激情性bbbbbb| 乱人伦中国视频| 午夜两性在线视频| 99国产精品一区二区三区| 两性午夜刺激爽爽歪歪视频在线观看 | 我要看黄色一级片免费的| 午夜91福利影院| 国产视频一区二区在线看| 老熟女久久久| 国产在线视频一区二区| 国产成人精品久久二区二区91| 在线观看免费午夜福利视频| 91麻豆av在线| 午夜免费鲁丝| 国产片内射在线| 黄色视频,在线免费观看| 成年人午夜在线观看视频| 国产精品久久久久久精品电影小说| 美女国产高潮福利片在线看| 精品福利观看| 欧美成人午夜精品| 黑人巨大精品欧美一区二区mp4| 一进一出抽搐动态| 国产淫语在线视频| 久久精品国产a三级三级三级| 人人妻,人人澡人人爽秒播| 97在线人人人人妻| 亚洲精品成人av观看孕妇| 欧美精品高潮呻吟av久久| 精品乱码久久久久久99久播| 国产伦人伦偷精品视频| 亚洲一卡2卡3卡4卡5卡精品中文| 久久ye,这里只有精品| 亚洲欧美一区二区三区久久| 亚洲专区国产一区二区| 丝袜在线中文字幕| 国产免费av片在线观看野外av| 老汉色av国产亚洲站长工具| 亚洲中文av在线| 黄色视频不卡| 永久免费av网站大全| 99精国产麻豆久久婷婷| 两性夫妻黄色片| 久久久国产一区二区| 午夜日韩欧美国产| 欧美人与性动交α欧美软件| 韩国精品一区二区三区| 女人高潮潮喷娇喘18禁视频| 久久狼人影院| 最新在线观看一区二区三区| 超色免费av| 最新的欧美精品一区二区| 91国产中文字幕| 在线av久久热| xxxhd国产人妻xxx| 亚洲国产欧美网| 岛国在线观看网站| 丰满迷人的少妇在线观看| 国产免费现黄频在线看| 美女高潮到喷水免费观看| 亚洲精品一二三| 国产精品九九99| 欧美在线一区亚洲| 久久香蕉激情| 日韩大片免费观看网站| 正在播放国产对白刺激| netflix在线观看网站| 岛国在线观看网站| 成人国产一区最新在线观看| 日韩制服丝袜自拍偷拍| 一区福利在线观看| 999久久久国产精品视频| 中文精品一卡2卡3卡4更新| 亚洲avbb在线观看| 国产人伦9x9x在线观看| 精品国产国语对白av| 咕卡用的链子| 97人妻天天添夜夜摸| 咕卡用的链子| 无限看片的www在线观看| 两性午夜刺激爽爽歪歪视频在线观看 | 女人被躁到高潮嗷嗷叫费观| 亚洲精品中文字幕在线视频| 12—13女人毛片做爰片一| netflix在线观看网站| 人人妻人人澡人人看| 2018国产大陆天天弄谢| 窝窝影院91人妻| 亚洲国产欧美网| 超碰成人久久| 一级黄色大片毛片| 亚洲性夜色夜夜综合| 岛国在线观看网站| 水蜜桃什么品种好| 啦啦啦在线免费观看视频4| 国产精品99久久99久久久不卡| 在线观看一区二区三区激情| 国产成人精品在线电影| 99精品久久久久人妻精品| 精品少妇久久久久久888优播| 久久国产精品影院| 日韩 欧美 亚洲 中文字幕| 欧美精品一区二区大全| 国产麻豆69| 美女福利国产在线| 亚洲国产成人一精品久久久| 在线精品无人区一区二区三| 久久精品国产亚洲av高清一级| 亚洲国产欧美一区二区综合| 成人国产av品久久久| 熟女少妇亚洲综合色aaa.| 国产精品熟女久久久久浪| 在线观看一区二区三区激情| 午夜福利在线免费观看网站| 后天国语完整版免费观看| 欧美大码av| 久久国产精品影院| 日本欧美视频一区| 精品人妻在线不人妻| 午夜免费观看性视频| 一个人免费在线观看的高清视频 | 国产激情久久老熟女| 日本av手机在线免费观看| 91九色精品人成在线观看| 黑人巨大精品欧美一区二区mp4| 国产真人三级小视频在线观看| 热99久久久久精品小说推荐| 久久久国产精品麻豆| 中文欧美无线码| 国产精品亚洲av一区麻豆| 成人影院久久| 精品少妇内射三级| 国产精品国产三级国产专区5o| 欧美在线黄色| 老司机影院毛片| 交换朋友夫妻互换小说| 久久香蕉激情| 久久久国产一区二区| 99九九在线精品视频| 激情视频va一区二区三区| 欧美在线黄色| 久久人妻福利社区极品人妻图片| 国产熟女午夜一区二区三区| 亚洲欧洲日产国产| 国产精品久久久久成人av| 在线亚洲精品国产二区图片欧美| 伊人久久大香线蕉亚洲五| 国产91精品成人一区二区三区 | 欧美精品人与动牲交sv欧美| 99热网站在线观看| 久久青草综合色| 97精品久久久久久久久久精品| 国产又爽黄色视频| 一个人免费在线观看的高清视频 | 青青草视频在线视频观看| 久久精品亚洲熟妇少妇任你| 涩涩av久久男人的天堂| 大香蕉久久网| 操出白浆在线播放| 久久99热这里只频精品6学生| 亚洲精品在线美女| 亚洲久久久国产精品| 免费人妻精品一区二区三区视频| 老司机福利观看| 亚洲自偷自拍图片 自拍| 欧美日韩黄片免| 高清视频免费观看一区二区| 久久天躁狠狠躁夜夜2o2o| 国产男女内射视频| 人妻人人澡人人爽人人| 亚洲av成人不卡在线观看播放网 | 精品国内亚洲2022精品成人 | a级毛片在线看网站| 一本色道久久久久久精品综合| 99久久综合免费| 悠悠久久av| 一个人免费在线观看的高清视频 | 欧美激情久久久久久爽电影 | 秋霞在线观看毛片| 他把我摸到了高潮在线观看 | 大香蕉久久成人网| 精品国内亚洲2022精品成人 | 欧美日韩成人在线一区二区| 男女国产视频网站| 久久精品国产综合久久久| 亚洲精品国产区一区二| 99国产精品免费福利视频| 永久免费av网站大全| 少妇精品久久久久久久| 90打野战视频偷拍视频| 18禁黄网站禁片午夜丰满| 国产精品一区二区免费欧美 | kizo精华| 男女免费视频国产| 精品一区二区三区四区五区乱码| 亚洲精品第二区| 午夜福利免费观看在线| 丰满迷人的少妇在线观看| 午夜免费成人在线视频| 国产黄频视频在线观看| 成年人午夜在线观看视频| 捣出白浆h1v1| 免费av中文字幕在线| 亚洲精品国产av蜜桃| 欧美精品人与动牲交sv欧美| 高清欧美精品videossex| 日本精品一区二区三区蜜桃| 午夜成年电影在线免费观看| 国产野战对白在线观看| 精品熟女少妇八av免费久了| av免费在线观看网站| 岛国毛片在线播放| 久久人人爽av亚洲精品天堂| 国产精品久久久人人做人人爽| 99久久国产精品久久久| 一区二区三区激情视频| 母亲3免费完整高清在线观看| 久久 成人 亚洲| 日韩 欧美 亚洲 中文字幕| 午夜精品久久久久久毛片777| 老司机影院成人| 日韩三级视频一区二区三区| 国产高清国产精品国产三级| 欧美在线黄色| 日本vs欧美在线观看视频| 亚洲专区国产一区二区| 91av网站免费观看| 少妇猛男粗大的猛烈进出视频| 久久精品aⅴ一区二区三区四区| 日本一区二区免费在线视频| 性色av一级| 男女免费视频国产| 亚洲欧美清纯卡通| 久久女婷五月综合色啪小说| 中文字幕av电影在线播放| 两个人免费观看高清视频| 国产精品av久久久久免费| svipshipincom国产片| 午夜免费成人在线视频| 99久久国产精品久久久| 欧美 日韩 精品 国产| 欧美日韩中文字幕国产精品一区二区三区 | 亚洲国产欧美一区二区综合| 搡老熟女国产l中国老女人| 亚洲,欧美精品.| 一级片'在线观看视频| 乱人伦中国视频| 日本av免费视频播放| a 毛片基地| 美女脱内裤让男人舔精品视频| 我的亚洲天堂| 亚洲av美国av| 亚洲精品国产色婷婷电影| av在线老鸭窝| 久久久久久亚洲精品国产蜜桃av| 精品亚洲乱码少妇综合久久| 国产成人一区二区三区免费视频网站| 纯流量卡能插随身wifi吗| 这个男人来自地球电影免费观看| 777久久人妻少妇嫩草av网站| 久久中文字幕一级| 看免费av毛片| 久久亚洲国产成人精品v| 亚洲综合色网址| 婷婷色av中文字幕| 国产伦人伦偷精品视频| 亚洲免费av在线视频| 中亚洲国语对白在线视频| 欧美大码av| 丝袜喷水一区| 久久精品亚洲av国产电影网| 国产成+人综合+亚洲专区| 人人妻人人爽人人添夜夜欢视频| 香蕉国产在线看| 亚洲av片天天在线观看| 精品一区二区三卡| 青草久久国产| 精品国产国语对白av| 精品国产一区二区三区四区第35| 成人手机av| 欧美久久黑人一区二区| 成人av一区二区三区在线看 | 狂野欧美激情性xxxx| 又紧又爽又黄一区二区| 黄色视频不卡| 99久久精品国产亚洲精品| 女性被躁到高潮视频| 日韩欧美一区视频在线观看| 两性夫妻黄色片| 精品国产国语对白av| 国产主播在线观看一区二区| tocl精华| 亚洲精品国产av成人精品| 午夜福利一区二区在线看| 最新的欧美精品一区二区| 在线 av 中文字幕| 亚洲七黄色美女视频| 精品久久久精品久久久| 俄罗斯特黄特色一大片| 美国免费a级毛片| 国产成人精品在线电影| 王馨瑶露胸无遮挡在线观看| 国产精品自产拍在线观看55亚洲 | 淫妇啪啪啪对白视频 | 熟女少妇亚洲综合色aaa.| 国产精品麻豆人妻色哟哟久久| 免费在线观看黄色视频的| 老汉色∧v一级毛片| 国产成人影院久久av| 9热在线视频观看99| 男女免费视频国产| 免费在线观看视频国产中文字幕亚洲 | 国产高清国产精品国产三级| 亚洲精品一二三| 正在播放国产对白刺激| 欧美激情 高清一区二区三区| 精品一区在线观看国产| 蜜桃在线观看..| 国产精品欧美亚洲77777| 欧美97在线视频| 中文字幕色久视频| 亚洲第一av免费看| 国产男女内射视频| 国产精品国产av在线观看| 2018国产大陆天天弄谢| 国产av一区二区精品久久| www.精华液| 一区福利在线观看| 久久久久精品国产欧美久久久 | 各种免费的搞黄视频| 97在线人人人人妻| 久久久久视频综合| 天天影视国产精品| 亚洲第一欧美日韩一区二区三区 | 欧美激情 高清一区二区三区| 亚洲欧洲精品一区二区精品久久久| av视频免费观看在线观看| 免费av中文字幕在线| 久久精品aⅴ一区二区三区四区| 美女扒开内裤让男人捅视频| 午夜免费观看性视频| √禁漫天堂资源中文www| 久久精品aⅴ一区二区三区四区| 熟女少妇亚洲综合色aaa.| 日韩电影二区| 欧美精品av麻豆av| 日本精品一区二区三区蜜桃| 一级毛片精品| 日韩视频一区二区在线观看| 欧美 亚洲 国产 日韩一| 精品免费久久久久久久清纯 | 9191精品国产免费久久| 国内毛片毛片毛片毛片毛片| 高清欧美精品videossex| 黄频高清免费视频| 欧美日韩精品网址| 日韩大码丰满熟妇| 亚洲中文字幕日韩| 99香蕉大伊视频| 中文字幕制服av| 中文字幕人妻熟女乱码| 人人妻,人人澡人人爽秒播| 操美女的视频在线观看| 国产精品麻豆人妻色哟哟久久| 日韩中文字幕视频在线看片| 一区二区日韩欧美中文字幕| 两个人看的免费小视频| 老汉色av国产亚洲站长工具| 老司机福利观看| 丝瓜视频免费看黄片| 狂野欧美激情性bbbbbb| 无遮挡黄片免费观看| 欧美日韩成人在线一区二区| 高清欧美精品videossex| 宅男免费午夜| 性少妇av在线| av在线app专区| 18禁裸乳无遮挡动漫免费视频| 国产精品麻豆人妻色哟哟久久| 亚洲国产欧美在线一区| 国产精品国产av在线观看| 精品第一国产精品| 国产三级黄色录像| 美国免费a级毛片| 国产免费福利视频在线观看| 日韩 亚洲 欧美在线| 麻豆av在线久日| 日韩一区二区三区影片| 波多野结衣一区麻豆| 亚洲全国av大片| 99久久精品国产亚洲精品| tube8黄色片| 大片电影免费在线观看免费| 国产一卡二卡三卡精品| 啦啦啦中文免费视频观看日本| 日韩熟女老妇一区二区性免费视频| 9191精品国产免费久久| 99国产精品一区二区蜜桃av | 亚洲情色 制服丝袜| 久久中文看片网| 亚洲精品久久午夜乱码| 国产精品自产拍在线观看55亚洲 | 黄色毛片三级朝国网站| av欧美777| 亚洲国产中文字幕在线视频| 深夜精品福利| 精品高清国产在线一区| 男女免费视频国产| 建设人人有责人人尽责人人享有的| 麻豆国产av国片精品| 亚洲av成人不卡在线观看播放网 | 欧美老熟妇乱子伦牲交| 久久国产亚洲av麻豆专区| 国产精品av久久久久免费| 丰满少妇做爰视频| 母亲3免费完整高清在线观看| 日韩一区二区三区影片| bbb黄色大片| 日本91视频免费播放| 美女扒开内裤让男人捅视频| 人人妻人人爽人人添夜夜欢视频| 99久久综合免费| 亚洲欧美一区二区三区黑人| 亚洲精品第二区| 久久久国产成人免费| av天堂在线播放| 成年女人毛片免费观看观看9 | 国产精品久久久久久精品电影小说| 久久免费观看电影| 蜜桃国产av成人99| 亚洲伊人久久精品综合| 久久亚洲精品不卡| 久久久久久久精品精品| 精品国产一区二区三区久久久樱花| 日日爽夜夜爽网站| 亚洲性夜色夜夜综合| a级毛片黄视频| 一区二区三区精品91| 午夜精品国产一区二区电影| 精品久久蜜臀av无| 欧美老熟妇乱子伦牲交| 大片免费播放器 马上看| 亚洲av日韩在线播放| 少妇 在线观看| av福利片在线| 久久国产精品男人的天堂亚洲| 久久久久精品国产欧美久久久 | 91大片在线观看| 国产精品九九99| 国产在视频线精品| 日韩人妻精品一区2区三区| 色老头精品视频在线观看| 香蕉丝袜av| 日韩 亚洲 欧美在线| 一区二区三区精品91| 国产亚洲av高清不卡| 久久天躁狠狠躁夜夜2o2o| 美女视频免费永久观看网站| 各种免费的搞黄视频| 国产精品国产av在线观看| 日日摸夜夜添夜夜添小说| 精品免费久久久久久久清纯 | 九色亚洲精品在线播放| 亚洲美女黄色视频免费看| 亚洲伊人色综图| 午夜久久久在线观看| 日本精品一区二区三区蜜桃| 国产在视频线精品| 桃红色精品国产亚洲av| av在线app专区| 丰满人妻熟妇乱又伦精品不卡| 国产欧美亚洲国产| 免费在线观看视频国产中文字幕亚洲 | 欧美日韩国产mv在线观看视频| 欧美精品人与动牲交sv欧美| 纯流量卡能插随身wifi吗| 精品欧美一区二区三区在线| 亚洲久久久国产精品| av电影中文网址| 亚洲精品日韩在线中文字幕| 99久久人妻综合| 国产成人啪精品午夜网站| 啦啦啦 在线观看视频| 亚洲va日本ⅴa欧美va伊人久久 | 一级黄色大片毛片| 三级毛片av免费| 亚洲精品久久成人aⅴ小说| 亚洲 欧美一区二区三区| 国产免费福利视频在线观看| 亚洲精品中文字幕在线视频| 中文字幕色久视频| 亚洲久久久国产精品| 无限看片的www在线观看| 桃红色精品国产亚洲av| 国产亚洲av片在线观看秒播厂| 搡老乐熟女国产| 精品久久久久久久毛片微露脸 | 欧美xxⅹ黑人| 老汉色∧v一级毛片| 可以免费在线观看a视频的电影网站| 精品乱码久久久久久99久播| 国产亚洲精品一区二区www | 色精品久久人妻99蜜桃| 亚洲av成人不卡在线观看播放网 | 国产精品九九99| 一边摸一边抽搐一进一出视频| 69精品国产乱码久久久| 精品视频人人做人人爽| 人人妻人人添人人爽欧美一区卜| 国产亚洲精品久久久久5区| 在线观看www视频免费| 一本—道久久a久久精品蜜桃钙片| 国产91精品成人一区二区三区 | 欧美精品高潮呻吟av久久| 91老司机精品| 97在线人人人人妻| 国产精品 欧美亚洲| 女性生殖器流出的白浆| 亚洲专区国产一区二区| 日本撒尿小便嘘嘘汇集6| 国产精品国产av在线观看| 99九九在线精品视频| 十八禁人妻一区二区| 精品亚洲成国产av| 50天的宝宝边吃奶边哭怎么回事| 亚洲欧美精品自产自拍| 女人被躁到高潮嗷嗷叫费观| tocl精华| 久久狼人影院| 国产免费视频播放在线视频| 1024视频免费在线观看| 男女午夜视频在线观看| 精品一区二区三区av网在线观看 | 久久性视频一级片| 在线观看一区二区三区激情| 日日夜夜操网爽| 天天操日日干夜夜撸| 老熟妇仑乱视频hdxx| 亚洲欧洲日产国产| 国产男女超爽视频在线观看| 亚洲中文字幕日韩| 成年女人毛片免费观看观看9 | 亚洲av成人不卡在线观看播放网 | 老司机影院毛片| 国产精品一二三区在线看| 成年女人毛片免费观看观看9 | av线在线观看网站| 成人18禁高潮啪啪吃奶动态图| 免费观看人在逋| 每晚都被弄得嗷嗷叫到高潮| √禁漫天堂资源中文www| 黑丝袜美女国产一区| 又紧又爽又黄一区二区| 国产精品亚洲av一区麻豆| 日本黄色日本黄色录像| 亚洲欧美精品综合一区二区三区| 两人在一起打扑克的视频| 国产精品二区激情视频| 久久久久网色| 久久久精品国产亚洲av高清涩受| 欧美激情 高清一区二区三区| 亚洲va日本ⅴa欧美va伊人久久 | 动漫黄色视频在线观看| 人妻久久中文字幕网| 成人免费观看视频高清| 亚洲中文字幕日韩| av网站在线播放免费| 91成年电影在线观看| 国产精品国产三级国产专区5o| 狂野欧美激情性xxxx| 国产三级黄色录像| 亚洲欧美激情在线| 777米奇影视久久| 90打野战视频偷拍视频| 亚洲精品在线美女| 午夜久久久在线观看| 叶爱在线成人免费视频播放| 成人av一区二区三区在线看 | videosex国产| 午夜两性在线视频| 成人三级做爰电影| 视频区欧美日本亚洲| 性色av一级| www.精华液| 少妇裸体淫交视频免费看高清 | 69精品国产乱码久久久| 在线永久观看黄色视频| 女人爽到高潮嗷嗷叫在线视频| 69精品国产乱码久久久| 国产欧美日韩一区二区三 | 免费高清在线观看日韩| 婷婷成人精品国产| 精品一区在线观看国产| 亚洲欧美精品自产自拍|