• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    國(guó)外循證社會(huì)科學(xué)證據(jù)知識(shí)庫(kù)的證據(jù)類型與標(biāo)準(zhǔn)探析及其啟示

    2023-02-22 00:35:58王思麗祝忠明李慧佳
    現(xiàn)代情報(bào) 2023年2期
    關(guān)鍵詞:循證證據(jù)基礎(chǔ)

    王思麗 祝忠明 李慧佳

    (中國(guó)科學(xué)院西北生態(tài)環(huán)境資源研究院文獻(xiàn)情報(bào)中心,甘肅 蘭州 730000)

    近年來(lái),隨著循證醫(yī)學(xué)相關(guān)的科學(xué)理念和方法逐漸在社會(huì)科學(xué)領(lǐng)域被越來(lái)越多地研究者以及決策者不斷了解、掌握,繼而認(rèn)可和應(yīng)用,循證社會(huì)科學(xué)[1-2]應(yīng)運(yùn)而生,被譽(yù)為社會(huì)科學(xué)的第三次科學(xué)化浪潮。

    循證社會(huì)科學(xué)證據(jù)知識(shí)庫(kù)作為一種基于互聯(lián)網(wǎng)的動(dòng)態(tài)跟蹤監(jiān)測(cè)、收割聚合、組織集成、轉(zhuǎn)化傳播社會(huì)科學(xué)領(lǐng)域證據(jù)資源的重要工具平臺(tái),不僅可以為研究者與決策者提供訪問(wèn)相關(guān)研究發(fā)現(xiàn)及證據(jù)資源的最佳途徑和可靠入口,無(wú)需篩選繁雜的研究資料或進(jìn)行大量的參考咨詢,而且可以方便使用相關(guān)研究結(jié)果及證據(jù)標(biāo)準(zhǔn)來(lái)快速建立科學(xué)依據(jù),輔助制定科技政策,對(duì)于促進(jìn)基于證據(jù)的科學(xué)決策與循證實(shí)踐作用重大且意義深遠(yuǎn)。

    本研究通過(guò)對(duì)國(guó)外社會(huì)科學(xué)領(lǐng)域多個(gè)不同主題的證據(jù)門戶網(wǎng)站進(jìn)行調(diào)研,參考已有證據(jù)生態(tài)系統(tǒng)和證據(jù)標(biāo)準(zhǔn)的概念框架對(duì)相關(guān)數(shù)據(jù)進(jìn)行分析,對(duì)比總結(jié)不同證據(jù)門戶網(wǎng)站在證據(jù)資源類型性質(zhì)、證據(jù)標(biāo)準(zhǔn)及相關(guān)研究方法等方面的差異性和優(yōu)缺點(diǎn),討論形成中國(guó)循證社會(huì)科學(xué)證據(jù)知識(shí)庫(kù)建設(shè)關(guān)于證據(jù)主張?zhí)岢?、證據(jù)基礎(chǔ)問(wèn)題采用與評(píng)估、證據(jù)綜合方法應(yīng)用、循證指導(dǎo)與實(shí)踐方法研發(fā)的建議和策略,為未來(lái)建立基于知識(shí)共享網(wǎng)絡(luò)的中國(guó)循證社會(huì)科學(xué)證據(jù)知識(shí)庫(kù)工具平臺(tái)提供可靠證據(jù)資源來(lái)源、證據(jù)類型與標(biāo)準(zhǔn)建設(shè)的理論依據(jù)和啟示借鑒,也為進(jìn)一步實(shí)現(xiàn)全球循證社會(huì)科學(xué)證據(jù)資源的深度關(guān)聯(lián)發(fā)現(xiàn)和共享利用服務(wù)奠定基礎(chǔ)。

    1 研究背景與現(xiàn)狀

    研究表明,政策、實(shí)踐和個(gè)人決策可能受到許多有意識(shí)和無(wú)意識(shí)因素的影響。這些因素一般包括價(jià)值觀、資源、關(guān)于當(dāng)前和潛在未來(lái)形勢(shì)的信息,以及正在做出的不同決策可能產(chǎn)生的影響。既然信息是決策的一個(gè)關(guān)鍵組成部分,那么如何確保這些信息是基于現(xiàn)有的最可靠的研究則顯得至關(guān)重要,這也是循證決策的研究起源,即,將研究證據(jù)作為決策過(guò)程的一部分。研究證據(jù)通常包含在各種研究成果如學(xué)術(shù)論文、科技報(bào)告中,但過(guò)去因?yàn)樯虡I(yè)付費(fèi)壁壘和低可發(fā)現(xiàn)性,以及已有研究結(jié)論對(duì)政策影響的描述可能不甚清楚,甚至相互矛盾等,導(dǎo)致研究證據(jù)往往無(wú)法直接被決策者獲得和使用,也并沒(méi)有一個(gè)良好的證據(jù)生態(tài)系統(tǒng)能夠?qū)⒀芯康氖褂门c研究成果很好地聯(lián)系和運(yùn)作起來(lái)。

    在此背景下,最早出現(xiàn)的是知識(shí)中介(Knowledge Brokering)[3-4]。知識(shí)中介作為一項(xiàng)獨(dú)特的知識(shí)活動(dòng),其發(fā)展體現(xiàn)在創(chuàng)建個(gè)人知識(shí)經(jīng)紀(jì)人及中介組織角色,以幫助改善研究與使用之間的聯(lián)系。知識(shí)中介的影響是雙向的,一方面使得決策者或受決策影響的人和機(jī)構(gòu)可以影響所進(jìn)行的研究;另一方面使得研究成果可以更容易獲得,也更能與研究的潛在使用者相關(guān)聯(lián)。但是這些知識(shí)中介需要考慮的研究證據(jù)的體量往往是巨大的,因?yàn)榧词乖谕粋€(gè)主題領(lǐng)域內(nèi),可能有許多問(wèn)題會(huì)被咨詢到,也可能有許多研究方法可以解決這些問(wèn)題。在具體實(shí)踐中,許多知識(shí)中介關(guān)注的是證據(jù)的有效性和功效的問(wèn)題。如Langer L等[5]利用研究使用者和研究生產(chǎn)者之間交互的6種機(jī)制和3種行為組成的框架,對(duì)決策制定中增加研究使用的不同策略的有效性和功效進(jìn)行了評(píng)價(jià)。如Gough D等[6]調(diào)研發(fā)現(xiàn),政府內(nèi)部研究分析員通常采用的方法之一是直接展開(kāi)互動(dòng),即知識(shí)中介經(jīng)紀(jì)人與決策者面對(duì)面討論證據(jù)需求,然后向決策者提供現(xiàn)有證據(jù)的概述,幫助他們解讀相關(guān)政策問(wèn)題可能產(chǎn)生的影響。如西歐或北歐國(guó)家政府資助的專家經(jīng)紀(jì)中心[7]等,針對(duì)與政府部門商定的主題,為健康、教育和社會(huì)福利等領(lǐng)域提供政策導(dǎo)向的證據(jù)綜合。

    當(dāng)為中央政府部門等單一決策制定機(jī)構(gòu)提供知識(shí)中介角色時(shí),直接互動(dòng)方式可以很好地發(fā)揮作用。但當(dāng)決策權(quán)分散,由諸如機(jī)構(gòu)管轄者、學(xué)校管理人員、案件工作人員等共同進(jìn)行決策時(shí),這種方法就可能不太適用。在這種情況下,開(kāi)發(fā)證據(jù)產(chǎn)品,更專門地概括總結(jié)諸如證據(jù)門戶、證據(jù)指南或證據(jù)檢查清單等已知的證據(jù)信息,可能是一種更有用的方法。證據(jù)門戶等證據(jù)產(chǎn)品通常有一個(gè)共同點(diǎn),即不需要使用者查閱大量基礎(chǔ)研究,它們?cè)诹艚o決策者進(jìn)行信息篩選的工作量上與知識(shí)中介經(jīng)紀(jì)人和代理機(jī)構(gòu)已有很大不同。具體來(lái)說(shuō),證據(jù)門戶一般提供某些特定主題領(lǐng)域的一系列具有一定格式的證據(jù)元數(shù)據(jù)信息供使用者自由查詢或?yàn)g覽。證據(jù)指南一般是由專家委員會(huì)在證據(jù)評(píng)價(jià)的基礎(chǔ)上編寫,對(duì)將要做出的決策提出指導(dǎo)建議。證據(jù)檢查清單一般是使用與證據(jù)指南類似的流程生成,建議實(shí)踐者可以或應(yīng)該做些什么。如美國(guó)教育部開(kāi)發(fā)的教學(xué)策略有效性證據(jù)門戶(IES-WWC)[8],用于系統(tǒng)評(píng)價(jià)教育中不同項(xiàng)目、產(chǎn)品、實(shí)踐和政策的現(xiàn)有研究,旨在為教育工作者提供循證決策所需的信息,目前已提供了涉及教育工作的13個(gè)主題領(lǐng)域(如讀寫能力、數(shù)學(xué)、科學(xué)等)的3類證據(jù)資源,包括干預(yù)報(bào)告、實(shí)踐指南和個(gè)案研究評(píng)價(jià)等。如由美國(guó)、英國(guó)、法國(guó)等多個(gè)國(guó)家(地區(qū))的科研機(jī)構(gòu)及社會(huì)組織資助創(chuàng)建的環(huán)境證據(jù)協(xié)作門戶(CEE)[9],致力于打造一個(gè)可持續(xù)的全球環(huán)境和生物多樣性保護(hù)的利益相關(guān)者的開(kāi)放式社區(qū),尋求促進(jìn)和提供有關(guān)環(huán)境政策和實(shí)踐作為公共服務(wù)的最關(guān)注問(wèn)題的證據(jù)綜合,目前開(kāi)發(fā)了試用版的證據(jù)評(píng)價(jià)數(shù)據(jù)庫(kù)CEEDER,初步提供了涉及環(huán)境政策與管理相關(guān)問(wèn)題研究的多個(gè)主題領(lǐng)域的開(kāi)放獲取證據(jù)資源服務(wù),包括綜述評(píng)價(jià)(Literature Reviews)、元分析(Meta Analyses)、系統(tǒng)評(píng)價(jià)(Systematic Reviews)等。

    但包括上述證據(jù)產(chǎn)品在內(nèi)的以往大多數(shù)證據(jù)門戶一般更像是一個(gè)單鏈條的數(shù)據(jù)庫(kù)、資源庫(kù)、證據(jù)工具包或證據(jù)信息交換所,不同的證據(jù)產(chǎn)品使用的是不同的自定義的標(biāo)準(zhǔn)規(guī)范和內(nèi)容格式進(jìn)行展示,提供的是基于某一特定行業(yè)或?qū)I(yè)領(lǐng)域相關(guān)研究主題及研究結(jié)果的簡(jiǎn)單瀏覽及檢索功能,通常作為獲取研究結(jié)果的門戶或?qū)Ш絹?lái)使用。它們并不概括總結(jié)不同研究領(lǐng)域、研究問(wèn)題及研究結(jié)果中的已知證據(jù)信息,也并沒(méi)有集中規(guī)范地基于知識(shí)網(wǎng)絡(luò)獲取、管理和共享不同研究領(lǐng)域及研究結(jié)果中對(duì)不同研究問(wèn)題的綜述、評(píng)價(jià)和關(guān)聯(lián)關(guān)系等,與基于一定標(biāo)準(zhǔn)規(guī)范及知識(shí)共享網(wǎng)絡(luò)等構(gòu)建的證據(jù)知識(shí)庫(kù)還存在一定差距。與此同時(shí),研究證據(jù)的使用者通常期望得知所使用的研究發(fā)現(xiàn)的強(qiáng)度、可信度和相關(guān)性,需要知道可以應(yīng)用什么標(biāo)準(zhǔn)來(lái)對(duì)相關(guān)研究結(jié)果進(jìn)行判斷評(píng)估及所提出的證據(jù)主張的依據(jù)。因此,要使證據(jù)知識(shí)庫(kù)有用且值得信賴,并能夠推動(dòng)循證決策和實(shí)踐,需要有明確一致的證據(jù)標(biāo)準(zhǔn)。證據(jù)標(biāo)準(zhǔn)是指用于開(kāi)發(fā)和評(píng)估研究質(zhì)量以及證據(jù)門戶網(wǎng)站中提供的研究結(jié)果的可靠性的方法,其中最為重要的是要有清晰、健全和透明的證據(jù)標(biāo)準(zhǔn),以增強(qiáng)證據(jù)門戶的可信度,為證據(jù)使用者提出證據(jù)主張?zhí)峁┳C據(jù)基礎(chǔ),并保護(hù)相關(guān)機(jī)構(gòu)組織在出示證據(jù)時(shí)免受不公正的指責(zé)。

    2 國(guó)外社會(huì)科學(xué)證據(jù)門戶的證據(jù)類型與標(biāo)準(zhǔn)探析

    調(diào)研發(fā)現(xiàn),不同證據(jù)門戶在所提供的證據(jù)資源類型和作為證據(jù)主張基礎(chǔ)的證據(jù)標(biāo)準(zhǔn)這兩個(gè)關(guān)鍵維度上是不甚相同的,如表1所示。

    表1 調(diào)研的主要證據(jù)門戶網(wǎng)站列表

    表1(續(xù))

    表1(續(xù))

    2.1 證據(jù)類型分析

    第一個(gè)維度是證據(jù)資源類型,它是證據(jù)門戶建設(shè)的核心所在。大部分證據(jù)門戶網(wǎng)站提供的證據(jù)資源類型大致可分為3種:個(gè)案研究、證據(jù)綜合、循證指南。這些不同的證據(jù)資源類型并不是相互獨(dú)立的,而是作為證據(jù)生態(tài)系統(tǒng)的一部分彼此密切相關(guān)聯(lián)的,最終目的都是為了支持循證決策,如圖1所示。

    圖1 不同的證據(jù)資源類型在證據(jù)生態(tài)系統(tǒng)中的關(guān)聯(lián)關(guān)系

    2.1.1 個(gè)案研究

    個(gè)案研究一般是指對(duì)某種特定或一組干預(yù)措施的研究的調(diào)查發(fā)現(xiàn)和結(jié)果。這些研究可能是對(duì)干預(yù)措施所產(chǎn)生的影響或效果的定量分析,也可能是對(duì)諸如背景、受益人視角、實(shí)施問(wèn)題等重要事項(xiàng)的定性研究。理想情況下,決策者是可以直接使用個(gè)案研究的原始研究結(jié)果的,但在實(shí)際應(yīng)用中,還可能存在著諸多挑戰(zhàn)。例如,這些研究結(jié)果可能很難被公開(kāi)訪問(wèn)到;可能難以理解;可能由于所使用的方法學(xué)質(zhì)量的有效性較低或做出結(jié)論所依據(jù)的證據(jù)范圍較小而不值得信賴;可能值得信賴但無(wú)法代表其他研究結(jié)果,即更廣泛的證據(jù)基礎(chǔ);可能值得信賴也具有一定代表性,但與決策制定者的關(guān)注焦點(diǎn)和相關(guān)事件的背景沒(méi)有太大關(guān)系。即使一一克服了上述挑戰(zhàn),訪問(wèn)、理解、評(píng)價(jià)一個(gè)研究領(lǐng)域尤其是那些正在迅速發(fā)展或新興的研究領(lǐng)域的過(guò)程,也將是一項(xiàng)極其耗時(shí)且需要專門技術(shù)的活動(dòng),而決策者如政策制定者、專業(yè)從業(yè)人員或社會(huì)公眾可能并沒(méi)有這樣的時(shí)間和技能。因而,相對(duì)于使用個(gè)案研究的結(jié)果可能存在的諸多問(wèn)題來(lái)說(shuō),一般情況下,決策者可能認(rèn)為使用對(duì)感興趣問(wèn)題的證據(jù)基礎(chǔ)的概述對(duì)他們而言會(huì)更有效。

    2.1.2 證據(jù)綜合

    證據(jù)綜合一般是指綜合多項(xiàng)已有研究結(jié)果對(duì)研究問(wèn)題相關(guān)的證據(jù)基礎(chǔ)進(jìn)行更廣泛的陳述。采用的陳述方法可能有多種:①系統(tǒng)綜述(系統(tǒng)評(píng)價(jià)):系統(tǒng)綜述是最常用的證據(jù)綜合方法,是針對(duì)某一特定問(wèn)題去全面綜合相關(guān)研究證據(jù)的一個(gè)明確的研究過(guò)程,通常采用嚴(yán)謹(jǐn)?shù)姆椒ㄈ彶楹驮u(píng)價(jià)相關(guān)研究證據(jù)。與個(gè)案研究不同,系統(tǒng)綜述研究并不是進(jìn)行新的原始研究,而是通過(guò)審查已有研究的發(fā)現(xiàn)和結(jié)果來(lái)處理和解決研究問(wèn)題;②非系統(tǒng)性綜述:與系統(tǒng)綜述的研究方法和過(guò)程有所不同,非系統(tǒng)性綜述通常是指沒(méi)有正式應(yīng)用系統(tǒng)評(píng)價(jià)方法進(jìn)行的綜述評(píng)價(jià),是一種針對(duì)某一特定問(wèn)題去綜合相關(guān)研究證據(jù)的可能較為非正式的或隱含的不太透明的過(guò)程,但也是在充分詳實(shí)的背景材料和知識(shí)下進(jìn)行。如傳統(tǒng)的文獻(xiàn)綜述、概念性綜述、敘述性綜述、概括性綜述、評(píng)論性綜述、專家/同行評(píng)議、現(xiàn)實(shí)性綜述、前沿性綜述、范圍界定性綜述等[2];③特定評(píng)估:特定評(píng)估一般是指對(duì)一項(xiàng)或多項(xiàng)已被確認(rèn)和報(bào)告為特定發(fā)現(xiàn)的嚴(yán)謹(jǐn)研究結(jié)果的評(píng)估,允許在不必檢查完整的證據(jù)基礎(chǔ)的情況下陳述足夠的證據(jù);④快速評(píng)估:快速證據(jù)評(píng)估通常提供了比文獻(xiàn)綜述更結(jié)構(gòu)化、更嚴(yán)謹(jǐn)?shù)淖C據(jù)搜索和質(zhì)量評(píng)估方法,但可能沒(méi)有系統(tǒng)綜述詳盡和全面??焖僭u(píng)估一般可用于:獲得關(guān)于某個(gè)特定議題的證據(jù)密度和質(zhì)量的概覽;通過(guò)提供關(guān)鍵主題的證據(jù)來(lái)支持規(guī)劃決策;通過(guò)識(shí)別和確定證據(jù)差距支持開(kāi)展進(jìn)一步研究等。

    2.1.3 循證指南

    循證指南一般是在對(duì)證據(jù)進(jìn)行審查和評(píng)價(jià)的基礎(chǔ)上制定的,目的是基于已有研究證據(jù)和其他相關(guān)因素為決策者提供指導(dǎo)和建議。對(duì)于一般決策者來(lái)說(shuō),研究問(wèn)題的出發(fā)點(diǎn)通常是他們亟需解決的某個(gè)重要議題,個(gè)案研究或證據(jù)綜合的研究結(jié)果已足夠幫助他們快速確定最有效的解決方案,并提供能夠證明解決方案有效性的相關(guān)證據(jù)。這種方法常應(yīng)用在社會(huì)政策的醫(yī)藥產(chǎn)品和品牌干預(yù)計(jì)劃中,一般都是先提出行動(dòng)方案,然后尋求有關(guān)其有效性的證據(jù),在這種具體方案已確定的情況下,基于一些嚴(yán)謹(jǐn)研究報(bào)告的正面結(jié)果即可確定干預(yù)計(jì)劃是有效的,并可根據(jù)一到兩項(xiàng)好的研究結(jié)果來(lái)快速建立證據(jù)基礎(chǔ)。但是,已有研究證據(jù)的研究問(wèn)題的范圍常被限定在一個(gè)特定問(wèn)題或特定干預(yù)上,在解決方案不確定的情況下,如果僅根據(jù)一到兩項(xiàng)好的研究結(jié)果就做出決策,無(wú)論這些研究結(jié)果是多么可信,也難以對(duì)潛在的更廣泛的證據(jù)基礎(chǔ)提供嚴(yán)謹(jǐn)?shù)脑u(píng)估。因而,循證指南的實(shí)現(xiàn)過(guò)程通常是基于專家對(duì)已有研究的解釋,并在與其他利益相關(guān)者進(jìn)行協(xié)商的基礎(chǔ)上來(lái)進(jìn)行,具體協(xié)商的內(nèi)容信息可能包括:①?zèng)Q策者運(yùn)作的目標(biāo)群體的各個(gè)方面的特定背景信息,這些背景信息可能與已有證據(jù)基礎(chǔ)的研究背景有所不同;②參與決策制定或受決策影響的不同利益相關(guān)者的特定視角,如價(jià)值觀和優(yōu)先權(quán)等。理論上,個(gè)體決策者也可以直接使用已有證據(jù)基礎(chǔ),但實(shí)際上與使用個(gè)案研究的研究結(jié)果一樣,仍然需要時(shí)間和專業(yè)技能。此外,一般決策者可能無(wú)法接觸或難以充分理解不同利益相關(guān)者的觀點(diǎn)。因此,由國(guó)家或地方專家組、服務(wù)使用者和決策者在特定背景和視角下對(duì)證據(jù)基礎(chǔ)進(jìn)行解釋,并在循證指南中提出結(jié)論,往往可能會(huì)更具效率和優(yōu)勢(shì)。

    2.2 證據(jù)標(biāo)準(zhǔn)分析

    第二個(gè)維度是證據(jù)標(biāo)準(zhǔn),這是證據(jù)門戶提供證據(jù)主張的基礎(chǔ)準(zhǔn)則。本文主要從兩方面進(jìn)行著重分析:證據(jù)基礎(chǔ)納入信息的標(biāo)準(zhǔn)、評(píng)估和應(yīng)用證據(jù)基礎(chǔ)的標(biāo)準(zhǔn)。

    2.2.1 證據(jù)基礎(chǔ)納入信息的標(biāo)準(zhǔn)

    證據(jù)基礎(chǔ)納入信息的標(biāo)準(zhǔn),本文研究的重點(diǎn)是“什么樣的信息可以作為證據(jù),并被證據(jù)基礎(chǔ)所需要和納入”。通過(guò)重點(diǎn)關(guān)注那些提供干預(yù)措施有效性信息的證據(jù)門戶網(wǎng)站,調(diào)研和分析一些具體方法或計(jì)劃是否能有效地實(shí)現(xiàn)某些成果。如英國(guó)的有效性策略網(wǎng)絡(luò)(WWN)[10]目前由13個(gè)有效性策略研究中心組成,其中之一的教育捐贈(zèng)基金會(huì)(EEF)[11]研發(fā)的教學(xué)和學(xué)習(xí)工具包,致力于總結(jié)和提供關(guān)于改善5~16歲兒童教學(xué)和學(xué)習(xí)成果的國(guó)際證據(jù)。該工具包目前已收錄了35種有關(guān)兒童教學(xué)和學(xué)習(xí)的干預(yù)措施,包括“藝術(shù)參與(Arts Participation)”“行為干預(yù)(Behaviour Interventions)”“協(xié)作學(xué)習(xí)(Collaborative Learning)”等,針對(duì)每一種干預(yù)措施都詳細(xì)報(bào)告了措施的具體內(nèi)容、效果、證據(jù)的安全性、成本、實(shí)施相應(yīng)策略前應(yīng)考慮的事項(xiàng)、證據(jù)的定義和評(píng)級(jí)、相關(guān)參考文獻(xiàn)、元分析摘要、相關(guān)項(xiàng)目等。如美國(guó)教育部開(kāi)發(fā)的教學(xué)策略有效性門戶(IES-WWC)[8]旨在為教育工作者提供循證決策所需的信息,主要通過(guò)實(shí)施一些品牌計(jì)劃來(lái)構(gòu)建證據(jù)基礎(chǔ),如“知識(shí)就是力量計(jì)劃(Knowledge Is Power Program-KIPP)”“推廣另類思維策略(Promoting Alternative THinking Strategies-PATS)”“為美國(guó)而教(Teach for America-TFA)”等,針對(duì)每一項(xiàng)計(jì)劃都詳細(xì)報(bào)告了計(jì)劃實(shí)施的具體內(nèi)容及對(duì)相關(guān)證據(jù)進(jìn)行了系統(tǒng)評(píng)價(jià)研究,并提供了結(jié)果摘要及干預(yù)報(bào)告,內(nèi)容包括證據(jù)適用的結(jié)果域(IES-WWC中實(shí)際是指主題領(lǐng)域)、證據(jù)的有效性評(píng)級(jí)、符合WWC證據(jù)設(shè)計(jì)標(biāo)準(zhǔn)的研究數(shù)量、干預(yù)有效性指標(biāo)的改進(jìn)指數(shù)等。再如美國(guó)司法部少年司法和犯罪預(yù)防辦公室創(chuàng)建的示范計(jì)劃指南(OJJDP-MPG)[15]旨在提供基于證據(jù)的少年司法、青少年預(yù)防、干預(yù)和再入境計(jì)劃信息,也主要通過(guò)實(shí)施一些品牌計(jì)劃來(lái)構(gòu)建證據(jù)基礎(chǔ),如“成長(zhǎng)中的成年人(Adults in the Making-AFM)”“更好的未來(lái)計(jì)劃(Better Futures Program-BFP)”“家校共育(Families and Schools Together-FAST)”等,針對(duì)每一項(xiàng)計(jì)劃也都詳細(xì)報(bào)告了計(jì)劃的類型、目標(biāo)、理論、組成內(nèi)容、適用目標(biāo)人群,以及評(píng)估結(jié)果、評(píng)估方法、成本、基于系統(tǒng)評(píng)價(jià)的證據(jù)基礎(chǔ)、證據(jù)等級(jí)及相關(guān)實(shí)踐等。

    調(diào)研發(fā)現(xiàn),大部分證據(jù)門戶網(wǎng)站都比較關(guān)注干預(yù)措施的有效性信息,但由于它們所致力于解決的研究問(wèn)題的類型不同,因而在如何制定干預(yù)措施并利用干預(yù)措施來(lái)構(gòu)建證據(jù)基礎(chǔ)方面是有所不同的。初步來(lái)看,美國(guó)等提供干預(yù)措施有效性信息的證據(jù)門戶網(wǎng)站一般側(cè)重通過(guò)實(shí)施品牌計(jì)劃來(lái)制定干預(yù)措施并構(gòu)建證據(jù)基礎(chǔ),而英國(guó)及歐盟等的證據(jù)門戶網(wǎng)站一般側(cè)重通過(guò)實(shí)施一系列個(gè)案研究實(shí)踐來(lái)制定干預(yù)措施并構(gòu)建證據(jù)基礎(chǔ),這也從側(cè)面反映了不同國(guó)家和地區(qū)在提供教育和社會(huì)服務(wù)等的理念和性質(zhì)方面是有所不同的。也有少數(shù)一些證據(jù)門戶網(wǎng)站在制定干預(yù)措施時(shí)既關(guān)注特定的品牌計(jì)劃項(xiàng)目,又注重于提供研究實(shí)踐指導(dǎo),如英國(guó)國(guó)家健康與臨床卓越研究所(NICE)[12]從特定實(shí)踐問(wèn)題(如虐待兒童、體育活動(dòng)或飲食等)開(kāi)始采取更廣泛的方法,然后考慮哪些干預(yù)措施可能有所幫助,以及存在哪些證據(jù)可以證明這些干預(yù)措施的有效性。進(jìn)一步分析發(fā)現(xiàn),研究證據(jù)的使用者希望了解有關(guān)干預(yù)措施有效性的證據(jù)基礎(chǔ)的目的一般是為了應(yīng)對(duì)社會(huì)問(wèn)題,他們感興趣的重點(diǎn)可能包括一些不同的方面,如證據(jù)產(chǎn)生或被發(fā)現(xiàn)的背景、證據(jù)的有效性、證據(jù)的強(qiáng)度、實(shí)現(xiàn)影響的過(guò)程、成本或成本效益等。大多數(shù)證據(jù)門戶網(wǎng)站的另一個(gè)不同之處在于總結(jié)證據(jù)基礎(chǔ)的方法可能有所不同。一種常見(jiàn)方法是使用現(xiàn)有的系統(tǒng)評(píng)價(jià)方法,如基于統(tǒng)計(jì)的元分析、基于嚴(yán)謹(jǐn)和相關(guān)性審查的概述、基于事先審查的敘述性綜述等;另一種方法是實(shí)施新的系統(tǒng)評(píng)價(jià)方法,如非系統(tǒng)性綜述、使用特定的量表去評(píng)估原始研究,并對(duì)滿足方法學(xué)質(zhì)量閾值的研究進(jìn)行敘述性綜合、對(duì)文獻(xiàn)進(jìn)行系統(tǒng)搜索并使用專家模型去創(chuàng)建證據(jù)基礎(chǔ)的概要等。此外,也有一些證據(jù)門戶網(wǎng)站在總結(jié)證據(jù)基礎(chǔ)時(shí)采用特定的方法,如IES-WWC并不審查整個(gè)證據(jù)基礎(chǔ),認(rèn)為只要沒(méi)有研究表明當(dāng)前存在壓倒性的相反證據(jù),就根據(jù)至少一到兩項(xiàng)具有有益影響證據(jù)的嚴(yán)謹(jǐn)研究去判斷計(jì)劃的有效性。

    因此,綜合整體調(diào)研結(jié)果深入來(lái)看,證據(jù)基礎(chǔ)納入信息的標(biāo)準(zhǔn)主要可概括為以下幾個(gè)方面:①背景信息:主要用于解釋證據(jù)從何而來(lái),以方便證據(jù)使用者判斷證據(jù)與其研究背景或上下文語(yǔ)境的相關(guān)性;②有效性信息:主要用于報(bào)告干預(yù)措施的影響有多大,并對(duì)證據(jù)進(jìn)行評(píng)級(jí)。一般是基于研究的質(zhì)量,研究發(fā)現(xiàn)和調(diào)查結(jié)果的統(tǒng)計(jì)顯著性、重要程度和一致性等,總結(jié)在目標(biāo)成果領(lǐng)域進(jìn)行干預(yù)的安全性和有效性,并基于一項(xiàng)或多項(xiàng)的隨機(jī)對(duì)照試驗(yàn)RCTs、元分析方法、系統(tǒng)評(píng)價(jià)方法等評(píng)估方法對(duì)證據(jù)的質(zhì)量或有效性進(jìn)行評(píng)級(jí)。如EEF基于一系列的系統(tǒng)評(píng)價(jià)和元分析研究結(jié)果指出:總體而言,藝術(shù)參與對(duì)于兒童學(xué)術(shù)學(xué)習(xí)的影響似乎是積極的但較低;③強(qiáng)度信息:主要用于描述證據(jù)的強(qiáng)度和范圍,即證據(jù)產(chǎn)生影響的程度。如美國(guó)加州兒童福利循證信息交換所(CEBC)[22]使用科學(xué)評(píng)級(jí)量表(Scientific Rating Scale)[32]對(duì)支持實(shí)踐或計(jì)劃的研究證據(jù)的強(qiáng)度進(jìn)行1~5級(jí)的分類評(píng)級(jí):a.得到研究證據(jù)的充分支持;b.研究證據(jù)支持;c.有希望的研究證據(jù);d.證據(jù)不能證明效果;e.考慮了實(shí)踐(可能存在有害風(fēng)險(xiǎn))。如EEF使用1~5個(gè)帶鎖的小圖標(biāo)來(lái)展示證據(jù)的強(qiáng)度:1個(gè)鎖表示非常有限的證據(jù);2個(gè)鎖表示有限的證據(jù);3個(gè)鎖表示適度的證據(jù);4個(gè)鎖表示廣泛的證據(jù);5個(gè)鎖表示非常廣泛的證據(jù);④過(guò)程信息:主要用于報(bào)告證據(jù)實(shí)現(xiàn)影響的過(guò)程,包括在不同背景或?qū)嵤﹩?wèn)題下進(jìn)行干預(yù)決策的相關(guān)的計(jì)劃目標(biāo)、干預(yù)過(guò)程、理論依據(jù)及關(guān)鍵組成部分等;⑤成本信息:主要用于報(bào)告實(shí)施干預(yù)所需要的資源和費(fèi)用,包括財(cái)政撥款、場(chǎng)地租金、培訓(xùn)費(fèi)用、人員工資、福利待遇等各方面財(cái)力、物力、人力的支出消費(fèi)等。如NICE構(gòu)建了經(jīng)濟(jì)模型對(duì)證據(jù)進(jìn)行經(jīng)濟(jì)評(píng)估審查和成本效益建模,主要使用質(zhì)量調(diào)整壽命年(Quality Adjusted Life Years,QALYs)[33]進(jìn)行計(jì)算以確定相關(guān)的資源分配問(wèn)題;⑥實(shí)踐指導(dǎo):除了與評(píng)估干預(yù)措施直接相關(guān)的證據(jù)基礎(chǔ)外,一些證據(jù)門戶網(wǎng)站還針對(duì)如何采取行動(dòng)提供了相應(yīng)指導(dǎo)和建議,通常也作為干預(yù)報(bào)告的相關(guān)參考或附錄部分被鏈接和納入證據(jù)基礎(chǔ),有的規(guī)模比較龐大的甚至還作為獨(dú)立的資源模塊供查詢?yōu)g覽。具體內(nèi)容有的是針對(duì)實(shí)施干預(yù)時(shí)應(yīng)考慮的問(wèn)題提供一些簡(jiǎn)單的建議(如EEF、EMCDDA[13]等),有的則是關(guān)于實(shí)施過(guò)程的更具體的建議(如IES-WWC、CEBC等)。部分證據(jù)門戶網(wǎng)站如IES-WWC、EEF、NICE等除了關(guān)注證據(jù)的有效性信息之外,還通過(guò)成立獨(dú)立的工作小組或委員會(huì)(包括專業(yè)人士和非專業(yè)人士)基于證據(jù)和利益相關(guān)者的咨詢建議創(chuàng)建更為正式的循證指南和實(shí)踐指導(dǎo)等??偟膩?lái)說(shuō),實(shí)踐指導(dǎo)不僅僅是簡(jiǎn)單地總結(jié)證據(jù),它還需要評(píng)估證據(jù),同時(shí)需要考慮到在特定背景下應(yīng)用證據(jù)時(shí)可能出現(xiàn)的適用性和價(jià)值問(wèn)題,尤其是在衛(wèi)生領(lǐng)域和機(jī)構(gòu)相關(guān)的證據(jù)門戶中比較常見(jiàn)。

    2.2.2 評(píng)估和應(yīng)用證據(jù)基礎(chǔ)的標(biāo)準(zhǔn)

    上文中研究的用于提供證據(jù)主張的證據(jù)基礎(chǔ)都是基于不同類型的證據(jù)。因此,提出證據(jù)主張時(shí)也同樣需要不同的研究方法和不同的標(biāo)準(zhǔn)去評(píng)估和應(yīng)用這些證據(jù)基礎(chǔ)。例如,該采用何種標(biāo)準(zhǔn)去判定證據(jù)的有效性有多強(qiáng)?該如何判斷這些證據(jù)基礎(chǔ)是否正當(dāng)合理以及該如何應(yīng)用這些標(biāo)準(zhǔn)?證據(jù)標(biāo)準(zhǔn)應(yīng)是一種開(kāi)發(fā)和評(píng)估研究質(zhì)量和研究結(jié)果可靠性的方法體系,它不僅要能捕獲研究的內(nèi)部有效性(Cochrane偏倚風(fēng)險(xiǎn)工具將其定義為“偏倚風(fēng)險(xiǎn)”),即研究采用的內(nèi)部方法體系的一致性,包括研究結(jié)果是否真實(shí)可信等,而且還要能捕獲研究的外部有效性(SURE將其定義為精確度與普遍性),即研究評(píng)估的程度是否能真正達(dá)到外部真實(shí)世界所希望達(dá)到的評(píng)估程度,以便去衡量研究結(jié)果是否可以重用等。顯然,很難有一個(gè)通用的證據(jù)標(biāo)準(zhǔn),因?yàn)闃?biāo)準(zhǔn)可能因研究問(wèn)題(可能涉及不同研究主體、研究主題領(lǐng)域等)、研究產(chǎn)品類型(如個(gè)案/單項(xiàng)研究、證據(jù)綜合、循證指南等)或研究設(shè)計(jì)(如定量研究、定性研究、混合研究等)而異。

    調(diào)研發(fā)現(xiàn),目前已經(jīng)有許多證據(jù)標(biāo)準(zhǔn)可用于評(píng)估不同研究產(chǎn)品類型或研究設(shè)計(jì)的質(zhì)量,有的還提供了評(píng)估工具或評(píng)估檢查清單,以幫助識(shí)別可能扭曲研究結(jié)果的各種錯(cuò)誤或偏倚。如英國(guó)卡迪夫大學(xué)的審查證據(jù)專家組(Specialist Unit for Review Evidence,SURE)[34]致力于在健康和社會(huì)護(hù)理領(lǐng)域進(jìn)行系統(tǒng)和文獻(xiàn)審查,調(diào)查方法創(chuàng)新并提供咨詢和培訓(xùn)服務(wù),它創(chuàng)建和維護(hù)了一系列評(píng)論性評(píng)估工具和評(píng)估檢查清單,提出了根據(jù)研究設(shè)計(jì)分類的證據(jù)標(biāo)準(zhǔn):將研究設(shè)計(jì)細(xì)分為初步研究相關(guān)的系統(tǒng)文獻(xiàn)綜述研究、隨機(jī)對(duì)照試驗(yàn)、非隨機(jī)對(duì)照試驗(yàn)、觀察性研究、定性觀點(diǎn)和意見(jiàn)研究、診斷準(zhǔn)確性研究、經(jīng)濟(jì)評(píng)估研究等,針對(duì)每一種研究設(shè)計(jì)都提出和推薦了多種不同的評(píng)估方法,包括SURE(SURE專家組自建和推薦標(biāo)準(zhǔn))、ROBIS、AMSTAR 2、CASP、JBI、NHLBI、SIGN、ROBINS-I、QUADAS-2等。同時(shí),目前也已經(jīng)有一些用于評(píng)估具有不同研究設(shè)計(jì)的研究主體的證據(jù)標(biāo)準(zhǔn),最知名的是GRADE標(biāo)準(zhǔn)[35-36],它整合了證據(jù)分類分級(jí)、質(zhì)量評(píng)估和推薦轉(zhuǎn)化的證據(jù)標(biāo)準(zhǔn),已經(jīng)被WHO、Cochrane等多個(gè)國(guó)際組織機(jī)構(gòu)所廣泛采納應(yīng)用,并且GRADE標(biāo)準(zhǔn)同樣適用于開(kāi)發(fā)和評(píng)估研究報(bào)告、系統(tǒng)綜述/評(píng)價(jià)、技術(shù)/實(shí)踐/循證指南等。如WHO目前發(fā)布的很多報(bào)告與指南都是基于GRADE標(biāo)準(zhǔn),涉及應(yīng)對(duì)COVID-19、流感臨床衛(wèi)生管理、學(xué)校衛(wèi)生服務(wù)、營(yíng)養(yǎng)健康等[37]。此外,一些專注于研究和采用循證方法的組織機(jī)構(gòu)也會(huì)制定和發(fā)布相關(guān)的證據(jù)標(biāo)準(zhǔn)。如英國(guó)政府外交、聯(lián)邦與發(fā)展辦公室(FDCO)于2013—2014年先后發(fā)布和更新了“注意事項(xiàng):評(píng)估證據(jù)的強(qiáng)度(How to Note:Assessing the Strength of Evidence)[38]”指南文件,旨在向從事國(guó)際發(fā)展規(guī)劃的人員提供和解釋評(píng)估證據(jù)的最佳方法,包括對(duì)單項(xiàng)研究的描述和其質(zhì)量的評(píng)估,以及對(duì)證據(jù)主體主要特征的總結(jié)和其整體強(qiáng)度的評(píng)估等。再如NICE于2012—2022年持續(xù)發(fā)布和更新了“質(zhì)量標(biāo)準(zhǔn)過(guò)程指南(Quality Standards Process Guide)[39]”,旨在幫助想要提高健康和社會(huì)護(hù)理服務(wù)質(zhì)量的機(jī)構(gòu)和人員,通過(guò)證據(jù)定義和識(shí)別優(yōu)質(zhì)護(hù)理、監(jiān)控與改善實(shí)現(xiàn)結(jié)果的相關(guān)過(guò)程。NICE質(zhì)量標(biāo)準(zhǔn)有兩個(gè)主要組成部分:質(zhì)量聲明和質(zhì)量評(píng)估措施,每個(gè)質(zhì)量標(biāo)準(zhǔn)通常包含至少5個(gè)帶有相關(guān)評(píng)估措施的質(zhì)量聲明,每個(gè)質(zhì)量聲明都指定了高質(zhì)量護(hù)理或服務(wù)提供的至少1個(gè)概念或要求(如單一干預(yù)、行動(dòng)或事件),并且每個(gè)聲明都附有其對(duì)不同受眾(如服務(wù)提供者、相關(guān)從業(yè)者、專員、服務(wù)使用者等)的影響的描述、使用指導(dǎo)、評(píng)估的數(shù)據(jù)來(lái)源、所使用術(shù)語(yǔ)的定義及對(duì)證據(jù)的相關(guān)性、平等性與差異性的考慮。目前,基于該質(zhì)量標(biāo)準(zhǔn)NICE已經(jīng)制定了關(guān)于多種主題的循證指南和建議,包括藥物實(shí)踐指南、公共衛(wèi)生指南、癌癥服務(wù)指南等。

    總體來(lái)看,大多數(shù)證據(jù)標(biāo)準(zhǔn)都比較關(guān)注證據(jù)的技術(shù)質(zhì)量,并且對(duì)證據(jù)的質(zhì)量評(píng)估還包括研究方法是否符合預(yù)期目標(biāo)、研究問(wèn)題與研究重點(diǎn)的相關(guān)性、研究結(jié)果的可靠性與可重用性的評(píng)估等。綜上研究,評(píng)估和應(yīng)用證據(jù)基礎(chǔ)的標(biāo)準(zhǔn)主要可以概括為以下幾個(gè)方面[40]:①對(duì)證據(jù)進(jìn)行審查以提出關(guān)于證據(jù)基礎(chǔ)主張的方法進(jìn)行評(píng)估的證據(jù)標(biāo)準(zhǔn)。具體內(nèi)容一般包括:證據(jù)基礎(chǔ)審查的技術(shù)質(zhì)量;審查問(wèn)題的方法是否符合預(yù)期目標(biāo);審查問(wèn)題與審查重點(diǎn)的相關(guān)性;審查結(jié)果的可靠性與可重用性;②對(duì)包含在證據(jù)基礎(chǔ)審查中的個(gè)案研究的質(zhì)量和相關(guān)性進(jìn)行評(píng)估的證據(jù)標(biāo)準(zhǔn)。具體內(nèi)容一般包括:個(gè)案研究的技術(shù)質(zhì)量;審查個(gè)案研究相關(guān)問(wèn)題的方法是否符合預(yù)期目標(biāo);審查問(wèn)題與研究重點(diǎn)的相關(guān)性;個(gè)案研究結(jié)果的可靠性與可重用性;③對(duì)包含在證據(jù)基礎(chǔ)審查中的證據(jù)總體進(jìn)行評(píng)估的證據(jù)標(biāo)準(zhǔn)。具體內(nèi)容一般包括:證據(jù)總體的性質(zhì);證據(jù)的范圍和分布;④對(duì)審查提出的不同證據(jù)主張進(jìn)行評(píng)估的證據(jù)標(biāo)準(zhǔn)。其具體內(nèi)容一般取決于所提出的證據(jù)主張的類型,可根據(jù)實(shí)際情況基于上述3種證據(jù)標(biāo)準(zhǔn)進(jìn)行組合評(píng)估,并可按需對(duì)每一部分內(nèi)容賦予不同的權(quán)重。

    3 對(duì)我國(guó)循證社會(huì)科學(xué)證據(jù)知識(shí)庫(kù)建設(shè)的啟示

    3.1 明確提出證據(jù)主張的目的和方法,確保證據(jù)分級(jí)的一致性

    不同的證據(jù)門戶可能具有不同的產(chǎn)生背景、發(fā)展歷史、資源類型、目標(biāo)受眾等,因而它們不僅在形式和功能上有所不同,相關(guān)研究方法和證據(jù)標(biāo)準(zhǔn)也不盡相同。尤其是一些證據(jù)門戶網(wǎng)站可能提供了非常詳細(xì)的方法或標(biāo)準(zhǔn)來(lái)評(píng)估納入的原始研究,但在如何評(píng)估和應(yīng)用整個(gè)證據(jù)基礎(chǔ)方面提供的細(xì)節(jié)信息卻相對(duì)較少??梢?jiàn)不同的證據(jù)門戶在對(duì)它們所涵蓋的證據(jù)生態(tài)系統(tǒng)不同部分的細(xì)節(jié)問(wèn)題的解釋和復(fù)雜性方面,所投入的注意力也是不均衡的,因而幾乎所有的證據(jù)系統(tǒng)都存在著不同程度的優(yōu)劣點(diǎn)。

    因此,在構(gòu)建中國(guó)循證社會(huì)科學(xué)證據(jù)知識(shí)庫(kù)時(shí),應(yīng)明確提出證據(jù)主張的目的和方法,并確保證據(jù)分級(jí)的一致性,包括相關(guān)循證指導(dǎo)、證據(jù)基礎(chǔ)、納入的研究等。具體如一方面需考慮證據(jù)知識(shí)庫(kù)的目標(biāo)受眾和應(yīng)用場(chǎng)景,對(duì)其目標(biāo)和方法、相關(guān)研究和循證指導(dǎo)產(chǎn)生的特定作用等做出解釋,以便向用戶證明其是否實(shí)現(xiàn)了自己的預(yù)期使命;另一方面可能還需要考慮證據(jù)知識(shí)庫(kù)所涵蓋的證據(jù)生態(tài)系統(tǒng)的不同部分的證據(jù)標(biāo)準(zhǔn)在細(xì)節(jié)問(wèn)題和復(fù)雜性方面的一致性,以便讓用戶了解其是否適合自己的研究目的。

    3.2 考慮關(guān)注和采用更廣泛的而不是狹窄的證據(jù)基礎(chǔ)問(wèn)題

    大多數(shù)證據(jù)門戶網(wǎng)站都比較關(guān)注干預(yù)措施的有效性問(wèn)題,尤其是美國(guó)的一些證據(jù)門戶網(wǎng)站更加關(guān)注某些特定品牌計(jì)劃的有效性,這可能表明它們納入的研究都是可用的干預(yù)措施,并且可能聚焦于某些特定社會(huì)政策問(wèn)題已經(jīng)經(jīng)歷了一段較長(zhǎng)的研究與開(kāi)發(fā)時(shí)期。但是,計(jì)劃方法通常針對(duì)的是較為狹窄的研究問(wèn)題,有助于在使用時(shí)快速便捷地比較其相對(duì)有效性,但如果它們之間的差異較小,用戶則可能難以抉擇。因此,一些證據(jù)門戶網(wǎng)站如EEF、NICE等采取了更廣泛的方法去評(píng)估其定義的證據(jù)基礎(chǔ)問(wèn)題,這對(duì)用戶來(lái)說(shuō)可能更有成效。尤其是那些包含邏輯模型和過(guò)程數(shù)據(jù)的重要議題驅(qū)動(dòng)的問(wèn)題,可以讓用戶更清晰地了解其因果流程、某些干預(yù)措施在不同情境下的相對(duì)有效性以及干預(yù)措施如何適應(yīng)這些情境等,對(duì)用戶來(lái)說(shuō)可能非常有用。但該方法存在的一個(gè)挑戰(zhàn)是如何對(duì)已有品牌計(jì)劃程序進(jìn)行重新編碼,以便將它們分配到其中一種更廣泛定義的方法中去。一個(gè)單一的程序在理論上是可以聯(lián)合多個(gè)組件的,只要有足夠的樣本量支持,那么探索這些不同組合的疊加或交互效應(yīng)也是可能實(shí)現(xiàn)的。此外,一些著重關(guān)注特定品牌計(jì)劃有效性的證據(jù)門戶網(wǎng)站也有可能采用“一到兩項(xiàng)良好的研究”方法去聲明證據(jù)基礎(chǔ),究其原因可能是因?yàn)槠湓O(shè)立的目的是為了評(píng)估是否存在證據(jù)去支持某項(xiàng)計(jì)劃,而不是對(duì)解決問(wèn)題的不同方法的相對(duì)功效進(jìn)行比較分析。

    因此,在構(gòu)建中國(guó)循證社會(huì)科學(xué)證據(jù)知識(shí)庫(kù)時(shí),應(yīng)考慮關(guān)注和采用更廣泛的而不是狹窄的證據(jù)基礎(chǔ)問(wèn)題,如包含有效性或成本效益的證據(jù),以及有關(guān)在不同情境下產(chǎn)生影響的過(guò)程的理論和數(shù)據(jù)等。具體可能涉及對(duì)某些問(wèn)題或重要議題的分析、對(duì)為什么某些干預(yù)措施可能會(huì)有用的說(shuō)明、對(duì)因果流程研究的評(píng)價(jià)、對(duì)在不同情境下為實(shí)現(xiàn)預(yù)期收益而采取的干預(yù)措施的成本效益證據(jù)的審查等。此外,還可以在不考慮相似的干預(yù)措施的更廣泛的情境下,關(guān)注特定干預(yù)措施功效的適用性問(wèn)題。

    3.3 采用明確嚴(yán)謹(jǐn)?shù)淖C據(jù)綜合方法對(duì)已有證據(jù)基礎(chǔ)提出主張

    不同的證據(jù)門戶評(píng)估證據(jù)基礎(chǔ)的方法也是各不相同的。如前文所述,一些證據(jù)門戶網(wǎng)站使用預(yù)先存在的系統(tǒng)評(píng)價(jià)方法,如明確嚴(yán)謹(jǐn)?shù)姆椒ㄈピu(píng)價(jià)現(xiàn)有研究的綜合結(jié)果,另一些實(shí)施了新的系統(tǒng)或非系統(tǒng)評(píng)價(jià)方法,還有一些是基于一項(xiàng)或多項(xiàng)嚴(yán)謹(jǐn)?shù)脑u(píng)估來(lái)做出判斷??偟膩?lái)說(shuō),當(dāng)前最強(qiáng)健的證據(jù)標(biāo)準(zhǔn)是系統(tǒng)評(píng)價(jià)方法,因?yàn)樗褂昧藝?yán)謹(jǐn)透明的研究過(guò)程來(lái)識(shí)別先前作為證據(jù)基礎(chǔ)的研究中某個(gè)問(wèn)題的已知或未知之處,可以幫助用戶在規(guī)劃新研究時(shí)及時(shí)深入了解和掌握已有證據(jù),并且使用預(yù)先存在的系統(tǒng)評(píng)價(jià)方法會(huì)提高證據(jù)評(píng)估的效率和減少重復(fù)研究。但是,使用預(yù)先存在的系統(tǒng)評(píng)價(jià)方法仍需確保其評(píng)價(jià)方法符合相關(guān)技術(shù)標(biāo)準(zhǔn)及與所研究問(wèn)題的相關(guān)性。如果綜合報(bào)告不清楚研究問(wèn)題的框架結(jié)構(gòu)和綜合集成的結(jié)果導(dǎo)致決策者誤解和誤用研究結(jié)果的后果將是極其嚴(yán)重的,決策者需要的應(yīng)是一個(gè)嚴(yán)謹(jǐn)、明確的和決策制定相關(guān)的綜合報(bào)告。此外,綜合報(bào)告研究的通常是廣義的全局性知識(shí),在使用時(shí)可能需要基于本地背景信息對(duì)證據(jù)進(jìn)行重新解釋。另一種選擇是實(shí)施新的系統(tǒng)評(píng)價(jià)方法,不僅需要進(jìn)行原始研究,而且仍然需要基于嚴(yán)謹(jǐn)透明的方法將其系統(tǒng)化以符合相關(guān)評(píng)價(jià)的證據(jù)標(biāo)準(zhǔn)。還有一種選擇是基于一項(xiàng)或兩項(xiàng)高質(zhì)量的嚴(yán)謹(jǐn)?shù)膫€(gè)案研究進(jìn)行評(píng)估的方法,但由于其沒(méi)有考慮到其他顯示沒(méi)有影響或有害影響的研究,并且需要統(tǒng)計(jì)正面、負(fù)面及沒(méi)有影響研究報(bào)告的數(shù)量,導(dǎo)致它可能是一種比普通計(jì)票方法更弱的方法。而且,對(duì)證據(jù)有效性的研究一般是基于概率統(tǒng)計(jì)的方法,個(gè)案研究的結(jié)果經(jīng)常各不相同且很容易存在隨機(jī)錯(cuò)誤,從而歪曲潛在的事實(shí),因而僅依賴一到兩項(xiàng)恰好顯示出正面影響的研究結(jié)果而不參考其他相關(guān)研究則很可能產(chǎn)生誤導(dǎo)。統(tǒng)計(jì)綜合報(bào)告中的數(shù)據(jù)集成提供的一般是對(duì)整個(gè)證據(jù)基礎(chǔ)的全局性指示而并非基于某項(xiàng)研究結(jié)果所選擇的證據(jù),因而即使關(guān)于某個(gè)主題的已有研究很少,使用系統(tǒng)評(píng)價(jià)方法來(lái)編排和綜合已有的研究仍是比較好的方法。

    因此,在構(gòu)建中國(guó)循證社會(huì)科學(xué)證據(jù)知識(shí)庫(kù)時(shí),應(yīng)采用明確嚴(yán)謹(jǐn)?shù)淖C據(jù)綜合方法對(duì)已有證據(jù)基礎(chǔ)提出主張,如優(yōu)先考慮使用系統(tǒng)評(píng)價(jià)方法,首先是預(yù)先存在的系統(tǒng)評(píng)價(jià)方法,如果它們與所研究問(wèn)題嚴(yán)格相關(guān)或者有重疊或補(bǔ)充之處;其次是一些新的系統(tǒng)評(píng)價(jià)方法;最后是盡量避免使用非系統(tǒng)性評(píng)價(jià)方法和諸如“一到兩項(xiàng)好的研究”此類評(píng)價(jià)方法。同時(shí),需要對(duì)所使用的評(píng)價(jià)方法進(jìn)行明確規(guī)定和解釋說(shuō)明,使其能夠遵循系統(tǒng)評(píng)價(jià)所有預(yù)期的步驟、過(guò)程和透明度,具體可能涉及:評(píng)價(jià)的類型、所提出評(píng)價(jià)問(wèn)題的性質(zhì)及任何潛在的觀點(diǎn)或假設(shè)、研究方法的納入標(biāo)準(zhǔn)(如實(shí)驗(yàn)性研究、非實(shí)驗(yàn)性研究等)、其他方面的納入標(biāo)準(zhǔn)(如主題領(lǐng)域、地理位置、歷史背景和語(yǔ)種限制的規(guī)范說(shuō)明等)、對(duì)納入研究的數(shù)據(jù)進(jìn)行編碼和分析及綜合的方法等。此外,還需要考慮對(duì)基于已有證據(jù)基礎(chǔ)提出不同主張的不同證據(jù)標(biāo)準(zhǔn)進(jìn)行明確規(guī)定和解釋說(shuō)明,包括干預(yù)措施的影響(包括有害和有益的影響)、證據(jù)的強(qiáng)度/范圍/一致性/可信度、過(guò)程數(shù)據(jù)和邏輯模型、背景(如不同研究背景下研究結(jié)果的差異和適用性等)、成本和成本效益數(shù)據(jù)等信息,因?yàn)檫@些也都可視為有助于決策制定的良好數(shù)據(jù)。

    3.4 基于已有證據(jù)基礎(chǔ)研發(fā)政策和實(shí)踐指導(dǎo)的方法及標(biāo)準(zhǔn)

    不同的證據(jù)門戶解釋其研究方法和證據(jù)標(biāo)準(zhǔn)的方式在思路和細(xì)節(jié)上也有較大差異。有一些提供了大量關(guān)于評(píng)估原始研究的標(biāo)準(zhǔn)的詳細(xì)列表,但卻較少涉及如何綜合和評(píng)估所有相關(guān)研究的證據(jù)基礎(chǔ)方面的信息;另一些提供了關(guān)于評(píng)估一項(xiàng)或多項(xiàng)研究的標(biāo)準(zhǔn)量表用以聲明和陳述證據(jù)基礎(chǔ),但卻較少涉及相關(guān)方法學(xué)問(wèn)題方面的具體信息;還有一些提供了大量基于證據(jù)基礎(chǔ)進(jìn)行綜合研究的方法的詳細(xì)手冊(cè),并提出了用于評(píng)估最終證據(jù)有效性的具體標(biāo)準(zhǔn)。那么,究竟哪一種方式才是解釋和呈現(xiàn)證據(jù)相關(guān)研究方法及標(biāo)準(zhǔn)的最佳方式,可能還需要進(jìn)一步深入思考。從理論層面來(lái)講,可能需要在證據(jù)的研究方法、過(guò)程和標(biāo)準(zhǔn)的規(guī)范說(shuō)明之間,在對(duì)證據(jù)基礎(chǔ)的評(píng)價(jià)和作為證據(jù)基礎(chǔ)的研究之間尋找到一個(gè)均衡點(diǎn)。但從應(yīng)用層面出發(fā),構(gòu)建證據(jù)門戶網(wǎng)站的首要目的是將研究的使用與生產(chǎn)過(guò)程緊密銜接起來(lái),而循證指導(dǎo)和建議用于解釋證據(jù)對(duì)政策、實(shí)踐及個(gè)人決策的意義,因此證據(jù)導(dǎo)向的指導(dǎo)對(duì)忙碌的決策者來(lái)說(shuō)可能是最有用的產(chǎn)品。一方面,代表主要利益相關(guān)者的委員會(huì)參與研究的細(xì)節(jié)并解釋其影響,可能比每個(gè)決策者單獨(dú)這樣做更有成效,并且也可能增強(qiáng)人們對(duì)干預(yù)措施產(chǎn)生效應(yīng)的過(guò)程,以及其如何受到應(yīng)用了相關(guān)政策和實(shí)踐的本地環(huán)境的影響的關(guān)注;另一方面,可以促使以用戶的視角去影響研究問(wèn)題,如一開(kāi)始就將研究聚焦于決策者試圖解決的挑戰(zhàn)性問(wèn)題,而不是泛泛地從了解一些干預(yù)方案的有效性問(wèn)題入手??偟膩?lái)說(shuō),隨著國(guó)際上GRADE標(biāo)準(zhǔn)指導(dǎo)框架以及NICE、SURE等標(biāo)準(zhǔn)指導(dǎo)產(chǎn)品的不斷發(fā)展完善,創(chuàng)建循證指導(dǎo)的過(guò)程將變得越來(lái)越清晰明確和有章可循,循證指導(dǎo)和建議將可能是證據(jù)知識(shí)庫(kù)及門戶最應(yīng)該研發(fā)的和最有用的產(chǎn)品。

    因此,在構(gòu)建中國(guó)循證社會(huì)科學(xué)證據(jù)知識(shí)庫(kù)時(shí),應(yīng)基于已有證據(jù)基礎(chǔ)研發(fā)政策和實(shí)踐指導(dǎo)的方法及標(biāo)準(zhǔn)。首先,可考慮明確規(guī)定實(shí)現(xiàn)和達(dá)成某種證據(jù)標(biāo)準(zhǔn)的方法及準(zhǔn)則,具體可能包括:創(chuàng)建符合某種標(biāo)準(zhǔn)的證據(jù)的方法步驟、可采用的方法程序(包括內(nèi)部和外部的質(zhì)量保證過(guò)程)、指定要達(dá)成的證據(jù)標(biāo)準(zhǔn)的聲明和量表等。其次,可考慮循證指導(dǎo)的潛在應(yīng)用場(chǎng)景和益處及其創(chuàng)建的方法路徑,具體可能涉及:循證指導(dǎo)在特定社會(huì)政策和實(shí)踐問(wèn)題中可以發(fā)揮的作用、不同利益相關(guān)者群體的參與方式、需求的信息類型和相應(yīng)的證據(jù)標(biāo)準(zhǔn),以及與其他類型證據(jù)綜合集成的方法、循證指導(dǎo)相關(guān)證據(jù)評(píng)估的社會(huì)價(jià)值觀、提出對(duì)策建議時(shí)以不同方式使用的其他非證據(jù)基礎(chǔ)信息的信息類型等。

    猜你喜歡
    循證證據(jù)基礎(chǔ)
    《循證護(hù)理》稿約
    “不等式”基礎(chǔ)鞏固
    “整式”基礎(chǔ)鞏固
    《循證護(hù)理》稿約
    “防”“治”并舉 筑牢基礎(chǔ)
    對(duì)于家庭暴力應(yīng)當(dāng)如何搜集證據(jù)
    紅土地(2016年3期)2017-01-15 13:45:22
    手上的證據(jù)
    “大禹治水”有了新證據(jù)
    手上的證據(jù)
    循證醫(yī)學(xué)的人文精神
    丝袜人妻中文字幕| 少妇人妻久久综合中文| 亚洲欧美清纯卡通| 日本欧美国产在线视频| 国产免费视频播放在线视频| 精品一区在线观看国产| 日韩制服骚丝袜av| 日本wwww免费看| 亚洲人成电影观看| 久9热在线精品视频| 美女脱内裤让男人舔精品视频| 日韩熟女老妇一区二区性免费视频| 男女无遮挡免费网站观看| 久久精品aⅴ一区二区三区四区| 亚洲 国产 在线| 五月天丁香电影| 夜夜骑夜夜射夜夜干| 好男人视频免费观看在线| 日本wwww免费看| 婷婷色综合大香蕉| 久久天躁狠狠躁夜夜2o2o | 国产精品久久久久久人妻精品电影 | 性少妇av在线| 最近最新中文字幕大全免费视频 | 久久久久国产精品人妻一区二区| 性少妇av在线| 最黄视频免费看| 91字幕亚洲| 女性被躁到高潮视频| 好男人视频免费观看在线| 午夜福利视频精品| 久久久久久久久免费视频了| 亚洲欧洲精品一区二区精品久久久| 久久久精品94久久精品| 国产极品粉嫩免费观看在线| 精品人妻在线不人妻| 欧美日韩黄片免| 久热爱精品视频在线9| 97精品久久久久久久久久精品| 五月天丁香电影| 97人妻天天添夜夜摸| 精品高清国产在线一区| 老司机亚洲免费影院| 老司机影院成人| 9191精品国产免费久久| 久久 成人 亚洲| 精品高清国产在线一区| 日日夜夜操网爽| 欧美乱码精品一区二区三区| 在线观看免费高清a一片| 亚洲色图综合在线观看| 午夜免费鲁丝| 青青草视频在线视频观看| 久久久精品94久久精品| 高清av免费在线| 一区二区av电影网| 欧美日韩一级在线毛片| 亚洲精品久久久久久婷婷小说| 久久久亚洲精品成人影院| 亚洲欧美精品自产自拍| 日本a在线网址| 久久精品国产亚洲av高清一级| 欧美xxⅹ黑人| 丝袜美腿诱惑在线| 精品免费久久久久久久清纯 | 一边亲一边摸免费视频| 91国产中文字幕| 最新的欧美精品一区二区| 国产高清不卡午夜福利| 人体艺术视频欧美日本| 久久毛片免费看一区二区三区| 极品人妻少妇av视频| bbb黄色大片| 亚洲一区二区三区欧美精品| 日韩人妻精品一区2区三区| 一二三四社区在线视频社区8| 晚上一个人看的免费电影| 欧美亚洲日本最大视频资源| 成年人午夜在线观看视频| 精品一区二区三区av网在线观看 | 成在线人永久免费视频| 狠狠精品人妻久久久久久综合| 国产精品久久久久久精品电影小说| 丰满迷人的少妇在线观看| 黑人猛操日本美女一级片| 久久影院123| 成人国语在线视频| 亚洲欧美成人综合另类久久久| 国产精品av久久久久免费| 亚洲国产日韩一区二区| 久热这里只有精品99| 日韩视频在线欧美| 亚洲国产精品国产精品| 国产精品香港三级国产av潘金莲 | 亚洲国产av影院在线观看| 汤姆久久久久久久影院中文字幕| 天天躁夜夜躁狠狠久久av| 男的添女的下面高潮视频| 久久国产精品大桥未久av| 人体艺术视频欧美日本| 中文字幕另类日韩欧美亚洲嫩草| 久久人妻福利社区极品人妻图片 | 精品久久蜜臀av无| 久9热在线精品视频| 欧美精品一区二区免费开放| 香蕉国产在线看| 亚洲熟女精品中文字幕| 美女主播在线视频| 亚洲色图 男人天堂 中文字幕| 中文欧美无线码| 亚洲国产欧美一区二区综合| 亚洲黑人精品在线| 国产伦人伦偷精品视频| 少妇裸体淫交视频免费看高清 | 免费日韩欧美在线观看| 色播在线永久视频| 久久精品国产综合久久久| netflix在线观看网站| 午夜91福利影院| 天天躁日日躁夜夜躁夜夜| 高清av免费在线| 大码成人一级视频| 日韩一卡2卡3卡4卡2021年| 18禁黄网站禁片午夜丰满| 亚洲美女黄色视频免费看| 日本av免费视频播放| 亚洲人成电影观看| 成人黄色视频免费在线看| 国产成人一区二区三区免费视频网站 | 国产精品一二三区在线看| 男人舔女人的私密视频| 亚洲精品中文字幕在线视频| 久久久久久免费高清国产稀缺| 丝袜在线中文字幕| 国产亚洲av片在线观看秒播厂| 国产主播在线观看一区二区 | 亚洲精品美女久久久久99蜜臀 | 国产免费视频播放在线视频| 亚洲专区中文字幕在线| 亚洲,欧美精品.| 国产一区有黄有色的免费视频| 精品亚洲成a人片在线观看| 国产在线一区二区三区精| 久热这里只有精品99| 在线精品无人区一区二区三| 高清不卡的av网站| 丁香六月欧美| 日日夜夜操网爽| 天天躁夜夜躁狠狠久久av| 欧美精品一区二区大全| 久久人妻福利社区极品人妻图片 | 久久精品久久久久久久性| 欧美精品啪啪一区二区三区 | 97精品久久久久久久久久精品| 国产在视频线精品| 久久综合国产亚洲精品| 桃花免费在线播放| 婷婷色综合大香蕉| 日本午夜av视频| 十八禁人妻一区二区| 国产伦人伦偷精品视频| 国产精品九九99| 亚洲人成网站在线观看播放| 成人亚洲欧美一区二区av| 日韩熟女老妇一区二区性免费视频| 欧美黑人精品巨大| 波多野结衣av一区二区av| 久久人人爽人人片av| 天天躁日日躁夜夜躁夜夜| 亚洲精品av麻豆狂野| 国产激情久久老熟女| 欧美日韩亚洲国产一区二区在线观看 | 久久久久久免费高清国产稀缺| 亚洲色图 男人天堂 中文字幕| 日韩大码丰满熟妇| 91麻豆精品激情在线观看国产 | 2018国产大陆天天弄谢| 精品福利永久在线观看| 黑丝袜美女国产一区| 成人亚洲精品一区在线观看| 国产高清不卡午夜福利| 1024香蕉在线观看| 一边摸一边做爽爽视频免费| 亚洲欧美日韩高清在线视频 | 日本色播在线视频| 日韩精品免费视频一区二区三区| 久久ye,这里只有精品| 免费不卡黄色视频| 狂野欧美激情性bbbbbb| 国产av国产精品国产| 午夜av观看不卡| 午夜免费成人在线视频| 久久精品久久久久久久性| 9热在线视频观看99| 99久久人妻综合| 嫁个100分男人电影在线观看 | 久久久久久亚洲精品国产蜜桃av| 黄色a级毛片大全视频| 免费观看人在逋| 侵犯人妻中文字幕一二三四区| 成人三级做爰电影| 精品视频人人做人人爽| 精品福利永久在线观看| 韩国精品一区二区三区| 午夜免费鲁丝| 午夜两性在线视频| 大型av网站在线播放| 成年动漫av网址| 自拍欧美九色日韩亚洲蝌蚪91| 大香蕉久久成人网| 亚洲欧美精品综合一区二区三区| av国产久精品久网站免费入址| 亚洲精品久久午夜乱码| 99国产精品99久久久久| 男女国产视频网站| 操出白浆在线播放| 一级毛片我不卡| 首页视频小说图片口味搜索 | 9191精品国产免费久久| 国产免费福利视频在线观看| 久久中文字幕一级| 国产精品.久久久| 日本黄色日本黄色录像| 欧美日韩视频精品一区| 飞空精品影院首页| 成年女人毛片免费观看观看9 | 精品少妇黑人巨大在线播放| 99久久人妻综合| 色播在线永久视频| 一本久久精品| 亚洲情色 制服丝袜| 国产亚洲午夜精品一区二区久久| 精品熟女少妇八av免费久了| 亚洲精品自拍成人| 国产亚洲欧美在线一区二区| 久久久国产精品麻豆| 国产在线免费精品| 亚洲国产看品久久| 久久精品人人爽人人爽视色| 国产成人91sexporn| 国产免费视频播放在线视频| 国产亚洲精品第一综合不卡| 亚洲天堂av无毛| 人人澡人人妻人| 老司机亚洲免费影院| 国产野战对白在线观看| 人体艺术视频欧美日本| 中文字幕av电影在线播放| 超碰97精品在线观看| 九草在线视频观看| 亚洲国产av新网站| 亚洲三区欧美一区| 女人久久www免费人成看片| 国产亚洲欧美在线一区二区| av又黄又爽大尺度在线免费看| av电影中文网址| 国产淫语在线视频| 国产免费福利视频在线观看| 美女脱内裤让男人舔精品视频| 国产精品久久久久久人妻精品电影 | 免费在线观看日本一区| 国产激情久久老熟女| 啦啦啦视频在线资源免费观看| 久久国产精品影院| 亚洲国产成人一精品久久久| 久久青草综合色| 伦理电影免费视频| 1024视频免费在线观看| 亚洲美女黄色视频免费看| 亚洲七黄色美女视频| 亚洲一卡2卡3卡4卡5卡精品中文| 中文字幕色久视频| 黄色怎么调成土黄色| 亚洲成人手机| 精品人妻1区二区| 欧美激情高清一区二区三区| 色综合欧美亚洲国产小说| 国产精品免费视频内射| 久久天堂一区二区三区四区| 久久九九热精品免费| 色视频在线一区二区三区| 另类精品久久| 大陆偷拍与自拍| 精品久久久久久电影网| 一边摸一边抽搐一进一出视频| 国产又爽黄色视频| 欧美97在线视频| 亚洲欧美色中文字幕在线| 成年美女黄网站色视频大全免费| 免费av中文字幕在线| 亚洲欧美色中文字幕在线| 亚洲一区二区三区欧美精品| 少妇猛男粗大的猛烈进出视频| 免费在线观看完整版高清| av福利片在线| 老司机影院成人| 国产不卡av网站在线观看| 国产精品秋霞免费鲁丝片| 老司机影院成人| 亚洲av美国av| e午夜精品久久久久久久| 在线 av 中文字幕| 国产一卡二卡三卡精品| 嫁个100分男人电影在线观看 | 久久久精品免费免费高清| 青草久久国产| 高清欧美精品videossex| 人妻 亚洲 视频| 欧美日韩视频精品一区| 亚洲一区中文字幕在线| 尾随美女入室| 国产极品粉嫩免费观看在线| 欧美国产精品va在线观看不卡| 国产午夜精品一二区理论片| 国产精品成人在线| netflix在线观看网站| 人妻 亚洲 视频| 后天国语完整版免费观看| 一级毛片女人18水好多 | 99国产精品一区二区蜜桃av | 精品少妇一区二区三区视频日本电影| 中文字幕人妻熟女乱码| 色婷婷av一区二区三区视频| 国产精品免费大片| 日韩免费高清中文字幕av| 国产爽快片一区二区三区| 欧美老熟妇乱子伦牲交| 日韩一本色道免费dvd| 在线av久久热| 亚洲欧美日韩高清在线视频 | 女警被强在线播放| 国产成人欧美在线观看 | av福利片在线| 丰满迷人的少妇在线观看| 亚洲国产精品成人久久小说| 亚洲一区中文字幕在线| 久久久久网色| 男人舔女人的私密视频| 欧美av亚洲av综合av国产av| 精品国产一区二区三区久久久樱花| 啦啦啦 在线观看视频| 欧美老熟妇乱子伦牲交| 国产伦人伦偷精品视频| 成人手机av| 人人妻人人添人人爽欧美一区卜| 午夜激情av网站| 久久狼人影院| 免费观看人在逋| 18禁黄网站禁片午夜丰满| 制服人妻中文乱码| av国产精品久久久久影院| 亚洲精品在线美女| 一区二区日韩欧美中文字幕| 欧美在线一区亚洲| 自拍欧美九色日韩亚洲蝌蚪91| 午夜91福利影院| 午夜两性在线视频| 另类亚洲欧美激情| 亚洲av日韩在线播放| 日本一区二区免费在线视频| 国产激情久久老熟女| 亚洲欧美日韩另类电影网站| 久久亚洲精品不卡| 免费人妻精品一区二区三区视频| 菩萨蛮人人尽说江南好唐韦庄| xxxhd国产人妻xxx| 99国产精品99久久久久| 欧美日韩亚洲高清精品| 国产精品香港三级国产av潘金莲 | 一区二区av电影网| 黄色怎么调成土黄色| 精品福利观看| 一区福利在线观看| 精品福利观看| 久久久精品免费免费高清| 国产一区二区 视频在线| 久久久久久免费高清国产稀缺| 国产伦理片在线播放av一区| 岛国毛片在线播放| 只有这里有精品99| 高清av免费在线| 新久久久久国产一级毛片| 国产黄频视频在线观看| 久久精品久久精品一区二区三区| 伊人久久大香线蕉亚洲五| 亚洲欧美一区二区三区黑人| 在线观看国产h片| 亚洲精品第二区| 欧美激情 高清一区二区三区| 精品久久久久久电影网| 老司机在亚洲福利影院| 宅男免费午夜| 日本vs欧美在线观看视频| 亚洲午夜精品一区,二区,三区| 另类亚洲欧美激情| 十八禁人妻一区二区| 黄色毛片三级朝国网站| 亚洲国产毛片av蜜桃av| 在线观看免费午夜福利视频| 亚洲精品日本国产第一区| 久热这里只有精品99| 欧美黄色淫秽网站| 亚洲国产成人一精品久久久| 欧美日韩视频精品一区| 伊人久久大香线蕉亚洲五| 国产一区二区在线观看av| 国产深夜福利视频在线观看| 爱豆传媒免费全集在线观看| 亚洲国产看品久久| 成人影院久久| 国产一区二区三区综合在线观看| av在线播放精品| 看十八女毛片水多多多| 99九九在线精品视频| 你懂的网址亚洲精品在线观看| 欧美性长视频在线观看| 久久人妻熟女aⅴ| 日日摸夜夜添夜夜爱| 欧美激情 高清一区二区三区| 一级a爱视频在线免费观看| 亚洲成av片中文字幕在线观看| 色婷婷av一区二区三区视频| 水蜜桃什么品种好| 19禁男女啪啪无遮挡网站| 国产精品 欧美亚洲| 久久久久久久国产电影| 久久精品国产亚洲av高清一级| 国精品久久久久久国模美| 国产91精品成人一区二区三区 | 亚洲国产欧美网| 国产精品香港三级国产av潘金莲 | 免费日韩欧美在线观看| 青春草视频在线免费观看| 一级片免费观看大全| 国产成人a∨麻豆精品| 免费看不卡的av| 亚洲免费av在线视频| 激情视频va一区二区三区| 中文字幕另类日韩欧美亚洲嫩草| 脱女人内裤的视频| 在线观看免费视频网站a站| 99久久精品国产亚洲精品| 建设人人有责人人尽责人人享有的| 国产一区二区激情短视频 | 久久久精品94久久精品| 亚洲成人免费av在线播放| 亚洲五月婷婷丁香| 国语对白做爰xxxⅹ性视频网站| 国产成人一区二区在线| 免费在线观看黄色视频的| 久久久久网色| 国产精品一区二区在线观看99| 制服人妻中文乱码| 十八禁高潮呻吟视频| 又大又爽又粗| 免费在线观看视频国产中文字幕亚洲 | 18禁裸乳无遮挡动漫免费视频| 每晚都被弄得嗷嗷叫到高潮| 亚洲精品日韩在线中文字幕| 亚洲国产欧美网| 亚洲av美国av| 亚洲精品国产一区二区精华液| av线在线观看网站| 汤姆久久久久久久影院中文字幕| 色婷婷久久久亚洲欧美| 老汉色av国产亚洲站长工具| 一级片'在线观看视频| 美女视频免费永久观看网站| 国产精品 国内视频| 日韩免费高清中文字幕av| 老汉色av国产亚洲站长工具| 免费久久久久久久精品成人欧美视频| 美女中出高潮动态图| 成人18禁高潮啪啪吃奶动态图| 精品人妻熟女毛片av久久网站| 精品国产国语对白av| 国产福利在线免费观看视频| 热re99久久精品国产66热6| 婷婷色综合大香蕉| 亚洲成人免费av在线播放| 国产精品欧美亚洲77777| 亚洲久久久国产精品| 精品国产国语对白av| 人成视频在线观看免费观看| 亚洲五月色婷婷综合| 如日韩欧美国产精品一区二区三区| 成年av动漫网址| 中文字幕色久视频| 国产av一区二区精品久久| 久久精品久久精品一区二区三区| 国产有黄有色有爽视频| 久久人人爽人人片av| 亚洲欧洲国产日韩| 美女中出高潮动态图| 中国国产av一级| 国产免费现黄频在线看| 精品福利观看| 欧美日韩一级在线毛片| 免费少妇av软件| 国产高清videossex| 国产精品.久久久| 国产精品久久久久成人av| 日韩av不卡免费在线播放| 少妇粗大呻吟视频| 国产精品人妻久久久影院| av视频免费观看在线观看| 免费一级毛片在线播放高清视频 | 亚洲精品一卡2卡三卡4卡5卡 | 国产精品一区二区精品视频观看| 国产亚洲欧美在线一区二区| av在线播放精品| 18禁国产床啪视频网站| 男女边吃奶边做爰视频| 久热这里只有精品99| 欧美另类一区| 国产精品国产av在线观看| 免费不卡黄色视频| 成人国产av品久久久| 亚洲视频免费观看视频| 欧美日韩亚洲国产一区二区在线观看 | 黄色怎么调成土黄色| 人人妻,人人澡人人爽秒播 | 久久午夜综合久久蜜桃| 一区二区日韩欧美中文字幕| 777米奇影视久久| 午夜精品国产一区二区电影| 成人手机av| 国产视频一区二区在线看| 婷婷色麻豆天堂久久| 亚洲欧美中文字幕日韩二区| 亚洲七黄色美女视频| a级毛片黄视频| 精品国产乱码久久久久久男人| 国产99久久九九免费精品| 亚洲精品一二三| 欧美久久黑人一区二区| 久久久欧美国产精品| 搡老乐熟女国产| 久久天堂一区二区三区四区| 国产日韩一区二区三区精品不卡| 欧美黑人欧美精品刺激| xxxhd国产人妻xxx| 精品人妻熟女毛片av久久网站| 一区二区三区四区激情视频| 日韩熟女老妇一区二区性免费视频| 男男h啪啪无遮挡| 老鸭窝网址在线观看| 韩国精品一区二区三区| 中文字幕最新亚洲高清| 香蕉丝袜av| 亚洲精品国产区一区二| av网站在线播放免费| 五月开心婷婷网| 一二三四在线观看免费中文在| 日本wwww免费看| 成人午夜精彩视频在线观看| 王馨瑶露胸无遮挡在线观看| 午夜福利在线免费观看网站| 国产精品国产三级国产专区5o| 最新在线观看一区二区三区 | 成年女人毛片免费观看观看9 | 国产一区二区在线观看av| 天天躁狠狠躁夜夜躁狠狠躁| 美女扒开内裤让男人捅视频| 精品人妻在线不人妻| 久久久久精品国产欧美久久久 | 亚洲 国产 在线| 91麻豆av在线| 国产欧美日韩一区二区三 | 日韩中文字幕视频在线看片| 午夜福利乱码中文字幕| www.熟女人妻精品国产| 十八禁网站网址无遮挡| 欧美日韩国产mv在线观看视频| 男女之事视频高清在线观看 | 国产精品久久久人人做人人爽| 人人妻人人添人人爽欧美一区卜| 国产免费现黄频在线看| 日韩免费高清中文字幕av| av网站免费在线观看视频| 午夜激情av网站| 久久99精品国语久久久| 麻豆乱淫一区二区| 久久99精品国语久久久| 国产视频一区二区在线看| 国产黄色免费在线视频| 久久人人爽人人片av| 男女边摸边吃奶| 亚洲欧美一区二区三区国产| 最近最新中文字幕大全免费视频 | 中文字幕人妻丝袜制服| 久久精品亚洲熟妇少妇任你| 欧美xxⅹ黑人| 欧美国产精品va在线观看不卡| 天天躁夜夜躁狠狠久久av| 久久久久国产精品人妻一区二区| 亚洲精品久久久久久婷婷小说| 亚洲精品中文字幕在线视频| 国产一区二区三区av在线| 免费看av在线观看网站| 欧美日韩视频精品一区| 免费在线观看影片大全网站 | 欧美精品av麻豆av| 宅男免费午夜| 人人妻人人添人人爽欧美一区卜| 亚洲男人天堂网一区| 国产成人av激情在线播放| 五月开心婷婷网| 亚洲一区中文字幕在线| 中文欧美无线码| 老熟女久久久| 久久久久视频综合| 免费看不卡的av| 黄色毛片三级朝国网站| 亚洲欧美一区二区三区黑人|