• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    多中心合作和可重復(fù)的心理與腦科學(xué)研究

    2019-05-24 07:47:58孔祥禎
    心理技術(shù)與應(yīng)用 2019年5期

    孔祥禎

    摘?要?心理與腦科學(xué)研究結(jié)果的可重復(fù)性問題近年來備受關(guān)注。這一問題的根源一般被認(rèn)為有兩個(gè)方面:客觀存在的方法學(xué)問題和研究者有意或無意的可疑研究操縱。開展可重復(fù)的心理與腦科學(xué)研究已經(jīng)為越來越多的研究者所接受和推崇,正在成為新的趨勢(shì)。本文從多中心合作的視角,就多中心合作研究模式在開展可重復(fù)的心理與腦科學(xué)研究中的應(yīng)用和發(fā)展,以及應(yīng)用過程中需要注意的問題展開討論。希望國內(nèi)心理與腦科學(xué)同行,尤其是年輕研究者加強(qiáng)多中心合作研究相關(guān)的方法學(xué)訓(xùn)練,以更開放的心態(tài)聯(lián)合起來,開展穩(wěn)健、可重復(fù)的心理與腦科學(xué)研究。

    關(guān)鍵詞?多中心合作;可重復(fù)性;團(tuán)隊(duì)科學(xué);開放科學(xué)

    分類號(hào)?B849

    DOI: 10.16842/j.cnki.issn2095-5588.2019.05.004

    近年來,研究結(jié)果的可重復(fù)性問題在心理與腦科學(xué)和醫(yī)學(xué)等多個(gè)領(lǐng)域備受關(guān)注(Benjamin et al., 2018; Freese & Peterson, 2017; Ioannidis, 2005; Munafo et al., 2017; Poldrack et al., 2017; Prinz, Schlange, & Asadullah, 2011; Schooler, 2014)??紤]到研究對(duì)象、實(shí)驗(yàn)范式和研究問題的復(fù)雜性(比如,人的心理狀態(tài)隨所處環(huán)境而變化),以及客觀存在的出版偏見等因素,心理與腦科學(xué)研究中一些結(jié)果未被成功重復(fù)的原因是復(fù)雜的。比如,小樣本研究帶來的效應(yīng)量被高估問題,以及重復(fù)實(shí)驗(yàn)與原實(shí)驗(yàn)中不同群體的樣本導(dǎo)致的數(shù)據(jù)偏差,都可能導(dǎo)致研究結(jié)果的重復(fù)失?。˙utton et al., 2013; LeWinn, Sheridan, Keyes, Hamilton, & McLaughlin, 2017; Munafo et al., 2017)。同時(shí),研究過程中存在的一些有意或無意的可疑操縱(problematic practices)也被認(rèn)為是可重復(fù)性問題的重要原因(駱大森, 2017; Aarts et al., 2015; Benjamin et al., 2018; Munafo et al., 2017; Simmons, Nelson, & Simonsohn, 2011):在實(shí)驗(yàn)報(bào)告中選擇性地報(bào)告數(shù)據(jù)分析過程和研究結(jié)果是這種陋習(xí)中的典型例子。目前,我們很難明確一些研究結(jié)果不可重復(fù)的具體原因,但是開展可重復(fù)的心理與腦科學(xué)研究已經(jīng)為越來越多研究者所接受和推崇,并逐漸成為新的趨勢(shì)(Gorgolewski & Poldrack, 2016; Munafo et al., 2017; Poldrack et al., 2017)。針對(duì)如何開展可重復(fù)的心理與腦科學(xué)研究,一些研究者從方法學(xué)和實(shí)踐的角度進(jìn)行了諸多討論,比如,數(shù)據(jù)采集前的樣本預(yù)估,研究預(yù)注冊(cè)(preregistration),陰性結(jié)果發(fā)表、數(shù)據(jù)共享等(胡傳鵬, 王非, 過繼成思, 宋夢(mèng)迪, 隋潔, 彭凱平, 2016; 駱大森, 2017; 朱瀅, 2016; Munafo et al., 2017; Poldrack et al., 2017)。本文主要就多中心合作研究模式(multi-site collaboration),即針對(duì)同一感興趣問題、多個(gè)同行一起開展的多中心數(shù)據(jù)采集和匯總研究的模式,在開展可重復(fù)的心理與腦科學(xué)研究中的應(yīng)用和可能存在的問題總結(jié)相關(guān)經(jīng)驗(yàn)并提出對(duì)應(yīng)建議。下文將從多中心合作研究的優(yōu)勢(shì)、應(yīng)用和數(shù)據(jù)來源,以及應(yīng)用過程中可能存在的挑戰(zhàn)等多個(gè)方面展開(圖1)。

    1?多中心合作的優(yōu)勢(shì)

    第一,累積樣本,提高統(tǒng)計(jì)效力。通常情況下,由于研究問題的特殊性,以及測(cè)量手段的不完美,心理與腦科學(xué)研究問題的效應(yīng)量往往較小。因此,為了成功檢測(cè)到如此細(xì)微的效應(yīng),必然需要更多的樣本量 。在單一中心的研究資源有限的情況下,往往只能開展小樣本研究,在這種情況下,即使可以發(fā)現(xiàn)顯著效應(yīng),也往往會(huì)造成對(duì)效應(yīng)的高估,甚至可能只是假陽性結(jié)果。比如,2013年,Button等在發(fā)表在《自然評(píng)論:神經(jīng)科學(xué)》的論文中系統(tǒng)討論了這一問題,并將該由小樣本導(dǎo)致的可重復(fù)性問題稱為統(tǒng)計(jì)效力不足(Power Failure)。而通過多中心合作可以有效地累積樣本量,以提供檢測(cè)到細(xì)微效應(yīng)的統(tǒng)計(jì)效力。此外,在可重復(fù)性的驗(yàn)證研究中,采用多中心合作的模式對(duì)于提高統(tǒng)計(jì)效力尤其具有優(yōu)勢(shì)。目前心理學(xué)的重復(fù)驗(yàn)證實(shí)驗(yàn),除了采用預(yù)注冊(cè)增加透明程度之外,基本上都采用了多中心的模式,不管是美國心理學(xué)會(huì)(Association of Psychological Sciences, APS)組織的注冊(cè)重復(fù)報(bào)告(Registered Replication Report, RRR), 還是多實(shí)驗(yàn)室合作項(xiàng)目(ManyLab)。

    第二,提高研究結(jié)果的可重復(fù)性。由于小樣本研究往往會(huì)高估感興趣的效應(yīng)量,甚至導(dǎo)致假陽性結(jié)果,從而導(dǎo)致可重復(fù)性問題。通過多中心合作,在量上增加樣本量的同時(shí),可以獲取多樣的數(shù)據(jù),從而更準(zhǔn)確地估計(jì)樣本量,提高結(jié)果的可靠性。

    第三,提高研究結(jié)論的可推廣性。小樣本研究得到的結(jié)論往往僅適用于某個(gè)特定群體,可推廣性有限。而由于更可能從更多樣的群體獲取數(shù)據(jù),基于多中心合作模式得到的結(jié)論具有更大的可推廣性。

    第四,探索感興趣效應(yīng)的異質(zhì)性。由于心理與腦科學(xué)研究問題的復(fù)雜性,實(shí)驗(yàn)樣本的構(gòu)成(比如,早期成長(zhǎng)經(jīng)歷和年齡分布)可能改變觀測(cè)到的感興趣效應(yīng)。通過多中心合作的研究模式,可以為探索效應(yīng)的異質(zhì)性與樣本變異之間的關(guān)聯(lián)提供可能性。最近,ManyLab項(xiàng)目針對(duì)效應(yīng)的異質(zhì)性問題,通過一項(xiàng)全球的多中心合作研究,系統(tǒng)探索了樣本構(gòu)成的變異在效應(yīng)異質(zhì)性中扮演的角色(Klein et al., 2018)。

    第五,進(jìn)一步探索不可重復(fù)問題的解決方案。雖然可重復(fù)性問題備受關(guān)注,但由于可靠實(shí)驗(yàn)數(shù)據(jù)的缺失,實(shí)際上,究竟是什么導(dǎo)致了一些研究的不可重復(fù)我們并不清楚。比如,由于沒有原研究的原始數(shù)據(jù),同時(shí)學(xué)術(shù)出版不可避免地存在出版偏見,基于現(xiàn)有方法我們并不能明確知道后續(xù)研究不能重現(xiàn)原研究結(jié)果的原因:是原研究中存在有問題的數(shù)據(jù)分析或選擇性報(bào)告,還是重復(fù)樣本和原樣本之間存在內(nèi)在偏差?而通過針對(duì)同一研究問題的數(shù)據(jù)采集并匯總,多中心合作可以有效避免一些有問題的數(shù)據(jù)分析和報(bào)告做法,進(jìn)而考察在完全不存在這些問題時(shí),特定效應(yīng)的可重復(fù)性會(huì)如何(可以稱為僅由測(cè)量和樣本偏差導(dǎo)致的“固有可重復(fù)性”),以探索不可重復(fù)問題的解決方案。

    2?多中心合作在中國

    目前,國際上存在多個(gè)基于多中心合作研究模式的心理與腦科學(xué)相關(guān)的項(xiàng)目(表1)。比如,ENIGMA聯(lián)盟項(xiàng)目(http://enigma.ini.usc.edu/), 該項(xiàng)目由美國南加州大學(xué)神經(jīng)科學(xué)家Paul Thompson發(fā)起,以多中心合作的模式,將來自200多個(gè)中心的近千名研究者聚集在一起;ENIGMA聯(lián)盟目前有近40個(gè)工作組(Working Group),旨在探索大腦結(jié)構(gòu)和功能的個(gè)體差異,以及與遺傳和疾病之間的關(guān)聯(lián);該項(xiàng)目的系列研究成果發(fā)表在《自然》《自然-神經(jīng)科學(xué)》《自然-遺傳學(xué)》《分子精神病學(xué)》《生物精神病學(xué)》《美國精神病學(xué)》和《美國科學(xué)院院刊》等高影響力學(xué)術(shù)期刊,并由《科學(xué)》期刊做了主題報(bào)道(Guglielmi, 2018)。開放科學(xué)協(xié)作組發(fā)起了針對(duì)三個(gè)心理學(xué)重要期刊中發(fā)表的100個(gè)研究結(jié)果的重復(fù)研究項(xiàng)目,共270名研究者參與了該項(xiàng)目;項(xiàng)目成果于2015年發(fā)表在《科學(xué)》期刊上(Aarts et al., 2015),引發(fā)了研究者對(duì)心理學(xué)研究可重復(fù)性問題的關(guān)注和擔(dān)憂,3年內(nèi)被引用2000余次;同時(shí),該組織主要研究者為了進(jìn)一步推廣透明、開放、可重復(fù)的研究,搭建了開放科學(xué)平臺(tái)開放科學(xué)框架(Open Science Framework),并成立了開放科學(xué)中心(Center for Open Science)。其他多中心合作心理學(xué)與腦科學(xué)項(xiàng)目還有ADNI(Alzheimer's Disease Neuroimaging Initiative),千人功能連接組計(jì)劃(1000 Functional Connectomes), IMAGEN項(xiàng)目, CHARGE聯(lián)盟, PING計(jì)劃, ABCD計(jì)劃, ManyLab項(xiàng)目和心理學(xué)加速器項(xiàng)目(表1)。

    中國心理與腦科學(xué)研究者不僅參與到了國際多中心合作的項(xiàng)目中,而且作為主要貢獻(xiàn)者發(fā)起了一些重要的多中心合作項(xiàng)目和研究。

    CoRR項(xiàng)目?中國科學(xué)院心理研究所左西年研究員參與了千人功能連接組計(jì)劃,并發(fā)起了以中國研究者為主導(dǎo)的國際神經(jīng)影像大數(shù)據(jù)共享計(jì)劃“國際信度與可重復(fù)性聯(lián)盟”(表1)。該項(xiàng)目搭建了一個(gè)用于評(píng)估腦功能和結(jié)構(gòu)連接組重測(cè)信度和可重復(fù)性的多數(shù)據(jù)集開放科學(xué)資源。

    北京老年腦健康促進(jìn)計(jì)劃BABRI?北京老年腦健康促進(jìn)計(jì)劃(表1)由北京師范大學(xué)認(rèn)知神經(jīng)科學(xué)與學(xué)習(xí)國家重點(diǎn)實(shí)驗(yàn)室張占軍教授課題組發(fā)起,該計(jì)劃聚焦癡呆的早期防控,以認(rèn)知老化為切入點(diǎn),計(jì)劃在20年內(nèi)搭建覆蓋10000名老年樣本的多模態(tài)神經(jīng)影像數(shù)據(jù)數(shù)據(jù)庫。項(xiàng)目發(fā)起后,已有多家科研臨床單位相繼加入該計(jì)劃。

    CHIMGEN項(xiàng)目?CHIMGEN的全稱是中國影像遺傳學(xué)研究計(jì)劃(表1),由天津醫(yī)科大學(xué)總醫(yī)院于春水教授牽頭設(shè)計(jì),并依托中華醫(yī)學(xué)會(huì)神經(jīng)放射學(xué)專業(yè)委員會(huì)實(shí)施,共有國內(nèi)30家知名高?;蜥t(yī)院參與。該計(jì)劃擬通過多中心模式收集10000個(gè)漢族健康青年人的遺傳、環(huán)境、腦影像和認(rèn)知相關(guān)數(shù)據(jù),用于探索遺傳和環(huán)境因素影響人類高級(jí)認(rèn)知功能的機(jī)制問題。該項(xiàng)目完成后,將是目前國內(nèi)規(guī)模最大的多中心腦影像遺傳學(xué)數(shù)據(jù)庫,也將成為國際上規(guī)模最大的腦影像遺傳學(xué)數(shù)據(jù)庫之一。

    REST-meta-MDD項(xiàng)目?REST-meta-MDD的全稱為“抑郁癥靜息態(tài)功能磁共振多中心數(shù)據(jù)薈萃分析計(jì)劃”,由中國科學(xué)院心理研究所嚴(yán)超贛研究員主導(dǎo)發(fā)起(Yan et al., 2018)。 該項(xiàng)目旨在通過多中心合作的方式,采集并匯總基于靜息態(tài)功能磁共振成像測(cè)量指標(biāo),探索與抑郁癥相關(guān)的腦功能異常。項(xiàng)目發(fā)起階段,由來自全國17家醫(yī)院的25個(gè)研究組參與。該項(xiàng)目在腦影像數(shù)據(jù)的采集和數(shù)據(jù)分析的標(biāo)準(zhǔn)化上做了很多努力,為后續(xù)多中心大數(shù)據(jù)合作提供了重要參考。

    中國腦模板和圖譜計(jì)劃?Chinese2020 中國腦模板和圖譜計(jì)劃(表1)旨在構(gòu)建更為精細(xì)的中國人3D腦結(jié)構(gòu)圖譜和白質(zhì)纖維腦圖譜。項(xiàng)目由首都醫(yī)科大學(xué)宣武醫(yī)院李坤成教授牽頭發(fā)起,多中心、多學(xué)科團(tuán)隊(duì)來自全國13家單位,擬收集一組1000名健康被試的多模態(tài)磁共振影像數(shù)據(jù)。

    這里僅根據(jù)筆者觀察,羅列幾項(xiàng)。此外,中國研究者主導(dǎo)或參與的多個(gè)多中心合作研究發(fā)表在高影響力期刊,其中包括復(fù)旦大學(xué)教授類腦智能科學(xué)與技術(shù)研究院馮建峰教授(Cheng et al., 2016),北京師范大學(xué)心理學(xué)部劉嘉教授(Kong et al., 2018),西南大學(xué)心理學(xué)部邱江教授(Beaty et al., 2018; Cheng et al., 2016; Kong et al., 2018),中國科學(xué)院自動(dòng)化研究所隋婧研究員(Kong et al., 2018),中國人民解放軍國防科技大學(xué)曾令李教授(Zeng et al., 2018),上海交通大學(xué)醫(yī)學(xué)院附屬精神衛(wèi)生中心王振教授(Boedhoe et al., 2017), 和昆明醫(yī)科大學(xué)第一附屬醫(yī)院程宇琪教授(Boedhoe et al., 2017; Kong et al., 2018)等眾多研究者及其科研團(tuán)隊(duì)。

    3?多中心合作研究的數(shù)據(jù)來源

    多中心合作研究的關(guān)鍵是數(shù)據(jù)。從上述列舉的多中心合作項(xiàng)目可以看出,其中既有多個(gè)研究機(jī)構(gòu)參與的大規(guī)模數(shù)據(jù)采集項(xiàng)目,也有基于特定研究問題發(fā)起的數(shù)據(jù)匯總分析項(xiàng)目。開展多中心合作項(xiàng)目大致有以下幾類數(shù)據(jù)獲取方式。

    第一,研究機(jī)構(gòu)或研究者間的合作。研究者可以通過參與現(xiàn)有的多中心合作項(xiàng)目(比如,ENIGMA和心理學(xué)加速器項(xiàng)目),或根據(jù)感興趣的研究問題發(fā)起新的合作項(xiàng)目,比如,REST-meta-MDD項(xiàng)目(Yan et al., 2018)、人類“企鵝”項(xiàng)目(Human Penguin Project)(Hu et al., 2018; IJzerman et al., 2018)、感動(dòng)情緒的跨國研究(Zickfeld et al., in press),以獲取多中心數(shù)據(jù),用于匯總分析。

    第二,數(shù)據(jù)共享平臺(tái)。越來越多的研究者傾向于在論文發(fā)表的同時(shí),將原始數(shù)據(jù)或預(yù)處理后的數(shù)據(jù)公開供其他研究者下載。研究者可以根據(jù)感興趣的研究問題,查詢現(xiàn)有的數(shù)據(jù)共享數(shù)據(jù)庫(比如,腦影像相關(guān)的數(shù)據(jù)庫OpenfMRI和OpenNeuro),以獲取多個(gè)數(shù)據(jù)集。同樣,可以考慮將自己現(xiàn)有的數(shù)據(jù)上傳到數(shù)據(jù)共享平臺(tái),同時(shí)也可以將數(shù)據(jù)描述以學(xué)術(shù)論文的形式發(fā)表在數(shù)據(jù)描述相關(guān)的期刊(比如, Scientific Data和GigaScience)上,一方面可以更充分地利用和挖掘現(xiàn)有數(shù)據(jù)資源,同時(shí)為多中心合作研究提供更多可能性。此外,一些大型的數(shù)據(jù)采集項(xiàng)目也往往會(huì)搭建數(shù)據(jù)平臺(tái),并向研究者開放,比如,人類連接組計(jì)劃HCP(The Human Connectome Project)和英國生物樣本庫UKBiobank,以及中國人社會(huì)科學(xué)相關(guān)的大型社會(huì)調(diào)查項(xiàng)目:中國家庭追蹤調(diào)查CFPS和中國健康與養(yǎng)老追蹤調(diào)查CHARLS。

    第三,文獻(xiàn)檢索。針對(duì)感興趣的問題,檢索相關(guān)領(lǐng)域已發(fā)表的論文,并有針對(duì)性地聯(lián)系作者,詢問數(shù)據(jù)合作的可能性。比如,為了全面的刻畫海馬與空間導(dǎo)航能力之間關(guān)聯(lián),有研究者收集了采用相關(guān)數(shù)據(jù)的已發(fā)表論文,并與論文作者取得聯(lián)系, 尋求合作(Weisberg, Chatterjee, & Newcombe, 2018)。

    第四,社交網(wǎng)絡(luò)。研究者也可以通過社交網(wǎng)絡(luò)發(fā)布自己感興趣的研究問題,一方面可以彌補(bǔ)在文獻(xiàn)檢索中缺失的文獻(xiàn),同時(shí)可以尋求更多的合作可能性。

    第五,搭建國內(nèi)外同行合作平臺(tái)??梢詫?duì)特定問題感興趣的國內(nèi)外同行聚集在一起,搭建開放科學(xué)合作平臺(tái)?;诖似脚_(tái),研究者可以發(fā)布感興趣的研究問題,以更有效地尋求多中心合作的可能性。比如,考慮到基于單一數(shù)據(jù)集的腦影像個(gè)體差異研究的可重復(fù)性問題,可以聚集一批關(guān)注腦影像測(cè)量和行為個(gè)體差異關(guān)聯(lián)的研究者,成立一個(gè)聯(lián)盟組織(權(quán)且將其命名為“中國腦個(gè)體差異研究計(jì)劃”),促進(jìn)相關(guān)領(lǐng)域多中心合作研究的發(fā)展。

    對(duì)于研究資源有限的學(xué)生或年輕研究者,發(fā)起大規(guī)模的數(shù)據(jù)采集項(xiàng)目可能還存在限制。但是,年輕研究者可以以更開放的心態(tài)聯(lián)合起來,相互支持,同時(shí)充分利用共享數(shù)據(jù)庫和社交網(wǎng)絡(luò),以開展一些有影響力的多中心合作研究。下面是在多中心合作研究開展過程中常見的幾個(gè)注意事項(xiàng)。

    4?多中心合作研究的挑戰(zhàn)

    第一,信息溝通和項(xiàng)目管理。多中心合作研究由于涉及到多個(gè)研究者或研究機(jī)構(gòu)參與,有效地信息溝通和項(xiàng)目管理極為重要。目前可以采用一些現(xiàn)有的協(xié)作工具(比如,開放科學(xué)框架)輔助多中心合作的項(xiàng)目管理。隨著多中心合作研究項(xiàng)目開展的不斷增多,也可以針對(duì)特定項(xiàng)目需求開發(fā)更為高效的協(xié)作平臺(tái)。

    第二,數(shù)據(jù)共享協(xié)議。多中心合作研究主要是基于多中心的數(shù)據(jù)展開,其中往往涉及到數(shù)據(jù)共享。在數(shù)據(jù)共享時(shí),一方面需要遵守學(xué)術(shù)研究倫理,確保被試隱私不被泄露;同時(shí)需要最大限度的共享數(shù)據(jù),以充分利用數(shù)據(jù)資源。更重要地,在共享數(shù)據(jù)前,需要明確數(shù)據(jù)共享協(xié)議,避免不必要的麻煩。比如,在協(xié)議中明確限定,相應(yīng)數(shù)據(jù)僅限用于指定項(xiàng)目,且不可給第三方使用。

    第三,數(shù)據(jù)共享和質(zhì)量控制。數(shù)據(jù)共享和質(zhì)量控制是多中心合作研究執(zhí)行過程中的關(guān)鍵環(huán)節(jié)。少量的數(shù)據(jù)共享相對(duì)靈活,可以采用郵件等方式完成共享;對(duì)于大規(guī)模的數(shù)據(jù)共享,可以采用網(wǎng)盤等方式進(jìn)行。這些方式在一般性的項(xiàng)目中是可行的,但是其中往往涉及到大量的郵件往來,將數(shù)據(jù)共享環(huán)節(jié)融合到專業(yè)的協(xié)作平臺(tái)可以極大地提高工作效率。同時(shí),文件傳輸過程中可能發(fā)生的文件損壞現(xiàn)象也會(huì)給后續(xù)數(shù)據(jù)分析帶來不必要的困擾,可以采用特定的方式確保文件完整(比如md5sum)。此外,由于數(shù)據(jù)采集來自于不同中心,在開展數(shù)據(jù)分析前進(jìn)行系統(tǒng)的質(zhì)量控制(比如針對(duì)腦影像數(shù)據(jù)的質(zhì)量控制)是至關(guān)重要的。

    第四,數(shù)據(jù)分析和可視化。與單一中心研究不同,多中心合作研究的數(shù)據(jù)分析往往涉及一些特異于該類型研究的問題,比如,如何匯總來自多中心的數(shù)據(jù)。通常情況下,可以根據(jù)可能的數(shù)據(jù)共享限制(比如,是否共享個(gè)體數(shù)據(jù),還是只能共享統(tǒng)計(jì)結(jié)果),選擇基于單中心統(tǒng)計(jì)結(jié)果的meta分析或基于匯總的個(gè)體數(shù)據(jù)的mega分析R。常用的meta分析工具包有metafor(Viechtbauer, 2010); 常用的mega分析工具包有l(wèi)me4(Bates, Mchler, Bolker, & Walker, 2015),二者均為R工具包。值得注意的是,在基于匯總的個(gè)體數(shù)據(jù)的mega分析中,往往需要在模型中控制不同“數(shù)據(jù)集”帶來的混淆效應(yīng),即模型中加入“數(shù)據(jù)集”作為隨機(jī)效應(yīng)項(xiàng)。此外,在研究中涉及大量數(shù)據(jù)分析和比較時(shí),除通過可視化手段將主要結(jié)果呈現(xiàn)在論文中,其他結(jié)果可以以網(wǎng)頁的形式上傳到網(wǎng)上,以方便讀者查詢獲取更多信息;GitHub Pages提供了一種方便且免費(fèi)的項(xiàng)目管理和展示網(wǎng)頁服務(wù)(https://pages.github.com/), 此外Jupyter Notebook(https://jupyter.org/)和Shiny應(yīng)用(https://shiny.rstudio.com/)也提供了類似的功能。

    第五,論文寫作和投稿。在涉及多個(gè)研究者參與時(shí),論文的寫作和修改可以有不同的模式:可以是主要研究者負(fù)責(zé)論文寫作,其他研究者參與其中;或多個(gè)研究者并行完成論文寫作。前者的情況可能更為普遍。不管怎樣,可以充分利用一些網(wǎng)絡(luò)協(xié)作平臺(tái)(比如,Google Docs),以更高效地完成論文寫作。論文投稿要經(jīng)過所有署名作者的同意,作者信息和授權(quán)可以采用一些網(wǎng)絡(luò)工具完成,比如在線調(diào)查工具或Google Forms等。此外,論文通常涉及數(shù)十甚至數(shù)百作者署名,作者列表和單位管理也是多中心合作研究中存在的一項(xiàng)挑戰(zhàn),由于目前還沒有專門的管理工具,需要研究者手動(dòng)處理或通過編程實(shí)現(xiàn)。

    總之,在心理與腦科學(xué)研究結(jié)果可重復(fù)性問題備受關(guān)注的今天,開展透明、開放、可重復(fù)的研究更顯得至關(guān)重要。這一重要性,一方面體現(xiàn)在嚴(yán)謹(jǐn)?shù)目茖W(xué)研究可以促進(jìn)我們對(duì)人的心理與腦結(jié)構(gòu)和功能的認(rèn)識(shí);同時(shí)也體現(xiàn)在,在這一趨勢(shì)下透明、開放、可重復(fù)的研究成果為越來越多研究者所推崇,并更可能發(fā)表在高影響力的學(xué)術(shù)期刊上。在開展可重復(fù)的心理與腦科學(xué)研究的新趨勢(shì)下,多中心合作研究模式以其在更大的樣本量、更多樣的樣本和更穩(wěn)定可靠的研究結(jié)果等方面的優(yōu)勢(shì),扮演著重要的角色;同時(shí),該研究模式有助于探索和揭示目前研究者面臨的可重復(fù)問題的根源,促進(jìn)研究者探尋根本的解決方案。近年來,心理與腦科學(xué)多中心合作項(xiàng)目迅速發(fā)展,但仍有很大的發(fā)展空間(Olds, 2016)。建議國內(nèi)心理和腦科學(xué)同行,尤其是學(xué)生和年輕研究者,加強(qiáng)團(tuán)隊(duì)科學(xué)意識(shí)和多中心合作研究相關(guān)的方法學(xué)訓(xùn)練;參與到合作項(xiàng)目中去,針對(duì)特定問題開展合作研究;以更開放的心態(tài)聯(lián)合起來,通過積極組織和參與多中心合作研究,做出一些有影響力的研究成果,促進(jìn)國內(nèi)心理學(xué)相關(guān)學(xué)科健康發(fā)展。

    參考文獻(xiàn)

    胡傳鵬, 王非, 過繼成思, 宋夢(mèng)迪, 隋潔, 彭凱平(2016). 心理學(xué)研究中的可重復(fù)性問題: 從危機(jī)到契機(jī). 心理科學(xué)進(jìn)展, 24(9), 1504-1518.

    駱大森(2017). 心理學(xué)可重復(fù)性危機(jī)兩種根源的評(píng)估. 心理與行為研究, 15(5), 577-586.

    朱瀅(2016). “開放科學(xué)數(shù)據(jù)共享軟件共享”, 你準(zhǔn)備好了嗎?心理科學(xué)進(jìn)展, 24(6), 995-996.

    Aarts, A. A., Anderson, J. E., Anderson, C. J., Attridge, P. R., Attwood, A., Axt, J., ... Bartmess, E.(2015). Estimating the reproducibility of psychological science. Science, 349(6251), 253-267.

    Bates, D., Mchler, M., Bolker, B., & Walker, S.(2015). Fitting Linear Mixed-Effects Models Using lme4. Journal of Statistical Software, 67(1), 1-48.

    Beaty, R. E., Kenett, Y. N., Christensen, A. P., Rosenberg, M. D., Benedek, M., Chen, Q., ... Silvia, P. J.(2018). Robust prediction of individual creative ability from brain functional connectivity. Proceedings of the National Academy of Sciences of the United States of America, 115(5), 1087-1092.

    Benjamin, D. J., Berger, J. O., Johannesson, M., Nosek, B. A., Wagenmakers, E. J., Berk, R., ... Cesarini, D.(2018). Redefine statistical significance. Nature Human Behaviour, 2(1), 6-10.

    Boedhoe, P. S., Schmaal, L., Abe, Y., Ameis, S. H., Arnold, P. D., Batistuzzo, M. C., ... Brem, S.(2017). Distinct subcortical volume alterations in pediatric and adult ocd: a worldwide meta- and mega-Analysis. American Journal of Psychiatry, 174(1), 60-69.

    Button, K. S., Ioannidis, J. P., Mokrysz, C., Nosek, B. A., Flint, J., Robinson, E. S., & Munafò, M. R.(2013). Power failure: why small sample size undermines the reliability of neuroscience. Nature Reviews Neuroscience, 14(5), 365-376.

    Cheng, W., Rolls, E. T., Qiu, J., Liu, W., Tang, Y., Huang, C. C., ... Pu, J.(2016). Medial reward and lateral non-reward orbitofrontal cortex circuits change in opposite directions in depression. Brain, 139, 3296-3309.

    Freese, J., & Peterson, D.(2017). Replication in Social Science. Annual Review of Sociology, 43, 147-165.

    Guglielmi, G. The world's largest set of brain scans are helping reveal the workings of the mind and how diseases ravage the brain. Retrieved December 20, 2018, from https://www. sciencemag. org/news/2018/01/world-s-largest-set-brain-scans-are-helping-reveal-workings-mind-and-how-diseases

    Gorgolewski, K. J., & Poldrack, R. A.(2016). A Practical Guide for Improving Transparency and Reproducibility in Neuroimaging Research. Plos Biology, 14(7), e1002506.

    Hu, C. P., Yin, J. X., Lindenberg, S., Dalgar, I., Weissgerber, S. C., Vergara, R. C., ... Hadi, R.(2018). Data from the Human Penguin Project: a cross-national dataset testing principles from social thermoregulation theory. https://doi. org/10. 31234/osf. io/cs6au.

    av天堂中文字幕网| 亚洲精品影视一区二区三区av| 啦啦啦韩国在线观看视频| 欧美激情在线99| 99热网站在线观看| 国产成人精品久久久久久| 国产精品久久久久久久久免| 综合色丁香网| 日本黄大片高清| 亚洲图色成人| 美女cb高潮喷水在线观看| 亚州av有码| 亚洲成人中文字幕在线播放| 久久久精品大字幕| 国产精品一区www在线观看| 国产精品精品国产色婷婷| 人人妻人人澡欧美一区二区| 国产伦一二天堂av在线观看| 国产色爽女视频免费观看| 亚洲成a人片在线一区二区| 国产美女午夜福利| 久久久久久伊人网av| 成年版毛片免费区| 国产精品电影一区二区三区| 偷拍熟女少妇极品色| 日韩av不卡免费在线播放| 欧美成人精品欧美一级黄| 久久精品国产亚洲网站| 一本—道久久a久久精品蜜桃钙片 精品乱码久久久久久99久播 | 天堂中文最新版在线下载 | 色综合色国产| 成人一区二区视频在线观看| 国产在视频线在精品| 午夜爱爱视频在线播放| 有码 亚洲区| 欧美日韩在线观看h| 国产熟女欧美一区二区| 国产精品不卡视频一区二区| 国产久久久一区二区三区| 日本撒尿小便嘘嘘汇集6| 亚洲婷婷狠狠爱综合网| 综合色av麻豆| 日韩欧美三级三区| www日本黄色视频网| 久久人人精品亚洲av| 在线观看66精品国产| 亚洲国产精品成人久久小说 | 国产精品永久免费网站| 美女 人体艺术 gogo| 校园人妻丝袜中文字幕| 亚洲自偷自拍三级| 国产成人精品久久久久久| 日韩欧美在线乱码| 国内久久婷婷六月综合欲色啪| 久久韩国三级中文字幕| 波多野结衣高清作品| 国产乱人视频| 日韩欧美国产在线观看| 黄色视频,在线免费观看| 91久久精品国产一区二区三区| 日韩欧美精品v在线| 欧美+亚洲+日韩+国产| 国产熟女欧美一区二区| 成年女人看的毛片在线观看| 久久精品国产亚洲av涩爱 | 日韩在线高清观看一区二区三区| 91精品国产九色| 人妻少妇偷人精品九色| 亚洲欧美日韩卡通动漫| 一边亲一边摸免费视频| 91aial.com中文字幕在线观看| 伦理电影大哥的女人| 亚洲三级黄色毛片| 日本黄色片子视频| 好男人视频免费观看在线| 亚洲综合色惰| 日本免费一区二区三区高清不卡| 欧美最新免费一区二区三区| 亚洲在线自拍视频| 18禁裸乳无遮挡免费网站照片| 激情 狠狠 欧美| 婷婷色综合大香蕉| 高清午夜精品一区二区三区 | 国产精品综合久久久久久久免费| 欧美日韩国产亚洲二区| 亚洲图色成人| 美女cb高潮喷水在线观看| 日韩欧美一区二区三区在线观看| 男的添女的下面高潮视频| 两性午夜刺激爽爽歪歪视频在线观看| 性欧美人与动物交配| 国产美女午夜福利| 性色avwww在线观看| a级毛片免费高清观看在线播放| 成人特级黄色片久久久久久久| .国产精品久久| a级一级毛片免费在线观看| 99久久成人亚洲精品观看| 久久久久网色| 在现免费观看毛片| 一本久久精品| 国产老妇伦熟女老妇高清| 毛片女人毛片| 国产一区二区三区在线臀色熟女| 久久亚洲精品不卡| 欧美日韩精品成人综合77777| 中文字幕av成人在线电影| 精品一区二区三区人妻视频| 熟女电影av网| 国产精品乱码一区二三区的特点| 国产成人a区在线观看| 久久人妻av系列| 亚洲不卡免费看| 嫩草影院入口| 国产成年人精品一区二区| 18禁黄网站禁片免费观看直播| 只有这里有精品99| 一区二区三区高清视频在线| 精品熟女少妇av免费看| 精品熟女少妇av免费看| 中文亚洲av片在线观看爽| av专区在线播放| 一级毛片aaaaaa免费看小| 18+在线观看网站| 免费看光身美女| 中文亚洲av片在线观看爽| 亚洲无线观看免费| 赤兔流量卡办理| 日本在线视频免费播放| 一级av片app| 韩国av在线不卡| 欧美成人a在线观看| av在线天堂中文字幕| 亚洲精品粉嫩美女一区| 国产精品一及| 国产成人91sexporn| 国产精品无大码| 在线天堂最新版资源| h日本视频在线播放| 99热这里只有是精品50| 午夜福利在线观看吧| 免费观看人在逋| 少妇猛男粗大的猛烈进出视频 | 日本与韩国留学比较| 国产av在哪里看| 一进一出抽搐gif免费好疼| 天天一区二区日本电影三级| 老师上课跳d突然被开到最大视频| 性欧美人与动物交配| 99热6这里只有精品| 亚洲欧美日韩高清专用| 中文字幕人妻熟人妻熟丝袜美| 久久久国产成人精品二区| 国产在视频线在精品| 亚洲av不卡在线观看| 国产精品蜜桃在线观看 | 美女高潮的动态| 日韩 亚洲 欧美在线| 男人和女人高潮做爰伦理| av女优亚洲男人天堂| 非洲黑人性xxxx精品又粗又长| 最近2019中文字幕mv第一页| av视频在线观看入口| 成人特级av手机在线观看| 18禁在线播放成人免费| 99九九线精品视频在线观看视频| 国产精品女同一区二区软件| a级毛片a级免费在线| 久久久久久国产a免费观看| 精品久久久久久久久av| 日本爱情动作片www.在线观看| 嫩草影院新地址| 中文资源天堂在线| 成人欧美大片| 国产精品麻豆人妻色哟哟久久 | 成人特级黄色片久久久久久久| 亚洲色图av天堂| 欧美激情久久久久久爽电影| 久久亚洲国产成人精品v| 久久久欧美国产精品| 亚洲国产日韩欧美精品在线观看| 国产亚洲精品av在线| 久久久久久久久中文| 看免费成人av毛片| 婷婷亚洲欧美| 国产精品.久久久| 变态另类成人亚洲欧美熟女| av天堂中文字幕网| 变态另类成人亚洲欧美熟女| 国产熟女欧美一区二区| 看免费成人av毛片| av福利片在线观看| 成人毛片60女人毛片免费| 91久久精品电影网| 22中文网久久字幕| 少妇被粗大猛烈的视频| 国产私拍福利视频在线观看| 黑人高潮一二区| 亚洲无线在线观看| 美女xxoo啪啪120秒动态图| 一本久久中文字幕| 亚洲av免费高清在线观看| 亚洲高清免费不卡视频| 亚洲最大成人av| 日韩欧美精品v在线| 日韩中字成人| 高清日韩中文字幕在线| 国产成人精品婷婷| 精品久久国产蜜桃| 99久久无色码亚洲精品果冻| 人妻少妇偷人精品九色| 99热这里只有是精品在线观看| 亚洲成a人片在线一区二区| 国产美女午夜福利| 日韩大尺度精品在线看网址| 99久久九九国产精品国产免费| 九九在线视频观看精品| 午夜福利在线在线| 美女黄网站色视频| 久久久久久国产a免费观看| 日本爱情动作片www.在线观看| 午夜福利视频1000在线观看| 国产淫片久久久久久久久| 国产精品一二三区在线看| 级片在线观看| 日韩国内少妇激情av| 精品不卡国产一区二区三区| 身体一侧抽搐| 男人舔奶头视频| 3wmmmm亚洲av在线观看| av免费在线看不卡| 国产精品日韩av在线免费观看| 日本av手机在线免费观看| 亚洲精品影视一区二区三区av| 国产视频内射| 九九爱精品视频在线观看| 亚洲欧美日韩高清在线视频| 少妇的逼水好多| 真实男女啪啪啪动态图| 精品国内亚洲2022精品成人| 不卡视频在线观看欧美| 国产一区亚洲一区在线观看| 久久久久久久午夜电影| av在线播放精品| 国产真实乱freesex| 老司机福利观看| 尾随美女入室| 美女脱内裤让男人舔精品视频 | 一个人看的www免费观看视频| 两个人的视频大全免费| 神马国产精品三级电影在线观看| 美女大奶头视频| 精品一区二区免费观看| АⅤ资源中文在线天堂| 乱人视频在线观看| 美女cb高潮喷水在线观看| 少妇人妻精品综合一区二区 | 国产亚洲欧美98| 亚洲国产精品久久男人天堂| 国产午夜精品论理片| av在线蜜桃| 亚洲欧洲国产日韩| 久久久久久国产a免费观看| 少妇猛男粗大的猛烈进出视频 | 日本一二三区视频观看| 日韩亚洲欧美综合| 婷婷色av中文字幕| 亚洲av成人精品一区久久| 国产成人午夜福利电影在线观看| 免费无遮挡裸体视频| 国产女主播在线喷水免费视频网站 | 亚洲av成人精品一区久久| 色5月婷婷丁香| 变态另类成人亚洲欧美熟女| 深夜a级毛片| 一区二区三区四区激情视频 | 黄色配什么色好看| 国产极品精品免费视频能看的| 美女大奶头视频| 国产一区二区在线av高清观看| 最近中文字幕高清免费大全6| 给我免费播放毛片高清在线观看| 人妻系列 视频| 亚洲在线观看片| 变态另类成人亚洲欧美熟女| 91aial.com中文字幕在线观看| av免费在线看不卡| 久久婷婷人人爽人人干人人爱| 成年女人永久免费观看视频| 中文字幕熟女人妻在线| 亚洲精品国产av成人精品| 内地一区二区视频在线| 美女被艹到高潮喷水动态| 三级男女做爰猛烈吃奶摸视频| 亚洲精品自拍成人| 亚洲熟妇中文字幕五十中出| 美女cb高潮喷水在线观看| 成人亚洲精品av一区二区| 美女被艹到高潮喷水动态| 国产精品1区2区在线观看.| 国产成人精品久久久久久| 国产色爽女视频免费观看| 欧美激情国产日韩精品一区| 久久99精品国语久久久| 床上黄色一级片| 99久久精品国产国产毛片| 99热全是精品| 国产大屁股一区二区在线视频| 不卡视频在线观看欧美| 人人妻人人澡欧美一区二区| 国国产精品蜜臀av免费| 99在线视频只有这里精品首页| 免费观看精品视频网站| 久久久久久久久久久免费av| 黄片wwwwww| 欧美性猛交╳xxx乱大交人| 日韩高清综合在线| 午夜激情福利司机影院| 天堂网av新在线| 三级经典国产精品| 国产真实伦视频高清在线观看| 青春草亚洲视频在线观看| 久久精品国产亚洲网站| 联通29元200g的流量卡| 亚洲国产高清在线一区二区三| 久久久久久久久大av| 欧美成人a在线观看| 午夜福利成人在线免费观看| av天堂中文字幕网| 91aial.com中文字幕在线观看| 国产亚洲91精品色在线| 一边摸一边抽搐一进一小说| 中文字幕免费在线视频6| 国产伦在线观看视频一区| 在线观看av片永久免费下载| 97超视频在线观看视频| 六月丁香七月| 国产精品蜜桃在线观看 | av在线亚洲专区| 日本免费一区二区三区高清不卡| 91麻豆精品激情在线观看国产| 国产成人影院久久av| 中出人妻视频一区二区| 麻豆成人av视频| 国产高潮美女av| 欧美bdsm另类| 精品免费久久久久久久清纯| 亚洲人与动物交配视频| 国产日韩欧美在线精品| 3wmmmm亚洲av在线观看| 日日撸夜夜添| 性插视频无遮挡在线免费观看| 给我免费播放毛片高清在线观看| 免费人成在线观看视频色| 国语自产精品视频在线第100页| 男的添女的下面高潮视频| 有码 亚洲区| 国产精品久久久久久精品电影小说 | 国产激情偷乱视频一区二区| 免费观看在线日韩| 国产av不卡久久| 国产成人aa在线观看| 国产成人午夜福利电影在线观看| 91午夜精品亚洲一区二区三区| 欧美一区二区国产精品久久精品| 在线免费十八禁| 国产精品电影一区二区三区| 三级国产精品欧美在线观看| 亚洲精品色激情综合| 国产亚洲精品久久久com| 国产又黄又爽又无遮挡在线| 在线a可以看的网站| 国产真实伦视频高清在线观看| 我要看日韩黄色一级片| 日韩一区二区三区影片| 成人欧美大片| 亚洲精品亚洲一区二区| 精品久久国产蜜桃| 国产黄色视频一区二区在线观看 | 色尼玛亚洲综合影院| 婷婷精品国产亚洲av| 日日撸夜夜添| 亚洲精品国产av成人精品| 99久久成人亚洲精品观看| 国产熟女欧美一区二区| 久久久久久伊人网av| 亚洲va在线va天堂va国产| 午夜久久久久精精品| 精品熟女少妇av免费看| 国产男人的电影天堂91| 久久久久网色| 国产亚洲精品av在线| 亚洲精品日韩av片在线观看| 18禁裸乳无遮挡免费网站照片| 成人综合一区亚洲| 日本五十路高清| av视频在线观看入口| 性欧美人与动物交配| 成年女人看的毛片在线观看| 哪里可以看免费的av片| 女人被狂操c到高潮| 尾随美女入室| 精品久久久久久久久亚洲| 国产精品久久视频播放| av在线老鸭窝| av在线观看视频网站免费| 狠狠狠狠99中文字幕| 国产大屁股一区二区在线视频| 国产精品综合久久久久久久免费| 国产精品女同一区二区软件| 亚洲av不卡在线观看| 在线a可以看的网站| 久久人人爽人人爽人人片va| 亚洲欧美中文字幕日韩二区| 麻豆一二三区av精品| 欧美日本亚洲视频在线播放| 校园人妻丝袜中文字幕| 亚洲精品456在线播放app| 国产白丝娇喘喷水9色精品| 亚洲av男天堂| 1024手机看黄色片| 18+在线观看网站| 国产 一区精品| 天天躁日日操中文字幕| 国产91av在线免费观看| 日本黄色视频三级网站网址| 色哟哟·www| 国产单亲对白刺激| 欧美三级亚洲精品| 一个人免费在线观看电影| 日本在线视频免费播放| 神马国产精品三级电影在线观看| 免费电影在线观看免费观看| 精品人妻熟女av久视频| 色综合色国产| 黑人高潮一二区| a级毛色黄片| 亚洲经典国产精华液单| 一本—道久久a久久精品蜜桃钙片 精品乱码久久久久久99久播 | 成人亚洲欧美一区二区av| 成年女人永久免费观看视频| 如何舔出高潮| 国产免费一级a男人的天堂| 狠狠狠狠99中文字幕| 国产成人a区在线观看| 国产极品天堂在线| 欧美xxxx黑人xx丫x性爽| 亚洲人与动物交配视频| 国产成人精品一,二区 | 亚洲aⅴ乱码一区二区在线播放| 久久人妻av系列| 最好的美女福利视频网| 日韩欧美精品免费久久| 免费av观看视频| 菩萨蛮人人尽说江南好唐韦庄 | 高清日韩中文字幕在线| 日韩一区二区三区影片| 美女脱内裤让男人舔精品视频 | 女人被狂操c到高潮| 精品不卡国产一区二区三区| 久久精品影院6| av天堂在线播放| 欧美日韩乱码在线| 天堂影院成人在线观看| 中文字幕av成人在线电影| 国产高清有码在线观看视频| 久久久a久久爽久久v久久| 日日啪夜夜撸| av卡一久久| 联通29元200g的流量卡| www日本黄色视频网| 简卡轻食公司| 国产精品乱码一区二三区的特点| 高清日韩中文字幕在线| 欧美3d第一页| 熟女电影av网| 久久综合国产亚洲精品| 精品久久久久久久久久免费视频| 中文欧美无线码| 99在线视频只有这里精品首页| 国产成人freesex在线| 又粗又硬又长又爽又黄的视频 | 麻豆一二三区av精品| 婷婷六月久久综合丁香| 熟女人妻精品中文字幕| 婷婷亚洲欧美| 亚洲精品国产成人久久av| 精品人妻一区二区三区麻豆| 日本五十路高清| 在线观看午夜福利视频| 欧美+日韩+精品| 国产一区二区激情短视频| 亚洲成a人片在线一区二区| 欧美日韩综合久久久久久| 黄色视频,在线免费观看| 日本一本二区三区精品| 精品人妻视频免费看| 精品人妻熟女av久视频| 国语自产精品视频在线第100页| 一边亲一边摸免费视频| 亚洲av不卡在线观看| 国产精品久久久久久久电影| 中文精品一卡2卡3卡4更新| 亚洲精品乱码久久久v下载方式| 麻豆久久精品国产亚洲av| av在线播放精品| 国产精品野战在线观看| 久久国产乱子免费精品| 国产黄色小视频在线观看| 国产成人a区在线观看| 婷婷六月久久综合丁香| 性欧美人与动物交配| 91久久精品电影网| 男女视频在线观看网站免费| 国产探花在线观看一区二区| 国产高清激情床上av| 麻豆精品久久久久久蜜桃| 国产精品一区二区性色av| 国产精华一区二区三区| 欧美最新免费一区二区三区| 午夜亚洲福利在线播放| 97超碰精品成人国产| 成年女人永久免费观看视频| 又黄又爽又刺激的免费视频.| 97人妻精品一区二区三区麻豆| 51国产日韩欧美| 一级黄色大片毛片| 国产视频首页在线观看| 国产成人a区在线观看| 婷婷六月久久综合丁香| 桃色一区二区三区在线观看| 亚洲国产高清在线一区二区三| 丰满乱子伦码专区| 99热这里只有精品一区| 欧美一区二区精品小视频在线| 国产片特级美女逼逼视频| 国产一级毛片七仙女欲春2| 99riav亚洲国产免费| 一级黄色大片毛片| 夜夜爽天天搞| 亚洲在久久综合| 欧美日韩乱码在线| 赤兔流量卡办理| АⅤ资源中文在线天堂| 老师上课跳d突然被开到最大视频| 午夜a级毛片| 精品久久久久久成人av| 亚洲自拍偷在线| 久久99热6这里只有精品| 亚洲精品亚洲一区二区| 99在线视频只有这里精品首页| av.在线天堂| 性色avwww在线观看| 国产精品1区2区在线观看.| 国产高清有码在线观看视频| 国产精品人妻久久久久久| 床上黄色一级片| 欧美最黄视频在线播放免费| 精品午夜福利在线看| 国产高清三级在线| 日日撸夜夜添| 十八禁国产超污无遮挡网站| 美女黄网站色视频| 亚洲在线自拍视频| 精品久久国产蜜桃| 97超碰精品成人国产| 午夜亚洲福利在线播放| 99久久九九国产精品国产免费| а√天堂www在线а√下载| 少妇高潮的动态图| 亚洲欧美日韩卡通动漫| 国产精品一区二区三区四区免费观看| 天美传媒精品一区二区| 两性午夜刺激爽爽歪歪视频在线观看| 日本免费a在线| 日韩国内少妇激情av| 国产黄片视频在线免费观看| 尾随美女入室| 美女xxoo啪啪120秒动态图| 国产伦一二天堂av在线观看| 中国国产av一级| 日韩在线高清观看一区二区三区| 淫秽高清视频在线观看| 午夜免费男女啪啪视频观看| 亚洲无线在线观看| 18+在线观看网站| 深爱激情五月婷婷| 国产成人一区二区在线| 欧美一区二区亚洲| 中文资源天堂在线| 一级二级三级毛片免费看| 中国美白少妇内射xxxbb| 青春草亚洲视频在线观看| 亚洲精华国产精华液的使用体验 | 久久久久性生活片| 日日啪夜夜撸| 青春草国产在线视频 | 国产精品国产三级国产av玫瑰| 一本精品99久久精品77| 我的女老师完整版在线观看| av在线老鸭窝| АⅤ资源中文在线天堂| 99久久精品一区二区三区| 久久久精品94久久精品| 国产精品人妻久久久久久| 亚洲最大成人av| 欧美日韩国产亚洲二区| 在线观看美女被高潮喷水网站| 伦精品一区二区三区| 国产黄片视频在线免费观看| 欧美激情久久久久久爽电影| 99国产精品一区二区蜜桃av| 色综合色国产| 欧美xxxx黑人xx丫x性爽| 国产熟女欧美一区二区|