• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于Pubpeer的學(xué)術(shù)預(yù)警研究

    2021-07-15 17:19林原賀俊堯姜春林丁堃
    現(xiàn)代情報(bào) 2021年7期
    關(guān)鍵詞:學(xué)術(shù)不端

    林原 賀俊堯 姜春林 丁堃

    摘?要:[目的/意義]本研究旨在基于出版后同行評(píng)議論壇Pubpeer,構(gòu)建學(xué)術(shù)預(yù)警指標(biāo),提出學(xué)術(shù)預(yù)警指數(shù),對(duì)出現(xiàn)學(xué)術(shù)風(fēng)險(xiǎn)的作者進(jìn)行預(yù)警。[方法/過(guò)程]通過(guò)Pubpeer獲取研究數(shù)據(jù),偵測(cè)潛在的學(xué)術(shù)風(fēng)險(xiǎn),構(gòu)建基于多個(gè)維度預(yù)警指標(biāo)并進(jìn)行綜合考量,發(fā)布預(yù)警指數(shù)來(lái)顯示作者存在的風(fēng)險(xiǎn)程度。[結(jié)果/結(jié)論]本研究揭示了目前的學(xué)術(shù)風(fēng)險(xiǎn)狀況,展示了具有潛在學(xué)術(shù)風(fēng)險(xiǎn)的作者在研究中的問(wèn)題,能夠有效預(yù)警學(xué)術(shù)不端行為,促進(jìn)良好的學(xué)術(shù)氛圍,保障科學(xué)研究工作的有序正常進(jìn)行。

    關(guān)鍵詞:學(xué)術(shù)預(yù)警;學(xué)術(shù)風(fēng)險(xiǎn);學(xué)術(shù)不端;Pubpeer

    DOI:10.3969/j.issn.1008-0821.2021.07.017

    〔中圖分類號(hào)〕G252.8?〔文獻(xiàn)標(biāo)識(shí)碼〕A?〔文章編號(hào)〕1008-0821(2021)07-0160-08

    Research?on?Academic?Early?Warning?Based?on?Pubpeer

    Lin?Yuan?He?Junyao?Jiang?Chunlin?Ding?Kun

    (WISElab?Dalian?University?of?Technology,Dalian?116024,China)

    Abstract:[Purpose/Significance]The?purpose?of?this?study?is?to?build?academic?early?warning?indicators?based?on?pubpeer,a?post?publication?peer?review?forum,and?put?forward?an?academic?early?warning?index?to?warn?the?authors?of?academic?risks.[Method/Process]The?paper?obtained?research?data,detected?potential?academic?risks,built?early?warning?indicators?based?on?multiple?dimensions?and?to?conduct?comprehensive?consideration,to?publish?early?warning?index?to?show?the?risk?degree?of?the?author?by?Pubpeer.[Result/Conclusion]This?study?revealed?the?current?situation?of?academic?risk,showed?the?problems?of?potential?academic?risk?authors?in?research,can?effectively?warn?academic?misconduct,promote?a?good?academic?atmosphere,and?ensure?the?orderly?and?correct?conduct?of?scientific?research.

    Key?words:academic?warning;academic?risk;academic?misconduct;Pubpeer

    學(xué)術(shù)論文的發(fā)表并不意味著某項(xiàng)研究的圓滿結(jié)束,相反它在某種程度上僅僅代表著這項(xiàng)研究的開始,有些論文或多或少存在著一些問(wèn)題,隨著論文刊載公布于整個(gè)學(xué)術(shù)界,這些問(wèn)題將會(huì)被逐漸發(fā)現(xiàn),也會(huì)引發(fā)不同程度的質(zhì)疑。存在的問(wèn)題是多方面的:有些研究出現(xiàn)問(wèn)題是由于科研本身的復(fù)雜性,程序性的錯(cuò)誤,實(shí)驗(yàn)環(huán)境條件的問(wèn)題,是客觀原因造成的;而有些問(wèn)題則是作者主觀上的誠(chéng)信問(wèn)題,科研誠(chéng)信的喪失[1-2]。在學(xué)術(shù)不端方面表現(xiàn)出的問(wèn)題尤為突出[3-5],國(guó)家也出臺(tái)一系列重量級(jí)文件嚴(yán)懲學(xué)術(shù)不端[6-8],要求預(yù)防與懲治并舉,自律與監(jiān)督并重,文件明確指出建立健全學(xué)術(shù)預(yù)警制度。學(xué)術(shù)界長(zhǎng)期以來(lái)缺乏有效的預(yù)警機(jī)制來(lái)及時(shí)發(fā)現(xiàn)問(wèn)題,解決問(wèn)題。

    正如默頓在《科學(xué)的規(guī)范結(jié)構(gòu)》[9]中強(qiáng)調(diào)科學(xué)內(nèi)容的客觀性以及有條理的懷疑。作者不應(yīng)在論文中呈現(xiàn)欺詐的研究,同時(shí)要重視有條理的懷疑。因此建立合適的學(xué)術(shù)預(yù)警機(jī)制是必要的。學(xué)術(shù)預(yù)警是指對(duì)作者可能存在的學(xué)術(shù)風(fēng)險(xiǎn)進(jìn)行預(yù)警,根據(jù)偵測(cè)到的信息,向作者、期刊、機(jī)構(gòu)等發(fā)出預(yù)警信號(hào),使其認(rèn)識(shí)到研究結(jié)果的不完善性,進(jìn)而挖掘出科研實(shí)踐中存在的科研誠(chéng)信或是科研條件導(dǎo)致的具體問(wèn)題,保障科學(xué)研究的有序正確進(jìn)行,進(jìn)行知識(shí)和理論的創(chuàng)新。學(xué)術(shù)風(fēng)險(xiǎn)既包括學(xué)術(shù)不端這種主觀上的科研誠(chéng)信喪失,也包括如實(shí)驗(yàn)條件這種客觀原因等。

    以往科技評(píng)價(jià)方式[10-15]注重正向評(píng)價(jià)作者學(xué)術(shù)貢獻(xiàn),而忽視了指出論文中所存在的學(xué)術(shù)風(fēng)險(xiǎn)以及引發(fā)的質(zhì)疑。作為出版后同行評(píng)議論壇,Pubpeer(https://pubpeer.com/)為指出論文存在的問(wèn)題提供了有效平臺(tái)[16],只要學(xué)者擁有Pubpeer賬號(hào),都可以對(duì)已發(fā)表論文進(jìn)行質(zhì)疑,質(zhì)疑內(nèi)容包括與實(shí)際情況有出入、抄襲、剽竊、數(shù)據(jù)錯(cuò)誤等。申請(qǐng)Pubpeer賬號(hào)需要有以第一作者或通訊作者身份發(fā)表的論文,并且該論文被PubMed期刊資料庫(kù)收錄,這就保證了不具備一定學(xué)術(shù)能力的人是無(wú)權(quán)發(fā)表評(píng)論的(指出論文中的問(wèn)題),而且指出問(wèn)題的評(píng)論只有經(jīng)過(guò)審查后才能發(fā)出。Couzin-Frankel?J在Science期刊上發(fā)表的論文指出Pubpeer這個(gè)網(wǎng)站成為一個(gè)標(biāo)記問(wèn)題的地方[17]。評(píng)論者已經(jīng)促使許多論文更正和撤回。該網(wǎng)站已經(jīng)成為一個(gè)有影響力的渠道,用來(lái)識(shí)別有缺陷的,甚至是欺詐性的研究。Bordignon?F在Scientometrics發(fā)表的論文指出Pubpeer有利于發(fā)現(xiàn)問(wèn)題,實(shí)現(xiàn)科學(xué)的自我糾正[18]。

    本研究基于出版后同行評(píng)議論壇Pubpeer進(jìn)行學(xué)術(shù)預(yù)警。首先是數(shù)據(jù)監(jiān)測(cè),預(yù)警系統(tǒng)需要監(jiān)測(cè)作者的論文是否引發(fā)質(zhì)疑,在本研究中使Pubpeer作為監(jiān)測(cè)數(shù)據(jù)源。其次便是如何評(píng)估作者的風(fēng)險(xiǎn)維度與等級(jí),可以從以往的正向?qū)W術(shù)評(píng)價(jià)方法中得到啟示。比如在以往評(píng)價(jià)方式中會(huì)基于發(fā)表論文數(shù)量來(lái)評(píng)估一位作者,在本研究中也需要首先監(jiān)測(cè)作者的存疑論文數(shù)(存在問(wèn)題的論文數(shù)量);論文所發(fā)表期刊的被引次數(shù)可以用于論文的價(jià)值評(píng)估,本文則采用存疑程度來(lái)表示一篇論文存在問(wèn)題的程度等。評(píng)價(jià)作者的成就時(shí)往往將作者分成不同層次,學(xué)術(shù)預(yù)警也將綜合考慮多維度的風(fēng)險(xiǎn)情況,進(jìn)行綜合分析最后得到預(yù)警指數(shù),依據(jù)預(yù)警指數(shù)的高低來(lái)發(fā)布學(xué)術(shù)預(yù)警以提醒作者。本研究可以有效識(shí)別作者的學(xué)術(shù)風(fēng)險(xiǎn),進(jìn)行分析量化,并發(fā)出警告,使作者認(rèn)識(shí)到存在的問(wèn)題,及時(shí)進(jìn)行解釋說(shuō)明以及糾正,有助于創(chuàng)造良好的學(xué)術(shù)氛圍,解決論文發(fā)表后包括學(xué)術(shù)不端在內(nèi)的引發(fā)的各類疑問(wèn)。

    1?研究對(duì)象與數(shù)據(jù)

    1.1?研究對(duì)象

    針對(duì)擁有存疑論文的作者構(gòu)建預(yù)警方法,基于Pubpeer論壇存疑論文獲取包含學(xué)術(shù)風(fēng)險(xiǎn)的數(shù)據(jù)并加以處理。本研究從Pubpeer中獲取到1萬(wàn)篇存疑論文,排除了未標(biāo)明作者的論文,構(gòu)建數(shù)據(jù)集作為研究對(duì)象。Pubpeer上的存疑論文主要集中于技術(shù)科學(xué)中的生物醫(yī)學(xué)等領(lǐng)域。表1顯示了存疑論文所屬期刊前5的情況。

    PubMed是一個(gè)檢索生物醫(yī)學(xué)領(lǐng)域的論文數(shù)據(jù)庫(kù),它的數(shù)據(jù)來(lái)源為MEDLINE。其核心主題為醫(yī)學(xué),但亦輻射其他相關(guān)研究領(lǐng)域。研究發(fā)現(xiàn)獲取的存疑論文所屬期刊包括前5名在內(nèi)都為PubMed收錄期刊或生物醫(yī)學(xué)領(lǐng)域相關(guān)期刊,研究主題集中于生物醫(yī)學(xué)相關(guān)內(nèi)容。

    1.2?存疑論文分析

    如圖1所示,對(duì)獲取到的被評(píng)論、存疑的論文進(jìn)行分析。其中存疑論文指被評(píng)論指出問(wèn)題的論文,存疑程度即論文被評(píng)論的次數(shù)也就是被指出各種問(wèn)題的次數(shù)。存疑論文數(shù)量和論文的存疑程度逐年增加,尤其是從2015年后呈現(xiàn)出爆發(fā)式增長(zhǎng)。2015—2019年存疑論文數(shù)每?jī)赡暝鲩L(zhǎng)約100%,存疑論文的存疑程度總數(shù)增量迅猛。2020年前9個(gè)月增加的存疑論文數(shù)已經(jīng)與2019年整年的情況基本持平。從圖1展現(xiàn)的趨勢(shì)可以看出,學(xué)術(shù)界論文存疑的整體情況不容樂(lè)觀,科學(xué)研究的整體性風(fēng)險(xiǎn)在急劇攀升。

    1.3?存疑作者分析

    如圖2所示,有1篇論文存疑的作者占比總存疑作者數(shù)量的89%,有2篇論文存疑的作者占比7%,作者數(shù)占比隨著存疑論文數(shù)增加而銳減,存疑論文數(shù)為6~10,以及存疑論文數(shù)大于10的作者占比均不到1%。這說(shuō)明絕大多數(shù)的作者存疑論文數(shù)非常小,只有極少數(shù)作者的存疑論文數(shù)能夠達(dá)到5篇以上,作者在存疑論文數(shù)極低時(shí)分布非常分散,在存疑論文數(shù)較高時(shí)分布較為集中,能有多篇存疑論文的作者是極少數(shù)。盡管如此,即使是只有1篇論文為別人所質(zhì)疑的情況也是值得論文作者警惕的,這可能涉及科學(xué)研究各個(gè)方面的問(wèn)題,值得作者重視和反思。

    圖2?存疑論文與作者數(shù)量關(guān)系圖

    圖2有利于識(shí)別需重點(diǎn)關(guān)注的作者,本研究中作者的情況差別極為懸殊,絕大多數(shù)作者存疑論文基本只有1篇,能達(dá)到3篇以上的作者非常少,這也說(shuō)明大部分作者在Pubpeer上存疑論文的問(wèn)題可能集中于某個(gè)點(diǎn),而少數(shù)的作者可能存在較多的問(wèn)題。

    2?學(xué)術(shù)預(yù)警指標(biāo)構(gòu)建

    構(gòu)建學(xué)術(shù)預(yù)警指標(biāo)來(lái)衡量科研人員的學(xué)術(shù)活動(dòng)風(fēng)險(xiǎn)情況,難點(diǎn)在于應(yīng)考慮哪些維度,在某個(gè)維度下以何種形式進(jìn)行量化評(píng)估。以往的評(píng)價(jià)中有著較為成熟的指標(biāo)體系,可以進(jìn)行借鑒。為了更好地開展學(xué)術(shù)預(yù)警研究,本研究映射已有的學(xué)術(shù)評(píng)價(jià)方法指標(biāo)體系于學(xué)術(shù)預(yù)警任務(wù)指標(biāo)的構(gòu)建,本文對(duì)相關(guān)概念進(jìn)行映射,如圖3所示。

    圖3?傳統(tǒng)評(píng)價(jià)與學(xué)術(shù)預(yù)警映射圖

    傳統(tǒng)評(píng)價(jià)體系中的指標(biāo)是映射中的原像,本研究所構(gòu)建的預(yù)警指標(biāo)是映射中的像。傳統(tǒng)評(píng)價(jià)是基于引用,但引用有很大的不確定性,比如A論文中引用B論文,是正面引用還是反引?有沒(méi)有濫竽充數(shù)的引用,甚至是因?yàn)槿饲槭拦识M(jìn)行引用。而學(xué)術(shù)預(yù)警指標(biāo)是基于評(píng)論,評(píng)論是確定的,評(píng)論是有資質(zhì)的學(xué)者發(fā)表后經(jīng)過(guò)審核的,言之鑿鑿地提出問(wèn)題,例如論文存在與實(shí)際情況不符、剽竊、抄襲和不規(guī)范等。

    2.1?存疑數(shù)量預(yù)警指標(biāo)

    2.1.1?存疑論文數(shù)量指標(biāo)

    在以往評(píng)價(jià)科研人員或者在進(jìn)行職稱評(píng)定時(shí)首先會(huì)考慮該作者發(fā)表論文數(shù)量,然后再考慮其他方面因素。在進(jìn)行預(yù)警時(shí)也是首先考慮作者的存疑論文數(shù)量。

    2.1.2?論文存疑程度指標(biāo)

    在衡量論文的價(jià)值時(shí)常常會(huì)考慮這篇論文的被引次數(shù),同樣在考慮被指出問(wèn)題的論文所存在的風(fēng)險(xiǎn)時(shí),需要考慮存疑程度即論文被評(píng)論的次數(shù),也就是被指出各種問(wèn)題的次數(shù)。

    如圖4對(duì)存疑論文的存疑程度進(jìn)行統(tǒng)計(jì)可以發(fā)現(xiàn):大部分存疑論文的存疑程度基本為1或2,存疑程度能達(dá)到5以上的論文占存疑論文總數(shù)的9%,對(duì)存疑論文按照存疑程度降序排列便可看到論文的存疑程度從1~285,存疑程度間距極大,也就是被指出問(wèn)題次數(shù)最多的論文曾被評(píng)論285次,如表2所示,單篇論文如此大的存疑程度其背后必然有深層的原因,這樣的研究成果如果被應(yīng)用,風(fēng)險(xiǎn)不可忽視,特別是在生物醫(yī)學(xué)領(lǐng)域,這樣的研究如果被采納使用,可能會(huì)引發(fā)嚴(yán)重問(wèn)題。因此將單篇最大存疑程度納入考量范圍。

    2.2?融合存疑程度的預(yù)警指標(biāo)

    從存疑論文數(shù)和論文的存疑程度這兩個(gè)主要方面混合衡量量化風(fēng)險(xiǎn)沒(méi)有直接可用的研究方法,但可以從以往的正向評(píng)價(jià)方法中得到啟示。學(xué)術(shù)界衡量作者的學(xué)術(shù)成就一般采用H指數(shù)[19]。H指數(shù)表示作者至多有H篇文章至少被引H次,這種研究方法可以應(yīng)用于作者的存疑論文數(shù)與存疑程度兩者的融合。定義:混合指數(shù)1=作者至多有n篇論文的存疑程度至少為n。例如某位作者的混合指數(shù)為7,則這位作者至多有7篇論文的存疑程度至少為7。

    混合指數(shù)1對(duì)存疑論文數(shù)與存疑程度進(jìn)行了融合考量,它偏向于整體考量這兩個(gè)因素,但混合指數(shù)1沒(méi)有突出顯示存疑程度較高論文的情況。正向評(píng)價(jià)一位作者的高被引論文的情況,通常使用G指數(shù)[20]在混合衡量中突出高被引的情況。在本研究中從G指數(shù)中得到啟發(fā),為更好地考慮存疑論文中存疑程度較高論文的情況,定義:混合指數(shù)2=作者的存疑論文按被存疑程度平方排序相對(duì)排前的累積總數(shù)至少n2的最大論文序次n?;旌现笖?shù)2便于識(shí)別作者論文的存疑程度差別懸殊時(shí)考慮存疑程度較高論文的情況。

    2.3?融合時(shí)間因素的預(yù)警指標(biāo)

    對(duì)可能存在的學(xué)術(shù)風(fēng)險(xiǎn)進(jìn)行監(jiān)測(cè),不僅需要考慮作者的學(xué)術(shù)生涯整體情況,更需著重考慮近幾年的發(fā)展情況,尤其是近幾年與其過(guò)往較長(zhǎng)時(shí)間的對(duì)比,了解作者的研究發(fā)展態(tài)勢(shì)。以便從近幾年發(fā)展的情況來(lái)衡量作者的學(xué)術(shù)風(fēng)險(xiǎn)。從年份考慮,衡量一位作者的方式可以從存疑論文數(shù)與論文存疑程度這兩方面入手來(lái)表示其在某個(gè)時(shí)間段的風(fēng)險(xiǎn)性。使作者最近的時(shí)間段的學(xué)術(shù)風(fēng)險(xiǎn)與過(guò)去較長(zhǎng)一段時(shí)間的情況進(jìn)行對(duì)比,所選取的最近時(shí)間段不能太短,否則便因?yàn)檫x取的范圍過(guò)窄,提高了偶然性,不能較好地考慮最近時(shí)間段的一慣表現(xiàn),時(shí)間段也不能過(guò)長(zhǎng),否則便不能突出近期時(shí)間段,所以選取2018—2020年3年時(shí)間段與2018年之前這個(gè)長(zhǎng)時(shí)間段進(jìn)行對(duì)比。定義:

    近年趨勢(shì)指數(shù)=X1X2×a+Y1Y2×b(1)

    其中限定a+b=1,本研究中取a=0.5,b=0.5。其中,X1為最近3年年均存疑論文數(shù),X2為2018年之前年均存疑論文數(shù);Y1為最近3年存疑論文篇均存疑程度;Y2為2018年之前存疑論文篇均存疑程度。

    設(shè)置近年趨勢(shì)指數(shù)有其必要性,比如某位作者雖然以前很長(zhǎng)時(shí)間并沒(méi)有什么學(xué)術(shù)風(fēng)險(xiǎn),但最近產(chǎn)生了很多風(fēng)險(xiǎn),那么近年趨勢(shì)指數(shù)會(huì)非常高,突出這一趨勢(shì)。如果有作者雖然以前較長(zhǎng)時(shí)間存在較大學(xué)術(shù)風(fēng)險(xiǎn),但近年來(lái)注意各方面問(wèn)題,及時(shí)糾正問(wèn)題,那么近年趨勢(shì)指數(shù)會(huì)很低甚至為0。

    3?實(shí)證研究

    3.1?數(shù)據(jù)分析

    對(duì)Pubpeer上出現(xiàn)的存疑論文作者,計(jì)算其存疑論文數(shù),單篇最大存疑程度,混合指標(biāo)1,混合指標(biāo)2,近年趨勢(shì)指數(shù),篇均存疑程度,如表3所示,表中展示按存疑論文數(shù)排序前11位作者各項(xiàng)指標(biāo)。

    各項(xiàng)指標(biāo)從不同維度顯示了作者存在的學(xué)術(shù)風(fēng)險(xiǎn)情況,量的方面依賴于存疑論文數(shù),有多少篇論文被指出問(wèn)題;質(zhì)的方面依賴于單篇最大存疑程度。混合指數(shù)1,側(cè)重綜合考察作者一貫情況;混合指數(shù)2,側(cè)重考察作者存疑程度較高論文的整體情況。使用近年趨勢(shì)指數(shù)來(lái)考察作者近3年的趨勢(shì)。

    如圖5將表3中的存疑論文數(shù),混合指數(shù)1,混合指數(shù)2,以折線圖呈現(xiàn),圖5顯示存疑論文數(shù)下降,而混合指數(shù)1,混合指數(shù)2則上下波動(dòng)變化,這說(shuō)明這兩個(gè)指數(shù)與存疑論文數(shù)沒(méi)有絕對(duì)的關(guān)聯(lián),即存疑論文數(shù)多也不代表混合指數(shù)就大;而且混合指數(shù)1與混合指數(shù)2曲線變化趨勢(shì)也不盡相同,說(shuō)明這兩個(gè)指數(shù)側(cè)重點(diǎn)不同,二者具有差異性。圖5反映出有著各項(xiàng)指標(biāo)的獨(dú)特性。

    *Xu、*Liao和*Nazari?3位作者從存疑論文數(shù)看存在依次遞減的關(guān)系。表4查看3位作者2004—2020年的存疑論文數(shù)與存疑程度的情況,*Nazari近幾年已經(jīng)沒(méi)有存疑論文;*Xu近幾年雖有存疑論文,但與之前較長(zhǎng)時(shí)間相比,近幾年有很明顯下降趨勢(shì);而*Liao近幾年存疑論文數(shù)處在較高水平,同時(shí)存疑程度也很高。顯然能夠看出近3年來(lái),潛在的風(fēng)險(xiǎn)的趨勢(shì)最高的是*Liao。*Xu、*Liao、*Nazari三者的近年趨勢(shì)指數(shù)分別為0.35、1.28、0。存疑論文數(shù)較多并不代表近年學(xué)術(shù)風(fēng)險(xiǎn)就高,通過(guò)近年趨勢(shì)指數(shù)很好地反映了近年趨勢(shì)情況。在衡量學(xué)術(shù)風(fēng)險(xiǎn)時(shí)近年趨勢(shì)是需要著重考察的一個(gè)方面。

    3.2?學(xué)術(shù)預(yù)警指數(shù)

    上述研究顯示進(jìn)行學(xué)術(shù)預(yù)警需要從多維度進(jìn)行綜合考慮。數(shù)量角度的指標(biāo)存疑論文數(shù)和論文存疑程度;融合角度的指標(biāo)混合指數(shù)1與混合指數(shù)2;時(shí)間角度的指標(biāo)近年趨勢(shì)指數(shù),這些指標(biāo)各有側(cè)重,綜合考慮這些維度的指標(biāo)是必要的。為了評(píng)估一位作者存在的學(xué)術(shù)風(fēng)險(xiǎn),本研究提出學(xué)術(shù)預(yù)警指數(shù)來(lái)刻畫作者學(xué)術(shù)風(fēng)險(xiǎn),以此對(duì)作者進(jìn)行預(yù)警。學(xué)術(shù)預(yù)警指數(shù)定義為:

    其中wi是第i位作者的學(xué)術(shù)預(yù)警指數(shù);Roundup為向上取整函數(shù);Normalization為歸一化函數(shù),xi1、xi2、xi3、xi4、xi5分別為第i位作者的存疑論文數(shù),混合指數(shù)1,混合指數(shù)2,單篇最大質(zhì)疑程度,近年趨勢(shì)指數(shù)。

    在進(jìn)行歸一化時(shí)xi1、xi2、xi3、xi4前4項(xiàng)按照常見的MAX-MIN方法進(jìn)行歸一。xi1、xi3、xi4這3項(xiàng)指標(biāo)的MAX并非選取該項(xiàng)指標(biāo)所有作者中的最大值而是選取第6項(xiàng)值,每項(xiàng)指標(biāo)前5項(xiàng)與其他作者差別過(guò)于顯著,相距太大,前5項(xiàng)按滿值計(jì)算。Normlization(xi5)在0~2時(shí)直接取值xi5,近年趨勢(shì)指數(shù)本身就代表了與往年相比近年趨勢(shì)程度,大于2時(shí)xi5按滿值計(jì)算,大于2意味著與往年相比已經(jīng)翻倍。

    5項(xiàng)指標(biāo)均歸一到0~2區(qū)間而不是0~1區(qū)間,主要是為了與近年趨勢(shì)指數(shù)相銜接,所有指標(biāo)等權(quán)重。即最終的預(yù)警指數(shù)分為十級(jí)(0~10),預(yù)警指數(shù)0代表基本沒(méi)有風(fēng)險(xiǎn),預(yù)警指數(shù)10代表系統(tǒng)性學(xué)術(shù)風(fēng)險(xiǎn)最高。

    如表5學(xué)術(shù)預(yù)警指數(shù)綜合了各個(gè)方面,體現(xiàn)了一位作者的整體學(xué)術(shù)風(fēng)險(xiǎn)。通過(guò)預(yù)警指數(shù)的對(duì)比很容易看出不同的作者面臨何種學(xué)術(shù)風(fēng)險(xiǎn),發(fā)布預(yù)警值以便對(duì)作者進(jìn)行提醒。

    考量預(yù)警指數(shù)較高的作者所屬國(guó)家情況,對(duì)預(yù)警指數(shù)前10的作者進(jìn)行統(tǒng)計(jì)發(fā)現(xiàn):中國(guó)7位,沙特阿拉伯、加拿大、土耳其、法國(guó)各1位。預(yù)警指數(shù)前10的作者中中國(guó)占64%。如圖6所示,預(yù)警指數(shù)前100名中:中國(guó)58位,美國(guó)9位,印度5位,意大利5位,其余國(guó)家均小于5位。中國(guó)占58%。由此可見,在預(yù)警指數(shù)較高的作者中過(guò)半數(shù)為中國(guó)作者,中國(guó)作者的整體性風(fēng)險(xiǎn)最高,并且遠(yuǎn)遠(yuǎn)高于其他國(guó)家,顯示了我國(guó)學(xué)術(shù)界存在的風(fēng)險(xiǎn)之高,亟待解決。

    通過(guò)作者的國(guó)家分布情況發(fā)現(xiàn),相比于其他國(guó)家,中國(guó)在學(xué)術(shù)風(fēng)險(xiǎn)方面問(wèn)題尤為嚴(yán)重,但不同作者的風(fēng)險(xiǎn)程度又有很大區(qū)別,具體情況不一,由此突出重點(diǎn)人群至關(guān)重要,這就需要抓住風(fēng)險(xiǎn)較高的作者,并及時(shí)發(fā)布預(yù)警。對(duì)風(fēng)險(xiǎn)極高的作者及時(shí)預(yù)警,列為重點(diǎn)關(guān)注對(duì)象。表6顯示了中國(guó)學(xué)術(shù)預(yù)警指數(shù)排名前10位。不僅能夠重點(diǎn)關(guān)注高風(fēng)險(xiǎn)作者,而且可以通過(guò)具體的各項(xiàng)數(shù)值看到作者在哪些方面的問(wèn)題嚴(yán)重。

    4?討論與結(jié)論

    本文通過(guò)出版后同行評(píng)議論壇Pubpeer偵測(cè)識(shí)別可能的學(xué)術(shù)風(fēng)險(xiǎn),基于已有學(xué)術(shù)評(píng)價(jià)體系進(jìn)行概念映射,構(gòu)建學(xué)術(shù)預(yù)警指標(biāo)。對(duì)偵測(cè)到的不同維度的數(shù)據(jù)進(jìn)行分析和量化處理,綜合各個(gè)維度指標(biāo)提出作者學(xué)術(shù)預(yù)警指數(shù)。學(xué)術(shù)預(yù)警指數(shù)的提出可以有效地對(duì)作者總體的學(xué)術(shù)風(fēng)險(xiǎn)進(jìn)行評(píng)估,對(duì)作者的學(xué)術(shù)行為起到警示和規(guī)范作用,完善當(dāng)前的學(xué)術(shù)評(píng)價(jià)體系。

    4.1?學(xué)術(shù)預(yù)警應(yīng)用前景

    2015年以后,存疑論文數(shù)目顯示出了極高的增長(zhǎng)速度,幾乎每?jī)赡昃蜁?huì)翻倍,這很大程度上代表著潛在學(xué)術(shù)不端風(fēng)險(xiǎn)的急劇增加。存疑論文不一定百分百有學(xué)術(shù)不端問(wèn)題,但存疑論文肯定存在或多或少的學(xué)術(shù)不端風(fēng)險(xiǎn),否則不會(huì)憑空出現(xiàn)在Pubpeer上。Pubpeer是為有資質(zhì)的學(xué)者提供平臺(tái),針對(duì)已經(jīng)刊載在各類期刊上的論文提出質(zhì)疑,并經(jīng)過(guò)審核后才能發(fā)布。存疑論文的泛濫說(shuō)明整個(gè)學(xué)術(shù)界的學(xué)術(shù)誠(chéng)信與基本道德水平不容樂(lè)觀,學(xué)術(shù)生態(tài)的惡化,也進(jìn)一步凸顯了發(fā)布預(yù)警的緊迫性。

    現(xiàn)有的Pubpeer平臺(tái)對(duì)于中國(guó)學(xué)術(shù)環(huán)境也是有很好的監(jiān)督作用,可以弄清作者的風(fēng)險(xiǎn)程度,關(guān)注重點(diǎn)人群,以及風(fēng)險(xiǎn)主要在哪些方面等。采用有效的機(jī)制和方法利用Pubpeer平臺(tái)對(duì)中國(guó)學(xué)術(shù)環(huán)境進(jìn)行監(jiān)督,也能夠有效保護(hù)中國(guó)學(xué)術(shù)環(huán)境的良好氛圍。

    4.2?學(xué)術(shù)預(yù)警平臺(tái)建設(shè)的必要性

    通過(guò)本文以上研究可以發(fā)現(xiàn),Pubpeer可以偵測(cè)可能存在的學(xué)術(shù)風(fēng)險(xiǎn)。Pubpeer上主要針對(duì)的是全球英文論文,不能實(shí)現(xiàn)偵測(cè)中文論文學(xué)術(shù)風(fēng)險(xiǎn)的任務(wù)。中國(guó)各學(xué)科都存在大量中文論文,如何從中識(shí)別并評(píng)估潛在的中國(guó)的學(xué)術(shù)風(fēng)險(xiǎn),顯然僅僅依靠Pubpeer是不夠的,需要建立屬于我國(guó)自己的類似于Pubpeer這樣的平臺(tái)。一是能有效偵測(cè)中文論文可能存在的學(xué)術(shù)風(fēng)險(xiǎn),不論是因主觀原因還是客觀原因?qū)е碌娘L(fēng)險(xiǎn),推動(dòng)科學(xué)研究有序正確進(jìn)行;二是學(xué)術(shù)風(fēng)險(xiǎn)有很大部分是因喪失學(xué)術(shù)誠(chéng)信導(dǎo)致的風(fēng)險(xiǎn)。建立這樣的平臺(tái)本身就是對(duì)心存僥幸、喪失學(xué)術(shù)道德、以身試法者的強(qiáng)力震懾。建立中文論文刊后同行評(píng)議在線平臺(tái),首先,能夠發(fā)表質(zhì)疑的評(píng)閱者范圍應(yīng)該是更加全面和廣泛,具有一定的學(xué)術(shù)素養(yǎng)和學(xué)術(shù)能力的人都可以成為評(píng)閱者。其次,質(zhì)疑的發(fā)表的內(nèi)容要更真實(shí),符合客觀事實(shí)。最后,只要評(píng)閱者是單純的指出學(xué)術(shù)風(fēng)險(xiǎn),凈化科研環(huán)境,都應(yīng)給予有力的保護(hù)機(jī)制。

    4.3?本研究的不足

    本研究的學(xué)術(shù)預(yù)警分析結(jié)果主要與在Pubpeer上注冊(cè)并發(fā)表評(píng)論的人群有關(guān),人群的差異可能導(dǎo)致分析結(jié)果的差異,本文對(duì)該方面研究不足;同時(shí)本文從Pubpeer上獲取的研究數(shù)據(jù)主要集中于生物醫(yī)學(xué)領(lǐng)域的學(xué)術(shù)論文及其相關(guān)同行評(píng)論信息,研究方法對(duì)于該領(lǐng)域的學(xué)術(shù)風(fēng)險(xiǎn)現(xiàn)狀評(píng)估更為有效。未來(lái)的研究將從發(fā)表評(píng)論人群的差異以及不同研究領(lǐng)域的學(xué)術(shù)風(fēng)險(xiǎn)差異兩個(gè)方面展開更加深入的研究。

    參考文獻(xiàn)

    [1]孫平.國(guó)外學(xué)術(shù)出版道德建設(shè)最新進(jìn)展及其啟示[J].編輯學(xué)報(bào),2021,33(1):49-53.

    [2]段偉文.科研誠(chéng)信建設(shè)刻不容緩[N].環(huán)球時(shí)報(bào),2021-02-10,(15).

    [3]劉宇,魏峰,杜云飛.重復(fù)發(fā)表與學(xué)術(shù)失范:以經(jīng)濟(jì)管理學(xué)科為例[J].清華大學(xué)學(xué)報(bào):哲學(xué)社會(huì)科學(xué)版,2020,35(6):189-204.

    [4]王朗.學(xué)術(shù)不端行為及應(yīng)對(duì)策略[J].傳媒論壇,2020,3(6):98.

    [5]王鋒.科學(xué)不端行為及其成因剖析[J].科學(xué)學(xué)研究,2002,20(1):11-16.

    [6]中共中央辦公廳、國(guó)務(wù)院辦公廳.關(guān)于進(jìn)一步加強(qiáng)科研誠(chéng)信建設(shè)的若干意見[EB/OL].http://www.gov.cn/gongbao/content/2018/content_5299602.htm,2018-05-30.

    [7]中共中央辦公廳、國(guó)務(wù)院辦公廳.關(guān)于進(jìn)一步弘揚(yáng)科學(xué)家精神加強(qiáng)作風(fēng)和學(xué)風(fēng)建設(shè)的意見[EB/OL].http://www.gov.cn/zhengce/2019-06/11/content_5399239.htm,2019-06-11.

    [8]科技部、自然科學(xué)基金委.關(guān)于進(jìn)一步壓實(shí)國(guó)家科技計(jì)劃(專項(xiàng)、基金等)任務(wù)承擔(dān)單位科研作風(fēng)學(xué)風(fēng)和科研誠(chéng)信主體責(zé)任的通知[EB/OL].http://www.gov.cn/zhengce/zhengceku/2020-07/30/content_5531151.htm,2020-07-30.

    [9]什托姆普卡.默頓學(xué)術(shù)思想評(píng)傳[M].北京:北京大學(xué)出版社,2009:50-51.

    [10]陳云偉,張志強(qiáng).科技評(píng)價(jià)走出“破”與“立”困局的思考與建議[J].情報(bào)學(xué)報(bào),2020,39(8):796-805.

    [11]葉繼元.“SCI至上”的要害、根源與破解之道[J].情報(bào)學(xué)報(bào),2020,39(8):787-795.

    [12]黃文雅.新型Altmetrics指標(biāo)與傳統(tǒng)學(xué)術(shù)評(píng)價(jià)指標(biāo)相關(guān)性研究[D].安徽:中國(guó)科學(xué)技術(shù)大學(xué),2017.

    [13]鄒丹.融合傳統(tǒng)指標(biāo)與Altmetrics指標(biāo)的學(xué)者影響評(píng)估研究[D].重慶:西南大學(xué),2018.

    [14]舒予,張黎俐.時(shí)序動(dòng)態(tài)視角下的學(xué)術(shù)影響力評(píng)價(jià)方法及實(shí)證研究[J].現(xiàn)代情報(bào),2017,37(11):74-80,86.

    [15]Garfield?E.Citation?Indexes?for?Science;A?New?Dimension?in?Documentation?Through?Association?of?Ideas[J].Science,1955,122(3159):108-111.

    [16]Zong?Q?J,F(xiàn)an?L?L,Xie?Y?F,et?al.The?Relationship?of?Polarity?of?Post-publication?Peer?Review?to?Citation?Count[J].Online?Information?Review,2020,44(3):583-602.

    [17]Couzin-Frankel?J.PubPeer?Co-founder?Reveals?Identity—and?New?Plans[J].Science,2015,349(6252):1036.

    [18]Bordignon?F.Selfcorrection?of?Science:A?Comparative?Study?of?Negative?Citations?and?Postpublication?Peer?Review[J].Scientometrics,2020,(124):1225-1239.

    [19]Hirsch?J?E.An?Index?to?Quantify?an?Individuals?Scientific?Research?Output[J].Proceedings?of?the?National?Academy?of?Sciences?of?the?United?States?of?America,2005,102(46):16569-16572.

    [20]Egghe?L.An?Improvement?of?the?H-index:The?G-index[J].ISSI?Newsletter,2006,2(1):8-9.

    (責(zé)任編輯:陳?媛)

    猜你喜歡
    學(xué)術(shù)不端
    研究生學(xué)術(shù)不端行為的實(shí)證分析
    高校整治防范學(xué)術(shù)不端問(wèn)題的對(duì)策研究
    研究生學(xué)術(shù)不端問(wèn)題的形成機(jī)理及規(guī)避方法研究
    論學(xué)術(shù)不端行為與學(xué)術(shù)期刊的責(zé)任
    科技期刊構(gòu)建學(xué)術(shù)不端文獻(xiàn)檢測(cè)體系分析
    高校教師學(xué)術(shù)道德和學(xué)風(fēng)建設(shè)問(wèn)題與對(duì)策研究
    成人国产av品久久久| 欧美日韩综合久久久久久| 亚洲黑人精品在线| 国产精品欧美亚洲77777| 亚洲国产最新在线播放| 精品人妻1区二区| 欧美人与善性xxx| 国产成人精品无人区| e午夜精品久久久久久久| 久久99热这里只频精品6学生| 少妇 在线观看| 欧美精品高潮呻吟av久久| 午夜福利一区二区在线看| 午夜福利一区二区在线看| 精品少妇黑人巨大在线播放| 亚洲精品美女久久av网站| 久久久久精品人妻al黑| 19禁男女啪啪无遮挡网站| 国产男女超爽视频在线观看| av片东京热男人的天堂| 我要看黄色一级片免费的| 亚洲av在线观看美女高潮| 国产一区二区三区综合在线观看| 国产一区二区三区av在线| 亚洲欧洲精品一区二区精品久久久| 国产老妇伦熟女老妇高清| 丁香六月天网| 久久精品国产亚洲av高清一级| 女人精品久久久久毛片| 午夜91福利影院| 亚洲专区中文字幕在线| 久久国产精品大桥未久av| 久久久精品国产亚洲av高清涩受| 久久国产亚洲av麻豆专区| 国产成人欧美| 久久精品人人爽人人爽视色| 麻豆国产av国片精品| 9色porny在线观看| 纯流量卡能插随身wifi吗| 91精品三级在线观看| 免费人妻精品一区二区三区视频| 午夜免费鲁丝| 国产爽快片一区二区三区| 日韩,欧美,国产一区二区三区| 欧美成狂野欧美在线观看| 制服人妻中文乱码| 晚上一个人看的免费电影| 中文字幕人妻丝袜一区二区| 男人操女人黄网站| 婷婷丁香在线五月| 午夜影院在线不卡| 另类精品久久| 91成人精品电影| 美女中出高潮动态图| 热99久久久久精品小说推荐| 九草在线视频观看| 欧美xxⅹ黑人| 久久久久久久久免费视频了| 亚洲欧洲日产国产| 国产人伦9x9x在线观看| 欧美国产精品一级二级三级| 91老司机精品| 日本av手机在线免费观看| 熟女少妇亚洲综合色aaa.| 成人国语在线视频| av又黄又爽大尺度在线免费看| 亚洲欧洲精品一区二区精品久久久| 一区二区三区四区激情视频| 欧美日韩国产mv在线观看视频| 国产精品久久久久成人av| 亚洲熟女毛片儿| 水蜜桃什么品种好| 超碰97精品在线观看| 自线自在国产av| 国产精品麻豆人妻色哟哟久久| 人妻一区二区av| 日韩av不卡免费在线播放| 夫妻午夜视频| 欧美亚洲日本最大视频资源| 人体艺术视频欧美日本| www.精华液| 欧美精品亚洲一区二区| 国产精品二区激情视频| 国产成人一区二区三区免费视频网站 | 国产片内射在线| 99热全是精品| 亚洲av日韩精品久久久久久密 | 久久人人爽人人片av| 免费看不卡的av| 国产精品国产三级专区第一集| 久久国产精品人妻蜜桃| 亚洲精品国产区一区二| 19禁男女啪啪无遮挡网站| 少妇人妻 视频| 王馨瑶露胸无遮挡在线观看| 久久精品熟女亚洲av麻豆精品| 电影成人av| 男女边吃奶边做爰视频| 黄色 视频免费看| 看免费成人av毛片| 日韩制服骚丝袜av| 亚洲国产精品成人久久小说| 国产91精品成人一区二区三区 | 国产成人精品无人区| 丰满人妻熟妇乱又伦精品不卡| 亚洲五月色婷婷综合| 亚洲国产精品999| 制服诱惑二区| 女人爽到高潮嗷嗷叫在线视频| 无遮挡黄片免费观看| 大话2 男鬼变身卡| 久久久久久久久免费视频了| 国产野战对白在线观看| 老鸭窝网址在线观看| 制服人妻中文乱码| 国产在线一区二区三区精| 国产有黄有色有爽视频| 国产高清国产精品国产三级| 亚洲 国产 在线| 久久人妻福利社区极品人妻图片 | www.999成人在线观看| 操出白浆在线播放| av电影中文网址| 精品国产一区二区三区四区第35| 免费高清在线观看视频在线观看| 好男人视频免费观看在线| 精品亚洲成国产av| 欧美日韩成人在线一区二区| 王馨瑶露胸无遮挡在线观看| 久久久欧美国产精品| 成年人黄色毛片网站| 亚洲中文日韩欧美视频| 国产成人系列免费观看| 成人黄色视频免费在线看| 国产成人a∨麻豆精品| 91成人精品电影| 老鸭窝网址在线观看| 欧美日韩视频高清一区二区三区二| 国产欧美日韩一区二区三区在线| 99精国产麻豆久久婷婷| 日韩av免费高清视频| 日韩中文字幕欧美一区二区 | 国产精品熟女久久久久浪| 国产精品国产av在线观看| 亚洲熟女精品中文字幕| 老司机影院成人| 国产伦理片在线播放av一区| 七月丁香在线播放| 亚洲成人免费电影在线观看 | 色婷婷久久久亚洲欧美| 国产在线视频一区二区| 2018国产大陆天天弄谢| 999久久久国产精品视频| 狠狠婷婷综合久久久久久88av| 亚洲精品国产一区二区精华液| 性色av一级| 看十八女毛片水多多多| 多毛熟女@视频| 婷婷色av中文字幕| 久久人妻福利社区极品人妻图片 | 亚洲av日韩精品久久久久久密 | 亚洲国产精品国产精品| 丝袜人妻中文字幕| 久久精品国产综合久久久| 亚洲国产看品久久| 精品熟女少妇八av免费久了| 下体分泌物呈黄色| 国产精品.久久久| 国产精品人妻久久久影院| 精品少妇一区二区三区视频日本电影| 精品国产一区二区三区久久久樱花| 2018国产大陆天天弄谢| 亚洲图色成人| 男的添女的下面高潮视频| 久久久久久久久免费视频了| tube8黄色片| 国产有黄有色有爽视频| 亚洲av男天堂| 丰满饥渴人妻一区二区三| 一区二区日韩欧美中文字幕| 中文欧美无线码| 亚洲欧美一区二区三区久久| 免费在线观看完整版高清| 日本vs欧美在线观看视频| 老司机在亚洲福利影院| 国产男女超爽视频在线观看| 天堂8中文在线网| 亚洲少妇的诱惑av| 欧美日韩视频精品一区| 夜夜骑夜夜射夜夜干| 精品国产国语对白av| 精品一区二区三卡| bbb黄色大片| 精品福利观看| 国产欧美日韩精品亚洲av| 超色免费av| 精品福利永久在线观看| 91精品三级在线观看| 国产女主播在线喷水免费视频网站| 亚洲免费av在线视频| 欧美日韩精品网址| 波野结衣二区三区在线| 青青草视频在线视频观看| 男女午夜视频在线观看| 成人手机av| 亚洲精品国产av成人精品| 蜜桃在线观看..| 亚洲av男天堂| 午夜精品国产一区二区电影| 麻豆av在线久日| 亚洲国产欧美网| 80岁老熟妇乱子伦牲交| 一本—道久久a久久精品蜜桃钙片| 国产亚洲av高清不卡| 夫妻性生交免费视频一级片| 欧美久久黑人一区二区| 在线观看免费视频网站a站| 免费观看a级毛片全部| 热99国产精品久久久久久7| 久久精品国产亚洲av涩爱| 国产一区亚洲一区在线观看| 精品亚洲乱码少妇综合久久| 免费高清在线观看视频在线观看| 超碰成人久久| 免费高清在线观看日韩| 久久综合国产亚洲精品| 国产日韩欧美在线精品| 99久久精品国产亚洲精品| 天堂俺去俺来也www色官网| 最近中文字幕2019免费版| 国产视频首页在线观看| 久久国产精品男人的天堂亚洲| 男人操女人黄网站| 亚洲欧美一区二区三区国产| 亚洲欧美精品自产自拍| 精品高清国产在线一区| 十八禁网站网址无遮挡| svipshipincom国产片| 99久久人妻综合| 亚洲精品久久久久久婷婷小说| 亚洲欧美一区二区三区久久| 男女床上黄色一级片免费看| 国产高清国产精品国产三级| 国产主播在线观看一区二区 | 老司机靠b影院| 精品福利永久在线观看| 免费在线观看视频国产中文字幕亚洲 | 国产亚洲欧美在线一区二区| 精品第一国产精品| 两个人免费观看高清视频| 老司机午夜十八禁免费视频| 亚洲国产成人一精品久久久| 国产精品偷伦视频观看了| 我要看黄色一级片免费的| 日韩,欧美,国产一区二区三区| 欧美中文综合在线视频| 巨乳人妻的诱惑在线观看| 69精品国产乱码久久久| 五月天丁香电影| 大香蕉久久网| 国产精品一区二区在线不卡| 考比视频在线观看| 日本猛色少妇xxxxx猛交久久| 精品亚洲乱码少妇综合久久| 亚洲av成人精品一二三区| 一区二区三区激情视频| 一级片免费观看大全| 欧美日韩国产mv在线观看视频| www.999成人在线观看| 国产亚洲午夜精品一区二区久久| 亚洲欧美色中文字幕在线| 亚洲av成人精品一二三区| 国产亚洲一区二区精品| 国产福利在线免费观看视频| 亚洲精品国产av成人精品| 岛国毛片在线播放| 9色porny在线观看| a级片在线免费高清观看视频| 桃花免费在线播放| 纯流量卡能插随身wifi吗| 免费高清在线观看视频在线观看| 又紧又爽又黄一区二区| 亚洲国产欧美一区二区综合| 亚洲精品日本国产第一区| 色网站视频免费| 国精品久久久久久国模美| 亚洲,欧美精品.| 色综合欧美亚洲国产小说| 国产深夜福利视频在线观看| 国产极品粉嫩免费观看在线| 欧美日韩亚洲高清精品| 麻豆国产av国片精品| 国产亚洲av高清不卡| 永久免费av网站大全| 午夜91福利影院| 国产欧美亚洲国产| 亚洲精品久久午夜乱码| 深夜精品福利| 精品第一国产精品| a级片在线免费高清观看视频| 国产男女内射视频| 精品一品国产午夜福利视频| 色综合欧美亚洲国产小说| 国产日韩欧美亚洲二区| 亚洲欧美成人综合另类久久久| 日韩中文字幕欧美一区二区 | 国产欧美日韩一区二区三区在线| 69精品国产乱码久久久| 欧美日韩亚洲高清精品| 婷婷色综合大香蕉| 国产成人欧美| 99精品久久久久人妻精品| 在线观看www视频免费| 久久精品成人免费网站| 亚洲精品成人av观看孕妇| 人成视频在线观看免费观看| 亚洲一区中文字幕在线| 国产福利在线免费观看视频| 男人爽女人下面视频在线观看| 中文字幕另类日韩欧美亚洲嫩草| 99国产精品99久久久久| 久久女婷五月综合色啪小说| 中文字幕高清在线视频| 色94色欧美一区二区| 国产99久久九九免费精品| 91麻豆精品激情在线观看国产 | 亚洲五月色婷婷综合| 亚洲av欧美aⅴ国产| 老司机亚洲免费影院| 美女脱内裤让男人舔精品视频| 精品高清国产在线一区| 免费高清在线观看日韩| 一级毛片我不卡| 国产精品一区二区在线观看99| 啦啦啦视频在线资源免费观看| 精品少妇黑人巨大在线播放| 人人澡人人妻人| 热99久久久久精品小说推荐| 丰满迷人的少妇在线观看| 国产午夜精品一二区理论片| 国产高清videossex| 成人午夜精彩视频在线观看| 久久ye,这里只有精品| 一区福利在线观看| 精品一区在线观看国产| 亚洲国产精品999| 青春草亚洲视频在线观看| 国产不卡av网站在线观看| 欧美中文综合在线视频| 国产又色又爽无遮挡免| 欧美大码av| 18禁国产床啪视频网站| 91老司机精品| 黄色一级大片看看| 亚洲av片天天在线观看| 99国产综合亚洲精品| 亚洲欧美一区二区三区久久| 免费女性裸体啪啪无遮挡网站| 最近手机中文字幕大全| 国产福利在线免费观看视频| 亚洲午夜精品一区,二区,三区| 男女之事视频高清在线观看 | 无限看片的www在线观看| 看免费成人av毛片| 丝袜美足系列| 一级毛片黄色毛片免费观看视频| 老司机亚洲免费影院| 亚洲国产日韩一区二区| 日本一区二区免费在线视频| 欧美 亚洲 国产 日韩一| 免费在线观看完整版高清| 国产成人免费观看mmmm| 丁香六月天网| 久久久久国产一级毛片高清牌| 天天躁狠狠躁夜夜躁狠狠躁| 日韩av免费高清视频| 久久精品熟女亚洲av麻豆精品| 国产男女内射视频| 国产一卡二卡三卡精品| 精品少妇久久久久久888优播| 男女床上黄色一级片免费看| 久久 成人 亚洲| 亚洲中文av在线| 亚洲成人手机| 黄频高清免费视频| 在线 av 中文字幕| 天天躁夜夜躁狠狠久久av| 一级a爱视频在线免费观看| 电影成人av| 亚洲欧美一区二区三区国产| 久久性视频一级片| 狠狠精品人妻久久久久久综合| 亚洲欧洲国产日韩| tube8黄色片| 成人三级做爰电影| 热99久久久久精品小说推荐| 日本av手机在线免费观看| 19禁男女啪啪无遮挡网站| 久久国产亚洲av麻豆专区| 久久女婷五月综合色啪小说| 欧美 亚洲 国产 日韩一| 国产女主播在线喷水免费视频网站| 老司机在亚洲福利影院| 国产精品成人在线| 伊人久久大香线蕉亚洲五| 日本午夜av视频| 在线亚洲精品国产二区图片欧美| 99热网站在线观看| 久久国产精品男人的天堂亚洲| 免费久久久久久久精品成人欧美视频| 精品国产一区二区三区四区第35| 日韩中文字幕视频在线看片| 赤兔流量卡办理| 国产97色在线日韩免费| 欧美在线黄色| 中国国产av一级| 亚洲,欧美,日韩| 脱女人内裤的视频| 精品久久久久久久毛片微露脸 | 手机成人av网站| 1024视频免费在线观看| 亚洲精品中文字幕在线视频| 国产成人一区二区三区免费视频网站 | 亚洲人成77777在线视频| 国产在视频线精品| 美女大奶头黄色视频| 国产精品国产三级国产专区5o| 国产精品成人在线| 黑人巨大精品欧美一区二区蜜桃| 91麻豆av在线| 久久毛片免费看一区二区三区| 黑人欧美特级aaaaaa片| 亚洲精品久久久久久婷婷小说| 狂野欧美激情性bbbbbb| 91国产中文字幕| 日韩中文字幕欧美一区二区 | 国产xxxxx性猛交| 亚洲国产中文字幕在线视频| 久久av网站| 一级毛片女人18水好多 | 国产精品一区二区精品视频观看| 亚洲人成电影观看| 成年av动漫网址| 99热网站在线观看| 日韩欧美一区视频在线观看| 午夜免费鲁丝| 欧美日韩亚洲综合一区二区三区_| www日本在线高清视频| 大香蕉久久网| 免费日韩欧美在线观看| 亚洲人成电影观看| 91字幕亚洲| 国产97色在线日韩免费| 赤兔流量卡办理| 亚洲精品久久午夜乱码| 香蕉丝袜av| 亚洲欧美精品综合一区二区三区| 日本午夜av视频| 亚洲少妇的诱惑av| 欧美另类一区| 亚洲精品美女久久av网站| 91九色精品人成在线观看| 日本a在线网址| 久久国产精品影院| 18禁黄网站禁片午夜丰满| 午夜免费成人在线视频| 欧美中文综合在线视频| 久久鲁丝午夜福利片| 一本综合久久免费| 久久精品成人免费网站| 成人国产一区最新在线观看 | 国产伦理片在线播放av一区| 色播在线永久视频| 电影成人av| 黄色 视频免费看| 亚洲免费av在线视频| 考比视频在线观看| 国产免费视频播放在线视频| 亚洲七黄色美女视频| 亚洲五月色婷婷综合| 国产欧美日韩综合在线一区二区| 亚洲第一av免费看| 91老司机精品| 精品国产乱码久久久久久男人| 97精品久久久久久久久久精品| 别揉我奶头~嗯~啊~动态视频 | 最近最新中文字幕大全免费视频 | 操美女的视频在线观看| 久久毛片免费看一区二区三区| 国精品久久久久久国模美| 男女之事视频高清在线观看 | 99国产精品免费福利视频| 国产97色在线日韩免费| 色综合欧美亚洲国产小说| 亚洲伊人色综图| 精品熟女少妇八av免费久了| 亚洲精品在线美女| 免费看十八禁软件| 久久久久国产精品人妻一区二区| 久久99一区二区三区| 亚洲精品日本国产第一区| 成年美女黄网站色视频大全免费| 国产1区2区3区精品| 国产精品二区激情视频| 久久久久久久久免费视频了| 久久精品aⅴ一区二区三区四区| 国产精品人妻久久久影院| 国产成人系列免费观看| 成年女人毛片免费观看观看9 | 晚上一个人看的免费电影| 亚洲一卡2卡3卡4卡5卡精品中文| 每晚都被弄得嗷嗷叫到高潮| 69精品国产乱码久久久| 亚洲国产成人一精品久久久| 国产极品粉嫩免费观看在线| 好男人电影高清在线观看| 精品国产乱码久久久久久小说| 18禁观看日本| 国产麻豆69| 国产日韩欧美亚洲二区| 久久久久久亚洲精品国产蜜桃av| 无遮挡黄片免费观看| xxx大片免费视频| 巨乳人妻的诱惑在线观看| 一边亲一边摸免费视频| 国产主播在线观看一区二区 | 国产亚洲精品久久久久5区| 建设人人有责人人尽责人人享有的| av片东京热男人的天堂| 黄片小视频在线播放| av电影中文网址| 久久精品亚洲av国产电影网| 天天躁狠狠躁夜夜躁狠狠躁| 高潮久久久久久久久久久不卡| 久久人妻福利社区极品人妻图片 | av福利片在线| 丝袜喷水一区| 久久久久久久精品精品| 亚洲欧美精品自产自拍| 欧美成人精品欧美一级黄| 精品欧美一区二区三区在线| 在线天堂中文资源库| 成年人午夜在线观看视频| 最黄视频免费看| 男人添女人高潮全过程视频| 免费一级毛片在线播放高清视频 | 亚洲av日韩精品久久久久久密 | 视频区欧美日本亚洲| 欧美日韩国产mv在线观看视频| 1024视频免费在线观看| 新久久久久国产一级毛片| 亚洲第一青青草原| 欧美乱码精品一区二区三区| 夫妻性生交免费视频一级片| 欧美 亚洲 国产 日韩一| 久久久久久久久久久久大奶| 午夜日韩欧美国产| 一级a爱视频在线免费观看| 母亲3免费完整高清在线观看| 女性被躁到高潮视频| av网站免费在线观看视频| 9热在线视频观看99| 中国美女看黄片| 精品国产超薄肉色丝袜足j| 婷婷色综合大香蕉| 亚洲av成人不卡在线观看播放网 | 大香蕉久久网| 咕卡用的链子| 国产女主播在线喷水免费视频网站| 侵犯人妻中文字幕一二三四区| 成人手机av| 韩国精品一区二区三区| 可以免费在线观看a视频的电影网站| 日韩精品免费视频一区二区三区| 久久午夜综合久久蜜桃| 国产一区二区激情短视频 | 2021少妇久久久久久久久久久| 国产精品 国内视频| 性色av一级| 亚洲欧美成人综合另类久久久| 精品亚洲乱码少妇综合久久| 日韩中文字幕视频在线看片| 欧美黄色片欧美黄色片| 2021少妇久久久久久久久久久| 日韩伦理黄色片| 考比视频在线观看| 亚洲欧美清纯卡通| 欧美日韩一级在线毛片| 午夜福利一区二区在线看| av电影中文网址| 别揉我奶头~嗯~啊~动态视频 | 嫁个100分男人电影在线观看 | 久久久久久久精品精品| 欧美精品人与动牲交sv欧美| 新久久久久国产一级毛片| 日本av手机在线免费观看| 电影成人av| 日本91视频免费播放| 国精品久久久久久国模美| 亚洲av国产av综合av卡| 在线观看一区二区三区激情| 亚洲精品av麻豆狂野| 色精品久久人妻99蜜桃| 少妇精品久久久久久久| 黄色毛片三级朝国网站| 欧美日韩成人在线一区二区| 精品一区二区三卡| av国产久精品久网站免费入址| 后天国语完整版免费观看| 午夜福利一区二区在线看| 老司机深夜福利视频在线观看 | 国产免费一区二区三区四区乱码| 欧美成狂野欧美在线观看| 久久久精品免费免费高清| 国产精品久久久久成人av|