• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    部門(mén)期刊列表評(píng)價(jià)結(jié)果的認(rèn)可度與公平性研究

    2020-03-24 11:29:10盧小莉宋鴻芳吳登生
    科學(xué)與社會(huì) 2020年1期
    關(guān)鍵詞:公平性管理學(xué)列表

    盧小莉 李 晶 宋鴻芳 吳登生

    (1 中國(guó)科學(xué)院科技戰(zhàn)略咨詢(xún)研究院; 2 中國(guó)科學(xué)院大學(xué); 3 中國(guó)地質(zhì)圖書(shū)館;4 中山大學(xué)資訊管理學(xué)院; 5 河北經(jīng)貿(mào)大學(xué)管理科學(xué)與工程學(xué)院)

    對(duì)期刊的學(xué)術(shù)影響力進(jìn)行評(píng)價(jià),提供公正、科學(xué)的評(píng)價(jià)結(jié)果,有助于科研人員、科研機(jī)構(gòu)客觀(guān)地了解期刊學(xué)術(shù)影響力情況,在論文投稿、學(xué)術(shù)評(píng)價(jià)過(guò)程中做出合理的決策,是科技評(píng)價(jià)中的一項(xiàng)重要內(nèi)容[1]。現(xiàn)有的期刊學(xué)術(shù)影響力的評(píng)價(jià)方法主要包括定性評(píng)價(jià)與定量評(píng)價(jià)。定性評(píng)價(jià)方法主要是依據(jù)領(lǐng)域?qū)<业囊庖?jiàn)進(jìn)行評(píng)判,但會(huì)出現(xiàn)專(zhuān)家意見(jiàn)不統(tǒng)一、評(píng)價(jià)過(guò)程費(fèi)時(shí)費(fèi)力等問(wèn)題[2]。定量評(píng)價(jià)方法主要依據(jù)期刊發(fā)表論文的被引用情況來(lái)進(jìn)行評(píng)估,因其具有客觀(guān)、高效等特點(diǎn),在科技評(píng)價(jià)實(shí)踐中經(jīng)常被使用,但也存在評(píng)價(jià)維度單一、特征把握不準(zhǔn)的問(wèn)題[3][4]。

    對(duì)于科研機(jī)構(gòu)來(lái)說(shuō),人員招聘和崗位晉升都會(huì)參考相應(yīng)的期刊評(píng)價(jià)結(jié)果。通常,一個(gè)科研機(jī)構(gòu)參考的期刊評(píng)價(jià)結(jié)果主要來(lái)源于三個(gè)部分:一是參考主要學(xué)術(shù)期刊數(shù)據(jù)出版商提供的期刊評(píng)價(jià)結(jié)果,如科睿唯安公司基于論文影響因子等量化指標(biāo)得到的期刊分區(qū)結(jié)果[5]、愛(ài)思唯爾公司在期刊引用分(CiteScore)基礎(chǔ)上給出的評(píng)價(jià)結(jié)果[6];二是參考行業(yè)學(xué)會(huì)發(fā)布的期刊評(píng)價(jià)列表,如管理學(xué)領(lǐng)域常用的ABS期刊列表[7][8]、ABDC期刊列表[9]給出的期刊等級(jí);三是科研機(jī)構(gòu)自身在專(zhuān)家判斷和定量分析基礎(chǔ)上,自行研制的部門(mén)期刊列表(Departmental Journal Lists)[10]。

    現(xiàn)有的期刊評(píng)價(jià)體系中,學(xué)者和政策制定者一直在批評(píng)我國(guó)期刊評(píng)價(jià)實(shí)踐過(guò)于依賴(lài)影響因子等國(guó)外引文指標(biāo),缺少具有中國(guó)特色的期刊評(píng)價(jià)指標(biāo)[11]。對(duì)于國(guó)際行業(yè)學(xué)會(huì)發(fā)布的期刊評(píng)價(jià)列表,雖然具有較好的代表性,但也存在沒(méi)有收錄中文期刊和高估部分本國(guó)期刊質(zhì)量等問(wèn)題。而科研機(jī)構(gòu)自身設(shè)置的部門(mén)期刊列表評(píng)價(jià)方式,因?yàn)槟芫C合考慮外部定量定性評(píng)價(jià)結(jié)果,又能根據(jù)科研機(jī)構(gòu)學(xué)科范疇、發(fā)展定位以及其學(xué)術(shù)水平進(jìn)行調(diào)整,近年來(lái)在科研機(jī)構(gòu)學(xué)術(shù)評(píng)價(jià)中的使用越來(lái)越廣泛[12][13][14][15]。

    由于期刊評(píng)價(jià)結(jié)果對(duì)于科研機(jī)構(gòu)學(xué)術(shù)評(píng)價(jià)有著很強(qiáng)的導(dǎo)向作用,采用部門(mén)期刊列表可能會(huì)面臨評(píng)價(jià)結(jié)果認(rèn)可度不高和學(xué)科公平性問(wèn)題。通常來(lái)說(shuō),部門(mén)期刊列表是科研機(jī)構(gòu)依據(jù)自身學(xué)科發(fā)展特色,結(jié)合外部定量定性評(píng)價(jià)結(jié)果進(jìn)行設(shè)置的,列表中會(huì)出現(xiàn)一些非本學(xué)科領(lǐng)域的期刊,如經(jīng)濟(jì)管理學(xué)院制定的部門(mén)期刊列表會(huì)有環(huán)境科學(xué)或數(shù)學(xué)領(lǐng)域的期刊。這種非本學(xué)科領(lǐng)域期刊范疇選擇和等級(jí)設(shè)置問(wèn)題如果不能適當(dāng)處理,會(huì)使得部門(mén)期刊列表認(rèn)可度不高。此外,部門(mén)期刊列表通常會(huì)涉及多個(gè)子學(xué)科,不同子學(xué)科的期刊權(quán)衡是個(gè)難點(diǎn),可能會(huì)帶來(lái)學(xué)科偏差,涉及部門(mén)期刊列表的學(xué)科公平性問(wèn)題。如制定部門(mén)期刊列表的決策人員來(lái)自于本機(jī)構(gòu)強(qiáng)勢(shì)學(xué)科,使得期刊列表的評(píng)價(jià)結(jié)果偏向于強(qiáng)勢(shì)學(xué)科。本文以部門(mén)期刊列表評(píng)價(jià)結(jié)果的認(rèn)可度及公平性問(wèn)題為研究對(duì)象,研究不同科研機(jī)構(gòu)制定的部門(mén)期刊列表的認(rèn)可度,即單個(gè)部門(mén)期刊列表的評(píng)價(jià)結(jié)果和真實(shí)期刊評(píng)價(jià)結(jié)果之間有多大差異。分析不同學(xué)科偏向的科研機(jī)構(gòu)在制定本機(jī)構(gòu)部門(mén)期刊列表時(shí)是否產(chǎn)生相應(yīng)的學(xué)科偏差,即研究部門(mén)期刊列表的公平性問(wèn)題。

    一、基于WAP方法的部門(mén)期刊列表結(jié)果綜合集成

    本文研究的第一個(gè)問(wèn)題是部門(mén)期刊列表評(píng)價(jià)結(jié)果的認(rèn)可度如何,即單個(gè)部門(mén)期刊列表的評(píng)價(jià)結(jié)果和真實(shí)期刊評(píng)價(jià)結(jié)果之間的一致性關(guān)系。由于真實(shí)期刊評(píng)價(jià)結(jié)果很難確定,不管是定量指標(biāo)得到的結(jié)果,還是專(zhuān)家判斷得到的結(jié)果,很難將其界定為真實(shí)期刊評(píng)價(jià)結(jié)果??紤]到部門(mén)期刊列表制定過(guò)程中,已經(jīng)綜合考慮了定量指標(biāo)和定性專(zhuān)家意見(jiàn),所以本文將多個(gè)代表性科研機(jī)構(gòu)的部門(mén)期刊列表綜合集成結(jié)果定義為真實(shí)期刊評(píng)價(jià)結(jié)果[16]。一方面是當(dāng)收集的科研機(jī)構(gòu)具有一定數(shù)量且具有代表性后,其部門(mén)期刊評(píng)價(jià)結(jié)果的集成基本上已經(jīng)反映了領(lǐng)域內(nèi)主要科研人員對(duì)期刊評(píng)價(jià)結(jié)果的共識(shí);另一方面是假設(shè)單個(gè)科研機(jī)構(gòu)在評(píng)價(jià)期刊時(shí)候賦予的偏差,在綜合集成過(guò)程中相互抵消,進(jìn)而不會(huì)影響最終的集成評(píng)價(jià)結(jié)果。

    通常來(lái)說(shuō),單個(gè)科研機(jī)構(gòu)在制定部門(mén)期刊列表時(shí),是將期刊賦予不同的等級(jí)進(jìn)而對(duì)期刊進(jìn)行評(píng)價(jià)的,最為常見(jiàn)的是將期刊分成一等、二等、三等或者A、B、C等若干等級(jí),每個(gè)等級(jí)中包含一定數(shù)量的期刊。不同于期刊影響因子等量化指標(biāo),不同科研機(jī)構(gòu)制定的期刊等級(jí)之間難以橫向比較,更不能進(jìn)行運(yùn)算,這種按等級(jí)劃分的期刊評(píng)價(jià)模式給期刊列表的綜合集成帶來(lái)了困難。針對(duì)該問(wèn)題,Templeton Gary F.和Lewis Bruce R.發(fā)表在MIS Quarterly上的論文,提出了一種加權(quán)平均百分比(Weighted Average Percentile,簡(jiǎn)稱(chēng)WAP)的方法,來(lái)集成這種不同等級(jí)劃分的期刊評(píng)價(jià)結(jié)果[12]。

    WAP方法的基本思路是將部門(mén)期刊列表中的不同期刊等級(jí),轉(zhuǎn)化為相對(duì)應(yīng)的占位百分比,這種反映期刊相對(duì)評(píng)價(jià)結(jié)果的占位百分比就可以進(jìn)行綜合集成[17]。單個(gè)部門(mén)期刊列表中的某一個(gè)期刊的占位百分比通過(guò)公式1計(jì)算得到。

    式1中 PercentileScoreij表示在第i 個(gè)部門(mén)期刊列表中第j個(gè)期刊的占位百分比,Tierj%表示期刊j所在等級(jí)包含的期刊數(shù)量占該部門(mén)期刊列表中期刊總數(shù)的百分比,Belowj%表示比期刊j等級(jí)低的所有期刊數(shù)量占該部門(mén)期刊列表中期刊總數(shù)的百分比。不同于Templeton等人提出的原始WAP方法,本文將單個(gè)期刊在不同部門(mén)期刊列表中的占位百分比進(jìn)行加權(quán)平均,作為期刊評(píng)價(jià)的最終結(jié)果,具體如公式2所示。

    WAPj為期刊j的加權(quán)占位百分比值,n為部門(mén)期刊列表中有該期刊的機(jī)構(gòu)數(shù)。如果一個(gè)機(jī)構(gòu)的部門(mén)期刊列表中沒(méi)有涵蓋該期刊,則不將其納入計(jì)算范疇。由于每個(gè)機(jī)構(gòu)在制定部門(mén)期刊列表時(shí),難以將整個(gè)領(lǐng)域所有重要期刊都涵蓋進(jìn)來(lái),如果將沒(méi)有涵蓋的部門(mén)期刊列表也統(tǒng)計(jì)為樣本n,會(huì)降低重要期刊的加權(quán)平均百分比值。這種處理方式會(huì)帶來(lái)另外一個(gè)問(wèn)題,部分非本學(xué)科領(lǐng)域期刊只出現(xiàn)在某個(gè)機(jī)構(gòu)的高等級(jí)列表中,會(huì)有較高的加權(quán)平均百分比值。為了避免這個(gè)問(wèn)題,可以在匯聚部門(mén)期刊列表的基礎(chǔ)上,選擇一定閾值以上機(jī)構(gòu)的部門(mén)期刊列表同時(shí)涵蓋的期刊作為最終統(tǒng)計(jì)的樣本。

    二、基于經(jīng)濟(jì)管理領(lǐng)域的實(shí)證分析

    本文選擇國(guó)內(nèi)經(jīng)濟(jì)學(xué)與管理學(xué)兩個(gè)學(xué)科進(jìn)行實(shí)證分析,一方面是因?yàn)閲?guó)內(nèi)的學(xué)科設(shè)置關(guān)系,有較多高校將這兩個(gè)學(xué)科設(shè)置在同一個(gè)學(xué)院中,如經(jīng)濟(jì)管理學(xué)院或者商學(xué)院[18][19]。學(xué)院在制定部門(mén)期刊列表時(shí)需要協(xié)調(diào)和統(tǒng)籌兩個(gè)學(xué)科,有助于分析部門(mén)期刊列表中兩個(gè)學(xué)科的學(xué)科偏好問(wèn)題。另一方面是因?yàn)檫@兩個(gè)學(xué)科在國(guó)內(nèi)高校中體量較大,設(shè)置的高校多,具有一定的代表性。

    選擇全國(guó)第四輪學(xué)科評(píng)估結(jié)果中,經(jīng)濟(jì)學(xué)和管理學(xué)下屬的8個(gè)一級(jí)學(xué)科(理論經(jīng)濟(jì)學(xué)、應(yīng)用經(jīng)濟(jì)學(xué)、管理科學(xué)與工程、工商管理、農(nóng)林經(jīng)濟(jì)管理、公共管理、圖書(shū)情報(bào)檔案)中,任一學(xué)科評(píng)估結(jié)果達(dá)到B+ 以上(排序?yàn)榍?0%)的高校,共計(jì)72所。進(jìn)一步調(diào)查這些樣本高校,選擇經(jīng)濟(jì)學(xué)和管理學(xué)為同一個(gè)學(xué)院的高校(一般為經(jīng)濟(jì)管理學(xué)院或者商學(xué)院)共計(jì)35所。通過(guò)網(wǎng)絡(luò)搜索和問(wèn)卷調(diào)研,共收集到其中31所學(xué)院的中文部門(mén)期刊列表。收集的部門(mén)期刊樣本中,數(shù)量最多的有102種,最少的11種。列表期刊數(shù)量在20-40種,共有10所院校,占樣本總數(shù)的32.26%;其次是在40-60種,共有8所院校,占樣本總數(shù)的25.81%。

    1.經(jīng)濟(jì)管理領(lǐng)域部門(mén)期刊列表的認(rèn)可度分析

    部門(mén)期刊列表在制定過(guò)程中,因?yàn)榭紤]到本機(jī)構(gòu)的學(xué)科特色等內(nèi)部特征,列表的適用性和認(rèn)可度需要進(jìn)行分析。本文主要從期刊范圍認(rèn)可度和期刊等級(jí)一致性?xún)蓚€(gè)維度來(lái)進(jìn)行研究。將31所院校的部門(mén)期刊列表中期刊匯聚,得出經(jīng)濟(jì)管理學(xué)領(lǐng)域重要中文期刊的范疇,共有期刊219種。通過(guò)統(tǒng)計(jì)219種期刊在部門(mén)期刊列表中出現(xiàn)的次數(shù),可以得到樣本機(jī)構(gòu)對(duì)經(jīng)濟(jì)管理類(lèi)期刊范疇的認(rèn)識(shí),如圖1所示。

    圖1顯示,大部分期刊只是在部門(mén)期刊列表中出現(xiàn)1-2次,反映樣本機(jī)構(gòu)中對(duì)經(jīng)濟(jì)管理類(lèi)中文期刊范疇的認(rèn)識(shí)有較大的差異。從具體數(shù)據(jù)看,只在樣本部門(mén)期刊列表中出現(xiàn)1次的期刊共有91種,占到期刊總數(shù)的41.55%;按照出現(xiàn)次數(shù)20%的閾值,在31個(gè)樣本機(jī)構(gòu)部門(mén)期刊列表中出現(xiàn)次數(shù)超過(guò)6次的期刊共有60種,只占到期刊總數(shù)的27.40%。該數(shù)據(jù)反映,目前樣本機(jī)構(gòu)制定的中文經(jīng)濟(jì)管理類(lèi)重要期刊列表的期刊范疇認(rèn)可度不高。

    圖1 樣本期刊在部門(mén)期刊列表中出現(xiàn)次數(shù)分布情況

    期刊學(xué)術(shù)影響力涉及到期刊刊登論文數(shù)量、創(chuàng)新性等多個(gè)要素,雖然很難用一個(gè)指標(biāo)將其刻畫(huà)出來(lái),但是可以認(rèn)為期刊學(xué)術(shù)影響力是一個(gè)客觀(guān)的存在。將期刊按照一定原則和方法進(jìn)行等級(jí)劃分,是對(duì)期刊學(xué)術(shù)影響力評(píng)價(jià)的一個(gè)重要方式。機(jī)構(gòu)在制定部門(mén)期刊列表時(shí),都會(huì)設(shè)置相應(yīng)的期刊等級(jí),如果不同機(jī)構(gòu)的部門(mén)期刊列表中對(duì)于同一個(gè)期刊的等級(jí)劃分趨于一致的話(huà),說(shuō)明對(duì)該期刊學(xué)術(shù)影響力的評(píng)價(jià)一致性較高[20]。本文通過(guò)分析不同期刊在31家機(jī)構(gòu)的部門(mén)期刊列表中的等級(jí)差異,來(lái)反映期刊列表的等級(jí)認(rèn)可度情況。

    由于需要體現(xiàn)出期刊在不同部門(mén)期刊列表中等級(jí)的差異,出現(xiàn)頻次較少的期刊難以進(jìn)行橫向比較,在219種期刊中,我們選擇出現(xiàn)頻率不少于6次的期刊(共計(jì)60種)作為進(jìn)一步分析的樣本。首先計(jì)算出每一種期刊在相應(yīng)部門(mén)期刊列表中的占位百分比值( P ercentileScoreij),然后運(yùn)用箱形圖來(lái)直觀(guān)反映每一個(gè)期刊的占位百分比值波動(dòng)情況,最后計(jì)算期刊占位百分比值的方差,量化給出期刊等級(jí)的一致性結(jié)果。圖2給出了前60種期刊占位百分比值的箱形圖情況。圖2中已經(jīng)按照WAP值對(duì)期刊進(jìn)行了排序,序號(hào)1的期刊等級(jí)最高。

    圖2中的箱形圖中給出了每一種期刊占位百分比值的上邊緣、上四分位數(shù)、中位數(shù)、下四分位數(shù)、下邊緣和異常值共6個(gè)指標(biāo),并將其中的上四分位數(shù)和下四分位數(shù)連接為矩形盒。如果不同機(jī)構(gòu)的部門(mén)期刊列表對(duì)某一個(gè)期刊賦予的等級(jí)較為一致的話(huà),反映在其占位百分比分值較為接近,在箱型圖上表現(xiàn)為矩形盒較短。從圖2中可以看出,前60種期刊中大部分期刊的等級(jí)評(píng)價(jià)結(jié)果一致性較差。進(jìn)一步計(jì)算每一種期刊占位百分比值的方差,如表1所示。

    60種期刊中,占位百分比值方差最大值為0.29,最小值為0.06,其中大部分期刊占位百分比值方差是在(0.15,0.20] 這個(gè)區(qū)間。從中可以產(chǎn)出,在樣本部門(mén)期刊列表中,期刊的占位百分比值波動(dòng)較大,反映出樣本機(jī)構(gòu)對(duì)期刊質(zhì)量的認(rèn)識(shí)并不一致。

    圖2 出現(xiàn)頻率前 60 種期刊占位百分比值的箱形圖

    表1 前 60 種期刊占位百分比值方差區(qū)間分布

    2.經(jīng)濟(jì)管理領(lǐng)域部門(mén)期刊列表的公平性分析

    列表的公平性是部門(mén)期刊列表需要引起關(guān)注的另一個(gè)重要話(huà)題。因?yàn)闄C(jī)構(gòu)在制定本部門(mén)期刊列表時(shí),會(huì)根據(jù)部門(mén)學(xué)科特色、發(fā)展水平以及決策者偏好對(duì)相應(yīng)期刊等級(jí)做出調(diào)整,所以期刊列表的公平性一直受到關(guān)注。本文選取31家經(jīng)濟(jì)與管理學(xué)院作為研究樣本,學(xué)科范疇主要涵蓋經(jīng)濟(jì)學(xué)和管理學(xué)兩個(gè)大類(lèi),依據(jù)全國(guó)第四輪學(xué)科評(píng)估結(jié)果,將一級(jí)學(xué)科評(píng)估結(jié)果值按照WAP思想轉(zhuǎn)化成分位值,然后加權(quán)匯總得到經(jīng)濟(jì)學(xué)和管理學(xué)兩個(gè)大類(lèi)學(xué)科的評(píng)價(jià)結(jié)果值,通過(guò)對(duì)比將31家經(jīng)濟(jì)與管理學(xué)院劃分為側(cè)重管理學(xué)、側(cè)重經(jīng)濟(jì)學(xué)和學(xué)科均衡三大類(lèi)??紤]到國(guó)內(nèi)學(xué)科研究的特色,計(jì)算過(guò)程中將原本屬于管理學(xué)門(mén)類(lèi)下的農(nóng)林經(jīng)濟(jì)管理一級(jí)學(xué)科歸入到經(jīng)濟(jì)學(xué)門(mén)類(lèi)下。如果一個(gè)經(jīng)濟(jì)與管理學(xué)院,兩個(gè)學(xué)科的分位值相差在[-5, 5]之間,則認(rèn)為該學(xué)院屬于學(xué)科均衡樣本,否則將其歸入相應(yīng)的學(xué)科側(cè)重樣本。研究樣本的31家經(jīng)濟(jì)與管理學(xué)院中,側(cè)重管理學(xué)的有19家,占總樣本的61.29%;側(cè)重經(jīng)濟(jì)學(xué)的有8家,占總樣本的25.81%;學(xué)科均衡的有4家,占總樣本的12.9%。

    雖然經(jīng)濟(jì)學(xué)與管理學(xué)之間有較多的交叉和融合,但是研究范式和主要內(nèi)容還是有一定的差異,不同學(xué)科領(lǐng)域期刊的刊文風(fēng)格差異較為明顯。通過(guò)統(tǒng)計(jì)本文收集219種期刊,將其劃分為經(jīng)濟(jì)類(lèi)、管理類(lèi)和其它類(lèi)三個(gè)類(lèi)型。圖3中給出了219種期刊的學(xué)科分布情況,以及對(duì)應(yīng)的平均WAP值。

    圖3 樣本期刊的學(xué)科分布情況及其WAP值

    從圖3中可以看出,219種期刊中,歸入管理學(xué)和經(jīng)濟(jì)學(xué)的期刊分別是86種和94種,兩個(gè)學(xué)科的期刊數(shù)量相差不大。不同學(xué)科期刊的平均WAP值對(duì)比可以看出,管理類(lèi)期刊的評(píng)價(jià)值要略高于經(jīng)濟(jì)類(lèi)期刊,這可能和樣本院校的學(xué)科側(cè)重有一定關(guān)系。前文分析結(jié)果表明31家樣本中側(cè)重管理學(xué)的有19家,占總樣本的61.29%。此外,其他類(lèi)期刊的平均WAP值要高于經(jīng)濟(jì)類(lèi)和管理類(lèi)期刊,可能是因?yàn)椴糠謾C(jī)構(gòu)在依據(jù)本單位學(xué)科特色,引入了其它領(lǐng)域期刊,在引入的過(guò)程中考慮的都是其它領(lǐng)域水平較高的期刊,給予了較高的等級(jí),所以其平均WAP值較高。

    部門(mén)期刊列表中不同學(xué)科期刊數(shù)量之間如果存在較大差異,直接影響到該機(jī)構(gòu)科研人員可選擇的目標(biāo)期刊數(shù)量,帶來(lái)期刊范疇的公平性問(wèn)題。對(duì)于一個(gè)機(jī)構(gòu)來(lái)說(shuō),選擇的期刊范疇有三種可能,一是為了培育和發(fā)展弱勢(shì)學(xué)科,遴選出較多弱勢(shì)學(xué)科的期刊;二是強(qiáng)勢(shì)學(xué)科科研人員在制定部門(mén)期刊列表過(guò)程中有較多的話(huà)語(yǔ)權(quán),所以遴選出的期刊列表中強(qiáng)勢(shì)學(xué)科期刊數(shù)量較多;第三是為了平衡兩個(gè)學(xué)科,不同學(xué)科期刊數(shù)量大體相當(dāng)。

    刪除219種期刊中其它類(lèi)期刊,選擇屬于管理學(xué)和經(jīng)濟(jì)學(xué)類(lèi)的期刊180種,和31家樣本機(jī)構(gòu)的期刊列表進(jìn)行對(duì)比分析。如果一個(gè)機(jī)構(gòu)的部門(mén)期刊列表中,經(jīng)濟(jì)學(xué)類(lèi)期刊和管理學(xué)類(lèi)期刊數(shù)量相差在[-5, 5]之間,將該機(jī)構(gòu)的期刊列表定義為均衡類(lèi);如果期刊數(shù)量相差超過(guò)這個(gè)范圍,則依據(jù)期刊數(shù)量的多少將其定義為相應(yīng)的期刊范疇偏向類(lèi)。31家機(jī)構(gòu)中,期刊范圍均衡的機(jī)構(gòu)共有17家,占總樣本的54.84%;期刊范疇偏向于管理類(lèi)機(jī)構(gòu)共有9家,占總樣本的29.03%;期刊范疇偏向于經(jīng)濟(jì)類(lèi)機(jī)構(gòu)共有5家,占總樣本的16.13%。表2為不同學(xué)科側(cè)重機(jī)構(gòu)的期刊范疇偏向情況。

    表2 期刊范圍的公平性分析結(jié)果

    從表2的結(jié)果來(lái)看,樣本機(jī)構(gòu)在制定部門(mén)期刊列表時(shí),遴選出的期刊范疇總體上是考慮了管理學(xué)和經(jīng)濟(jì)學(xué)兩個(gè)學(xué)科的平衡性,并沒(méi)有產(chǎn)生嚴(yán)重的學(xué)科范疇公平性問(wèn)題。從機(jī)構(gòu)的學(xué)科側(cè)重情況來(lái)看,學(xué)科均衡的機(jī)構(gòu)只有4家,占機(jī)構(gòu)總數(shù)的12.90%;而部門(mén)期刊列表中期刊范圍均衡的機(jī)構(gòu)共有17家,占機(jī)構(gòu)總數(shù)的54.84%。而在19家側(cè)重管理學(xué)的機(jī)構(gòu)中,有三家機(jī)構(gòu)的部門(mén)期刊列表期刊范圍是偏向經(jīng)濟(jì)學(xué),反映了前文所闡述的機(jī)構(gòu)為了培育和發(fā)展期弱勢(shì)學(xué)科,遴選出較多弱勢(shì)學(xué)科的期刊。

    部門(mén)期刊列表的公平性除了遴選期刊范圍公平性之外,還有一個(gè)重要維度即期刊等級(jí)的公平性問(wèn)題。在樣本機(jī)構(gòu)中,如果一個(gè)部門(mén)期刊列表中經(jīng)濟(jì)學(xué)期刊和管理學(xué)期刊的平均WAP有較大差異,則表明該機(jī)構(gòu)的部門(mén)期刊列表中存在著期刊等級(jí)公平性問(wèn)題。具體分析期刊等級(jí)的公平性問(wèn)題的步驟如下:首先對(duì)于單個(gè)機(jī)構(gòu)的部門(mén)期刊列表,只選擇歸屬管理學(xué)和經(jīng)濟(jì)學(xué)兩個(gè)學(xué)科的期刊;然后運(yùn)用WAP方法將期刊對(duì)應(yīng)的評(píng)價(jià)等級(jí)轉(zhuǎn)換為百分位;最后利用加權(quán)集成的方法計(jì)算得到管理學(xué)和經(jīng)濟(jì)學(xué)兩個(gè)學(xué)科期刊的平均WAP。通過(guò)比較兩個(gè)學(xué)科期刊的平均WAP值來(lái)分析該機(jī)構(gòu)的部門(mén)期刊列表中是否存在期刊等級(jí)公平性問(wèn)題。

    理論上來(lái)說(shuō),如果部門(mén)期刊列表中對(duì)于經(jīng)濟(jì)學(xué)和管理學(xué)的期刊等級(jí)劃分是公平的,則該機(jī)構(gòu)部門(mén)期刊列表中兩個(gè)學(xué)科期刊的平均WAP值之間已經(jīng)沒(méi)有顯著差異。表3給出了31個(gè)樣本機(jī)構(gòu)中部門(mén)期刊列表的公平性分析結(jié)果。

    表3 期刊等級(jí)的公平性分析結(jié)果

    從表3可以看出,31個(gè)機(jī)構(gòu)的部門(mén)期刊列表中,有25家列表中將經(jīng)濟(jì)學(xué)和管理學(xué)期刊的等級(jí)是均衡處理,占到總樣本的80.65%,比期刊范疇計(jì)算結(jié)果高25個(gè)百分點(diǎn)。說(shuō)明樣本機(jī)構(gòu)在設(shè)置期刊等級(jí)時(shí),綜合考慮了管理學(xué)和經(jīng)濟(jì)學(xué)兩個(gè)學(xué)科的平衡性,期刊等級(jí)公平性得到了很好的體現(xiàn)。

    三、結(jié)論與建議

    1.結(jié) 論

    在我國(guó)現(xiàn)有的期刊評(píng)價(jià)體系中,部門(mén)期刊列表是一種非常重要的方式,一方面是量化指標(biāo)方面過(guò)于依賴(lài)以影響因子為代表的國(guó)際評(píng)價(jià)指標(biāo),另一方面是國(guó)際學(xué)術(shù)組織制定的期刊列表難以直接應(yīng)用到我國(guó)期刊評(píng)價(jià)實(shí)踐中。本文針對(duì)部門(mén)期刊列表的認(rèn)可度和公平性問(wèn)題,采用加權(quán)平均百分位(WAP)方法將不同部門(mén)期刊列表集成起來(lái),形成一個(gè)可比較的結(jié)果,分別從期刊范疇和期刊等級(jí)兩個(gè)維度分析其認(rèn)可度和公平性問(wèn)題。選取31家經(jīng)濟(jì)與管理學(xué)院的部門(mén)期刊列表作為樣本進(jìn)行實(shí)證分析,研究結(jié)果包括如下兩個(gè)方面:

    第一,樣本機(jī)構(gòu)中的中文經(jīng)濟(jì)管理類(lèi)期刊的認(rèn)可度不高,體現(xiàn)在54.34%的期刊只是在部門(mén)期刊列表中出現(xiàn)1-2次,此外樣本期刊在不同期刊列表中的等級(jí)評(píng)價(jià)結(jié)果一致性較差,反映樣本機(jī)構(gòu)對(duì)經(jīng)濟(jì)管理類(lèi)中文期刊范疇的認(rèn)識(shí)以及同一期刊等級(jí)的劃分還有較大的差異。

    第二,樣本機(jī)構(gòu)中的中文經(jīng)濟(jì)管理類(lèi)期刊的學(xué)科公平性較好,54.84%和80.65%的樣本機(jī)構(gòu)中經(jīng)濟(jì)學(xué)和管理學(xué)兩個(gè)學(xué)科的期刊范疇和期刊等級(jí)是均衡的,說(shuō)明遴選期刊的范疇和等級(jí)總體上是考慮了管理學(xué)和經(jīng)濟(jì)學(xué)兩個(gè)學(xué)科的平衡性,并沒(méi)有產(chǎn)生嚴(yán)重的學(xué)科公平性問(wèn)題。

    2.構(gòu)建我國(guó)中文期刊評(píng)價(jià)體系的建議

    分析結(jié)果對(duì)我國(guó)中文期刊評(píng)價(jià)問(wèn)題有重要啟示,也為我國(guó)中文期刊評(píng)價(jià)體系的構(gòu)建提供了相關(guān)建議,具體包括:

    第一,由獨(dú)立學(xué)術(shù)機(jī)構(gòu)(如領(lǐng)域?qū)W會(huì)或科學(xué)基金資助機(jī)構(gòu))研究制定相應(yīng)的重要期刊列表,進(jìn)一步提高領(lǐng)域期刊范疇和等級(jí)認(rèn)知的一致性。經(jīng)濟(jì)管理領(lǐng)域國(guó)際期刊評(píng)價(jià)實(shí)踐中,多個(gè)國(guó)家的學(xué)會(huì)或科學(xué)基金資助機(jī)構(gòu)研究制定了相應(yīng)的重要期刊列表,為引導(dǎo)本國(guó)經(jīng)濟(jì)管理科學(xué)研究發(fā)揮了重要作用,如英國(guó)商學(xué)院聯(lián)盟制定的高質(zhì)量學(xué)術(shù)期刊指南(ABS Academic Journal Quality Guide)、法國(guó)國(guó)家科研中心制定的經(jīng)濟(jì)管理類(lèi)期刊評(píng)價(jià)列表(CNRS Journal Ranking in Economics and Management)。此外,其它學(xué)科也有較多的重要期刊列表供學(xué)者參考,如中國(guó)計(jì)算機(jī)學(xué)會(huì)推薦的中文科技期刊目錄。

    第二,創(chuàng)新中文科技期刊評(píng)價(jià)指標(biāo)和方法,提高期刊評(píng)價(jià)結(jié)果的科學(xué)性和指導(dǎo)性?,F(xiàn)有的期刊評(píng)價(jià)方法過(guò)于側(cè)重論文引用角度,可以在此基礎(chǔ)上進(jìn)一步創(chuàng)新期刊評(píng)價(jià)方法,如可以基于科學(xué)基金申請(qǐng)過(guò)程中的代表作制度來(lái)評(píng)價(jià)學(xué)者對(duì)期刊的認(rèn)可度,定期基于領(lǐng)域活躍學(xué)者進(jìn)行問(wèn)卷調(diào)查得到評(píng)價(jià)結(jié)果,基于重要科研機(jī)構(gòu)部門(mén)期刊列表的綜合集成進(jìn)行期刊評(píng)價(jià)。

    第三,分領(lǐng)域進(jìn)行中文期刊評(píng)價(jià)。期刊評(píng)價(jià)最終是依賴(lài)于領(lǐng)域?qū)<业闹R(shí),建議依據(jù)教育部一級(jí)學(xué)科目錄體系或者科學(xué)基金的申請(qǐng)代碼體系,組織專(zhuān)家分領(lǐng)域研究制定領(lǐng)域的期刊列表??蒲袡C(jī)構(gòu)在制定自己部門(mén)期刊列表時(shí),可以將不同領(lǐng)域期刊列表進(jìn)行綜合集成,依據(jù)本機(jī)構(gòu)特色進(jìn)行適當(dāng)調(diào)整。

    猜你喜歡
    公平性管理學(xué)列表
    巧用列表來(lái)推理
    “天人合一”的管理學(xué)啟示
    學(xué)習(xí)運(yùn)用列表法
    擴(kuò)列吧
    張瑞敏金句背后的管理學(xué)知識(shí)
    金橋(2020年8期)2020-05-22 06:22:42
    一種提高TCP與UDP數(shù)據(jù)流公平性的擁塞控制機(jī)制
    淺談管理學(xué)
    公平性問(wèn)題例談
    關(guān)于公平性的思考
    聯(lián)邦快遞的管理學(xué)
    中文字幕免费在线视频6| 亚洲精品久久午夜乱码| 亚洲精品色激情综合| 亚洲av成人精品一二三区| 国内揄拍国产精品人妻在线| 久久毛片免费看一区二区三区| av线在线观看网站| 啦啦啦啦在线视频资源| 亚洲精品成人av观看孕妇| 国产老妇伦熟女老妇高清| 人妻一区二区av| 亚洲成人一二三区av| 一区二区三区乱码不卡18| 少妇猛男粗大的猛烈进出视频| 丰满迷人的少妇在线观看| 大码成人一级视频| 男女下面进入的视频免费午夜| 久久久午夜欧美精品| 久久99蜜桃精品久久| 黄片无遮挡物在线观看| 国产极品天堂在线| 亚洲精品,欧美精品| 深夜a级毛片| 欧美亚洲 丝袜 人妻 在线| 久久久久久九九精品二区国产| 制服丝袜香蕉在线| 天堂中文最新版在线下载| 亚洲av日韩在线播放| 交换朋友夫妻互换小说| 免费观看av网站的网址| 人体艺术视频欧美日本| 国产黄片美女视频| 精品酒店卫生间| 欧美最新免费一区二区三区| 大陆偷拍与自拍| 成人亚洲欧美一区二区av| 美女脱内裤让男人舔精品视频| 国产男女超爽视频在线观看| 免费av不卡在线播放| 在线精品无人区一区二区三 | av在线蜜桃| 亚洲精品aⅴ在线观看| 永久免费av网站大全| 边亲边吃奶的免费视频| 日本免费在线观看一区| 人人妻人人澡人人爽人人夜夜| 免费大片黄手机在线观看| 岛国毛片在线播放| 久久鲁丝午夜福利片| 91精品一卡2卡3卡4卡| kizo精华| 免费看不卡的av| 欧美变态另类bdsm刘玥| 亚洲人成网站高清观看| 国产 一区 欧美 日韩| 日韩电影二区| 国产成人a区在线观看| 尤物成人国产欧美一区二区三区| 尤物成人国产欧美一区二区三区| 国产高清三级在线| 成人午夜精彩视频在线观看| 18禁动态无遮挡网站| 99热这里只有精品一区| 老熟女久久久| 九九爱精品视频在线观看| 久久精品国产亚洲av天美| 日日啪夜夜爽| videos熟女内射| 国产日韩欧美在线精品| 秋霞伦理黄片| 日韩欧美一区视频在线观看 | 日韩一区二区三区影片| 韩国高清视频一区二区三区| 一级av片app| 国产乱来视频区| 国产一级毛片在线| 午夜精品国产一区二区电影| 免费黄网站久久成人精品| 国产深夜福利视频在线观看| 极品少妇高潮喷水抽搐| 国产成人a区在线观看| 日韩欧美一区视频在线观看 | 在现免费观看毛片| 好男人视频免费观看在线| 欧美成人a在线观看| 婷婷色综合www| 王馨瑶露胸无遮挡在线观看| 嫩草影院新地址| 嫩草影院新地址| 免费观看无遮挡的男女| 亚洲精品久久午夜乱码| 不卡视频在线观看欧美| 人妻系列 视频| 国产在线一区二区三区精| 午夜激情久久久久久久| 在线天堂最新版资源| 丝袜喷水一区| 老司机影院成人| 欧美少妇被猛烈插入视频| 亚洲av中文av极速乱| 亚洲最大成人中文| 女的被弄到高潮叫床怎么办| 国产在视频线精品| 免费不卡的大黄色大毛片视频在线观看| 自拍欧美九色日韩亚洲蝌蚪91 | 欧美日韩在线观看h| 最新中文字幕久久久久| 免费不卡的大黄色大毛片视频在线观看| 激情五月婷婷亚洲| 久久99热这里只频精品6学生| 天天躁日日操中文字幕| 丝袜脚勾引网站| 欧美极品一区二区三区四区| 亚洲三级黄色毛片| 国产毛片在线视频| h日本视频在线播放| 欧美日韩一区二区视频在线观看视频在线| 美女脱内裤让男人舔精品视频| 男女边摸边吃奶| 最新中文字幕久久久久| 在线观看三级黄色| 久久影院123| 我要看黄色一级片免费的| 99久国产av精品国产电影| 人妻少妇偷人精品九色| 国产精品国产三级国产专区5o| 国产v大片淫在线免费观看| 久久精品国产亚洲av天美| 在线观看免费视频网站a站| 国产伦在线观看视频一区| 人人妻人人澡人人爽人人夜夜| 日本-黄色视频高清免费观看| 免费高清在线观看视频在线观看| 久久精品国产自在天天线| 日韩中文字幕视频在线看片 | 日韩在线高清观看一区二区三区| 国产探花极品一区二区| 免费观看在线日韩| 免费人妻精品一区二区三区视频| 久久久成人免费电影| 精品久久国产蜜桃| av卡一久久| 老司机影院成人| 婷婷色av中文字幕| 国产大屁股一区二区在线视频| 亚洲三级黄色毛片| 伦精品一区二区三区| 夫妻性生交免费视频一级片| 亚洲电影在线观看av| 男女边摸边吃奶| 精品国产三级普通话版| 国产亚洲欧美精品永久| av国产精品久久久久影院| 夜夜骑夜夜射夜夜干| 最近2019中文字幕mv第一页| 中文字幕亚洲精品专区| 亚洲av成人精品一区久久| 久久国产精品男人的天堂亚洲 | 亚洲精品久久久久久婷婷小说| 亚洲真实伦在线观看| xxx大片免费视频| 亚洲久久久国产精品| 男女边吃奶边做爰视频| 最近中文字幕2019免费版| 建设人人有责人人尽责人人享有的 | 国产免费福利视频在线观看| 日韩,欧美,国产一区二区三区| 精品国产一区二区三区久久久樱花 | 亚洲欧美成人精品一区二区| 国产熟女欧美一区二区| 久久精品人妻少妇| 男女下面进入的视频免费午夜| 多毛熟女@视频| 卡戴珊不雅视频在线播放| 熟女人妻精品中文字幕| 亚洲精品乱码久久久v下载方式| 中文字幕久久专区| 国产成人freesex在线| 午夜福利视频精品| 日日摸夜夜添夜夜爱| 国产精品嫩草影院av在线观看| 99热这里只有是精品在线观看| 国产日韩欧美在线精品| 久久国产精品大桥未久av | 国产精品不卡视频一区二区| 在线看a的网站| 精品午夜福利在线看| 嫩草影院入口| a级毛色黄片| 久久久a久久爽久久v久久| av视频免费观看在线观看| 精品国产一区二区三区久久久樱花 | 久久精品人妻少妇| av免费在线看不卡| 青青草视频在线视频观看| 下体分泌物呈黄色| 国产深夜福利视频在线观看| 亚洲精品一二三| av.在线天堂| 欧美日韩精品成人综合77777| 色哟哟·www| 成人无遮挡网站| 欧美 日韩 精品 国产| 国产伦精品一区二区三区四那| 黑丝袜美女国产一区| 国产精品无大码| 亚洲内射少妇av| 午夜福利视频精品| 亚洲欧美一区二区三区国产| 99久久人妻综合| 看免费成人av毛片| freevideosex欧美| 少妇的逼好多水| 春色校园在线视频观看| 高清在线视频一区二区三区| .国产精品久久| 九九久久精品国产亚洲av麻豆| 国产精品欧美亚洲77777| 女性被躁到高潮视频| 一级毛片aaaaaa免费看小| 黄色一级大片看看| 欧美日韩在线观看h| 在线观看三级黄色| 亚洲精品国产av成人精品| 免费看日本二区| 熟女av电影| 永久免费av网站大全| 成人国产av品久久久| 亚洲精品乱码久久久久久按摩| 免费不卡的大黄色大毛片视频在线观看| 国产高清有码在线观看视频| 乱系列少妇在线播放| 老师上课跳d突然被开到最大视频| 国产成人freesex在线| 午夜福利高清视频| 18禁裸乳无遮挡动漫免费视频| 亚洲av二区三区四区| av国产久精品久网站免费入址| 婷婷色av中文字幕| 亚洲精品国产成人久久av| 一本久久精品| 日日啪夜夜爽| 黄色日韩在线| 国产一区二区在线观看日韩| 中国国产av一级| 乱系列少妇在线播放| 精品亚洲成a人片在线观看 | 日本vs欧美在线观看视频 | 久久97久久精品| 亚洲欧美日韩另类电影网站 | 你懂的网址亚洲精品在线观看| 国内揄拍国产精品人妻在线| 国产亚洲欧美精品永久| 亚洲成人手机| 久久久久久久大尺度免费视频| 熟女av电影| 日本与韩国留学比较| 精品久久国产蜜桃| 亚洲精品国产av成人精品| 精品亚洲成国产av| 精品国产露脸久久av麻豆| 亚洲怡红院男人天堂| 国精品久久久久久国模美| 如何舔出高潮| 精品酒店卫生间| 成人国产麻豆网| 91久久精品国产一区二区成人| 成人二区视频| 久久毛片免费看一区二区三区| 成人毛片60女人毛片免费| 欧美精品国产亚洲| 一本一本综合久久| 涩涩av久久男人的天堂| 国产白丝娇喘喷水9色精品| 精华霜和精华液先用哪个| 一级毛片久久久久久久久女| 麻豆乱淫一区二区| 日韩在线高清观看一区二区三区| 在线观看av片永久免费下载| 亚洲内射少妇av| 最近2019中文字幕mv第一页| 一级毛片aaaaaa免费看小| 纵有疾风起免费观看全集完整版| 日韩三级伦理在线观看| 我要看黄色一级片免费的| 夜夜爽夜夜爽视频| 国产精品一区二区性色av| 一边亲一边摸免费视频| 老司机影院成人| 观看免费一级毛片| 国产高潮美女av| 欧美另类一区| 国产精品99久久99久久久不卡 | 国产av一区二区精品久久 | 亚洲国产高清在线一区二区三| 日韩大片免费观看网站| 18禁在线无遮挡免费观看视频| 女的被弄到高潮叫床怎么办| 女性生殖器流出的白浆| 一区在线观看完整版| 亚洲色图综合在线观看| 亚洲不卡免费看| 久久女婷五月综合色啪小说| 久久精品久久久久久噜噜老黄| 亚洲aⅴ乱码一区二区在线播放| 在线亚洲精品国产二区图片欧美 | 国产精品嫩草影院av在线观看| h视频一区二区三区| 久久精品人妻少妇| 久久婷婷青草| 熟女av电影| 高清黄色对白视频在线免费看 | 只有这里有精品99| 国产精品精品国产色婷婷| 久久99热6这里只有精品| 亚洲最大成人中文| 26uuu在线亚洲综合色| 日日摸夜夜添夜夜爱| 精品亚洲乱码少妇综合久久| 精品熟女少妇av免费看| 国产精品人妻久久久影院| 2021少妇久久久久久久久久久| 夜夜爽夜夜爽视频| 午夜日本视频在线| 观看美女的网站| 老熟女久久久| 欧美日韩综合久久久久久| 一区二区av电影网| 亚洲精品国产av成人精品| 丝袜喷水一区| 国产免费一级a男人的天堂| 大片电影免费在线观看免费| 色婷婷久久久亚洲欧美| 又黄又爽又刺激的免费视频.| 欧美三级亚洲精品| 午夜激情久久久久久久| av女优亚洲男人天堂| av专区在线播放| 久久精品人妻少妇| 亚洲国产精品一区三区| 妹子高潮喷水视频| 岛国毛片在线播放| 国产午夜精品久久久久久一区二区三区| 亚洲国产av新网站| 六月丁香七月| 国产大屁股一区二区在线视频| 亚洲色图av天堂| 日本-黄色视频高清免费观看| 黑人高潮一二区| 少妇的逼好多水| 简卡轻食公司| kizo精华| 欧美日韩视频精品一区| 啦啦啦视频在线资源免费观看| 久久久久久久久久久丰满| 在线天堂最新版资源| 菩萨蛮人人尽说江南好唐韦庄| 少妇猛男粗大的猛烈进出视频| 久久精品国产a三级三级三级| 寂寞人妻少妇视频99o| 国国产精品蜜臀av免费| 国产69精品久久久久777片| 国产在线视频一区二区| 九九久久精品国产亚洲av麻豆| 亚洲精品国产av成人精品| 蜜桃久久精品国产亚洲av| 在线天堂最新版资源| 精品久久国产蜜桃| 欧美丝袜亚洲另类| 久久毛片免费看一区二区三区| 精品人妻视频免费看| 男男h啪啪无遮挡| 免费黄网站久久成人精品| 免费观看在线日韩| 午夜激情久久久久久久| 国产精品国产三级国产专区5o| 亚洲,欧美,日韩| 亚洲国产av新网站| 久久久久精品性色| 日本黄色日本黄色录像| 亚洲怡红院男人天堂| 国产片特级美女逼逼视频| 国产av一区二区精品久久 | 精品午夜福利在线看| 欧美xxxx性猛交bbbb| 欧美激情国产日韩精品一区| 色婷婷av一区二区三区视频| 性色avwww在线观看| videos熟女内射| 亚洲欧美精品自产自拍| 五月玫瑰六月丁香| 妹子高潮喷水视频| 欧美区成人在线视频| a级毛片免费高清观看在线播放| 久热久热在线精品观看| 欧美成人精品欧美一级黄| 亚洲欧美精品自产自拍| 丰满乱子伦码专区| 欧美 日韩 精品 国产| 国产熟女欧美一区二区| 久久久久人妻精品一区果冻| 久久久久久久国产电影| 国产免费福利视频在线观看| 超碰av人人做人人爽久久| 直男gayav资源| 中文字幕av成人在线电影| 日本爱情动作片www.在线观看| 久久精品国产亚洲av天美| 欧美区成人在线视频| 成人影院久久| 亚洲图色成人| 我的老师免费观看完整版| 激情 狠狠 欧美| 久久久久久久久久久丰满| 国产黄色免费在线视频| 欧美国产精品一级二级三级 | 欧美另类一区| 能在线免费看毛片的网站| 欧美 日韩 精品 国产| 少妇的逼水好多| 国产熟女欧美一区二区| www.色视频.com| 精品久久久精品久久久| 中文字幕制服av| 国产探花极品一区二区| 日本av免费视频播放| 观看美女的网站| 国产精品嫩草影院av在线观看| 亚洲人成网站在线观看播放| 日日撸夜夜添| 久久午夜福利片| 日韩欧美一区视频在线观看 | 久久99精品国语久久久| 91精品国产国语对白视频| 欧美一级a爱片免费观看看| 国产精品福利在线免费观看| 能在线免费看毛片的网站| 尾随美女入室| 九九久久精品国产亚洲av麻豆| 亚洲精品成人av观看孕妇| 久久久久久久久久久免费av| 男女边吃奶边做爰视频| 老熟女久久久| 蜜臀久久99精品久久宅男| 亚洲国产最新在线播放| 亚洲精华国产精华液的使用体验| 街头女战士在线观看网站| 一本一本综合久久| 91精品一卡2卡3卡4卡| 99久久精品热视频| 少妇熟女欧美另类| 久久久久久久久久人人人人人人| 又粗又硬又长又爽又黄的视频| 国产v大片淫在线免费观看| 亚洲成色77777| 亚洲av成人精品一二三区| 下体分泌物呈黄色| .国产精品久久| 99九九线精品视频在线观看视频| 三级国产精品欧美在线观看| 亚洲中文av在线| 久久久久视频综合| 美女高潮的动态| 日本黄大片高清| 91精品国产国语对白视频| 秋霞伦理黄片| 亚洲天堂av无毛| av女优亚洲男人天堂| h日本视频在线播放| 亚洲av电影在线观看一区二区三区| 国产亚洲av片在线观看秒播厂| 男人舔奶头视频| 亚洲va在线va天堂va国产| 中文资源天堂在线| 中文精品一卡2卡3卡4更新| 特大巨黑吊av在线直播| 1000部很黄的大片| 好男人视频免费观看在线| 99久久精品一区二区三区| 日日撸夜夜添| 婷婷色av中文字幕| 中文天堂在线官网| 91精品国产国语对白视频| 一级爰片在线观看| 26uuu在线亚洲综合色| 久久精品夜色国产| 亚洲电影在线观看av| 一级毛片久久久久久久久女| 亚洲不卡免费看| 国产在线一区二区三区精| 人妻夜夜爽99麻豆av| 欧美xxxx黑人xx丫x性爽| 国产在线视频一区二区| 97在线视频观看| 最近最新中文字幕大全电影3| av国产免费在线观看| 水蜜桃什么品种好| 大陆偷拍与自拍| 偷拍熟女少妇极品色| 久久精品熟女亚洲av麻豆精品| 在线观看一区二区三区| 亚洲欧美一区二区三区国产| 亚洲成色77777| av一本久久久久| 国产日韩欧美在线精品| 亚洲国产av新网站| 热re99久久精品国产66热6| 国产成人a∨麻豆精品| 欧美高清成人免费视频www| 色婷婷av一区二区三区视频| 免费看日本二区| 国产极品天堂在线| 久久午夜福利片| 伦精品一区二区三区| 国产精品三级大全| 日本欧美视频一区| 99久久中文字幕三级久久日本| 午夜精品国产一区二区电影| 亚洲精品,欧美精品| 国产人妻一区二区三区在| 国产免费福利视频在线观看| 亚洲国产最新在线播放| 亚洲无线观看免费| a级毛片免费高清观看在线播放| 久久久久久久亚洲中文字幕| 少妇人妻 视频| 超碰97精品在线观看| 亚洲欧美日韩无卡精品| 国产精品国产三级国产专区5o| 国产成人精品久久久久久| 91久久精品国产一区二区成人| 国产又色又爽无遮挡免| 大码成人一级视频| 国产亚洲av片在线观看秒播厂| 一级毛片 在线播放| 熟妇人妻不卡中文字幕| 少妇丰满av| 欧美高清性xxxxhd video| 久久精品久久久久久噜噜老黄| 一级av片app| 美女主播在线视频| 久久精品国产亚洲网站| 1000部很黄的大片| 国产人妻一区二区三区在| 91久久精品电影网| 国产 精品1| 日韩av不卡免费在线播放| 亚洲国产色片| 交换朋友夫妻互换小说| 人妻少妇偷人精品九色| 国产爱豆传媒在线观看| 最近的中文字幕免费完整| 两个人的视频大全免费| 麻豆成人午夜福利视频| 交换朋友夫妻互换小说| 丝袜脚勾引网站| 日韩av在线免费看完整版不卡| 狂野欧美白嫩少妇大欣赏| 中文字幕av成人在线电影| 午夜老司机福利剧场| 国产精品一区二区三区四区免费观看| av在线播放精品| 国产白丝娇喘喷水9色精品| 久久97久久精品| 黄色一级大片看看| 美女内射精品一级片tv| 大陆偷拍与自拍| 久久国内精品自在自线图片| 亚洲欧美精品自产自拍| 在线免费十八禁| 午夜日本视频在线| 成年免费大片在线观看| 国产一区二区三区av在线| 嘟嘟电影网在线观看| 精品久久久久久久久亚洲| 久久精品国产亚洲av天美| 亚洲av男天堂| 国产高清三级在线| 777米奇影视久久| 美女中出高潮动态图| 国产精品免费大片| 精品视频人人做人人爽| 伦理电影免费视频| 国产毛片在线视频| 亚洲,一卡二卡三卡| av福利片在线观看| 99久国产av精品国产电影| 国产精品久久久久久久电影| 在现免费观看毛片| 亚洲精品乱码久久久久久按摩| 日韩一区二区三区影片| 哪个播放器可以免费观看大片| 国产无遮挡羞羞视频在线观看| 一区在线观看完整版| 纯流量卡能插随身wifi吗| 日本wwww免费看| 亚洲人成网站高清观看| 黑人猛操日本美女一级片| 久久亚洲国产成人精品v| 日本爱情动作片www.在线观看| 亚洲色图av天堂| 久久国内精品自在自线图片| 亚洲av欧美aⅴ国产| 在线免费观看不下载黄p国产| 国产 一区精品| 晚上一个人看的免费电影| 九九久久精品国产亚洲av麻豆| 精品久久久噜噜| 我要看日韩黄色一级片| 欧美激情极品国产一区二区三区 | 国产黄片视频在线免费观看| kizo精华| 美女福利国产在线 | 另类亚洲欧美激情| 一级毛片aaaaaa免费看小|