• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    科技評(píng)價(jià)指標(biāo)權(quán)重分類及對(duì)評(píng)價(jià)的影響研究

    2021-06-07 08:08曾強(qiáng)俞立平
    現(xiàn)代情報(bào) 2021年6期

    曾強(qiáng) 俞立平

    關(guān)鍵詞:科技評(píng)價(jià);自然權(quán)重;數(shù)據(jù)分布權(quán)重;非線性評(píng)價(jià);線性評(píng)價(jià)

    在科技評(píng)價(jià)中,人們往往都比較重視權(quán)重問題。通常意義上的權(quán)重是根據(jù)主觀或客觀評(píng)價(jià)方法確定的設(shè)計(jì)權(quán)重.而對(duì)于隱含在科技評(píng)價(jià)指標(biāo)中的權(quán)重問題較少關(guān)注。如南京大學(xué)CSSCI期刊引文評(píng)價(jià).采用他引影響因子和總被引頻次兩個(gè)指標(biāo)進(jìn)行評(píng)價(jià),權(quán)重分別為0.8和0.2,假設(shè)暫不考慮評(píng)價(jià)賦權(quán),兩個(gè)指標(biāo)是等權(quán)重相加,數(shù)據(jù)經(jīng)過標(biāo)準(zhǔn)化處理后,兩個(gè)指標(biāo)的極大值都是100,但是均值并不相等。比如他引影響因子的平均分?jǐn)?shù)為80,總被引頻次的平均分為40,那么在實(shí)際評(píng)價(jià)中,他引影響因子明顯占據(jù)比較重要的地位?;蛘哒f,從指標(biāo)數(shù)據(jù)角度,他引影響因子的實(shí)際權(quán)重就是0.667.而總被引頻次的實(shí)際權(quán)重就是0.333.這種由于指標(biāo)均值差異帶來的權(quán)重稱為自然權(quán)重。

    以上例子是對(duì)于線性評(píng)價(jià)方法而言,其實(shí)在非線性評(píng)價(jià)中,指標(biāo)隱含權(quán)重問題更為復(fù)雜。非線性評(píng)價(jià)方法的特點(diǎn)是評(píng)價(jià)指標(biāo)與評(píng)價(jià)結(jié)果之間并非簡(jiǎn)單的線性關(guān)系,其種類繁多,原理各不相同,比如主成分分析、因子分析、TOPSIS、VIKOR、ELEC.TRE、灰色關(guān)聯(lián)、DEA效率分析等。為了簡(jiǎn)捷起見,暫不考慮非線性評(píng)價(jià)中賦權(quán)問題,也就是說假定非線性評(píng)價(jià)都是等權(quán)重。那么,即使在這種情況下,指標(biāo)權(quán)重真的相等嗎?俞立平等針對(duì)這個(gè)問題提出了模擬權(quán)重的概念.就是對(duì)于非線性評(píng)價(jià)方法,將評(píng)價(jià)得分與評(píng)價(jià)指標(biāo)進(jìn)行回歸,回歸系數(shù)大小實(shí)際上就反映了各指標(biāo)的重要性,將其歸一化處理就是模擬權(quán)重,或者稱為實(shí)際權(quán)重。很明顯即使在不賦權(quán)的情況下,非線性評(píng)價(jià)方法各指標(biāo)的實(shí)際權(quán)重也不可能相等.其原因有待深入研究,隱含在科技評(píng)價(jià)指標(biāo)中的數(shù)據(jù)權(quán)重問題非常復(fù)雜。

    在科技評(píng)價(jià)中.評(píng)價(jià)指標(biāo)權(quán)重特性對(duì)評(píng)價(jià)產(chǎn)生著較大影響。指標(biāo)權(quán)重特性既包括了標(biāo)準(zhǔn)化后指標(biāo)數(shù)據(jù)均值不同帶來的影響.也包括指標(biāo)數(shù)據(jù)分布帶來的影響。其中指標(biāo)均值不同帶來的自然權(quán)重某種程度上是可以通過優(yōu)化數(shù)據(jù)標(biāo)準(zhǔn)化方法進(jìn)行修正,在排除自然權(quán)重后,剩下的就是指標(biāo)數(shù)據(jù)分布對(duì)權(quán)重的影響。研究評(píng)價(jià)指標(biāo)權(quán)重特性對(duì)線性評(píng)價(jià)與非線性評(píng)價(jià)的影響,分析其作用機(jī)制,找到消除自然權(quán)重的數(shù)據(jù)標(biāo)準(zhǔn)化方法.進(jìn)一步總結(jié)指標(biāo)數(shù)據(jù)分布對(duì)實(shí)際權(quán)重的影響特點(diǎn)和影響大小,不僅可以豐富科技評(píng)價(jià)方法和技術(shù),減少評(píng)價(jià)系統(tǒng)誤差,提高評(píng)價(jià)質(zhì)量,在實(shí)踐上也有利于保證評(píng)價(jià)的公平、公正,提高評(píng)價(jià)的公信力。

    關(guān)于指標(biāo)數(shù)據(jù)與權(quán)重的關(guān)系.學(xué)術(shù)界從權(quán)重與評(píng)價(jià)方法角度進(jìn)行了一些研究。邱東認(rèn)為當(dāng)采用乘法合成時(shí),權(quán)重作用不如加法合成時(shí)明顯。覃森等在復(fù)雜網(wǎng)絡(luò)研究中.采用分配常數(shù)的邊權(quán)重、服從指數(shù)分布的邊權(quán)重、節(jié)點(diǎn)度乘積函數(shù)的邊權(quán)重3種權(quán)重方式.從靜態(tài)與動(dòng)態(tài)加權(quán)視角研究了加權(quán)網(wǎng)絡(luò)強(qiáng)度分布的不同特性。張耀天等提出自適應(yīng)層次分析法,能夠根據(jù)被評(píng)價(jià)對(duì)象在科研評(píng)價(jià)指標(biāo)上的數(shù)據(jù)分布特征,對(duì)評(píng)價(jià)指標(biāo)的權(quán)重進(jìn)行動(dòng)態(tài)調(diào)整.從而在評(píng)價(jià)過程中充分體現(xiàn)稀缺性指標(biāo)的導(dǎo)向作用,實(shí)現(xiàn)更為合理的績(jī)效分配。周楊等設(shè)計(jì)了一種基于自適應(yīng)權(quán)重的粗糙K均值聚類算法.基于自適應(yīng)權(quán)重的粗糙聚類算法在每一次迭代過程中,根據(jù)當(dāng)前的數(shù)據(jù)劃分狀態(tài),動(dòng)態(tài)計(jì)算每個(gè)樣本對(duì)于類的權(quán)重,降低了原有算法對(duì)初始權(quán)重的依賴。郭亞軍研究了動(dòng)態(tài)綜合評(píng)價(jià)中權(quán)重與時(shí)序數(shù)據(jù)的“隱式”關(guān)系。

    關(guān)于指標(biāo)數(shù)據(jù)分布與評(píng)價(jià)的關(guān)系,Glanzel w、Bornmann L等認(rèn)為用算術(shù)平均值來反映引文的非正態(tài)分布的集中趨勢(shì)是不合適的.可能歪曲數(shù)據(jù)的真實(shí)分布。Raan V指出過去按照個(gè)人經(jīng)驗(yàn),將引文數(shù)據(jù)看作一個(gè)單一平均值的做法,使得評(píng)價(jià)結(jié)果遠(yuǎn)高于或低于國際引文影響標(biāo)準(zhǔn)。Seglen PO發(fā)現(xiàn)引文分析數(shù)據(jù)具有冪律分布特征,屬于典型的偏態(tài)分布。Adler R等也發(fā)現(xiàn)引用數(shù)據(jù)分布是右偏的,服從冪律法則。胡永宏認(rèn)為權(quán)重發(fā)揮作用的大小還取決于評(píng)價(jià)指標(biāo)之間相關(guān)性的大小以及后面合成所采用的方法.當(dāng)指標(biāo)之間相關(guān)性較大時(shí),權(quán)數(shù)幾乎不起什么作用。肖峻等研究了AHP權(quán)重的概率分布規(guī)律,當(dāng)判斷矩陣元素為平均分布和正態(tài)分布時(shí),所求得的權(quán)重均為正態(tài)分布。俞立平等認(rèn)為指標(biāo)數(shù)據(jù)偏倚會(huì)影響評(píng)價(jià)指標(biāo)的數(shù)據(jù)標(biāo)準(zhǔn)化.指標(biāo)數(shù)據(jù)右偏會(huì)導(dǎo)致期刊評(píng)價(jià)值偏低,最好選取數(shù)據(jù)偏倚情況相對(duì)較好的指標(biāo)來評(píng)價(jià)期刊平均水平。

    從現(xiàn)有的研究看,學(xué)術(shù)界關(guān)于權(quán)重問題的相關(guān)研究.更多集中在權(quán)重確定方法與評(píng)價(jià)方法中涉及的一些賦權(quán)問題,關(guān)于指標(biāo)數(shù)據(jù)分布對(duì)評(píng)價(jià)的影響,也有少量的研究。在多元統(tǒng)計(jì)的早期研究中,由于評(píng)價(jià)指標(biāo)均值不同產(chǎn)生的自然權(quán)重思想有所涉及,但并沒有進(jìn)行進(jìn)一步研究,總體上,關(guān)于評(píng)價(jià)指標(biāo)數(shù)據(jù)的權(quán)重特性問題學(xué)術(shù)界尚缺乏研究,在以下幾個(gè)方面有待深入:

    第一,指標(biāo)數(shù)據(jù)對(duì)權(quán)重的影響有幾種類型?它們對(duì)線性評(píng)價(jià)與非線性評(píng)價(jià)會(huì)產(chǎn)生何種影響?其影響規(guī)律與影響特征如何?

    第二,如何對(duì)由于指標(biāo)均值不同導(dǎo)致的自然權(quán)重進(jìn)行修正?

    第三,如何對(duì)指標(biāo)數(shù)據(jù)分布對(duì)實(shí)際權(quán)重的影響大小進(jìn)行評(píng)估?這種評(píng)估對(duì)于評(píng)價(jià)方法選擇有什么意義?

    本文在理論分析的基礎(chǔ)上,以JCR2016數(shù)學(xué)期刊評(píng)價(jià)為例,評(píng)價(jià)方法除了線性評(píng)價(jià)外,還選取主成分分析與TOPSIS兩種非線性評(píng)價(jià)方法,并提出一種消除自然權(quán)重的數(shù)據(jù)標(biāo)準(zhǔn)化方法,在自然權(quán)重消除前后進(jìn)行比較,最后得出結(jié)論并進(jìn)行討論。

    1指標(biāo)權(quán)重特性分析

    1.1指標(biāo)權(quán)重的分類

    第一,設(shè)計(jì)權(quán)重。也稱為傳統(tǒng)權(quán)重,就是評(píng)價(jià)時(shí)為了管理的需要,通過主觀、客觀或主客觀結(jié)合的方法確定的權(quán)重。傳統(tǒng)權(quán)重體現(xiàn)了評(píng)價(jià)為管理服務(wù),體現(xiàn)了評(píng)價(jià)主體的主觀或客觀要求。至于在實(shí)際評(píng)價(jià)中傳統(tǒng)權(quán)重有沒有得到很好的體現(xiàn),體現(xiàn)的程度如何,是個(gè)非常復(fù)雜的問題。在評(píng)價(jià)技術(shù)層面,努力在評(píng)價(jià)結(jié)果中實(shí)現(xiàn)設(shè)計(jì)權(quán)重是重要目標(biāo)之一。

    第二,實(shí)際權(quán)重。也稱為模擬權(quán)重,在非線性評(píng)價(jià)中表現(xiàn)尤為突出。根據(jù)俞立平等提出的回歸模擬權(quán)重估計(jì)法,用評(píng)價(jià)結(jié)果作為因變量,評(píng)價(jià)指標(biāo)作為自變量進(jìn)行回歸,為了防止多重共線性的影響,回歸方法可能要用嶺回歸或偏最二乘法,回歸系數(shù)經(jīng)標(biāo)準(zhǔn)化處理后就是評(píng)價(jià)指標(biāo)的實(shí)際權(quán)重,它是真正發(fā)揮作用的權(quán)重。

    第三,自然權(quán)重。這是由于指標(biāo)標(biāo)準(zhǔn)化后均值不相等引起的,均值越大的指標(biāo),在線性評(píng)價(jià)中的隱含權(quán)重越高,自然權(quán)重越大。當(dāng)然自然權(quán)重是可以測(cè)度的,其測(cè)度方法就是計(jì)算標(biāo)準(zhǔn)化后各指標(biāo)均值占所有均值的比重。如果通過某種標(biāo)準(zhǔn)化方法,使得各指標(biāo)均值相等,那么自然權(quán)重是可以消除的。自然權(quán)重問題是隱含的,而且沒有得到應(yīng)有的重視,在實(shí)際評(píng)價(jià)中,自然權(quán)重問題是普遍存在的。

    第四,數(shù)據(jù)分布權(quán)重。數(shù)據(jù)分布權(quán)重是一種隱含權(quán)重,在非線性評(píng)價(jià)中表現(xiàn)突出。在等權(quán)重非線性評(píng)價(jià)時(shí),即使解決了自然權(quán)重問題,那么通過回歸得到的模擬權(quán)重一般也不相等.產(chǎn)生的原因是評(píng)價(jià)指標(biāo)數(shù)據(jù)分布引起的.這里將其稱為數(shù)據(jù)分布權(quán)重。不過指標(biāo)數(shù)據(jù)分布權(quán)重難以測(cè)量,因?yàn)榍闆r太復(fù)雜了,一切取決于各指標(biāo)的數(shù)據(jù)分布,它的存在影響實(shí)際權(quán)重。數(shù)據(jù)分布權(quán)重是不可以消除的,或者說不能消除,因?yàn)楦淖冊(cè)贾笜?biāo)的數(shù)據(jù)分布會(huì)嚴(yán)重影響評(píng)價(jià)結(jié)果,導(dǎo)致評(píng)價(jià)偏倚,何況會(huì)破壞原始數(shù)據(jù)包含的大量信息。當(dāng)然,除非不采用非線性評(píng)價(jià)方法評(píng)價(jià),這是解決數(shù)據(jù)分布權(quán)重的終極方法。

    界定以上4種權(quán)重后可以發(fā)現(xiàn).通常情況下,實(shí)際權(quán)重受設(shè)計(jì)權(quán)重、自然權(quán)重與數(shù)據(jù)分布權(quán)重的影響,為了進(jìn)一步分析可以采取逐步排除法,首先通過等權(quán)重方法消除設(shè)計(jì)權(quán)重的影響,在進(jìn)一步消除自然權(quán)重后,實(shí)際權(quán)重就是數(shù)據(jù)分布權(quán)重。

    1.2指標(biāo)權(quán)重與評(píng)價(jià)方法

    為了使研究得到簡(jiǎn)化,暫不考慮設(shè)計(jì)權(quán)重,在此假設(shè)下分析自然權(quán)重、數(shù)據(jù)分布權(quán)重與評(píng)價(jià)方法之間的關(guān)系。

    多屬性評(píng)價(jià)方法大致可以分為線性評(píng)價(jià)與非線性評(píng)價(jià)兩大類.所謂線性評(píng)價(jià),就是傳統(tǒng)的加權(quán)匯總類評(píng)價(jià)方法,如專家賦權(quán)法、熵權(quán)法、概率權(quán)法等;所謂非線性評(píng)價(jià),就是采用一定的評(píng)價(jià)模型進(jìn)行評(píng)價(jià),評(píng)價(jià)指標(biāo)與評(píng)價(jià)值之間是非線性關(guān)系,如因子分析、TOPSIS、VIKOR、灰色關(guān)聯(lián)等。在線性評(píng)價(jià)中,只有自然權(quán)重會(huì)對(duì)評(píng)價(jià)產(chǎn)生影響,而在非線性評(píng)價(jià)中.自然權(quán)重和數(shù)據(jù)分布權(quán)重會(huì)同時(shí)產(chǎn)生影響。

    如果采取某種方法能夠消除自然權(quán)重,那么非線性評(píng)價(jià)方法中,就可以單獨(dú)評(píng)估數(shù)據(jù)分布權(quán)重產(chǎn)生的影響,并對(duì)這種影響大小進(jìn)行綜合評(píng)估。

    需要說明的是,傳統(tǒng)意義上的評(píng)價(jià)賦權(quán)(設(shè)計(jì)權(quán)重)無論在線性評(píng)價(jià)與非線性評(píng)價(jià)中均占據(jù)重要地位,只有部分非線性評(píng)價(jià)方法不需要賦權(quán)。為了簡(jiǎn)化起見,同時(shí)也是為了研究更加深入,本文暫不考慮傳統(tǒng)權(quán)重(設(shè)計(jì)權(quán)重)對(duì)指標(biāo)權(quán)重的影響,也就是說,無論是線性評(píng)價(jià)還是非線性評(píng)價(jià),均采用等權(quán)重進(jìn)行,這樣可以更好地評(píng)估自然權(quán)重與數(shù)據(jù)分布權(quán)重的作用及其規(guī)律,以及對(duì)最終實(shí)際權(quán)重的影響。

    2研究方法與數(shù)據(jù)

    2.1實(shí)際權(quán)重的測(cè)度——偏最小二乘法

    評(píng)價(jià)指標(biāo)之間往往相關(guān)性較高,這樣在回歸時(shí)會(huì)產(chǎn)生多重共線性.所以采用傳統(tǒng)的最小二乘法進(jìn)行回歸往往是不可以的。偏最小二乘法(PartialLeast Squares,PLS)是Wold S等提出的.它結(jié)合了多元回歸、主成分分析、典型相關(guān)分析優(yōu)點(diǎn),采用信息綜合與篩選技術(shù),特別適用于解釋變量存在多重共線性、數(shù)據(jù)數(shù)量過少等問題,一般認(rèn)為比主成分回歸、嶺回歸解決多重共線性更好。

    2.2自然權(quán)重的消除一動(dòng)態(tài)最大均值逼近標(biāo)準(zhǔn)化

    在科技評(píng)價(jià)中,由于評(píng)價(jià)指標(biāo)數(shù)據(jù)特性,使得即使標(biāo)準(zhǔn)化后各指標(biāo)的均值也不相等,從而帶來自然權(quán)重問題,本文提出動(dòng)態(tài)最大均值逼近標(biāo)準(zhǔn)化方法,如圖3所示,試圖進(jìn)行修正,主要步驟如下:

    第一,確定評(píng)價(jià)目的、評(píng)價(jià)原則,選擇評(píng)價(jià)指標(biāo),這里有個(gè)基本前提.就是所有評(píng)價(jià)指標(biāo)都是結(jié)構(gòu)化數(shù)據(jù),不存在半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。

    第二,對(duì)所有評(píng)價(jià)指標(biāo)進(jìn)行標(biāo)準(zhǔn)化,其方法是所有正向指標(biāo)除以極大值然后乘以100(以百分制為例),所有反向指標(biāo)用極大值減去該指標(biāo)先轉(zhuǎn)為正向指標(biāo),然后視同正向指標(biāo)再做一次標(biāo)準(zhǔn)化。接著計(jì)算各指標(biāo)標(biāo)準(zhǔn)化后的均值,并找到最大均值K。

    動(dòng)態(tài)最大均值逼近標(biāo)準(zhǔn)化方法有4個(gè)特點(diǎn):第一,需要循環(huán)標(biāo)準(zhǔn)化多次,是動(dòng)態(tài)的;第二,理論上標(biāo)準(zhǔn)化后指標(biāo)的均值絕對(duì)相等,但極大值會(huì)大于100,永遠(yuǎn)不可能等于100。理論上它可以無限逼近第一步的極大值,但永遠(yuǎn)也無法達(dá)到;第三,這是線性標(biāo)準(zhǔn)化方法.不會(huì)破壞原始指標(biāo)的數(shù)據(jù)分布特征,能保留原始指標(biāo)的大量信息;第四,容易實(shí)現(xiàn),借助計(jì)算機(jī)編程,可以非常方便地進(jìn)行處理。

    下面對(duì)動(dòng)態(tài)最大均值逼近標(biāo)準(zhǔn)化方法中,每循環(huán)一次均值就會(huì)增加進(jìn)行證明。進(jìn)行二次標(biāo)準(zhǔn)化前,需要增加均值:

    本文選擇主成分分析與TOPSIS兩種比較常用的非線性評(píng)價(jià)方法為例來進(jìn)行研究,之所以選擇兩種評(píng)價(jià)方法,是為了提高研究的穩(wěn)健性,避免單一評(píng)價(jià)方法研究可能產(chǎn)生的偏倚。此外,主成分分析一般不要給指標(biāo)賦權(quán).是不加權(quán)非線性評(píng)價(jià)方法的代表,TOPSIS評(píng)價(jià)方法可以加權(quán),是加權(quán)非線性評(píng)價(jià)方法的代表。當(dāng)然,本文重點(diǎn)研究評(píng)價(jià)指標(biāo)數(shù)據(jù)的權(quán)重特性.為了減少來自評(píng)價(jià)賦權(quán)的影響,TOPSIS評(píng)價(jià)也不進(jìn)行賦權(quán),即均不考慮設(shè)計(jì)權(quán)重問題。

    2.4研究數(shù)據(jù)

    本文以JCR2016數(shù)學(xué)期刊為例,選取8個(gè)評(píng)價(jià)指標(biāo)為例來進(jìn)行說明,分別是:總被引頻次、影響因子、他引影響因子、影響因子百分位、5年影響因子、特征因子、論文影響分值、即年指標(biāo)。JCR2016數(shù)學(xué)期刊共有期刊310種.刪除了部分?jǐn)?shù)據(jù)缺失期刊,最后還有294種期刊,指標(biāo)標(biāo)準(zhǔn)化后數(shù)據(jù)的描述統(tǒng)計(jì)如表1所示。

    從標(biāo)準(zhǔn)化后指標(biāo)均值相差很大,最大的是影響因子百分位47.073,最小的是總被引頻次7.252。從Jaque-Bera正態(tài)分布檢驗(yàn)看.所有指標(biāo)均不服從正態(tài)分布。所以選擇JCR2016數(shù)學(xué)期刊來研究評(píng)價(jià)指標(biāo)的權(quán)重特性具有代表性,是比較好的樣本。

    3

    實(shí)證結(jié)果

    3.1線性評(píng)價(jià)中數(shù)據(jù)權(quán)重特點(diǎn)

    首先對(duì)表1中的除了影響因子百分位外的其他7個(gè)指標(biāo).采用動(dòng)態(tài)最大均值逼近標(biāo)準(zhǔn)化方法進(jìn)行處理,以消除自然權(quán)重的影響,經(jīng)標(biāo)準(zhǔn)化后,數(shù)據(jù)的描述統(tǒng)計(jì)量如表2所示。

    影響因子百分位因其均值最大無需做消除自然權(quán)重處理,除該指標(biāo)外,其余所有指標(biāo)的極大值均超過100,但小于101,即在最大許可閾值范圍內(nèi)。離散系數(shù)也有所減小,但是偏度和峰度變化不大,偏度和峰度值也非常接近.正態(tài)分布檢驗(yàn)結(jié)果相同,均沒有通過正態(tài)分布。說明動(dòng)態(tài)最大均值逼近標(biāo)準(zhǔn)化方法能夠消除自然權(quán)重,降低指標(biāo)數(shù)據(jù)波動(dòng)程度,但并沒有改變指標(biāo)數(shù)據(jù)分布。

    為了分析消除自然權(quán)重后評(píng)價(jià)結(jié)果的差異,假設(shè)采取等權(quán)重法進(jìn)行線性加權(quán)匯總,結(jié)果如表3所示,由于篇幅所限,本文僅公布消除自然權(quán)重后前30種期刊的評(píng)價(jià)結(jié)果對(duì)比。消除自然權(quán)重后,所有期刊評(píng)價(jià)值的均值為47.07.即原來標(biāo)準(zhǔn)化后的最大均值,要比消除自然權(quán)重前的評(píng)價(jià)均值17.30大。從評(píng)價(jià)結(jié)果排序看,消除自然權(quán)重前后排序相差較大,說明自然權(quán)重對(duì)線性評(píng)價(jià)結(jié)果影響較大,可見如果不考慮自然權(quán)重問題,評(píng)價(jià)結(jié)果相差很大,造成較大的評(píng)價(jià)系統(tǒng)誤差。

    3.2主成分分析消除自然權(quán)重前后比較

    首先采用原始標(biāo)準(zhǔn)化數(shù)據(jù)進(jìn)行主成分分析評(píng)價(jià),其KMO檢驗(yàn)值為0.816,Bartlett檢驗(yàn)值為3507.662,相伴概率為0.000,說明適合進(jìn)行主成分分析。第一主成分方差貢獻(xiàn)率為67.82%,第二主成分方差貢獻(xiàn)率為16.86,合計(jì)84.68%,采用方差貢獻(xiàn)率加權(quán)匯總,得到評(píng)價(jià)值,然后以評(píng)價(jià)值為因變量.評(píng)價(jià)指標(biāo)為自變量,采用偏最小二乘法進(jìn)行回歸,結(jié)果如表4所示。

    類似地,采用消除自然權(quán)重后的評(píng)價(jià)指標(biāo)進(jìn)行主成分評(píng)價(jià),其KMO檢驗(yàn)值為0.862,Bartlett檢驗(yàn)值為3328.847,相伴概率為0.000,說明適合進(jìn)行主成分分析。第一主成分方差貢獻(xiàn)率為67.20%,第二主成分方差貢獻(xiàn)率為16.99,合計(jì)84.19%。以上各參數(shù)和消除自然權(quán)重前比較接近,說明消除自然權(quán)重對(duì)這些參數(shù)影響不大。繼續(xù)采用方差貢獻(xiàn)率加權(quán)匯總,得到評(píng)價(jià)值,然后以評(píng)價(jià)值為因變量.評(píng)價(jià)指標(biāo)為自變量,采用偏最小二成法進(jìn)行回歸,結(jié)果如表5所示。

    由于無論消除自然權(quán)重與否,均采用兩個(gè)主成分進(jìn)行分析,因此偏最小二乘法的回歸系數(shù)取潛在主成分?jǐn)?shù)量為2的結(jié)果.將其歸一化處理后得到消除自然權(quán)重前后的實(shí)際權(quán)重.并進(jìn)行比較.結(jié)果如表6所示。

    無論自然權(quán)重是否消除,主成分分析的實(shí)際權(quán)重結(jié)果基本類似,8個(gè)指標(biāo)權(quán)重絕對(duì)變化平均值為1.014%,排序也基本相同,只是消除自然權(quán)重后總被引頻次與影響因子百分位的排序有微小變化。這充分說明,決定主成分分析實(shí)際權(quán)重的是數(shù)據(jù)分布,而自然權(quán)重消除與否對(duì)其影響不大。

    需要說明的是,消除自然權(quán)重后由于實(shí)際權(quán)重畢竟發(fā)生了微小的變化.因此對(duì)評(píng)價(jià)結(jié)果排序肯定會(huì)產(chǎn)生一定的影響,限于篇幅不一一公布了。

    3.3 TOPSIS消除自然權(quán)重前后的比較

    同樣首先將原始指標(biāo)標(biāo)準(zhǔn)化后采用TOPSIS法進(jìn)行評(píng)價(jià),然后將評(píng)價(jià)結(jié)果作為因變量,評(píng)價(jià)指標(biāo)作為自變量,采用偏最小二乘法進(jìn)行回歸,結(jié)果如表7所示。

    同樣消除自然權(quán)重后采用TOPSIS法進(jìn)行評(píng)價(jià),然后將評(píng)價(jià)結(jié)果作為因變量.評(píng)價(jià)指標(biāo)作為自變量,采用偏最小二乘法進(jìn)行回歸,結(jié)果如表8所示。

    同樣取潛在因子為2的偏最小二乘法回歸結(jié)果進(jìn)行實(shí)際權(quán)重的比較分析,結(jié)果如表9所示。無論是否消除自然權(quán)重.TOPSIS相同指標(biāo)的實(shí)際權(quán)重大小雖然有所差別,8個(gè)指標(biāo)絕對(duì)權(quán)重變化6.131%.但是消除自然權(quán)重前后權(quán)重大小排序的次序相同,同樣說明決定TOPSIS實(shí)際權(quán)重的是數(shù)據(jù)分布,而不是自然權(quán)重。

    需要說明的是,消除自然權(quán)重后由于實(shí)際權(quán)重畢竟發(fā)生了較大變化,因此對(duì)評(píng)價(jià)結(jié)果排序肯定會(huì)產(chǎn)生影響,限于篇幅不一一公布了。

    3.4主成分分析與TOPSIS實(shí)際權(quán)重的比較

    為了比較不同評(píng)價(jià)方法對(duì)實(shí)際權(quán)重的影響,將消除自然權(quán)重后主成分分析與TOPSIS的實(shí)際權(quán)重結(jié)果進(jìn)行橫向比較,結(jié)果如表10所示。在都消除自然權(quán)重后,主成分分析與TOPSIS相同指標(biāo)的實(shí)際權(quán)重還有差異,8個(gè)指標(biāo)平均權(quán)重變化為14.166%.這是非線性評(píng)價(jià)方法不同帶來的影響。至于兩者權(quán)重大小排序也比較接近.這難以從理論上加以證明,有待進(jìn)一步研究。

    4結(jié)論與討論

    4.1科技評(píng)價(jià)指標(biāo)具有隱含權(quán)重特性

    在科技評(píng)價(jià)中,由于標(biāo)準(zhǔn)化以后不同指標(biāo)的均值不等,導(dǎo)致評(píng)價(jià)指標(biāo)數(shù)據(jù)天生就具有自然權(quán)重,自然權(quán)重是可以測(cè)度和消除的。此外不同指標(biāo)由于數(shù)據(jù)分布不同也具有數(shù)據(jù)分布權(quán)重,它不可以測(cè)度。自然權(quán)重與數(shù)據(jù)分布權(quán)重一起.對(duì)評(píng)價(jià)產(chǎn)生隱含的影響,可能會(huì)導(dǎo)致評(píng)價(jià)結(jié)果偏離管理需求,產(chǎn)生誤差。此外,實(shí)際權(quán)重也是一種隱含權(quán)重,它是非線性評(píng)價(jià)中各指標(biāo)重要性的真實(shí)體現(xiàn),實(shí)際權(quán)重受設(shè)計(jì)權(quán)重、自然權(quán)重、數(shù)據(jù)分布權(quán)重的綜合影響。

    4.2動(dòng)態(tài)最大均值標(biāo)準(zhǔn)化方法能夠消除自然權(quán)重

    本文提出的動(dòng)態(tài)最大均值標(biāo)準(zhǔn)化方法通過多次標(biāo)準(zhǔn)化逼近的原理,使得標(biāo)準(zhǔn)化后指標(biāo)的均值相等,極大值控制在允許的閾值范圍內(nèi)。由于是一種線性變換,因此不會(huì)改變?cè)笜?biāo)的數(shù)據(jù)分布,可以保留原始數(shù)據(jù)中蘊(yùn)含的大量信息.同時(shí)降低了評(píng)價(jià)指標(biāo)的離散系數(shù),因此是一種較好的消除自然權(quán)重的方法。

    4.3自然權(quán)重影響線性評(píng)價(jià)結(jié)果

    在線性加權(quán)匯總評(píng)價(jià)中,由于自然權(quán)重的存在,它會(huì)影響評(píng)價(jià)結(jié)果.并且標(biāo)準(zhǔn)化后評(píng)價(jià)指標(biāo)的均值相差越大,它對(duì)評(píng)價(jià)結(jié)果的影響越大,必須進(jìn)行消除,以提高評(píng)價(jià)的精確性。數(shù)據(jù)分布對(duì)線性評(píng)價(jià)沒有影響,因?yàn)樵u(píng)價(jià)時(shí)不存在非線性運(yùn)算。

    4.4數(shù)據(jù)分布權(quán)重對(duì)非線性評(píng)價(jià)影響較大

    本文通過主成分分析和TOPSIS評(píng)價(jià)的實(shí)際權(quán)重比較表明,數(shù)據(jù)分布權(quán)重是影響非線性評(píng)價(jià)實(shí)際權(quán)重的主要因素,自然權(quán)重對(duì)非線性評(píng)價(jià)的實(shí)際權(quán)重影響較小。不同非線性評(píng)價(jià)方法也會(huì)影響實(shí)際權(quán)重,至于具體的影響特征.可以根據(jù)本文的方法進(jìn)行進(jìn)一步的研究。

    4.5數(shù)據(jù)分布權(quán)重對(duì)評(píng)價(jià)方法的選擇具有深遠(yuǎn)的影響

    在消除自然權(quán)重后,決定非線性評(píng)價(jià)結(jié)果的主要是數(shù)據(jù)分布權(quán)重和評(píng)價(jià)方法.數(shù)據(jù)分布權(quán)重一般是不宜消除的,因?yàn)闀?huì)破壞原始指標(biāo)中的大量信息,在這種情況下,如果某種評(píng)價(jià)方法的實(shí)際權(quán)重中,由于數(shù)據(jù)分布的影響,導(dǎo)致不同指標(biāo)的權(quán)重相差較大,此時(shí)就要冷靜分析是否應(yīng)該選取這種評(píng)價(jià)方法,要看權(quán)重大小是否符合管理實(shí)際,是否符合評(píng)價(jià)目的。而線性評(píng)價(jià)方法在消除自然權(quán)重后,反而沒有相關(guān)問題,從這個(gè)角度,線性評(píng)價(jià)方法更為合理。

    4.6設(shè)計(jì)權(quán)重與實(shí)際權(quán)重力求一致是選擇評(píng)價(jià)方法的重要依據(jù)

    設(shè)計(jì)權(quán)重體現(xiàn)了評(píng)價(jià)目的和管理要求,而實(shí)際權(quán)重是檢驗(yàn)具體評(píng)價(jià)是否達(dá)到設(shè)計(jì)權(quán)重的重要手段。由于數(shù)據(jù)分布權(quán)重對(duì)線性評(píng)價(jià)方法沒有影響,在消除自然權(quán)重后,線性評(píng)價(jià)的設(shè)計(jì)權(quán)重和實(shí)際權(quán)重完全一致,從這個(gè)角度,線性評(píng)價(jià)方法具有天然的優(yōu)勢(shì)。

    十八禁国产超污无遮挡网站| 精品久久久久久久人妻蜜臀av| 日韩欧美在线乱码| 大话2 男鬼变身卡| 高清日韩中文字幕在线| 久久午夜福利片| 久久草成人影院| 国产 一区 欧美 日韩| 高清视频免费观看一区二区 | 日韩制服骚丝袜av| 国产成人a∨麻豆精品| 免费看日本二区| 麻豆一二三区av精品| 最近中文字幕2019免费版| 精品久久久久久久久亚洲| 欧美精品国产亚洲| 久久久国产成人免费| 中文在线观看免费www的网站| 亚洲av中文字字幕乱码综合| 亚洲精品乱码久久久久久按摩| 国产私拍福利视频在线观看| 亚洲婷婷狠狠爱综合网| 中文字幕人妻熟人妻熟丝袜美| 亚洲无线观看免费| 亚洲精品日韩在线中文字幕| 国产精品三级大全| 熟女人妻精品中文字幕| 久久久久久久久中文| 高清午夜精品一区二区三区| 国产高清视频在线观看网站| 国产人妻一区二区三区在| 日本一本二区三区精品| 亚洲国产高清在线一区二区三| 黄片wwwwww| 少妇裸体淫交视频免费看高清| 午夜爱爱视频在线播放| 久久久久久久久中文| 老司机福利观看| 国产成人一区二区在线| 亚洲乱码一区二区免费版| 一级毛片电影观看 | 天天一区二区日本电影三级| 2022亚洲国产成人精品| 免费大片18禁| 亚洲国产成人一精品久久久| av福利片在线观看| 成人国产麻豆网| 91在线精品国自产拍蜜月| 嘟嘟电影网在线观看| 国产伦理片在线播放av一区| 国产真实伦视频高清在线观看| 欧美一区二区国产精品久久精品| 国产人妻一区二区三区在| 成人一区二区视频在线观看| 国产免费福利视频在线观看| 九色成人免费人妻av| 亚洲欧美日韩高清专用| 国产成人午夜福利电影在线观看| 蜜桃亚洲精品一区二区三区| 一边摸一边抽搐一进一小说| 一级爰片在线观看| 精品国产一区二区三区久久久樱花 | 亚洲精品久久久久久婷婷小说 | 精品人妻一区二区三区麻豆| 国产精品1区2区在线观看.| 国产 一区精品| 观看美女的网站| 久久精品夜色国产| 日韩国内少妇激情av| 久久久午夜欧美精品| 一级毛片电影观看 | 夫妻性生交免费视频一级片| 亚洲精品色激情综合| 国产黄色小视频在线观看| 国产片特级美女逼逼视频| 亚洲在线自拍视频| 午夜福利网站1000一区二区三区| 一边亲一边摸免费视频| 午夜爱爱视频在线播放| 高清视频免费观看一区二区 | 最近视频中文字幕2019在线8| 亚洲国产精品成人久久小说| 九九在线视频观看精品| 日本熟妇午夜| 欧美精品一区二区大全| av国产免费在线观看| 蜜桃亚洲精品一区二区三区| 亚洲欧美日韩卡通动漫| 天天躁日日操中文字幕| 一区二区三区乱码不卡18| 99久久无色码亚洲精品果冻| 成年女人永久免费观看视频| 久久精品久久精品一区二区三区| 午夜福利在线观看吧| 国产老妇伦熟女老妇高清| 啦啦啦啦在线视频资源| 免费人成在线观看视频色| 国产精品国产高清国产av| 国产午夜福利久久久久久| 91午夜精品亚洲一区二区三区| 91av网一区二区| 亚洲综合色惰| 床上黄色一级片| 校园人妻丝袜中文字幕| 男插女下体视频免费在线播放| 久99久视频精品免费| 国产精品蜜桃在线观看| 亚洲最大成人中文| 哪个播放器可以免费观看大片| 欧美性猛交╳xxx乱大交人| 99热6这里只有精品| 成人午夜精彩视频在线观看| 久久精品国产自在天天线| 久久6这里有精品| 蜜桃亚洲精品一区二区三区| 天堂中文最新版在线下载 | 亚洲国产精品国产精品| 国内精品美女久久久久久| 亚洲欧洲日产国产| 如何舔出高潮| 日本黄大片高清| 国产一区二区在线av高清观看| 国产麻豆成人av免费视频| 国产精品野战在线观看| 自拍偷自拍亚洲精品老妇| 一区二区三区四区激情视频| 真实男女啪啪啪动态图| 日韩av不卡免费在线播放| 观看美女的网站| 色尼玛亚洲综合影院| 国产免费福利视频在线观看| 校园人妻丝袜中文字幕| 又黄又爽又刺激的免费视频.| 精品国产露脸久久av麻豆 | 久久久久久久午夜电影| 非洲黑人性xxxx精品又粗又长| 中文字幕av在线有码专区| 日本与韩国留学比较| 日日摸夜夜添夜夜爱| 级片在线观看| ponron亚洲| 欧美一区二区国产精品久久精品| 国产精品久久久久久久久免| 亚洲电影在线观看av| 天堂√8在线中文| 国产精品一区www在线观看| kizo精华| 久久久成人免费电影| 毛片女人毛片| 特级一级黄色大片| 亚洲av福利一区| 狂野欧美白嫩少妇大欣赏| 晚上一个人看的免费电影| 白带黄色成豆腐渣| 亚洲一级一片aⅴ在线观看| 1024手机看黄色片| 久久亚洲国产成人精品v| av国产免费在线观看| 亚洲欧美清纯卡通| 久久久久免费精品人妻一区二区| 草草在线视频免费看| 久久午夜福利片| 一级毛片aaaaaa免费看小| 村上凉子中文字幕在线| 午夜免费激情av| 国产一区有黄有色的免费视频 | 3wmmmm亚洲av在线观看| 精品一区二区三区视频在线| 麻豆成人av视频| 草草在线视频免费看| 毛片女人毛片| 亚洲欧美成人精品一区二区| eeuss影院久久| 午夜老司机福利剧场| 成人综合一区亚洲| 欧美一区二区精品小视频在线| 午夜视频国产福利| 免费观看精品视频网站| 99久久九九国产精品国产免费| 国产亚洲午夜精品一区二区久久 | 一级av片app| 成人二区视频| 久久久精品大字幕| 久久热精品热| 精品国产三级普通话版| 男女下面进入的视频免费午夜| 少妇丰满av| 久久精品影院6| 国产精品精品国产色婷婷| 女人十人毛片免费观看3o分钟| 丝袜美腿在线中文| 一级毛片久久久久久久久女| 男人和女人高潮做爰伦理| 日韩欧美国产在线观看| 亚洲av不卡在线观看| 亚洲精华国产精华液的使用体验| 国产探花在线观看一区二区| 久久久久久久久中文| 国产伦一二天堂av在线观看| 精品酒店卫生间| 国产高潮美女av| 男女啪啪激烈高潮av片| www日本黄色视频网| 热99在线观看视频| 狠狠狠狠99中文字幕| 成人午夜高清在线视频| 亚洲综合精品二区| 熟女人妻精品中文字幕| 三级国产精品片| 国产亚洲av嫩草精品影院| 国产精品嫩草影院av在线观看| 久久久国产成人免费| 亚洲av电影不卡..在线观看| 可以在线观看毛片的网站| 人人妻人人看人人澡| 午夜免费男女啪啪视频观看| 小蜜桃在线观看免费完整版高清| 久久亚洲国产成人精品v| 国产黄片美女视频| 精品国产露脸久久av麻豆 | 赤兔流量卡办理| 国产伦一二天堂av在线观看| 欧美激情国产日韩精品一区| 网址你懂的国产日韩在线| 亚洲中文字幕日韩| 哪个播放器可以免费观看大片| 亚洲综合色惰| 色吧在线观看| av在线天堂中文字幕| 亚洲aⅴ乱码一区二区在线播放| 一夜夜www| 久久6这里有精品| 水蜜桃什么品种好| 色视频www国产| 嘟嘟电影网在线观看| 联通29元200g的流量卡| 久久鲁丝午夜福利片| 九草在线视频观看| 亚洲成人精品中文字幕电影| 热99在线观看视频| 久久久精品欧美日韩精品| 亚洲国产最新在线播放| 亚洲精品国产av成人精品| 男人和女人高潮做爰伦理| 一级黄片播放器| 婷婷色av中文字幕| av天堂中文字幕网| 99热网站在线观看| 久久综合国产亚洲精品| 亚洲av免费高清在线观看| 高清毛片免费看| 国产精品乱码一区二三区的特点| 亚洲精品乱码久久久久久按摩| 黑人高潮一二区| 国产 一区精品| 日本av手机在线免费观看| 久久精品国产亚洲网站| 国产伦理片在线播放av一区| 国产精品国产三级专区第一集| 国产黄a三级三级三级人| 国模一区二区三区四区视频| 久久精品国产亚洲av天美| 亚洲色图av天堂| 色综合亚洲欧美另类图片| 一二三四中文在线观看免费高清| 成人鲁丝片一二三区免费| 久久久久国产网址| 国产精品,欧美在线| 亚洲精品国产av成人精品| 国产精品电影一区二区三区| 伊人久久精品亚洲午夜| 久久久久久久国产电影| 一个人看的www免费观看视频| 天天躁夜夜躁狠狠久久av| 亚洲av福利一区| 久久久色成人| 精品久久久久久久久久久久久| 观看美女的网站| 天堂√8在线中文| 成人无遮挡网站| 亚洲国产色片| 丝袜喷水一区| 亚洲av日韩在线播放| 国产精品三级大全| 国产成人aa在线观看| 日韩国内少妇激情av| 日本色播在线视频| 91在线精品国自产拍蜜月| 日本三级黄在线观看| 色综合色国产| 久久99热这里只有精品18| 日韩强制内射视频| 麻豆av噜噜一区二区三区| 熟妇人妻久久中文字幕3abv| 久久99蜜桃精品久久| 日日摸夜夜添夜夜爱| 精品人妻一区二区三区麻豆| 22中文网久久字幕| 91久久精品国产一区二区三区| 男女视频在线观看网站免费| 草草在线视频免费看| 亚洲av.av天堂| 大香蕉97超碰在线| 丝袜喷水一区| 日本黄色视频三级网站网址| 菩萨蛮人人尽说江南好唐韦庄 | 七月丁香在线播放| 高清日韩中文字幕在线| 欧美成人一区二区免费高清观看| 亚洲va在线va天堂va国产| 99热6这里只有精品| 啦啦啦观看免费观看视频高清| 久久久亚洲精品成人影院| 免费电影在线观看免费观看| 综合色丁香网| 国产单亲对白刺激| 欧美最新免费一区二区三区| 一本—道久久a久久精品蜜桃钙片 精品乱码久久久久久99久播 | 别揉我奶头 嗯啊视频| 亚洲成人av在线免费| 亚洲自偷自拍三级| 国产麻豆成人av免费视频| 欧美变态另类bdsm刘玥| 日本五十路高清| 日日摸夜夜添夜夜爱| 国产一区有黄有色的免费视频 | 伦理电影大哥的女人| 五月玫瑰六月丁香| 国产色婷婷99| 欧美精品国产亚洲| 久久精品熟女亚洲av麻豆精品 | 欧美性猛交黑人性爽| 国产高清三级在线| 国产精品一区二区三区四区久久| 亚洲天堂国产精品一区在线| 精品一区二区免费观看| av黄色大香蕉| 国产精品久久久久久精品电影| 99久国产av精品| 国产真实伦视频高清在线观看| 日韩 亚洲 欧美在线| 我的老师免费观看完整版| 亚洲四区av| av.在线天堂| 69av精品久久久久久| 中国美白少妇内射xxxbb| a级毛片免费高清观看在线播放| 亚洲在线自拍视频| 国产精品国产三级国产av玫瑰| 免费看av在线观看网站| 99视频精品全部免费 在线| a级毛片免费高清观看在线播放| 一级黄片播放器| 国产精品一区二区三区四区免费观看| av在线蜜桃| 欧美性猛交黑人性爽| 日本爱情动作片www.在线观看| 国产成人a∨麻豆精品| 午夜精品国产一区二区电影 | 国产av码专区亚洲av| 久久精品久久久久久噜噜老黄 | 青春草视频在线免费观看| 午夜日本视频在线| 精品免费久久久久久久清纯| 国产在线一区二区三区精 | 久久亚洲精品不卡| 日本一二三区视频观看| 国产精品人妻久久久久久| av免费观看日本| 午夜精品在线福利| 人人妻人人看人人澡| 亚洲欧美日韩无卡精品| 一区二区三区四区激情视频| 国产精品不卡视频一区二区| 精品午夜福利在线看| 内地一区二区视频在线| 亚洲美女视频黄频| 又爽又黄a免费视频| 最近最新中文字幕免费大全7| 欧美成人午夜免费资源| 国产精品一及| 大又大粗又爽又黄少妇毛片口| 亚洲精品乱久久久久久| 免费人成在线观看视频色| 成年女人永久免费观看视频| 在线播放无遮挡| 99九九线精品视频在线观看视频| 亚洲无线观看免费| 亚洲av熟女| 亚洲欧美日韩东京热| 69av精品久久久久久| 日韩,欧美,国产一区二区三区 | 成人亚洲欧美一区二区av| 卡戴珊不雅视频在线播放| 国产精品1区2区在线观看.| 久久6这里有精品| 白带黄色成豆腐渣| 18禁在线无遮挡免费观看视频| 白带黄色成豆腐渣| 嫩草影院入口| 日本-黄色视频高清免费观看| 日韩欧美精品免费久久| 国产精品一区二区性色av| 大香蕉97超碰在线| 中文字幕av成人在线电影| 亚洲人与动物交配视频| 欧美日韩在线观看h| 蜜桃亚洲精品一区二区三区| 草草在线视频免费看| 中文字幕免费在线视频6| 久久精品国产自在天天线| 久久久国产成人精品二区| 18+在线观看网站| 联通29元200g的流量卡| 中文欧美无线码| 2021少妇久久久久久久久久久| 天堂网av新在线| 中文字幕av成人在线电影| 嫩草影院入口| kizo精华| 高清av免费在线| 国产亚洲av片在线观看秒播厂 | 18+在线观看网站| 麻豆国产97在线/欧美| 中文在线观看免费www的网站| 中文欧美无线码| 麻豆av噜噜一区二区三区| 人人妻人人澡欧美一区二区| 国产精品熟女久久久久浪| 黄色日韩在线| 一夜夜www| 一个人看视频在线观看www免费| 日本猛色少妇xxxxx猛交久久| 欧美日韩精品成人综合77777| 2021少妇久久久久久久久久久| 欧美xxxx性猛交bbbb| 亚洲中文字幕日韩| 一级毛片我不卡| 在线观看66精品国产| 亚洲aⅴ乱码一区二区在线播放| 99热精品在线国产| 亚洲18禁久久av| 国产 一区 欧美 日韩| 色吧在线观看| 久久人妻av系列| 99久久中文字幕三级久久日本| 精品99又大又爽又粗少妇毛片| 亚洲精品乱码久久久久久按摩| 成人无遮挡网站| 国产成人freesex在线| 中文字幕熟女人妻在线| 久久人妻av系列| 亚洲精品日韩av片在线观看| 老司机影院成人| 国产高清不卡午夜福利| 偷拍熟女少妇极品色| 大又大粗又爽又黄少妇毛片口| 精品久久久久久久久亚洲| 乱码一卡2卡4卡精品| 我的女老师完整版在线观看| 赤兔流量卡办理| 久久99热这里只频精品6学生 | 国产亚洲91精品色在线| 亚洲人成网站在线观看播放| 国产黄色小视频在线观看| 99久久九九国产精品国产免费| 美女内射精品一级片tv| 成人毛片a级毛片在线播放| 美女高潮的动态| 久久这里只有精品中国| 欧美一级a爱片免费观看看| 激情 狠狠 欧美| 精品酒店卫生间| 大香蕉97超碰在线| 只有这里有精品99| 亚洲精品一区蜜桃| 久久人人爽人人爽人人片va| 高清视频免费观看一区二区 | 18禁动态无遮挡网站| 菩萨蛮人人尽说江南好唐韦庄 | 99久久精品热视频| 久久这里有精品视频免费| 校园人妻丝袜中文字幕| av.在线天堂| 99热全是精品| 草草在线视频免费看| 国产色爽女视频免费观看| 国产视频首页在线观看| 亚洲成色77777| 亚洲国产精品成人久久小说| 美女大奶头视频| 亚洲精品一区蜜桃| 久久久精品94久久精品| 少妇熟女aⅴ在线视频| videossex国产| 久久热精品热| 99热这里只有精品一区| 亚洲熟妇中文字幕五十中出| 中文字幕av在线有码专区| 日日摸夜夜添夜夜爱| 寂寞人妻少妇视频99o| 美女高潮的动态| 日日撸夜夜添| 欧美日本视频| 国产成人a∨麻豆精品| 永久免费av网站大全| 免费黄色在线免费观看| 又粗又爽又猛毛片免费看| 人妻少妇偷人精品九色| 26uuu在线亚洲综合色| 最近最新中文字幕大全电影3| 少妇丰满av| 蜜桃久久精品国产亚洲av| 高清av免费在线| 亚洲欧美日韩东京热| 国内精品宾馆在线| 精品人妻视频免费看| 男女那种视频在线观看| 中文字幕熟女人妻在线| 最近中文字幕2019免费版| 国产中年淑女户外野战色| 在线观看一区二区三区| 真实男女啪啪啪动态图| 在线观看美女被高潮喷水网站| 精品酒店卫生间| 国产精品久久久久久精品电影小说 | 精品免费久久久久久久清纯| 精品少妇黑人巨大在线播放 | 色哟哟·www| a级毛色黄片| 成年版毛片免费区| 性插视频无遮挡在线免费观看| av专区在线播放| 国产精品日韩av在线免费观看| 可以在线观看毛片的网站| 国国产精品蜜臀av免费| 久久久欧美国产精品| 五月玫瑰六月丁香| 日韩av在线大香蕉| 亚洲在线自拍视频| 少妇人妻一区二区三区视频| 久久草成人影院| 汤姆久久久久久久影院中文字幕 | 国产伦精品一区二区三区视频9| 人妻少妇偷人精品九色| 国产亚洲av片在线观看秒播厂 | 日本一本二区三区精品| 亚洲av.av天堂| 精品久久久噜噜| 精品久久国产蜜桃| 乱码一卡2卡4卡精品| 亚洲国产精品专区欧美| 中文字幕免费在线视频6| 黄片无遮挡物在线观看| 国产精品国产三级国产专区5o | 日本欧美国产在线视频| 1000部很黄的大片| 久久精品夜色国产| 日本与韩国留学比较| 一级av片app| 26uuu在线亚洲综合色| 99久国产av精品| 日本五十路高清| 亚洲av中文av极速乱| 能在线免费看毛片的网站| 亚洲成人av在线免费| 欧美激情在线99| 亚洲经典国产精华液单| 欧美成人一区二区免费高清观看| 麻豆一二三区av精品| 男女边吃奶边做爰视频| 国产淫语在线视频| 九九热线精品视视频播放| 久久亚洲国产成人精品v| 超碰av人人做人人爽久久| 国产伦在线观看视频一区| 欧美性感艳星| 国产成人一区二区在线| 久久久久久大精品| 啦啦啦韩国在线观看视频| 99久久精品热视频| 成年av动漫网址| 亚洲成人中文字幕在线播放| 国产精品久久电影中文字幕| 免费av不卡在线播放| 亚洲va在线va天堂va国产| 国产高潮美女av| 麻豆精品久久久久久蜜桃| 男女下面进入的视频免费午夜| 亚洲不卡免费看| 亚洲av.av天堂| 天堂av国产一区二区熟女人妻| 成人特级av手机在线观看| 日本熟妇午夜| 91久久精品国产一区二区成人| 身体一侧抽搐| 亚洲欧美精品综合久久99| 日韩三级伦理在线观看| 成年版毛片免费区| 国产精品一二三区在线看| 国产av不卡久久| 搞女人的毛片| 男人和女人高潮做爰伦理| 久久这里只有精品中国| 欧美人与善性xxx| 水蜜桃什么品种好| 最近最新中文字幕免费大全7| 麻豆成人av视频| 熟女人妻精品中文字幕| 美女黄网站色视频| 亚洲最大成人中文| 人妻少妇偷人精品九色| 日韩大片免费观看网站 | 国产一区二区在线观看日韩| 国产成人午夜福利电影在线观看|