• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于ANP和GRAP組合的區(qū)域創(chuàng)新能力評(píng)價(jià)指標(biāo)權(quán)重的最小偏差計(jì)算方法研究

    2015-12-15 03:19:55傅為忠李寧馨
    軟科學(xué) 2015年11期
    關(guān)鍵詞:評(píng)價(jià)

    傅為忠 李寧馨

    摘要:針對(duì)以往研究中忽略評(píng)價(jià)指標(biāo)之間復(fù)雜聯(lián)系和相互影響的不足,提出了一種基于網(wǎng)絡(luò)層次分析法和灰色關(guān)聯(lián)分析法相結(jié)合的評(píng)價(jià)指標(biāo)權(quán)重計(jì)算方法,其方法既能充分考慮受訪專家主觀認(rèn)知,又能反映出統(tǒng)計(jì)數(shù)據(jù)所隱含的客觀信息;采用最小偏差組合權(quán)重方法最大限度兼顧兩方面結(jié)果,比使用單一權(quán)重確定方法更加合理,并為關(guān)聯(lián)指標(biāo)權(quán)重計(jì)算問題提供了一個(gè)有效的解決辦法;最后以實(shí)例證明了該方法的科學(xué)性和可行性。

    關(guān)鍵詞:網(wǎng)絡(luò)層次分析法;灰色關(guān)聯(lián)分析法;最小偏差;區(qū)域創(chuàng)新能力;評(píng)價(jià);指標(biāo)權(quán)重

    DOI:10.13956/j.ss.1001-8409.2015.11.28

    中圖分類號(hào):F0615;F224 文獻(xiàn)標(biāo)識(shí)碼:A 文章編號(hào):1001-8409(2015)11-0130-05

    Abstract:Previous studies ignored the complex linkages and interaction between the evaluation indexes during the evaluation. This paper puts forward a new comprehensive index weight calculation method based on combination of AHP and GRAP. This method not only can fully take the subjective perception of experts interviewed into account, but also reflect the objective information that the statistical statistics implied. Then the weight calculation model with minimum deviation is built, which integrates the evaluating methods to the maximum degree. Thus, it is more reasonable than just using a single weight determination method. The method can provide an effective solution for the index weight calculation problems. Finally, an example is given to prove that it is both scientific and practical.

    Key words:ANP; GRAP; minimum deviation; regional innovation capability; evidence; index weight

    1引言

    科技發(fā)展與技術(shù)創(chuàng)新是衡量社會(huì)生產(chǎn)力發(fā)展水平的重要標(biāo)志,也是推動(dòng)社會(huì)發(fā)展和經(jīng)濟(jì)增長(zhǎng)的主要力量?,F(xiàn)代社會(huì)科技發(fā)展步伐不斷加快,國(guó)家與國(guó)家、地區(qū)與地區(qū)之間的競(jìng)爭(zhēng)越來越體現(xiàn)在區(qū)域創(chuàng)新能力的競(jìng)爭(zhēng)上。習(xí)近平總書記指出:“我國(guó)科技發(fā)展的方向就是創(chuàng)新、創(chuàng)新、再創(chuàng)新”[1]。然而我國(guó)各個(gè)地區(qū)長(zhǎng)期以來由于經(jīng)濟(jì)發(fā)展、地理位置、歷史條件、國(guó)家政策等方面的原因,在區(qū)域創(chuàng)新能力的分布上存在極大的不平衡性,因此科學(xué)而準(zhǔn)確地測(cè)定區(qū)域創(chuàng)新能力具有重要的現(xiàn)實(shí)意義。

    國(guó)內(nèi)外學(xué)者對(duì)區(qū)域創(chuàng)新能力進(jìn)行了相對(duì)豐富而深入的研究,并從多個(gè)不同角度提出對(duì)應(yīng)的區(qū)域創(chuàng)新能力指標(biāo)體系[2~6]。區(qū)域創(chuàng)新能力測(cè)度屬于多屬性決策問題,解決這類問題的一個(gè)關(guān)鍵步驟就是要確定屬性的權(quán)重信息[7]。確定評(píng)價(jià)體系中指標(biāo)權(quán)重的已有方法主要有:德爾菲法[8]、層次分析法[9]、主成分分析法[10]、CRITIC法[11]、粗糙集[12]、熵值法[13]等,這些方法或基于專家主觀經(jīng)驗(yàn),或基于客觀數(shù)據(jù)信息,或多或少都具有一定的局限和片面性。針對(duì)這個(gè)問題本文提出一種基于ANP和GRAP的區(qū)域創(chuàng)新能力評(píng)價(jià)指標(biāo)權(quán)重計(jì)算方法,這種方法不僅可以充分考慮到專家主觀知識(shí),還克服了AHP忽略指標(biāo)間相互聯(lián)系的不足;同時(shí)還可以利用灰色關(guān)聯(lián)分析法在處理少數(shù)據(jù)、貧信息、不確定性問題上的優(yōu)勢(shì)[14],我國(guó)現(xiàn)有統(tǒng)計(jì)數(shù)據(jù)十分有限,傳統(tǒng)數(shù)理方法難以奏效,而灰色系統(tǒng)理論方法能夠從有限的已知信息中得出令人較為滿意的結(jié)果。

    2 相關(guān)基礎(chǔ)理論

    21基于ANP的主觀指標(biāo)權(quán)重計(jì)算方法

    AHP(層次分析法)是最常用的主觀權(quán)重計(jì)算方法之一,一直以來都受到國(guó)內(nèi)外學(xué)者的青睞。但是這種方法將系統(tǒng)內(nèi)元素關(guān)系劃分為完全獨(dú)立的遞階層次結(jié)構(gòu),而忽略了他們之間相互依存和反饋的關(guān)系,與現(xiàn)實(shí)情況不符[15]。為了解決這個(gè)問題,1996年Satty在AHP方法的基礎(chǔ)上做出改進(jìn),提出了一種適應(yīng)復(fù)雜結(jié)構(gòu)的決策方法—ANP(網(wǎng)絡(luò)層次分析法)[16]。ANP將元素間的關(guān)系用網(wǎng)絡(luò)循環(huán)結(jié)構(gòu)來表示,能夠更為準(zhǔn)確地刻畫出事物之間的聯(lián)系,是一種更符合現(xiàn)實(shí)情況和更為有效的權(quán)重確定方法[17]。

    典型的ANP結(jié)構(gòu)包括控制層與網(wǎng)絡(luò)層兩部分,如圖1所示。設(shè)控制層中元素分別為B1,B2,……,BN;元素集分別為C1,C2,……,CN;元素集Ci包含元素ei1,ei2,……;eini(i=1,2,……,N)。控制層各準(zhǔn)則相互獨(dú)立,與AHP結(jié)構(gòu)相同,每個(gè)準(zhǔn)則相對(duì)于目標(biāo)的權(quán)重可由AHP方法求得。網(wǎng)絡(luò)層是存在著依賴和反饋的網(wǎng)絡(luò)結(jié)構(gòu),因此進(jìn)行元素兩兩比較時(shí)須采用間接優(yōu)勢(shì)度,即給定主準(zhǔn)則Bs,次準(zhǔn)則Cj中元素ejk,Ci中的元素兩兩比較相對(duì)于次準(zhǔn)則的影響程度構(gòu)成判斷矩陣。若該判斷矩陣通過一致性檢驗(yàn)則它的歸一化特征向量構(gòu)成矩陣Wij的第k列,最終可得到在Bs準(zhǔn)則下的超矩陣W=(Wij)。同樣方法可求出在準(zhǔn)則Bs準(zhǔn)則下元素組權(quán)重矩陣A,再計(jì)算加權(quán)超矩陣W=A×W=(aij×Wij),最后根據(jù)加權(quán)超矩陣構(gòu)造極限超矩陣,再由極限超矩陣得出權(quán)重。

    22 基于灰色關(guān)聯(lián)分析的客觀指標(biāo)權(quán)重計(jì)算方法

    灰色系統(tǒng)理論[18]是由我國(guó)學(xué)者鄧聚龍于1982年創(chuàng)立的不確定性系統(tǒng)研究方法,灰色關(guān)聯(lián)分析是灰色系統(tǒng)理論的主要分支之一,它是一種新的量化分析系統(tǒng)動(dòng)態(tài)過程的因素分析方法?;疑P(guān)聯(lián)分析的基本思想是根據(jù)因素序列曲線的相似程度來判斷其關(guān)聯(lián)程度是否緊密,若曲線相似度越大,則因素關(guān)聯(lián)度越大;反之越小[19]。

    應(yīng)用灰色關(guān)聯(lián)分析方法確定指標(biāo)權(quán)重首先要選定反映區(qū)域創(chuàng)新系統(tǒng)行為特征的測(cè)度指標(biāo)。研究表明,專利已成為科技的核心和最具有經(jīng)濟(jì)價(jià)值部分[20],也是科技發(fā)展的重要指示器[21]。李習(xí)保[22]和漆艷茹[20]等學(xué)者都選擇專利數(shù)據(jù)來作為衡量區(qū)域創(chuàng)新能力的測(cè)度指標(biāo),并得出了較為科學(xué)和可信的結(jié)論。因此本文選定發(fā)明專利申請(qǐng)量作為反映區(qū)域創(chuàng)新系統(tǒng)行為特征的指標(biāo),同時(shí)由于從研發(fā)投入到專利申請(qǐng)之間存在時(shí)滯[20],故將滯后期3年內(nèi)的指標(biāo)數(shù)據(jù)都納入考慮范圍。

    基于GRAP方法求解區(qū)域創(chuàng)新能力指標(biāo)權(quán)重的過程可以描述如下:

    (1)計(jì)算各序列始點(diǎn)零化像

    將專利申請(qǐng)量設(shè)為母因素e0,選擇初值化算子將母因素和子因素原始數(shù)據(jù)作無量綱化處理。設(shè)因素ei的原始數(shù)據(jù)行為數(shù)列為

    23基于最小偏差的組合指標(biāo)權(quán)重計(jì)算方法

    利用以上所述ANP和GRAP分別計(jì)算出對(duì)應(yīng)的主、客觀指標(biāo)權(quán)重以后,對(duì)得到的結(jié)果進(jìn)行簡(jiǎn)單線性加權(quán),最后得到的組合指標(biāo)權(quán)重即:

    wif=(1-u)wia+uwigi=1,2, ……,n(6)

    其中wif表示第i項(xiàng)指標(biāo)的綜合權(quán)重,wia表示第i項(xiàng)指標(biāo)用ANP方法求出的主觀權(quán)重,wig表示第i項(xiàng)指標(biāo)用GRAP方法求出的客觀權(quán)重。u表示客觀權(quán)重在最后的綜合權(quán)重中所占的比例,這里u一般根據(jù)決策者主觀偏好來確定。為了兼顧權(quán)重指標(biāo)決策過程中的主客觀性,本文采用基于最小偏差的組合賦權(quán)法來確定最終的綜合權(quán)重。

    3實(shí)例分析

    基于以上所述權(quán)重計(jì)算方法,研究對(duì)我國(guó)區(qū)域創(chuàng)新能力評(píng)價(jià)指標(biāo)賦予權(quán)重的問題。以我國(guó)31個(gè)省級(jí)行政區(qū)2012年的區(qū)域創(chuàng)新能力為研究對(duì)象,先利用ANP方法計(jì)算主觀權(quán)重,再利用擴(kuò)展灰色關(guān)聯(lián)方法計(jì)算客觀權(quán)重,最后綜合這兩種方法得出最終權(quán)重結(jié)果。

    31主觀權(quán)重計(jì)算

    本文選取我國(guó)31個(gè)省級(jí)行政區(qū)作為研究對(duì)象計(jì)算區(qū)域創(chuàng)新能力評(píng)價(jià)指標(biāo)權(quán)重信息。根據(jù)區(qū)域創(chuàng)新能力的內(nèi)涵及特點(diǎn),從三個(gè)維度B={區(qū)域創(chuàng)新投入能力,區(qū)域創(chuàng)新環(huán)境能力,區(qū)域創(chuàng)新產(chǎn)出能力}來評(píng)價(jià)區(qū)域創(chuàng)新能力,其中區(qū)域投入能力元素集C1={R&D經(jīng)費(fèi)內(nèi)部支出e11,地方財(cái)政科學(xué)技術(shù)支出e12,各地區(qū)研究與開發(fā)機(jī)構(gòu)R&D課題數(shù)e13},區(qū)域環(huán)境能力元素集C2={普通高等學(xué)校數(shù)量e21,地區(qū)生產(chǎn)總值e22,城鎮(zhèn)居民年人均可支配收入e23},區(qū)域產(chǎn)出能力元素集C3={各地區(qū)高技術(shù)產(chǎn)業(yè)主營(yíng)業(yè)務(wù)收入e31,規(guī)模以上企業(yè)新產(chǎn)品銷售收入e32,SCI收錄科技論文數(shù)e33}。

    (1)建立ANP模型

    結(jié)合該區(qū)域創(chuàng)新能力體系中各指標(biāo)之間的相互關(guān)系,應(yīng)用Super Decisions軟件來構(gòu)建區(qū)域創(chuàng)新能力的ANP結(jié)構(gòu)圖(如圖2)。

    (2)計(jì)算超矩陣、加權(quán)超矩陣和極限矩陣

    這一步的核心步驟是建立判斷矩陣,本文采用1~9標(biāo)度問卷法來比較指標(biāo)間重要性。當(dāng)所有的比較都完成之后就可以得到超矩陣、加權(quán)超矩陣和極限矩陣。

    (3)確定各指標(biāo)權(quán)重信息

    經(jīng)上述兩步操作直接得到各指標(biāo)對(duì)應(yīng)的二級(jí)權(quán)重和極限權(quán)重,極限權(quán)重就是該指標(biāo)相對(duì)于目標(biāo)變量的最終權(quán)重(如圖3)。

    32客觀權(quán)重計(jì)算

    本文選取全國(guó)31個(gè)省2012年區(qū)域創(chuàng)新能力為樣本,指標(biāo)數(shù)據(jù)全部來源于《中國(guó)統(tǒng)計(jì)年鑒》和《中國(guó)科技統(tǒng)計(jì)年鑒》等國(guó)家權(quán)威部門發(fā)布的相關(guān)年鑒公報(bào)。因篇幅限制略去具體數(shù)據(jù),下同。

    (1)計(jì)算各序列始點(diǎn)零化像

    按照式(1)將母因素和子因素原始數(shù)據(jù)作無量綱化處理,初值化處理后得到無量綱數(shù)據(jù)表。

    (2)計(jì)算灰色關(guān)聯(lián)系數(shù)

    分別根據(jù)式(2)和式(3)計(jì)算絕對(duì)差Δmax和Δmin,得到Δmin=0,Δmax=492。根據(jù)式(4)取ρ=05計(jì)算出關(guān)聯(lián)系數(shù)序列表。

    (3)計(jì)算灰色關(guān)聯(lián)度

    根據(jù)式(5)計(jì)算各子因素與母因素的灰色關(guān)聯(lián)度,最終計(jì)算出的關(guān)聯(lián)度如表1所示。

    33綜合主客觀確定組合權(quán)重

    通過ANP和GRAP分別獲得每個(gè)指標(biāo)i對(duì)應(yīng)的主觀權(quán)重wia和客觀權(quán)重wig,把計(jì)算結(jié)果代入方程組(12)中得到方程組(14):

    (∑ni=1μ21i)α1-(∑ni=1μ2iμ1i)α2+λ2=0

    -(∑ni=1μ1iμ2i)α1+(∑ni=1μ22i)α2+λ2=0

    α1+α2=0(14)

    代入數(shù)據(jù)即可求得α*=(α1,α2)=(04539,05461),那么

    wif=04539wia+05461wig,從而得到最終的綜合權(quán)重計(jì)算結(jié)果如表2所示。

    從表2看出:采用ANP方法得到的主觀權(quán)重過于集中在區(qū)域創(chuàng)新環(huán)境能力,而忽略了區(qū)域創(chuàng)新投入能力和區(qū)域創(chuàng)新產(chǎn)出能力的重要性;采用GRAP方法得到的客觀權(quán)重區(qū)分度較小,不能有效地區(qū)分各個(gè)指標(biāo)的重要性權(quán)重,很可能會(huì)掩蓋重要性較強(qiáng)的指標(biāo)應(yīng)該賦予的權(quán)重。而本文提出的綜合權(quán)重確定方法可以規(guī)避兩種方法的不足,最大限度地兼顧主觀權(quán)重和客觀權(quán)重賦權(quán)結(jié)果,因此比采取單一的GRAP方法確定權(quán)重更加合理、可信。

    4結(jié)論

    通過以上分析,得出如下結(jié)論:

    (1)以ANP方法計(jì)算出的主觀權(quán)重克服了AHP方法忽視指標(biāo)間聯(lián)系和反饋關(guān)系的不足,更加符合實(shí)際情況;以GRAP方法計(jì)算出的客觀權(quán)重可以充分有限地統(tǒng)計(jì)數(shù)據(jù),計(jì)算指標(biāo)間的關(guān)聯(lián)度進(jìn)而得出他們的客觀權(quán)重。但是單一的依靠ANP方法或者GRAP方法過于片面,只有將他們以一種恰當(dāng)?shù)姆绞浇Y(jié)合起來,綜合主觀和客觀兩方面才能全面地確定指標(biāo)權(quán)重。本文采用最小偏差組合偏差的方法確定ANP和GRAP方法的權(quán)重,兼顧兩種方法的優(yōu)點(diǎn)和克服各自的不足。因此,基于ANP和GRAP的組合權(quán)重計(jì)算方法具有較大的理論價(jià)值。

    (2)在實(shí)際應(yīng)用基于ANP和GRAP方法的組合權(quán)重計(jì)算方法時(shí),可以利用專門的軟件Super Decisions和Matlab在計(jì)算機(jī)上輕松實(shí)現(xiàn),這種方法在大數(shù)據(jù)樣本下也可以保持較高的計(jì)算效率,因此,基于ANP和GRAP的組合權(quán)重計(jì)算方法具有較好的運(yùn)用前景和推廣價(jià)值。

    5結(jié)語

    本文針對(duì)以往區(qū)域創(chuàng)新能力評(píng)價(jià)研究中只注重主觀權(quán)重或只注重客觀權(quán)重的缺點(diǎn),提出一種基于ANP和GRAP相結(jié)合的主客觀權(quán)重計(jì)算方法,將ANP和GRAP結(jié)合起來確定區(qū)域創(chuàng)新能力指標(biāo)權(quán)重是一個(gè)新的嘗試。這種方法不僅有一定的創(chuàng)新性,也具有較強(qiáng)的可操作性,易于在計(jì)算機(jī)上實(shí)現(xiàn)。需要指出的是,本文提出的權(quán)重計(jì)算方法不僅適用于區(qū)域創(chuàng)新能力指標(biāo)權(quán)重,同時(shí)也可廣泛適用于其他評(píng)價(jià)問題中關(guān)聯(lián)指標(biāo)的權(quán)重計(jì)算。另外,本文是將ANP和GRAP方法組合起來用最小偏差原則確定權(quán)重,也可以根據(jù)實(shí)際情況將多種權(quán)重計(jì)算方法以相同方法結(jié)合起來確定權(quán)重。最后選用2012年的區(qū)域創(chuàng)新能力權(quán)重計(jì)算為實(shí)例,確定每個(gè)指標(biāo)對(duì)應(yīng)的權(quán)重,進(jìn)一步說明了本文提出的基于ANP-GRAP的指標(biāo)權(quán)重計(jì)算方法是一種科學(xué)有效而全面的權(quán)重計(jì)算方法。

    參考文獻(xiàn):

    [1]習(xí)近平.在中國(guó)科學(xué)院第十七次院士大會(huì)、中國(guó)工程院第十二次院士大會(huì)上的講話[N].人民日?qǐng)?bào),2014-6-10.

    [2]Antonio K W, Lau William Lo.Regional Innovation System,Absorptive Capacity and Innovation Performance:An Empirical Study[J].Technological Forecasting Social Change,2015(92):99-114.

    [3]Tao Huaye,Sui Jinxue,Liu Hui etc.Synthetic Evaluation of Science and Technical Innovation Ability Based on Extension[A].Jiang Y.Modelling and SimulationWorld Academic Union[C].Manchester:World Acadamy Press,2009523-530.

    [4]Shu Liang Zhao,Wei Song,Dong Yun Zhu,Xiao Bao Peng,Wenjing Cai.Evaluating Chinas Regional Innovation Capacity from the Innovation Actors Perspective——An AHP and Cluster Analytical Approach[J].Technology in Society,2013,3(35):182-190.

    [5]Rinaldo Evangelista,Simona Iammarino,Valeria Mastrostefano,Alberto Silvani.Measuring the Regional Dimension of Innovation,Lessons from the Italian Innovation Survey[J].Technovation,2001,11(21):733-745.

    [6]柳卸林,胡志堅(jiān).中國(guó)區(qū)域創(chuàng)新能力的分布與成因[J].科學(xué)學(xué)研究,2002(5):550-556.

    [7]劉業(yè)政,徐德鵬,姜元春.多屬性群決策中權(quán)重自適應(yīng)調(diào)整的方法[J].系統(tǒng)工程與電子技術(shù),2007,29(1):45-48.

    [8]徐磊.技術(shù)預(yù)見方法的探索與實(shí)踐思考——基于德爾菲法和技術(shù)路線圖的對(duì)接[J].科學(xué)學(xué)與科學(xué)技術(shù)管理,2011,32(11):37-48.

    [9]賓光富,李學(xué)軍,DHILLON BalbirS,楚萬文.基于模糊層次分析法的設(shè)備狀態(tài)系統(tǒng)量化評(píng)價(jià)新方法[J].系統(tǒng)工程理論與實(shí)踐,2010,30(4):744-750.

    [10]鈔小靜,任保平.中國(guó)經(jīng)濟(jì)增長(zhǎng)質(zhì)量的時(shí)序變化與地區(qū)差異分析[J].經(jīng)濟(jì)研究,2011,(4):26-40.

    [11]曹瑋,王瑛.基于改進(jìn)CRITIC-CPM的科技獎(jiǎng)勵(lì)評(píng)價(jià)模型[J].科學(xué)學(xué)與科學(xué)技術(shù)管理,2012,33(2):17-21.

    [12]張曉明.基于粗糙集——AHM的裝備制造業(yè)企業(yè)創(chuàng)新能力評(píng)價(jià)指標(biāo)權(quán)重計(jì)算研究[J].中國(guó)軟科學(xué),2014,6:151-158.

    [13]章穗,張梅,遲國(guó)泰.基于熵權(quán)法的科學(xué)技術(shù)評(píng)價(jià)模型及其實(shí)證研究[J].管理學(xué)報(bào),2010,7(1):34-42.

    [14]劉思峰,黨耀國(guó),方志耕,謝乃明,等.灰色系統(tǒng)理論及其應(yīng)用(第五版)[M].北京:科學(xué)出版社,2010.

    [15]孫宏才,田平,王蓮芬.網(wǎng)絡(luò)層次分析法與決策科學(xué)[M].北京:國(guó)防工業(yè)出版社,2011.

    [16]Satty T L.Decision Making with Dependence and Feedback[M].RWS Publication,1996.

    [17]Ozer Uygun, Hasan Kacamak, ünal Atakan Kahraman.An Integrated Dematel and Fuzzy Anp Techniques for Evaluation and Selection of Outsourcing Provider for a Telecommunication Company[J].Computers Industrial Engineering,2015(86):137-146.

    [18]Deng Ju Long.The Control Problems of Grey Systems[J].System Control Letters, 1982,1(5):288-294.

    [19]Cai Fu, Xiang Gao, Ming Liu, et al.Grap:Grey Risk Assessment Based on Projection in Ad Hoc Networks[J].Journal of Parallel and Distributed Computing,2011,71(9):1249-1260.

    [20]漆艷茹,劉云,侯媛媛.基于專利影響因素分析的區(qū)域創(chuàng)新能力比較研究[J].中國(guó)管理科學(xué),2013,11(21):594-599.

    [21]王燕玲.基于專利分析的行業(yè)技術(shù)創(chuàng)新研究[J].科學(xué)學(xué)研究,2009,(27):622-628.

    [22]李習(xí)保.中國(guó)區(qū)域創(chuàng)新能力變遷的實(shí)證分析:基于創(chuàng)新系統(tǒng)的觀點(diǎn)[J].管理世界,2007,12:18-30.

    [23]劉德海,于倩,馬曉南,等.基于最小偏差組合權(quán)重的突發(fā)事件應(yīng)急能力評(píng)價(jià)模型[J].中國(guó)管理科學(xué),2014,11(22):79-86.

    (責(zé)任編輯:王惠萍)

    猜你喜歡
    評(píng)價(jià)
    SBR改性瀝青的穩(wěn)定性評(píng)價(jià)
    石油瀝青(2021年4期)2021-10-14 08:50:44
    中藥治療室性早搏系統(tǒng)評(píng)價(jià)再評(píng)價(jià)
    自制C肽質(zhì)控品及其性能評(píng)價(jià)
    寫作交流與評(píng)價(jià):詞的欣賞
    基于Moodle的學(xué)習(xí)評(píng)價(jià)
    關(guān)于項(xiàng)目后評(píng)價(jià)中“專項(xiàng)”后評(píng)價(jià)的探討
    HBV-DNA提取液I的配制和應(yīng)用評(píng)價(jià)
    有效評(píng)價(jià)讓每朵花兒都綻放
    模糊數(shù)學(xué)評(píng)價(jià)法在水質(zhì)評(píng)價(jià)中的應(yīng)用
    治淮(2013年1期)2013-03-11 20:05:18
    保加利亞轉(zhuǎn)軌20年評(píng)價(jià)
    久久人人爽人人片av| 久久精品国产亚洲网站| 免费人成在线观看视频色| 亚洲国产日韩欧美精品在线观看| 亚洲精品自拍成人| 97在线视频观看| 在现免费观看毛片| 久久久久久久亚洲中文字幕| 国产熟女欧美一区二区| 亚洲国产av新网站| 插阴视频在线观看视频| 丝瓜视频免费看黄片| 内射极品少妇av片p| 国产乱人视频| 嫩草影院精品99| 熟女人妻精品中文字幕| 国产欧美日韩精品一区二区| 日本免费在线观看一区| 亚洲av男天堂| 毛片女人毛片| 中文字幕人妻熟人妻熟丝袜美| 欧美不卡视频在线免费观看| 精品久久久久久电影网| 午夜免费激情av| 欧美成人午夜免费资源| 白带黄色成豆腐渣| 免费av毛片视频| 少妇裸体淫交视频免费看高清| 欧美成人一区二区免费高清观看| 日本欧美国产在线视频| 少妇人妻精品综合一区二区| 两个人视频免费观看高清| 一个人观看的视频www高清免费观看| 午夜精品在线福利| 最近2019中文字幕mv第一页| 99热这里只有是精品50| 中文天堂在线官网| 91久久精品国产一区二区三区| 乱系列少妇在线播放| 夜夜爽夜夜爽视频| 亚洲欧美一区二区三区黑人 | 国产伦精品一区二区三区视频9| 久久久久免费精品人妻一区二区| 天天一区二区日本电影三级| .国产精品久久| 亚洲精品,欧美精品| 日韩欧美三级三区| 少妇裸体淫交视频免费看高清| 亚洲国产精品成人综合色| 人妻少妇偷人精品九色| 国产 一区 欧美 日韩| 精品久久久久久久人妻蜜臀av| 一级毛片aaaaaa免费看小| 国内精品一区二区在线观看| 99视频精品全部免费 在线| 日本与韩国留学比较| 床上黄色一级片| 国产精品美女特级片免费视频播放器| 久热久热在线精品观看| 免费观看精品视频网站| 精品国产一区二区三区久久久樱花 | 一级二级三级毛片免费看| 超碰av人人做人人爽久久| 97热精品久久久久久| 午夜爱爱视频在线播放| 中文字幕亚洲精品专区| 日本一本二区三区精品| 亚洲人成网站在线观看播放| 成年版毛片免费区| 22中文网久久字幕| 热99在线观看视频| 日韩av免费高清视频| 国产免费视频播放在线视频 | 午夜福利网站1000一区二区三区| 美女主播在线视频| 一级毛片我不卡| 丝袜喷水一区| 永久网站在线| 日本猛色少妇xxxxx猛交久久| 成人av在线播放网站| 夜夜爽夜夜爽视频| 在线观看av片永久免费下载| 日韩av不卡免费在线播放| 久久久久久久久久久丰满| 极品教师在线视频| 亚洲经典国产精华液单| 身体一侧抽搐| 日韩一本色道免费dvd| 亚洲国产精品sss在线观看| av又黄又爽大尺度在线免费看| 国产精品爽爽va在线观看网站| 欧美日韩国产mv在线观看视频 | 亚洲欧美精品专区久久| 免费不卡的大黄色大毛片视频在线观看 | av女优亚洲男人天堂| 亚洲人成网站在线播| 国产午夜精品一二区理论片| 大陆偷拍与自拍| 少妇人妻一区二区三区视频| 麻豆国产97在线/欧美| 男人和女人高潮做爰伦理| 国产伦精品一区二区三区四那| 男人舔奶头视频| 舔av片在线| 国产黄色视频一区二区在线观看| 欧美成人午夜免费资源| 国产伦一二天堂av在线观看| av网站免费在线观看视频 | 国产片特级美女逼逼视频| 亚洲精品456在线播放app| 伊人久久国产一区二区| 免费在线观看成人毛片| 熟妇人妻不卡中文字幕| 婷婷色av中文字幕| 国产一区有黄有色的免费视频 | 少妇丰满av| 国产精品爽爽va在线观看网站| 99久国产av精品国产电影| 久久久久久久大尺度免费视频| 成人欧美大片| 欧美日韩一区二区视频在线观看视频在线 | 日韩视频在线欧美| av.在线天堂| 男女下面进入的视频免费午夜| 又粗又硬又长又爽又黄的视频| 六月丁香七月| 国产中年淑女户外野战色| 蜜桃久久精品国产亚洲av| 波多野结衣巨乳人妻| 成人亚洲欧美一区二区av| 哪个播放器可以免费观看大片| 九色成人免费人妻av| 性色avwww在线观看| 欧美 日韩 精品 国产| 精品久久久久久久人妻蜜臀av| 欧美区成人在线视频| 日本色播在线视频| 乱人视频在线观看| 日韩亚洲欧美综合| 精品亚洲乱码少妇综合久久| 搞女人的毛片| 自拍偷自拍亚洲精品老妇| 亚洲国产欧美人成| 美女内射精品一级片tv| 极品教师在线视频| 伊人久久精品亚洲午夜| 亚洲欧美一区二区三区黑人 | 亚洲欧美精品自产自拍| 婷婷六月久久综合丁香| 视频中文字幕在线观看| 午夜激情欧美在线| 免费观看精品视频网站| 在线天堂最新版资源| 久久精品久久久久久噜噜老黄| 91在线精品国自产拍蜜月| 精品人妻熟女av久视频| 十八禁网站网址无遮挡 | 精品久久久久久久人妻蜜臀av| 精品人妻视频免费看| 夫妻性生交免费视频一级片| 男女国产视频网站| 亚洲人成网站在线播| 寂寞人妻少妇视频99o| 欧美性感艳星| 天堂网av新在线| 亚洲精品,欧美精品| 一个人观看的视频www高清免费观看| 亚洲av成人精品一区久久| 婷婷色麻豆天堂久久| 国产免费视频播放在线视频 | 国产亚洲午夜精品一区二区久久 | 人妻制服诱惑在线中文字幕| 亚洲欧洲日产国产| 精品久久久久久久久久久久久| 一区二区三区高清视频在线| 18禁在线无遮挡免费观看视频| 亚洲三级黄色毛片| 久久国产乱子免费精品| 日韩欧美精品免费久久| 99re6热这里在线精品视频| 国产成人91sexporn| 午夜爱爱视频在线播放| 国产成人精品福利久久| 久久久精品94久久精品| 国产 一区 欧美 日韩| 午夜福利在线在线| 午夜精品在线福利| 久久久久久久久久久免费av| 听说在线观看完整版免费高清| 亚洲av在线观看美女高潮| 亚洲经典国产精华液单| 国产精品av视频在线免费观看| 一区二区三区四区激情视频| 秋霞伦理黄片| 日日撸夜夜添| 久久久久精品性色| 国产免费又黄又爽又色| 国产又色又爽无遮挡免| 欧美不卡视频在线免费观看| 久久99蜜桃精品久久| 卡戴珊不雅视频在线播放| 精品久久久噜噜| 久久99蜜桃精品久久| 最后的刺客免费高清国语| 久久久久久久久中文| 菩萨蛮人人尽说江南好唐韦庄| 国产精品美女特级片免费视频播放器| 精品久久久久久久人妻蜜臀av| 高清毛片免费看| 能在线免费观看的黄片| 中文字幕久久专区| 免费无遮挡裸体视频| 免费电影在线观看免费观看| 亚洲最大成人手机在线| 午夜精品一区二区三区免费看| 免费大片黄手机在线观看| 免费观看a级毛片全部| 国产精品久久视频播放| 亚洲三级黄色毛片| 永久免费av网站大全| 国产亚洲91精品色在线| 国产乱来视频区| 久久久久久久久久成人| 亚洲欧美成人综合另类久久久| 午夜亚洲福利在线播放| 99久国产av精品| 免费无遮挡裸体视频| 久久99热这里只有精品18| 日日干狠狠操夜夜爽| 婷婷色av中文字幕| 女人久久www免费人成看片| 一级a做视频免费观看| 国产91av在线免费观看| 国产午夜精品久久久久久一区二区三区| av卡一久久| 国产精品人妻久久久久久| 一级毛片 在线播放| 色视频www国产| 免费观看在线日韩| 亚洲精品影视一区二区三区av| 亚洲人成网站在线观看播放| 又粗又硬又长又爽又黄的视频| 秋霞在线观看毛片| 亚洲最大成人中文| eeuss影院久久| 毛片一级片免费看久久久久| 乱码一卡2卡4卡精品| 成人毛片60女人毛片免费| 国产一区二区亚洲精品在线观看| 老女人水多毛片| 美女大奶头视频| 午夜爱爱视频在线播放| 永久网站在线| 国语对白做爰xxxⅹ性视频网站| 日日摸夜夜添夜夜添av毛片| 国产一区二区亚洲精品在线观看| 天堂网av新在线| 日韩精品有码人妻一区| 99久国产av精品| 日韩av不卡免费在线播放| 日韩欧美精品免费久久| 亚洲精华国产精华液的使用体验| av在线观看视频网站免费| 国产国拍精品亚洲av在线观看| 男插女下体视频免费在线播放| 国产高清三级在线| 亚洲国产精品专区欧美| 中文字幕亚洲精品专区| 亚洲国产精品sss在线观看| 久久久久精品性色| 日本黄大片高清| 久久韩国三级中文字幕| 少妇熟女aⅴ在线视频| 男女国产视频网站| 秋霞伦理黄片| 久久久国产一区二区| 亚洲av在线观看美女高潮| 国产一区二区三区av在线| 精品一区二区三区视频在线| 亚洲电影在线观看av| 日日摸夜夜添夜夜爱| 国产亚洲精品av在线| 天堂√8在线中文| 国产在线一区二区三区精| 亚洲乱码一区二区免费版| 简卡轻食公司| 纵有疾风起免费观看全集完整版 | 亚洲久久久久久中文字幕| 免费高清在线观看视频在线观看| 亚洲欧美一区二区三区国产| 不卡视频在线观看欧美| .国产精品久久| 看黄色毛片网站| 国产乱人视频| 欧美性感艳星| 伊人久久国产一区二区| 永久免费av网站大全| 欧美另类一区| 麻豆精品久久久久久蜜桃| 国产探花在线观看一区二区| 国产成人精品久久久久久| 精品久久国产蜜桃| 精品久久久久久久末码| 欧美3d第一页| a级一级毛片免费在线观看| 国产探花在线观看一区二区| 神马国产精品三级电影在线观看| 高清欧美精品videossex| 亚洲色图av天堂| 免费电影在线观看免费观看| 国产精品国产三级国产专区5o| 久久久久免费精品人妻一区二区| 国产三级在线视频| 国产高清国产精品国产三级 | 美女被艹到高潮喷水动态| 欧美最新免费一区二区三区| 久久精品久久久久久噜噜老黄| 欧美性感艳星| 午夜激情福利司机影院| 国产 一区 欧美 日韩| 欧美激情久久久久久爽电影| 男女下面进入的视频免费午夜| 日本av手机在线免费观看| av线在线观看网站| 麻豆成人av视频| 国内少妇人妻偷人精品xxx网站| 国国产精品蜜臀av免费| 99热6这里只有精品| 亚洲精品一二三| 久久国产乱子免费精品| 亚洲国产精品成人综合色| 亚洲人成网站在线播| 国产在线男女| 22中文网久久字幕| 免费电影在线观看免费观看| 国产成人a∨麻豆精品| 免费看日本二区| kizo精华| 日韩精品青青久久久久久| 国产精品三级大全| 久久久色成人| 成人综合一区亚洲| 国产高清不卡午夜福利| 成人国产麻豆网| av卡一久久| 色尼玛亚洲综合影院| 免费看光身美女| 日韩欧美精品v在线| a级毛片免费高清观看在线播放| 国内精品宾馆在线| 国产在视频线在精品| 国产白丝娇喘喷水9色精品| 五月伊人婷婷丁香| 日本免费a在线| 又爽又黄无遮挡网站| 人人妻人人看人人澡| 一区二区三区高清视频在线| 搡老乐熟女国产| 人妻系列 视频| 免费av观看视频| 国产午夜精品久久久久久一区二区三区| 久久久精品94久久精品| 99热这里只有是精品在线观看| 18+在线观看网站| 日产精品乱码卡一卡2卡三| 夫妻午夜视频| 久久精品国产亚洲网站| 看黄色毛片网站| 91av网一区二区| 激情 狠狠 欧美| 蜜桃亚洲精品一区二区三区| 国产成人一区二区在线| 精华霜和精华液先用哪个| 色播亚洲综合网| 丝瓜视频免费看黄片| 国产av码专区亚洲av| 一级片'在线观看视频| 午夜激情福利司机影院| 亚洲色图av天堂| 日日撸夜夜添| 日韩 亚洲 欧美在线| 免费看光身美女| 免费不卡的大黄色大毛片视频在线观看 | 天天躁日日操中文字幕| 观看免费一级毛片| 亚洲精品,欧美精品| 最近手机中文字幕大全| 精品一区二区三卡| 人人妻人人澡欧美一区二区| 97热精品久久久久久| 国产探花在线观看一区二区| 国产午夜精品久久久久久一区二区三区| 性插视频无遮挡在线免费观看| 中文字幕久久专区| 亚洲国产av新网站| 男人狂女人下面高潮的视频| 国产老妇女一区| 欧美一区二区亚洲| 久久久久久久亚洲中文字幕| 亚洲自拍偷在线| videossex国产| 国产欧美日韩精品一区二区| 男人舔女人下体高潮全视频| 在现免费观看毛片| 不卡视频在线观看欧美| 菩萨蛮人人尽说江南好唐韦庄| 国产乱来视频区| 亚洲成人av在线免费| 九色成人免费人妻av| 久久99热6这里只有精品| 国产成人精品福利久久| 在线免费观看的www视频| 99热这里只有是精品在线观看| 欧美区成人在线视频| 99九九线精品视频在线观看视频| 一级爰片在线观看| 亚洲欧美成人综合另类久久久| 青春草国产在线视频| 欧美日韩一区二区视频在线观看视频在线 | 欧美日韩亚洲高清精品| 国产精品一区二区性色av| 欧美性猛交╳xxx乱大交人| 久久久久久久国产电影| 成年女人看的毛片在线观看| 精品久久久久久久久av| 春色校园在线视频观看| 日韩欧美一区视频在线观看 | 亚洲激情五月婷婷啪啪| 国产免费视频播放在线视频 | 日本wwww免费看| 日韩亚洲欧美综合| av播播在线观看一区| 日韩欧美精品v在线| 亚洲婷婷狠狠爱综合网| 久久久久免费精品人妻一区二区| 七月丁香在线播放| 熟女人妻精品中文字幕| 天天一区二区日本电影三级| 国产精品爽爽va在线观看网站| 成人一区二区视频在线观看| 亚洲怡红院男人天堂| 女的被弄到高潮叫床怎么办| 日韩av不卡免费在线播放| 免费观看的影片在线观看| 国产精品一区二区三区四区免费观看| 精品久久国产蜜桃| 亚洲精品乱码久久久v下载方式| 亚洲av国产av综合av卡| 亚洲综合精品二区| 伊人久久精品亚洲午夜| 最近视频中文字幕2019在线8| 午夜久久久久精精品| 在线观看一区二区三区| 亚洲精品第二区| 在线天堂最新版资源| 我要看日韩黄色一级片| 中文字幕人妻熟人妻熟丝袜美| 国产三级在线视频| 婷婷色综合www| 国产伦在线观看视频一区| 午夜激情久久久久久久| 亚洲人成网站在线播| 日韩欧美 国产精品| 亚洲aⅴ乱码一区二区在线播放| 一级毛片aaaaaa免费看小| 99久久精品热视频| 亚洲精品456在线播放app| 国产亚洲5aaaaa淫片| 国产精品一区www在线观看| 欧美三级亚洲精品| av卡一久久| 国产伦一二天堂av在线观看| 高清av免费在线| 特大巨黑吊av在线直播| 一级毛片黄色毛片免费观看视频| 偷拍熟女少妇极品色| 国产色婷婷99| 亚洲欧美成人综合另类久久久| 免费黄色在线免费观看| 午夜福利在线观看免费完整高清在| 欧美日韩视频高清一区二区三区二| 国产色婷婷99| 亚洲熟女精品中文字幕| 国产片特级美女逼逼视频| 亚洲成色77777| 久久久久久久午夜电影| 女人被狂操c到高潮| 久久久久久九九精品二区国产| 一区二区三区乱码不卡18| 久久久久国产网址| 久久久精品欧美日韩精品| 一级爰片在线观看| 日日撸夜夜添| 欧美极品一区二区三区四区| 欧美三级亚洲精品| 久久6这里有精品| 97超碰精品成人国产| 国产精品国产三级国产av玫瑰| 午夜激情福利司机影院| 大话2 男鬼变身卡| 美女内射精品一级片tv| 熟妇人妻久久中文字幕3abv| 天堂√8在线中文| av黄色大香蕉| 久久久久精品久久久久真实原创| 麻豆精品久久久久久蜜桃| 久久精品人妻少妇| 国产精品一区www在线观看| 成人亚洲欧美一区二区av| 搡老乐熟女国产| 亚洲精品一区蜜桃| 熟女电影av网| 日本爱情动作片www.在线观看| 91精品一卡2卡3卡4卡| 97在线视频观看| 国产色爽女视频免费观看| 免费播放大片免费观看视频在线观看| 亚洲精品第二区| 国产高潮美女av| 卡戴珊不雅视频在线播放| 国产伦在线观看视频一区| 有码 亚洲区| 国产色爽女视频免费观看| 男人舔女人下体高潮全视频| 人妻系列 视频| 国内少妇人妻偷人精品xxx网站| 毛片女人毛片| 亚洲av二区三区四区| 久久97久久精品| 尾随美女入室| 色综合站精品国产| 国产淫语在线视频| 亚洲精品色激情综合| 久久精品国产鲁丝片午夜精品| 免费观看a级毛片全部| 欧美3d第一页| 日韩精品青青久久久久久| 老司机影院成人| 99视频精品全部免费 在线| 69av精品久久久久久| 国产伦理片在线播放av一区| 一级a做视频免费观看| 一级爰片在线观看| 国产成人精品婷婷| 天堂影院成人在线观看| 久久这里只有精品中国| 极品教师在线视频| 自拍偷自拍亚洲精品老妇| 亚洲人与动物交配视频| 日本黄大片高清| av国产久精品久网站免费入址| 国产毛片a区久久久久| 国产精品女同一区二区软件| 小蜜桃在线观看免费完整版高清| 亚洲熟妇中文字幕五十中出| 免费黄频网站在线观看国产| 亚洲av成人精品一二三区| 男人狂女人下面高潮的视频| 亚洲精品久久久久久婷婷小说| 国产美女午夜福利| 国内精品美女久久久久久| 一区二区三区乱码不卡18| 久久久久久久久久久免费av| 日日干狠狠操夜夜爽| 国产伦在线观看视频一区| 91久久精品国产一区二区三区| 成年女人在线观看亚洲视频 | 国内精品美女久久久久久| 亚洲av一区综合| 别揉我奶头 嗯啊视频| av国产免费在线观看| 久久久久精品性色| 国产探花极品一区二区| 色综合站精品国产| 国产欧美日韩精品一区二区| 一级片'在线观看视频| 免费少妇av软件| 国产成年人精品一区二区| 又爽又黄a免费视频| 九九久久精品国产亚洲av麻豆| 中文字幕免费在线视频6| 精品久久久久久久久亚洲| 国产精品伦人一区二区| 精品人妻视频免费看| 成人鲁丝片一二三区免费| 2021天堂中文幕一二区在线观| 久久人人爽人人片av| freevideosex欧美| 少妇人妻精品综合一区二区| 91午夜精品亚洲一区二区三区| 国产麻豆成人av免费视频| 国产精品综合久久久久久久免费| 国产片特级美女逼逼视频| 国内精品美女久久久久久| 午夜精品在线福利| 亚洲欧美精品自产自拍| 大香蕉97超碰在线| 国产免费福利视频在线观看| 精品欧美国产一区二区三| 大话2 男鬼变身卡| 亚洲国产精品成人久久小说| 一区二区三区高清视频在线| 亚洲成人久久爱视频| 亚洲精品自拍成人| 久久久久性生活片| 国产 一区精品| 亚洲精品国产av蜜桃| 婷婷六月久久综合丁香| 老女人水多毛片| 日韩av免费高清视频| 亚洲人成网站在线观看播放| 久久综合国产亚洲精品| 99re6热这里在线精品视频| 性插视频无遮挡在线免费观看| 最近中文字幕2019免费版|