• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于h指數(shù)的專家引薦分析法與實(shí)例分析
    ——以我國物理類國家重點(diǎn)實(shí)驗(yàn)室評價(jià)為例

    2013-03-22 02:07:43殷之明周春雷
    中國科技資源導(dǎo)刊 2013年4期
    關(guān)鍵詞:指數(shù)值分析法檢索

    殷之明周春雷

    (1.集美大學(xué)學(xué)校辦公室,福建廈門 361021;2.鄭州大學(xué)信息管理系,河南鄭州 450001)

    基于h指數(shù)的專家引薦分析法與實(shí)例分析
    ——以我國物理類國家重點(diǎn)實(shí)驗(yàn)室評價(jià)為例

    殷之明1周春雷2

    (1.集美大學(xué)學(xué)校辦公室,福建廈門 361021;2.鄭州大學(xué)信息管理系,河南鄭州 450001)

    引薦分析法(CRA)通過分析高影響力作者的施引列表來尋找該作者眼中的學(xué)界同行,通過對同行h指數(shù)的分析,可以揭示施引者本身的學(xué)術(shù)地位。論文通過對我國物理類國家重點(diǎn)實(shí)驗(yàn)的引薦分析,發(fā)現(xiàn)它們應(yīng)用(引用)的文獻(xiàn)來自其本身或其他的一流科學(xué)家,而一流的科學(xué)家必然緊緊跟學(xué)科前沿。研究認(rèn)為,從某種意義上,我國物理類國家重點(diǎn)實(shí)驗(yàn)室已處在或基本處在世界一流物理類研究機(jī)構(gòu)行列。

    引文分析法;引薦分析法;h指數(shù);國家重點(diǎn)實(shí)驗(yàn)室;實(shí)驗(yàn)室評價(jià)

    美國著名情報(bào)學(xué)家尤金·加菲爾德(Gar f eld)認(rèn)為引文是學(xué)者付給同行的硬幣工資,引文測度能把一些有用的、客觀的因素引入到評價(jià)過程中,而只涉及少量的使用調(diào)查技術(shù)的費(fèi)用,是一種有效的同行專家評議方式[1]。葉繼元也認(rèn)為引文索引可以幫助確定知識或科學(xué)的結(jié)構(gòu),反映學(xué)科之間的滲透情況,可以從一個重要側(cè)面評價(jià)被引用論文、刊載被引論文期刊以及學(xué)者、學(xué)者群體的影響程度和水平[2]。由于引文具有如此重要的價(jià)值,引文分析法自Gar f eld創(chuàng)立以來一直是一種經(jīng)典的情報(bào)學(xué)分析方法,同時引文分析法也被發(fā)展成一種間接評價(jià)法,用以評價(jià)個人、團(tuán)隊(duì)、組織、機(jī)構(gòu)的學(xué)術(shù)貢獻(xiàn)。以此類推,對某機(jī)構(gòu)學(xué)術(shù)成果的頻繁施引,意味對對機(jī)構(gòu)學(xué)術(shù)貢獻(xiàn)的認(rèn)同[3-5]。

    1 概念

    引薦分析法(Citation Recommendation Analysis,CRA)是一種新型的引文分析法,通過從施引作者入手,不斷地尋找其領(lǐng)域同行、同行的同行來繪制整個研究領(lǐng)域的全景圖。它融合了引文分析法、知識圖譜分析等技術(shù),為研究領(lǐng)域內(nèi)的學(xué)術(shù)網(wǎng)絡(luò)關(guān)系和學(xué)科結(jié)構(gòu)提供了新的途徑。所謂引薦(CR)是指同一施引者對某人的多次引用行為[6]。從施引者的引用行為可知,對同一作者多次引用,意味著施引者對被引者學(xué)術(shù)貢獻(xiàn)的認(rèn)可。為了消除引薦行為的偶然性,我們將引用的下限,即至少引用的次數(shù),定義為引薦閾值(TCR)。只有超出引薦閾值的頻繁施引才會被采信為一次有效引薦,而一旦引用次數(shù)超出引薦閾值則數(shù)值大小將是無差別的[6-8]。

    與傳統(tǒng)引文分析法不同的是,引薦分析法對施引者給予足夠的關(guān)注。實(shí)際上,對于同一學(xué)術(shù)成果的引用,一般作者與領(lǐng)域?qū)<业闹匾潭纫彩遣灰粯拥?。馬鳳、武夷山認(rèn)為,一篇文獻(xiàn)被普通作者和知名作者引用,被粗略引用和詳細(xì)引用是不一樣的,高質(zhì)量的著作常被知名作者多次引用,引用認(rèn)同結(jié)合同行評議可以更全面客觀地評價(jià)作者及其著作[9]。絕大多數(shù)低產(chǎn)作者對特定領(lǐng)域的學(xué)術(shù)興趣很不穩(wěn)定,其學(xué)術(shù)判斷未必準(zhǔn)確,而專家往往因在特定領(lǐng)域進(jìn)行了長期深入研究,對相應(yīng)問題的看法常具有超越普通作者的見識,其對某作者的頻繁施引往往意味著對該作者學(xué)術(shù)貢獻(xiàn)的重視。我們在研究h指數(shù)的過程中發(fā)現(xiàn),高影響力作者的施引列表(其獨(dú)著或合著論文的參考文獻(xiàn)列表的匯總)蘊(yùn)藏著很多有價(jià)值的信息。絕大多數(shù)高影響力作者或其所在團(tuán)隊(duì)引用最多的是高影響力作者自己,其次是一些研究高影響力的相關(guān)的同行[6-8]。

    因此,我們在引薦分析中,通常通過h指數(shù)來遴選專家,故也稱為基于h指數(shù)的引薦分析法(H-index Based Experts Citation Recommendation Analysis,簡稱HBECRA)。其實(shí)質(zhì)是借鑒選舉過程,借助學(xué)科專家的學(xué)術(shù)洞察力和引薦及時發(fā)現(xiàn)學(xué)界新秀、其他研究領(lǐng)域值得關(guān)注的學(xué)者以及國際上有影響力的學(xué)者,彌補(bǔ)了傳統(tǒng)引文分析法對施引者關(guān)注不足的缺憾,為研究學(xué)科結(jié)構(gòu)開辟了新的途徑。如果將專家選擇尺度進(jìn)一步放寬,還可以勾勒更精細(xì)的學(xué)科結(jié)構(gòu)圖[6-8]。

    同理,就一個機(jī)構(gòu)而言,其研究成果經(jīng)常引用普通作者和知名作者,其重要程度是不一樣的。通常機(jī)構(gòu)施引的作者越知名,次數(shù)越多,那么機(jī)構(gòu)越緊跟國際研究前沿,其研究成果也越具有價(jià)值。

    2 方法步驟

    基于h指數(shù)的專家引薦法用于評價(jià)科研人員或機(jī)構(gòu)時,通常需要實(shí)施如下8個步驟。

    (1)選定學(xué)科或主題領(lǐng)域。一方面學(xué)科、主題劃分的方法種類繁多,且相互間缺乏通用性;另一方面學(xué)科間的交叉、融合情況日益顯著。這都給學(xué)科或主題領(lǐng)域的選擇帶來了困難。

    (2)最大限度地收集領(lǐng)域成果。收集的難點(diǎn)是關(guān)于學(xué)科或領(lǐng)域主題的“全”和“準(zhǔn)”。領(lǐng)域成果的收集關(guān)鍵在于當(dāng)前的各種類別數(shù)據(jù)庫,數(shù)據(jù)庫收錄回溯時間的長短,收錄成果類型的多寡,都將對最終的評價(jià)結(jié)果產(chǎn)生一定的影響。

    (3)計(jì)算與確定學(xué)科或主題作者h(yuǎn)指數(shù)。依據(jù)h指數(shù)高低,遴選出學(xué)科或主題“h指數(shù)權(quán)威專家”。難點(diǎn)在于甄別同名作者,對于中文數(shù)據(jù)而言,通??梢酝ㄟ^機(jī)構(gòu)加作者的方式識別,對于外文數(shù)據(jù)庫,則通常困難重重。

    (4)下載獲得對評價(jià)對象(人員或機(jī)構(gòu))的全部研究成果施引記錄。

    (5)利用自編程序分析施引情況。

    (6)分析“h指數(shù)權(quán)威專家”對被評價(jià)對象的“提名”情況。

    (7)選定引薦閾值,獲得被評價(jià)對象“引薦情況”。引薦閾值的設(shè)定需要經(jīng)歷多次的測試與檢驗(yàn),閾值太高的結(jié)果是引薦次數(shù)大幅減少,可能出現(xiàn)大多數(shù)被評價(jià)對象沒有獲得引薦的情況,從而無法實(shí)現(xiàn)評價(jià)比較的目標(biāo);閾值太低的結(jié)果,比如閾值為1時,導(dǎo)致評價(jià)的實(shí)質(zhì)成了“h指數(shù)權(quán)威專家”引用評價(jià)法。

    (8)分析“引薦情況”,得出評價(jià)結(jié)論。分析的角度可以拓展,引薦次數(shù)的高低是一個方面;而引薦專家的平均h指數(shù)高低是另外一個方面;同時,引薦分析法也可以與引用評價(jià)進(jìn)行對比,并從二者的差異中發(fā)現(xiàn)問題。

    3 實(shí)例分析

    3.1 評價(jià)對象選擇與確定

    依據(jù)《中華人民共和國科學(xué)技術(shù)進(jìn)步法》,國家科學(xué)技術(shù)部在2002年4月頒布的《國家重點(diǎn)實(shí)驗(yàn)室建設(shè)與管理暫行辦法》中明確指出:“重點(diǎn)實(shí)驗(yàn)室是國家科技創(chuàng)新體系的重要組成部分,是國家組織高水平基礎(chǔ)研究和應(yīng)用基礎(chǔ)研究、聚集和培養(yǎng)優(yōu)秀科學(xué)家、開展學(xué)術(shù)交流的重要基地。[10]” 經(jīng)過20多年的建設(shè)與發(fā)展,國家重點(diǎn)實(shí)驗(yàn)室作為我國基礎(chǔ)性研究的“國家隊(duì)”,已經(jīng)成為我國國家科技創(chuàng)新體系的中堅(jiān)力量。選擇國家重點(diǎn)實(shí)驗(yàn)室,來實(shí)踐和檢驗(yàn)引薦分析法評價(jià)科研機(jī)構(gòu),具有較好的代表性。因此,我們的引薦分析法應(yīng)用評價(jià)研究選擇全部11個物理類國家重點(diǎn)實(shí)驗(yàn)(實(shí)驗(yàn)室相關(guān)信息見表1)。

    3.2 數(shù)據(jù)來源及其處理方法

    (1)基礎(chǔ)數(shù)據(jù)來源及處理

    依據(jù)JCR選取全部物理類期刊,剔除各大類別之間的重復(fù)期刊后,共計(jì)338種期刊,其中PHYSICS, APPLIED類88種;PHYSICS, ATOM IC, MOLECULAR & CHEM ICAL類30種;PHYSICS, CONDENSED MATTE類52種;PHYSICS, FLUIDS & PLASMAS類24種;PHYSICS, MATHEMATICAL類40種;PHYSICS, MULTIDISCIPLINARY類65種;PHYSICS, NUCLEAR類13種;PHYSICS, PARTICLES & FIELDS類26種。論文項(xiàng)目組先后利用ISTIC-THOMSON科學(xué)計(jì)量學(xué)聯(lián)合實(shí)驗(yàn)室、武漢大學(xué)圖書館和廈門大學(xué)圖書館的數(shù)據(jù)資源,下載上述338種期刊自1986年以來發(fā)表的SCI收錄論文數(shù)據(jù),共計(jì)約185萬條作為研究的基礎(chǔ)數(shù)據(jù)。作為學(xué)科領(lǐng)域?qū)<襤指數(shù)測算基礎(chǔ)數(shù)據(jù)(檢索時間為2010年6-7月,其中刊物“PHYSICAL REVIEW B”的檢索結(jié)果為大于10萬條僅下載了其較新的7萬條)。

    (2)實(shí)驗(yàn)室相關(guān)數(shù)據(jù)檢索及說明

    對各實(shí)驗(yàn)室被收錄及施引情況進(jìn)行了初檢索,修改校正檢索及第三次檢索,目的是通過對比分析,不斷修正。2010年7月20日,進(jìn)行了研究評價(jià)對象被SCI收錄論文數(shù)據(jù)的第一輪檢索;2010年8月1日進(jìn)行了第二輪檢索,并檢索表達(dá)式進(jìn)行了調(diào)整、改進(jìn)與優(yōu)化,并分別選取數(shù)據(jù)收錄起始年為1997年和1986年進(jìn)行了兩次檢索,數(shù)據(jù)分析表明各實(shí)驗(yàn)室自兩個起始年份收錄的論文數(shù)量無明顯差異。基于本次評價(jià)基礎(chǔ)數(shù)據(jù)的一致性考慮,同時考慮到實(shí)驗(yàn)室建設(shè)年份的不一致性,特別是個別實(shí)驗(yàn)室2000年以后才批準(zhǔn)建設(shè)的,本評價(jià)最終評價(jià)數(shù)據(jù)選擇1997年為論文收錄起始年。2010年8月10日,我們以1997年為起始年,對11個物理類國家重點(diǎn)實(shí)驗(yàn)室被SCI收錄的論文和施引論文進(jìn)行了最終檢索,并全部下載,檢索式及檢索結(jié)果如表2所示。

    (3)其他檢索結(jié)果

    在第三輪檢索的過程中,我們同時記錄了11個物理類國家重點(diǎn)試驗(yàn)室的如下數(shù)據(jù):收錄起始年、施引論文起始年、被引頻次、評價(jià)被引頻次以及h-index,詳見表3。

    3.3 學(xué)科領(lǐng)域h指數(shù)

    依據(jù)前述基礎(chǔ)數(shù)據(jù),經(jīng)過統(tǒng)計(jì)共有228732位作者(不只包含第一作者),并計(jì)量得出領(lǐng)域內(nèi)作者的h指數(shù)值。統(tǒng)計(jì)結(jié)果表明,在228732名作者中,h指數(shù)值大于或者等于25的作者僅占總數(shù)的0.044%;處于20~24區(qū)間的作者有239位,占總數(shù)0.104%;處于15~19區(qū)間的作者有892位,占總數(shù)0.39%;處于10~14區(qū)間的作者有4248位,占總數(shù)1.857%;處于8~9區(qū)間的作者有5202位,占總數(shù)2.274%;處于6~7區(qū)間的作者有11391位,占總數(shù)4.98%;為5的作者有10499位,占總數(shù)4.590%;為4的作者有16717位,占總數(shù)7.309%;為3的作者有28155位,占總數(shù)12.309%;為2的作者有53305位,占總數(shù)23.305%;為1的作者有97983位,占總數(shù)42.837%(表4)。

    表1 物理類國家重點(diǎn)實(shí)驗(yàn)室名單

    3.4 評價(jià)結(jié)果分析

    (1)物理類國家重點(diǎn)實(shí)驗(yàn)室整體引薦水平高

    以半導(dǎo)體超晶格國家重點(diǎn)實(shí)驗(yàn)室引用的3899篇論文為基礎(chǔ),分析其引薦情況。在此我們僅分析作為第一作者被引薦的情況,設(shè)置引薦闕值為5,共有113位作者獲得引薦,作者h(yuǎn)指數(shù)值分布情況如表5第一行所示。同樣,對全部11個國家重點(diǎn)實(shí)驗(yàn)室的施引情況進(jìn)行匯總,分別計(jì)算國家重點(diǎn)實(shí)驗(yàn)室引薦的作者的h指數(shù)值分布情況。

    表2 第三輪檢索表達(dá)式及檢索結(jié)果

    表3 物理類國家重點(diǎn)室評價(jià)數(shù)據(jù)檢索相關(guān)數(shù)據(jù)

    從整體上看,11個物理類國家重點(diǎn)實(shí)驗(yàn)室引薦的作者整體分布情況良好,其中9個實(shí)驗(yàn)室40%以上的引薦對象屬于物理學(xué)領(lǐng)內(nèi)域h指數(shù)值前3%的頂尖作者,對于物理學(xué)領(lǐng)域內(nèi)h指數(shù)值前15%的優(yōu)秀作者的引薦百分比分別達(dá)到:79.65%、82.35%、56.60%、94.89%、76.92%、61.70%、68.97%、 67.61%、68.42%、75.76%、67.44%。特別是南京大學(xué)固體微結(jié)構(gòu)物理國家重點(diǎn)實(shí)驗(yàn)室其對頂尖作者的引薦占其總引薦量的79%,其對前15%的優(yōu)秀作者的引薦百分比達(dá)到94.89%。

    (2)引薦結(jié)果與被引頻次、h指數(shù)相關(guān)度不高

    把11個國家重點(diǎn)實(shí)驗(yàn)室對于物理學(xué)領(lǐng)域內(nèi)h指數(shù)值前15%的優(yōu)秀作者的引薦百分比進(jìn)行排序,對表3獲得的檢索結(jié)果中的評價(jià)被引頻次以及h指數(shù)值進(jìn)行排序,生成表6。

    通常情況下,被引頻次、機(jī)構(gòu)h指數(shù)值是科研機(jī)構(gòu)評價(jià)的重要指標(biāo)。下面分析引薦評價(jià)指標(biāo)與這兩個評價(jià)指標(biāo)之間的關(guān)系。從表6可以看出,在11個實(shí)驗(yàn)室中,半導(dǎo)體超晶格、固體微結(jié)構(gòu)物理、精密光譜科學(xué)與技術(shù)、人工微結(jié)構(gòu)和介觀物理5個實(shí)驗(yàn)室的三類排序相對穩(wěn)定,即相互間的排序差不超過1。非線性力學(xué)、核物理與核技術(shù)、聲場聲信息、應(yīng)用表面物理4個實(shí)驗(yàn)室三類排序差較大,差值達(dá)到4或者以上。通過對3個評價(jià)指標(biāo)做簡單相關(guān)分析,得出三者皮爾森相關(guān)系數(shù)表(表7)。僅從相關(guān)系數(shù)的數(shù)值分析,引薦分析法用于評價(jià)與傳統(tǒng)的科研機(jī)構(gòu)評價(jià)結(jié)果相關(guān)度不高。我們可以初步認(rèn)為,其用于機(jī)構(gòu)評價(jià)的信度和效度有待從其他角度去研究和論證。

    表4 物理領(lǐng)域內(nèi)作者h(yuǎn)指數(shù)值分布情況表

    表5 物理類國家重點(diǎn)實(shí)驗(yàn)室室引用作者h(yuǎn)指數(shù)值分布情況

    4 結(jié)語

    從引用到引薦,其本質(zhì)都是希望利用已有成果,通過分析施引者與被引者、引薦者與被引薦者的關(guān)系,揭示他們的影響、認(rèn)同、推薦關(guān)系。本應(yīng)用研究的基本思想是:一流的科學(xué)家必然緊緊跟著學(xué)科前沿,其應(yīng)用(引用)的文獻(xiàn)也以其本身或者其他一流的科學(xué)家為主,并由此引申到一流的研究機(jī)構(gòu)。其研究成果也應(yīng)該是對一流成果和頂尖作者的引用[11]。研究的目的是為了從引薦的角度去驗(yàn)證我國物理學(xué)研究的頂尖機(jī)構(gòu)——物理類國家重點(diǎn)實(shí)驗(yàn)室是否引薦了一流的作者,結(jié)果也證明了我們的假設(shè)。

    研究下載了大量的數(shù)據(jù),進(jìn)行了海量的計(jì)算,然而受時間和精力的限制,本研究在數(shù)據(jù)的完整性和數(shù)據(jù)的精準(zhǔn)性方面都有較大幅度提高的空間。例如,我國物理類國家重點(diǎn)實(shí)驗(yàn)室室批準(zhǔn)成立掛牌的時間本身就差異較大,缺少了對每一個實(shí)驗(yàn)室發(fā)展階段的把握,對其研究成果的檢索就存在一定的瑕疵。同時,就引薦分析法評價(jià)機(jī)構(gòu)實(shí)踐而言,其結(jié)果更多地能對現(xiàn)在狀態(tài)進(jìn)行驗(yàn)證評價(jià),并不適合源評價(jià)。正如,一流的研究機(jī)構(gòu)必然會引用一流研究機(jī)構(gòu)的研究結(jié)果。反過來,不能認(rèn)為,經(jīng)常引用一流的研究機(jī)構(gòu)成果的研究機(jī)構(gòu)本身就是一流。

    表6 物理類國家重點(diǎn)室三類排序情況比較表

    表7 三大評價(jià)結(jié)果序皮爾森相關(guān)系數(shù)表

    [1] 尤金·加菲爾德.引文索引法的理論及應(yīng)用[M].侯漢清,等,譯. 北京:北京圖書館出版社,2004:233.

    [2] 葉繼元.引文法既是定量又是定性的評價(jià)法[J].圖書館,2005(1):43-45.

    [3] 高歌.基于引用認(rèn)同的學(xué)科前沿?zé)狳c(diǎn)研究[D].長春:吉林大學(xué)圖書館,2011.

    [4] 吳志榮.對引文分析法地位的重新思考[J].圖書館雜志,2012,31(5):11-13,81.

    [5] 羅宇輝,侯漢清.試論引文計(jì)量的不確定性——兼論引文計(jì)量的規(guī)范管理[J].情報(bào)理論與實(shí)踐,2010,33 (12):8-11.

    [6] 周春雷.引薦分析法:一種新的引文分析法[J].情報(bào)學(xué)報(bào),2010(4):671-678.

    [7] White H D.Authors as over Times[J].Journal of the American Society for Information Science and Technology,2001,52(2):87-108.

    [8] 周春雷.領(lǐng)域內(nèi)h指數(shù)及其應(yīng)用研究[J].圖書情報(bào)工作,2012,56(10):45-49.

    [9] 馬鳳,武夷山.引用認(rèn)同——一個值得注意的概念[J].圖書情報(bào)工作,2009,53(16):27-30,115.

    [10] 科學(xué)技術(shù)部,財(cái)政部.關(guān)于印發(fā)《國家重點(diǎn)實(shí)驗(yàn)室建設(shè)與運(yùn)行管理辦法》的通知[EB/OL].[2013-05-28]. http://www.most.gov.cn/fggw/zfw j/zfw j2008/200810/ t20081017_64389.htm.

    [11] 周春雷.試論現(xiàn)行學(xué)術(shù)評價(jià)體系的運(yùn)作機(jī)理[J].中國科技期刊研究,2012,23(6):1013-1016.

    Expert Citation Recommendation Analysis and Exam p les Based on H-index

    Yin Zhim ing1, Zhou Chunlei2
    (1. Adm inistration Off ce of Jimei University, Xiamen 361021; 2. Information Department of Zhengzhou University, Zhengzhou 450001)

    Citation Recomm endation Analysis is a new type of citation analysis m ethod that can be used for identifying peers of high influence authors by analyzing citing articles of those authors. It also can reveal citing authors’ academ ic status by analyzing peer H-index. This paper took the state key laboratories of Physics as an example. Results showed that the citing authors were in the same institutions or the first-class scientists, and the citing articles tailed to research frontiers of physics. The f rst-class scientists must tail to frontier discipline. In some sense, the results of this paper indicated that the Chinese state key laboratories of physics have been in the world f rstclass ranks of research institutes of Physics.

    citation analysis, citation recommendation, H-index, state key laboratory, evaluation

    G350

    :ADOI:10.3772/j.issn.1674-1544.2013.04.009

    殷之明(1974- ),男,副研究館員,博士,主要研究方向:信息計(jì)量與評價(jià)。

    ISTIC-THOMSON科學(xué)計(jì)量學(xué)聯(lián)合實(shí)驗(yàn)室開放基金項(xiàng)目“國家重點(diǎn)實(shí)驗(yàn)室評價(jià)指標(biāo)體系研究”(IT2009006);2011年教育部人文社會科學(xué)研究項(xiàng)目“面向服務(wù)的高校圖書館績效評價(jià)研究”(11YJC870032)。

    2013年4月2日。

    猜你喜歡
    指數(shù)值分析法檢索
    異步機(jī)傳統(tǒng)分析法之困難及其克服
    2019年第4-6期便捷檢索目錄
    要控血糖,怎么吃水果才對對?
    要控血糖,怎么吃水果才對
    益壽寶典(2018年29期)2018-11-02 03:17:02
    基于時間重疊分析法的同車倒卡逃費(fèi)探析
    專利檢索中“語義”的表現(xiàn)
    專利代理(2016年1期)2016-05-17 06:14:36
    層次分析法在SWOT分析法中的應(yīng)用
    AHP和SWOT分析法在規(guī)劃編制中的應(yīng)用
    油氣管道風(fēng)險(xiǎn)專家評分方法的改進(jìn)及應(yīng)用
    國際標(biāo)準(zhǔn)檢索
    国产探花在线观看一区二区| 尤物成人国产欧美一区二区三区| 亚洲av成人精品一区久久| 日本熟妇午夜| av国产免费在线观看| 国产精品三级大全| 亚洲国产精品成人久久小说 | 又黄又爽又免费观看的视频| 看非洲黑人一级黄片| 嫩草影院精品99| 好男人在线观看高清免费视频| 亚洲第一电影网av| 国语自产精品视频在线第100页| 亚洲自拍偷在线| 亚洲无线在线观看| 国产精品一二三区在线看| 免费一级毛片在线播放高清视频| 亚洲色图av天堂| 国产伦在线观看视频一区| videossex国产| 亚洲aⅴ乱码一区二区在线播放| 舔av片在线| 97在线视频观看| 18禁在线播放成人免费| 日韩欧美免费精品| 嫩草影院入口| 国产单亲对白刺激| 熟妇人妻久久中文字幕3abv| 3wmmmm亚洲av在线观看| 搡老妇女老女人老熟妇| 美女高潮的动态| 午夜精品一区二区三区免费看| 免费观看精品视频网站| 日韩欧美 国产精品| 大型黄色视频在线免费观看| 床上黄色一级片| 欧美成人一区二区免费高清观看| 别揉我奶头~嗯~啊~动态视频| 亚洲av免费高清在线观看| 高清毛片免费观看视频网站| 人妻少妇偷人精品九色| 国产精品伦人一区二区| 精品久久久久久成人av| 直男gayav资源| 99热精品在线国产| 少妇熟女aⅴ在线视频| 久久久久久九九精品二区国产| 又粗又爽又猛毛片免费看| 蜜臀久久99精品久久宅男| 日本色播在线视频| 女生性感内裤真人,穿戴方法视频| 久久久精品欧美日韩精品| 久久午夜福利片| 一进一出抽搐动态| 国产精品久久电影中文字幕| 人妻久久中文字幕网| 久久久久九九精品影院| 成年免费大片在线观看| 国产综合懂色| 久久久久精品国产欧美久久久| 成人美女网站在线观看视频| 久久精品国产亚洲av涩爱 | 国产在线精品亚洲第一网站| 国内精品美女久久久久久| 久久久久久久久久黄片| 久久久久九九精品影院| 国产在线精品亚洲第一网站| 中文字幕av成人在线电影| 国产av不卡久久| 好男人在线观看高清免费视频| 免费观看精品视频网站| 亚洲美女黄片视频| 男女视频在线观看网站免费| 欧洲精品卡2卡3卡4卡5卡区| 不卡一级毛片| 97在线视频观看| 午夜激情欧美在线| 两性午夜刺激爽爽歪歪视频在线观看| 久久精品久久久久久噜噜老黄 | 国产精品三级大全| 少妇熟女欧美另类| 亚洲最大成人中文| 91麻豆精品激情在线观看国产| 成人无遮挡网站| 久久久久精品国产欧美久久久| 国产视频一区二区在线看| 免费电影在线观看免费观看| 欧美色视频一区免费| 大又大粗又爽又黄少妇毛片口| 国产女主播在线喷水免费视频网站 | 久久久精品94久久精品| 国产v大片淫在线免费观看| 亚洲欧美日韩东京热| 精华霜和精华液先用哪个| 欧美zozozo另类| 亚洲不卡免费看| 在线a可以看的网站| 国产精品久久久久久精品电影| 在线观看午夜福利视频| 精品久久久噜噜| 国内少妇人妻偷人精品xxx网站| 国国产精品蜜臀av免费| 国产精品久久久久久久久免| 伦理电影大哥的女人| 国产高清激情床上av| 成人无遮挡网站| 久久久精品大字幕| av中文乱码字幕在线| 超碰av人人做人人爽久久| 老司机午夜福利在线观看视频| 欧美激情久久久久久爽电影| 亚洲自偷自拍三级| 国产真实乱freesex| 亚洲精华国产精华液的使用体验 | 久久亚洲精品不卡| 国产极品精品免费视频能看的| 男人狂女人下面高潮的视频| 欧美丝袜亚洲另类| 在线看三级毛片| 男人狂女人下面高潮的视频| 国产视频内射| 亚洲国产精品国产精品| 可以在线观看毛片的网站| 白带黄色成豆腐渣| 中文字幕av成人在线电影| 99久久精品热视频| 嫩草影院精品99| 亚洲最大成人手机在线| 久久草成人影院| 97超碰精品成人国产| 欧美一区二区精品小视频在线| 久久国产乱子免费精品| 亚洲第一区二区三区不卡| 联通29元200g的流量卡| 亚洲精品456在线播放app| 亚洲精品乱码久久久v下载方式| 干丝袜人妻中文字幕| 国产免费一级a男人的天堂| 成人精品一区二区免费| 中文字幕人妻熟人妻熟丝袜美| 亚洲天堂国产精品一区在线| 亚洲人成网站在线播| 日本一本二区三区精品| 观看免费一级毛片| 中国美白少妇内射xxxbb| 欧美日韩一区二区视频在线观看视频在线 | 九九在线视频观看精品| 欧美不卡视频在线免费观看| 国产毛片a区久久久久| 国产黄片美女视频| 色哟哟哟哟哟哟| 无遮挡黄片免费观看| 国产精品久久久久久精品电影| АⅤ资源中文在线天堂| 舔av片在线| 国产人妻一区二区三区在| 别揉我奶头 嗯啊视频| 欧美激情国产日韩精品一区| 又粗又爽又猛毛片免费看| 少妇裸体淫交视频免费看高清| 老司机午夜福利在线观看视频| 色5月婷婷丁香| 99视频精品全部免费 在线| 日韩在线高清观看一区二区三区| 国产日本99.免费观看| 国产真实乱freesex| 国产亚洲欧美98| 亚洲精华国产精华液的使用体验 | 亚洲精品一卡2卡三卡4卡5卡| 麻豆一二三区av精品| 亚洲中文字幕日韩| 悠悠久久av| 精品久久久久久久久av| 国产精品久久视频播放| 欧美丝袜亚洲另类| 日韩欧美在线乱码| 久久精品91蜜桃| 男人和女人高潮做爰伦理| 春色校园在线视频观看| 久久久久久久久久久丰满| 国产探花极品一区二区| 老熟妇乱子伦视频在线观看| 亚洲精品亚洲一区二区| 日日撸夜夜添| videossex国产| 亚洲美女搞黄在线观看 | 国产成人福利小说| 毛片女人毛片| 亚洲一区高清亚洲精品| 亚洲中文日韩欧美视频| 你懂的网址亚洲精品在线观看 | 日韩,欧美,国产一区二区三区 | 亚洲国产欧美人成| 日日摸夜夜添夜夜爱| 狂野欧美白嫩少妇大欣赏| av黄色大香蕉| 黄色一级大片看看| 男人舔奶头视频| 亚洲国产欧美人成| av女优亚洲男人天堂| 国产精品一区二区免费欧美| 国产高清不卡午夜福利| 自拍偷自拍亚洲精品老妇| 校园人妻丝袜中文字幕| 国产在线男女| 一区福利在线观看| 1024手机看黄色片| 大又大粗又爽又黄少妇毛片口| 小说图片视频综合网站| 身体一侧抽搐| 五月伊人婷婷丁香| 狂野欧美激情性xxxx在线观看| 欧美成人一区二区免费高清观看| 国产乱人偷精品视频| 大香蕉久久网| 精品久久久久久久久亚洲| 91在线精品国自产拍蜜月| 中出人妻视频一区二区| 精品不卡国产一区二区三区| 亚洲精品色激情综合| 国内精品宾馆在线| 99在线视频只有这里精品首页| 亚洲欧美日韩高清专用| 亚洲人成网站在线播| 99热精品在线国产| 不卡视频在线观看欧美| av天堂在线播放| 女生性感内裤真人,穿戴方法视频| 麻豆国产av国片精品| av黄色大香蕉| 精品久久久久久久久亚洲| 亚洲国产色片| 日本黄色视频三级网站网址| 91久久精品国产一区二区成人| 精品国内亚洲2022精品成人| 香蕉av资源在线| 桃色一区二区三区在线观看| 亚洲国产高清在线一区二区三| 亚洲精品粉嫩美女一区| 成人无遮挡网站| 欧美3d第一页| 日本一本二区三区精品| 女同久久另类99精品国产91| 国产一区二区在线观看日韩| 91在线精品国自产拍蜜月| 亚洲欧美精品综合久久99| 日日摸夜夜添夜夜添av毛片| av天堂在线播放| 国产精品女同一区二区软件| 赤兔流量卡办理| 久久久久久久久大av| 国产黄色视频一区二区在线观看 | 精品欧美国产一区二区三| 免费看光身美女| 97人妻精品一区二区三区麻豆| 久久天躁狠狠躁夜夜2o2o| 亚洲无线观看免费| 久久久精品94久久精品| 中文在线观看免费www的网站| 国产精品无大码| 男插女下体视频免费在线播放| 伦精品一区二区三区| 99在线人妻在线中文字幕| 精品久久久久久成人av| www日本黄色视频网| 热99re8久久精品国产| 国产老妇女一区| 免费观看人在逋| 成人一区二区视频在线观看| 丰满人妻一区二区三区视频av| 特大巨黑吊av在线直播| 国产一区二区三区av在线 | 亚洲av中文字字幕乱码综合| 五月玫瑰六月丁香| 观看免费一级毛片| 亚洲av.av天堂| 特大巨黑吊av在线直播| 成人三级黄色视频| 在线看三级毛片| 免费在线观看影片大全网站| 99久国产av精品国产电影| 精品福利观看| 久久6这里有精品| 午夜爱爱视频在线播放| av天堂中文字幕网| 日韩av在线大香蕉| 在线播放无遮挡| 国产精品一区二区三区四区久久| 老女人水多毛片| 婷婷色综合大香蕉| 又爽又黄无遮挡网站| 久久热精品热| 乱系列少妇在线播放| 亚洲人成网站在线播放欧美日韩| videossex国产| 黄色配什么色好看| 日日干狠狠操夜夜爽| 亚洲中文日韩欧美视频| 久久久精品94久久精品| 真人做人爱边吃奶动态| 国产黄a三级三级三级人| 老女人水多毛片| 成人国产麻豆网| 性欧美人与动物交配| 中文字幕av成人在线电影| 国产亚洲av嫩草精品影院| 欧美不卡视频在线免费观看| 日韩av在线大香蕉| 老熟妇乱子伦视频在线观看| 卡戴珊不雅视频在线播放| 欧美人与善性xxx| 狂野欧美激情性xxxx在线观看| 欧美最黄视频在线播放免费| 精品午夜福利在线看| 久久久久精品国产欧美久久久| 国产一区二区在线观看日韩| 亚洲av电影不卡..在线观看| 少妇丰满av| 亚洲一区高清亚洲精品| 日韩欧美精品v在线| 久久人人爽人人片av| 99久久久亚洲精品蜜臀av| 亚洲最大成人手机在线| 亚洲一区二区三区色噜噜| 国产精品久久视频播放| 一级黄色大片毛片| 亚洲婷婷狠狠爱综合网| 日本成人三级电影网站| 中国美女看黄片| 久久久久国产精品人妻aⅴ院| 免费大片18禁| 国产成人一区二区在线| 久久久久久大精品| 少妇的逼水好多| 女生性感内裤真人,穿戴方法视频| 久久久精品大字幕| 国产av不卡久久| 亚洲在线观看片| 我的女老师完整版在线观看| 又爽又黄a免费视频| 精品久久久久久久久亚洲| 久久久国产成人精品二区| 蜜臀久久99精品久久宅男| 简卡轻食公司| 男人舔奶头视频| 狂野欧美白嫩少妇大欣赏| 在线观看av片永久免费下载| 三级毛片av免费| 欧美一区二区精品小视频在线| 国产片特级美女逼逼视频| 久久精品国产亚洲av香蕉五月| 精品午夜福利视频在线观看一区| 日韩欧美精品v在线| 夜夜夜夜夜久久久久| 日产精品乱码卡一卡2卡三| 在线免费观看不下载黄p国产| 亚洲成人久久性| 在现免费观看毛片| 日本黄大片高清| 日本一二三区视频观看| 寂寞人妻少妇视频99o| 99久久精品国产国产毛片| 夜夜看夜夜爽夜夜摸| 性插视频无遮挡在线免费观看| 亚洲av五月六月丁香网| 亚洲精品久久国产高清桃花| 在线天堂最新版资源| 亚洲va在线va天堂va国产| 在线观看66精品国产| videossex国产| av天堂中文字幕网| 99久久精品国产国产毛片| 日本-黄色视频高清免费观看| 18禁裸乳无遮挡免费网站照片| 九九在线视频观看精品| 国产精品嫩草影院av在线观看| 成年女人看的毛片在线观看| 别揉我奶头~嗯~啊~动态视频| 91久久精品电影网| 51国产日韩欧美| 欧美+亚洲+日韩+国产| 中文字幕精品亚洲无线码一区| 精品人妻偷拍中文字幕| 非洲黑人性xxxx精品又粗又长| 亚洲精品日韩在线中文字幕 | 日韩欧美在线乱码| 我要搜黄色片| 欧美激情久久久久久爽电影| 一区二区三区免费毛片| av.在线天堂| 日本欧美国产在线视频| ponron亚洲| 日韩 亚洲 欧美在线| 日韩人妻高清精品专区| 久久久久性生活片| 深夜a级毛片| 女的被弄到高潮叫床怎么办| 精品国产三级普通话版| 丝袜喷水一区| 哪里可以看免费的av片| 91在线观看av| 亚洲精品粉嫩美女一区| 国产aⅴ精品一区二区三区波| 国产 一区精品| 51国产日韩欧美| 精品熟女少妇av免费看| 丝袜美腿在线中文| 久久亚洲国产成人精品v| 久久综合国产亚洲精品| 老熟妇乱子伦视频在线观看| 一本久久中文字幕| 麻豆久久精品国产亚洲av| 国产人妻一区二区三区在| 亚洲av中文av极速乱| 在线看三级毛片| 亚洲国产精品sss在线观看| 亚洲av电影不卡..在线观看| av免费在线看不卡| 精品久久久噜噜| 国产一区二区亚洲精品在线观看| 国产成人一区二区在线| 夜夜爽天天搞| 国产一级毛片七仙女欲春2| 人妻少妇偷人精品九色| 午夜影院日韩av| 人妻久久中文字幕网| 日韩欧美一区二区三区在线观看| 亚洲图色成人| 97人妻精品一区二区三区麻豆| 久久99热6这里只有精品| 美女免费视频网站| 久久99热6这里只有精品| 国产高清视频在线播放一区| 国产黄色视频一区二区在线观看 | 一区二区三区高清视频在线| 精品无人区乱码1区二区| 国产一区二区三区av在线 | 人人妻人人澡人人爽人人夜夜 | 看免费成人av毛片| 亚洲va在线va天堂va国产| 亚洲成人久久性| 麻豆乱淫一区二区| 在线观看一区二区三区| 国产又黄又爽又无遮挡在线| 床上黄色一级片| 中文资源天堂在线| 国产精品久久久久久av不卡| 身体一侧抽搐| 日本黄色片子视频| 九九久久精品国产亚洲av麻豆| 国产aⅴ精品一区二区三区波| 国产白丝娇喘喷水9色精品| 成人无遮挡网站| 我的老师免费观看完整版| 免费在线观看成人毛片| 国产精品久久久久久亚洲av鲁大| 人妻制服诱惑在线中文字幕| 久久久久国内视频| 天天躁夜夜躁狠狠久久av| 性欧美人与动物交配| 亚洲美女视频黄频| 青春草视频在线免费观看| 亚洲最大成人av| 国产精品乱码一区二三区的特点| 最后的刺客免费高清国语| 两个人的视频大全免费| 啦啦啦啦在线视频资源| 免费av毛片视频| 国产色婷婷99| 免费观看人在逋| 亚洲精品一卡2卡三卡4卡5卡| 久久久色成人| 国产精品福利在线免费观看| 色尼玛亚洲综合影院| 日本精品一区二区三区蜜桃| 日韩成人伦理影院| 亚洲婷婷狠狠爱综合网| 22中文网久久字幕| 人妻久久中文字幕网| 97超视频在线观看视频| 亚洲国产日韩欧美精品在线观看| 美女内射精品一级片tv| 99久久久亚洲精品蜜臀av| 麻豆av噜噜一区二区三区| 久久这里只有精品中国| 国产欧美日韩精品一区二区| 精品免费久久久久久久清纯| 亚洲人成网站在线播放欧美日韩| 亚洲va在线va天堂va国产| 精品一区二区三区视频在线观看免费| 性色avwww在线观看| 国内精品一区二区在线观看| 亚洲精品日韩在线中文字幕 | 少妇裸体淫交视频免费看高清| 成人永久免费在线观看视频| а√天堂www在线а√下载| 搡老熟女国产l中国老女人| 最近视频中文字幕2019在线8| 伦精品一区二区三区| 91在线精品国自产拍蜜月| 久久久久国产网址| 91在线精品国自产拍蜜月| 又黄又爽又免费观看的视频| 欧美激情在线99| 日韩精品中文字幕看吧| 99国产精品一区二区蜜桃av| 国产毛片a区久久久久| 丝袜美腿在线中文| 欧美激情久久久久久爽电影| 两个人视频免费观看高清| 国产精品99久久久久久久久| 听说在线观看完整版免费高清| 亚洲人成网站在线观看播放| 淫秽高清视频在线观看| 免费av观看视频| 俄罗斯特黄特色一大片| 亚洲性久久影院| 在线观看美女被高潮喷水网站| 国产伦在线观看视频一区| 免费看美女性在线毛片视频| 日本熟妇午夜| 欧美激情在线99| h日本视频在线播放| 成人av在线播放网站| 3wmmmm亚洲av在线观看| 啦啦啦韩国在线观看视频| 狠狠狠狠99中文字幕| 三级国产精品欧美在线观看| 欧美中文日本在线观看视频| 97超视频在线观看视频| 内射极品少妇av片p| 国产精华一区二区三区| 国产午夜精品久久久久久一区二区三区 | 久久精品国产亚洲av涩爱 | 亚洲精品乱码久久久v下载方式| 亚洲av.av天堂| 精品久久久噜噜| 国产精品久久久久久亚洲av鲁大| 99在线人妻在线中文字幕| 女的被弄到高潮叫床怎么办| 久久国产乱子免费精品| 欧美另类亚洲清纯唯美| 久久精品夜夜夜夜夜久久蜜豆| 国产aⅴ精品一区二区三区波| 久久精品影院6| 啦啦啦韩国在线观看视频| a级毛片a级免费在线| 国产精品人妻久久久久久| 久久综合国产亚洲精品| 色综合色国产| 俺也久久电影网| 国产精品综合久久久久久久免费| 99在线视频只有这里精品首页| 一进一出抽搐gif免费好疼| 能在线免费观看的黄片| 国产精品综合久久久久久久免费| 亚洲五月天丁香| 国产视频一区二区在线看| 亚洲av免费高清在线观看| 在线观看av片永久免费下载| 99热这里只有是精品在线观看| 久久国产乱子免费精品| 九九爱精品视频在线观看| 91久久精品电影网| 美女高潮的动态| 亚洲av美国av| 国产伦在线观看视频一区| 久久久色成人| avwww免费| a级一级毛片免费在线观看| av卡一久久| 97碰自拍视频| 真实男女啪啪啪动态图| 日本a在线网址| 午夜福利高清视频| 国产乱人偷精品视频| 偷拍熟女少妇极品色| 精品熟女少妇av免费看| 精品日产1卡2卡| 色综合站精品国产| 国产亚洲精品久久久久久毛片| 成年免费大片在线观看| 国产男人的电影天堂91| 免费无遮挡裸体视频| 99热全是精品| 日本精品一区二区三区蜜桃| 色综合色国产| 国产日本99.免费观看| 亚洲精品色激情综合| 婷婷亚洲欧美| aaaaa片日本免费| 精品午夜福利在线看| 老熟妇乱子伦视频在线观看| 韩国av在线不卡| 亚洲自偷自拍三级| 免费无遮挡裸体视频| 麻豆精品久久久久久蜜桃| 97超视频在线观看视频| 大香蕉久久网| 在线看三级毛片| 亚洲av成人av| 国产精品1区2区在线观看.| 一进一出抽搐动态| 亚洲成人中文字幕在线播放| 午夜福利成人在线免费观看| 亚洲国产日韩欧美精品在线观看| 精品久久国产蜜桃| 色5月婷婷丁香| 一个人免费在线观看电影| 日韩精品中文字幕看吧| 亚洲精品久久国产高清桃花| 寂寞人妻少妇视频99o| 一级黄片播放器| avwww免费| 大又大粗又爽又黄少妇毛片口|