• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    全球及中國(guó)心血管疾病科技影響力評(píng)價(jià)方法研究

    2024-04-23 01:34:00郝軍郎欣月王楊曹也丁李衛(wèi)
    中國(guó)循環(huán)雜志 2024年3期
    關(guān)鍵詞:秩次多維度極值

    郝軍 郎欣月 王楊 曹也丁 李衛(wèi)

    醫(yī)院排行榜受到越來(lái)越多的關(guān)注,其相對(duì)客觀地反映了醫(yī)療機(jī)構(gòu)的學(xué)科建設(shè)及技術(shù)水平在行業(yè)內(nèi)的地位,也為醫(yī)院管理者更好決策、患者就醫(yī)選擇提供一定的參考。其中獨(dú)立的第三方機(jī)構(gòu)綜合評(píng)價(jià)已經(jīng)是發(fā)達(dá)國(guó)家醫(yī)院綜合評(píng)價(jià)的主要形式,主要聚焦于臨床診療水平等方面,例如美國(guó)新聞與世界報(bào)道(U.S. News & World Report)最佳醫(yī)院排行榜、美國(guó)國(guó)際醫(yī)療衛(wèi)生機(jī)構(gòu)認(rèn)證聯(lián)合委員會(huì)(Joint Commission International,JCI)醫(yī)療機(jī)構(gòu)評(píng)價(jià)和英國(guó)醫(yī)療質(zhì)量委員會(huì)(Care Quality Commission,CQC)醫(yī)療機(jī)構(gòu)評(píng)價(jià)等[1-3]。在我國(guó),常見(jiàn)的醫(yī)院排行榜有復(fù)旦大學(xué)醫(yī)院管理研究所最佳醫(yī)院排行榜、中國(guó)醫(yī)學(xué)科學(xué)院醫(yī)學(xué)信息研究所中國(guó)醫(yī)院科技量值排名(Science and Technology Evaluation Metrics,STEM)和艾力彼的中國(guó)醫(yī)院競(jìng)爭(zhēng)力排行榜[4]。上述國(guó)內(nèi)醫(yī)院排行榜的指標(biāo)體系均考慮了醫(yī)療機(jī)構(gòu)的科研水平和學(xué)術(shù)影響,又各有側(cè)重。此外,2022 年9 月,中國(guó)心臟大會(huì)在線發(fā)布了《2016~2021 年全球心血管疾病科技影響力評(píng)價(jià)報(bào)告》(以下簡(jiǎn)稱(chēng)“評(píng)價(jià)報(bào)告”),公布了全球及中國(guó)醫(yī)院心血管疾病科技影響力指標(biāo)體系及排行結(jié)果。該指標(biāo)體系在借鑒國(guó)內(nèi)主要醫(yī)院排行榜指標(biāo)體系的同時(shí),為了體現(xiàn)“科技成果分類(lèi)多維度評(píng)價(jià)”的導(dǎo)向,將評(píng)價(jià)指標(biāo)分為“一般指標(biāo)”和“高端指標(biāo)”,并且根據(jù)高端指標(biāo)數(shù)量將待評(píng)價(jià)機(jī)構(gòu)劃分梯隊(duì),在不同梯隊(duì)內(nèi)按照不同的規(guī)則進(jìn)行排名,整合排名結(jié)果,最終得到全球及中國(guó)醫(yī)院心血管疾病科技影響力排行結(jié)果。

    除制定指標(biāo)評(píng)價(jià)體系之外,評(píng)價(jià)方法的選擇也是綜合評(píng)價(jià)過(guò)程中的重要一環(huán)。目前,在醫(yī)院管理、科研管理等領(lǐng)域,綜合評(píng)價(jià)方法多種多樣、應(yīng)用廣泛[5-7],而不同評(píng)價(jià)方法的選擇將對(duì)綜合評(píng)價(jià)結(jié)果產(chǎn)生重要影響[8]。上述多種國(guó)內(nèi)外醫(yī)療機(jī)構(gòu)評(píng)價(jià)及排行榜采用的綜合評(píng)價(jià)方法各具特色,其中,評(píng)價(jià)報(bào)告中采用的層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法是將層級(jí)式指標(biāo)體系、分梯隊(duì)評(píng)價(jià)規(guī)則和秩次評(píng)價(jià)法結(jié)合在一起的綜合評(píng)價(jià)過(guò)程。然而目前國(guó)內(nèi)外對(duì)于醫(yī)院排名綜合評(píng)價(jià)方法的比較研究較少,針對(duì)于不同評(píng)價(jià)方法的選擇缺乏參考依據(jù)。因此本研究旨在以評(píng)價(jià)報(bào)告中采用的層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法為基礎(chǔ),將該方法的評(píng)價(jià)結(jié)果與目前綜合評(píng)價(jià)領(lǐng)域中最常用的3 種方法(包括標(biāo)準(zhǔn)化處理法、極值處理法和秩次評(píng)價(jià)法)的評(píng)價(jià)結(jié)果進(jìn)行比較,為評(píng)價(jià)報(bào)告提供方法學(xué)解釋及依據(jù),同時(shí)為國(guó)內(nèi)醫(yī)療機(jī)構(gòu)綜合評(píng)價(jià)實(shí)踐提供一定參考。

    1 資料與方法

    1.1 數(shù)據(jù)來(lái)源

    本研究依據(jù)的全球及中國(guó)科技影響力綜合評(píng)價(jià)體系及指標(biāo)權(quán)重,具體見(jiàn)表1 和表2。本研究的文獻(xiàn)數(shù)據(jù)來(lái)源于Web of Science、PubMed 和Scopus數(shù)據(jù)庫(kù)。此外,還采集了F1000、基本科學(xué)指標(biāo)(Essential Science Indicators,ESI)高被引、期刊引證報(bào)告(Journal Citation Reports,JCR)分區(qū)和影響因子、被引頻次、美國(guó)心臟協(xié)會(huì)(AHA)/美國(guó)心臟病學(xué)會(huì)(ACC)/歐洲心臟病學(xué)會(huì)(ESC)指南被引、Clinicaltrial.gov 注冊(cè)臨床研究等相關(guān)數(shù)據(jù)庫(kù)的指標(biāo)數(shù)據(jù)。針對(duì)中國(guó)醫(yī)院心血管疾病領(lǐng)域科技影響力綜合評(píng)價(jià),除了上述指標(biāo),本研究還納入了國(guó)家縱向課題(國(guó)家自然科學(xué)基金重點(diǎn)項(xiàng)目、國(guó)家自然科學(xué)基金面上項(xiàng)目、國(guó)家自然科學(xué)基金青年項(xiàng)目)、發(fā)明專(zhuān)利、國(guó)家級(jí)成果、中華醫(yī)學(xué)獎(jiǎng)、國(guó)家級(jí)和省部級(jí)平臺(tái)等能夠代表機(jī)構(gòu)科研水平的相關(guān)數(shù)據(jù)。

    表1 全球醫(yī)療機(jī)構(gòu)心血管疾病論文影響力綜合評(píng)價(jià)體系及指標(biāo)權(quán)重

    表2 中國(guó)醫(yī)院心血管疾病科技影響力綜合評(píng)價(jià)體系及指標(biāo)權(quán)重

    1.2 層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)過(guò)程

    評(píng)價(jià)報(bào)告采用了層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法,對(duì)2016~2021 年全球醫(yī)療機(jī)構(gòu)心血管疾病論文影響力、全國(guó)醫(yī)院心血管疾病科技影響力進(jìn)行排名,具體步驟如下。首先將指標(biāo)數(shù)據(jù)分成高端、一般指標(biāo)。對(duì)于全球醫(yī)院心血管疾病科技影響力評(píng)價(jià)方法,指標(biāo)體系包括6 項(xiàng)高端指標(biāo),即注冊(cè)臨床試驗(yàn)數(shù)量、影響因子>10 文章數(shù)量、JCR 分區(qū)Q1 區(qū)文章占比、亞學(xué)科覆蓋度、被AHA/ACC/ESC 指南引用數(shù)、ESI和F1000 標(biāo)引數(shù)量;2 項(xiàng)一般指標(biāo),即總發(fā)文量和總影響因子。對(duì)于中國(guó)醫(yī)院心血管疾病科技影響力評(píng)價(jià)方法,指標(biāo)體系包括10 項(xiàng)高端指標(biāo),除了6 項(xiàng)論文相關(guān)指標(biāo)外還包括國(guó)家縱向課題重點(diǎn)項(xiàng)目、發(fā)明專(zhuān)利、國(guó)家級(jí)成果及國(guó)家級(jí)平臺(tái),其余均為一般指標(biāo)。將高端指標(biāo)按有無(wú)計(jì)數(shù)(Q1 區(qū)文章占比≥0.1%記為“有”,亞學(xué)科數(shù)量≥9 記為“有”),有4 個(gè)及以上高端指標(biāo)為第一梯隊(duì),2 個(gè)或3 個(gè)高端指標(biāo)為第二梯隊(duì),剩余1 個(gè)或無(wú)高端指標(biāo)為第三梯隊(duì)。每個(gè)梯隊(duì)內(nèi),將二級(jí)指標(biāo)分別升序排秩次,按其所在指標(biāo)分類(lèi),利用秩次乘以對(duì)應(yīng)權(quán)重得到一般、高端指標(biāo)秩次加權(quán)求和指標(biāo)值。每個(gè)梯隊(duì)內(nèi),將合成的一般、高端指標(biāo)秩次加權(quán)求和指標(biāo)值分別升序排秩次,并分別標(biāo)化至(60,100),得到一般、高端指標(biāo)標(biāo)化得分;將指標(biāo)標(biāo)化得分以(80,80)為圓心建立直角坐標(biāo)系分割象限,其中Y 軸為一般指標(biāo)得分,X 軸為高端指標(biāo)得分。每個(gè)梯隊(duì)內(nèi),將兩坐標(biāo)軸分別10 等分,按所在象限,計(jì)算第一象限一般、高端標(biāo)化得分坐標(biāo)位置所在正數(shù)百分比區(qū)域;第三象限標(biāo)化得分坐標(biāo)位置所在倒數(shù)百分比區(qū)域。每個(gè)梯隊(duì)內(nèi),按所在象限,計(jì)算第一、三象限點(diǎn)圓心距得到線段長(zhǎng)度;第二象限點(diǎn)據(jù)Y 軸正軸斜率;第四象限點(diǎn)據(jù)X 軸正軸斜率。每個(gè)梯隊(duì)內(nèi),第一象限按坐標(biāo)所在正數(shù)百分比區(qū)域升序排列,每個(gè)百分比區(qū)域內(nèi)按線段長(zhǎng)度降序排列;第二、四象限按斜率升序排列;第三象限按坐標(biāo)倒數(shù)百分比區(qū)域降序排列,每個(gè)百分比區(qū)域內(nèi)按線段長(zhǎng)度升序排列,得到每個(gè)象限內(nèi)排名。每個(gè)梯隊(duì)內(nèi),按第一象限,第二、四象限,第三象限順序?qū)⑾笙迌?nèi)排名連接合并,得到梯隊(duì)內(nèi)排名。按第一梯隊(duì)、第二梯隊(duì)、第三梯隊(duì)順序?qū)⑻蓐?duì)內(nèi)排名連接合并,得到總排名。

    1.3 其他綜合評(píng)價(jià)方法

    除層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法外,本研究還選擇了在綜合評(píng)價(jià)領(lǐng)域常用的標(biāo)準(zhǔn)化處理法、極值處理法和秩次評(píng)價(jià)法3 種方法,對(duì)2016~2021 年全球醫(yī)療機(jī)構(gòu)心血管疾病論文影響力、2016~2021 年全國(guó)醫(yī)院心血管疾病科技影響力進(jìn)行排名,具體方法介紹如下。

    1.3.1標(biāo)準(zhǔn)化處理法

    處理后變量均值為0,標(biāo)準(zhǔn)差為1,各指標(biāo)的最大值、最小值不相同。對(duì)標(biāo)化后的指標(biāo)數(shù)據(jù)進(jìn)行加權(quán)匯總排序,即為綜合評(píng)分結(jié)果。

    1.3.2極值處理法

    極值處理法,是消除變量量綱和變異范圍影響最簡(jiǎn)單的方法。具體的操作方法為:首先需要找出該指標(biāo)的最大值(xjmax)和最小值(xjmix),并計(jì)算極差(R=xjmax-xjmix),然后用該變量的每一個(gè)觀察值(x)減去最小值(xjmix),再除以極差(R)[9],即:

    經(jīng)過(guò)極差標(biāo)準(zhǔn)化方法處理后,無(wú)論原始數(shù)據(jù)是正值還是負(fù)值,該變量各個(gè)觀察值的數(shù)值變化范圍都滿足0 ≤x'≤1,并且正指標(biāo)、逆指標(biāo)均可轉(zhuǎn)化為正向指標(biāo),作用方向一致。但是如果有新數(shù)據(jù)加入,就可能會(huì)導(dǎo)致最大值和最小值發(fā)生變化,就需要進(jìn)行重新定義,并重新計(jì)算極差。對(duì)指標(biāo)數(shù)據(jù)進(jìn)行上述方法處理后,加權(quán)求和排序即為綜合評(píng)分結(jié)果。

    1.3.3秩次評(píng)價(jià)法

    秩次評(píng)價(jià)法是指以每一個(gè)單項(xiàng)指標(biāo)的實(shí)際數(shù)據(jù)為基礎(chǔ)進(jìn)行排序,按指標(biāo)方向(高優(yōu)或低優(yōu)指標(biāo))給予秩次(r1,r2,…rn),若出現(xiàn)并列時(shí)取平均秩次;對(duì)每一分項(xiàng)獲得的秩次進(jìn)行加權(quán)匯總排序,即為最終綜合評(píng)價(jià)結(jié)果。

    2 結(jié)果

    2.1 全球醫(yī)療機(jī)構(gòu)心血管疾病論文影響力四種評(píng)價(jià)方法結(jié)果比較

    本研究應(yīng)用層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法、標(biāo)準(zhǔn)化處理法、極值處理法、秩次評(píng)價(jià)法4 種方法,分別對(duì)全球醫(yī)療機(jī)構(gòu)心血管疾病研究論文影響力進(jìn)行排名,排行榜前6 名基本一致。被層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法排名在前20 的醫(yī)院中,19 家(95%)醫(yī)院被標(biāo)準(zhǔn)化處理法、極值處理法以及秩次評(píng)價(jià)法判定為排名前20(表3)。被層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法納入百?gòu)?qiáng)的醫(yī)院中,89 家醫(yī)院(89%)被標(biāo)準(zhǔn)化處理法判定為百?gòu)?qiáng)醫(yī)院,90 家醫(yī)院(90%)被極值處理法和秩次評(píng)價(jià)法判定為百?gòu)?qiáng)醫(yī)院。

    表3 2016~2021 年全球醫(yī)療機(jī)構(gòu)心血管疾病論文影響力四種評(píng)價(jià)方法綜合排名(第1~20 名)

    被標(biāo)準(zhǔn)化處理法和極值處理法評(píng)為第7 名的醫(yī)院17,由于高端指標(biāo)僅5 項(xiàng),缺少AHA/ACC/ESC指南被引成果,導(dǎo)致其高端指標(biāo)得分較低(89 分),盡管其一般指標(biāo)得分(98 分)較高,但是仍然被層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法排為第17 名。被標(biāo)準(zhǔn)化處理法和極值處理法評(píng)為第11 名的醫(yī)院7,被層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法排為第7 名,由于其有更多的注冊(cè)臨床研究數(shù)量,高端指標(biāo)得分較高(98 分),因此超越了醫(yī)院8、醫(yī)院9 和醫(yī)院10 三家醫(yī)院;同時(shí)其高端指標(biāo)數(shù)量(6 個(gè))較多,因此超越了醫(yī)院17。

    2.2 中國(guó)醫(yī)院心血管疾病科技影響力四種評(píng)價(jià)方法結(jié)果比較

    本研究應(yīng)用上述四種評(píng)價(jià)方法,對(duì)全國(guó)醫(yī)療機(jī)構(gòu)心血管疾病科技影響力進(jìn)行綜合排名,排行榜前3 名完全一致。被層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法排名在前20 的醫(yī)院中,19 家醫(yī)院(95%)被標(biāo)準(zhǔn)化處理法、極值處理法以及秩次評(píng)價(jià)法判定為排名前20(表4)。被層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法納入百?gòu)?qiáng)的醫(yī)院中,93 家醫(yī)院(93%)被標(biāo)準(zhǔn)化處理和極值處理法判定為百?gòu)?qiáng)醫(yī)院,95 家醫(yī)院(95%)被秩次評(píng)價(jià)法判定為百?gòu)?qiáng)醫(yī)院。

    表4 2016~2021 年中國(guó)醫(yī)院心血管疾病科技影響力四種評(píng)價(jià)方法綜合排名(第1~20 名)

    被標(biāo)準(zhǔn)化處理法和極值處理法評(píng)為第10 名的醫(yī)院4,由于其高端指標(biāo)相對(duì)較多(8 個(gè)),AHA/ACC/ESC 指南被引成果和國(guó)家縱向課題重點(diǎn)項(xiàng)目較多,有較高的高端指標(biāo)得分(98 分),因此超越了醫(yī)院6、7、9、10、11;與醫(yī)院8 相比,醫(yī)院4 有更多的國(guó)家縱向課題面上和青年項(xiàng)目,其一般指標(biāo)得分為97 分,高于醫(yī)院8(94 分)。最終,該醫(yī)院被層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法排為第4 名。被標(biāo)準(zhǔn)化處理法和極值處理法分別評(píng)為第13 名和第12 名的醫(yī)院19,由于其影響因子大于10 分文章數(shù)量和注冊(cè)臨床研究數(shù)量相對(duì)較少,導(dǎo)致其高端指標(biāo)得分較低(87 分),因此被層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法排為第19 名。

    3 討論

    本研究在對(duì)全球醫(yī)療機(jī)構(gòu)研究論文影響力以及中國(guó)醫(yī)院心血管疾病科技影響力進(jìn)行綜合評(píng)價(jià)排名時(shí),將層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)結(jié)果與綜合評(píng)價(jià)領(lǐng)域中常用的標(biāo)準(zhǔn)化處理法、極值處理法、秩次評(píng)價(jià)法的結(jié)果,開(kāi)展了比較研究。研究結(jié)果表明,4種評(píng)價(jià)方法的結(jié)果一致性較高,其中標(biāo)準(zhǔn)化處理法和極值處理法的結(jié)果較為接近,秩次評(píng)價(jià)法與層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)法的相似度較高。層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)整合了分類(lèi)指標(biāo)體系、評(píng)價(jià)規(guī)則和秩次評(píng)價(jià)法,更能夠突出高質(zhì)量科技成果的重要性。

    目前在科研綜合評(píng)價(jià)過(guò)程中最常用的是標(biāo)準(zhǔn)化處理法和極值處理法。上述兩種方法均為線性無(wú)量綱化方法[10],且基于原始數(shù)據(jù)的描述統(tǒng)計(jì)量,如均值、標(biāo)準(zhǔn)差和極值等,保留了原始數(shù)據(jù)信息。標(biāo)準(zhǔn)化處理法基于原始數(shù)據(jù)的均值和標(biāo)準(zhǔn)差對(duì)變量取值進(jìn)行處理,穩(wěn)定性相對(duì)較好,而極值處理法則基于極大值和極小值,容易受到個(gè)別極端值的影響,穩(wěn)定性較差[11]。秩次評(píng)價(jià)法則是基于原始數(shù)據(jù)的秩次,將醫(yī)院之間指標(biāo)取值的差距壓縮為等距的秩次,更加注重每個(gè)醫(yī)療機(jī)構(gòu)的所有評(píng)價(jià)指標(biāo)在整個(gè)被評(píng)價(jià)單位中所處的相對(duì)“位置”。因此,基于秩次的秩次評(píng)價(jià)法的結(jié)果與基于原始數(shù)據(jù)信息的標(biāo)準(zhǔn)化處理法和極值處理法的結(jié)果存在一定差異。盡管損失了原始數(shù)據(jù)信息,但是取而代之的優(yōu)點(diǎn)是受原始數(shù)據(jù)影響較小。特別是對(duì)于存在“偏科”現(xiàn)象的被評(píng)價(jià)單位,如果采用基于原始數(shù)據(jù)的標(biāo)準(zhǔn)化處理法和極值處理法,很容易被某一項(xiàng)指標(biāo)拉高或者降低排名,而秩次評(píng)價(jià)法可以較好地避免這一問(wèn)題,其更加關(guān)注的是被評(píng)價(jià)單位在每項(xiàng)指標(biāo)排名中所處的“位置”,能夠較為綜合地反映被評(píng)價(jià)單位在同行之間中所處的水平。

    然而上述3 種方法均是簡(jiǎn)單地基于原始數(shù)據(jù)或秩次直接進(jìn)行加權(quán)求和,無(wú)法體現(xiàn)分級(jí)分層評(píng)價(jià)的思想。醫(yī)學(xué)科技評(píng)價(jià)體系應(yīng)當(dāng)建立多元評(píng)價(jià)體系、分類(lèi)評(píng)價(jià)體系和分級(jí)分層評(píng)價(jià)機(jī)制[12]。層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)首先將指標(biāo)進(jìn)行分類(lèi),分為“一般指標(biāo)”和“高端指標(biāo)”,并且根據(jù)高端指標(biāo)數(shù)量將待評(píng)價(jià)單位劃分梯隊(duì),在不同梯隊(duì)內(nèi)按照不同的規(guī)則采用秩次評(píng)價(jià)法進(jìn)行排名,最終整合排名結(jié)果。與上述其他方法相比,層級(jí)式多維度指標(biāo)綜合評(píng)價(jià)是將層級(jí)式指標(biāo)體系、分梯隊(duì)評(píng)價(jià)規(guī)則和秩次評(píng)價(jià)法整合在一起的綜合評(píng)價(jià)過(guò)程。該方法能夠突出科技影響力評(píng)價(jià)體系注重高質(zhì)量科技成果,體現(xiàn)了分級(jí)分層評(píng)價(jià)的思想,積極響應(yīng)現(xiàn)在的科技成果評(píng)價(jià)導(dǎo)向,是我國(guó)當(dāng)前推行的“注重高質(zhì)量成果,推進(jìn)高質(zhì)量發(fā)展”的科技成果評(píng)價(jià)機(jī)制的良好實(shí)踐[13]。該方法在心血管領(lǐng)域的應(yīng)用與實(shí)踐引起了社會(huì)的廣泛關(guān)注,評(píng)價(jià)結(jié)果將進(jìn)一步促進(jìn)我國(guó)心血管研究事業(yè)的健康發(fā)展。因此,該方法可以嘗試在心血管醫(yī)學(xué)領(lǐng)域之外的其他領(lǐng)域開(kāi)展應(yīng)用實(shí)踐,進(jìn)一步印證該方法的可操作性和可推廣性。

    綜合評(píng)價(jià)方法是科技影響力綜合評(píng)價(jià)的最后且關(guān)鍵的環(huán)節(jié),其需要建立在科學(xué)合理的指標(biāo)體系及權(quán)重、穩(wěn)定可靠的數(shù)據(jù)來(lái)源、嚴(yán)謹(jǐn)細(xì)致的數(shù)據(jù)清洗和整理基礎(chǔ)之上,之前任一環(huán)節(jié)出現(xiàn)問(wèn)題,都將導(dǎo)致最終評(píng)價(jià)結(jié)果的差異,甚至出現(xiàn)違反常識(shí)的結(jié)果。綜合評(píng)價(jià)方法的選擇,除了需要從方法學(xué)角度考慮之外,還應(yīng)結(jié)合實(shí)際數(shù)據(jù)情況采用多種評(píng)價(jià)方法進(jìn)行評(píng)價(jià),分析多種評(píng)價(jià)結(jié)果的異同,結(jié)合實(shí)際情況謹(jǐn)慎進(jìn)行選擇。

    利益沖突:所有作者均聲明不存在利益沖突

    猜你喜歡
    秩次多維度極值
    極值點(diǎn)帶你去“漂移”
    極值點(diǎn)偏移攔路,三法可取
    “多維度評(píng)改”方法初探
    一類(lèi)“極值點(diǎn)偏移”問(wèn)題的解法與反思
    多維度市南
    商周刊(2017年7期)2017-08-22 03:36:22
    非整秩次秩和比法綜合評(píng)價(jià)醫(yī)院工作效率
    山東省農(nóng)業(yè)可持續(xù)發(fā)展能力評(píng)價(jià)研究——基于非整秩次WRSR
    匹配數(shù)為1的極值2-均衡4-部4-圖的結(jié)構(gòu)
    多維度巧設(shè)聽(tīng)課評(píng)價(jià)表 促進(jìn)聽(tīng)評(píng)課的務(wù)實(shí)有效
    體育師友(2012年4期)2012-03-20 15:30:10
    2009—2010賽季CBA各隊(duì)攻防能力的分析
    九九在线视频观看精品| 色5月婷婷丁香| 99久国产av精品| 午夜精品在线福利| 一级二级三级毛片免费看| 丰满人妻一区二区三区视频av| 身体一侧抽搐| 白带黄色成豆腐渣| 91精品一卡2卡3卡4卡| 狠狠精品人妻久久久久久综合| 亚洲四区av| av在线播放精品| 国产精品爽爽va在线观看网站| 婷婷六月久久综合丁香| 两个人的视频大全免费| 你懂的网址亚洲精品在线观看| 国产又色又爽无遮挡免| 久久久久久久亚洲中文字幕| 久久久久久久大尺度免费视频| 青春草国产在线视频| 亚洲最大成人手机在线| 亚洲怡红院男人天堂| 久久久久久久久大av| 2021天堂中文幕一二区在线观| 午夜福利高清视频| 你懂的网址亚洲精品在线观看| 国产精品.久久久| 亚洲性久久影院| 少妇的逼水好多| 欧美一级a爱片免费观看看| 亚洲不卡免费看| 日韩成人伦理影院| 男女那种视频在线观看| 亚洲精品国产av蜜桃| 嘟嘟电影网在线观看| 韩国高清视频一区二区三区| 国产黄色视频一区二区在线观看| 国模一区二区三区四区视频| 天天躁日日操中文字幕| 亚洲精品久久午夜乱码| 视频中文字幕在线观看| 国产精品精品国产色婷婷| 在线免费观看的www视频| 热99在线观看视频| 亚洲成人中文字幕在线播放| 日韩欧美精品v在线| 久久久午夜欧美精品| 国产高潮美女av| 永久网站在线| 在线天堂最新版资源| 插逼视频在线观看| 美女脱内裤让男人舔精品视频| 欧美最新免费一区二区三区| 看十八女毛片水多多多| 插逼视频在线观看| 日本黄大片高清| 日本-黄色视频高清免费观看| 精品国产一区二区三区久久久樱花 | 国产精品一区二区三区四区久久| 日韩大片免费观看网站| 丰满人妻一区二区三区视频av| 久久久久久伊人网av| 免费不卡的大黄色大毛片视频在线观看 | 综合色av麻豆| 亚洲精品国产成人久久av| 91久久精品国产一区二区三区| 亚洲国产欧美人成| 色综合站精品国产| 狂野欧美激情性xxxx在线观看| 91久久精品国产一区二区三区| 国产高清国产精品国产三级 | 久久亚洲国产成人精品v| 日韩在线高清观看一区二区三区| av专区在线播放| 中文字幕av在线有码专区| 久久这里有精品视频免费| 国产精品人妻久久久久久| 天堂av国产一区二区熟女人妻| 中文字幕av在线有码专区| 国产精品人妻久久久久久| 日韩,欧美,国产一区二区三区| 亚洲最大成人中文| .国产精品久久| 欧美三级亚洲精品| 两个人的视频大全免费| 永久免费av网站大全| 精品人妻偷拍中文字幕| 亚洲精品自拍成人| 亚洲欧美精品专区久久| 日本与韩国留学比较| 97人妻精品一区二区三区麻豆| 亚洲欧美日韩无卡精品| 婷婷色综合大香蕉| 亚洲怡红院男人天堂| 色吧在线观看| 午夜激情久久久久久久| 男女边吃奶边做爰视频| 免费大片18禁| 卡戴珊不雅视频在线播放| 2021少妇久久久久久久久久久| 大香蕉97超碰在线| 国产片特级美女逼逼视频| 国产精品久久久久久精品电影小说 | 国产日韩欧美在线精品| 美女被艹到高潮喷水动态| 91精品一卡2卡3卡4卡| 看免费成人av毛片| av福利片在线观看| 国产一级毛片七仙女欲春2| 日韩一本色道免费dvd| 2021天堂中文幕一二区在线观| 国产一区二区在线观看日韩| 久久久久久伊人网av| 国产男人的电影天堂91| 中文精品一卡2卡3卡4更新| 久久久久久国产a免费观看| 18禁在线播放成人免费| 日本爱情动作片www.在线观看| 精品久久久久久久末码| 老司机影院成人| 国产黄色视频一区二区在线观看| 美女高潮的动态| 亚洲国产精品国产精品| 午夜福利网站1000一区二区三区| 91久久精品电影网| 国产黄频视频在线观看| 久久精品久久久久久噜噜老黄| 一级毛片 在线播放| 久久久久久国产a免费观看| 观看美女的网站| 亚洲婷婷狠狠爱综合网| 国产精品嫩草影院av在线观看| 精品人妻熟女av久视频| 亚洲成人一二三区av| 亚洲图色成人| 十八禁国产超污无遮挡网站| 久久久精品免费免费高清| 欧美人与善性xxx| 插逼视频在线观看| 日韩一本色道免费dvd| 久久精品久久久久久噜噜老黄| 日韩欧美三级三区| 久久久久久久午夜电影| 久久6这里有精品| 毛片女人毛片| 韩国av在线不卡| 在线观看人妻少妇| 少妇的逼水好多| 国内精品一区二区在线观看| 国产高清不卡午夜福利| 我的老师免费观看完整版| 蜜臀久久99精品久久宅男| 美女大奶头视频| 国产成人免费观看mmmm| 男女国产视频网站| 少妇猛男粗大的猛烈进出视频 | 欧美成人a在线观看| 中文乱码字字幕精品一区二区三区 | 久久久a久久爽久久v久久| 美女被艹到高潮喷水动态| 国内精品一区二区在线观看| 人妻夜夜爽99麻豆av| 亚洲精品成人久久久久久| 爱豆传媒免费全集在线观看| 深爱激情五月婷婷| 18禁在线无遮挡免费观看视频| 久久久色成人| 中文字幕亚洲精品专区| 亚洲av成人精品一区久久| 国产亚洲精品av在线| 国产精品1区2区在线观看.| 日韩一本色道免费dvd| 男女下面进入的视频免费午夜| a级毛片免费高清观看在线播放| 久久综合国产亚洲精品| 精品久久久久久久末码| 国产精品一区www在线观看| 精品久久久久久成人av| 黄色欧美视频在线观看| 内射极品少妇av片p| 色综合色国产| 男女边摸边吃奶| 亚洲av成人精品一二三区| 欧美精品国产亚洲| 一二三四中文在线观看免费高清| 人妻少妇偷人精品九色| 中文字幕亚洲精品专区| 欧美一级a爱片免费观看看| 日韩,欧美,国产一区二区三区| 一区二区三区高清视频在线| 亚洲精品日韩av片在线观看| 国产成人福利小说| 免费观看无遮挡的男女| 成人性生交大片免费视频hd| 久久久久久久国产电影| 国产午夜精品一二区理论片| 欧美区成人在线视频| 亚洲精品久久久久久婷婷小说| 婷婷六月久久综合丁香| 狂野欧美激情性xxxx在线观看| 欧美日韩国产mv在线观看视频 | 日日啪夜夜撸| 一级毛片 在线播放| 欧美日韩视频高清一区二区三区二| 亚洲四区av| 亚洲国产成人一精品久久久| 国产伦精品一区二区三区四那| 久久久久久久久久久免费av| 只有这里有精品99| 国产成年人精品一区二区| 校园人妻丝袜中文字幕| av女优亚洲男人天堂| 国产在线一区二区三区精| 亚洲,欧美,日韩| 两个人的视频大全免费| 国产不卡一卡二| 97在线视频观看| 亚洲精品国产av成人精品| 免费看日本二区| 久久久精品免费免费高清| av天堂中文字幕网| 国产精品福利在线免费观看| 国产亚洲91精品色在线| 两个人视频免费观看高清| 99热6这里只有精品| 中文字幕人妻熟人妻熟丝袜美| 搞女人的毛片| 22中文网久久字幕| 色综合亚洲欧美另类图片| 搡老乐熟女国产| 亚洲最大成人手机在线| 亚洲av电影不卡..在线观看| 国产男人的电影天堂91| 色哟哟·www| 国模一区二区三区四区视频| 成人鲁丝片一二三区免费| 国产日韩欧美在线精品| 精品酒店卫生间| 日本与韩国留学比较| 国产av不卡久久| 在线观看免费高清a一片| 国产精品美女特级片免费视频播放器| 国产 一区 欧美 日韩| 搞女人的毛片| 神马国产精品三级电影在线观看| 国产一区亚洲一区在线观看| 国产免费视频播放在线视频 | 男女啪啪激烈高潮av片| 国产男人的电影天堂91| 欧美成人一区二区免费高清观看| 蜜桃亚洲精品一区二区三区| 国产在线男女| 大话2 男鬼变身卡| 久久久久久久久大av| 一二三四中文在线观看免费高清| 欧美丝袜亚洲另类| 午夜久久久久精精品| 亚洲色图av天堂| 亚洲欧美精品专区久久| 舔av片在线| 国产成人aa在线观看| 丝袜喷水一区| 亚洲av二区三区四区| 婷婷色综合大香蕉| av在线天堂中文字幕| 99热6这里只有精品| 日韩一区二区视频免费看| 日本黄大片高清| 国产精品国产三级国产av玫瑰| 亚洲国产精品成人综合色| 久久精品久久久久久久性| 80岁老熟妇乱子伦牲交| 亚洲欧美一区二区三区黑人 | 日韩在线高清观看一区二区三区| 日本免费在线观看一区| 国产精品av视频在线免费观看| 欧美性感艳星| 久久99热6这里只有精品| 免费人成在线观看视频色| av天堂中文字幕网| 成年女人看的毛片在线观看| 美女主播在线视频| 婷婷六月久久综合丁香| 亚洲av一区综合| 99热6这里只有精品| 亚洲丝袜综合中文字幕| 大话2 男鬼变身卡| 午夜激情久久久久久久| 午夜精品在线福利| 最近最新中文字幕大全电影3| 老司机影院毛片| 精品国产三级普通话版| 天美传媒精品一区二区| 免费看日本二区| 日韩,欧美,国产一区二区三区| 亚洲真实伦在线观看| 成人特级av手机在线观看| 成年人午夜在线观看视频 | 夫妻性生交免费视频一级片| 最新中文字幕久久久久| 国产免费视频播放在线视频 | 亚洲乱码一区二区免费版| 欧美一区二区亚洲| 亚洲人与动物交配视频| 亚洲在线自拍视频| 国内精品美女久久久久久| xxx大片免费视频| 中文乱码字字幕精品一区二区三区 | 国产成人freesex在线| 只有这里有精品99| 亚洲av电影在线观看一区二区三区 | 日韩欧美三级三区| 免费观看的影片在线观看| 国产精品麻豆人妻色哟哟久久 | 成人午夜高清在线视频| 亚洲精品国产av蜜桃| 色综合色国产| 久久这里只有精品中国| 欧美成人a在线观看| 亚洲精品乱码久久久v下载方式| 夫妻性生交免费视频一级片| www.色视频.com| 亚洲国产最新在线播放| 国产在视频线在精品| 一级毛片黄色毛片免费观看视频| 最近最新中文字幕免费大全7| 日韩欧美精品免费久久| 午夜精品一区二区三区免费看| 久久久久久九九精品二区国产| 亚洲欧洲日产国产| 免费黄色在线免费观看| 色5月婷婷丁香| 亚洲精品成人久久久久久| 日日摸夜夜添夜夜爱| 又爽又黄a免费视频| 全区人妻精品视频| 美女国产视频在线观看| 18禁裸乳无遮挡免费网站照片| 一级爰片在线观看| 国产免费福利视频在线观看| 色吧在线观看| 在现免费观看毛片| 大又大粗又爽又黄少妇毛片口| 日韩欧美 国产精品| 亚洲国产欧美在线一区| 一本一本综合久久| 蜜桃亚洲精品一区二区三区| 免费人成在线观看视频色| 永久网站在线| 国产精品无大码| 亚洲aⅴ乱码一区二区在线播放| 一级片'在线观看视频| 大片免费播放器 马上看| 中文在线观看免费www的网站| 亚洲经典国产精华液单| 99久久中文字幕三级久久日本| 在现免费观看毛片| 80岁老熟妇乱子伦牲交| 国产黄频视频在线观看| 一区二区三区四区激情视频| 99久国产av精品| 国产高清不卡午夜福利| 亚洲国产欧美在线一区| 韩国av在线不卡| 少妇熟女aⅴ在线视频| 精品一区二区免费观看| 国产精品熟女久久久久浪| 80岁老熟妇乱子伦牲交| 国产黄频视频在线观看| 国产高清有码在线观看视频| 别揉我奶头 嗯啊视频| 亚洲国产高清在线一区二区三| 一边亲一边摸免费视频| 三级国产精品片| 免费大片黄手机在线观看| 亚洲怡红院男人天堂| 亚洲精品日本国产第一区| 成人一区二区视频在线观看| freevideosex欧美| 午夜亚洲福利在线播放| 亚洲av在线观看美女高潮| 大话2 男鬼变身卡| 乱人视频在线观看| 内地一区二区视频在线| 亚洲欧美一区二区三区黑人 | 黄色一级大片看看| 七月丁香在线播放| 国产精品一区www在线观看| 久久精品国产亚洲av涩爱| 99热网站在线观看| 一本一本综合久久| 看黄色毛片网站| 日韩欧美精品v在线| 一本久久精品| 80岁老熟妇乱子伦牲交| 五月伊人婷婷丁香| 高清欧美精品videossex| 久久久欧美国产精品| 看非洲黑人一级黄片| 禁无遮挡网站| 欧美高清成人免费视频www| 亚洲自拍偷在线| 欧美日韩国产mv在线观看视频 | 一级片'在线观看视频| 日韩一区二区三区影片| 精品国产一区二区三区久久久樱花 | 爱豆传媒免费全集在线观看| 亚洲精品第二区| 女人久久www免费人成看片| 国产精品人妻久久久影院| 免费在线观看成人毛片| 国产毛片a区久久久久| 最近最新中文字幕免费大全7| 久久精品夜色国产| 欧美激情久久久久久爽电影| 国产欧美另类精品又又久久亚洲欧美| 国产成人aa在线观看| www.av在线官网国产| 亚洲18禁久久av| 女人被狂操c到高潮| 夜夜看夜夜爽夜夜摸| 舔av片在线| 高清在线视频一区二区三区| 精品人妻偷拍中文字幕| 最近中文字幕高清免费大全6| 中文字幕人妻熟人妻熟丝袜美| 午夜日本视频在线| 毛片一级片免费看久久久久| 国产淫语在线视频| 国产真实伦视频高清在线观看| av国产久精品久网站免费入址| 中文字幕av在线有码专区| 国产伦精品一区二区三区视频9| 一区二区三区乱码不卡18| 日韩欧美一区视频在线观看 | 精品国产三级普通话版| 成人性生交大片免费视频hd| 十八禁网站网址无遮挡 | 精品午夜福利在线看| 亚洲成人一二三区av| 永久网站在线| 日本av手机在线免费观看| videos熟女内射| 亚洲乱码一区二区免费版| 99久久精品国产国产毛片| 亚洲无线观看免费| 精品人妻熟女av久视频| 亚洲美女视频黄频| 非洲黑人性xxxx精品又粗又长| 三级男女做爰猛烈吃奶摸视频| 淫秽高清视频在线观看| 精品人妻一区二区三区麻豆| 亚洲精品亚洲一区二区| 成人无遮挡网站| 日日摸夜夜添夜夜添av毛片| 日韩伦理黄色片| 99久国产av精品国产电影| www.av在线官网国产| 久久久国产一区二区| 日本三级黄在线观看| 久久久午夜欧美精品| 国产在视频线精品| 伊人久久精品亚洲午夜| 国产成人a区在线观看| 亚洲精品日韩在线中文字幕| 国模一区二区三区四区视频| 97超碰精品成人国产| 国产成人91sexporn| 久99久视频精品免费| 大陆偷拍与自拍| 国产精品人妻久久久影院| 中文字幕亚洲精品专区| 国产男人的电影天堂91| 久久久久久久国产电影| 国产极品天堂在线| 最近视频中文字幕2019在线8| 国产在视频线在精品| av在线观看视频网站免费| 国产老妇伦熟女老妇高清| 国产欧美日韩精品一区二区| 97人妻精品一区二区三区麻豆| 91精品伊人久久大香线蕉| 日日摸夜夜添夜夜添av毛片| 国产亚洲91精品色在线| 午夜精品国产一区二区电影 | 国产成人精品一,二区| 婷婷色麻豆天堂久久| 老司机影院成人| 岛国毛片在线播放| 美女xxoo啪啪120秒动态图| 亚洲在线观看片| 99久久精品热视频| 麻豆精品久久久久久蜜桃| 三级国产精品欧美在线观看| 国产成人a∨麻豆精品| 免费看不卡的av| 黑人高潮一二区| av线在线观看网站| 亚洲欧美精品专区久久| 亚洲国产色片| 国产老妇女一区| 日本免费a在线| 成年女人在线观看亚洲视频 | 国产 一区精品| 人妻少妇偷人精品九色| 免费观看在线日韩| 国模一区二区三区四区视频| 日本熟妇午夜| 国产精品爽爽va在线观看网站| 日韩欧美一区视频在线观看 | 日日撸夜夜添| 亚洲美女搞黄在线观看| 日韩一本色道免费dvd| 国产老妇伦熟女老妇高清| 老司机影院毛片| 亚洲最大成人av| 精品一区二区三卡| 亚洲av男天堂| 亚洲精品国产av蜜桃| 国产真实伦视频高清在线观看| 国产人妻一区二区三区在| 亚洲欧美精品自产自拍| 欧美一区二区亚洲| 亚洲欧美成人精品一区二区| 国产黄a三级三级三级人| 又黄又爽又刺激的免费视频.| 搡女人真爽免费视频火全软件| 国产v大片淫在线免费观看| 国产亚洲5aaaaa淫片| 在线免费观看不下载黄p国产| 欧美精品一区二区大全| 大香蕉97超碰在线| 精品不卡国产一区二区三区| 一夜夜www| 久久精品国产亚洲av涩爱| or卡值多少钱| 成人欧美大片| 国产成人福利小说| 国产免费又黄又爽又色| 免费av毛片视频| 国产大屁股一区二区在线视频| 亚洲欧美成人综合另类久久久| 亚洲精品国产av蜜桃| 精品人妻视频免费看| 久久人人爽人人片av| 神马国产精品三级电影在线观看| 国产精品久久久久久精品电影小说 | av国产免费在线观看| 麻豆av噜噜一区二区三区| 久久99精品国语久久久| 少妇人妻精品综合一区二区| 91午夜精品亚洲一区二区三区| 简卡轻食公司| 国产爱豆传媒在线观看| 老司机影院成人| 永久网站在线| 一级毛片我不卡| 国产av码专区亚洲av| 一本久久精品| 亚洲电影在线观看av| 久久久久九九精品影院| 夫妻性生交免费视频一级片| 丝袜美腿在线中文| 一个人看的www免费观看视频| 国产精品久久视频播放| 久久久久久久久久人人人人人人| 卡戴珊不雅视频在线播放| 少妇熟女aⅴ在线视频| 国产黄色小视频在线观看| 久久精品国产亚洲av涩爱| 超碰av人人做人人爽久久| 搞女人的毛片| 亚洲精品久久午夜乱码| 国产成人freesex在线| 嫩草影院新地址| 伊人久久精品亚洲午夜| 一边亲一边摸免费视频| 日韩一区二区视频免费看| 久久久精品94久久精品| 久久久久久久久中文| av在线天堂中文字幕| 久久久久久久久久成人| 日韩成人av中文字幕在线观看| 日本熟妇午夜| 少妇猛男粗大的猛烈进出视频 | 欧美高清性xxxxhd video| 国内揄拍国产精品人妻在线| 直男gayav资源| av免费在线看不卡| 男女那种视频在线观看| 国产男人的电影天堂91| 国产色婷婷99| 一级片'在线观看视频| av专区在线播放| 日韩强制内射视频| 伦精品一区二区三区| 女人十人毛片免费观看3o分钟| 久久久久久久久久久免费av| 一区二区三区免费毛片| 一个人看的www免费观看视频| 97热精品久久久久久| 亚洲电影在线观看av| 久久久久网色| 男女啪啪激烈高潮av片| 免费在线观看成人毛片| 日本与韩国留学比较| 国产精品久久久久久久久免| 免费播放大片免费观看视频在线观看| 别揉我奶头 嗯啊视频| 我的女老师完整版在线观看| 欧美一级a爱片免费观看看| 一级a做视频免费观看| 国产精品人妻久久久久久| 免费看美女性在线毛片视频| 中国美白少妇内射xxxbb|