基于國際臨床指南引用論文的中國研究影響力評價
——以呼吸病學(xué)為例

胥美美 單連慧 安新穎

中國醫(yī)學(xué)科學(xué)院醫(yī)學(xué)信息研究所 北京 100020

引言

近幾年，各國政府對評價研究影響的興趣與日俱增，許多政府機構(gòu)和研究組織已開始將研究影響評價用作科學(xué)決策的實用工具[1-4]。我國對于如何開展研究影響評價還停留在初步階段，通常是采用文獻計量方法針對引文進行分析以評價研究對目前知識的貢獻程度?？茖W(xué)研究除了對知識的貢獻，更有價值的是評價其對健康、社會以及經(jīng)濟的影響等，如醫(yī)學(xué)研究是否改變診療方案、是否被臨床指南采納等。評價科學(xué)研究是否被國際臨床指南引用，已被作為一種衡量研究影響力的重要指標(biāo)，用于多個國家科技評價實踐中，如英國MRC采用Researchfish工具將科學(xué)研究在臨床指南中的引用作為衡量研究對政策的影響指標(biāo)之一[5]，加拿大健康科學(xué)院CAHS科技評價框架納入研究成果應(yīng)用于臨床指南情況作為評價研究支撐決策的能力指標(biāo)之一[6]，2020年度泰晤士高等教育世界大學(xué)影響力評價（THE University Impact Rankings 2020）使用臨床指南引用的論文比例衡量大學(xué)健康與福祉研究情況[7]，2018年度中國醫(yī)院科技量值研究使用國際臨床指南引用論文數(shù)量[8]作為科技產(chǎn)出的測度指標(biāo)之一。

21世紀以來，傳染性非典型肺炎（SARS）、甲型H1N1流感、中東呼吸綜合征（MERS）、新型冠狀病毒肺炎（COVID-19）等危害較大的新發(fā)呼吸道傳染病防治凸顯了各國呼吸病學(xué)的重要性，有價值的科學(xué)研究為疫情防控提供了強有力的科技支撐。本研究以呼吸病學(xué)領(lǐng)域為例，通過分析該領(lǐng)域國際權(quán)威臨床指南引用的中國論文情況，揭示中國大陸地區(qū)該領(lǐng)域科學(xué)研究的影響力情況，回答幾個關(guān)鍵科學(xué)問題：（1）臨床指南中對論文的引用情感如何？（2）論文發(fā)表多長時間會被臨床指南引用？（3）臨床指南引用的論文是否均為臨床研究？（4）論文是否被臨床指南引用與發(fā)表期刊影響因子、基金資助和國際合作是否相關(guān)？通過本研究對上述問題的探討，將為提高我國呼吸病學(xué)臨床研究影響力提供方向。

1 數(shù)據(jù)與方法

1.1 確定臨床指南

國際現(xiàn)有的臨床指南數(shù)據(jù)庫所收錄的臨床指南數(shù)量存在差異且指南質(zhì)量參差不齊，本研究認為分析高質(zhì)量指南的引用論文更有價值。因此，選取5位在呼吸病學(xué)領(lǐng)域知名專家進行咨詢，每位專家提名呼吸病學(xué)領(lǐng)域國際臨床指南權(quán)威制定機構(gòu)，提名結(jié)果一致，均為5家國際機構(gòu)，具體包括美國胸科學(xué)會(ATS, American Thoracic Society)、美國胸科醫(yī)師學(xué)會(ACCP,American College of Chest Physicians)、歐洲呼吸 學(xué) 會(ERS, European Respiratory Society)、美國國家綜合癌癥網(wǎng)絡(luò)(NCCN, National Comprehensive Cancer Network)和歐洲腫瘤內(nèi)科學(xué)會(ESMO, European Society for Medical Oncology)?；谝陨?家國際機構(gòu)官網(wǎng)采集2014-2018年發(fā)布的呼吸病學(xué)國際臨床指南，獲得98個臨床指南，其中最新版本指南為49個。

1.2 指南引用文獻處理

通過Web of Science數(shù)據(jù)庫查找49個最新版本臨床指南的入藏號并提取引用文獻全記錄信息，若不能獲得臨床指南入藏號則人工提取指南全文中的參考文獻，再通過Web of Science數(shù)據(jù)庫提取全記錄信息。針對指南引用文獻全記錄信息，進行數(shù)據(jù)處理，提取作者地址字段中含有中國以及文獻類型為article和review的引用文獻作為后續(xù)數(shù)據(jù)處理的數(shù)據(jù)集。對數(shù)據(jù)集中的第一作者和通訊作者機構(gòu)、基金資助進行規(guī)范。當(dāng)多個發(fā)文機構(gòu)或基金資助機構(gòu)涉及同一篇論文時，對于每個發(fā)文機構(gòu)或基金資助機構(gòu)的論文數(shù)均計為1。

1.3 指南引用文獻特征分析

基于文獻計量法利用R軟件對論文引用情感、引用論文的年齡、研究類型、基金資助情況等指標(biāo)分別進行統(tǒng)計分析，以揭示這些論文的特征。關(guān)于論文引用情感（正面引用、中性引用和負面引用）和研究類型（臨床研究和基礎(chǔ)研究）由兩位研究人員背對背分別進行注釋，當(dāng)兩位研究人員對同一論文具有不同的注釋時，將由第三位研究人員參與決策。

2 結(jié)果

49個發(fā)布的最新版國際臨床指南涉及咳嗽、肺癌、肺動脈高壓、慢性阻塞性肺疾病等20個病種，其中咳嗽和肺癌指南數(shù)量最多，分別有8個和7個（圖1）；31個指南（占比為63.27%）引用了中國大陸地區(qū)SCIE論文，8個指南（占比為16.33%）引用了5篇以上的中國大陸地區(qū)SCIE論文（圖2）。所分析指南引用中國大陸地區(qū)SCIE論文合計為101篇，article和review分別為83篇（82.18%）和18篇（17.82%）。鑒于各期刊對于review界定不一樣，特別是meta分析類研究，因此本研究統(tǒng)一將meta分析歸為review，重新分類后，article有62篇（占比為61.39%），review有39篇（占比為38.61%）。

圖1 呼吸病學(xué)國際臨床指南病種分布情況

圖2 呼吸病學(xué)國際臨床指南引用中文論文數(shù)量分布情況

2.1 知識周期時間

2014-2018年臨床指南引用論文的最早發(fā)表年份為1987年，未引用90年代發(fā)表的論文，引用2014年發(fā)表的論文數(shù)最多（圖3）。專利分析中通常使用現(xiàn)有技術(shù)周期時間，即專利首頁引用的專利的中位年齡。Grant等[9]將臨床指南中引用論文的年齡稱為知識周期時間，本研究借鑒這一表述，進一步分析知識周期時間，結(jié)果顯示中國研究的知識周期中值時間為4年。但有7.92%的被引論文年齡為10年以上，1.98%的被引論文年齡為25年以上（圖4）。

圖3 呼吸病學(xué)國際臨床指南引用中國大陸地區(qū)發(fā)表的SCIE論文年份分布

圖4 呼吸病學(xué)國際臨床指南引用的中國大陸地區(qū)論文年齡情況

2.2 發(fā)文機構(gòu)情況

101篇被引論文涉及60個第一作者或通訊作者發(fā)文機構(gòu)，包括50家醫(yī)院、9所高校和1家科研機構(gòu)。發(fā)文數(shù)量前十的機構(gòu)均為醫(yī)院，合計發(fā)表52篇，占比為51.49% (表1)。上海市肺科醫(yī)院、廣州醫(yī)科大學(xué)附屬第一醫(yī)院、首都醫(yī)科大學(xué)附屬北京朝陽醫(yī)院發(fā)文數(shù)量最多，分別為12篇（占比為11.88%）、9篇（占比為8.91%）和7篇（占比為6.93%），這些醫(yī)院在中國醫(yī)學(xué)科學(xué)院發(fā)布的《2018年度中國醫(yī)院科技量值研究》[8]中位于呼吸病學(xué)排名前10，說明呼吸病學(xué)學(xué)科較強的機構(gòu)臨床實踐影響力也較強。

表1 發(fā)表被呼吸病學(xué)國際臨床指南引用論文數(shù)量前十的中國機構(gòu)

2.3 期刊分布

101篇SCIE論文發(fā)表在68種期刊。由表2顯示，發(fā)表論文數(shù)量排名前十的期刊合計發(fā)表39篇（占比38.61%），以在PLOS ONE和CHEST期刊發(fā)文最多，分別為7篇（占比6.93%）和6篇（占比5.94%）。

表2 發(fā)表指南引用論文數(shù)量排名前十的期刊

表3 臨床指南引用論文所在期刊的影響因子情況（TOP10）

期刊影響因子一定程度上反映論文質(zhì)量。期刊FEMS Immunology and Medical Microbiology已于2005年停辦，目前影響因子為0。根據(jù)2018年JCR期刊引證報告，其他期刊影響因子范圍為0.181～59.102。發(fā)表在影響因子10分以上期刊的論文數(shù)量有14篇，占比13.86%（表3）。發(fā)表在影響因子排名前三的期刊為LANCET、LANCET ONCOLOGY和JOURNAL OF CLINICAL ONCOLOGY。發(fā)表在影響因子5 分以下期刊的論文數(shù)量占65.35%，說明產(chǎn)生臨床實踐影響的論文并非都發(fā)表在高影響因子期刊。

2.4 指南引用次數(shù)

采用同一篇論文被多個不同指南引用次數(shù)來進一步比較論文影響力。本研究發(fā)現(xiàn)3篇論文被多個指南引用（表4），分別是上海市肺科醫(yī)院、首都醫(yī)科大學(xué)附屬北京朝陽醫(yī)院和廣東省人民醫(yī)院發(fā)表的論文，體現(xiàn)這3篇論文在呼吸病學(xué)臨床實踐中具有較大的影響力。

表4 中國大陸地區(qū)發(fā)表的SCIE論文被多個呼吸病學(xué)國際臨床指南引用情況

2.5 引用情感

Xu等[10]研究發(fā)現(xiàn)生物醫(yī)學(xué)領(lǐng)域與其他領(lǐng)域（例如計算機科學(xué)）對引文的情感表述存在不同，因此本研究參考Xu等研究中關(guān)于臨床試驗論文對引用內(nèi)容的情感（正面引用、中性引用和負面引用）界定方法，對101篇論文被49個指南的具體引用情況進行分析，發(fā)現(xiàn)12篇是正面引用（11.88%），89篇為中性引用（88.12%），不存在負面引用。說明被指南引用的論文可以用來表征研究的影響力，在將論文用于科技評價指標(biāo)時，被指南引用的論文應(yīng)給予更高的關(guān)注度。本研究還進一步采用表征論文學(xué)術(shù)影響力的傳統(tǒng)指標(biāo)即總被引頻次和年均被引頻次，分析不同引用情感的論文學(xué)術(shù)影響力是否有區(qū)別。鑒于引用時間窗口的問題，總被引頻次不能客觀反映發(fā)表年份晚的論文影響力，因此使用總被引頻次和年均被引頻次兩個指標(biāo)。通過分析發(fā)現(xiàn)，正面引用的論文被引頻次及年均被引頻次均比中性引用的論文高，但經(jīng)Wilcoxon秩和檢驗，兩組的被引頻次和年均被引頻次無統(tǒng)計學(xué)差異（P＞0.05），只能說明學(xué)術(shù)影響力高即被引頻次或年均被引頻次高的論文更有可能被指南正面引用。

表 5 不同引用類型的論文影響力情況

2.6 研究類型

美國NIH針對臨床研究界定[11]為對人類受試者開展的研究，包括干預(yù)性研究和觀察性研究?；诖硕x，對本研究的62篇論著進行分類，臨床研究和基礎(chǔ)研究分別有58篇和4篇，占比分別為93.55%和6.45%。說明臨床指南引用的中國大陸機構(gòu)開展的原始研究主要為臨床研究。而在原始研究中，干預(yù)性研究的證據(jù)等級高于觀察性研究。呼吸病學(xué)權(quán)威國際臨床指南引用的中國大陸機構(gòu)開展的臨床研究中，39.66%為干預(yù)性研究，占比低于證據(jù)等級低的觀察性研究。

2.7 論文基金資助機構(gòu)情況

由表6顯示，有基金資助的論文為52篇（占比為51.49%），其中政府資助的論文有33篇（占比為32.67%），以國家自然科學(xué)基金委資助論文數(shù)量最多，有18篇（占比為17.82%），其次是各省科技廳資助的論文，數(shù)量為13篇（占比為12.87%）；由WHO等國外機構(gòu)資助的論文有7篇（占比為6.93%），無其他資助機構(gòu)、僅由默沙東等藥企資助的論文有12篇（占比為11.88%）。從資助機構(gòu)數(shù)量來看，2個及以上資助機構(gòu)資助的論文數(shù)量為20篇，占基金資助論文的38.46%。有基金資助的論文篇均年均被引頻次（25.32）高于無基金資助的論文篇均年均被引頻次（8.30）。

表 6 指南引用論文資助機構(gòu)情況

2.8 合作情況分析

本研究將合作形式分為國際合作、國內(nèi)機構(gòu)間合作、機構(gòu)內(nèi)合作。101篇被引論文中，合作論文有72篇（占比為71.29%），其中國際合作、國內(nèi)機構(gòu)間合作以及機構(gòu)內(nèi)合作分別有26篇、41篇和5篇，占比分別為36.11%、56.95%和6.94%。國際合作中，60%為與美國學(xué)者的合作。國內(nèi)機構(gòu)間合作主要是以國內(nèi)呼吸病學(xué)科技實力突出的廣州醫(yī)科大學(xué)第一附屬醫(yī)院、四川大學(xué)華西醫(yī)院以及上海市肺科醫(yī)院與其他醫(yī)院之間的合作。上述分析說明國際權(quán)威指南引用的中國論文主要為合作論文，合作形式以國內(nèi)機構(gòu)間合作居多。

3 討論

本研究分析發(fā)現(xiàn)中國大陸地區(qū)論文發(fā)表與指南發(fā)表之間的平均時間間隔為4年。Grant等[9]學(xué)者分析了15個英國臨床指南引用論文情況，發(fā)現(xiàn)引用的論文發(fā)表年限平均為8年。由于數(shù)據(jù)獲得性問題，本研究未分析所有呼吸病學(xué)領(lǐng)域指南引用的論文發(fā)表年限。以Grant的研究為參照，對比本研究的結(jié)果，說明中國論文能更早的被國際臨床指南引用，但也可能是由于Grant的研究發(fā)表時間（2000年）比較早，而目前指南更新和論文發(fā)表的速度均更快，導(dǎo)致指南可以較快的引用近期研究。

目前尚無關(guān)于臨床指南中對論文引用情感的分析。Xu等[10]對臨床試驗論文引用情感進行分析，結(jié)果顯示16.79%為正面引用、75.85%為中性引用、7.36%為負面引用。臨床指南是由第三方組織發(fā)布的、基于對已發(fā)表醫(yī)學(xué)文獻進行嚴格的系統(tǒng)綜述和整合所獲得的證據(jù)基礎(chǔ)之上而形成的針對疾病診斷和治療的推薦建議[12]?；谂R床指南的定義，臨床指南對論文的引用主要是用作推薦建議的證據(jù)，這與傳統(tǒng)科學(xué)文獻引用情感有一定的區(qū)別。本研究發(fā)現(xiàn)國際權(quán)威指南對中國大陸地區(qū)論文的引用為中性引用和正面引用，因此采用論文是否被指南引用來表征研究影響力是科學(xué)的。

本研究證實相對于基礎(chǔ)研究，臨床研究對國際臨床指南更為重要。醫(yī)院是臨床研究的主戰(zhàn)場，特別是三級醫(yī)院尤其要注重開展臨床研究，通過研究成果的轉(zhuǎn)化和應(yīng)用，服務(wù)于臨床診治方案的改善。目前我國對于臨床研究的重視程度還不夠，科技資助計劃中如國家自然科學(xué)基金多偏向于基礎(chǔ)研究，國家重點研發(fā)計劃和國家科技重大專項雖對臨床研究進行資助，但是覆蓋臨床專業(yè)和資助的機構(gòu)范圍有限。因此需要國家層面建立一個覆蓋面更廣、更完善的政策扶持體系，用于支持臨床研究發(fā)展。

研究能否被臨床指南引用體現(xiàn)的是研究影響力。Seglen等[13]學(xué)者指出期刊所發(fā)表論文的引用分布不均，因此期刊的影響因子不能用于評價單個研究。本研究結(jié)果顯示發(fā)表在影響因子在5分以下期刊的論文數(shù)量占65.35%。Ye等[14]針對1983-2012年諾貝爾生理學(xué)或醫(yī)學(xué)獎獲得者的研究分析顯示，在66位獲獎?wù)叩?6篇論文中，發(fā)表在影響因子5分以下期刊的論文占10.5%。以上結(jié)果均說明了具有影響的論文并非都發(fā)表在高影響因子期刊，論文發(fā)表的期刊并不能完全表征論文的質(zhì)量和影響。

本研究發(fā)現(xiàn)指南引用的論文中基金資助與否各占50%，說明未被基金資助的研究同樣有影響力。關(guān)于科學(xué)基金資助與論文影響力之間的關(guān)系研究目前尚未得到一致結(jié)論，Cronin等[15]研究顯示信息科學(xué)基金資助與非資助的研究論文引用之間無顯著差異，林麗芳等[16]研究發(fā)現(xiàn)基金論文與其學(xué)術(shù)影響力沒有必然聯(lián)系，鐘旭等[17]發(fā)現(xiàn)科學(xué)基金論文學(xué)術(shù)影響力指標(biāo)優(yōu)于非科學(xué)基金論文，Wang J等[18]研究顯示納米技術(shù)基金論文比非基金論文有更高的引用次數(shù)和影響因子。以上研究結(jié)果的不一致性可能與分析的學(xué)科、論文影響力的表征指標(biāo)和分析方法的差異有關(guān)。因此有關(guān)科學(xué)基金與論文影響力（特別是被指南引用）的關(guān)聯(lián)性需要進一步研究。

以往研究顯示國際合作是否會提升論文影響力，與國家、學(xué)科和合作類型有關(guān)[19]。本研究結(jié)果顯示被國際權(quán)威指南引用的中國論文以國內(nèi)合作居多，占比為63.89%。Gazni等[20]采用論文被引頻次來反映論文影響力，對美國哈佛大學(xué)發(fā)表論著的研究發(fā)現(xiàn)，與國外機構(gòu)合作的論文影響力不高，而與國內(nèi)機構(gòu)合作越多的論文影響力較高。這與本研究發(fā)現(xiàn)基本一致，反映國際合作不一定提升論文影響力，這可能與所研究國家學(xué)科自身的科研實力有關(guān)。

本研究存在幾個局限性：第一，鑒于數(shù)據(jù)可得性問題，本研究未分析國際臨床指南引用的所有論文的特征，僅分析了中國被引用論文的特征，因此不能與其他國家被引用論文情況進行比較分析。第二，本研究是在沒有分母的情況下進行的，僅分析了成功被臨床指南引用的論文，而已經(jīng)發(fā)表的與分析指南所涵蓋的主題潛在相關(guān)但未在臨床指南中引用的論文數(shù)量尚未得知。第三，國際學(xué)者通常認為研究影響力的表征指標(biāo)較多，本研究采用的是論文被臨床指南引用來表征科學(xué)研究的影響力，不能全面表征我國呼吸病學(xué)研究的影響力。

4 結(jié)論

本研究分析了被呼吸病學(xué)國際臨床指南引用的中國大陸地區(qū)論文特征情況。研究發(fā)現(xiàn)中國大陸地區(qū)被引論文發(fā)表與指南發(fā)表之間的平均時間間隔為4年，說明目前研究能較快的用于臨床實踐。從研究內(nèi)容性質(zhì)來看，93.55%的論文為臨床研究，證實主要是臨床研究對臨床實踐起作用。從引用情感來看，指南引用為正面引用和中性引用，說明采用論文是否被臨床指南引用來表征研究影響力是科學(xué)的。13.86%的論文發(fā)表在影響因子10 分以上的期刊，51.49%的論文被基金資助，63.89%的論文為國內(nèi)合作，提示研究影響力與發(fā)表期刊影響因子、基金資助和國際合作可能不直接相關(guān)，但需要進一步研究驗證這一結(jié)論。