任孝平 楊云 蘇爽 周小林 楊東
摘 要:開(kāi)展科研院所的科研績(jī)效評(píng)價(jià)工作,有利于管理部門科學(xué)測(cè)度科研活動(dòng)績(jī)效,為科研管理和優(yōu)化資源配置提供依據(jù)。文中從績(jī)效評(píng)價(jià)方法研究出發(fā),結(jié)合國(guó)家級(jí)計(jì)量科學(xué)研究活動(dòng)的特點(diǎn)和規(guī)律,提出了科研績(jī)效評(píng)價(jià)邏輯模型和評(píng)價(jià)指標(biāo)框架。評(píng)價(jià)指標(biāo)除包含論文、專利等一般性科研績(jī)效評(píng)價(jià)指標(biāo)之外,還納入了能反映計(jì)量科學(xué)研究特點(diǎn)的專有指標(biāo),如測(cè)量能力、國(guó)家標(biāo)準(zhǔn)等。在此基礎(chǔ)上利用DEA方法,通過(guò)對(duì)國(guó)家計(jì)量院2012—2018年間可搜集、可比較的投入產(chǎn)出數(shù)據(jù)進(jìn)行分析,實(shí)證性的開(kāi)展了研究所科研績(jī)效的評(píng)價(jià)分析并提出評(píng)價(jià)建議。關(guān)鍵詞:科研績(jī)效;指標(biāo)框架;科研效率;DEA方法中圖分類號(hào):X 936?文獻(xiàn)標(biāo)識(shí)碼:A?文章編號(hào):1672-7312(2019)06-0698-05
Research Performance Evaluation on National Institute of Metrology of China
REN Xiao-ping1,2,YANG Yun2,SU Suang1,ZHOU Xiao-lin2,YANG?Dong1
(1.Dept.of Science and Technology Management,National?Institute of Metrology,Beijing 100029,China;2.Dept of?International Evaluation and Research,National Center for?Science & Technology Evaluation,Beijing 100081,China)
Abstract:Carrying out scientific research?performance?evaluation work of scientific research institutes is?beneficial to the management department to scientifically?measure the performance of scientific research activities,
and provide basis for scientific research management and?optimization of resource allocation.Based on the research of?performance evaluation methods,this paper proposed a logical?model of scientific research performance evaluation and an?evaluation index framework based on the characteristics and?laws of national-level econometric research activities.In?addition to the general scientific research performance?evaluation indicators such as papers and patents,the?evaluation indicators also include proprietary indicators?that reflect the characteristics of measurement science?research,such as measurement capabilities,national?standards,etc.On this basis,using the DEA method,through?the analysis of the collectable and comparable input-output?data of the National Metrology Institute from 2012 to 2018,the evaluation and analysis of the research performance of?the Institute was carried out empirically and the evaluation?suggestions were put forward.
Key words:research performance;indicator?system;research?efficiency;data envelopment analysis method
0?引?言
當(dāng)前,如何合理的配置科技資源、使有限的科研經(jīng)費(fèi)發(fā)揮出最大的效益,是各國(guó)政府科技管理部門關(guān)注的問(wèn)題。2018年,國(guó)務(wù)院印發(fā)了《關(guān)于優(yōu)化科研管理提升科研績(jī)效若干措施的通知》,提出“強(qiáng)化科研績(jī)效評(píng)價(jià),推動(dòng)項(xiàng)目管理向重實(shí)效、重結(jié)果轉(zhuǎn)變,對(duì)基礎(chǔ)和應(yīng)用基礎(chǔ)、技術(shù)創(chuàng)新和產(chǎn)品開(kāi)發(fā)項(xiàng)目實(shí)行績(jī)效分類評(píng)價(jià)”[1]??梢?jiàn),推動(dòng)科研績(jī)效評(píng)價(jià)、加強(qiáng)結(jié)果應(yīng)用,是院所優(yōu)化科研活動(dòng)和經(jīng)費(fèi)管理,提升機(jī)構(gòu)績(jī)效的重要手段。
中國(guó)計(jì)量科學(xué)研究院(簡(jiǎn)稱“國(guó)家計(jì)量院”),是國(guó)家最高計(jì)量科學(xué)研究機(jī)構(gòu)。其下屬13個(gè)研究所,科研人員占比72%,副高級(jí)以上人員占比63%,擁有博士學(xué)位人員占比31%,研究覆蓋力學(xué)、聲學(xué)、電學(xué)等多個(gè)學(xué)科的基礎(chǔ)和前沿研究[2]。截至2018年底,全院SCI論文發(fā)文比例是2008年的5.7倍;計(jì)量標(biāo)準(zhǔn)數(shù)量、標(biāo)準(zhǔn)物質(zhì)數(shù)量分別是2008年的1.6倍和2.1倍;國(guó)家測(cè)量CMC能力也有了大幅提升,累計(jì)參加國(guó)際比對(duì)數(shù)量較2008年增長(zhǎng)了82%;累計(jì)獲得國(guó)家級(jí)科研獎(jiǎng)勵(lì)12項(xiàng)。伴隨科研水平和質(zhì)量的不斷提升,如何客觀有效地評(píng)價(jià)科研績(jī)效[3],引導(dǎo)機(jī)構(gòu)健康有序發(fā)展,成為管理層制定機(jī)構(gòu)發(fā)展戰(zhàn)略、優(yōu)化管理亟待解決的問(wèn)題。目前,國(guó)家計(jì)量院的科研評(píng)價(jià)工作尚處于比較初步的階段,主要是基于已取得的科研成果,如基標(biāo)準(zhǔn)、國(guó)際比對(duì)、獲獎(jiǎng)、CMC能力等進(jìn)行靜態(tài)描述,未開(kāi)展投入產(chǎn)出比較分析,忽視了對(duì)不同類型科研活動(dòng)分類評(píng)價(jià)的問(wèn)題,也缺乏對(duì)各類評(píng)價(jià)指標(biāo)權(quán)重系數(shù)的設(shè)定。文中嘗試通過(guò)引入投入產(chǎn)出模型,結(jié)合院內(nèi)不同類型研究所創(chuàng)新資源和成果的定量數(shù)據(jù),分析科研效益與投入的關(guān)系,評(píng)價(jià)技術(shù)效率/效益,以便更加科學(xué)、立體的評(píng)價(jià)科研績(jī)效,為機(jī)構(gòu)科研管理提供有效支撐。需要指出的是,文中著眼點(diǎn)在于科研活動(dòng)的績(jī)效評(píng)價(jià),而非機(jī)構(gòu)績(jī)效評(píng)價(jià)(如美國(guó)政府績(jī)效與結(jié)果法案GPRA評(píng)價(jià)模式)[4]。
1?國(guó)內(nèi)外研究現(xiàn)狀
國(guó)內(nèi)外學(xué)者在科研績(jī)效評(píng)價(jià)方面開(kāi)展了大量從宏觀到微觀的研究工作。在院所機(jī)構(gòu)層面,張義芳[5]研究了國(guó)外國(guó)家級(jí)科研機(jī)構(gòu)績(jī)效評(píng)價(jià)相關(guān)制度;Mario通過(guò)建立數(shù)學(xué)模型對(duì)意大利科研機(jī)構(gòu)進(jìn)行了績(jī)效評(píng)價(jià);羅莎莎[6]對(duì)公益類科研院所績(jī)效評(píng)價(jià)進(jìn)行綜合研究,提出設(shè)立科研投入、科研產(chǎn)出、科研服務(wù)、人才團(tuán)隊(duì)建設(shè)、創(chuàng)新發(fā)展5個(gè)一級(jí)指標(biāo)實(shí)施科研機(jī)構(gòu)績(jī)效評(píng)價(jià)。張鳳[7]等研究了國(guó)家級(jí)科研機(jī)構(gòu)的創(chuàng)新績(jī)效,設(shè)計(jì)了創(chuàng)新產(chǎn)出、創(chuàng)新投入、創(chuàng)新績(jī)效概念模型,并對(duì)多個(gè)研究所績(jī)效的長(zhǎng)期趨勢(shì)進(jìn)行了研究。此外,其他研究人員還開(kāi)展了與調(diào)動(dòng)人員積極性、收入分配績(jī)效考核相關(guān)的研究[8]。在科研項(xiàng)目層面,William[9]基于多指標(biāo)決策方法(Multicriteria decision making,MCDM),研究了科研項(xiàng)目績(jī)效評(píng)價(jià)和排序的方法;劉萌[10]分析了科研項(xiàng)目績(jī)效評(píng)價(jià)中存在的問(wèn)題,給出了提高科研項(xiàng)目績(jī)效評(píng)價(jià)水平的對(duì)策;竇元名[11]構(gòu)建了財(cái)務(wù)、科學(xué)技術(shù)、效益、團(tuán)隊(duì)建設(shè)4個(gè)維度的指標(biāo),研究了采用平衡記分卡法(The Balance score card,BSC)對(duì)農(nóng)業(yè)類科研項(xiàng)目實(shí)施績(jī)效評(píng)價(jià)方法。在科研人員和團(tuán)隊(duì)層面,李沙金[12]針對(duì)科研人員顆粒度,闡述了若干績(jī)效評(píng)價(jià)理念;蔣日富[13]則以統(tǒng)計(jì)分析的方法,分析研究了科研團(tuán)隊(duì)創(chuàng)新績(jī)效的影響因素。
評(píng)價(jià)指標(biāo)體系的構(gòu)建,是科研績(jī)效評(píng)價(jià)的關(guān)鍵環(huán)節(jié)之一。在指標(biāo)合理性方面,業(yè)界常采用德?tīng)柗品椒╗14]對(duì)指標(biāo)框架進(jìn)行優(yōu)化。在指標(biāo)權(quán)重設(shè)定方面,研究人員常利用層次分析法(Analytic hierarchy process,AHP)[15]或最優(yōu)最劣法(Best-Worst Method,BWM)[16],驗(yàn)證科研績(jī)效考核指標(biāo)權(quán)重設(shè)計(jì)的合理性。在科研產(chǎn)出質(zhì)量評(píng)價(jià)方面,Salimi[17]同樣采用了BWM方法開(kāi)展研究工作。在投入與產(chǎn)出效率分析方面,常使用數(shù)據(jù)包絡(luò)分析法(Data Envelopment Analysis,DEA)[18]評(píng)價(jià)生產(chǎn)績(jī)效,或基于知識(shí)生產(chǎn)函數(shù)[19]建立科研投入產(chǎn)出模型。在投入與產(chǎn)出影響因子分析方面,劉天佐[20]等采用Tobit模型,研究了區(qū)域分布對(duì)科研投入產(chǎn)出績(jī)效的影響。
綜上分析,國(guó)內(nèi)外學(xué)者從機(jī)構(gòu)、項(xiàng)目等不同維度、在體系、框架、指標(biāo)等不同層次上對(duì)科研績(jī)效開(kāi)展了研究,提出了具體的研究框架和解決辦法。然而,科研績(jī)效對(duì)一個(gè)有特定職能和功能的研究機(jī)構(gòu)來(lái)說(shuō),是一個(gè)復(fù)雜的系統(tǒng)[21]。針對(duì)某一特定類型的科研機(jī)構(gòu),設(shè)計(jì)準(zhǔn)確、可量化的評(píng)價(jià)指標(biāo)體系,對(duì)實(shí)施科研績(jī)效評(píng)價(jià)至關(guān)重要。
2?科研績(jī)效評(píng)價(jià)邏輯模型及指標(biāo)框架的構(gòu)建
2.1?科研績(jī)效評(píng)價(jià)邏輯模型
有學(xué)者在構(gòu)建科研績(jī)效評(píng)價(jià)邏輯模型時(shí),將評(píng)價(jià)劃分為評(píng)價(jià)過(guò)程和決策過(guò)程[22]2個(gè)階段。提出將“科研績(jī)效”評(píng)價(jià)劃分為:任務(wù)實(shí)施、績(jī)效監(jiān)測(cè)和績(jī)效評(píng)價(jià)3個(gè)階段,并以此為基礎(chǔ),構(gòu)建國(guó)家計(jì)量院科研績(jī)效評(píng)價(jià)邏輯模型。
如圖1所示,科技績(jī)效評(píng)價(jià)應(yīng)始于任務(wù)實(shí)施階段。即伴隨任務(wù)推進(jìn),深入研究被評(píng)對(duì)象的科研活動(dòng)規(guī)律,將科研活動(dòng)細(xì)分為“科研投入、科研活動(dòng)、科研產(chǎn)出、科研效果”邏輯鏈條。科研投入可分為經(jīng)費(fèi)投入和科研人員投入2部分。其中,科研經(jīng)費(fèi)是產(chǎn)生科研績(jī)效的基礎(chǔ),而科研人員是使科研經(jīng)費(fèi)發(fā)揮作用的關(guān)鍵要素??蒲谢顒?dòng)反映了各研究所在投入經(jīng)費(fèi)和人力之后,開(kāi)展科學(xué)研究過(guò)程中的一系列活動(dòng)。如:科研設(shè)備采購(gòu)、科研平臺(tái)建設(shè)、具體研發(fā)活動(dòng)、國(guó)際合作交流、國(guó)內(nèi)合作交流等??蒲挟a(chǎn)出是開(kāi)展科學(xué)研究得到的最直接的科研成果,往往能以定量的形式來(lái)反映,如科研論文、知識(shí)產(chǎn)權(quán)、測(cè)量能力、國(guó)家基標(biāo)準(zhǔn)、標(biāo)準(zhǔn)物質(zhì)、標(biāo)準(zhǔn)、人才培養(yǎng)等??蒲行Ч纯蒲挟a(chǎn)出經(jīng)過(guò)積累后,發(fā)揮的作用,以及形成的具有標(biāo)志性和影響力的效益,如:科研獲獎(jiǎng)、人才獲獎(jiǎng)、成果轉(zhuǎn)化應(yīng)用,以及其他為國(guó)民經(jīng)濟(jì)和社會(huì)發(fā)展中所做的貢獻(xiàn)。
在績(jī)效監(jiān)測(cè)階段,首先基于評(píng)價(jià)邏輯鏈條,結(jié)合實(shí)施主體的活動(dòng)規(guī)律,形成投入指標(biāo)、活動(dòng)指標(biāo)、產(chǎn)出指標(biāo)和效果指標(biāo)???jī)效指標(biāo)的構(gòu)建原則為數(shù)據(jù)可搜集、可獲取、可比較。指標(biāo)體系構(gòu)建完成后,根據(jù)各科研實(shí)施主體,收集指標(biāo)值。對(duì)于實(shí)在無(wú)法獲取具體數(shù)值的指標(biāo),可以結(jié)合定性評(píng)價(jià)來(lái)實(shí)施。
在績(jī)效評(píng)價(jià)階段,即根據(jù)各實(shí)施主體的定量化的投入數(shù)據(jù),與定量的“產(chǎn)出+效果”數(shù)據(jù)進(jìn)行關(guān)聯(lián)分析,形成投入與產(chǎn)出效率/效益分析結(jié)果;定性化的證據(jù),由于無(wú)法轉(zhuǎn)換為數(shù)字并代入模型進(jìn)行計(jì)算,可與定量分析結(jié)果相結(jié)合,進(jìn)行補(bǔ)充分析。
2.2?科研績(jī)效評(píng)價(jià)指標(biāo)框架的設(shè)計(jì)
國(guó)家計(jì)量院下轄13個(gè)研究所的領(lǐng)域和學(xué)科截然不同,有的研究所側(cè)重基礎(chǔ)研究,有的研究所基礎(chǔ)研究和應(yīng)用研究并重。因此,其科研績(jī)效的表現(xiàn)形式也不盡相同?;诖耍芯繕?gòu)建了科研績(jī)效評(píng)價(jià)一級(jí)指標(biāo)(4個(gè))、二級(jí)指標(biāo)(17個(gè))和三級(jí)指標(biāo)(38個(gè)),見(jiàn)表1.
需要說(shuō)明的是,在具體實(shí)施科研績(jī)效評(píng)價(jià)時(shí),各指標(biāo)不僅應(yīng)采集近期數(shù)據(jù),還應(yīng)盡量采集長(zhǎng)期的產(chǎn)出和效果數(shù)據(jù)。數(shù)據(jù)還應(yīng)具有可獲取性,能夠從各研究所進(jìn)行匯聚,以確保評(píng)價(jià)的可操作性。
3?基于DEA的科研績(jī)效評(píng)價(jià)
基于已構(gòu)建的邏輯模型和指標(biāo)框架,文中引入數(shù)據(jù)包絡(luò)分析(Data envelopment analysis,DEA),利用采集的數(shù)據(jù),嘗試分析國(guó)家計(jì)量院13個(gè)研究所的科研投入產(chǎn)出效率/效益。
DEA方法是目前開(kāi)展投入產(chǎn)出效率的主流方法。其主要用于評(píng)價(jià)具有多投入、多產(chǎn)出的同質(zhì)決策單元(Decision Making Unit,DMU)之間的相對(duì)效率,是一種評(píng)價(jià)決策單元相對(duì)業(yè)績(jī)的非參數(shù)方法。由于該方法的計(jì)算原理與投入、產(chǎn)出指標(biāo)值的量綱無(wú)關(guān),因此在分析時(shí)可以直接采用原始數(shù)據(jù)。
在實(shí)施國(guó)家績(jī)效院科研績(jī)效分析時(shí),利用DEAP 2.1效率分析軟件,以產(chǎn)出為向?qū)в?jì)算13個(gè)下轄研究所的綜合技術(shù)效率。數(shù)據(jù)來(lái)源為院科技年報(bào),指標(biāo)為表1中14個(gè)三級(jí)指標(biāo)(其中投入指標(biāo)3個(gè),產(chǎn)出指標(biāo)11個(gè)),時(shí)間范圍為2012至2018年。數(shù)據(jù)經(jīng)分析形成前6個(gè)研究所和后7個(gè)研究所科研效率變化示意圖(由于變化曲線較密,故分別繪制在圖2和圖3中,研究所由字母替代)。
從圖2和圖3中的趨勢(shì)可以看出,各研究所科研績(jī)效及其變化趨勢(shì)均不同。研究基于歷年的科研績(jī)效,取平均值和標(biāo)準(zhǔn)差,分析了比較典型的幾個(gè)研究所的績(jī)效。G和R的科研績(jī)效在所有研究所中表現(xiàn)相對(duì)最好,D和L研究所也是院內(nèi)比較有優(yōu)勢(shì)的研究所,其科研績(jī)效也表現(xiàn)不俗。GC研究所相對(duì)于每年有限的經(jīng)費(fèi)投入,也獲得了可觀的科研產(chǎn)出,因此其年平均科研績(jī)效排名也較靠前。
院內(nèi)比較老牌的研究所S和H,在科研績(jī)效排名中表現(xiàn)一般。分析其歷年變化情況,可以發(fā)現(xiàn)各有一年科研績(jī)效明顯偏低(H:2012,S:2014年),因此將排名總體拉低。
NH和DL所歷年科研績(jī)效平均值排名最后,與2個(gè)研究所在2011年開(kāi)展了較大的職能和人員調(diào)整有關(guān)。如,Y研究所源于NH和DL的重組。C研究所排名也比較偏后,分析其原因是N研究所成立之時(shí),從C中抽調(diào)了相當(dāng)?shù)娜肆臀锪τ绊懥似浒l(fā)展,而這2個(gè)研究所的學(xué)科方向具有相似性。
表2中給出了2012—2018年各研究所總體技術(shù)效率,可以看出幾個(gè)老牌研究所,G,R,D,GC,L,S和H的績(jī)效均靠前,老牌研究所(DL和C)被拆分,新成立的幾個(gè)研究所(Y,N)由于歷史積淀不足導(dǎo)致排序比較靠后。
表2中最后一列將2012—2018年的總投入和總產(chǎn)出進(jìn)行了區(qū)間科研績(jī)效(不是按年度計(jì)算)比較計(jì)算。數(shù)據(jù)顯示,按年度計(jì)算科研績(jī)效平均值小于1的研究所,按區(qū)間計(jì)算時(shí)科研績(jī)效被評(píng)為1.即科研績(jī)效表現(xiàn)差的年份,被表現(xiàn)好的年份拉高了。
4 研究與實(shí)證分析的局限性
本研究中,僅依據(jù)國(guó)家計(jì)量院的科研投入和產(chǎn)出,設(shè)計(jì)了機(jī)構(gòu)科研績(jī)效評(píng)價(jià)指標(biāo),并非嚴(yán)格意義上的科研機(jī)構(gòu)績(jī)效評(píng)價(jià),即評(píng)價(jià)過(guò)程中,未充分考慮國(guó)家級(jí)科研機(jī)構(gòu)的功能定位和使命。
研究中回溯收集了2012—2018年的院科技年報(bào)數(shù)據(jù)。鑒于國(guó)家計(jì)量院內(nèi)部研究所之間的調(diào)整和人員的變動(dòng)等,早年的數(shù)據(jù)可能與實(shí)際情況有所出入,定量研究準(zhǔn)確性有所不足。此外,表1中部分指標(biāo)(字體未加粗)僅獲取到院層面數(shù)據(jù),難以搜集到各所的歷史數(shù)據(jù),影響了分析的全面性。
科研論文是科研的重要表現(xiàn)形式之一。本研究目前僅以SCI論文數(shù)量作為考核論文的指標(biāo)。未來(lái)可考慮增加發(fā)文期刊影響因子、發(fā)文被引頻次等指標(biāo),提升指標(biāo)的內(nèi)涵和評(píng)價(jià)的意義。此外,文中采用的DEA方法還有很多改進(jìn)算法,如對(duì)指標(biāo)賦予一定的加權(quán)系數(shù)等優(yōu)化方法。未來(lái)可以就DEA方法本身進(jìn)行深入研究,提升評(píng)價(jià)的準(zhǔn)確性。
5?研究啟示
國(guó)家計(jì)量院擁有知識(shí)水平較高、數(shù)量龐大的科研隊(duì)伍,是國(guó)家計(jì)量科技創(chuàng)新的重要力量。文中設(shè)計(jì)了績(jī)效評(píng)價(jià)邏輯模型和指標(biāo)框架,采用DEA方法并基于歷史數(shù)據(jù),對(duì)國(guó)家計(jì)量院下轄13個(gè)研究所的科研績(jī)效進(jìn)行了評(píng)價(jià),得到如下啟示。
1)精細(xì)化各項(xiàng)科技管理工作。在文中初步研究成果基礎(chǔ)上,應(yīng)建立和完善研究所科研績(jī)效評(píng)價(jià)體系,盡快制定績(jī)效評(píng)價(jià)工作方案。在日常管理中,應(yīng)注重各類數(shù)據(jù)的搜集與精細(xì)化管理,以充實(shí)完善評(píng)價(jià)指標(biāo)年度數(shù)據(jù)。需加大數(shù)據(jù)搜集管理的信息化程度,將其嵌入日常管理中,盡量避免給研究所和科研人員增加負(fù)擔(dān)。
2)實(shí)施經(jīng)濟(jì)影響評(píng)價(jià)。國(guó)家計(jì)量院在國(guó)際上對(duì)標(biāo)的機(jī)構(gòu),如美國(guó)標(biāo)準(zhǔn)與技術(shù)研究院(National Institute of Standards and Technology,NIST)[23],早在2007年就開(kāi)始了院內(nèi)同行評(píng)議工作,開(kāi)展了內(nèi)部項(xiàng)目的經(jīng)濟(jì)影響評(píng)價(jià)。其目的是為管理層提供NIST研究項(xiàng)目特性和重要性信息,并用以向政府預(yù)算管理部門和公眾展示NIST科研創(chuàng)新活動(dòng)帶來(lái)的經(jīng)濟(jì)、社會(huì)收益。國(guó)家計(jì)量院在這方面起步尚晚,未來(lái)應(yīng)盡快實(shí)施此類評(píng)價(jià)研究工作。
3)提升科技管理人員的戰(zhàn)略思維能力。目前國(guó)家計(jì)量院非常重視通過(guò)交流、培訓(xùn)、借調(diào)的方式、切實(shí)提升青年科技管理人員的綜合能力和管理水平。未來(lái),應(yīng)通過(guò)績(jī)效評(píng)價(jià)與試點(diǎn),引導(dǎo)和培育科技管理人員的戰(zhàn)略思維能力。使其在管好科研項(xiàng)目的同時(shí),積極利用各類數(shù)據(jù)和研究方法,深入總結(jié)科技管理中的經(jīng)驗(yàn)和問(wèn)題,為管理層科學(xué)、客觀、合理地制定發(fā)展規(guī)劃、設(shè)置重點(diǎn)領(lǐng)域、配置院內(nèi)經(jīng)費(fèi)等提供重要的依據(jù),同時(shí)進(jìn)一步優(yōu)化配置院內(nèi)科技資源,以達(dá)到機(jī)構(gòu)績(jī)效可持續(xù)提升的目的。
參考文獻(xiàn):
[1]邱超凡.科研院所優(yōu)化科研管理提升科研績(jī)效的建議[J].科技中國(guó),2018(12):41-42.
[2]任孝平,陸?梅,楊?帆,等.不斷推進(jìn)計(jì)量科技自主創(chuàng)新——中國(guó)計(jì)量院科技創(chuàng)新團(tuán)隊(duì)介紹[J].中國(guó)計(jì)量,2015(08):13-20.
[3]賀天偉,張景林.科研績(jī)效定量評(píng)價(jià)指標(biāo)體系的初步設(shè)計(jì)[J].科技管理研究,2001(06):58-61.
[4]Coccia M.A basic model for evaluating R&D performance:theory and application in Italy[J].2001,31(04):453-464.
[5]張義芳.美、英、德、日國(guó)立科研機(jī)構(gòu)績(jī)效評(píng)估制度探析[J].科技管理研究,2018,38(22):25-30.
[6]羅莎莎,劉德娟,曾玉榮.公益類科研院所績(jī)效評(píng)價(jià)研究綜述[J].農(nóng)業(yè)科技管理,2018,37(06):71-75.
[7]張?鳳,霍國(guó)慶.國(guó)家科研機(jī)構(gòu)創(chuàng)新績(jī)效的評(píng)價(jià)模型[J].科研管理,2007,28(02):35-42.
[8]李姣姣,沈祥成,徐娥?.湖北省科研院所績(jī)效考核體系建設(shè)的現(xiàn)狀及建議[J].湖北農(nóng)業(yè)科學(xué),2018,57(22):160-163.
[9]Bitman W R,Sharif N.A conceptual framework for ranking R&D projects[J].IEEE Transactions on Engineering Management,2008,55(02):267-278.
[10]劉?萌,趙?蔚.科研項(xiàng)目績(jī)效評(píng)價(jià)中存在的問(wèn)題與對(duì)策研究[J].農(nóng)業(yè)科技管理,2018,37(06):76-78.
[11]竇元名.基于平衡計(jì)分卡方法的農(nóng)業(yè)科研項(xiàng)目績(jī)效評(píng)價(jià)指標(biāo)體系的構(gòu)建[J].安徽農(nóng)業(yè)科學(xué),2018,46(29):141-143.
[12]李沙金,姜中蛟.綜合考慮OKR、KPI方法的科研人員績(jī)效評(píng)估方法[J].科技經(jīng)濟(jì)導(dǎo)刊,2018,26(24):181-182.
[13]蔣日富,霍國(guó)慶,譚紅軍,等.科研團(tuán)隊(duì)知識(shí)創(chuàng)新績(jī)效影響要素研究——基于我國(guó)國(guó)立科研機(jī)構(gòu)的調(diào)查分析[J].科學(xué)學(xué)研究,2007,25(02):364-372.
[14]袁?媛,程?平,劉曉云.高校附院科研績(jī)效評(píng)價(jià)指標(biāo)體系的構(gòu)建與應(yīng)用效果[J].安徽衛(wèi)生職業(yè)技術(shù)學(xué)院學(xué)報(bào),2018,17(04):14-15+23.
[15]徐明玨,趙志梅,肖劍欽.應(yīng)用型科研機(jī)構(gòu)科研績(jī)效考核評(píng)價(jià)體系構(gòu)建研究[J].中國(guó)衛(wèi)生標(biāo)準(zhǔn)管理,2018(23):15-19.
[16]Salimi N.Evaluating firms’ R&;D performance using best worst method[J].Evaluation and Program Planning,2017,66:147.
[17]Salimi,Negin.Quality assessment of scientific outputs using the BWM[J].Scientometrics,2017,112(01):195-213.
[18]侯啟娉.基于DEA的研究型高??蒲锌?jī)效評(píng)價(jià)應(yīng)用研究[J].研究與發(fā)展管理,2005,17(01):118-124.
[19]肖晉芬,仲?實(shí).科研投入產(chǎn)出模型在高??蒲锌?jī)效評(píng)價(jià)中的應(yīng)用[J].科技管理研究,2010,30(02):81-82.
[20]劉天佐,許?航.我國(guó)不同區(qū)域高??蒲型度氘a(chǎn)出績(jī)效及其影響因素分析——基于DEA-Tobit模型的實(shí)證研究[J].科技管理研究,2018,38(13):120-125.
[21]李曉軒.我國(guó)國(guó)立科研機(jī)構(gòu)績(jī)效評(píng)價(jià)的實(shí)踐與思考[J].中國(guó)科學(xué)院院刊,2005,20(05):395-398.
[22]李曉軒,楊國(guó)梁.中國(guó)科學(xué)院研究所評(píng)價(jià)的邏輯模型研究[J].科學(xué)學(xué)與科學(xué)技術(shù)管理,2009,30(04).
[23]周建中.美國(guó)標(biāo)準(zhǔn)與技術(shù)研究院的評(píng)價(jià)實(shí)踐、方法及啟示[J].中國(guó)科技論壇,2009(01):135-139.
(責(zé)任編輯:張?江)