摘要 科技評(píng)價(jià)是煙草企業(yè)科研管理的核心環(huán)節(jié),科技評(píng)價(jià)方法是實(shí)現(xiàn)科技評(píng)價(jià)改革目標(biāo)的關(guān)鍵。通過(guò)對(duì)煙草企業(yè)科技評(píng)價(jià)存在的科技評(píng)價(jià)導(dǎo)向作用發(fā)揮不夠充分、科技成果評(píng)價(jià)體系有待完善、科技評(píng)價(jià)方法整合不到位等問(wèn)題進(jìn)行剖析,提出以科學(xué)計(jì)量學(xué)為核心,以客觀、公正的評(píng)價(jià)過(guò)程為保障,探索多維度的科技評(píng)價(jià)模式、構(gòu)建科技分類評(píng)價(jià)體系、采用科學(xué)計(jì)量學(xué)與同行評(píng)議相結(jié)合的科技評(píng)價(jià)方法等改革思路及應(yīng)用,以期推動(dòng)科研質(zhì)量的提升,為煙草企業(yè)科技評(píng)價(jià)以及人才隊(duì)伍建設(shè)提供科學(xué)的決策支持。
關(guān)鍵詞 煙草企業(yè);科技評(píng)價(jià);科學(xué)計(jì)量學(xué);評(píng)價(jià)方法
中圖分類號(hào) S-9;F222.1 文獻(xiàn)標(biāo)識(shí)碼 A 文章編號(hào) 0517-6611(2024)13-0215-04
doi:10.3969/j.issn.0517-6611.2024.13.050
開(kāi)放科學(xué)(資源服務(wù))標(biāo)識(shí)碼(OSID):
Exploration of Scientific and Technological Evaluation Problems and Reform Ideas in the Tobacco Enterprises
MEI Yun-peng,CHEN Chao,TAN Jia-qi et al
(Shaanxi Provincial Company of CNTC,Xi’an,Shaanxi 710061)
Abstract Scientific and technological evaluation is the core link of scientific research management in the tobacco industry,and the method of scientific and technological evaluation is the key to realize the goal of scientific and technological evaluation reform.Through some problems in the science and technology evaluation at present have been analyzed,which are insufficient role of science and technology evaluation guidance,the need to improve evaluation system for scientific and technological achievements,and inadequate integration of scientific and technological evaluation methods in the tobacco industry.Reform ideas and applications of scientific and technological evaluation have been proposed,which anhm8aEvPKf0n3fdNO4J4N3tpD7HcZr9H1o+QKINK5+A=re taking scientometrics as the core with an objective and impartial evaluation process as the guarantee,exploring a multi-dimensional model of scientific and technological evaluation,constructing a scientific and technological categorization evaluation system,and adopting a scientific and technological evaluation method that combines scientometrics with peer reviews,in order to promote the quality of scientific research and provide scientific decision-making support for the scientific and technological evaluation of the tobacco industry as well as the construction of the talent team.
Key words Tobacco enterprises;Scientific and technical evaluation;Scientometrics;Evaluation methods
基金項(xiàng)目 中國(guó)煙草總公司陜西省公司科研項(xiàng)目(KJ-2022-12)。
作者簡(jiǎn)介 梅運(yùn)鵬(1970—),男,浙江杭州人,經(jīng)濟(jì)師,從事科技管理研究。*通信作者,從事科技管理研究。
收稿日期 2023-11-13;修回日期 2023-12-15
科研管理是煙草行業(yè)科技管理的重點(diǎn)工作之一,也是推動(dòng)行業(yè)科技創(chuàng)新、促進(jìn)科技成果向新質(zhì)生產(chǎn)力轉(zhuǎn)化、推進(jìn)管理創(chuàng)新、文化創(chuàng)新、體制機(jī)制創(chuàng)新的重要保障??萍荚u(píng)價(jià)作為科研管理的核心內(nèi)容,不僅關(guān)系到科技成果水平、科技進(jìn)步貢獻(xiàn)率,也關(guān)系到科研資源有效分配、人才成長(zhǎng)及科技工作者個(gè)人學(xué)術(shù)成果的認(rèn)同。近年來(lái),科技評(píng)價(jià)的研究主要關(guān)注以下3個(gè)方面:一是關(guān)于科技評(píng)價(jià)導(dǎo)向。汪志波等[1]通過(guò)分析煙草科技重大專項(xiàng)的特點(diǎn),建立了基于“目標(biāo)-結(jié)果-效果”導(dǎo)向的績(jī)效表達(dá)邏輯模型;王宗軍等[2]提出建立以質(zhì)量和貢獻(xiàn)為導(dǎo)向的科研項(xiàng)目績(jī)效評(píng)價(jià)機(jī)制。二是關(guān)于科技分類評(píng)價(jià)。例如,張富利等[3]指出基礎(chǔ)研究、應(yīng)用研究、軟科學(xué)研究等不同類別的科技成果需要不同的科技評(píng)價(jià)方法,可以采用同行評(píng)議、市場(chǎng)評(píng)價(jià)和社會(huì)評(píng)價(jià)等;不同類別研究的學(xué)科特征不同,評(píng)價(jià)指標(biāo)設(shè)置也相應(yīng)存在不同側(cè)重點(diǎn)。三是關(guān)于結(jié)合科學(xué)計(jì)量學(xué)的科技評(píng)價(jià)方法。姜春林等[4]認(rèn)為將科學(xué)計(jì)量評(píng)價(jià)方法和基于同行評(píng)議的代表作制度相結(jié)合,建立科學(xué)、合理的學(xué)術(shù)評(píng)價(jià)制度。張積玉[5]提出建立綜合化評(píng)價(jià)制度,倡導(dǎo)以量化為基礎(chǔ)并以代表作為主,從而體現(xiàn)學(xué)術(shù)評(píng)價(jià)科學(xué)合理、公平公正以及可操作性強(qiáng)。董麗華[6]運(yùn)用科學(xué)計(jì)量學(xué)方法,對(duì)中美兩國(guó)科技實(shí)力等評(píng)價(jià)指標(biāo)數(shù)據(jù)進(jìn)行比較,分析中美兩國(guó)的科技發(fā)展?fàn)顩r。俞立平等[7]指出應(yīng)重視文獻(xiàn)計(jì)量學(xué)與科學(xué)計(jì)量學(xué),在科技評(píng)價(jià)中不僅僅關(guān)注論文數(shù)量和影響因子,還應(yīng)采用特征因子、z指數(shù)、h指數(shù)家族等計(jì)量指標(biāo),使科技評(píng)價(jià)質(zhì)量提高。基于此,以中共中央辦公廳和國(guó)務(wù)院辦公廳印發(fā)的《關(guān)于深化項(xiàng)目評(píng)審、人才評(píng)價(jià)、機(jī)構(gòu)評(píng)估改革的意見(jiàn)》、國(guó)務(wù)院辦公廳《關(guān)于完善科技成果評(píng)價(jià)機(jī)制的指導(dǎo)意見(jiàn)》、科技部印發(fā)《關(guān)于破除科技評(píng)價(jià)中“唯論文”不良導(dǎo)向的若干措施(試行)》的通知、科技部等八部門印發(fā)的《關(guān)于開(kāi)展科技人才評(píng)價(jià)改革試點(diǎn)的工作方案》、中共中央辦公廳和國(guó)務(wù)院辦公廳印發(fā)的《關(guān)于進(jìn)一步加強(qiáng)青年科技人才培養(yǎng)和使用的若干措施》、國(guó)家市場(chǎng)監(jiān)督管理總局和國(guó)家標(biāo)準(zhǔn)化管理委員會(huì)發(fā)布的系列科學(xué)技術(shù)研究項(xiàng)目評(píng)價(jià)實(shí)施指南等作為科技評(píng)價(jià)依據(jù),在全面分析科技評(píng)價(jià)存在問(wèn)題的基礎(chǔ)上,提出煙草企業(yè)科技評(píng)價(jià)改革思路。
1 煙草企業(yè)科技評(píng)價(jià)存在的問(wèn)題
對(duì)標(biāo)國(guó)家科技評(píng)價(jià)相關(guān)政策與文件等,從企業(yè)現(xiàn)有科技成果評(píng)價(jià)機(jī)制來(lái)看,主要存在以下問(wèn)題。
1.1 科技評(píng)價(jià)導(dǎo)向作用發(fā)揮不夠充分 科技評(píng)價(jià)導(dǎo)向是完善科技評(píng)價(jià)機(jī)制的前提,應(yīng)當(dāng)精準(zhǔn)明確,并能反映當(dāng)前煙草行業(yè)的需求??萍汲晒u(píng)價(jià)對(duì)科技創(chuàng)新、科技成果轉(zhuǎn)化等具有導(dǎo)向作用。目前,煙草企業(yè)科技成果評(píng)價(jià)的導(dǎo)向不夠突出,價(jià)值發(fā)現(xiàn)作用發(fā)揮不夠充分。在科技計(jì)劃項(xiàng)目、科技獎(jiǎng)勵(lì)和創(chuàng)新人才等科技評(píng)價(jià)中,過(guò)度看重論文、專利、著作、技術(shù)標(biāo)準(zhǔn)等成果數(shù)量,對(duì)標(biāo)志性成果的質(zhì)量、績(jī)效和貢獻(xiàn)不夠重視,促進(jìn)高質(zhì)量成果的產(chǎn)出和激勵(lì)創(chuàng)新主體積極性的效果仍不明顯。煙草企業(yè)的技術(shù)開(kāi)發(fā)類科技項(xiàng)目,當(dāng)前重在技術(shù)開(kāi)發(fā)產(chǎn)出成果的應(yīng)用上,但多數(shù)成果中高價(jià)值專利不多。行業(yè)部分科技項(xiàng)目科技成果在推動(dòng)企業(yè)科技進(jìn)步中發(fā)揮了積極作用,但推廣面較窄。
1.2 多維度、分類的科技成果評(píng)價(jià)體系有待完善 科技評(píng)價(jià)的基本前提是科技評(píng)價(jià)方法要與煙草行業(yè)科技項(xiàng)目類別特征、科技人才類別特征相適應(yīng)。煙草企業(yè)科技項(xiàng)目、科技人才的類別特征主要體現(xiàn)在研究方法、手段、對(duì)象、過(guò)程與成果及其表現(xiàn)形式的特有屬性、定位等方面??萍柬?xiàng)目和科技人才的類型不同,導(dǎo)致在科技評(píng)價(jià)中存在質(zhì)的差別[8]。采用與類別特征相適應(yīng)的評(píng)價(jià)方法,能夠反映類別差異,保證科技評(píng)價(jià)公平、公正。
第一,目前科技分類評(píng)價(jià)并未得到明確體現(xiàn),分類評(píng)價(jià)機(jī)制仍不健全。煙草企業(yè)的科技項(xiàng)目在立項(xiàng)、成果鑒定中未進(jìn)行詳細(xì)分類,評(píng)獎(jiǎng)中分為應(yīng)用基礎(chǔ)研究類、應(yīng)用技術(shù)開(kāi)發(fā)類、科學(xué)技術(shù)推廣類、公益類等,不同類別的科技項(xiàng)目在專業(yè)領(lǐng)域、研究?jī)?nèi)容、專業(yè)特征、科研性質(zhì)、產(chǎn)出成果及形式等方面具有明顯的差異,但目前在煙草企業(yè)科技評(píng)價(jià)機(jī)制中未能體現(xiàn)。
第二,科技評(píng)價(jià)多維度、分類的評(píng)價(jià)指標(biāo)體系不完善??萍荚u(píng)價(jià)指標(biāo)是科研管理決策的直接依據(jù),科技項(xiàng)目的立項(xiàng)、過(guò)程管理、驗(yàn)收、鑒定、后評(píng)價(jià)、評(píng)獎(jiǎng)等一系列過(guò)程都具有特殊性,科技評(píng)價(jià)目的不同,評(píng)價(jià)標(biāo)準(zhǔn)也應(yīng)該有區(qū)分。但目前煙草企業(yè)科技評(píng)價(jià)缺乏體現(xiàn)不同領(lǐng)域和類別的科技項(xiàng)目的差別化指標(biāo),導(dǎo)致在不同程度上存在指標(biāo)單一化、標(biāo)準(zhǔn)定量化等問(wèn)題。
1.3 科研評(píng)價(jià)方法整合不到位 科研評(píng)價(jià)方法一般可以劃分為定量、定性以及綜合評(píng)價(jià),主要涉及文獻(xiàn)計(jì)量法、同行評(píng)議法、層次分析法、TOPSIS法、因子分析法、網(wǎng)絡(luò)計(jì)量法、模糊特爾斐法和DEMATEL法等。目前,煙草企業(yè)主要采取同行評(píng)議法,形式為專家評(píng)審會(huì),科研評(píng)價(jià)方法缺乏有效整合,定量評(píng)價(jià)方法融合不夠,科學(xué)計(jì)量指標(biāo)運(yùn)用不足。如,在成果鑒定中未結(jié)合量化指標(biāo),鑒定水平結(jié)果的描述多表現(xiàn)為國(guó)際和國(guó)內(nèi)領(lǐng)先或先進(jìn),鑒定后項(xiàng)目組難以針對(duì)性進(jìn)行總結(jié);在科技立項(xiàng)評(píng)價(jià)中定性風(fēng)險(xiǎn)評(píng)價(jià)方法,使用數(shù)字范圍順序量表,[0,1]代表“低”,[9,10]代表“高”等,但只能劃分風(fēng)險(xiǎn)高低水平,無(wú)法完成定性風(fēng)險(xiǎn)的量化計(jì)算;在評(píng)獎(jiǎng)中通常設(shè)置10個(gè)指標(biāo),各指標(biāo)分值區(qū)間較大,對(duì)于同一水平的項(xiàng)目無(wú)法進(jìn)行質(zhì)量、績(jī)效和貢獻(xiàn)3個(gè)方面比較。同時(shí),單一的專家評(píng)議制度,易在評(píng)價(jià)活動(dòng)中出現(xiàn)本位主義和人情關(guān)系等現(xiàn)象[9-10],使煙草行業(yè)科技評(píng)價(jià)的客觀性、科學(xué)性和公正性受到影響。
2 煙草企業(yè)科技評(píng)價(jià)改革思路
完善科技評(píng)價(jià)機(jī)制是當(dāng)前煙草企業(yè)科技體制改革的重要任務(wù)之一。針對(duì)科技評(píng)價(jià)過(guò)程中存在的主要問(wèn)題,遵循質(zhì)量、績(jī)效和貢獻(xiàn)的科技評(píng)價(jià)導(dǎo)向,需要采取切實(shí)可行、可操作性強(qiáng)的具體措施。
2.1 探索多維度的科技評(píng)價(jià)模式 國(guó)務(wù)院辦公廳印發(fā)《關(guān)于完善科技成果評(píng)價(jià)機(jī)制的指導(dǎo)意見(jiàn)》,圍繞“評(píng)什么”“誰(shuí)來(lái)評(píng)”“怎么評(píng)”“怎么用”對(duì)科技成果評(píng)價(jià)機(jī)制進(jìn)行完善。其中,科技成果評(píng)價(jià)的首要問(wèn)題是“評(píng)什么”,應(yīng)當(dāng)對(duì)科技成果的科學(xué)價(jià)值、經(jīng)濟(jì)價(jià)值、技術(shù)價(jià)值和社會(huì)價(jià)值等進(jìn)行全面、準(zhǔn)確的評(píng)價(jià),進(jìn)一步完善科技成果分類評(píng)價(jià)體系。煙草行業(yè)應(yīng)積極探索多維度的科技評(píng)價(jià)導(dǎo)向,即圍繞質(zhì)量、績(jī)效和貢獻(xiàn),將定性評(píng)價(jià)、定量評(píng)價(jià)相結(jié)合,從多維度對(duì)行業(yè)科技成果的科學(xué)價(jià)值、技術(shù)價(jià)值、經(jīng)濟(jì)價(jià)值、社會(huì)價(jià)值、文化價(jià)值等方面進(jìn)行評(píng)價(jià)。以綠色低碳技術(shù)應(yīng)用為例,科學(xué)層面應(yīng)重點(diǎn)對(duì)新能源、新材料、新技術(shù)等要素進(jìn)行評(píng)價(jià);技術(shù)層面應(yīng)關(guān)注與行業(yè)的工業(yè)、農(nóng)業(yè)以及商業(yè)環(huán)節(jié)的實(shí)際需求相結(jié)合,特別是破解煙草行業(yè)的共性技術(shù)瓶頸;經(jīng)濟(jì)層面應(yīng)重點(diǎn)關(guān)注工業(yè)生產(chǎn)、煙葉生產(chǎn)、物流配送、企業(yè)管理等場(chǎng)景的應(yīng)用、推廣前景;社會(huì)層面應(yīng)重點(diǎn)關(guān)注促進(jìn)煙草行業(yè)綠色發(fā)展對(duì)社會(huì)發(fā)展的作用與影響;文化層面應(yīng)重點(diǎn)關(guān)注企業(yè)形象、科技知識(shí)普及、人才培養(yǎng)等軟實(shí)力的促進(jìn)作用。
2.2 構(gòu)建科技分類評(píng)價(jià)體系 煙草企業(yè)科技分類評(píng)價(jià)體系的構(gòu)建,可考慮強(qiáng)化分類評(píng)價(jià)導(dǎo)向、健全煙草行業(yè)科技分類評(píng)價(jià)標(biāo)準(zhǔn)、采用科學(xué)計(jì)量學(xué)與同行評(píng)議相結(jié)合的科技評(píng)價(jià)方法等方面。
2.2.1 強(qiáng)化分類評(píng)價(jià)導(dǎo)向??萍柬?xiàng)目管理的評(píng)價(jià)導(dǎo)向應(yīng)以質(zhì)量、績(jī)效和貢獻(xiàn)為主[11],科技人才評(píng)價(jià)應(yīng)以創(chuàng)新價(jià)值、能力、貢獻(xiàn)為評(píng)價(jià)導(dǎo)向[12]。一是對(duì)立項(xiàng)評(píng)審,應(yīng)審核與科技項(xiàng)目績(jī)效目標(biāo)、結(jié)果指標(biāo)、指南要求等的相符性、創(chuàng)新性、可行性、可考核性以及實(shí)現(xiàn)科技項(xiàng)目績(jī)效目標(biāo)的能力、條件等。二是對(duì)項(xiàng)目實(shí)施過(guò)程評(píng)價(jià),應(yīng)加強(qiáng)項(xiàng)目關(guān)鍵環(huán)節(jié)考核,項(xiàng)目難以達(dá)到預(yù)期績(jī)效目標(biāo)的,應(yīng)當(dāng)及時(shí)予以調(diào)整或取消后續(xù)支持。三是對(duì)成果評(píng)價(jià),應(yīng)更注重標(biāo)志性成果的質(zhì)量、貢獻(xiàn)和績(jī)效。四是對(duì)科技獎(jiǎng)勵(lì)評(píng)價(jià),突出成果的質(zhì)量和貢獻(xiàn),重點(diǎn)評(píng)價(jià)科技成果的先進(jìn)水平、創(chuàng)新程度、經(jīng)濟(jì)效益、社會(huì)與生態(tài)效益、推廣與應(yīng)用價(jià)值等,不能僅僅將發(fā)表論文作為主要評(píng)價(jià)依據(jù)。五是對(duì)科技人才評(píng)價(jià),不應(yīng)將科技成果數(shù)量作為主要評(píng)價(jià)依據(jù)和考核指標(biāo),應(yīng)適當(dāng)提升高質(zhì)量成果的考核評(píng)價(jià)指標(biāo)權(quán)重;同時(shí)推行代表作考核制度,設(shè)定代表作數(shù)量上限,引導(dǎo)科技人才更加關(guān)注科技成果質(zhì)量。
2.2.2 健全煙草企業(yè)科技分類評(píng)價(jià)標(biāo)準(zhǔn)。煙草企業(yè)科技評(píng)價(jià)主體可根據(jù)評(píng)價(jià)對(duì)象不同,采取同行評(píng)議、社會(huì)評(píng)價(jià)、用戶(服務(wù)對(duì)象)評(píng)價(jià)和第三方評(píng)價(jià)等方式開(kāi)展;建立分類評(píng)價(jià)指標(biāo)體系,采用適合的評(píng)價(jià)方法、評(píng)價(jià)流程等,對(duì)技術(shù)開(kāi)發(fā)類、軟科學(xué)類、公益類、基礎(chǔ)研究類等不同類別的科技項(xiàng)目及科技人才進(jìn)行評(píng)價(jià)。設(shè)計(jì)評(píng)價(jià)指標(biāo)時(shí),可以參考被評(píng)價(jià)對(duì)象的發(fā)展目標(biāo)。
(1)在煙草企業(yè)科技項(xiàng)目評(píng)價(jià)過(guò)程中,不同類型的科技項(xiàng)目評(píng)價(jià)重點(diǎn)具有一定差異性[13]。一是技術(shù)和產(chǎn)品開(kāi)發(fā)類研究科技項(xiàng)目應(yīng)注重評(píng)價(jià)新技術(shù)、新方法、新產(chǎn)品、關(guān)鍵部件等的創(chuàng)新性、成熟度、穩(wěn)定性、可靠性等,以及應(yīng)用解決方案、科學(xué)數(shù)據(jù)、科技報(bào)告、軟件等標(biāo)志性成果的質(zhì)量、貢獻(xiàn)和影響,突出成果轉(zhuǎn)化應(yīng)用情況及其在解決高質(zhì)量發(fā)展關(guān)鍵問(wèn)題、支撐引領(lǐng)煙草產(chǎn)業(yè)發(fā)展中發(fā)揮的作用。二是應(yīng)用類科技項(xiàng)目評(píng)價(jià)應(yīng)重點(diǎn)評(píng)價(jià)集成性、先進(jìn)性、經(jīng)濟(jì)適用性、輻射帶動(dòng)作用及產(chǎn)生的經(jīng)濟(jì)效益。三是基礎(chǔ)研究類科技項(xiàng)目評(píng)價(jià)應(yīng)重點(diǎn)評(píng)價(jià)科技成果的新理論、新方法、新發(fā)現(xiàn)、新觀點(diǎn)等,體現(xiàn)出科技成果的科學(xué)價(jià)值、學(xué)術(shù)水平、影響力等。
(2)對(duì)煙草企業(yè)科技創(chuàng)新人才評(píng)價(jià)突出科學(xué)精神、能力和業(yè)績(jī)[12]?;A(chǔ)研究類科技人才應(yīng)重點(diǎn)評(píng)價(jià)重大原創(chuàng)性貢獻(xiàn)、學(xué)術(shù)影響力、科學(xué)價(jià)值、研究能力等要素;技術(shù)開(kāi)發(fā)類、應(yīng)用研究類科技人才應(yīng)重點(diǎn)評(píng)價(jià)技術(shù)解決方案、高質(zhì)量專利、技術(shù)標(biāo)準(zhǔn)、成果轉(zhuǎn)化產(chǎn)業(yè)化、產(chǎn)學(xué)研深度融合成效等代表性成果;公益研究類科技人才重點(diǎn)評(píng)價(jià)服務(wù)公共管理的能力與效果。
2.2.3 采用科學(xué)計(jì)量學(xué)與同行評(píng)議相結(jié)合的科技評(píng)價(jià)方法??茖W(xué)計(jì)量學(xué)是一門對(duì)科學(xué)本身進(jìn)行定量研究的學(xué)科。Nalimov和Mulchenko于1969年提出科學(xué)計(jì)量學(xué)(scientometrics)的概念,指出該門新興學(xué)科是采用定量方法尋找科學(xué)活動(dòng)的內(nèi)在規(guī)律和特征,從而對(duì)科學(xué)的信息交流過(guò)程和特征進(jìn)行分析。
在科技評(píng)價(jià)中,應(yīng)用科學(xué)計(jì)量學(xué)應(yīng)加強(qiáng)定量方法與質(zhì)量、績(jī)效、貢獻(xiàn)導(dǎo)向的兼容性,發(fā)揮同行評(píng)議與科學(xué)計(jì)量學(xué)方法在不同類型評(píng)價(jià)中協(xié)同作用[14]。煙草行業(yè)科技評(píng)價(jià)管理部門應(yīng)清晰地認(rèn)識(shí)到不同評(píng)價(jià)方法在科技評(píng)價(jià)中的作用、長(zhǎng)處、局限性有明顯差異。長(zhǎng)期以來(lái),采用同行評(píng)議是科技評(píng)價(jià)的重要方法之一,但同行評(píng)議具有明顯的局限性,集中表現(xiàn)在其客觀性難以完全保證??茖W(xué)計(jì)量學(xué)方法雖在同行評(píng)議之外提供了客觀評(píng)價(jià)標(biāo)準(zhǔn),但可能存在數(shù)據(jù)來(lái)源、數(shù)據(jù)準(zhǔn)確性、科學(xué)引文索引論文的覆蓋范圍以及評(píng)價(jià)指標(biāo)代表性等方面的不足。
科技評(píng)價(jià)方法整合應(yīng)注重?zé)煵萜髽I(yè)科技評(píng)價(jià)方法的適切性與評(píng)價(jià)質(zhì)量的正相關(guān)性,明確定性、定量評(píng)價(jià)方法的適應(yīng)域,關(guān)注二者之間的相互支撐、補(bǔ)充,確保行業(yè)科技評(píng)價(jià)效果。煙草企業(yè)立項(xiàng)、過(guò)程管理、驗(yàn)收、鑒定、成果獎(jiǎng)勵(lì)等評(píng)價(jià)對(duì)象都可以使用同行評(píng)議方法,科技評(píng)價(jià)管理部門需要對(duì)同行評(píng)議方法、科學(xué)計(jì)量學(xué)方法等在科技評(píng)價(jià)中的作用定位進(jìn)行準(zhǔn)確判斷,采取多維度、能夠發(fā)揮各自優(yōu)勢(shì)的評(píng)價(jià)方案,以提高科技評(píng)價(jià)質(zhì)量。以立項(xiàng)評(píng)審為例,其評(píng)價(jià)目標(biāo)主要是科技項(xiàng)目技術(shù)路線的先進(jìn)性、合理性和可行性等,僅僅使用同行評(píng)議方法存在缺少客觀數(shù)據(jù)支撐的弊端。2023年陜西省煙草公司在科技項(xiàng)目立項(xiàng)評(píng)審中的實(shí)踐表明,將同行評(píng)議與科學(xué)計(jì)量學(xué)方法相結(jié)合,補(bǔ)充現(xiàn)有研究的科技項(xiàng)目評(píng)價(jià)指標(biāo),形成整合性的評(píng)價(jià)意見(jiàn),對(duì)改善評(píng)價(jià)質(zhì)量有著明顯的幫助。
3 科學(xué)計(jì)量學(xué)在煙草企業(yè)科技評(píng)價(jià)中的應(yīng)用
科學(xué)計(jì)量學(xué)需要運(yùn)用定量分析方法,以科研活動(dòng)數(shù)據(jù)為分析基礎(chǔ),旨在揭示科學(xué)活動(dòng)規(guī)律,為科技評(píng)價(jià)提供科學(xué)依據(jù)。煙草企業(yè)應(yīng)用科學(xué)計(jì)量學(xué),依據(jù)定量指標(biāo)、分析方法等,采集科學(xué)計(jì)量數(shù)據(jù),根據(jù)評(píng)價(jià)原則、評(píng)價(jià)對(duì)象和評(píng)價(jià)目標(biāo)等建立科技評(píng)價(jià)指標(biāo)體系;采用適當(dāng)?shù)姆椒ㄓ?jì)算出各級(jí)指標(biāo)的得分,并進(jìn)行排序,為煙草企業(yè)科技管理制度制定提供參考。然而,科學(xué)計(jì)量數(shù)據(jù)僅作為科技評(píng)價(jià)的數(shù)據(jù)支撐,并非直接為煙草行業(yè)提供科技評(píng)價(jià)結(jié)果?!度R頓宣言》指出定量評(píng)價(jià)應(yīng)支持而非取代專家的定性評(píng)價(jià),唯論文、SCI期刊、影響因子等評(píng)價(jià)導(dǎo)向使科學(xué)計(jì)量學(xué)在科技評(píng)價(jià)應(yīng)用中引發(fā)爭(zhēng)議。
近年來(lái),科學(xué)計(jì)量學(xué)在世界各國(guó)的科技評(píng)價(jià)中被廣泛應(yīng)用[15-16],主要體現(xiàn)在3個(gè)方面:一是構(gòu)建基于文獻(xiàn)計(jì)量的科技成果評(píng)價(jià)體系,主要采用統(tǒng)計(jì)分析、共現(xiàn)分析、共詞分析、專利論文引用分析、學(xué)科交叉度量等方法,得到的科學(xué)計(jì)量評(píng)價(jià)結(jié)果為同行評(píng)議專家提供重要信息參考;二是學(xué)科前沿、學(xué)科交叉、主題識(shí)別與知識(shí)發(fā)現(xiàn),采用的方法有Louvain算法、技術(shù)主題識(shí)別方法、交叉學(xué)科的測(cè)度方法等;三是量化分析。利用定量分析工具進(jìn)行量化,如采用圖表比較分析科技實(shí)力、創(chuàng)新能力等;采用TOPSIS法、模糊綜合評(píng)價(jià)法、熵值法、層次分析法、因子分析法、優(yōu)序圖法等進(jìn)行綜合評(píng)價(jià)等。其中,TOPSIS法能精確地反映各評(píng)價(jià)對(duì)象之間的差距,在煙草行業(yè)科技評(píng)價(jià)中可以采用該方法計(jì)算得分及排名。該研究以陜西省公司2023年度所有軟科學(xué)類科技項(xiàng)目的報(bào)獎(jiǎng)評(píng)價(jià)為例,運(yùn)用TOPSIS法進(jìn)行科技評(píng)價(jià)的具體步驟如下[17]:
第一步,確定煙草企業(yè)科技項(xiàng)目報(bào)獎(jiǎng)評(píng)價(jià)原始數(shù)據(jù)矩陣。設(shè)有n個(gè)煙草企業(yè)科技項(xiàng)目,m個(gè)評(píng)價(jià)指標(biāo),其中X=(Xij)nm,i =(1,2,…,n),j =(1,2,…,m),Xij表示對(duì)第i個(gè)項(xiàng)目第j項(xiàng)指標(biāo)的數(shù)值。Xij可以由專家個(gè)人評(píng)價(jià)和團(tuán)隊(duì)評(píng)價(jià)綜合得出評(píng)價(jià)結(jié)果。
Xij=x11…x1m
xn1…xnm(1)
為了保護(hù)科技項(xiàng)目的信息,隱去各科技項(xiàng)目的具體名稱。其中,煙草商業(yè)企業(yè)軟科學(xué)類科技項(xiàng)目報(bào)獎(jiǎng)評(píng)價(jià)的3個(gè)一級(jí)指標(biāo)分值見(jiàn)表1。
第二步,構(gòu)建標(biāo)準(zhǔn)化矩陣。為消除指標(biāo)間量綱的影響,用向量的方式標(biāo)準(zhǔn)化,并對(duì)評(píng)價(jià)指標(biāo)進(jìn)行無(wú)量綱化處理。
vij=xijni=1x2ij(2)
第三步,得到標(biāo)準(zhǔn)化矩陣如下:
vij=v11…v1m
vn1…vnm(3)
第四步,構(gòu)造加權(quán)規(guī)范矩陣。
zij=vij×wj(4)
其中,wj為第j項(xiàng)指標(biāo)的權(quán)重。得到加權(quán)規(guī)范矩陣如下:
Zij=z11…z1m
zn1…znm(5)
第五步,確定正負(fù)理想解。由煙草企業(yè)科技項(xiàng)目報(bào)獎(jiǎng)評(píng)價(jià)各指標(biāo)的最優(yōu)值和最劣值分別構(gòu)成正、負(fù)理想解Z+j、Z-j。
Z+j=(z+1,z+2,…,z+m)(6)
Z-j=(z-1,z-2,…,z-m)(7)
其中,z+j=max(z1j,z2j,…,znj),z-j=min(z1j,z2j,…,znj),j=1,2,…,m。
第六步,計(jì)算煙草商業(yè)企業(yè)科技項(xiàng)目報(bào)獎(jiǎng)評(píng)價(jià)結(jié)果與正負(fù)理想解的距離。
D+i=mj=1(zij-z+j)2(8)
D-i=mj=1(zij-z-j)2(9)
第七步,計(jì)算各評(píng)價(jià)單元與理想解的相對(duì)貼近度Ci,計(jì)算公式如下:
Ci=D-iD+i+D-i(10)
第八步,綜合排序。綜合測(cè)度陜西省煙草商業(yè)企業(yè)2023年所有軟科學(xué)類科技項(xiàng)目的相對(duì)貼近度,得到11個(gè)軟科學(xué)類科技項(xiàng)目報(bào)獎(jiǎng)評(píng)價(jià)的綜合排序情況,具體結(jié)果見(jiàn)表2。相對(duì)貼近度C越大,科技項(xiàng)目的綜合排名越靠前,反之則越靠后。該方法同樣適用于煙草商業(yè)企業(yè)科技項(xiàng)目立項(xiàng)評(píng)價(jià)、鑒定評(píng)價(jià)等。
第九步,結(jié)果分析。由表2可知,總排名第一的是“項(xiàng)目9”,其相對(duì)貼近度最高為0.783。主要原因在于質(zhì)量指標(biāo)和貢獻(xiàn)指標(biāo)得分在軟科學(xué)類科技項(xiàng)目中排名第一,但績(jī)效指標(biāo)得分排名第二。排名最后的是“項(xiàng)目6”,相對(duì)貼近度為0,其質(zhì)量、績(jī)效和貢獻(xiàn)得分在軟科學(xué)類科技項(xiàng)目中均排名為倒數(shù)第一?!绊?xiàng)目7”的績(jī)效指標(biāo)得分在軟科學(xué)類科技項(xiàng)目中排名第一,但質(zhì)量指標(biāo)和貢獻(xiàn)指標(biāo)得分排名相對(duì)靠后,其相對(duì)貼近度為0.616,總排名第3。
4 結(jié)語(yǔ)
科技評(píng)價(jià)改革是科技管理改革的著力點(diǎn),對(duì)煙草行業(yè)科技發(fā)展方向、科技人才成長(zhǎng)、科技成果質(zhì)量等產(chǎn)生顯著影響。通過(guò)構(gòu)建多維度分類科技評(píng)價(jià)體系,應(yīng)用科學(xué)計(jì)量學(xué)與同行評(píng)議相結(jié)合的科技評(píng)價(jià)方法,實(shí)施不同層面的科技評(píng)價(jià),有助于推動(dòng)煙草企業(yè)科技評(píng)價(jià)改革,切實(shí)提升科研水平和人才培養(yǎng)質(zhì)量。
參考文獻(xiàn)
[1]
汪志波,鄭新章,邱紀(jì)青,等.煙草行業(yè)科技重大專項(xiàng)項(xiàng)目績(jī)效跟蹤評(píng)價(jià)指標(biāo)體系研究[J].中國(guó)煙草學(xué)報(bào),2016,22(2):138-145.
[2] 王宗軍,張馬萍,陶立祥,等.基于層次分析-熵權(quán)法的湖北省煙草商業(yè)系統(tǒng)科研項(xiàng)目績(jī)效評(píng)價(jià)體系研究[J].科技和產(chǎn)業(yè),2022,22(6):163-169.
[3] 張富利,蔡躍龍.科研分類管理評(píng)價(jià)問(wèn)題研究[J].知識(shí)經(jīng)濟(jì),2019(12):88-89.
[4] 姜春林,張立偉,張春博.科學(xué)計(jì)量方法輔助代表作評(píng)價(jià)的探討[J].情報(bào)資料工作,2014(3):31-36.
[5] 張積玉.以量化為基礎(chǔ)以代表作為主的綜合化學(xué)術(shù)評(píng)價(jià)制度構(gòu)建:基于S大學(xué)的經(jīng)驗(yàn)[J].重慶大學(xué)學(xué)報(bào)(社會(huì)科學(xué)版),2019,25(6):84-96.
[6] 董麗華.基于科學(xué)計(jì)量學(xué)的中美科技實(shí)力評(píng)價(jià)指標(biāo)分析[J].甘肅科技縱橫,2019,48(1):72-75.
[7] 俞立平,張礦偉,蔣長(zhǎng)兵.推進(jìn)代表作評(píng)價(jià)存在的問(wèn)題與對(duì)策研究[J].情報(bào)學(xué)報(bào),2021,40(4):345-353.
[8] 劉夢(mèng)星,張紅霞.高??蒲性u(píng)價(jià)的問(wèn)題、走向與改革策略[J].高校教育管理,2021,15(1):117-124.
[9] 周玉容,沈紅.大學(xué)教學(xué)同行評(píng)價(jià):優(yōu)勢(shì)、困境與出路[J].復(fù)旦教育論壇,2015,13(3):47-52.
[10] 袁永和.高校教師科研評(píng)價(jià)中的問(wèn)題與對(duì)策[J].廣東技術(shù)師范學(xué)院學(xué)報(bào),2011,32(11):110-113.
[11] 新華社.中共中央辦公廳 國(guó)務(wù)院辦公廳印發(fā)《關(guān)于深化項(xiàng)目評(píng)審、人才評(píng)價(jià)、機(jī)構(gòu)評(píng)估改革的意見(jiàn)》[EB/OL].(2018-07-03)[2023-04-25].http://www.gov.cn/zhengce/2018-07/03/content_5303251.htm.
[12] 科技部,教育部,工業(yè)和信息化部,等.關(guān)于開(kāi)展科技人才評(píng)價(jià)改革試點(diǎn)的工作方案[EB/OL].(2022-11-09)[2023-04-25].https://www.most.gov.cn/xxgk/xinxifenlei/fdzdgknr/qtwj/qtwj2022/202211/t202211 09_183356.html.
[13] 國(guó)務(wù)院.國(guó)務(wù)院關(guān)于優(yōu)化科研管理提升科研績(jī)效若干措施的通知:國(guó)發(fā)〔2018〕25號(hào)[EB/OL].(2018-07-24)[2023-04-25].https://www.gov.cn/zhengce/content/2018-07/24/content_5308787.htm.
[14] 朱軍文,劉念才.高??蒲性u(píng)價(jià)定量方法與質(zhì)量導(dǎo)向的偏離及治理[J].教育研究,2014,35(8):52-59.
[15] 陳云偉,張志強(qiáng).科學(xué)計(jì)量學(xué)迎接新挑戰(zhàn)與新機(jī)遇:2018科學(xué)計(jì)量與科技評(píng)價(jià)天府論壇綜述[J].圖書(shū)與情報(bào),2018(5):134-140.
[16] 趙紅州,蔣國(guó)華.科學(xué)計(jì)量學(xué)的歷史和現(xiàn)狀[J].科學(xué)學(xué)研究,1984,2(4):24-35.
[17] 嚴(yán)夢(mèng)帆,龍吉生.基于德?tīng)柗品ê蚑OPSIS法的垃圾焚燒發(fā)電廠綜合評(píng)價(jià)方法[J].環(huán)境工程,2023,41(7):229-234.