推動(dòng)科研論文語(yǔ)義評(píng)價(jià)體系建設(shè)

2021年8月2日國(guó)務(wù)院辦公廳發(fā)布《關(guān)于完善科技成果評(píng)價(jià)機(jī)制的指導(dǎo)意見(jiàn)》，特別提出要利用大數(shù)據(jù)、人工智能等技術(shù)手段，開(kāi)發(fā)信息化評(píng)價(jià)工具。2021年8月3日國(guó)家社會(huì)科學(xué)基金重大項(xiàng)目公布“大數(shù)據(jù)驅(qū)動(dòng)的科技文獻(xiàn)語(yǔ)義評(píng)價(jià)體系研究”的年度招標(biāo)選題，同步提出基于語(yǔ)義內(nèi)容創(chuàng)新科技成果評(píng)價(jià)工具和模式?？梢?jiàn)，完善科技成果評(píng)價(jià)機(jī)制，從原理機(jī)理、方法技術(shù)、場(chǎng)景應(yīng)用等層面優(yōu)化科技成果評(píng)價(jià)理論框架和方法體系，已成為當(dāng)前學(xué)術(shù)評(píng)價(jià)乃至科研管理工作亟待突破的重要課題。

目前，我國(guó)科研論文量化評(píng)價(jià)基本沿用以文獻(xiàn)計(jì)量指標(biāo)為主導(dǎo)的評(píng)價(jià)體系，基于引文指標(biāo)來(lái)評(píng)價(jià)學(xué)術(shù)影響力、基于網(wǎng)絡(luò)指標(biāo)來(lái)評(píng)價(jià)社會(huì)影響力，總體上屬于形式評(píng)價(jià)范疇，這種模式導(dǎo)致科學(xué)評(píng)價(jià)中過(guò)度強(qiáng)調(diào)論文發(fā)表數(shù)量、被引頻次、期刊影響因子等外在量化指標(biāo)，沒(méi)有深入到論文內(nèi)容層面，從全文內(nèi)容數(shù)據(jù)、引用數(shù)據(jù)、關(guān)注數(shù)據(jù)、使用數(shù)據(jù)等進(jìn)行語(yǔ)義分析，忽視了從科學(xué)性、價(jià)值性、創(chuàng)新性、規(guī)范性方面進(jìn)行評(píng)價(jià)。

所以，推進(jìn)科研論文語(yǔ)義評(píng)價(jià)，需要在建立科研論文語(yǔ)義評(píng)價(jià)的資源體系基礎(chǔ)上，探討語(yǔ)義評(píng)價(jià)的方法體系，形成語(yǔ)義評(píng)價(jià)的解析流程，探討科研論文評(píng)價(jià)中的貢獻(xiàn)、創(chuàng)新、價(jià)值和影響的表達(dá)形式和識(shí)別方法，繼而完善知識(shí)單元及其關(guān)系的圖譜構(gòu)建，結(jié)合科研論文評(píng)價(jià)目標(biāo)、要素和場(chǎng)景進(jìn)行應(yīng)用示范和驗(yàn)證。首先，需要充分利用各類(lèi)信息資源及其使用數(shù)據(jù)，建設(shè)跨行業(yè)、跨部門(mén)、跨地區(qū)的知識(shí)庫(kù)、需求庫(kù)、案例庫(kù)和評(píng)價(jià)工具方法庫(kù)；其次，將自然語(yǔ)言處理與文本挖掘技術(shù)應(yīng)用于文本內(nèi)容的自動(dòng)分析與語(yǔ)義理解，對(duì)論文篇章結(jié)構(gòu)進(jìn)行自動(dòng)解析，抽取科研論文中表現(xiàn)創(chuàng)新性、實(shí)用性、重要性的知識(shí)單元；再次，通過(guò)語(yǔ)義關(guān)聯(lián)計(jì)算，從文本、圖片、翻譯到釋義、觀(guān)點(diǎn)、思路間的相似性，對(duì)論文進(jìn)行相似檢測(cè)，輔助論文結(jié)構(gòu)規(guī)范性評(píng)價(jià)和論證邏輯性評(píng)價(jià)，發(fā)現(xiàn)科研論文中的新知識(shí)、新價(jià)值和新貢獻(xiàn)、新突破；最后，建立科研論文評(píng)價(jià)數(shù)據(jù)服務(wù)平臺(tái)，提供語(yǔ)義關(guān)聯(lián)的知識(shí)圖譜，實(shí)現(xiàn)對(duì)知識(shí)單元影響力、創(chuàng)新力的可視化展示，支撐同行評(píng)議，優(yōu)化學(xué)術(shù)評(píng)價(jià)行業(yè)生態(tài)。

學(xué)術(shù)評(píng)價(jià)從文獻(xiàn)計(jì)量、替代計(jì)量走向語(yǔ)義計(jì)算，從外在到內(nèi)在，從文本到語(yǔ)義，從實(shí)體概念識(shí)別到語(yǔ)義理解對(duì)標(biāo)，需要將語(yǔ)義關(guān)聯(lián)、知識(shí)組織與科學(xué)評(píng)價(jià)相結(jié)合，將大數(shù)據(jù)、人工智能技術(shù)融入到科學(xué)計(jì)量學(xué)中，從外在統(tǒng)計(jì)評(píng)價(jià)轉(zhuǎn)向知識(shí)單元評(píng)價(jià)，識(shí)別其中的新發(fā)現(xiàn)、新原理、新方法，測(cè)度文獻(xiàn)規(guī)范性、文本相似性和觀(guān)點(diǎn)創(chuàng)新性，革新和完善現(xiàn)有文獻(xiàn)計(jì)量評(píng)價(jià)體系，形成定量與定性、形式與內(nèi)容相結(jié)合的語(yǔ)義評(píng)價(jià)體系，開(kāi)創(chuàng)信息化、語(yǔ)義化、智能化評(píng)價(jià)工具，豐富知識(shí)計(jì)量理論方法與工具體系。