人工智能視域下母語(yǔ)寫(xiě)作評(píng)價(jià)的構(gòu)想

蔣興超（江蘇省南京外國(guó)語(yǔ)學(xué)校，江蘇南京 210008）

史釙鐳（江蘇省南京外國(guó)語(yǔ)學(xué)校，江蘇南京 210008）

人工智能時(shí)代的到來(lái)，以其便捷、智能、高效的優(yōu)勢(shì)，無(wú)孔不入。長(zhǎng)久以來(lái)，母語(yǔ)寫(xiě)作評(píng)價(jià)都依賴(lài)于教師評(píng)價(jià)，存在種種弊端。人工智能可以替代教師，評(píng)價(jià)母語(yǔ)寫(xiě)作嗎？人工智能寫(xiě)作評(píng)價(jià)，已廣泛運(yùn)用于英語(yǔ)寫(xiě)作，母語(yǔ)寫(xiě)作也能運(yùn)用嗎？本文基于人工智能評(píng)價(jià)研究的基礎(chǔ)與現(xiàn)狀，進(jìn)行如下三層構(gòu)想。

一、展望，人工智能評(píng)價(jià)與教師評(píng)價(jià)的現(xiàn)狀與未來(lái)

（一）母語(yǔ)寫(xiě)作評(píng)價(jià)的現(xiàn)狀與不足

母語(yǔ)寫(xiě)作評(píng)價(jià)，包括定量評(píng)分和定性評(píng)語(yǔ)兩種評(píng)價(jià)方式。定量評(píng)價(jià)是對(duì)學(xué)生作文賦分或定級(jí)的評(píng)價(jià)，而定性評(píng)價(jià)是針對(duì)作文整體或局部進(jìn)行或褒揚(yáng)優(yōu)點(diǎn)或指明不足的評(píng)語(yǔ)性評(píng)價(jià)。兩種評(píng)價(jià)都從字、詞、句、篇等方面進(jìn)行量衡，主要涵蓋內(nèi)容、結(jié)構(gòu)和表達(dá)三個(gè)維度。

現(xiàn)行的兩種評(píng)價(jià)都是以教師為主導(dǎo)的評(píng)價(jià)（以下簡(jiǎn)稱(chēng)教師評(píng)價(jià)）。其缺點(diǎn)是評(píng)價(jià)者個(gè)人主觀性較強(qiáng)，同一篇文章不同評(píng)價(jià)者的評(píng)價(jià)結(jié)果往往相差較大——這容易挫傷學(xué)生寫(xiě)作的積極性，誤導(dǎo)學(xué)生寫(xiě)作的方向；數(shù)量極大的考卷容易讓評(píng)價(jià)者產(chǎn)生閱卷疲勞，降低評(píng)價(jià)質(zhì)量，教師也無(wú)法真實(shí)地把握學(xué)生寫(xiě)作中存在的問(wèn)題與不足，難以對(duì)癥下藥等——這嚴(yán)重影響作文教學(xué)，降低了作文評(píng)價(jià)的效能。在此背景下，便捷高效的人工智能寫(xiě)作評(píng)價(jià)（以下簡(jiǎn)稱(chēng)人工智能評(píng)價(jià)），成為母語(yǔ)寫(xiě)作評(píng)價(jià)的時(shí)代之需。

（二）人工智能評(píng)價(jià)的原理與優(yōu)勢(shì)

人工智能視域下的寫(xiě)作評(píng)價(jià)是借助人工智能技術(shù)領(lǐng)域中一個(gè)分支，即自然語(yǔ)言處理（Natural Language Processing，簡(jiǎn)稱(chēng)NLP）技術(shù)。而自然語(yǔ)言處理技術(shù)，就是人工智能寫(xiě)作評(píng)價(jià)的核心技術(shù)。

自然語(yǔ)言即人類(lèi)日常使用的語(yǔ)言，比如口語(yǔ)表達(dá)或書(shū)面文本。自然語(yǔ)言處理，就是利用電子計(jì)算機(jī)為工具對(duì)人類(lèi)特有的書(shū)面和口頭形式的自然語(yǔ)言進(jìn)行各種類(lèi)型的處理和加工的技術(shù)。以自然語(yǔ)言處理技術(shù)為主的各種自然語(yǔ)言處理系統(tǒng)，包括機(jī)器翻譯系統(tǒng)、自然語(yǔ)言理解系統(tǒng)、自動(dòng)檢索系統(tǒng)、文字自動(dòng)識(shí)別系統(tǒng)、數(shù)據(jù)庫(kù)系統(tǒng)等。［1］

人工智能評(píng)價(jià)的基本原理是基于語(yǔ)言學(xué)專(zhuān)家開(kāi)發(fā)的大型詞法、句法和語(yǔ)義規(guī)則庫(kù)，用人工智能技術(shù)對(duì)作文語(yǔ)境、詞法、句法、語(yǔ)義以及篇章等進(jìn)行多維度分析，從而解析作文的篇章結(jié)構(gòu)、主題、通順度、豐富度、修辭手法、錯(cuò)別字和語(yǔ)病等。

人工智能寫(xiě)作評(píng)價(jià)基本過(guò)程主要分為六步。第一步，獲取。采用紙質(zhì)文本掃描及文字識(shí)別技術(shù)獲取原始文本并轉(zhuǎn)為數(shù)字文件。第二步，標(biāo)準(zhǔn)化。對(duì)文本進(jìn)行預(yù)處理，去除無(wú)關(guān)內(nèi)容，保留待分析內(nèi)容。第三步，分解詞。采用分詞技術(shù)將文本按詞組分開(kāi)，并構(gòu)造文本樹(shù)。第四步，詞法分析。對(duì)名詞、動(dòng)詞、形容詞、副詞、介詞等進(jìn)行定性。第五步，語(yǔ)法分析。分析主語(yǔ)、謂語(yǔ)、賓語(yǔ)、定語(yǔ)、狀語(yǔ)、補(bǔ)語(yǔ)等句子元素。第六步，語(yǔ)義分析。分析句子、語(yǔ)段、文章的內(nèi)涵，將其含義正確地表達(dá)出來(lái)?；谶@六步，人工智能評(píng)價(jià)和教師評(píng)價(jià)一樣，進(jìn)行定量評(píng)分和定性評(píng)語(yǔ)兩種評(píng)價(jià)。[2]

人工智能評(píng)價(jià)的優(yōu)點(diǎn)是：智能，高效，評(píng)價(jià)穩(wěn)定高，評(píng)價(jià)更公平，為教師、教學(xué)提供海量寫(xiě)作數(shù)據(jù)，更易對(duì)學(xué)生寫(xiě)作中存在的問(wèn)題對(duì)癥下藥。

（三）人工智能評(píng)價(jià)的探索與機(jī)遇

國(guó)內(nèi)人工智能評(píng)價(jià)的探索與建設(shè)有兩類(lèi)：一類(lèi)是針對(duì)英語(yǔ)寫(xiě)作的評(píng)價(jià)，另一類(lèi)是針對(duì)母語(yǔ)寫(xiě)作的評(píng)價(jià)。

先說(shuō)針對(duì)英語(yǔ)寫(xiě)作評(píng)價(jià)的探索。最具代表性的是北京詞網(wǎng)科技有限公司開(kāi)發(fā)的批改網(wǎng)，已累計(jì)批改作文超5.3億篇。批改網(wǎng)是智能批改英語(yǔ)作文的在線服務(wù)系統(tǒng)，它通過(guò)將學(xué)生的作文和海量標(biāo)準(zhǔn)語(yǔ)料庫(kù)進(jìn)行對(duì)比分析，能在1.2秒內(nèi)對(duì)英語(yǔ)作文給出分?jǐn)?shù)、總評(píng)、按句糾錯(cuò)的批改反饋。該系統(tǒng)能有效幫助教師提高工作效率，幫助學(xué)生有效提高英文寫(xiě)作能力。［3］針對(duì)英語(yǔ)寫(xiě)作評(píng)價(jià)的研究十分廣泛，技術(shù)已十分成熟，被廣泛運(yùn)用到教學(xué)實(shí)踐中。

再說(shuō)針對(duì)母語(yǔ)寫(xiě)作評(píng)價(jià)的嘗試。中國(guó)語(yǔ)言智能研發(fā)中心發(fā)布了一款智能批改系統(tǒng)——IN課堂語(yǔ)文作文批改系統(tǒng)，它使用可以擴(kuò)展的“知識(shí)庫(kù)”來(lái)解釋學(xué)生作文的“一般邏輯”和“含義”，突出需要改進(jìn)的文體、結(jié)構(gòu)和主題領(lǐng)域的問(wèn)題。系統(tǒng)能夠讀懂文意，注意到段落是否偏離主題。測(cè)試效果尚佳。［4］但這一技術(shù)尚屬實(shí)驗(yàn)研究階段，還未得到科學(xué)、廣泛的認(rèn)同。百度AI面向中小學(xué)學(xué)校教育，搭建百度智慧課堂云平臺(tái)，為中小學(xué)教學(xué)提供了各種智能化服務(wù)，其中作文智能評(píng)閱系統(tǒng)，整合百度教育AI能力，嘗試智能評(píng)閱服務(wù)。

隨著人工智能技術(shù)的日臻成熟，相信人工智能將會(huì)成熟、廣泛地運(yùn)用到母語(yǔ)寫(xiě)作評(píng)價(jià)中，扮演十分重要的角色。

二、檢視，人工智能評(píng)價(jià)和教師評(píng)價(jià)的實(shí)驗(yàn)與糾偏

（一）人工智能評(píng)價(jià)的原理學(xué)習(xí)與系統(tǒng)建構(gòu)

深諳人工智能評(píng)價(jià)的方法原理。人工智能評(píng)價(jià)的方法原理，涵蓋了信息采集技術(shù)、分解詞技術(shù)、詞法分析技術(shù)、語(yǔ)法分析技術(shù)、語(yǔ)義分析技術(shù)和標(biāo)準(zhǔn)化制定技術(shù)，這些技術(shù)融合了計(jì)算機(jī)、母語(yǔ)寫(xiě)作、評(píng)價(jià)研究、數(shù)據(jù)收集與分析等多個(gè)跨界領(lǐng)域。只有了解、研究、深諳這些技術(shù)與方法原理，才能建構(gòu)科學(xué)的人工智能評(píng)價(jià)體系，在反復(fù)實(shí)驗(yàn)和糾偏的過(guò)程中才容易得心應(yīng)手。

建構(gòu)科學(xué)、高效、便捷的人工智能評(píng)價(jià)體系。構(gòu)建科學(xué)、高效、便捷的人工智能評(píng)價(jià)體系有兩種方式：一、基于國(guó)內(nèi)已有的實(shí)驗(yàn)評(píng)測(cè)系統(tǒng)平臺(tái)，對(duì)其進(jìn)行實(shí)驗(yàn)、檢驗(yàn)和再建；二、根據(jù)人工智能評(píng)價(jià)的方法原理，重新開(kāi)發(fā)新的評(píng)測(cè)系統(tǒng)平臺(tái)。無(wú)論何種方式，都需要多學(xué)科跨界技術(shù)的支撐和深度融合，特別是人工智能技術(shù)和母語(yǔ)寫(xiě)作的專(zhuān)業(yè)評(píng)價(jià)之間的互融、共建。母語(yǔ)寫(xiě)作的人工智能評(píng)價(jià)，可借鑒成熟的外語(yǔ)寫(xiě)作人工智能評(píng)價(jià)；母語(yǔ)寫(xiě)作有別于外語(yǔ)寫(xiě)作特殊的言語(yǔ)表達(dá)，更要求互融、共建的溫度與效度。

（二）人工智能評(píng)價(jià)與教師評(píng)價(jià)的對(duì)照與修正

兩種評(píng)價(jià)對(duì)照與修正的路徑。首先，在多個(gè)地區(qū)、多所學(xué)校選擇多個(gè)生源層次不同的實(shí)驗(yàn)班級(jí)，作為實(shí)驗(yàn)研究對(duì)象。其次，選取多種任務(wù)、多種類(lèi)型、多種文體的寫(xiě)作，作為參照數(shù)據(jù)。然后，以教師評(píng)價(jià)和人工智能評(píng)價(jià)兩種評(píng)價(jià)方式，分別進(jìn)行賦分評(píng)價(jià)和評(píng)語(yǔ)評(píng)價(jià)。接著，對(duì)教師評(píng)價(jià)和人工智能評(píng)價(jià)進(jìn)行對(duì)照分析。最后，以教師評(píng)價(jià)為基準(zhǔn)，對(duì)人工智能評(píng)價(jià)存在的缺陷與不足進(jìn)行修正、優(yōu)化。對(duì)照、修正路徑如圖1。

圖1

兩種評(píng)價(jià)的多輪對(duì)照、修正與完善。上述對(duì)照、修正的路徑，需多次、反復(fù)試驗(yàn)才能提高人工智能評(píng)價(jià)的準(zhǔn)確性與穩(wěn)定性。多次、反復(fù)試驗(yàn)，離不開(kāi)如下幾大要素：一、寫(xiě)作類(lèi)型、文題與文體的多次轉(zhuǎn)換；二、教師評(píng)價(jià)主體的多元構(gòu)成，多次輪換；三、寫(xiě)作主體的多元組成，多樣式寫(xiě)作的變換。在寫(xiě)作主體、評(píng)價(jià)主體、寫(xiě)作內(nèi)容的多次調(diào)配、組合和變換后，兩者評(píng)價(jià)的數(shù)據(jù)對(duì)照才更具可靠和穩(wěn)定?；诖?，修正和完善人工智能評(píng)價(jià)才更有價(jià)值和意義。

（三）人工智能評(píng)價(jià)與教師評(píng)價(jià)效度一致性的檢驗(yàn)

人工智能評(píng)價(jià)的效度一致性檢驗(yàn)。檢驗(yàn)人工智能評(píng)價(jià)效度的具體方案如下：首先選擇三個(gè)層次大致相同的教學(xué)班級(jí)，分別作為實(shí)驗(yàn)班級(jí)、對(duì)照班級(jí)1和對(duì)照班級(jí)2；然后，三個(gè)班級(jí)共同執(zhí)行相同的寫(xiě)作任務(wù)；實(shí)驗(yàn)班級(jí)的寫(xiě)作評(píng)價(jià)由人工智能評(píng)價(jià)和教師評(píng)價(jià)共同完成，對(duì)照班級(jí)1的寫(xiě)作評(píng)價(jià)由人工智能評(píng)價(jià)完成，對(duì)照班級(jí)2的寫(xiě)作評(píng)價(jià)由教師評(píng)價(jià)完成；接著將實(shí)驗(yàn)班級(jí)、對(duì)照班1和對(duì)照班2的評(píng)價(jià)結(jié)果進(jìn)行三方對(duì)比、分析；三方數(shù)據(jù)對(duì)比、分析后，再對(duì)學(xué)生和教師進(jìn)行問(wèn)卷調(diào)查、觀察和訪談，了解、探究深層次原因，對(duì)人工智能評(píng)價(jià)進(jìn)行完善；最后通過(guò)寫(xiě)作測(cè)驗(yàn)，再次檢驗(yàn)人工智能評(píng)價(jià)效度的穩(wěn)定性。檢驗(yàn)人工智能評(píng)價(jià)效度一致性如圖2。

圖2

成熟的人工智能評(píng)價(jià)系統(tǒng)建設(shè)。人工智能評(píng)價(jià)體系建設(shè)路徑為：系統(tǒng)開(kāi)發(fā)——實(shí)驗(yàn)、對(duì)照、修正——多輪檢視與完善——效度一致性檢驗(yàn)——再實(shí)驗(yàn)、修正、完善——成熟模式。在多輪動(dòng)態(tài)、變化的實(shí)驗(yàn)、檢視中不斷修正和完善，以至日臻成熟。這是人工智能評(píng)價(jià)走向成熟、得以推廣的最為重要的環(huán)節(jié)，否則人工智能評(píng)價(jià)的準(zhǔn)確性和穩(wěn)定性都將大大降低，人工智能評(píng)價(jià)也終將是紙上談兵。

三、融合，人工智能評(píng)價(jià)和教師評(píng)價(jià)依賴(lài)與共存

（一）人工智能評(píng)價(jià)給教師評(píng)價(jià)提供精準(zhǔn)反饋

準(zhǔn)確、穩(wěn)定和成熟的人工智能評(píng)價(jià)，能給教師評(píng)價(jià)提供海量數(shù)據(jù)，作出精準(zhǔn)診斷，反饋突出問(wèn)題和典型案例，有利于教師精準(zhǔn)化指導(dǎo)，有利于寫(xiě)作教學(xué)的精深化推進(jìn)，還有利于教師評(píng)價(jià)的精細(xì)化開(kāi)展。

人工智能評(píng)價(jià)提供海量數(shù)據(jù)?；ヂ?lián)網(wǎng)的便捷與普及，使學(xué)生寫(xiě)作愈加擁抱和融入人工智能評(píng)價(jià)。長(zhǎng)而久之，人工智能評(píng)價(jià)就能為教師提供海量的評(píng)價(jià)數(shù)據(jù)。海量數(shù)據(jù)涵蓋了各種類(lèi)型寫(xiě)作的真實(shí)樣態(tài)、某一文體寫(xiě)作的現(xiàn)存問(wèn)題、某類(lèi)問(wèn)題的癥結(jié)之處、某個(gè)地區(qū)的寫(xiě)作狀況、某所學(xué)校的整體水平、某個(gè)學(xué)生的大致走向……這些海量數(shù)據(jù)直觀地呈現(xiàn)了寫(xiě)作水平、優(yōu)點(diǎn)與不足，為及時(shí)矯正、精準(zhǔn)推進(jìn)提供了極大便利。

人工智能評(píng)價(jià)能作出精準(zhǔn)診斷。人工智能評(píng)價(jià)精準(zhǔn)診斷主要包括三個(gè)層面：一是對(duì)地域整體水平的診斷，比如這個(gè)地區(qū)寫(xiě)議論文可能說(shuō)理不夠有力，那個(gè)地區(qū)寫(xiě)記敘文描寫(xiě)不夠細(xì)致；二是對(duì)某類(lèi)主題、文體、任務(wù)驅(qū)動(dòng)寫(xiě)作的水平診斷，例如親情類(lèi)主題寫(xiě)作、演講稿的寫(xiě)作、情境任務(wù)類(lèi)寫(xiě)作問(wèn)題主要集中在哪里；三是對(duì)學(xué)生個(gè)人寫(xiě)作水平的診斷，比如某個(gè)學(xué)段、某種文體、某種類(lèi)型的寫(xiě)作，以前和現(xiàn)在比是否有變化。這些診斷，為教師評(píng)價(jià)的刻意、集中關(guān)注提供了便利。

人工智能評(píng)價(jià)還反饋突出問(wèn)題和典型案例。人工智能評(píng)價(jià)反饋學(xué)生寫(xiě)作中出現(xiàn)的某類(lèi)突出的問(wèn)題，比教師評(píng)價(jià)更容易及時(shí)、準(zhǔn)確地找到短板，促使教師針對(duì)突出問(wèn)題集中深研、改進(jìn)和再評(píng)價(jià)，以至突破。人工智能評(píng)價(jià)發(fā)現(xiàn)學(xué)生寫(xiě)作的共性?xún)?yōu)點(diǎn)和典型案例，也容易被發(fā)現(xiàn)和放大，促進(jìn)學(xué)生整體寫(xiě)作水平的發(fā)展。

（二）教師評(píng)價(jià)能補(bǔ)位人工智能評(píng)價(jià)的溫度關(guān)懷

人工智能評(píng)價(jià)是以教師評(píng)價(jià)為基準(zhǔn)反復(fù)實(shí)驗(yàn)、檢校和優(yōu)化后的智能標(biāo)準(zhǔn)化的評(píng)價(jià)。標(biāo)準(zhǔn)化的缺陷是缺少個(gè)性化，缺少溫度。教師評(píng)價(jià)便補(bǔ)位了人工智能評(píng)價(jià)的這一短板。

教師評(píng)價(jià)的情感融入。人工智能評(píng)價(jià)的層級(jí)賦分和評(píng)語(yǔ)生成，有固化的思維與樣式；而教師評(píng)語(yǔ)則有情感融入，這是人工智能評(píng)價(jià)所無(wú)法相比的。教師針對(duì)學(xué)生寫(xiě)作的內(nèi)容，可以有深層次的對(duì)話和互動(dòng)，或觸發(fā)情思，或交流技法，或引動(dòng)思考……融入情感的評(píng)價(jià)，更有溫度和價(jià)值。歸根結(jié)底，評(píng)價(jià)不是目的，而是手段，是為了將學(xué)生引向精神追求的高地，是為了激發(fā)學(xué)生寫(xiě)作的興味，是為了促進(jìn)學(xué)生寫(xiě)作能力的全面提升。而教師評(píng)價(jià)，無(wú)疑才更符合評(píng)價(jià)的終極追求。

教師評(píng)價(jià)的個(gè)性化輔導(dǎo)。和教師評(píng)價(jià)相比，人工智能評(píng)價(jià)更顯得臉譜化、平庸化和平面化。教師評(píng)價(jià)能針對(duì)學(xué)生個(gè)體寫(xiě)作，進(jìn)行立體的、多層面的、個(gè)性化的交互和指導(dǎo)。人工智能評(píng)價(jià)根據(jù)字詞、句、段、篇評(píng)價(jià)語(yǔ)句、文段的連貫和文意情感的表達(dá)狀況，而教師評(píng)價(jià)則能跨越這些平面的、淺表的評(píng)價(jià)，更加走向深層，更容易和學(xué)生個(gè)體形成深度交互，有利于學(xué)生個(gè)體的重審和再修，更易于學(xué)生個(gè)體的能力成長(zhǎng)。

（三）人工智能評(píng)價(jià)與教師評(píng)價(jià)的融合發(fā)展

互補(bǔ)互鑒。人工智能評(píng)價(jià)發(fā)展到成熟和高階階段，將會(huì)和教師評(píng)價(jià)形成互補(bǔ)互鑒的局面。當(dāng)大批量的作文批改降低了教師評(píng)價(jià)的效率與質(zhì)量時(shí)，人工智能評(píng)價(jià)能發(fā)揮評(píng)價(jià)的客觀性、穩(wěn)定性與高效率。當(dāng)學(xué)生個(gè)體寫(xiě)作需要精細(xì)化、個(gè)性化的輔助時(shí)，教師評(píng)價(jià)的溫度、深層交互的優(yōu)勢(shì)就會(huì)派上用場(chǎng)。兩種評(píng)價(jià)互為補(bǔ)充，共生共存。

因需而評(píng)。人工智能評(píng)價(jià)和教師評(píng)價(jià)，各有所長(zhǎng)，各有優(yōu)勢(shì)。因不同的評(píng)價(jià)需要，選擇不同的評(píng)價(jià)方式，是較為可取的做法。比如，大型考場(chǎng)作文批改，適宜采用人工智能評(píng)價(jià)，避免教師評(píng)價(jià)的主觀性和隨意性，發(fā)揮人工智能評(píng)價(jià)的客觀性和穩(wěn)定性，這樣更公平。再比如，要解決班級(jí)長(zhǎng)久以來(lái)存在的某一類(lèi)寫(xiě)作問(wèn)題時(shí)，適合采用教師評(píng)價(jià)，這樣更容易集中發(fā)現(xiàn)問(wèn)題，深究問(wèn)題，攻克問(wèn)題。再例如，常規(guī)寫(xiě)作訓(xùn)練，為了提高批改效率，及時(shí)發(fā)現(xiàn)問(wèn)題，先采用人工智能評(píng)價(jià)，后采用教師評(píng)價(jià)，兩者結(jié)合效率更高。

聯(lián)動(dòng)、融合發(fā)展。人工智能評(píng)價(jià)經(jīng)過(guò)反復(fù)實(shí)驗(yàn)、檢視和完善后逐漸走向成熟，但也不是一成不變的。教育改革的不斷發(fā)展，也倒逼母語(yǔ)寫(xiě)作評(píng)價(jià)的變革發(fā)展。教師評(píng)價(jià)發(fā)展，必然聯(lián)動(dòng)人工智能評(píng)價(jià)的再調(diào)整與再適用，以至兩種評(píng)價(jià)的再融合和再發(fā)展。到那時(shí)，評(píng)價(jià)就邁上了更高的臺(tái)階。