ChatGPT 在圖書編校中的應(yīng)用測(cè)試與分析

李真

ChatGPT（ Chat Generative Pre-trained Transformer）是由美國人工智能研究實(shí)驗(yàn)室OpenAI 開發(fā)的一種自然語言處理模型，它是基于GPT（generative pre-trained transformer）模型改進(jìn)而來的。GPT 是一種基于深度神經(jīng)網(wǎng)絡(luò)的語言模型，通過預(yù)訓(xùn)練和微調(diào)的方式，基于大量語言訓(xùn)練，能夠生成與輸入文本相關(guān)的連貫、流暢的文本。目前，ChatGPT 的應(yīng)用場(chǎng)景十分廣泛，包括客戶服務(wù)、內(nèi)容創(chuàng)作、教育輔助、語言學(xué)習(xí)、社交互動(dòng)等，引起了社會(huì)各界的廣泛關(guān)注和討論。

在出版領(lǐng)域，雖然大多數(shù)研究者認(rèn)為人工智能只是工具，并不能替代編輯工作，但也有極少數(shù)研究者認(rèn)為引入人工智能技術(shù)后的編輯工作將對(duì)從業(yè)人員提出更高要求，甚至引起相關(guān)崗位的功能遷移，導(dǎo)致出版業(yè)從業(yè)人員面臨減薪乃至失業(yè)的風(fēng)險(xiǎn)。[1]當(dāng)前，一些學(xué)者圍繞ChatGPT 在出版行業(yè)中應(yīng)用的可能性展開了分析。例如，李博等[2]認(rèn)為ChatGPT可以幫助編輯人員高效處理文本，識(shí)別文本存在的語法、拼寫、標(biāo)點(diǎn)符號(hào)等錯(cuò)誤，輔助修改和潤(rùn)色，進(jìn)而提高編輯和校對(duì)工作的效率。任宇等[3]認(rèn)為ChatGPT 在檢索、翻譯和寫作方面表現(xiàn)突出，能夠提高編輯工作效率。周青[4]認(rèn)為可將ChatGPT 應(yīng)用于糾正錯(cuò)別字、統(tǒng)一標(biāo)點(diǎn)符號(hào)、修改敏感詞語等校對(duì)工作，以節(jié)省時(shí)間、提高效率。關(guān)于ChatGPT 在編校工作中的適用范圍，張重毅等[5]指出大語言模型擅于發(fā)現(xiàn)文本、語言邏輯、語法等方面的錯(cuò)誤。崔玉潔[6]認(rèn)為ChatGPT 尤其適用于修改拼寫錯(cuò)誤和語法錯(cuò)誤。徐敬宏等[7]提出ChatGPT 可以識(shí)別并修改文字表達(dá)、語法、標(biāo)點(diǎn)符號(hào)等錯(cuò)誤，為編輯工作減負(fù)。陳帥等[8]認(rèn)為ChatGPT 可以對(duì)學(xué)術(shù)論文進(jìn)行文本編輯和校對(duì)潤(rùn)色，有效減輕編校人員的工作量。李侗侗等[9]認(rèn)為ChatGPT 可以幫助編輯“校正語法錯(cuò)誤、簡(jiǎn)化復(fù)雜的語言表述、使用規(guī)范的學(xué)術(shù)語言，進(jìn)而優(yōu)化文章的表述效果”。田在儒[10]認(rèn)為ChatGPT 等聊天機(jī)器人可以勝任重復(fù)性工作，如對(duì)文章進(jìn)行編輯加工、校對(duì)等，進(jìn)而節(jié)省編輯人員的時(shí)間和精力。

通過梳理文獻(xiàn)可以發(fā)現(xiàn)，研究者們普遍認(rèn)為ChatGPT 可以在語法檢查、文本糾錯(cuò)、標(biāo)點(diǎn)符號(hào)校正、知識(shí)核查和語言翻譯等方面有效幫助編校人員提高工作效率。由于當(dāng)前這類研究大多數(shù)是基于經(jīng)驗(yàn)的解析，缺乏實(shí)證數(shù)據(jù)的支持，為探討ChatGPT 在圖書編校中的實(shí)際應(yīng)用效果，本研究擬通過測(cè)試和分析ChatGPT 對(duì)語法類錯(cuò)誤、字詞類錯(cuò)誤、標(biāo)點(diǎn)符號(hào)類錯(cuò)誤和知識(shí)性錯(cuò)誤的編校處理情況，評(píng)估其對(duì)提高編校工作效率所能發(fā)揮的作用，為圖書編校人員迎接人工智能的挑戰(zhàn)提供參考。

一、研究方法

1.研究對(duì)象與文本來源

研究對(duì)象為美國人工智能研究實(shí)驗(yàn)室OpenAI 開發(fā)的ChatGPT 3.5 版。測(cè)試文本選自商務(wù)印書館2019 年出版的《圖書編校質(zhì)量差錯(cuò)案例》中的200 條編校差錯(cuò)典型案例及其修改后的正確文本，具體包括文字差錯(cuò)案例、詞語差錯(cuò)案例、科技名詞差錯(cuò)案例、語法差錯(cuò)案例、標(biāo)點(diǎn)符號(hào)差錯(cuò)案例、知識(shí)性差錯(cuò)案例等。將包含200 條編校差錯(cuò)典型案例的測(cè)試文本進(jìn)一步劃分為語法類差錯(cuò)案例、字詞類差錯(cuò)案例、標(biāo)點(diǎn)符號(hào)類差錯(cuò)案例和知識(shí)性差錯(cuò)案例4 類。每個(gè)類別包含50 條差錯(cuò)案例及其修改后的正確文本，涵蓋了圖書編校中最常見的問題，故研究樣本具有代表性。

2.測(cè)試方法

借助200 條典型差錯(cuò)案例文本信息進(jìn)行ChatGPT 編校能力測(cè)試。為了保證測(cè)試結(jié)果符合要求，在輸入語法類差錯(cuò)案例測(cè)試文本時(shí)添加任務(wù)命令性語句“請(qǐng)修改以下病句”；在輸入字詞類差錯(cuò)案例測(cè)試文本時(shí)添加任務(wù)命令性語句“請(qǐng)校對(duì)以下句子中的字詞”；在輸入標(biāo)點(diǎn)符號(hào)類差錯(cuò)案例測(cè)試文本時(shí)添加任務(wù)命令性語句“請(qǐng)校對(duì)以下句子中的標(biāo)點(diǎn)符號(hào)”；在輸入知識(shí)性差錯(cuò)案例測(cè)試文本時(shí)添加任務(wù)命令性語句“請(qǐng)核查并修改以下句子中的知識(shí)性錯(cuò)誤”。然后，將ChatGPT 輸出的文本與測(cè)試文本逐一對(duì)應(yīng)，形成200 組對(duì)照文本。通過比對(duì)使用ChatGPT 編校后的文本是否改正了典型差錯(cuò)案例中存在的問題，分析ChatGPT 在編校中的實(shí)際應(yīng)用效果。

二、研究結(jié)果

測(cè)試結(jié)果顯示，ChatGPT 在圖書編校中的應(yīng)用表現(xiàn)一般，整體上未能識(shí)別和修改錯(cuò)誤的比例較高。在對(duì)200 條差錯(cuò)案例文本的測(cè)試中，能正確識(shí)別錯(cuò)誤并準(zhǔn)確修改的數(shù)量為57 條，占比28.5%；未能識(shí)別錯(cuò)誤并進(jìn)行修改的數(shù)量為127 條，占比63.5%；能正確識(shí)別并修改錯(cuò)誤，但同時(shí)修改了原句中其他正確表達(dá)的數(shù)量為16 條，占比8.0%。ChatGPT在對(duì)語法類錯(cuò)誤、字詞類錯(cuò)誤、標(biāo)點(diǎn)符號(hào)類錯(cuò)誤和知識(shí)性錯(cuò)誤的編校處理上表現(xiàn)存在差異，具體情況如下。

1.ChatGPT 在對(duì)語法類錯(cuò)誤的編校處理上表現(xiàn)一般

在50 組語法類差錯(cuò)案例對(duì)照文本中，ChatGPT 自動(dòng)識(shí)別和準(zhǔn)確修改了14 條（28.0%）文本的語法錯(cuò)誤；未能準(zhǔn)確識(shí)別和修改的文本為31 條（62.0%）；在對(duì)5 條（10.0%）文本的語法錯(cuò)誤進(jìn)行識(shí)別和修改的同時(shí)，還修改了原句中其他正確的表達(dá)。例如，ChatGPT成功識(shí)別出“通過努力，我們的發(fā)行數(shù)量提高了一倍?！敝绣e(cuò)誤使用“提高”一詞，并將其改為“增加”；ChatGPT 沒有識(shí)別出“對(duì)于這種浪費(fèi)人才的現(xiàn)象，至今沒有引起有關(guān)部門的重視?！敝兄髡Z殘缺的語法錯(cuò)誤，未能將差錯(cuò)案例中“對(duì)于”二字刪除；ChatGPT 雖然識(shí)別出了“他多么渴望一個(gè)學(xué)習(xí)的機(jī)會(huì)！”中的謂語殘缺的語法錯(cuò)誤，將句子修改為“他非常渴望獲得一個(gè)學(xué)習(xí)的機(jī)會(huì)！”，但將沒有差錯(cuò)的“多么”同義替換為“非常”。

2.ChatGPT 在對(duì)字詞類錯(cuò)誤的編校處理上表現(xiàn)較好

在50 組字詞類差錯(cuò)案例對(duì)照文本中，ChatGPT 自動(dòng)識(shí)別和準(zhǔn)確修改了22 條（44.0%）文本的字詞錯(cuò)誤；未能準(zhǔn)確識(shí)別和修改的文本為22 條（44.0%）；在對(duì)6 條（12.0%）文本的字詞錯(cuò)誤進(jìn)行識(shí)別和修改的同時(shí)，還修改了原句中其他正確表達(dá)用詞。例如，ChatGPT成功識(shí)別出“他當(dāng)了二十多年的帳房?！敝械腻e(cuò)別字“帳”，并正確修改為“賬”；ChatGPT沒有識(shí)別出“張總最近很累，有點(diǎn)兒心率不齊。”中“率”字的錯(cuò)用，反而把“有點(diǎn)兒”改成了“有些”。

3.ChatGPT 在對(duì)標(biāo)點(diǎn)符號(hào)類錯(cuò)誤的編校處理上表現(xiàn)較差

在50 組標(biāo)點(diǎn)符號(hào)類差錯(cuò)案例對(duì)照文本中，ChatGPT 自動(dòng)識(shí)別和準(zhǔn)確修改了11 條（22.0%）文本的標(biāo)點(diǎn)符號(hào)錯(cuò)誤；未能準(zhǔn)確識(shí)別和修改的文本為39 條（78.0%）。例如，ChatGPT成功識(shí)別出了“人如果發(fā)熱（體溫超過37.5℃，）通常就會(huì)感覺不舒服?！敝卸禾?hào)位置錯(cuò)誤，將其改為“人如果發(fā)熱（體溫超過37.5℃），通常就會(huì)感覺不舒服?！?；ChatGPT認(rèn)為“《讀者雜志》深受讀者喜愛?！敝胁淮嬖跇?biāo)點(diǎn)符號(hào)錯(cuò)誤，說明其較難準(zhǔn)確判斷常識(shí)問題，沒有判斷出《讀者》是雜志的名稱；ChatGPT 不僅未能識(shí)別出“因此，正確答案為personal touch.”中句號(hào)使用錯(cuò)誤，還錯(cuò)誤地將英文詞組personal touch 加上了雙引號(hào)，不符合《中文出版物夾用英文的編輯規(guī)范》（CY/T 154—2017）中的規(guī)定。

4.ChatGPT 在知識(shí)核查上表現(xiàn)欠佳

在50 組知識(shí)性差錯(cuò)案例對(duì)照文本中，ChatGPT 自動(dòng)識(shí)別和準(zhǔn)確修改了10 條（20.0%）文本的知識(shí)性錯(cuò)誤；未能準(zhǔn)確識(shí)別和修改的文本為35 條（70.0%）；在對(duì)5 條（10.0%）文本的知識(shí)性錯(cuò)誤進(jìn)行識(shí)別和修改的同時(shí)，還修改了原句中其他正確的表達(dá)。例如，ChatGPT 正確識(shí)別出“公元220 年，曹丕稱帝，即魏文帝，國號(hào)黃初?！敝谢煜藝?hào)和年號(hào)，將“國號(hào)黃初”改為“國號(hào)曹魏”；ChatGPT 認(rèn)為“孟子曰：‘食色，性也。仁，內(nèi)也，非外也。義，外也，非內(nèi)也?！敝袥]有知識(shí)性錯(cuò)誤，但事實(shí)上這句話并非孟子所說，乃是出自告子之口；ChatGPT 雖然正確識(shí)別并修改了“預(yù)防矽肺病的關(guān)鍵是要改善生產(chǎn)環(huán)境，減少粉塵吸入。”中的知識(shí)性錯(cuò)誤，將“矽肺病”改為“硅肺病”，但是在修改過程中卻增加了“控制粉塵的生成和擴(kuò)散”這一原句沒有的內(nèi)容。

三、人工智能在圖書編校中應(yīng)用的討論

1.ChatGPT 目前在圖書編校上的實(shí)際應(yīng)用效果欠佳

ChatGPT 在差錯(cuò)案例文本的測(cè)試中表現(xiàn)出28.5% 的糾錯(cuò)率，說明其確實(shí)能夠在圖書編校上對(duì)編輯工作有所助益，特別是在錯(cuò)誤字詞的糾正上，糾錯(cuò)率可達(dá)44.0%。然而，由于使用上的各種限制，目前ChatGPT 在圖書編校中的應(yīng)用效果并不理想，存在較多局限。首先，ChatGPT 的使用權(quán)限尚未對(duì)我國開放，網(wǎng)絡(luò)獲取存在限制，不少編校人員僅聞其名，卻沒有真正接觸過，更別說是主動(dòng)將其應(yīng)用在圖書編校工作中。其次，ChatGPT 作為聊天機(jī)器人，其輸入和輸出的字符都有限制，不可能做到對(duì)整本書進(jìn)行編校，因此無法準(zhǔn)確認(rèn)識(shí)一本書的整體邏輯框架。即便是采用人機(jī)結(jié)合方式，編校人員手動(dòng)將存在問題的語句輸入ChatGPT 對(duì)話框內(nèi)以獲得結(jié)果，仍然發(fā)現(xiàn)其給出的結(jié)果良莠不齊，需要編校人員再次核實(shí)和修改，遠(yuǎn)遠(yuǎn)達(dá)不到提高工作效率的目的。而手工輸入對(duì)話框會(huì)使文本會(huì)失去原本的格式，導(dǎo)致無法對(duì)體例和格式進(jìn)行編校。最后，由于ChatGPT 是基于英語語料庫訓(xùn)練的模型，這意味著它能夠理解和處理英語的文本信息，生成符合英語語言的回復(fù)。雖然它可以嘗試?yán)斫夂吞幚碇形牡奈谋拘畔?，但是由于語言和文化的差異，其可靠性和準(zhǔn)確性相對(duì)較低，甚至可能產(chǎn)生一些錯(cuò)誤的回復(fù)。例如，在對(duì)標(biāo)點(diǎn)符號(hào)的編校上，ChatGPT作出的很多修改與中文標(biāo)點(diǎn)符號(hào)的使用規(guī)范有悖，說明ChatGPT 對(duì)中文使用的標(biāo)準(zhǔn)規(guī)范并沒有準(zhǔn)確掌握。而在對(duì)原文語句的潤(rùn)色修改上，ChatGPT 常常表現(xiàn)出不符合作者寫作風(fēng)格、用詞習(xí)慣的問題。在測(cè)試過程中發(fā)現(xiàn)，盡管已經(jīng)添加了明確的“校對(duì)字詞”指令，但ChatGPT 仍然會(huì)對(duì)文字加以潤(rùn)色修改，同義替換原句的字詞，甚至增加原文沒有的內(nèi)容。在圖書編校中，應(yīng)警惕過度改稿，堅(jiān)持“可改可不改的不改”。使用ChatGPT 輔助編校，編輯人員還需要核對(duì)原稿，將經(jīng)潤(rùn)色修改但沒有實(shí)質(zhì)錯(cuò)誤的內(nèi)容還原，徒增了工作負(fù)擔(dān)。

2.人工智能在圖書編校上的應(yīng)用未來可期

雖然，ChatGPT 目前在圖書編校上的應(yīng)用表現(xiàn)欠佳，但人工智能的發(fā)展日新月異，可以期待經(jīng)過多次升級(jí)換代、擴(kuò)展應(yīng)用場(chǎng)景，ChatGPT 將能成為圖書編校工作的有力輔助工具。

我國應(yīng)加快研發(fā)基于中文語料的智能編校工具并不斷擴(kuò)展其應(yīng)用場(chǎng)景。圖書編輯日常需要處理大量的知識(shí)核查工作，包括核查引文、注釋、參考文獻(xiàn)、專業(yè)性名詞等。相信憑借人工智能強(qiáng)大的學(xué)習(xí)能力以及龐大的學(xué)習(xí)語料數(shù)據(jù)庫，基于中文語料的智能工具可以更好地幫助解決編校中的難題，助力中文圖書編校提質(zhì)增效。目前，圖書編校人員在工作中較常使用的智能審校系統(tǒng)（如方正智能輔助審校系統(tǒng)）可以審校整本圖書，提供包括字詞檢查、知識(shí)性檢查、重點(diǎn)內(nèi)容檢查和體例格式檢查等功能。倘若ChatGPT 等人工智能工具在性能上能結(jié)合這類審校系統(tǒng)的優(yōu)勢(shì)，則其功能會(huì)更為強(qiáng)大，真正助力圖書編校工作，提升工作效率。

3.編校人員要主動(dòng)擁抱技術(shù)迎接挑戰(zhàn)

和眾多研究者一樣，本研究也認(rèn)同ChatGPT 等人工智能工具不會(huì)取代人工編輯，但確實(shí)會(huì)給編校人員帶來新的挑戰(zhàn)。作為圖書編校人員，需要主動(dòng)擁抱技術(shù)、迎接挑戰(zhàn)。通過對(duì)ChatGPT 編校能力的測(cè)試結(jié)果不難看出ChatGPT 在理解文化內(nèi)涵上存在困難，這正是人工編輯難以被取代之處，也是編校人員所擅長(zhǎng)和應(yīng)該繼續(xù)精進(jìn)的技能。圖書編校人員需要通過不斷提升專業(yè)技能、職業(yè)素養(yǎng)和工作能力，以適應(yīng)新挑戰(zhàn)和新要求，不能埋頭于案頭工作不顧世界的變化，要接觸新領(lǐng)域、了解新技術(shù)、掌握新技能，主動(dòng)擁抱技術(shù)使其為我所用，借助ChatGPT 等人工智能工具處理繁雜的事務(wù)性工作，從而集中精力打造精品圖書。

四、結(jié)語

作為一種新興的人工智能技術(shù)，ChatGPT強(qiáng)大的功能已經(jīng)引起社會(huì)各界的廣泛關(guān)注，其應(yīng)用領(lǐng)域也在不斷拓展。在圖書編校上，ChatGPT 確實(shí)可以輔助糾正語法、字詞、標(biāo)點(diǎn)符號(hào)和部分知識(shí)性錯(cuò)誤，但目前其應(yīng)用表現(xiàn)一般。ChatGPT 應(yīng)用于圖書編校上存在局限，具體包括：使用受限；不能整本編校；編校質(zhì)量良莠不齊且無法識(shí)別體例和格式問題；限于語言和文化的差異，可靠性和準(zhǔn)確性低；潤(rùn)色修改過度。鑒于此，人工編輯的重要性不言而喻。圖書編校人員應(yīng)不斷提升自身的文化素養(yǎng)和專業(yè)能力，更好地利用不斷優(yōu)化升級(jí)的人工智能工具輔助圖書編校，以提高圖書編校質(zhì)量和效率。