• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    多特征融合的電氣領(lǐng)域主觀題自動評分方法

    2022-04-12 00:00:00王金水郭偉陳俊巖唐鄭熠

    摘 要:智慧教育運用人工智能等技術(shù)來實現(xiàn)教育的智能化,將智慧教育應(yīng)用到電氣類高校教學(xué)、注冊電氣工程師考試和電網(wǎng)員工入職培訓(xùn)等領(lǐng)域,有助于學(xué)生和工作人員快速掌握電氣專業(yè)知識。基于電氣領(lǐng)域本體和自然語言處理技術(shù),探索了電氣領(lǐng)域主觀題自動評分方法。針對通用詞語相似度計算存在的不足,設(shè)計了一種融合《同義詞詞林》和《知網(wǎng)》的詞語相似度方法,并結(jié)合文本的表層結(jié)構(gòu)信息以及語義信息,提出了一種結(jié)合句子的詞序、詞形和搭配詞對三種特征的電氣領(lǐng)域主觀題自動評分方法。試驗表明,該方法能夠有效解決傳統(tǒng)評分算法對專業(yè)術(shù)語的識別不全面和未考慮文本中句子的語義關(guān)系等問題,有效地提升了評分結(jié)果的準(zhǔn)確度。

    關(guān)鍵詞:電氣領(lǐng)域;主觀題自動評分;領(lǐng)域本體;相似度計算

    中圖分類號:TP314

    文獻標(biāo)志碼:A

    隨著計算機、大數(shù)據(jù)以及人工智能等技術(shù)的興起,智慧教育運用現(xiàn)代信息技術(shù)來實現(xiàn)教育的信息化和智能化。自動評分作為智慧教育的一項重要環(huán)節(jié),不僅可以減少教師在閱卷過程中的工作負(fù)擔(dān),而且能夠避免因個人主觀因素導(dǎo)致的評分偏差的問題。在電氣工程領(lǐng)域中,智慧教育被應(yīng)用到高校教學(xué)、注冊電氣工程師考試和電網(wǎng)員工入職培訓(xùn)等環(huán)節(jié),有助于學(xué)員完善電氣領(lǐng)域的知識體系。自動評分作為智慧教育的一項重要環(huán)節(jié),不僅可以減少教師在閱卷過程中的工作負(fù)擔(dān),而且能夠避免因個人主觀因素導(dǎo)致的評分偏差的問題。

    現(xiàn)階段,客觀題自動評分算法已經(jīng)非常成熟,并廣泛運用于各類在線考試系統(tǒng)。另一方面,關(guān)于作文和短文本等領(lǐng)域無關(guān)的主觀題自動評分的研究也取得很多成果[1-6]。鉉靜等[7]基于卷積神經(jīng)網(wǎng)絡(luò)的方法,使用全維度和單維度的卷積核進行卷積,得到詞語之間長距離依賴信息。李寒[8]提出了基于深度學(xué)習(xí)的中文句子相似度計算方法,使用大量未標(biāo)注數(shù)據(jù)進行訓(xùn)練模型參數(shù),該模型在自動評分中具有更好的性能。胡艷霞等[9]在依存關(guān)系樹的基礎(chǔ)上使用深度學(xué)習(xí)的方法,采用多頭注意力機制Tree-LSTM的神經(jīng)網(wǎng)絡(luò)實現(xiàn)句子相似度的計算。彭琦等[10]針對詞語間信息內(nèi)容的差異性的問題,為實現(xiàn)詞語信息內(nèi)容的相似度計算方法,提出了一種相似度計算策略應(yīng)用于改進的《同義詞詞林》。但是,將作文或短文本自動評分算法直接應(yīng)用在特定領(lǐng)域主觀題評分的效果并不好[11]。評分算法無法準(zhǔn)確地理解電氣領(lǐng)域的專業(yè)術(shù)語,且缺乏對領(lǐng)域知識的理解,容易導(dǎo)致語義分析出現(xiàn)較大誤差,進而影響評分結(jié)果的準(zhǔn)確度。

    本文以電氣工程學(xué)科為背景,從本校電氣工程研究生的專業(yè)課程中選取部分課程涉及的專業(yè)術(shù)語,以此為基礎(chǔ)構(gòu)建電氣領(lǐng)域本體,并提出了一種多特征融合的電氣領(lǐng)域主觀題自動評分方法。該方法借助語義詞典以及電氣工程領(lǐng)域本體,分別完成對通用詞語和專業(yè)術(shù)語的相似度計算,此后,方法通過加權(quán)融合句子的詞形相似度、詞性相似度和搭配詞對相似度的特征,計算電氣領(lǐng)域主觀題的評分。

    1 電氣領(lǐng)域本體構(gòu)建

    領(lǐng)域本體作為專業(yè)性本體,具有非常強的領(lǐng)域區(qū)分性。通過構(gòu)建電氣領(lǐng)域本體,能夠更準(zhǔn)確地獲取電氣領(lǐng)域的專業(yè)術(shù)語、數(shù)據(jù)屬性以及術(shù)語間的關(guān)系,進而有助于完成領(lǐng)域概念查找以及專業(yè)術(shù)語的相似度計算等任務(wù)[12]。將電氣領(lǐng)域本體作為主觀題自動評分的知識庫,能夠提高對電氣領(lǐng)域?qū)I(yè)術(shù)語的識別能力和語義理解能力[13]。電氣領(lǐng)域本體構(gòu)建的具體步驟圖1所示。

    在構(gòu)建領(lǐng)域本體之前,需要結(jié)合本體的使用對象、應(yīng)用目的和作用等因素,確定構(gòu)建的本體所涉及到專業(yè)領(lǐng)域和范疇。由于電氣領(lǐng)域包含的課程較多,因此本文從本校電氣工程研究生的專業(yè)課程中的課程體系中選取了《電力系統(tǒng)概述》、《電機與電力拖動》、《電力工程基礎(chǔ)》、《發(fā)電廠電氣部分》等核心課程,從中盡可能多地列出課程涉及的概念、專業(yè)術(shù)語、以及概念詳細(xì)的定義等知識。所構(gòu)建本體所涉及部分概念和術(shù)語如表1所示。

    完成電氣領(lǐng)域的關(guān)鍵知識和術(shù)語的獲取后,需要確定本體中概念、屬性以及彼此之間的關(guān)系。其中,關(guān)系類型的確定是構(gòu)建本體過程中最關(guān)鍵的一個環(huán)節(jié)。由于電氣領(lǐng)域?qū)I(yè)術(shù)語的同一概念存在多種表述,并且概念之間存在上下位關(guān)系、部分與整體的關(guān)系,導(dǎo)致相關(guān)知識在通用詞典中難以體現(xiàn)。因此,本文構(gòu)建的本體關(guān)系類型涵蓋了同義關(guān)系、繼承關(guān)系、組成關(guān)系,以盡可能完整地涵蓋相關(guān)領(lǐng)域知識。

    2 電氣領(lǐng)域主觀題自動評分方法

    如圖2所示,多特征融合的電氣領(lǐng)域主觀題自動評分模型在獲得學(xué)生答案文本和參考答案文本之后,通過文本分詞、詞義擴充、停用詞過濾、句法分析等技術(shù)對文本進行預(yù)處理。基于電氣領(lǐng)域本體、語義詞典,分別計算專業(yè)術(shù)語和通用詞語相似度,并結(jié)合三個特征的加權(quán)計算結(jié)果,得到學(xué)生答案文本的相似度。最后進行分?jǐn)?shù)轉(zhuǎn)換,得到學(xué)生答案的最終得分。

    2.1 詞語相似度計算

    根據(jù)文本中詞語的所屬類別(通用詞語或?qū)I(yè)術(shù)語),多特征融合的電氣領(lǐng)域主觀題自動評分方法采用以下三種方法計算詞語的相似度:1)若詞語兩個詞語都屬于通用詞語,采用融合《知網(wǎng)》和《同義詞詞林》的通用詞語相似度計算方法;2)若兩個詞語都屬于專業(yè)術(shù)語,采用基于電氣領(lǐng)域本體的專業(yè)術(shù)語相似度計算方法;3)若其中一個詞語是通用詞語,另一個詞語是專業(yè)術(shù)語。則設(shè)定兩個詞語的相似度為0。

    2.1.1 基于《知網(wǎng)》的詞語相似度計算

    與傳統(tǒng)的語義詞典不同,《知網(wǎng)》通過一系列的義原來描述義項,義項是對詞匯的進一步解釋。影響義原相似度計算的因素主要有節(jié)點密度、節(jié)點深度和義原距離等。用y1和y2表示兩個義原,根據(jù)劉群等[14]提出的義原相似度轉(zhuǎn)換成計算義原距離,y1和y2的相似度計算如下:

    S(y1,y2)=λD(y1,y2)+λ(1)

    式中,D(y1,y2)代表y1和y2的語義距離,即y1和y2在義原樹的路徑長度;λ為可調(diào)參數(shù)。詞語的不同語義是通過多個義項進行描述,根據(jù)劉群等對義項的研究[14], 將義項分為四個部分,分別為第一基本義原描述、其他基本義原描述、關(guān)系義原描述,以及符號義原描述。y1和y2在這四個部分的相似度分別記為S1(y1,y2)、S2(y1,y2)、S3(y1,y2)和S4(y1,y2)。

    將Y1和Y2表示為兩個義項,則他們的相似度分別由Y1和Y2在四個語義表達式的相似度組合而成,即義項語義相似度計算公式如下:

    S(Y1,Y2)=∑4i=1ρiΠSj(Y1,Y2)(2)

    式中,ρi為可調(diào)參數(shù),ρ1+ρ2+ρ3+ρ4=1。由于部分詞語會包含多個義項,因此應(yīng)取最大義項相似度作為詞語C1和C2最終的語義相似度,計算如下:

    Sz(C1,C2)=MAXi=1…mj=1…n(S(Y1i,Y1j))(3)

    2.1.2 基于《同義詞詞林》的詞語相似度計算

    結(jié)合電氣領(lǐng)域自動評分的特點,基于《同義詞詞林》的詞語相似度算法考慮的主要因素是詞語的語義距離,次要因素分別是分支節(jié)點總數(shù)n和分支間距k。按照底層到高層的結(jié)構(gòu)順序,根據(jù)朱新華等[15]提供的試驗參數(shù)設(shè)計,本文對連接上下兩層的有向邊語義距離給予不同權(quán)重,分別設(shè)置為W1=2.5;W2=1;W3=2.5;W4=0.5。詞語C1和詞語C2的語義距離計算如式(4)所示。

    D(C1,C2)=2×∑d≤i≤4Wi(4)

    節(jié)點總數(shù)n和分支間距k屬于詞語相似度計算的次要因素,作用是對語義距離進行修正,并且該修正只能微調(diào),因此將這兩個調(diào)節(jié)參數(shù)加入詞語相似度計算中,從而降低計算公式對參數(shù)n和k的敏感度,以此避免修正幅度過大。由此得到基于《同義詞詞林》的相似度計算如下:

    Sc(C1,C2)=(1.05-0.05×D(C1,C2))e-k2n(5)

    2.1.3 通用詞語相似度計算

    通過分析2.1.1和2.1.2小節(jié)中兩種詞語相似度計算方法,可以發(fā)現(xiàn)各自計算規(guī)則是不一致的??紤]到兩個語義詞典的知識體系是不一致的,其性質(zhì)和結(jié)構(gòu)具有較大的差別,因此有必要設(shè)計一種融合不同語義詞典的通用詞語相似度算法以彌補單一方法的不足,從而提高詞語相似度計算結(jié)果的準(zhǔn)確性。該算法根據(jù)詞語在《知網(wǎng)》或《同義詞詞林》的收錄情況計算兩個詞語的相似度,算法過程描述如下。

    算法1 融合《知網(wǎng)》和《同義詞詞林》的通用詞語相似度算法

    輸入:詞語C1和C2

    輸出:C1和C2的相似度S(C1,C2)

    1 if(C1∈Z and C2∈Z-T)

    2" S(C1,C2)=MAXi=1…mj=1…n(S(Y1i,Y1j))

    3 else if(C1∈T and C2∈T-Z)

    4" S(C1,C2)=(1.05-0.05×D(C1,C2))e-k2n

    5 else if(C1∈Z-T and C2∈T-Z)

    6 {

    7" G=getSig(C2)" //查找C2的同義詞集合

    8" M=NULL

    9" Foreach w in G:

    10"" S(C1,w)=MAXi=1…mj=1…n(S(Y1i,Y1j))

    11" "M.append(S(C1,w))

    12nbsp; S(C1,C2)=max(M)" //取M集合中最大值

    13 }

    14 else if(C1∈Z∩T and C2∈T∩Z)

    15" S(C1,C2)=

    MAXi=1…mj=1…n(S(Y1i,Y1j))+(1.05-0.05×D(C1,C2))e-k2n2

    16 else

    17" S(C1,C2)=0

    18 return S(C1,C2)

    2.1.4 專業(yè)術(shù)語相似度計算

    專業(yè)詞語相似度計算通過引入電氣領(lǐng)域本體作為知識庫,對該領(lǐng)域的專業(yè)術(shù)語進行相似度計算。其中專業(yè)術(shù)語的語義相似度是由節(jié)點距離相似度和節(jié)點信息相似度構(gòu)成。在電氣領(lǐng)域本體中,各個節(jié)點間的有向邊代表的作用是不一致的,對于電氣領(lǐng)域本體中任意兩個節(jié)點h和t的節(jié)點距離相似度計算如下:

    sd(h,t)=1-d(h,t)2×dmax(6)

    式中,d(h, t)表示節(jié)點h和t之間的語義距離;dmax是電氣領(lǐng)域本體中節(jié)點的最大深度。

    節(jié)點信息相似度通過最低公共祖先進行表示,當(dāng)概念間共享的信息量越多,則說明概念的相似度越高。當(dāng)上層節(jié)點細(xì)化到下層的多個節(jié)點時,下層節(jié)點得到了父節(jié)點的信息,因此可以說相同的公共祖先是下層節(jié)點間共享信息的表現(xiàn)之一。任意兩個節(jié)點h和t的節(jié)點信息相似度計算如下:

    si(h,t)=1-2×I(c(h,t))I(h)+I(t)(7)

    式中,I(c(h,t)),I(h),I(t)分別是最低公共祖先節(jié)點、h節(jié)點、t節(jié)點的信息量。

    綜合考慮以上兩個因素,得到專業(yè)詞語的相似度計算如下:

    sonto(h,t)=λsd(h,t)+ηsi(h,t)(8)

    式中,λ、η表示調(diào)節(jié)因子權(quán)重。

    2.2 句子相似度計算

    2.2.1 句子的詞序相似度計算

    詞序相似度反映的是參考答案文本A1和學(xué)生答案文本A2之間詞語的相對位置關(guān)系,根據(jù)詞語的順序來衡量句子的相似度。本文用m表示文本A1和文本A2中同時出現(xiàn)且僅出現(xiàn)一次的詞語集合大小。詞序相似度的計算方法如下:

    so(S1,S2)=1-C(A1,A2)s-1,sgt;1

    1,s=1

    0,s=0 (9)

    式中,C(A1,A2)表示文本A1和文本A2的逆序數(shù)。

    2.2.2 句子的詞形相似度計算

    詞形的相似度反映的是參考答案文本A1和學(xué)生答案文本A2中所包含的詞語在形態(tài)層次上的語義相似度。當(dāng)兩個詞語相似度大于指定閾值時,記為相似詞。結(jié)合公式,詞形相似度計算方法如下:

    Swf(S1,S2)=2×W(A1,A2)L(S1)+L(S2)(10)

    式中,W(A1,A2)表示文本A1和文本A2中相似詞的個數(shù);L(A1)和L(A2)分別表示文本A1和文本A2的詞語總數(shù)。

    2.2.3 句子的搭配詞對相似度計算

    搭配詞對相似度是從中心詞的相似度、依存詞的相似度和詞語間關(guān)系類型三個維度來量化句子相似度。搭配詞對可用采用三元組lt;中心詞,關(guān)系類型,依存詞gt;進行表示。搭配詞對雖然丟失了詞語之間的順序關(guān)系,但可以呈現(xiàn)詞語之間的內(nèi)在邏輯關(guān)系和深層語義關(guān)系。

    通過提取文本的搭配詞對,并對搭配詞對進行簡化。首先,運用詞語相似度計算方法對搭配詞對中的詞語進行詞語相似度計算,進一步獲得搭配詞對的相似度矩陣;其次,遍歷矩陣并取出每行中數(shù)值最大的元素;最后,得到搭配詞對的相似度。其中,遍歷的元素集合和搭配詞對相似度計算方法分別如下:

    Nmax(A1,A2)={Amax1,Amax2,…,Amaxp}(11)

    sN(A1,A2)=∑1≤n≤i Amaxp

    p,p≥1

    0,p=0(12)

    式中,p表示Nmax(A1,A2)的容量。

    考慮到矩陣的不對稱性,需要進一步計算文本A1和文本A2的搭配詞對相似度。通過對調(diào)文本A1和文本A2的位置,可以得到文本A2和文本A1的搭配詞對相似度SN(A2,A1)。最終搭配詞對相似度的計算方法如下:

    SN(A1,A2)=SN(A1,A2)+SN(A2,A1)2(13)

    綜合考慮句子的詞序、詞形和搭配詞對相似度,采用三個特征全面描述一個答案文本,以此衡量學(xué)生答案文本和參考答案文本的相似程度,可以得到電氣領(lǐng)域主觀題自動評分計算方法如下:

    S(A1,A2)=αSo(A1,A2)+βSw(A1,A2)+γSN(A1,A2)(14)

    式中,α、β、γ是可調(diào)參數(shù),分別代表詞序相似度、詞形相似度和搭配詞對相似度的權(quán)重值。

    3 試驗分析

    3.1 試驗數(shù)據(jù)和評價指標(biāo)

    為了驗證本文提出的主觀題自動評分算法模型的有效性,本文試驗引入TF-IDF句子相似度算法的主觀題自動評分方法(方法A)、基于語義樹的短文本相似度算法的主觀題自動評分方法(方法B)[16]作為對照試驗,分別對試驗數(shù)據(jù)進行自動評分,統(tǒng)計三種算法模型的評分結(jié)果。試驗使用的主觀題數(shù)據(jù)來自于《電力系統(tǒng)分析》、《電機及拖動基礎(chǔ)》和《發(fā)電廠電氣部分》三門課程的課后習(xí)題。在此之后,我們邀請10個來自本校電氣工程專業(yè)的研二學(xué)生進行答題,并收集其提交的答題結(jié)果。我們?yōu)樗兄饔^題都提供一份參考答案,并邀請了三位具有相關(guān)專業(yè)助教背景的研究生對答題結(jié)果進行評分。最終,我們將三位研究生評分結(jié)果的平均值作為基準(zhǔn)評分標(biāo)準(zhǔn),并通過對比不同評分算法對學(xué)生答案的評分結(jié)果與手工評分結(jié)果的差異來分析不同評分算法的優(yōu)劣。

    本文通過選取均方誤差(mean square error,MSE)、平均絕對誤差(mean absolute error,MAE)、均方根誤差(root mean square error,RMSE)、對稱平均絕對百分比誤差(symmetric mean absolute percentage error,SMAPE)四個評價指標(biāo),進一步客觀評價本文方法對于主觀題自動評分的效果。

    3.2 結(jié)果分析

    本文方法模型、TF-IDF評分模型、基于語義樹的評分模型和人工對每道題目的評分結(jié)果如圖3所示。

    從以上結(jié)果可以看出,本文方法得到的評分結(jié)果比TF-IDF算法和基于語義依存樹的算法得到的評分結(jié)果更加貼近人工評分結(jié)果,同時波動較小。這主要是由于本文方法在相似度計算過程中考慮了詞序、詞形和搭配詞對三種特征相似度,并應(yīng)用融合語義詞典的算法提高了通用詞語的相似度的計算結(jié)果。同時主觀題相似度計算過程中會涉及到電氣領(lǐng)域的專業(yè)術(shù)語,通過引入電氣領(lǐng)域本體,解決了分詞結(jié)果不全面導(dǎo)致計算結(jié)果存在誤差的問題。對于含有專業(yè)術(shù)語較多的答案文本,例如題目1、題目3和題目10,本文算法模型構(gòu)建的領(lǐng)域本體和搭配詞對相似度算法,能夠準(zhǔn)確識別專業(yè)術(shù)語,并且較為準(zhǔn)確地計算專業(yè)術(shù)語的相似度。但是,對于題目7和題目9,由于這兩道題涉及的電氣領(lǐng)域?qū)I(yè)術(shù)語較少,本文算法引入的電氣領(lǐng)域本體并沒有較大的影響,與語義依存算法的評分結(jié)果差異較小。

    為了進一步明確不同算法之間的差異,通過MSE、MAE、RMSE以及SMAPE四個評價指標(biāo)對評分結(jié)果的質(zhì)量進行評估,其結(jié)果如表2所示。

    在電氣領(lǐng)域的主觀題自動評分中,由表2可以看出,本文算法模型能夠在MSE、MAE、RMSE和SMAPE都取得最小值。由于三種自動評分方法考慮的特征不一致,導(dǎo)致評分結(jié)果有所偏差。TF-IDF評分方法主要考慮的是文本中單詞詞頻,沒有考慮句子成分間的語義結(jié)構(gòu),因此在句子的語義相似度計算方面具有一定的不足。基于語義樹的評分方法是從句法的結(jié)構(gòu)信息出發(fā),對于句子的理解較為充分,但是只保留了兩層的語義樹,從而丟失了深層的語義結(jié)構(gòu)信息,導(dǎo)致自動評分結(jié)果不佳。本文方法綜合考慮詞語的語義結(jié)構(gòu),句子深層的句法結(jié)構(gòu),引入領(lǐng)域本體提高了專業(yè)術(shù)語相似度計算結(jié)果的準(zhǔn)確率。試驗結(jié)果表明,本文算法的評分結(jié)果與人工的評分結(jié)果的擬合度更高,同時相對于基于語義樹的評分方法和TF-IDF評分方法,整體的評分效果具有較為明顯的優(yōu)勢。

    4 結(jié)語

    本文提出了一種多特征融合的電氣領(lǐng)域主觀題自動評分方法,該方法引入了電氣領(lǐng)域本體,提高了對電氣領(lǐng)域?qū)I(yè)術(shù)語的語義理解,有效地解決了對專業(yè)術(shù)語分詞不準(zhǔn)確的問題。同時在文本相似度計算中綜合考慮了詞形、詞序以及搭配詞對相似度三個特征,解決了語義關(guān)系考慮不全面等問題,進一步提高了主觀題自動評分的準(zhǔn)確度。

    由于學(xué)生答案文本具有多樣性,如果可以構(gòu)建更大的參考答案集合,能夠增強學(xué)生答案的覆蓋范圍。目前深度學(xué)習(xí)和神經(jīng)網(wǎng)絡(luò)廣泛應(yīng)用于中文信息處理領(lǐng)域,后續(xù)可以對基于深度學(xué)習(xí)的神經(jīng)網(wǎng)絡(luò)模型進行研究,并且引入神經(jīng)網(wǎng)絡(luò)模型進行主觀題自動評分方法中,從而提高句子相似度的計算精度以及評分方法的自適應(yīng)能力。

    參考文獻:

    [1]譚紅葉, 午澤鵬, 盧宇,等. 基于代表性答案選擇與注意力機制的短答案自動評分[J]. 中文信息學(xué)報, 2019,33(11):134-142.

    [2] 鐘啟東, 張景祥. 嵌入語言深度感知的漢語作文評分算法[J]. 計算機工程與應(yīng)用, 2020, 56(8):124-129.

    [3] LIU W, LIAO C C, CHANG W C, et al. Automatic classification with SVM and F-VSM on elementary chinese composition[J]. International Journal of Information and Education Technology, 2018,8(5):327-331.

    [4] LV X. A study on the application of automatic scoring and feedback system in college English writing[J]. International Journal of Emerging Technologies in Learning, 2018,13(3):188-196.

    [5] BIN Y, MANDAL D. English teaching practice based on artificial intelligence technology[J]. Journal of Intelligent amp; Fuzzy Systems, 2019,37(3):3381-3391.

    [6] CHAO X W, WEI D Z. Problems and countermeasures of sustainable development of digital transformation in China in the post-epidemic era[J]. Information and Communications Technology and Policy, 2020,46(10):59-62.

    [7] 鉉靜,吳瓊,魏從悅,等.基于句法依存卷積神經(jīng)網(wǎng)絡(luò)的句子相似度計算[J].重慶大學(xué)學(xué)報,2020,43(9):41-53.

    [8] 李寒. 基于深度學(xué)習(xí)的中文句子相似度計算研究[D].成都:電子科技大學(xué),2019.

    [9] 胡艷霞, 王成, 李弼程, 等. 基于多頭注意力機制 Tree-LSTM 的句子語義相似度計算[J]. 中文信息學(xué)報, 2020,34(3):23-33.

    [10]彭琦, 朱新華, 陳意山, 等. 基于信息內(nèi)容的詞林詞語相似度計算[J]. 計算機應(yīng)用研究, 2018,35(2):400-404.

    [11]劉俊宏. 基于本體和句法結(jié)構(gòu)分析的軌道交通信號領(lǐng)域主觀題自動閱卷系統(tǒng)的研究[D]. 北京:北京交通大學(xué), 2019.

    [12]何婷婷, 張小鵬. 特定領(lǐng)域本體自動構(gòu)造方法[J]. 計算機工程, 2007, 33(22):235-237.

    [13]王金水,郭偉文,唐鄭熠. 基于領(lǐng)域本體和依存句法分析的主觀題自動評分方法[J]. 貴州大學(xué)學(xué)報(自然科學(xué)版), 2020, 37(6):84-89,129.

    [14]劉群, 李素建. 基于《知網(wǎng)》的詞匯語義相似度計算[J]. 中文計算語言學(xué), 2002,7(2):59-76.

    [15]朱新華, 馬潤聰, 孫柳, 等. 基于知網(wǎng)與詞林的詞語語義相似度計算[J]. 中文信息學(xué)報, 2016,30(4): 29-36.

    [16]郭炳元. 基于語義樹的短文本相似度算法研究與應(yīng)用[D]. 湘潭:湘潭大學(xué), 2019.

    (責(zé)任編輯:于慧梅)

    Automatic Scoring Method of Subjective Questions in

    Electrical Field Based on Multi-Feature Fusion

    WANG Jinshui1,2, GUO Weiwen1,2, CHEN Junyan1,2,TANG Zhengyi*1,2

    (1.College of Computer Science and Mathematics, Fujian University of Technology, Fuzhou 350118, China;

    2.Fujian Provincial Key Laboratory of Big Data Mining and Applications, Fujian University of Technology, Fuzhou 350118,China)

    Abstract:

    Smart Education employs artificial intelligence and other technologies to realize the intelligence of education, and applies smart education to the fields of teaching in electrical colleges and universities, registered electrical engineer examinations and power grid staff induction training, which helps students and staff to quickly master electrical expertise. Based on electrical domain ontology and natural language processing technology, an automatic scoring method for subjective questions in electrical domain was explored. In view of the shortcomings of generic word similarity calculation, a word similarity method integrating synonym word forest and knowledge network was designed, and an automatic scoring method combining three features of word order, word form and collocated word pairs in electrical domain was proposed by combining the superficial structure information and semantic information of the text. The experimental results show that the proposed method can effectively solve the problems of incomplete recognition of specialized terms and failure to consider the semantic relationship of sentences in the text by the traditional scoring algorithm, and effectively improve the accuracy of scoring results.

    Key words:

    electrical field; automatic scoring of subjective questions; domain ontology; similarity calculation

    中国三级夫妇交换| 波野结衣二区三区在线| 亚洲国产欧美日韩在线播放| 黑人欧美特级aaaaaa片| av在线观看视频网站免费| 女性生殖器流出的白浆| 一级爰片在线观看| 亚洲精品国产av成人精品| 伦理电影免费视频| 最新的欧美精品一区二区| 亚洲人成网站在线观看播放| 国产日韩欧美视频二区| 好男人视频免费观看在线| 久久久久视频综合| 交换朋友夫妻互换小说| 一区福利在线观看| 美女视频免费永久观看网站| 亚洲欧美一区二区三区久久| 中文精品一卡2卡3卡4更新| 日韩大码丰满熟妇| 亚洲,一卡二卡三卡| 国产探花极品一区二区| 久久精品国产a三级三级三级| 超碰成人久久| 男人爽女人下面视频在线观看| 一级毛片电影观看| 国产一区二区三区av在线| 91精品三级在线观看| 久久久久久久国产电影| 女人爽到高潮嗷嗷叫在线视频| 国产男人的电影天堂91| 亚洲精品久久久久久婷婷小说| 欧美激情极品国产一区二区三区| 91成人精品电影| 最近2019中文字幕mv第一页| 国产av国产精品国产| 成人国语在线视频| 久久天躁狠狠躁夜夜2o2o | 精品国产超薄肉色丝袜足j| 热re99久久国产66热| 中文精品一卡2卡3卡4更新| 国产精品偷伦视频观看了| 欧美精品一区二区免费开放| av线在线观看网站| av女优亚洲男人天堂| 精品久久久精品久久久| 爱豆传媒免费全集在线观看| 一级片免费观看大全| 宅男免费午夜| 人人妻,人人澡人人爽秒播 | 国产精品无大码| 女性生殖器流出的白浆| 国产av一区二区精品久久| 亚洲视频免费观看视频| 久久久精品免费免费高清| 久久久久久人人人人人| 国产精品久久久久成人av| 青春草亚洲视频在线观看| 波多野结衣一区麻豆| 黄色视频不卡| 日本91视频免费播放| 亚洲七黄色美女视频| 国产一区有黄有色的免费视频| 久久精品亚洲熟妇少妇任你| 久久久久国产一级毛片高清牌| 国产福利在线免费观看视频| 国产淫语在线视频| 韩国av在线不卡| 校园人妻丝袜中文字幕| 亚洲欧美成人综合另类久久久| 亚洲av国产av综合av卡| 纵有疾风起免费观看全集完整版| 18禁国产床啪视频网站| 飞空精品影院首页| 搡老岳熟女国产| 母亲3免费完整高清在线观看| 欧美变态另类bdsm刘玥| 久久精品久久久久久久性| 在现免费观看毛片| 在线观看国产h片| 最黄视频免费看| 国产精品无大码| 免费观看av网站的网址| 欧美黄色片欧美黄色片| 国产日韩欧美亚洲二区| av女优亚洲男人天堂| 国产人伦9x9x在线观看| 黄片无遮挡物在线观看| 肉色欧美久久久久久久蜜桃| 欧美人与善性xxx| 久久狼人影院| 亚洲精品中文字幕在线视频| av在线播放精品| 两个人看的免费小视频| 可以免费在线观看a视频的电影网站 | 热99久久久久精品小说推荐| 日韩制服丝袜自拍偷拍| 一级a爱视频在线免费观看| 老司机亚洲免费影院| 国产男人的电影天堂91| 精品国产一区二区三区久久久樱花| h视频一区二区三区| 国产成人欧美| 国产亚洲av高清不卡| 色婷婷久久久亚洲欧美| 国产1区2区3区精品| 日本爱情动作片www.在线观看| 国产男人的电影天堂91| 可以免费在线观看a视频的电影网站 | 波多野结衣av一区二区av| 美女大奶头黄色视频| 国产成人精品在线电影| 精品少妇黑人巨大在线播放| 欧美变态另类bdsm刘玥| 日韩视频在线欧美| 国产日韩欧美亚洲二区| 男人舔女人的私密视频| 丰满饥渴人妻一区二区三| 久热爱精品视频在线9| 国产在视频线精品| 国产1区2区3区精品| 精品一区二区三区av网在线观看 | 涩涩av久久男人的天堂| 黄网站色视频无遮挡免费观看| 丰满少妇做爰视频| 毛片一级片免费看久久久久| 日本av手机在线免费观看| 国产亚洲最大av| 国产精品免费大片| 美女扒开内裤让男人捅视频| 亚洲美女视频黄频| 亚洲一区二区三区欧美精品| 美女脱内裤让男人舔精品视频| 日韩,欧美,国产一区二区三区| 国产精品香港三级国产av潘金莲 | 一边摸一边做爽爽视频免费| 美女福利国产在线| 黑人猛操日本美女一级片| 操美女的视频在线观看| 国产欧美日韩综合在线一区二区| 欧美日韩福利视频一区二区| 久久免费观看电影| 国产免费现黄频在线看| 久久精品aⅴ一区二区三区四区| 久久精品国产a三级三级三级| 久久久久久久大尺度免费视频| 黄色一级大片看看| 嫩草影院入口| 国产成人午夜福利电影在线观看| 国产精品久久久av美女十八| 九九爱精品视频在线观看| 亚洲第一av免费看| 久久人人97超碰香蕉20202| 十八禁高潮呻吟视频| 成年av动漫网址| 免费黄网站久久成人精品| 天堂俺去俺来也www色官网| 国产片特级美女逼逼视频| 一级毛片我不卡| 人人澡人人妻人| 国产精品女同一区二区软件| 天堂8中文在线网| 伦理电影免费视频| 亚洲av电影在线观看一区二区三区| 欧美中文综合在线视频| av网站在线播放免费| 亚洲av成人精品一二三区| 91aial.com中文字幕在线观看| 电影成人av| 男人添女人高潮全过程视频| 一个人免费看片子| 欧美成人精品欧美一级黄| 国产1区2区3区精品| 国产人伦9x9x在线观看| 日本wwww免费看| 亚洲国产av新网站| 久久这里只有精品19| 又大又黄又爽视频免费| 哪个播放器可以免费观看大片| 日韩不卡一区二区三区视频在线| 免费人妻精品一区二区三区视频| 亚洲av中文av极速乱| 十八禁人妻一区二区| 亚洲男人天堂网一区| 国产在线一区二区三区精| 欧美日韩亚洲高清精品| 美女视频免费永久观看网站| 悠悠久久av| 中文字幕亚洲精品专区| 韩国精品一区二区三区| 悠悠久久av| 狠狠精品人妻久久久久久综合| 久久久久久免费高清国产稀缺| 亚洲欧美激情在线| 亚洲欧美一区二区三区国产| 久久久久精品性色| 成年人午夜在线观看视频| 欧美国产精品va在线观看不卡| 9热在线视频观看99| 欧美日韩av久久| 亚洲精品日本国产第一区| a 毛片基地| 韩国高清视频一区二区三区| 免费看av在线观看网站| 欧美亚洲日本最大视频资源| 另类精品久久| 欧美亚洲日本最大视频资源| 亚洲精品在线美女| 青春草国产在线视频| 国产成人欧美| 十八禁高潮呻吟视频| 男人添女人高潮全过程视频| 蜜桃在线观看..| 国产毛片在线视频| 久久天堂一区二区三区四区| 成年av动漫网址| 在线亚洲精品国产二区图片欧美| 韩国高清视频一区二区三区| 久久人人爽人人片av| av女优亚洲男人天堂| 在线 av 中文字幕| 丰满饥渴人妻一区二区三| 妹子高潮喷水视频| 欧美精品高潮呻吟av久久| 精品国产一区二区三区四区第35| 午夜激情av网站| 欧美日韩av久久| 99热全是精品| 啦啦啦啦在线视频资源| 亚洲av综合色区一区| 天天躁夜夜躁狠狠躁躁| 久久久国产欧美日韩av| 国产精品久久久人人做人人爽| 精品酒店卫生间| 男女免费视频国产| 久久天躁狠狠躁夜夜2o2o | 国产一区二区三区综合在线观看| www.av在线官网国产| 欧美日韩亚洲综合一区二区三区_| 人成视频在线观看免费观看| 日韩av在线免费看完整版不卡| 久久精品亚洲av国产电影网| 国产欧美日韩综合在线一区二区| 国产成人免费观看mmmm| 日本猛色少妇xxxxx猛交久久| 午夜免费鲁丝| 在现免费观看毛片| 国产精品久久久久久精品古装| 国产精品蜜桃在线观看| 高清在线视频一区二区三区| 亚洲欧美色中文字幕在线| 久久毛片免费看一区二区三区| 在线天堂中文资源库| 中文字幕人妻丝袜制服| 超色免费av| 成人国产av品久久久| 一区二区日韩欧美中文字幕| 精品人妻在线不人妻| 久久久久久久久久久免费av| 校园人妻丝袜中文字幕| 制服诱惑二区| 日本色播在线视频| 一区二区av电影网| 免费不卡黄色视频| 天堂8中文在线网| 啦啦啦视频在线资源免费观看| 男男h啪啪无遮挡| 18禁观看日本| 欧美97在线视频| 美女高潮到喷水免费观看| 色精品久久人妻99蜜桃| 国产精品秋霞免费鲁丝片| 日韩中文字幕视频在线看片| 国产人伦9x9x在线观看| 日日摸夜夜添夜夜爱| 国产老妇伦熟女老妇高清| 亚洲精品中文字幕在线视频| 巨乳人妻的诱惑在线观看| 岛国毛片在线播放| 老鸭窝网址在线观看| 看非洲黑人一级黄片| 可以免费在线观看a视频的电影网站 | 免费日韩欧美在线观看| 悠悠久久av| 亚洲视频免费观看视频| 一级毛片黄色毛片免费观看视频| 只有这里有精品99| 最新在线观看一区二区三区 | 午夜福利免费观看在线| 汤姆久久久久久久影院中文字幕| 日日撸夜夜添| 两个人看的免费小视频| netflix在线观看网站| a 毛片基地| 亚洲精品国产av蜜桃| 亚洲欧美成人精品一区二区| 免费观看av网站的网址| 婷婷色综合大香蕉| 国产亚洲午夜精品一区二区久久| 人人澡人人妻人| 国产精品二区激情视频| 亚洲精品成人av观看孕妇| 亚洲精品国产av蜜桃| 久久狼人影院| 久久av网站| 这个男人来自地球电影免费观看 | 老司机在亚洲福利影院| 亚洲美女搞黄在线观看| 亚洲欧美色中文字幕在线| 欧美黄色片欧美黄色片| 欧美激情高清一区二区三区 | 2021少妇久久久久久久久久久| 亚洲精品国产av蜜桃| a级片在线免费高清观看视频| 电影成人av| 国产精品一国产av| 国产精品欧美亚洲77777| 91精品伊人久久大香线蕉| 亚洲精品在线美女| 成人午夜精彩视频在线观看| 最近中文字幕2019免费版| 国产黄频视频在线观看| 爱豆传媒免费全集在线观看| 亚洲国产精品一区三区| 亚洲欧美中文字幕日韩二区| 女人高潮潮喷娇喘18禁视频| 啦啦啦 在线观看视频| 国产精品国产三级专区第一集| xxx大片免费视频| 亚洲精品av麻豆狂野| 精品少妇一区二区三区视频日本电影 | 欧美乱码精品一区二区三区| 另类精品久久| 热99久久久久精品小说推荐| 成年美女黄网站色视频大全免费| 99香蕉大伊视频| 激情五月婷婷亚洲| 一本久久精品| 老熟女久久久| 亚洲国产日韩一区二区| 午夜日韩欧美国产| 最新在线观看一区二区三区 | 香蕉丝袜av| 99精品久久久久人妻精品| 久久精品久久精品一区二区三区| 少妇人妻精品综合一区二区| 国产xxxxx性猛交| 国产有黄有色有爽视频| 欧美日韩视频精品一区| 国产激情久久老熟女| 午夜福利影视在线免费观看| 韩国精品一区二区三区| 欧美日本中文国产一区发布| 婷婷色麻豆天堂久久| 高清av免费在线| 欧美国产精品va在线观看不卡| 新久久久久国产一级毛片| 成人亚洲精品一区在线观看| 国产熟女午夜一区二区三区| 国产片内射在线| 超碰成人久久| tube8黄色片| 99精国产麻豆久久婷婷| 亚洲国产av影院在线观看| 综合色丁香网| 一区二区三区激情视频| 久热这里只有精品99| 国产熟女欧美一区二区| 日韩大片免费观看网站| 久久精品国产综合久久久| 如何舔出高潮| 看免费成人av毛片| 日本午夜av视频| 黄片播放在线免费| 侵犯人妻中文字幕一二三四区| 久久国产精品男人的天堂亚洲| 纵有疾风起免费观看全集完整版| 久久久久视频综合| 欧美国产精品va在线观看不卡| 久久毛片免费看一区二区三区| 男女之事视频高清在线观看 | av在线老鸭窝| 黄色一级大片看看| 国产精品成人在线| 午夜免费鲁丝| 18禁动态无遮挡网站| 91老司机精品| 亚洲欧美一区二区三区久久| 国产欧美日韩一区二区三区在线| 黄片小视频在线播放| 伊人亚洲综合成人网| 久久久久精品国产欧美久久久 | 黑人巨大精品欧美一区二区蜜桃| 成年人免费黄色播放视频| bbb黄色大片| 一二三四中文在线观看免费高清| 999精品在线视频| 男女床上黄色一级片免费看| 欧美日韩成人在线一区二区| 国产视频首页在线观看| 日韩中文字幕欧美一区二区 | 亚洲av综合色区一区| 国产成人午夜福利电影在线观看| 亚洲国产欧美一区二区综合| 日本猛色少妇xxxxx猛交久久| 免费黄色在线免费观看| 久久久欧美国产精品| 国产黄频视频在线观看| 久久99热这里只频精品6学生| 国产一级毛片在线| 精品人妻熟女毛片av久久网站| 69精品国产乱码久久久| 啦啦啦视频在线资源免费观看| 乱人伦中国视频| 精品免费久久久久久久清纯 | 18禁动态无遮挡网站| 啦啦啦 在线观看视频| 日韩不卡一区二区三区视频在线| 久久韩国三级中文字幕| 99久久人妻综合| 国产一区二区激情短视频 | 美女国产高潮福利片在线看| 国产一区有黄有色的免费视频| 男女下面插进去视频免费观看| svipshipincom国产片| 一边摸一边做爽爽视频免费| 亚洲国产精品999| 香蕉国产在线看| 青青草视频在线视频观看| 乱人伦中国视频| 午夜福利网站1000一区二区三区| 国产亚洲最大av| 婷婷色av中文字幕| 最近中文字幕2019免费版| 狂野欧美激情性xxxx| 曰老女人黄片| 国产又色又爽无遮挡免| 国产 一区精品| 大片免费播放器 马上看| 国产精品麻豆人妻色哟哟久久| a级毛片在线看网站| 欧美精品av麻豆av| 黄色 视频免费看| 国产成人精品在线电影| 18禁裸乳无遮挡动漫免费视频| 最近的中文字幕免费完整| 亚洲在久久综合| 久久毛片免费看一区二区三区| 国产精品久久久久久人妻精品电影 | 老汉色av国产亚洲站长工具| 欧美日韩福利视频一区二区| 大片免费播放器 马上看| 波多野结衣av一区二区av| 一级,二级,三级黄色视频| 啦啦啦中文免费视频观看日本| 亚洲精品一区蜜桃| 最近最新中文字幕大全免费视频 | 国产麻豆69| 曰老女人黄片| 亚洲久久久国产精品| 日本wwww免费看| 亚洲精品日本国产第一区| 久久天堂一区二区三区四区| 欧美人与性动交α欧美精品济南到| 日韩欧美精品免费久久| 国产精品香港三级国产av潘金莲 | 免费观看人在逋| 国产精品欧美亚洲77777| 建设人人有责人人尽责人人享有的| 午夜福利免费观看在线| 大片电影免费在线观看免费| 亚洲av综合色区一区| 亚洲成人av在线免费| 午夜久久久在线观看| 天堂俺去俺来也www色官网| 看十八女毛片水多多多| 免费久久久久久久精品成人欧美视频| 青春草国产在线视频| 国产精品一区二区在线观看99| 亚洲欧洲日产国产| 18禁观看日本| 亚洲av欧美aⅴ国产| 亚洲色图综合在线观看| 波多野结衣av一区二区av| 麻豆av在线久日| 国产免费视频播放在线视频| 久久精品熟女亚洲av麻豆精品| 哪个播放器可以免费观看大片| 欧美 亚洲 国产 日韩一| 人人妻人人爽人人添夜夜欢视频| 国产成人免费观看mmmm| 97精品久久久久久久久久精品| 母亲3免费完整高清在线观看| 免费观看av网站的网址| 一级毛片电影观看| 黑人巨大精品欧美一区二区蜜桃| 久久免费观看电影| 在线观看免费高清a一片| 男女无遮挡免费网站观看| 制服诱惑二区| 精品久久久精品久久久| 人妻一区二区av| 国产一区二区在线观看av| 啦啦啦啦在线视频资源| 交换朋友夫妻互换小说| 久久精品国产综合久久久| 欧美黑人欧美精品刺激| 成人国语在线视频| 国产精品一二三区在线看| 夫妻性生交免费视频一级片| 国产精品一区二区在线不卡| 在线观看人妻少妇| 91aial.com中文字幕在线观看| 夜夜骑夜夜射夜夜干| 亚洲男人天堂网一区| 亚洲成国产人片在线观看| 精品国产超薄肉色丝袜足j| 成人毛片60女人毛片免费| 高清不卡的av网站| 久久毛片免费看一区二区三区| 日韩一卡2卡3卡4卡2021年| 秋霞在线观看毛片| 欧美激情高清一区二区三区 | 涩涩av久久男人的天堂| 亚洲人成电影观看| www日本在线高清视频| 90打野战视频偷拍视频| 亚洲国产精品一区三区| 欧美av亚洲av综合av国产av | 侵犯人妻中文字幕一二三四区| 欧美日韩综合久久久久久| 黄色怎么调成土黄色| 美女中出高潮动态图| 久久久精品国产亚洲av高清涩受| 免费黄色在线免费观看| 在线天堂最新版资源| 啦啦啦视频在线资源免费观看| 亚洲第一青青草原| 国产人伦9x9x在线观看| 欧美在线黄色| 狂野欧美激情性xxxx| 精品亚洲成a人片在线观看| 亚洲欧美成人综合另类久久久| 如何舔出高潮| 国产 一区精品| 另类精品久久| 国产黄频视频在线观看| 一级黄片播放器| 伦理电影免费视频| 成人18禁高潮啪啪吃奶动态图| 精品亚洲乱码少妇综合久久| 国产精品偷伦视频观看了| 免费日韩欧美在线观看| 国产精品av久久久久免费| 中文字幕av电影在线播放| a级片在线免费高清观看视频| 高清av免费在线| 日本91视频免费播放| 中文精品一卡2卡3卡4更新| 97在线人人人人妻| 亚洲av男天堂| 亚洲专区中文字幕在线 | 精品卡一卡二卡四卡免费| 国产伦理片在线播放av一区| 国产亚洲午夜精品一区二区久久| av在线老鸭窝| 精品国产一区二区久久| 飞空精品影院首页| 日韩大码丰满熟妇| av女优亚洲男人天堂| 国产有黄有色有爽视频| 亚洲欧美清纯卡通| 亚洲av日韩精品久久久久久密 | 久久精品国产亚洲av高清一级| 国产成人免费无遮挡视频| 尾随美女入室| 两个人看的免费小视频| 80岁老熟妇乱子伦牲交| 啦啦啦在线观看免费高清www| 女人高潮潮喷娇喘18禁视频| 观看av在线不卡| 亚洲av综合色区一区| 欧美精品一区二区免费开放| 少妇人妻精品综合一区二区| av网站免费在线观看视频| 99久国产av精品国产电影| 欧美日韩一区二区视频在线观看视频在线| 精品卡一卡二卡四卡免费| 国产在线免费精品| 一区二区三区四区激情视频| 国产探花极品一区二区| 久久久久久久久免费视频了| 国产又色又爽无遮挡免| 国产成人啪精品午夜网站| 巨乳人妻的诱惑在线观看| 自拍欧美九色日韩亚洲蝌蚪91| 无遮挡黄片免费观看| 国产成人免费观看mmmm| 丝瓜视频免费看黄片| 女人精品久久久久毛片| 国产乱人偷精品视频| 久久久精品国产亚洲av高清涩受| 久久久久久久大尺度免费视频| 又大又爽又粗| 精品少妇一区二区三区视频日本电影 | 久久天堂一区二区三区四区| 夫妻午夜视频| 国产精品人妻久久久影院| www日本在线高清视频| 国产av码专区亚洲av| 亚洲成人手机| 久久精品人人爽人人爽视色| 热re99久久国产66热| 久久精品人人爽人人爽视色| 午夜日韩欧美国产|