• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    混合課程學(xué)生成績(jī)預(yù)測(cè)模型的可解釋性探究*

    2022-06-16 04:14:40羅楊洋韓錫斌
    中國(guó)遠(yuǎn)程教育 2022年6期
    關(guān)鍵詞:解釋性學(xué)習(xí)成績(jī)混合

    □ 羅楊洋 韓錫斌

    一、引言

    近年來,人工智能技術(shù)與教育教學(xué)融合應(yīng)用受到各方關(guān)注。已有許多研究在實(shí)驗(yàn)環(huán)境中提出智能評(píng)價(jià)方案、智能學(xué)習(xí)模型、智能教學(xué)決策推薦方法,然而真正應(yīng)用到實(shí)踐并為教育教學(xué)帶來變革的智能技術(shù)還很少(韓錫斌,等,2017;趙帥,等,2019)。產(chǎn)生這種現(xiàn)象的原因包括技術(shù)壁壘、開發(fā)成本、模型和結(jié)果的解釋困難等(劉三女牙,等,2019;孟翀,等,2021;肖睿,等,2020)。人工智能為教育提供服務(wù)的核心是機(jī)器學(xué)習(xí)算法構(gòu)建的各種模型(蔣鑫,等,2020)。機(jī)器學(xué)習(xí)構(gòu)建模型的可解釋性是教學(xué)實(shí)踐者信任人工智能服務(wù)的前提(孫眾,等,2021),然而通過機(jī)器學(xué)習(xí)算法構(gòu)建的模型包含著不確定性,構(gòu)建模型的過程不透明,大多數(shù)結(jié)果與教育教學(xué)規(guī)律關(guān)聯(lián)薄弱,導(dǎo)致教學(xué)實(shí)踐者難以信任這些模型(Niels,2020)。在機(jī)器學(xué)習(xí)構(gòu)建的眾多模型之中,學(xué)習(xí)成績(jī)預(yù)測(cè)模型最受關(guān)注,它可以支持師生動(dòng)態(tài)調(diào)整教學(xué)策略,提供變更學(xué)習(xí)路徑的有效方法,切實(shí)優(yōu)化教育教學(xué)。探究學(xué)習(xí)成績(jī)預(yù)測(cè)模型的可解釋性有助于揭示不同場(chǎng)景下的學(xué)習(xí)規(guī)律,幫助教師理解不同學(xué)生的學(xué)習(xí)經(jīng)歷、信任預(yù)測(cè)結(jié)果并依此為學(xué)生提供個(gè)性化幫助(鄭勤華,等,2019)。本研究旨在分析近年來學(xué)習(xí)分析領(lǐng)域和計(jì)算機(jī)科學(xué)領(lǐng)域?qū)︻A(yù)測(cè)模型的可解釋性研究,利用計(jì)算機(jī)科學(xué)領(lǐng)域解釋預(yù)測(cè)模型的研究基礎(chǔ),以混合課程場(chǎng)景下基于學(xué)生在線行為的成績(jī)預(yù)測(cè)模型為例,分析成績(jī)預(yù)測(cè)模型結(jié)構(gòu)所代表的教育意義,其內(nèi)在推理機(jī)制所揭示的學(xué)習(xí)行為與學(xué)習(xí)成績(jī)之間的預(yù)測(cè)關(guān)系,以及預(yù)測(cè)結(jié)果為教學(xué)實(shí)踐提供的啟示,對(duì)教師應(yīng)用成績(jī)預(yù)測(cè)模型提出建議。希望本研究有助于教學(xué)實(shí)踐者理解、應(yīng)用成績(jī)預(yù)測(cè)模型,為研究者提供解釋混合課程場(chǎng)景中成績(jī)預(yù)測(cè)模型的研究思路和分析框架。

    二、研究現(xiàn)狀與問題

    當(dāng)前學(xué)界對(duì)機(jī)器學(xué)習(xí)的可解釋性還沒有統(tǒng)一的界定。Miller(2017)指出,可解釋性是指人類理解機(jī)器學(xué)習(xí)做出決策原因的程度。Lipton(2018)將可解釋性定義為人類使用機(jī)器學(xué)習(xí)模型從數(shù)據(jù)中揭示出知識(shí)時(shí)所揭示的知識(shí)彼此之間的關(guān)聯(lián)性。陳珂銳等(2020)認(rèn)為機(jī)器學(xué)習(xí)的可解釋性即使用可理解的術(shù)語表達(dá)機(jī)器學(xué)習(xí)過程和結(jié)果中所包含的概念。在教育領(lǐng)域,多個(gè)研究將可解釋性概括為參與教學(xué)的人在以下三個(gè)方面對(duì)預(yù)測(cè)模型的理解程度:知曉模型收集數(shù)據(jù)的目標(biāo),理解模型處理數(shù)據(jù)的過程,應(yīng)用模型預(yù)測(cè)的結(jié)果(Xing,et al.,2015;Zhang,et al.,2019;Jeon,et al.,2019)。正如Villagrá-Arnedo等人(2017)所指出的,提升預(yù)測(cè)模型的可解釋性是一個(gè)將“黑箱”透明化的過程,需要在數(shù)據(jù)解釋、過程解釋和預(yù)測(cè)結(jié)果解釋等多方面做出努力。探索學(xué)習(xí)成績(jī)預(yù)測(cè)模型可解釋性的研究主要涉及學(xué)習(xí)分析和計(jì)算機(jī)科學(xué)兩個(gè)領(lǐng)域。

    (一)學(xué)習(xí)分析領(lǐng)域內(nèi)的預(yù)測(cè)模型可解釋性研究

    學(xué)習(xí)分析領(lǐng)域內(nèi)的學(xué)者嘗試過多種解釋機(jī)器學(xué)習(xí)模型及其結(jié)果的方法。如Xing等(2015)解釋了基于決策樹預(yù)測(cè)完全在線學(xué)習(xí)中學(xué)生成績(jī)的過程和結(jié)果,該研究將學(xué)生在網(wǎng)絡(luò)教學(xué)平臺(tái)中的學(xué)習(xí)過程視為一種活動(dòng),依據(jù)活動(dòng)理論(activity theory)構(gòu)建學(xué)習(xí)過程數(shù)據(jù)與學(xué)習(xí)成績(jī)的聯(lián)系,選擇遺傳算法調(diào)參后的各種決策樹算法構(gòu)建學(xué)習(xí)成績(jī)預(yù)測(cè)模型,根據(jù)遺傳算法確定的參數(shù)和決策樹的結(jié)構(gòu)解釋了學(xué)習(xí)過程數(shù)據(jù)和學(xué)習(xí)成績(jī)結(jié)果之間的預(yù)測(cè)規(guī)則。Sorour等人(2016)為了構(gòu)建可解釋的學(xué)習(xí)成績(jī)預(yù)測(cè)模型,同樣使用了樹狀結(jié)構(gòu)的算法。該研究將學(xué)生的行為標(biāo)簽化,使用學(xué)習(xí)行為—標(biāo)簽屬性—情境的規(guī)則,解釋了隨機(jī)森林算法將學(xué)生的學(xué)習(xí)過程數(shù)據(jù)轉(zhuǎn)化為預(yù)測(cè)結(jié)果的過程和路徑。Zhang等人(2019)同樣采用了遺傳算法構(gòu)建學(xué)習(xí)成績(jī)預(yù)測(cè)模型,并使用樹狀結(jié)構(gòu)的預(yù)測(cè)變量與結(jié)果變量規(guī)則解釋整個(gè)預(yù)測(cè)過程,說明了在研究情境下預(yù)測(cè)學(xué)習(xí)成績(jī)需要的重要變量以及這些變量之間的關(guān)聯(lián)。樹狀結(jié)構(gòu)的預(yù)測(cè)模型還可轉(zhuǎn)化為“if……then……”條件判斷語句,該表達(dá)方式也有利于教師將預(yù)測(cè)模型中提供的信息轉(zhuǎn)化為教學(xué)策略或教學(xué)干預(yù)。

    基于決策樹算法構(gòu)建的預(yù)測(cè)模型只是成績(jī)預(yù)測(cè)模型中的一小部分。隨著學(xué)習(xí)情境的復(fù)雜化,許多研究都使用了多層神經(jīng)網(wǎng)絡(luò)的深度學(xué)習(xí)模型以提升預(yù)測(cè)結(jié)果精度,但為成績(jī)預(yù)測(cè)模型的可解釋性帶來了更大挑戰(zhàn) (胡航,等,2019)。Villagrá-Arnedo等人(2017)指出,在解釋“黑箱”算法構(gòu)建的預(yù)測(cè)模型時(shí),解構(gòu)模型的結(jié)構(gòu)、描述預(yù)測(cè)模型內(nèi)在推理機(jī)制揭示的預(yù)測(cè)關(guān)系,以及解釋預(yù)測(cè)結(jié)果對(duì)教學(xué)實(shí)踐的啟示是有效手段。Donda等人(2020)通過特征工程、算法比較和預(yù)測(cè)過程的時(shí)序分析,應(yīng)用了Villagrá-Arnedo等人(2017)提出的成績(jī)預(yù)測(cè)模型的解釋框架。

    (二)計(jì)算機(jī)科學(xué)領(lǐng)域內(nèi)的預(yù)測(cè)模型可解釋性研究

    預(yù)測(cè)模型早期的可解釋性主要通過事前的數(shù)據(jù)分布假設(shè)和建模時(shí)人工限制模型的復(fù)雜性來保證(Lei,et al.,2018)。然而,隨著機(jī)器學(xué)習(xí)模型逐漸非線性化和非參數(shù)化,模型的可解釋性逐漸降低。有學(xué)者指出,相較于整合樹(tree ensemble)模型或深度神經(jīng)網(wǎng)絡(luò)模型,回歸模型和關(guān)聯(lián)規(guī)則模型的可解釋性更強(qiáng)(王亮,2021;Zeileis,et al.,2008)。隨著應(yīng)用場(chǎng)景的復(fù)雜化,對(duì)預(yù)測(cè)精確性的要求不斷提高,解釋非參數(shù)、非線性的復(fù)雜機(jī)器學(xué)習(xí)模型成為學(xué)界和社會(huì)關(guān)注的焦點(diǎn)。

    當(dāng)前計(jì)算機(jī)科學(xué)領(lǐng)域中的模型可解釋性研究大多圍繞解釋框架研究和解釋技術(shù)研究?jī)蓚€(gè)方面展開。

    解釋框架是解釋特定模型時(shí)必須解釋的內(nèi)容。預(yù)測(cè)模型的解釋框架由以下三部分構(gòu)成:預(yù)測(cè)模型結(jié)構(gòu)的解釋,預(yù)測(cè)模型內(nèi)在推理機(jī)制的解釋,以及預(yù)測(cè)結(jié)果的解釋(Murdoch,et al.,2019)。其中,預(yù)測(cè)模型結(jié)構(gòu)的解釋是說明預(yù)測(cè)模型的構(gòu)成要素及要素之間的關(guān)系;預(yù)測(cè)模型內(nèi)在推理機(jī)制的解釋是說明數(shù)據(jù)輸入預(yù)測(cè)模型后會(huì)經(jīng)由何種處理方法轉(zhuǎn)變?yōu)楹畏N形態(tài),對(duì)預(yù)測(cè)結(jié)果產(chǎn)生的影響是什么;預(yù)測(cè)結(jié)果的解釋包括預(yù)測(cè)結(jié)果與預(yù)測(cè)變量之間的關(guān)系解釋和預(yù)測(cè)結(jié)果在特定場(chǎng)景中表達(dá)的意義等(Molnar,2019)。

    解釋技術(shù)是指分析、診斷和可視化機(jī)器學(xué)習(xí)過程的技術(shù)和方法(Vidovic,2017,p.18)。這些技術(shù)和方法對(duì)應(yīng)解釋框架的每個(gè)方面。如在解釋模型組成方面,有研究采用特征工程(feature engineering)技術(shù)提取輸入變量的意義,結(jié)合模型的數(shù)學(xué)基礎(chǔ)描繪模型可能形成的結(jié)構(gòu)(Montavon,et al.,2018);在解釋預(yù)測(cè)模型內(nèi)在推理機(jī)制方面,有學(xué)者(Cherkassky,et al.,2015)建議根據(jù)預(yù)測(cè)模型處理數(shù)據(jù)的方法,采用抽象的理論模型替代具體的預(yù)測(cè)模型;在預(yù)測(cè)結(jié)果的解釋方面,有針對(duì)特定場(chǎng)景的結(jié)果可視化技術(shù)將數(shù)字和概率轉(zhuǎn)換為更形象的圖形(Hall,et al.,2018,pp.14-27)。

    綜上所述,當(dāng)前學(xué)習(xí)分析領(lǐng)域內(nèi)解釋預(yù)測(cè)模型的框架和技術(shù)均借鑒計(jì)算機(jī)科學(xué)領(lǐng)域?qū)︻A(yù)測(cè)模型的可解釋性研究。在成績(jī)預(yù)測(cè)模型的解釋研究中,學(xué)界傾向于回歸教學(xué)場(chǎng)景,以計(jì)算機(jī)科學(xué)領(lǐng)域的方法為基礎(chǔ),結(jié)合學(xué)習(xí)分析領(lǐng)域的實(shí)踐,形成了包含分析預(yù)測(cè)模型的結(jié)構(gòu)、解釋內(nèi)在推理機(jī)制和提出預(yù)測(cè)結(jié)果的應(yīng)用建議這三部分內(nèi)容的解釋框架,也為本研究解釋預(yù)測(cè)模型提供了基礎(chǔ)。然而,這些研究還局限在完全在線課程場(chǎng)景中,大多基于決策樹算法,只解釋了準(zhǔn)確率較高的結(jié)果,忽略了對(duì)預(yù)測(cè)錯(cuò)誤產(chǎn)生原因的解釋,也缺乏對(duì)學(xué)生整體預(yù)測(cè)結(jié)果和個(gè)體預(yù)測(cè)結(jié)果之間存在差異這一現(xiàn)象的解釋。

    混合課程是結(jié)合在線與面授兩種教學(xué)場(chǎng)景授課的課程,且其中有較大比例的教學(xué)是通過在線授課實(shí)現(xiàn)的(韓錫斌,等,2016,pp.320-323)。有關(guān)混合課程中學(xué)生成績(jī)預(yù)測(cè)的研究大多采用學(xué)生線上學(xué)習(xí)過程數(shù)據(jù)來構(gòu)建預(yù)測(cè)模型。在缺失學(xué)生線下學(xué)習(xí)過程數(shù)據(jù)的情況下,依賴不完整的學(xué)習(xí)過程數(shù)據(jù)構(gòu)建的學(xué)生成績(jī)預(yù)測(cè)模型與完全在線課程中學(xué)生成績(jī)預(yù)測(cè)模型在解釋性上有較大差異,當(dāng)前尚缺乏解釋此類成績(jī)預(yù)測(cè)模型的研究。

    基于上述文獻(xiàn)分析,本研究提出兩個(gè)問題:

    問題1:如何解釋混合課程中學(xué)生成績(jī)預(yù)測(cè)模型?

    問題2:在混合課程中構(gòu)建學(xué)生成績(jī)預(yù)測(cè)模型能為教師提供哪些幫助?

    三、研究方法和結(jié)果

    (一)混合課程數(shù)據(jù)收集和預(yù)處理

    依據(jù)數(shù)據(jù)可獲得性和研究可行性,以往研究均推薦采用學(xué)生在網(wǎng)絡(luò)教學(xué)平臺(tái)中的學(xué)習(xí)日志構(gòu)建混合課程中學(xué)生成績(jī)預(yù)測(cè)模型(Hellas,et al.,2018;Conijn,et al.,2018)。選擇一所學(xué)校一學(xué)期的學(xué)生網(wǎng)絡(luò)教學(xué)平臺(tái)學(xué)習(xí)日志,將學(xué)生對(duì)網(wǎng)絡(luò)教學(xué)平臺(tái)的操作與學(xué)習(xí)活動(dòng)對(duì)應(yīng),依據(jù)Moore(1989)提出的教學(xué)交互對(duì)象劃分和陳麗(2004)提出的交互活動(dòng)類型劃分理論,盡量收集囊括所有交互對(duì)象和交互類型的教學(xué)活動(dòng),并依據(jù)以往研究中使用過的學(xué)生在線行為指標(biāo),從學(xué)生在線學(xué)習(xí)日志中提取學(xué)生在線學(xué)習(xí)活動(dòng)指標(biāo)作為預(yù)測(cè)變量(predictor variable,PV)。采用最大值—最小值歸一化方法處理混合課程中的學(xué)生在線行為數(shù)據(jù),去除數(shù)據(jù)量綱;從學(xué)校教務(wù)系統(tǒng)中提取每門課程的學(xué)生成績(jī),以學(xué)校的學(xué)分績(jī)轉(zhuǎn)換方式將百分制的學(xué)生成績(jī)轉(zhuǎn)化為A(100~90)、B(89~80)、C(79~70)、D(69~60)、F(60分以下)五等。去除學(xué)生學(xué)分績(jī)完全相同的課程數(shù)據(jù),獲得本研究所需結(jié)果變量(outcome variable,OV)(見表1)。

    表1 學(xué)生成績(jī)預(yù)測(cè)模型輸入變量表

    續(xù)表

    采用本團(tuán)隊(duì)以往提出的混合課程分類方法(Luo,et al.,2020),選擇學(xué)生在線行為活躍度較高的混合課程(共22門,2,348名學(xué)生),這類課程來自于生命科學(xué)、電氣與電子工程、法學(xué)、計(jì)算機(jī)科學(xué)和外語五個(gè)專業(yè),每門課程學(xué)生數(shù)量差異小于20人,均采用線上線下混合教學(xué)。參與該類課程的學(xué)習(xí)者為攻讀本科學(xué)位的學(xué)生,在參與課程方面的典型特征是:整體在線行為活躍度較高,幾乎全面參與各類交互學(xué)習(xí)活動(dòng);在各種在線行為指標(biāo)上有較大個(gè)性化差異;學(xué)生成績(jī)分布與全校學(xué)生成績(jī)分布相似。

    (二)解析混合課程的學(xué)生學(xué)習(xí)成績(jī)模型

    使用當(dāng)前研究中常見的五種機(jī)器學(xué)習(xí)算法構(gòu)建學(xué)習(xí)成績(jī)預(yù)測(cè)模型,分別是邏輯回歸、多層感知器、隨機(jī)森林、多核支持向量機(jī)和樸素貝葉斯。在構(gòu)建學(xué)習(xí)成績(jī)預(yù)測(cè)模型的過程中,記錄算法輸出的中間結(jié)果作為解釋模型的依據(jù)。步驟如下:

    首先,將混合課程數(shù)據(jù)分為11份,其中10份作為開發(fā)集,1份作為測(cè)試集。

    其次,在開發(fā)集中采用上述五種算法分別構(gòu)建預(yù)測(cè)模型,在構(gòu)建模型時(shí)采用超參數(shù)調(diào)試法優(yōu)化算法參數(shù)。采用10折交叉驗(yàn)證分析預(yù)測(cè)模型,在交叉驗(yàn)證中將開發(fā)集劃分為1份驗(yàn)證集和9份訓(xùn)練集,并進(jìn)行迭代驗(yàn)證。輸出構(gòu)建預(yù)測(cè)模型的中間結(jié)果。

    再次,將測(cè)試集輸入預(yù)測(cè)模型中,比較預(yù)測(cè)結(jié)果的差異。

    最后,依據(jù)中間結(jié)果、預(yù)測(cè)結(jié)果和混合課程的場(chǎng)景,解釋不同算法所構(gòu)建的預(yù)測(cè)模型結(jié)構(gòu)所代表的教育意義,其內(nèi)在推理機(jī)制所解釋的學(xué)習(xí)行為對(duì)成績(jī)的預(yù)測(cè)關(guān)系,以及預(yù)測(cè)結(jié)果對(duì)實(shí)施混合課程帶來的啟示。

    研究流程如圖1所示。

    圖1 成績(jī)預(yù)測(cè)模型可解釋性研究流程圖

    (三)混合課程學(xué)生學(xué)習(xí)成績(jī)預(yù)測(cè)模型的比較

    在本研究中混合課程學(xué)生成績(jī)是一個(gè)五級(jí)定類變量,且混合課程中的學(xué)生數(shù)量在各成績(jī)等級(jí)中具有較大差異,屬于非平衡數(shù)據(jù)的多分類問題。通常評(píng)價(jià)多分類問題的指標(biāo)包括權(quán)重準(zhǔn)確率(weighted accuracy)、權(quán)重查全率(weighted recall)和權(quán)重F1值(weighted F1 measure)評(píng)價(jià)。這些指標(biāo)從二分類預(yù)測(cè)結(jié)果評(píng)價(jià)公式推理得出,指標(biāo)的值會(huì)受到不同分類數(shù)量的影響(Hossin,et al.,2015)。為綜合評(píng)價(jià)各預(yù)測(cè)算法構(gòu)建的模型及其預(yù)測(cè)結(jié)果,研究在上述指標(biāo)基礎(chǔ)上加入了平均準(zhǔn)確率(average accuracy)、平均查全率(average recall)和宏F1值(Macro-F1 measure)等適用于非平衡數(shù)據(jù)的多分類問題評(píng)價(jià)的指標(biāo)(Shmueli,2020),從而更準(zhǔn)確地描述每個(gè)等級(jí)成績(jī)的預(yù)測(cè)結(jié)果,為優(yōu)化教學(xué)實(shí)踐提供更有意義的數(shù)據(jù)。根據(jù)各預(yù)測(cè)模型的測(cè)試數(shù)據(jù)和交叉驗(yàn)證的評(píng)價(jià)結(jié)果(見表2)可知,以隨機(jī)森林算法構(gòu)建的預(yù)測(cè)模型不但具有較高的預(yù)測(cè)結(jié)果準(zhǔn)確率,而且在查準(zhǔn)率和查全率等指標(biāo)中都有較好表現(xiàn)。

    表2 各模型預(yù)測(cè)結(jié)果評(píng)價(jià)指標(biāo)

    四、結(jié)果討論

    (一)以機(jī)器學(xué)習(xí)算法構(gòu)建的成績(jī)預(yù)測(cè)模型結(jié)構(gòu)所代表的教育意義

    機(jī)器學(xué)習(xí)算法在數(shù)學(xué)原理上的差異導(dǎo)致以這些算法構(gòu)建的成績(jī)預(yù)測(cè)模型在結(jié)構(gòu)上代表了不同的教育含義。

    在本研究中,邏輯回歸算法找出在混合課程中預(yù)測(cè)學(xué)生學(xué)習(xí)成績(jī)最準(zhǔn)確的在線學(xué)習(xí)行為指標(biāo)及其權(quán)重。在該預(yù)測(cè)模型中,不同于單門混合課程,在多門混合課程場(chǎng)景下,這種結(jié)構(gòu)表示了每種學(xué)生成績(jī)等級(jí)下大多數(shù)學(xué)生的學(xué)習(xí)行為模式(Donda,et al.,2020),這些行為模式可能跨課程出現(xiàn)。該預(yù)測(cè)模型通過發(fā)現(xiàn)大多數(shù)學(xué)生在線學(xué)習(xí)行為與學(xué)習(xí)成績(jī)的關(guān)聯(lián)關(guān)系中最顯著的那對(duì)關(guān)聯(lián)關(guān)系,給出對(duì)最終成績(jī)影響最大的在線學(xué)習(xí)行為指標(biāo)及其權(quán)重。該模型可幫助教師在學(xué)習(xí)結(jié)束時(shí)點(diǎn)預(yù)測(cè)每位學(xué)生的學(xué)習(xí)成績(jī)(Balle,etal.,2018)。

    多層感知器算法關(guān)注的是學(xué)生的在線學(xué)習(xí)行為與其成績(jī)等級(jí)在對(duì)應(yīng)上的誤差及修正該誤差的指標(biāo)及其權(quán)重,因此整個(gè)預(yù)測(cè)模型表示的是學(xué)生的在線學(xué)習(xí)行為指標(biāo)與其成績(jī)等級(jí)之間的唯一映射關(guān)系。在多門混合課程場(chǎng)景中,學(xué)生在線學(xué)習(xí)行為指標(biāo)中預(yù)測(cè)每個(gè)成績(jī)等級(jí)最準(zhǔn)確的指標(biāo)被選出,表示各混合課程中影響學(xué)生獲得每類最終成績(jī)的共通性在線學(xué)習(xí)活動(dòng)。該模型可幫助教師在任意學(xué)習(xí)時(shí)點(diǎn)預(yù)測(cè)每位學(xué)生的成績(jī)。

    隨機(jī)森林算法構(gòu)建的是多種學(xué)生在線學(xué)習(xí)行為指標(biāo)模式對(duì)學(xué)習(xí)成績(jī)的預(yù)測(cè)關(guān)系。在該模型中,在線學(xué)習(xí)行為指標(biāo)的值會(huì)被劃分為不同的區(qū)間,形成多種在線學(xué)習(xí)行為指標(biāo)序列對(duì)應(yīng)的一類學(xué)習(xí)成績(jī)(方匡南,等,2011)。這種結(jié)構(gòu)說明,當(dāng)只采用在線學(xué)習(xí)行為預(yù)測(cè)學(xué)習(xí)成績(jī)時(shí),在不同的混合課程中可用于預(yù)測(cè)學(xué)習(xí)成績(jī)的最顯著的在線學(xué)習(xí)行為模式有多種。該模型可幫助教師在任意學(xué)習(xí)時(shí)點(diǎn)預(yù)測(cè)每位學(xué)生在不同課程中的成績(jī)。

    多核支持向量機(jī)構(gòu)建的是所有學(xué)生在線學(xué)習(xí)行為指標(biāo)對(duì)應(yīng)每類學(xué)習(xí)成績(jī)的關(guān)系模型,該模型表示的是在不同混合課程中,以學(xué)生在線學(xué)習(xí)行為預(yù)測(cè)五類學(xué)習(xí)成績(jī)的結(jié)果(劉方園,等,2018)。該模型可幫助教師在任意學(xué)習(xí)時(shí)點(diǎn)預(yù)測(cè)每位學(xué)生的學(xué)習(xí)成績(jī),但該模型無法區(qū)分不同課程中學(xué)生在線學(xué)習(xí)行為預(yù)測(cè)學(xué)習(xí)成績(jī)的差異。

    樸素貝葉斯算法關(guān)注的是當(dāng)學(xué)生的在線學(xué)習(xí)行為達(dá)到某種條件時(shí)所對(duì)應(yīng)的學(xué)習(xí)成績(jī),因此該模型表示的是在混合課程學(xué)習(xí)結(jié)束時(shí)點(diǎn)達(dá)成某種值的在線學(xué)習(xí)行為所得到的學(xué)習(xí)成績(jī)。該模型能幫助教師在學(xué)習(xí)結(jié)束時(shí)點(diǎn)只觀察幾項(xiàng)在線學(xué)習(xí)行為就可以預(yù)測(cè)學(xué)生的學(xué)習(xí)成績(jī)。

    (二)不同成績(jī)預(yù)測(cè)模型內(nèi)在推理機(jī)制揭示的預(yù)測(cè)關(guān)系

    從邏輯回歸模型結(jié)構(gòu)代表的教育意義討論可知,邏輯回歸模型預(yù)測(cè)的推理機(jī)制是,尋找新學(xué)生與模型最匹配的在線學(xué)習(xí)行為模式所對(duì)應(yīng)的學(xué)習(xí)成績(jī)。但在本研究的混合課程場(chǎng)景下,學(xué)生的學(xué)習(xí)過程包含線上和線下兩部分,僅使用在線學(xué)習(xí)過程數(shù)據(jù)預(yù)測(cè)學(xué)習(xí)成績(jī)可能出現(xiàn)兩種邏輯回歸無法區(qū)分的情況:一是學(xué)生的在線學(xué)習(xí)行為數(shù)據(jù)相似而學(xué)習(xí)成績(jī)不同;二是學(xué)生的在線學(xué)習(xí)行為數(shù)據(jù)不同而學(xué)習(xí)成績(jī)相似。因此,邏輯回歸模型的預(yù)測(cè)結(jié)果無法區(qū)分學(xué)生參與不同混合課程時(shí)的在線學(xué)習(xí)行為差異,由表2可知該模型預(yù)測(cè)效果較差。

    多層感知器預(yù)測(cè)的推理機(jī)制是通過比較所預(yù)測(cè)的學(xué)生成績(jī)與學(xué)生實(shí)際成績(jī)之間的差異來不斷修正學(xué)生在線學(xué)習(xí)行為指標(biāo)的權(quán)重(Dreyfus,et al.,1990),并計(jì)算新加入學(xué)生的在線學(xué)習(xí)行為所對(duì)應(yīng)的學(xué)習(xí)成績(jī)。在本研究中,存在相同學(xué)生參與多門混合課程的情況,在不同要求下學(xué)生的在線學(xué)習(xí)行為與學(xué)習(xí)成績(jī)之間的關(guān)聯(lián)存在多種對(duì)應(yīng)關(guān)系,因此預(yù)測(cè)結(jié)果準(zhǔn)確率較差。例如,當(dāng)神經(jīng)網(wǎng)絡(luò)模型學(xué)習(xí)一門課程中成績(jī)?yōu)锳的學(xué)生的在線學(xué)習(xí)行為數(shù)據(jù)時(shí),其他成績(jī)等級(jí)學(xué)生的在線學(xué)習(xí)行為都會(huì)被認(rèn)為是非A的數(shù)據(jù),而當(dāng)該學(xué)生在其他課程中成績(jī)?yōu)榉茿,但其在線學(xué)習(xí)行為數(shù)據(jù)與本課程相似時(shí),模型對(duì)該學(xué)生在線學(xué)習(xí)行為模式的識(shí)別就會(huì)出現(xiàn)二義性。在混合課程中,在線學(xué)習(xí)行為只代表學(xué)生的部分學(xué)習(xí)參與,與學(xué)習(xí)成績(jī)的關(guān)聯(lián)也存在多重對(duì)應(yīng)關(guān)系,因此如表2所示,多層感知器模型會(huì)出現(xiàn)較多預(yù)測(cè)錯(cuò)誤。

    隨機(jī)森林模型預(yù)測(cè)的推理機(jī)制是,依據(jù)混合課程中不同學(xué)生群體的在線學(xué)習(xí)行為與學(xué)習(xí)成績(jī)之間的預(yù)測(cè)關(guān)系對(duì)新加入的學(xué)生進(jìn)行劃分,在此機(jī)制下模型可識(shí)別某類成績(jī)等級(jí)下的多種學(xué)生在線學(xué)習(xí)行為模式,切割由于學(xué)生成績(jī)跨等級(jí)而在線學(xué)習(xí)行為模式又相似所產(chǎn)生的交互影響。例如,當(dāng)某位成績(jī)?yōu)锳的學(xué)生的在線學(xué)習(xí)行為與其他成績(jī)分類的學(xué)生相似時(shí),模型會(huì)尋找該學(xué)生所屬的群體,并使用投票的方式預(yù)測(cè)該學(xué)生的成績(jī)。雖然在混合課程中在線學(xué)習(xí)行為只是部分學(xué)習(xí)行為,但每類成績(jī)的學(xué)生其行為模式不會(huì)過于分散,通過每門課程中大多數(shù)學(xué)生的在線學(xué)習(xí)行為即可分辨新加入學(xué)生的成績(jī)。只有某門課程中學(xué)生的學(xué)習(xí)成績(jī)與在線學(xué)習(xí)行為都十分相似時(shí),隨機(jī)森林模型的推理才會(huì)出現(xiàn)錯(cuò)誤。例如,成績(jī)?yōu)锳的學(xué)生與成績(jī)?yōu)镕的學(xué)生其在線學(xué)習(xí)行為數(shù)據(jù)相近,同時(shí)該課程中學(xué)習(xí)成績(jī)分別為B、C、D的學(xué)生中有相近行為的學(xué)生數(shù)量也較多,但這種情況不符合混合教學(xué)規(guī)律。由表2可以看出,該模型的預(yù)測(cè)結(jié)果各項(xiàng)指標(biāo)較高。

    多核支持向量機(jī)模型預(yù)測(cè)的推理機(jī)制是,判斷新加入學(xué)生的在線學(xué)習(xí)行為數(shù)據(jù)與模型中在線學(xué)習(xí)行為數(shù)據(jù)的一致性,從而獲得對(duì)該學(xué)生成績(jī)的預(yù)測(cè)。在該模型構(gòu)建過程中不同批次輸入的數(shù)據(jù)所產(chǎn)生的錯(cuò)誤會(huì)逐步累積,即當(dāng)某門課程中存在將F成績(jī)的學(xué)生識(shí)別為A成績(jī)的學(xué)生時(shí),其他課程中與錯(cuò)誤識(shí)別學(xué)生相關(guān)的在線學(xué)習(xí)行為都將被識(shí)別為A成績(jī)。另外,支持向量機(jī)會(huì)發(fā)生“拒絕分類”錯(cuò)誤(Arun,et al.,2011)。在本研究中,每個(gè)成績(jī)等級(jí)下的學(xué)生數(shù)量不同,各混合課程中學(xué)生成績(jī)等級(jí)對(duì)應(yīng)的學(xué)生在線學(xué)習(xí)行為模式也有差異。在某門課程中建立的各成績(jī)等級(jí)與在線學(xué)習(xí)行為的對(duì)應(yīng)關(guān)系錯(cuò)誤會(huì)隨著迭代而累積,導(dǎo)致最后在預(yù)測(cè)時(shí)出現(xiàn)巨大偏差。同時(shí),各成績(jī)等級(jí)內(nèi)部在預(yù)測(cè)時(shí)出現(xiàn)“拒絕分類”后,被拒絕的學(xué)生會(huì)被劃分到最接近的成績(jī)等級(jí)中。這種劃分方法對(duì)學(xué)生在線學(xué)習(xí)行為模式接近但成績(jī)等級(jí)有差異的樣本會(huì)產(chǎn)生大量錯(cuò)誤的分類,因此在表2中該模型預(yù)測(cè)結(jié)果的各項(xiàng)指標(biāo)較差。

    樸素貝葉斯模型預(yù)測(cè)的推理機(jī)制是,根據(jù)模型所得條件概率計(jì)算學(xué)生在線學(xué)習(xí)行為屬于每一等級(jí)學(xué)習(xí)成績(jī)的概率,并將概率最高的學(xué)習(xí)成績(jī)作為預(yù)測(cè)結(jié)果。與邏輯回歸相似,這種預(yù)測(cè)方法難以識(shí)別相同的學(xué)生在線學(xué)習(xí)行為數(shù)據(jù)(相同條件)對(duì)應(yīng)不同成績(jī)等級(jí)(不同結(jié)果)時(shí)發(fā)生的錯(cuò)誤。從表2可知,樸素貝葉斯模型在本研究中也無法獲得較好的預(yù)測(cè)結(jié)果。

    (三)預(yù)測(cè)結(jié)果的解釋及其對(duì)教學(xué)實(shí)踐的啟示

    根據(jù)表2,本研究中預(yù)測(cè)準(zhǔn)確率較高的混合課程學(xué)生成績(jī)預(yù)測(cè)模型是隨機(jī)森林預(yù)測(cè)模型。圖2展示了隨機(jī)森林模型預(yù)測(cè)某位學(xué)生成績(jī)?yōu)锳的流程,其中PVn代表學(xué)生在線學(xué)習(xí)行為各指標(biāo)數(shù)據(jù)(預(yù)測(cè)變量),OV(N)代表輸出的學(xué)生成績(jī)等級(jí)(預(yù)測(cè)結(jié)果),xn代表決策樹葉子節(jié)點(diǎn)進(jìn)行下一步判斷的學(xué)生在線學(xué)習(xí)行為數(shù)據(jù)閾值(依據(jù)變量),該變量根據(jù)訓(xùn)練過程中學(xué)生在線學(xué)習(xí)行為對(duì)學(xué)習(xí)成績(jī)的信息量貢獻(xiàn)不斷優(yōu)化獲得。

    圖2 隨機(jī)森林模型預(yù)測(cè)流程示意圖

    從圖2可知,當(dāng)兩位學(xué)生的在線行為數(shù)據(jù)較為相似而學(xué)習(xí)成績(jī)分類不同時(shí),某一數(shù)據(jù)的細(xì)微差距可導(dǎo)致決策樹中對(duì)兩位學(xué)生的預(yù)測(cè)結(jié)果不同。隨機(jī)森林模型通過劃分學(xué)生和建立多棵決策樹識(shí)別這種差異。表2的結(jié)果為教師提供的信息是,教師可使用該預(yù)測(cè)模型判斷班級(jí)所有學(xué)生在當(dāng)前在線學(xué)習(xí)狀態(tài)下可能取得的最終成績(jī),且預(yù)測(cè)正確的學(xué)生數(shù)量為全班學(xué)生總數(shù)的74.7%。

    混合課程學(xué)生成績(jī)的整體預(yù)測(cè)準(zhǔn)確率不能直接引導(dǎo)教師優(yōu)化混合教學(xué),本研究將學(xué)生成績(jī)分為五類后進(jìn)一步提升了預(yù)測(cè)結(jié)果的可解釋性。如表3所示,在對(duì)每個(gè)學(xué)生個(gè)體成績(jī)等級(jí)進(jìn)行評(píng)價(jià)時(shí),評(píng)價(jià)方法采用二分類評(píng)價(jià),即只判斷預(yù)測(cè)結(jié)果是否屬于當(dāng)前成績(jī)等級(jí),因此表3中各等級(jí)成績(jī)的預(yù)測(cè)查準(zhǔn)率就是模型對(duì)當(dāng)前成績(jī)等級(jí)的預(yù)測(cè)結(jié)果。在本研究中,混合課程中成績(jī)?yōu)锳和B的學(xué)生被預(yù)測(cè)準(zhǔn)確率最高,分別達(dá)到80.6%和85.3%。同時(shí),成績(jī)?yōu)锳和B的學(xué)生其預(yù)測(cè)查全率也有很高數(shù)值,分別達(dá)到74.8%和85.3%,說明其他成績(jī)的學(xué)生被預(yù)測(cè)為A或B成績(jī)的錯(cuò)誤率較低。此項(xiàng)結(jié)果表明,當(dāng)教師使用該模型對(duì)全班學(xué)生的學(xué)習(xí)成績(jī)進(jìn)行預(yù)測(cè)時(shí),可識(shí)別大多數(shù)成績(jī)?yōu)锳和B的學(xué)生,從而將精力更多放在成績(jī)較低的學(xué)生中。

    表3 混合課程中各成績(jī)等級(jí)學(xué)生預(yù)測(cè)結(jié)果評(píng)價(jià)

    為進(jìn)一步解釋本研究中學(xué)生在線學(xué)習(xí)行為各指標(biāo)對(duì)學(xué)習(xí)成績(jī)預(yù)測(cè)的影響,記錄了學(xué)生在線學(xué)習(xí)行為對(duì)學(xué)習(xí)成績(jī)預(yù)測(cè)的重要性(如圖3所示)。在隨機(jī)森林模型中,預(yù)測(cè)變量重要性是指預(yù)測(cè)變量對(duì)結(jié)果變量預(yù)測(cè)準(zhǔn)確率的貢獻(xiàn),而非對(duì)結(jié)果變量的解釋(Du,et al.,2021)。通過比對(duì)樣本的變量和重要預(yù)測(cè)變量可判斷當(dāng)前樣本的預(yù)測(cè)結(jié)果是否可信(Ribeiro,et al.,2016)。如圖3所示,學(xué)生在線學(xué)習(xí)行為指標(biāo)作為預(yù)測(cè)變量時(shí),各項(xiàng)指標(biāo)之間在重要性上的差異都小于0.2,且沒有任何一項(xiàng)或幾項(xiàng)指標(biāo)對(duì)成績(jī)預(yù)測(cè)結(jié)果產(chǎn)生了顯著影響。此項(xiàng)結(jié)果表明學(xué)生所有在線學(xué)習(xí)行為對(duì)學(xué)習(xí)成績(jī)預(yù)測(cè)的影響較為平均,當(dāng)學(xué)生個(gè)體在所有在線學(xué)習(xí)活動(dòng)中均有較多行為數(shù)據(jù)時(shí),本研究模型所得預(yù)測(cè)結(jié)果具有較高可信度;當(dāng)學(xué)生個(gè)體在某項(xiàng)或某幾項(xiàng)在線學(xué)習(xí)行為指標(biāo)上沒有數(shù)據(jù)時(shí),模型對(duì)其預(yù)測(cè)的結(jié)果可信度較低。

    圖3 預(yù)測(cè)變量重要性折線圖

    五、研究結(jié)論

    (一)研究結(jié)論

    應(yīng)用人工智能變革教育教學(xué)實(shí)踐的關(guān)鍵問題是人工智能的可解釋性(孫眾,等,2021)。作為人工智能基礎(chǔ)的機(jī)器學(xué)習(xí)是在教育教學(xué)場(chǎng)景中應(yīng)用的主要技術(shù)(蔣鑫,等,2020;鄭勤華,等,2019),探究如何解釋基于機(jī)器學(xué)習(xí)的學(xué)生成績(jī)預(yù)測(cè)模型可為人工智能教育應(yīng)用的可解釋性研究和實(shí)踐提供參考。

    本研究綜合學(xué)習(xí)分析和計(jì)算機(jī)科學(xué)兩個(gè)領(lǐng)域?qū)C(jī)器學(xué)習(xí)技術(shù)可解釋性的研究發(fā)現(xiàn),在教學(xué)場(chǎng)景中解釋基于機(jī)器學(xué)習(xí)的學(xué)生成績(jī)預(yù)測(cè)模型主要關(guān)注三個(gè)方面:預(yù)測(cè)模型結(jié)構(gòu)所代表的教育意義、預(yù)測(cè)模型內(nèi)在推理機(jī)制所揭示的預(yù)測(cè)關(guān)系和預(yù)測(cè)結(jié)果對(duì)教學(xué)實(shí)踐的啟示?;谝凰咝R粚W(xué)期的混合課程數(shù)據(jù),構(gòu)建基于學(xué)生在線學(xué)習(xí)行為的學(xué)習(xí)成績(jī)預(yù)測(cè)模型,并解釋了五種以機(jī)器學(xué)習(xí)算法構(gòu)建的學(xué)習(xí)成績(jī)預(yù)測(cè)模型。結(jié)果表明:①只采用學(xué)生的部分學(xué)習(xí)過程數(shù)據(jù)預(yù)測(cè)學(xué)習(xí)成績(jī)時(shí),學(xué)生的行為模式與學(xué)習(xí)成績(jī)的映射關(guān)系存在多種模式,試圖構(gòu)建學(xué)生在線學(xué)習(xí)行為與學(xué)生成績(jī)一一對(duì)應(yīng)預(yù)測(cè)關(guān)系的預(yù)測(cè)模型難以獲得較好的預(yù)測(cè)結(jié)果。②本研究中的預(yù)測(cè)模型最高可預(yù)測(cè)正確所有混合課程中74.7%的學(xué)生,不同學(xué)習(xí)成績(jī)等級(jí)學(xué)生的預(yù)測(cè)準(zhǔn)確率差異較大,成績(jī)?yōu)锳和B的學(xué)生其被預(yù)測(cè)準(zhǔn)確率較高,達(dá)到80.6%和85.3%,成績(jī)?yōu)镃及以下的學(xué)生其被預(yù)測(cè)準(zhǔn)確率最高只達(dá)到63%。③本研究對(duì)學(xué)生個(gè)體的預(yù)測(cè)結(jié)果只有當(dāng)學(xué)生積極參加所有在線學(xué)習(xí)活動(dòng)時(shí)才具有較高可信度,當(dāng)學(xué)生個(gè)體出現(xiàn)在線學(xué)習(xí)活動(dòng)缺失時(shí)預(yù)測(cè)結(jié)果可信度較低。

    (二)在混合課程場(chǎng)景下應(yīng)用成績(jī)預(yù)測(cè)模型的建議

    2016年,在混沌計(jì)算機(jī)俱樂部第33屆會(huì)議上,有人提出通過將人臉或車牌印刷到衣服上“偽裝”自己從而反制當(dāng)前零售行業(yè)生物數(shù)據(jù)收集以及政府隱私數(shù)據(jù)收集的方法(EDRi,2016)。學(xué)生在混合課程中的學(xué)習(xí)過程包括線上和線下兩方面,從本研究?jī)H基于學(xué)生在線學(xué)習(xí)行為數(shù)據(jù)預(yù)測(cè)學(xué)習(xí)成績(jī)的結(jié)果可發(fā)現(xiàn),當(dāng)學(xué)生的在線學(xué)習(xí)行為較少,或只做出單一種類的在線學(xué)習(xí)行為時(shí),更容易“偽裝”自己的學(xué)習(xí)成績(jī),無論使用何種機(jī)器學(xué)習(xí)算法構(gòu)建預(yù)測(cè)模型,預(yù)測(cè)結(jié)果都是不可信的。

    在當(dāng)前使用機(jī)器學(xué)習(xí)算法預(yù)測(cè)學(xué)生成績(jī)的研究中,學(xué)者們關(guān)注的重點(diǎn)仍是收集什么數(shù)據(jù),怎樣優(yōu)化算法以獲得更高的預(yù)測(cè)結(jié)果準(zhǔn)確率(Baker,2019;吳永和,等,2020)?;旌险n程場(chǎng)景的多樣性和靈活性不可能被幾種數(shù)據(jù)完全描述(牟智佳,等,2018),解釋當(dāng)前研究中準(zhǔn)確率較高的預(yù)測(cè)模型從而促進(jìn)教學(xué)實(shí)踐的關(guān)鍵在于,發(fā)現(xiàn)混合課程中對(duì)成績(jī)影響最為顯著的學(xué)習(xí)行為,發(fā)現(xiàn)學(xué)習(xí)行為與成績(jī)的多重對(duì)應(yīng)關(guān)系,從而豐富教師實(shí)施混合教學(xué)時(shí)的個(gè)性化教學(xué)方案。

    本研究通過比較多種以機(jī)器學(xué)習(xí)算法構(gòu)建的基于學(xué)生在線學(xué)習(xí)行為的混合課程學(xué)生成績(jī)預(yù)測(cè)模型,為教師在混合課程場(chǎng)景下應(yīng)用成績(jī)預(yù)測(cè)模型提出如下建議:

    1.針對(duì)混合課程特點(diǎn)應(yīng)用預(yù)測(cè)結(jié)果

    本研究中的樣本均來源于學(xué)生在線學(xué)習(xí)行為活躍度較高的混合課程,但從不同預(yù)測(cè)模型得到的結(jié)果來看只有隨機(jī)森林模型預(yù)測(cè)結(jié)果較好。這說明混合教學(xué)中學(xué)生可通過多樣化的在線學(xué)習(xí)獲得較好成績(jī),達(dá)成教學(xué)目標(biāo)的在線學(xué)習(xí)行為模式不止一種。教師應(yīng)建設(shè)多樣化的在線課程活動(dòng),給學(xué)生提供更多學(xué)習(xí)機(jī)會(huì),從而滿足不同學(xué)習(xí)偏好學(xué)生的學(xué)習(xí)需求,達(dá)成混合課程目標(biāo)。同時(shí),教師應(yīng)關(guān)注預(yù)測(cè)成績(jī)較差的學(xué)生,具有較高的在線學(xué)習(xí)活躍度卻被預(yù)測(cè)成績(jī)較差表明學(xué)生可能在學(xué)習(xí)方法或心理等其他方面出現(xiàn)了問題。

    2.理解模型的推理機(jī)制以靈活切換預(yù)測(cè)模型

    當(dāng)前在完全在線課程和混合課程情境中,多種以機(jī)器學(xué)習(xí)算法構(gòu)建的成績(jī)預(yù)測(cè)模型都被證明有較高準(zhǔn)確率。然而,本研究的結(jié)果表明相同混合課程中以不同算法構(gòu)建的預(yù)測(cè)模型具有不同的預(yù)測(cè)結(jié)果準(zhǔn)確率。這說明教師應(yīng)對(duì)機(jī)器學(xué)習(xí)算法的預(yù)測(cè)推理機(jī)制有基本的了解,從而分辨所使用的成績(jī)預(yù)測(cè)模型是否可持續(xù)優(yōu)化教學(xué)。在混合課程的教學(xué)設(shè)計(jì)發(fā)生變化時(shí),靈活使用依據(jù)不同預(yù)測(cè)推理機(jī)制構(gòu)建的預(yù)測(cè)模型有助于獲取更準(zhǔn)確的教學(xué)干預(yù)依據(jù)。

    3.依據(jù)學(xué)生在線學(xué)習(xí)行為的完整性判斷預(yù)測(cè)結(jié)果是否可信

    通過成績(jī)預(yù)測(cè)模型呈現(xiàn)班級(jí)或課程所有學(xué)生的預(yù)測(cè)結(jié)果為教師帶來的信息有限,教師更希望了解每個(gè)學(xué)生的獨(dú)特學(xué)習(xí)模式以實(shí)現(xiàn)個(gè)性化教學(xué)。因此,使用成績(jī)將學(xué)生分為多個(gè)類別并實(shí)現(xiàn)預(yù)測(cè),相較于將學(xué)生分為合格/不合格更具有教學(xué)意義。另外,在預(yù)測(cè)模型中,預(yù)測(cè)變量的重要性并非對(duì)結(jié)果變量形成的解釋,而是對(duì)得到準(zhǔn)確預(yù)測(cè)結(jié)果的貢獻(xiàn)(Ribeiro,et al.,2016)。本研究發(fā)現(xiàn),若學(xué)生個(gè)體未參與某種或某幾種在線學(xué)習(xí)活動(dòng)時(shí),對(duì)其的預(yù)測(cè)結(jié)果可信度較低。教師可依據(jù)學(xué)生在線學(xué)習(xí)行為數(shù)據(jù)是否有缺失來判斷是否依據(jù)學(xué)生個(gè)體的預(yù)測(cè)結(jié)果為學(xué)生提供個(gè)性化的幫助和支持。

    猜你喜歡
    解釋性學(xué)習(xí)成績(jī)混合
    著力構(gòu)建可解釋性模型
    混合宅
    論行政自由裁量的“解釋性控權(quán)”
    法律方法(2021年4期)2021-03-16 05:35:16
    一起來學(xué)習(xí)“混合運(yùn)算”
    名落孫山
    油水混合
    融媒體時(shí)代解釋性報(bào)道的發(fā)展之路
    傳播力研究(2017年5期)2017-03-28 09:08:30
    非解釋性憲法適用論
    大學(xué)生學(xué)習(xí)動(dòng)機(jī)與學(xué)習(xí)成績(jī)的相關(guān)研究
    人間(2015年21期)2015-03-11 15:24:34
    混合所有制
    国产精品人妻久久久影院| 最后的刺客免费高清国语| 最近手机中文字幕大全| 91成人精品电影| 午夜福利,免费看| av.在线天堂| 视频区图区小说| 人人澡人人妻人| 免费日韩欧美在线观看| videos熟女内射| 国产成人午夜福利电影在线观看| 2022亚洲国产成人精品| 国产亚洲最大av| 女性被躁到高潮视频| 国产亚洲av片在线观看秒播厂| 久久久久国产网址| 国产国语露脸激情在线看| 视频中文字幕在线观看| 热re99久久精品国产66热6| 久久狼人影院| 日韩一本色道免费dvd| 中国三级夫妇交换| 一本大道久久a久久精品| 99久久人妻综合| 国产精品.久久久| 一区在线观看完整版| 久久久久人妻精品一区果冻| 久久99热6这里只有精品| 国产xxxxx性猛交| 成人亚洲欧美一区二区av| 精品国产乱码久久久久久小说| 黄色怎么调成土黄色| 少妇熟女欧美另类| 国产精品人妻久久久久久| 亚洲精品aⅴ在线观看| 亚洲综合色惰| av又黄又爽大尺度在线免费看| 日韩三级伦理在线观看| 男人舔女人的私密视频| 又黄又爽又刺激的免费视频.| 在线观看人妻少妇| 久久久国产欧美日韩av| 熟女av电影| 美女中出高潮动态图| 国产乱人偷精品视频| 久久婷婷青草| 欧美激情 高清一区二区三区| 久久鲁丝午夜福利片| 看十八女毛片水多多多| 国产av码专区亚洲av| 欧美亚洲 丝袜 人妻 在线| 各种免费的搞黄视频| 美女xxoo啪啪120秒动态图| 精品国产国语对白av| 51国产日韩欧美| 在线亚洲精品国产二区图片欧美| 日韩视频在线欧美| 黄色一级大片看看| 满18在线观看网站| 日韩精品有码人妻一区| 久久久久视频综合| 亚洲欧洲精品一区二区精品久久久 | 久久97久久精品| 午夜精品国产一区二区电影| 欧美日本中文国产一区发布| 日韩制服骚丝袜av| 久久久久网色| 亚洲精华国产精华液的使用体验| 香蕉国产在线看| 黄色怎么调成土黄色| 欧美 日韩 精品 国产| 黄色一级大片看看| 国产一区亚洲一区在线观看| 国产精品久久久久久精品电影小说| 男女无遮挡免费网站观看| 欧美精品一区二区大全| 夫妻午夜视频| 热re99久久精品国产66热6| 精品少妇黑人巨大在线播放| 亚洲欧洲国产日韩| 国产亚洲精品久久久com| tube8黄色片| 日本-黄色视频高清免费观看| xxx大片免费视频| 美国免费a级毛片| 国产色爽女视频免费观看| 免费观看在线日韩| av一本久久久久| 久久人人爽人人片av| 亚洲,欧美精品.| 国产精品无大码| 久久青草综合色| 男人舔女人的私密视频| 国产av码专区亚洲av| xxx大片免费视频| 黄色视频在线播放观看不卡| 不卡视频在线观看欧美| 国产成人免费观看mmmm| 国产黄色视频一区二区在线观看| 国产成人精品福利久久| 99久久中文字幕三级久久日本| 春色校园在线视频观看| 赤兔流量卡办理| 亚洲精品,欧美精品| 91在线精品国自产拍蜜月| 熟妇人妻不卡中文字幕| 高清黄色对白视频在线免费看| 大片电影免费在线观看免费| 欧美3d第一页| 亚洲av电影在线进入| 十分钟在线观看高清视频www| 欧美人与性动交α欧美软件 | 中国国产av一级| 飞空精品影院首页| 99国产综合亚洲精品| 啦啦啦在线观看免费高清www| 美女国产高潮福利片在线看| 午夜福利,免费看| 26uuu在线亚洲综合色| 精品国产国语对白av| 天天影视国产精品| 日韩人妻精品一区2区三区| 国产日韩一区二区三区精品不卡| 久久精品国产a三级三级三级| av.在线天堂| 国产精品欧美亚洲77777| 日韩一区二区三区影片| 在线天堂中文资源库| 亚洲国产av新网站| 久久精品夜色国产| 久久久国产精品麻豆| 少妇的丰满在线观看| 丝袜脚勾引网站| 国产毛片在线视频| av免费在线看不卡| 日韩一区二区三区影片| 黑丝袜美女国产一区| 国产一区亚洲一区在线观看| 麻豆精品久久久久久蜜桃| 成年人免费黄色播放视频| 极品人妻少妇av视频| 热99国产精品久久久久久7| 国产av一区二区精品久久| 亚洲色图 男人天堂 中文字幕 | 亚洲成av片中文字幕在线观看 | 午夜激情久久久久久久| 黄色 视频免费看| 亚洲成人av在线免费| 精品午夜福利在线看| 久久久久国产精品人妻一区二区| 日本黄色日本黄色录像| av免费在线看不卡| 一级黄片播放器| 亚洲在久久综合| 国产麻豆69| 一级毛片我不卡| 一区二区日韩欧美中文字幕 | 美女国产高潮福利片在线看| 亚洲国产日韩一区二区| av又黄又爽大尺度在线免费看| 少妇人妻精品综合一区二区| 九草在线视频观看| 97在线视频观看| 亚洲国产欧美日韩在线播放| 亚洲第一区二区三区不卡| 欧美少妇被猛烈插入视频| 久热久热在线精品观看| 亚洲成人av在线免费| 成人国语在线视频| 99久久精品国产国产毛片| 热re99久久精品国产66热6| 巨乳人妻的诱惑在线观看| 99国产精品免费福利视频| 欧美日韩视频精品一区| 一级片'在线观看视频| 久久久久久久亚洲中文字幕| 老司机影院毛片| 菩萨蛮人人尽说江南好唐韦庄| 好男人视频免费观看在线| 啦啦啦啦在线视频资源| 少妇被粗大的猛进出69影院 | 2018国产大陆天天弄谢| 婷婷色综合www| 国产精品麻豆人妻色哟哟久久| 熟女电影av网| 国产成人免费观看mmmm| 亚洲av免费高清在线观看| 美女中出高潮动态图| 久久精品人人爽人人爽视色| 精品一区二区三区四区五区乱码 | 国语对白做爰xxxⅹ性视频网站| 蜜桃国产av成人99| 成年人免费黄色播放视频| 人人妻人人澡人人看| 亚洲国产最新在线播放| 日韩制服丝袜自拍偷拍| 久久久久精品人妻al黑| 日韩精品有码人妻一区| 好男人视频免费观看在线| av在线老鸭窝| 国产成人精品久久久久久| 午夜激情久久久久久久| 少妇 在线观看| 国产精品麻豆人妻色哟哟久久| 中文天堂在线官网| 少妇的逼好多水| 一本久久精品| 国产精品蜜桃在线观看| 国产伦理片在线播放av一区| 2022亚洲国产成人精品| 男女国产视频网站| 国产精品一区www在线观看| 精品国产一区二区三区四区第35| 视频在线观看一区二区三区| √禁漫天堂资源中文www| 国语对白做爰xxxⅹ性视频网站| 国产亚洲av片在线观看秒播厂| 99视频精品全部免费 在线| 午夜日本视频在线| 欧美另类一区| 国产精品久久久久久精品电影小说| 久久婷婷青草| 亚洲av欧美aⅴ国产| 亚洲综合色网址| 欧美人与性动交α欧美软件 | 国产成人精品福利久久| 中文字幕人妻熟女乱码| 精品卡一卡二卡四卡免费| 国产乱人偷精品视频| 欧美日韩一区二区视频在线观看视频在线| 亚洲精品色激情综合| 中文字幕av电影在线播放| 亚洲av综合色区一区| 午夜福利,免费看| 国产黄频视频在线观看| 中文字幕最新亚洲高清| 99热6这里只有精品| 国产成人一区二区在线| 亚洲熟女精品中文字幕| 久久97久久精品| 黑人巨大精品欧美一区二区蜜桃 | 亚洲欧美日韩卡通动漫| 国产欧美日韩一区二区三区在线| 日韩熟女老妇一区二区性免费视频| 亚洲综合色惰| 2021少妇久久久久久久久久久| 国产精品久久久av美女十八| 精品福利永久在线观看| 中文字幕最新亚洲高清| 欧美亚洲日本最大视频资源| 亚洲在久久综合| 国产精品三级大全| 国产免费又黄又爽又色| 亚洲国产精品专区欧美| 久久久久久人妻| 最新的欧美精品一区二区| 日韩欧美精品免费久久| 日韩熟女老妇一区二区性免费视频| 成人影院久久| 久久狼人影院| 精品午夜福利在线看| 精品99又大又爽又粗少妇毛片| 1024视频免费在线观看| 9热在线视频观看99| 成人亚洲欧美一区二区av| 视频中文字幕在线观看| 中国美白少妇内射xxxbb| 国产欧美另类精品又又久久亚洲欧美| 九九爱精品视频在线观看| 最新的欧美精品一区二区| 国内精品宾馆在线| 精品国产一区二区三区久久久樱花| 日本av手机在线免费观看| 一区二区日韩欧美中文字幕 | 天天躁夜夜躁狠狠躁躁| av免费观看日本| 一级黄片播放器| 最近最新中文字幕大全免费视频 | 一级,二级,三级黄色视频| 最近手机中文字幕大全| 99国产综合亚洲精品| 久久97久久精品| 午夜免费男女啪啪视频观看| 色哟哟·www| 一个人免费看片子| 99久久中文字幕三级久久日本| 在线亚洲精品国产二区图片欧美| 亚洲美女黄色视频免费看| 97人妻天天添夜夜摸| 插逼视频在线观看| 亚洲,一卡二卡三卡| 免费看不卡的av| 亚洲国产欧美在线一区| 午夜福利视频在线观看免费| 女人精品久久久久毛片| 国产在线一区二区三区精| 五月伊人婷婷丁香| 成人二区视频| 亚洲美女黄色视频免费看| 久久久久国产精品人妻一区二区| 22中文网久久字幕| 国产片特级美女逼逼视频| 美女脱内裤让男人舔精品视频| 亚洲欧美日韩卡通动漫| 欧美激情极品国产一区二区三区 | 国产高清不卡午夜福利| 好男人视频免费观看在线| 国产在线视频一区二区| 亚洲精品久久午夜乱码| 精品少妇黑人巨大在线播放| 国产成人av激情在线播放| 亚洲人成网站在线观看播放| √禁漫天堂资源中文www| 国产又爽黄色视频| 日韩三级伦理在线观看| 一级爰片在线观看| 日韩中文字幕视频在线看片| 亚洲精品一区蜜桃| 少妇人妻久久综合中文| 国产av精品麻豆| 国产高清国产精品国产三级| 亚洲精品久久成人aⅴ小说| 一级毛片 在线播放| 精品99又大又爽又粗少妇毛片| 亚洲熟女精品中文字幕| 欧美 日韩 精品 国产| 成人手机av| 麻豆乱淫一区二区| 婷婷色麻豆天堂久久| 丝袜脚勾引网站| 在线看a的网站| 一级毛片我不卡| 色94色欧美一区二区| 免费观看无遮挡的男女| 国产精品不卡视频一区二区| 国产精品无大码| 最近中文字幕高清免费大全6| 国产乱人偷精品视频| 人成视频在线观看免费观看| 综合色丁香网| 亚洲精品456在线播放app| 亚洲av国产av综合av卡| 欧美精品亚洲一区二区| 成人亚洲欧美一区二区av| 中文精品一卡2卡3卡4更新| 国产亚洲精品久久久com| 另类亚洲欧美激情| 久久99精品国语久久久| 人人澡人人妻人| 成年av动漫网址| 欧美日本中文国产一区发布| 在线观看三级黄色| 蜜桃国产av成人99| 亚洲,欧美,日韩| 亚洲精品乱久久久久久| 丰满饥渴人妻一区二区三| 成人亚洲欧美一区二区av| 成人18禁高潮啪啪吃奶动态图| 国产日韩欧美亚洲二区| 只有这里有精品99| 91精品伊人久久大香线蕉| 天天影视国产精品| 国产成人精品久久久久久| av在线播放精品| 久久久久久久亚洲中文字幕| a级毛片在线看网站| 国产1区2区3区精品| 精品人妻一区二区三区麻豆| 18在线观看网站| 王馨瑶露胸无遮挡在线观看| 男女午夜视频在线观看 | 一级片'在线观看视频| 乱人伦中国视频| 日本wwww免费看| 99久久人妻综合| 精品一区二区免费观看| videos熟女内射| 我的女老师完整版在线观看| 午夜福利视频在线观看免费| 2018国产大陆天天弄谢| 国产精品国产av在线观看| 多毛熟女@视频| 午夜视频国产福利| 欧美性感艳星| 黄色一级大片看看| 一区二区三区乱码不卡18| 最近中文字幕2019免费版| 色视频在线一区二区三区| 精品一区二区三卡| 国产精品秋霞免费鲁丝片| 亚洲精品中文字幕在线视频| 18在线观看网站| 亚洲 欧美一区二区三区| 色视频在线一区二区三区| 国产一级毛片在线| 久久久国产精品麻豆| 亚洲成国产人片在线观看| www日本在线高清视频| 亚洲,欧美精品.| 大码成人一级视频| 男人舔女人的私密视频| 婷婷色麻豆天堂久久| 国产精品久久久久成人av| 亚洲在久久综合| 免费久久久久久久精品成人欧美视频 | 欧美人与性动交α欧美软件 | 国精品久久久久久国模美| 午夜影院在线不卡| 99热国产这里只有精品6| 久久久久国产精品人妻一区二区| 香蕉丝袜av| 日日摸夜夜添夜夜爱| 国产午夜精品一二区理论片| 桃花免费在线播放| 亚洲国产欧美日韩在线播放| 视频在线观看一区二区三区| 在线 av 中文字幕| 国产高清不卡午夜福利| 亚洲,一卡二卡三卡| 久久久欧美国产精品| 精品久久久久久电影网| 99久久人妻综合| 爱豆传媒免费全集在线观看| 赤兔流量卡办理| 国产综合精华液| 国产精品.久久久| 人妻人人澡人人爽人人| 亚洲av欧美aⅴ国产| 麻豆乱淫一区二区| 看非洲黑人一级黄片| av黄色大香蕉| 国产精品三级大全| 亚洲精品美女久久久久99蜜臀 | 国产成人精品久久久久久| 水蜜桃什么品种好| 成人黄色视频免费在线看| 国产深夜福利视频在线观看| 啦啦啦在线观看免费高清www| 另类亚洲欧美激情| 中文字幕av电影在线播放| 美女脱内裤让男人舔精品视频| 久久久久网色| 黄片无遮挡物在线观看| 精品亚洲乱码少妇综合久久| 一边亲一边摸免费视频| 亚洲久久久国产精品| 亚洲高清免费不卡视频| 午夜福利网站1000一区二区三区| 人妻系列 视频| 日韩伦理黄色片| 久久久a久久爽久久v久久| 男女边吃奶边做爰视频| 国产在线视频一区二区| 最近手机中文字幕大全| 这个男人来自地球电影免费观看 | 99热6这里只有精品| 69精品国产乱码久久久| av在线老鸭窝| 国产日韩一区二区三区精品不卡| 日韩中字成人| av线在线观看网站| 国产亚洲欧美精品永久| 免费在线观看完整版高清| 久久韩国三级中文字幕| 国产女主播在线喷水免费视频网站| 亚洲五月色婷婷综合| av福利片在线| 巨乳人妻的诱惑在线观看| 制服人妻中文乱码| 欧美最新免费一区二区三区| 97人妻天天添夜夜摸| 成人黄色视频免费在线看| 伊人久久国产一区二区| 免费av中文字幕在线| 国产一区二区三区综合在线观看 | 日韩av在线免费看完整版不卡| 热re99久久精品国产66热6| 精品一区二区三区四区五区乱码 | 国产精品久久久久久精品古装| 天天躁夜夜躁狠狠久久av| 美女国产高潮福利片在线看| 亚洲第一区二区三区不卡| av不卡在线播放| 插逼视频在线观看| av女优亚洲男人天堂| 制服诱惑二区| 国产亚洲精品第一综合不卡 | 国产在线视频一区二区| 国产精品久久久久成人av| 亚洲精品久久久久久婷婷小说| 久久久久久人人人人人| 最新中文字幕久久久久| 日本欧美视频一区| 美女xxoo啪啪120秒动态图| 久久国产精品大桥未久av| 午夜激情av网站| 国产一区二区在线观看日韩| 国产免费又黄又爽又色| 日本av手机在线免费观看| 日本免费在线观看一区| 欧美成人午夜精品| 亚洲综合色惰| 亚洲精品一二三| 好男人视频免费观看在线| 国产永久视频网站| 晚上一个人看的免费电影| 菩萨蛮人人尽说江南好唐韦庄| 秋霞伦理黄片| av国产精品久久久久影院| 寂寞人妻少妇视频99o| 久久久精品区二区三区| 最近最新中文字幕免费大全7| 蜜桃在线观看..| 好男人视频免费观看在线| 一级,二级,三级黄色视频| 久久人人97超碰香蕉20202| 啦啦啦在线观看免费高清www| 在线精品无人区一区二区三| 亚洲四区av| 亚洲色图 男人天堂 中文字幕 | 久久这里只有精品19| 两个人免费观看高清视频| 卡戴珊不雅视频在线播放| 亚洲国产精品一区二区三区在线| 香蕉精品网在线| 在线观看三级黄色| 成年人免费黄色播放视频| 国产老妇伦熟女老妇高清| 在线观看免费日韩欧美大片| videos熟女内射| 亚洲av电影在线观看一区二区三区| 免费看光身美女| 中文乱码字字幕精品一区二区三区| 国产熟女午夜一区二区三区| 在线观看一区二区三区激情| 黄色怎么调成土黄色| 大话2 男鬼变身卡| 婷婷色av中文字幕| 啦啦啦在线观看免费高清www| 日韩,欧美,国产一区二区三区| 亚洲av免费高清在线观看| 免费观看a级毛片全部| 少妇精品久久久久久久| 日本av手机在线免费观看| 满18在线观看网站| 18禁观看日本| 多毛熟女@视频| 免费高清在线观看日韩| 99热这里只有是精品在线观看| 成人国语在线视频| 十八禁网站网址无遮挡| 亚洲国产色片| 国产精品无大码| 成人综合一区亚洲| 91精品国产国语对白视频| 91午夜精品亚洲一区二区三区| 精品亚洲乱码少妇综合久久| 精品一区在线观看国产| 精品国产露脸久久av麻豆| 国产69精品久久久久777片| 大码成人一级视频| 国产在线免费精品| 在线免费观看不下载黄p国产| av片东京热男人的天堂| 亚洲成av片中文字幕在线观看 | 国产精品久久久久久久久免| 亚洲av福利一区| 日本黄色日本黄色录像| 熟女人妻精品中文字幕| 精品一区二区三区四区五区乱码 | 国国产精品蜜臀av免费| 国产白丝娇喘喷水9色精品| 久久人人爽人人片av| 一本色道久久久久久精品综合| 精品少妇黑人巨大在线播放| 下体分泌物呈黄色| 日本vs欧美在线观看视频| 人妻一区二区av| 欧美国产精品va在线观看不卡| 日本色播在线视频| 人妻 亚洲 视频| 综合色丁香网| 99视频精品全部免费 在线| 亚洲精品日本国产第一区| 大香蕉久久成人网| 亚洲精品一区蜜桃| 久久人人爽人人爽人人片va| 国产伦理片在线播放av一区| 美女福利国产在线| 男女免费视频国产| 韩国高清视频一区二区三区| 日韩不卡一区二区三区视频在线| 国产精品麻豆人妻色哟哟久久| 免费av中文字幕在线| 热99久久久久精品小说推荐| 免费观看性生交大片5| 99视频精品全部免费 在线| 亚洲欧美一区二区三区国产| 街头女战士在线观看网站| 久久国产亚洲av麻豆专区| videosex国产| a级毛片黄视频| 蜜臀久久99精品久久宅男| 欧美日韩亚洲高清精品| 亚洲av.av天堂| 国产av一区二区精品久久| av国产精品久久久久影院| 国产熟女欧美一区二区| 人妻少妇偷人精品九色| 婷婷色综合大香蕉| 乱人伦中国视频| 久久久精品94久久精品| 国产在线免费精品| 精品一区二区三区视频在线| 如日韩欧美国产精品一区二区三区|