• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于深度學(xué)習(xí)算法的學(xué)科試卷知識點關(guān)聯(lián)結(jié)構(gòu)研究

    2024-01-01 00:00:00趙寧寧葉楠陳小涵王迪溫紅博
    考試研究 2024年5期
    關(guān)鍵詞:學(xué)科

    [摘 要] 機(jī)器學(xué)習(xí)可幫助教師挖掘試卷中知識點之間的關(guān)系,檢測學(xué)生知識點掌握情況,為評價反饋提供支持。使用深度學(xué)習(xí)Apriori算法,通過模擬研究和實證研究,針對具有不同知識點結(jié)構(gòu)的試卷進(jìn)行挖掘分析。模擬研究發(fā)現(xiàn):Apriori算法能針對知識點屬性復(fù)雜的試題進(jìn)行知識點間關(guān)聯(lián)規(guī)則的挖掘,準(zhǔn)確率較高;隨著樣本量的增加,挖掘的準(zhǔn)確率增加。實證研究發(fā)現(xiàn):Apriori算法可對中小學(xué)的語文、數(shù)學(xué)、小學(xué)科學(xué)、中學(xué)物理等學(xué)科的試卷進(jìn)行知識點間關(guān)聯(lián)規(guī)則挖掘,但學(xué)科間挖掘結(jié)果有差異。經(jīng)過粒度優(yōu)化、刪除基礎(chǔ)知識點后,Apriori算法可較好挖掘中小學(xué)語文、數(shù)學(xué)剩余知識點間的關(guān)聯(lián)關(guān)系,但對跨學(xué)科的知識點關(guān)系挖掘有待提升。

    [關(guān)鍵詞] 知識關(guān)聯(lián)規(guī)則;Apriori算法;學(xué)科;跨學(xué)科;不同知識點結(jié)構(gòu)

    [中圖分類號] G424.74 [文獻(xiàn)標(biāo)識碼] A

    [文章編號] 1673—1654(2024)05—009—015

    一、問題緣起

    測試有助于評價學(xué)生對學(xué)科的某一單元、某個學(xué)期、某個學(xué)年知識點的掌握情況。教師結(jié)合測試結(jié)果判斷學(xué)生知識點缺失情況,針對學(xué)生欠缺的知識點進(jìn)行專題彌補(bǔ),能夠有效提升教學(xué)效率。

    已有研究利用數(shù)據(jù)挖掘的方式對試卷內(nèi)在知識結(jié)構(gòu)進(jìn)行挖掘,常見算法包括決策樹、Apriori算法、聚類算法等。Bello等人通過分類算法和聚類算法(NB、KNN、C4.5、SVM、K-means)分析試卷,從海量的學(xué)習(xí)數(shù)據(jù)里面挖掘出潛藏在成績背后的知識結(jié)構(gòu)、學(xué)生學(xué)習(xí)結(jié)果產(chǎn)出的原因,從而對教學(xué)提出建議[1]。Kahya采用新的K-means算法分析學(xué)生測試數(shù)據(jù),找出學(xué)生某門科目學(xué)習(xí)的內(nèi)在知識點關(guān)聯(lián)[2]。Tsytsarau M.等人則引入Bayesian 理論,提升學(xué)生成績挖掘的準(zhǔn)確度[3]。

    在我國,有研究者利用機(jī)器學(xué)習(xí)的算法對試卷中的內(nèi)在知識關(guān)聯(lián)進(jìn)行挖掘,并將得到的結(jié)果投入到教學(xué)應(yīng)用中。如2016年,劉愛萍采用KNN算法,訓(xùn)練預(yù)測因子,提高了數(shù)據(jù)挖掘的準(zhǔn)確度和預(yù)測速度[4]。馬瑩等人基于知識關(guān)聯(lián)規(guī)則和聚類算法,挖掘影響學(xué)生成績的真實原因[5]。

    在知識點關(guān)聯(lián)的挖掘研究中,Apriori算法是一種常見的算法,用來建立知識點間的關(guān)聯(lián)規(guī)則。早期,學(xué)者們基于分而治之的思想,采用蟻群算法,對Apriori算法結(jié)構(gòu)進(jìn)行優(yōu)化[6]。2010年,有學(xué)者使用Apriori算法挖掘網(wǎng)絡(luò)平臺的學(xué)習(xí)成績[7]。2012年,白彥輝使用Apriori算法,對試題上的重點知識點、難點知識點進(jìn)行了數(shù)據(jù)劃分,將每個知識點下的分?jǐn)?shù)都劃分為三或四個等級,拓寬了知識點粒度,挖掘到學(xué)生的薄弱知識點[8]。2014年,黃藝?yán)な褂肕I-Apriori算法構(gòu)建高頻集,進(jìn)行學(xué)生群體劃分,通過矩陣壓縮建立項集索引表,挖掘出教學(xué)重難點,解決了自動組卷中的教學(xué)評價問題[9]。李志軍等人利用Apriori算法分析學(xué)生成績,找出了課程之間的隱含的聯(lián)系[10]。2018年,李毅使用Apriori算法,依據(jù)學(xué)生答題數(shù)據(jù),分析出試卷中各題目對應(yīng)知識點間的關(guān)聯(lián)性[11]。又有研究者針對2017年常州市某中學(xué)七年級的6套題目,根據(jù)知識點掌握程度,通過學(xué)生作答,挖掘兩者之間的深層次的關(guān)聯(lián)[12]。2017年,袁路妍、李鋒利用改進(jìn)的關(guān)聯(lián)規(guī)則 Apriori 算法,減少無效比較的次數(shù)[13]。2018年,李毅在細(xì)致劃分?jǐn)?shù)學(xué)試卷考查知識點的基礎(chǔ)上,運(yùn)用Apriori算法分析了試卷中各知識點間的隱含關(guān)聯(lián)關(guān)系[11]。已有研究的算法均基于頻繁項集的查找,每運(yùn)行一次算法就要遍歷一次數(shù)據(jù),生成所有的項集集合,增加了計算的功耗,計算效率較低。自2020年,有學(xué)者通過對算法進(jìn)行性能分析,在生成的集合中剔除非頻繁集合項,改善挖掘效率,提升Apriori算法的支持度和可信度[14]。

    前人的學(xué)術(shù)成果為后續(xù)研究打下了堅實的基礎(chǔ)。但是,已有研究只針對單一學(xué)科,且沒有比較不同類型的知識結(jié)構(gòu)情況的挖掘效果,缺乏大數(shù)據(jù)集的實證檢驗。因此,本研究開展模擬研究和實證研究,試圖探究Apriori算法對擁有不同知識點關(guān)聯(lián)的試卷挖掘的適用性。

    二、Apriori算法在試卷知識點關(guān)聯(lián)中的應(yīng)用研究

    Apriori算法是關(guān)聯(lián)規(guī)則挖掘算法中最經(jīng)典的算法。20世紀(jì)60年代,學(xué)者Hájek、Havel和Chytil提出了算法思想[15]。20世紀(jì)90年代,Agrawal 等人改善了算法。學(xué)者們對單層、多層、基于圖等關(guān)聯(lián)規(guī)則進(jìn)行挖掘,實現(xiàn)了算法的具體操作。Apriori算法從大數(shù)據(jù)集中挖掘頻繁項集,找出關(guān)聯(lián)規(guī)則。

    (一)Apriori算法的指標(biāo)

    Apriori算法有三個重要的判斷指標(biāo):支持度、置信度、提升度。

    支持度(support)是一個用來表明頻繁項在整個項集中(D)出現(xiàn)的頻繁程度的指標(biāo)。計算公式為:

    Support(X)=count(X)/count(D) (1)

    關(guān)聯(lián)規(guī)則支持度指的是X=gt;Y的支持度,等于集合X∪Y的支持度。表示集合X和集合Y中的項在全部的數(shù)據(jù)集中出現(xiàn)的概率。計算公式為:

    Support(X=gt;Y)=Support(X∪Y)=count(X∪Y)count(D)" " " " " " (2)

    關(guān)聯(lián)規(guī)則置信度(confidence)表明在X集合出現(xiàn)的情況下,Y集合出現(xiàn)的概率的大小,等于集合X∪Y的支持度和集合X的支持度的比例,從概率論的意義來說就是P(X|Y)=P(XY)/P(Y)。計算公式為:

    Confidence(X=gt;Y)=Support(X∪Y)/Support(X)" " " (3)

    關(guān)聯(lián)規(guī)則提升度(lift)可以用來判斷一個題項對另一個題項提升的程度。主要有兩個數(shù)值需要注意,一個是liftgt;1,表明這樣的關(guān)聯(lián)是存在意義的,也就是說一個題項跟另一個題項之間是存在正相關(guān)關(guān)系的。但如果要尋找有用的關(guān)聯(lián),則需要liftgt;3。用概率論的思想來解釋lift,為P(X|Y)/P(Y)=(P(XY)/P(Y))/P(Y)。計算公式為:

    lift(X=gt;Y)=confidence(X=gt;Y)/Support(X)" (4)

    一般而言,支持度和置信度的值越大,關(guān)聯(lián)規(guī)則的可靠性越高。而提升度越大,表明兩者關(guān)聯(lián)關(guān)系越緊密。

    (二)Apriori算法的運(yùn)行

    Apriori算法運(yùn)行過程如圖1所示:

    三、研究思路

    (一)研究問題

    第一,基于模擬研究,Apriori算法在不同樣本量條件下,針對擁有不同類型的知識點關(guān)聯(lián)規(guī)則的試卷的適用性如何?

    第二,基于實證數(shù)據(jù),Apriori算法在對擁有不同知識點關(guān)聯(lián)規(guī)則的語文、數(shù)學(xué)、小學(xué)科學(xué)、中學(xué)物理等試卷的適用性如何?

    (二)研究步驟

    研究一:基于認(rèn)知診斷理論下的DINA模型,模擬在不同的樣本量、知識點屬性結(jié)構(gòu)及個數(shù)條件下學(xué)生的作答反應(yīng),使用Apriori算法對知識點關(guān)聯(lián)規(guī)則及知識點間屬性層次結(jié)構(gòu)進(jìn)行驗證,判斷Apriori算法的準(zhǔn)確度。

    研究二:基于實證研究的數(shù)據(jù),針對知識點關(guān)聯(lián)程度不同的語文、數(shù)學(xué)和科學(xué)試卷,Apriori算法推斷的知識關(guān)聯(lián)關(guān)系存在的差異,再針對“科學(xué)”學(xué)科在不同年級間的差異,進(jìn)行詳細(xì)分析和比較。

    本研究使用R軟件中的arules包對數(shù)據(jù)進(jìn)行分析與挖掘。

    首先需要對數(shù)據(jù)運(yùn)行和清理,并將其轉(zhuǎn)化為Apriori算法可識別和運(yùn)行的數(shù)據(jù)形式,生成試卷內(nèi)知識點間關(guān)聯(lián)關(guān)系,并進(jìn)行可視化處理。挖掘過程如圖2所示:

    第一步:異常數(shù)據(jù)或特殊作答模式清理。查看數(shù)據(jù)集相關(guān)的統(tǒng)計匯總信息,通過計算項目答對率并繪制各題答對率分布圖,使用arules包中的sample函數(shù)對異常數(shù)據(jù)或特殊模式進(jìn)行識別和清理,獲得可進(jìn)一步分析關(guān)聯(lián)規(guī)則的挖掘庫。

    第二步:對數(shù)據(jù)庫進(jìn)行知識點關(guān)聯(lián)規(guī)則的挖掘。Apriori算法arules包中的apriori()函數(shù)默認(rèn)參數(shù)值設(shè)定為支持度(support)=0.1,置信度(confidence)=0.8。為了避免參數(shù)設(shè)置不當(dāng)而產(chǎn)生大量不可靠的規(guī)則,在實際數(shù)據(jù)分析中對支持度和置信度的參數(shù)進(jìn)行適當(dāng)調(diào)整,以便能夠挖掘到合理數(shù)量并且有意義的關(guān)聯(lián)規(guī)則。經(jīng)上述過程可得到知識點的關(guān)聯(lián)規(guī)則,通常將規(guī)則劃分為三大類:

    第一種有效規(guī)則(actionable),是指規(guī)則鮮明清晰、有價值;

    第二種基本規(guī)則(trivial),是指規(guī)則是顯而易見的,直觀明確但價值不大;

    第三種難以解釋規(guī)則(inexplicable),是指一些難以解釋的規(guī)則,需要進(jìn)行額外的研究來判定。

    同時,這種關(guān)聯(lián)規(guī)則可以實現(xiàn)可視化。如圖3所示,x軸代表的是支持度,y軸代表的是置信度。其中每一個關(guān)聯(lián)規(guī)則顏色的深淺,是由支持度和置信度這兩個度量值所對應(yīng)的參數(shù)值和提升度lift的值來決定的。顏色越深表明提升度比較高,越淺表明有相關(guān)但并非強(qiáng)有效的規(guī)則。當(dāng)知識點屬性過多的時候,支持度會比較低,關(guān)聯(lián)規(guī)則的挖掘是交互式的,需要不斷地檢查、優(yōu)化。

    第三步:進(jìn)一步優(yōu)化知識點關(guān)聯(lián)規(guī)則的挖掘。如果知識點關(guān)聯(lián)規(guī)則挖掘得不夠好,可以從知識點粒度屬性上進(jìn)行優(yōu)化,刪除一些簡單的知識點,重新挖掘關(guān)聯(lián)規(guī)則,得到有意義的關(guān)聯(lián)信息。

    四、研究結(jié)果

    (一)模擬研究

    1. 研究問題

    基于模擬研究,對比Apriori算法針對不同樣本量、不同知識點關(guān)聯(lián)規(guī)則的試卷的適用性如何?

    研究方法如下:

    第一步,模擬數(shù)據(jù)。根據(jù)認(rèn)知診斷理論DINA模型(Deterministic Inputs,Noisy“and”Gate Model)(JunKer amp; Sijtsma,2001),構(gòu)建單一知識點和復(fù)雜知識點的Q矩陣,使用R package使CDM中的DINA模型生成學(xué)生作答反應(yīng)。

    根據(jù)DINA模型的項目反應(yīng)函數(shù)如下:

    P(Yij=1|αk)=(1?si)[ηij]gi[1-ηij] (5)

    其中,[ηij=k=1Kαqjkik]" (6)

    研究重點關(guān)注兩個條件下,Apriori算法對試卷中知識規(guī)則挖掘的適用性。第一是知識點關(guān)聯(lián)的復(fù)雜程度,包括了一個單一知識點和兩個復(fù)雜知識點類型。第二是學(xué)生樣本數(shù)的多少,樣本數(shù)設(shè)置為50、500、1000、5000、10000等人數(shù)的條件。題目數(shù)設(shè)定為5道題和5個屬性,樣本參數(shù)中的猜測參數(shù)和失誤參數(shù)范圍為(0.1,0.3)。

    具體說來:

    (1)單一知識點是指知識點之間相互獨立,且知識點間為平行關(guān)系,也就是每個知識點的掌握與否并不影響其他知識點的掌握。那么,在驗證之前預(yù)先判定,知識點間無關(guān)聯(lián),或者關(guān)聯(lián)強(qiáng)度不大,知識點關(guān)聯(lián)規(guī)則可能會出現(xiàn)無序狀態(tài)。圖4為第一種情況下的知識點屬性Q矩陣列表。

    (2)復(fù)雜知識點的Q矩陣

    復(fù)雜知識點有兩種子類。

    第一種復(fù)雜知識點的Q矩陣見圖5?;趫D5,可能挖掘出來的知識點關(guān)聯(lián)規(guī)則包括:A4—gt;A1、A2;A5—gt;A4、A2、A1、A3。例如若要掌握知識點A4,需要先掌握知識點A1和A2,即不同知識點之間存在層級關(guān)系。

    第二種復(fù)雜知識點屬性Q矩陣見圖6?;趫D6,可能挖掘出來的知識點關(guān)聯(lián)規(guī)則包括:A4—gt;A1、A2、A3;A5—gt;A4、A1、A2、A3。

    基于上述知識點結(jié)構(gòu),分析在不同的樣本量下知識點關(guān)聯(lián)規(guī)則的規(guī)律。

    第二步,利用Apriori算法進(jìn)行探索,分析其生成的知識點關(guān)聯(lián)規(guī)則與假設(shè)是否一致,從而判斷算法的適用性。

    2.研究結(jié)果

    (1)單一知識點和復(fù)雜知識點條件下,知識關(guān)聯(lián)規(guī)則散點圖對比

    研究對比了不同樣本量情況下Apriori算法在單一知識點和復(fù)雜知識點條件下的挖掘效果,通過散點圖可以直接觀察到知識點間的關(guān)聯(lián)關(guān)系。

    由表1可知:

    第一,對于單一知識點來說,單一知識點的散點分布較多,Apriori算法所生成的知識點關(guān)聯(lián)沒有規(guī)律;且隨著樣本數(shù)的增加,單一知識點的知識點之內(nèi)產(chǎn)生了許多虛假的關(guān)聯(lián)。

    第二,對于復(fù)雜知識點來說,隨著樣本量的增加,Apriori算法所估計出來的知識點間關(guān)聯(lián)規(guī)則越來越具有規(guī)律性。其中提升度(lift)值大于1的關(guān)聯(lián)規(guī)則較多。

    (2)單一知識點和復(fù)雜知識點條件下知識關(guān)聯(lián)規(guī)則對比

    研究發(fā)現(xiàn),隨著樣本量的變化,單一知識點間沒有出現(xiàn)固定的關(guān)聯(lián)規(guī)則,表明知識點間不存在有意義的關(guān)聯(lián);而隨著樣本量增加,復(fù)雜知識點的關(guān)聯(lián)規(guī)則呈現(xiàn)出穩(wěn)定性和規(guī)律性。表2是不同模擬條件下,算法生成的知識關(guān)聯(lián)規(guī)則。

    第一,在單一知識點條件下,知識關(guān)聯(lián)規(guī)則產(chǎn)生于support=0.2,confidence=0.6的參數(shù)條件。無論樣本量多少,Apriori算法所挖掘出來的知識點關(guān)聯(lián)規(guī)則均未呈現(xiàn)固定的結(jié)構(gòu)。這表明,Apriori算法無法針對存在平行關(guān)系的知識點間挖掘出穩(wěn)定的關(guān)聯(lián)結(jié)構(gòu)。

    第二,在復(fù)雜知識點條件下,知識關(guān)聯(lián)規(guī)則產(chǎn)生于support=0.1,confidence=0.4的參數(shù)條件下。如對于復(fù)雜知識點屬性結(jié)構(gòu)一來說,知識關(guān)聯(lián)規(guī)則包括item5=gt;item1,item2,item3,item4=gt;item1,item2,item3。即若學(xué)生掌握了題目4或題目5的知識點,則大概率是已掌握了題目1、2、3所考查的知識點。這符合在數(shù)據(jù)模擬的時候?qū)τ陬}目之間關(guān)系的架構(gòu)。同時,隨著樣本量的增多,Apriori算法進(jìn)行知識點關(guān)聯(lián)規(guī)則挖掘的準(zhǔn)確度也會增加。

    (3)單一知識點和復(fù)雜知識點條件下知識關(guān)聯(lián)規(guī)則可視化對比

    根據(jù)以上規(guī)則進(jìn)行規(guī)則的可視化。以下是不同類型知識點生成的強(qiáng)關(guān)聯(lián)規(guī)則可視化:

    在單一知識點條件下,不同樣本量下規(guī)則出現(xiàn)了無序的變化。而在復(fù)雜知識點條件下,屬性層級結(jié)構(gòu)一和二的關(guān)聯(lián)規(guī)則可視化圖顯示,隨著樣本量增加,規(guī)則趨于穩(wěn)定結(jié)構(gòu)。

    關(guān)于圓圈顏色深淺lift和圓圈support大?。侯伾缴?,說前因子集對后因子的提升力越強(qiáng),影響程度越大;圓圈越大,表明前因子集和后因子集共同出現(xiàn)概率越高,關(guān)聯(lián)越強(qiáng)。基于模擬數(shù)據(jù),屬性層級結(jié)構(gòu)一和二結(jié)論是相同的,同樣item4和item5之間的關(guān)聯(lián)性較弱,但相較知識點層級結(jié)構(gòu)一,層級結(jié)構(gòu)二生成的關(guān)聯(lián)規(guī)則會有細(xì)微差別,代表知識點屬性層級結(jié)構(gòu)的差別會帶來知識點關(guān)聯(lián)規(guī)則的差別。兩項研究均表明,Apriori算法可以驗證知識點關(guān)聯(lián)結(jié)構(gòu)。

    (二)實證研究

    1. 研究問題

    基于實證數(shù)據(jù),對比Apriori算法對擁有不同知識點關(guān)聯(lián)規(guī)則的不同年級、不同學(xué)科(語文、數(shù)學(xué)、小學(xué)科學(xué)和中學(xué)物理等)的試卷的適用性如何?

    2. 研究方法

    第一步,利用算法對試卷進(jìn)行知識關(guān)聯(lián)分析。

    第二步,為了判斷知識關(guān)聯(lián)的準(zhǔn)確性,經(jīng)過與學(xué)科專家及一線教師的討論,對試題的層級結(jié)構(gòu)和知識點屬性進(jìn)行標(biāo)定。

    對某市六年級和九年級共計14600余名學(xué)生的教育質(zhì)量監(jiān)測評價試卷作答數(shù)據(jù)進(jìn)行知識點關(guān)聯(lián)關(guān)系的研究。包括每個年級的語文、數(shù)學(xué)、科學(xué)(或物理)。其中,試題僅保留了客觀題,刪除了主觀題。并且對客觀題得分進(jìn)行了二級計分轉(zhuǎn)換處理,以保證算法的可實施,提高結(jié)果的準(zhǔn)確度。

    3. 研究結(jié)果

    (1)不同學(xué)科題目的掌握程度的描述性分析

    圖7為該批學(xué)生對各部分知識點的掌握情況,即每道題目的正確作答概率。

    可以發(fā)現(xiàn),得分率較高的普遍是基礎(chǔ)知識點,知識點難度較低;得分率中等或較低的則是屬于同一層次類型的復(fù)雜知識點,知識點屬性層級較高,難度較大。

    (2)不同學(xué)科知識點關(guān)聯(lián)規(guī)則的可視化展示

    針對上述結(jié)果,采用可視化方式進(jìn)行展示,可以更加直觀地得到學(xué)科知識點間的關(guān)聯(lián)關(guān)系。

    散點圖顯示:

    第一,不同學(xué)科的知識關(guān)聯(lián)規(guī)則存在差異。語文和數(shù)學(xué)學(xué)科所生成的知識關(guān)聯(lián)規(guī)則比較緊密,科學(xué)相對來說則比較分散。語文學(xué)科大部分規(guī)則的支持度在0.6以上,置信度在0.8以上;數(shù)學(xué)學(xué)科大部分規(guī)則的支持度在0.4以上;科學(xué)學(xué)科大部分規(guī)則的支持度在0.2以上。語文學(xué)科知識點間關(guān)聯(lián)性最強(qiáng),數(shù)學(xué)次之,科學(xué)最低。

    第二,不同年級的知識關(guān)聯(lián)規(guī)則存在差異。如小學(xué)科學(xué)和中學(xué)物理相比,在相似的支持度和置信度的條件下,中學(xué)物理的提升度大于1.6,而小學(xué)科學(xué)的提升度lift在1.04左右,說明中學(xué)物理知識點間生成了強(qiáng)有效的關(guān)聯(lián)規(guī)則。這是由于小學(xué)科學(xué)傾向于描述知識點,知識點偏基礎(chǔ)性,結(jié)構(gòu)單一,知識點間呈平行結(jié)構(gòu);中學(xué)物理則要求較多定量分析、技能掌握、邏輯判別,知識點間環(huán)環(huán)相扣,緊密相連。

    (3)知識點關(guān)聯(lián)規(guī)則挖掘優(yōu)化分析

    ① 基于粒度優(yōu)化分析的知識點關(guān)聯(lián)規(guī)則挖掘

    為了深入挖掘知識關(guān)聯(lián)規(guī)則,基于粒度優(yōu)化再次分析,通過刪除基礎(chǔ)知識點,找尋更加有意義的知識點關(guān)聯(lián)規(guī)則。研究發(fā)現(xiàn),在高粒度的情況下,不同學(xué)科之間剩余知識點間的關(guān)聯(lián)狀況有所變化。

    第一,在高粒度情況下,語文和數(shù)學(xué)學(xué)科的知識點關(guān)聯(lián)規(guī)則挖掘比較符合客觀認(rèn)知,但是科學(xué)和物理的知識點關(guān)聯(lián)沒有語文和數(shù)學(xué)的強(qiáng)。

    對小學(xué)語文學(xué)科來說,有一條知識規(guī)則,始終會影響其他知識點間的關(guān)聯(lián),例如小學(xué)語文的第19個知識點。通過分析試卷發(fā)現(xiàn),這個知識點需要學(xué)生調(diào)動日常生活背景進(jìn)行推論。由表4可見,在沒有任何知識點與它產(chǎn)生關(guān)聯(lián)的情況下,support=0.9,confidence=0.9,lift=1;所以這是一條沒有意義的關(guān)聯(lián)項,應(yīng)當(dāng)將之刪除。與之關(guān)聯(lián)度較高的第9、27、24、28知識點均是基礎(chǔ)知識點。對于中學(xué)語文知識點結(jié)構(gòu),13、21、12、14、25知識點均為基礎(chǔ)知識點;對于數(shù)學(xué)學(xué)科來說,小學(xué)數(shù)學(xué)試卷中1、4、5、6知識點偏基礎(chǔ)內(nèi)容,中學(xué)數(shù)學(xué)試卷1(1)、1(2)、2(7)題目涵蓋知識點難度較低??梢?,Apriori算法能夠?qū)Σ煌y度層級的知識點進(jìn)行明顯區(qū)分。中小學(xué)的語文、數(shù)學(xué)學(xué)科具有相似的知識點粒度分布狀況。但是,科學(xué)試卷刪除了基礎(chǔ)知識之后,其關(guān)聯(lián)規(guī)則變得非常奇怪。

    第二,在高粒度情況下,不同年級的知識點關(guān)聯(lián)也存在明顯的差異。

    科學(xué)在小學(xué)段和中學(xué)段的關(guān)聯(lián)有所不同。對小學(xué)科學(xué)試卷知識點進(jìn)行分析發(fā)現(xiàn),題目1(1)、1(2)、1(6)屬于基礎(chǔ)知識點,分別考查小學(xué)科學(xué)三年級下冊“動物的生命周期”、五年級上冊“種子發(fā)芽”、四年級下冊“食物”單元的科學(xué)概念,而食物的加熱這一科學(xué)概念又與我們的日常生活息息相關(guān),所以體現(xiàn)了很高的支持度和關(guān)聯(lián)性?;谶@一特性,它與其他知識點間頻繁產(chǎn)生關(guān)聯(lián)關(guān)系不能直接認(rèn)定為與之相關(guān)的知識點間的關(guān)聯(lián)價值。同樣的,對中學(xué)物理來說,1(1)和2(1)分別考查沸騰現(xiàn)象和大氣壓強(qiáng),沸騰現(xiàn)象雖然對于大氣、密度計算有知識規(guī)則高相關(guān),但是,這個現(xiàn)象經(jīng)過深入分析發(fā)現(xiàn),沸騰、大氣壓強(qiáng)的答對率很高,因此它對所有題目都會有貢獻(xiàn);除此之外,這個沸騰現(xiàn)象與大氣壓一樣,都是需要記憶的。

    ② 在細(xì)粒度條件下優(yōu)化知識點關(guān)聯(lián)挖掘

    為了找尋有意義的知識點關(guān)聯(lián)規(guī)則,在細(xì)粒度情況下研究不同學(xué)科知識點屬性的關(guān)聯(lián)。這里采用了關(guān)聯(lián)規(guī)則的可視化圖,其內(nèi)容是與上圖的關(guān)聯(lián)規(guī)則對應(yīng)的。

    第一,細(xì)粒度優(yōu)化后,科學(xué)學(xué)科出現(xiàn)了更多知識規(guī)則,但對語文、數(shù)學(xué)學(xué)科無太大改善。

    在細(xì)粒度情況下,科學(xué)知識點關(guān)聯(lián)規(guī)則挖掘得到了優(yōu)化,這可能是因為科學(xué)——單一知識點的結(jié)構(gòu)居多,而物理作為一門相對成熟的學(xué)科,知識點結(jié)構(gòu)具有較強(qiáng)的屬性層級關(guān)系,所以對科學(xué)學(xué)科來講是有一定程度的改善的。

    第二,在細(xì)粒度情況下,不同年級的科學(xué)學(xué)科也存在很大差異。

    通過降低支持度,除去頻繁出現(xiàn)的知識點,可以觀察到剩余知識點結(jié)構(gòu)間有價值的信息。在細(xì)粒度下,科學(xué)學(xué)科間差異性依舊顯著。圓圈顏色深淺,即提升度(lift),以及圓圈大小,即支持度(support),體現(xiàn)了關(guān)系差異。顏色越深,說前因子集對后因子的提升力越強(qiáng),影響程度越大;圓圈越大,表明前因子集和后因子集共同出現(xiàn)概率越高,關(guān)聯(lián)越強(qiáng)。而除去基礎(chǔ)知識后,中學(xué)物理知識點關(guān)聯(lián)強(qiáng)度明顯高于小學(xué)科學(xué)。

    具體舉例來看,1(5)題考查了血液流動知識點,1(8)考查了沉和浮知識點,1(14)考查空氣壓縮這一知識點,與1(15)題考查的地球的運(yùn)動知識點間形成了正相關(guān),Lift=1.3。但是單從知識點字面意思來看,這些知識點間并不能構(gòu)成理論意義上的強(qiáng)相關(guān),小學(xué)科學(xué)知識點分布結(jié)構(gòu)松散,這些關(guān)聯(lián)其實是偶然的。而中學(xué)物理則可發(fā)現(xiàn)知識點屬性可解釋的相關(guān)。例如,3(5)考查密度計算,3(4)考查物體質(zhì)量的觀測,在物理學(xué)科中,密度計算就等于質(zhì)量除以體積。相較于小學(xué)科學(xué),中學(xué)階段知識點前后繼承性更強(qiáng)。這種關(guān)聯(lián)規(guī)則的發(fā)現(xiàn),能夠為教師編制試卷,提升學(xué)生知識點掌握情況提供新的思路。科學(xué)知識點相較于其他兩門學(xué)科,學(xué)生知識點掌握分布差異性較大。

    ③ 基于提升度參數(shù)開展優(yōu)化知識點關(guān)聯(lián)挖掘

    為了進(jìn)一步區(qū)分有用關(guān)聯(lián)規(guī)則和無用關(guān)聯(lián)規(guī)則,針對兩個年級三門學(xué)科形成的知識點關(guān)聯(lián)規(guī)則中l(wèi)iftgt;3的有用關(guān)聯(lián)規(guī)則進(jìn)行挖掘。

    想找出有用關(guān)聯(lián)規(guī)則,需要降低支持度和置信度,挖掘出不頻繁出現(xiàn)的知識點中所隱藏的、不易發(fā)現(xiàn),但強(qiáng)有效的關(guān)聯(lián)規(guī)則。

    從表7可見:語文學(xué)科和數(shù)學(xué)學(xué)科知識點提升度(lift)沒有科學(xué)學(xué)科高,但語文和數(shù)學(xué)知識點間關(guān)聯(lián)程度高,整張試卷知識點間的共線性很強(qiáng)。兩門學(xué)科存在許多知識點間得分的關(guān)聯(lián),知識點掌握頻度也很高,所以強(qiáng)規(guī)則下的強(qiáng)有效關(guān)聯(lián)規(guī)則較少。而小學(xué)科學(xué)很多知識點間存在割裂現(xiàn)象,所以知識點掌握概率有高有低,低頻度知識點與其他知識點間可以發(fā)現(xiàn)一些平時發(fā)現(xiàn)不到的規(guī)則。中學(xué)物理知識點相對于小學(xué)科學(xué)知識點強(qiáng)度更高、范圍更廣,存在更有效的關(guān)聯(lián)。中學(xué)知識點強(qiáng)有效關(guān)聯(lián)規(guī)則生成參數(shù)中l(wèi)ift均大于3,而小學(xué)科學(xué)的均大于2,但是科學(xué)學(xué)科比語文和數(shù)學(xué)的lift參數(shù)值均高,從參數(shù)上體現(xiàn)了知識點關(guān)聯(lián)結(jié)構(gòu)的分布。

    五、結(jié)論

    基于Apriori算法,開展模擬和實證研究,探索Apriori算法在挖掘試卷知識關(guān)聯(lián)規(guī)則的可行性。研究發(fā)現(xiàn):

    第一,在模擬研究中,Apriori算法能夠很好地驗證復(fù)雜知識的關(guān)聯(lián)關(guān)系。而單一知識點關(guān)聯(lián)規(guī)則的判斷,隨著樣本量增加,規(guī)則越來越呈現(xiàn)出不規(guī)律性。這說明,Apriori算法無法甄別出單一知識點所具有的點狀的知識規(guī)則。

    第二,在實證研究中,Apriori算法可以得到不同學(xué)科間的知識點關(guān)聯(lián)規(guī)則,但科學(xué)學(xué)科的知識點關(guān)聯(lián)規(guī)則與語文、數(shù)學(xué)學(xué)科之間的規(guī)則具有比較明顯差異。語文和數(shù)學(xué)的關(guān)聯(lián)比較多,說明兩科試卷內(nèi)部的知識點關(guān)聯(lián)的邏輯性和整合性較強(qiáng);而小學(xué)科學(xué)知識點間結(jié)構(gòu)性不強(qiáng),更多考查基礎(chǔ)知識點,類似于單一知識點的結(jié)構(gòu),為此,Apriori算法無法很好地實現(xiàn)小學(xué)科學(xué)的知識點關(guān)聯(lián)規(guī)則的挖掘。

    第三,通過粒度優(yōu)化、更新提升度參數(shù)之后,Apriori算法可得到更加有意義的關(guān)聯(lián),但對不同學(xué)科而言,優(yōu)化算法的效果不同。對于知識關(guān)聯(lián)較強(qiáng)的語文、數(shù)學(xué)學(xué)科而言,優(yōu)化無太大改善,但對科學(xué)學(xué)科而言,其知識點關(guān)聯(lián)規(guī)則的挖掘結(jié)果改善較大。

    本研究還有很多不足。例如,模擬研究尚未考慮到更多復(fù)雜的知識點關(guān)聯(lián)的狀態(tài),也沒有針對有關(guān)題目的答對率情況進(jìn)行設(shè)置。又如,實證研究尚未能考慮到更多的學(xué)科,只能關(guān)注到每學(xué)科一套試卷,尚未能考慮到更多的學(xué)科范疇。未來,可以在答對率、樣本量等方面做出更多的嘗試。

    參考文獻(xiàn):

    [1] Bello-Orgaz G,Menendez H,Okazaki S,et al. Combining Social-Based Data Mining Techniques to Extract Collective Trends from Twitter [J]. Malaysian Journal of Computer Science,2014,27(2):95-111.

    [2] Yilmaz C A,Kahya Y P. Multi-channel Classification of Respiratory Sounds [C] // International Conference of the IEEE Engineering in Medicine amp; Biology Society. IEEE,2016.

    [3] Tsytsarau M,Palpanas T. Survey on Mining Subjective Data on the Web [J]. Data Mining and Knowledge Discovery,2012,24(3):478-514.

    [4] 劉愛萍.數(shù)據(jù)挖掘技術(shù)在高職院校學(xué)生成績分析中的應(yīng)用[D].華僑大學(xué),2016.

    [5] 馬瑩,趙輝,崔巖.基于Hadoop平臺的改進(jìn)KNN分類算法并行化處理[J].長春工業(yè)大學(xué)學(xué)報(自然科學(xué)版),2018,39(5):6.

    [6] 宋潔,劉華,譚慶,等.蟻群算法在最大頻繁項集挖掘問題中的應(yīng)用[J].計算機(jī)工程與設(shè)計,2008,(20):5290-5292.DOI:10.16208/j.issn1000-7024.2008.20.031.

    [7] 朱艷麗,高國紅.Apriori算法研究及其在學(xué)生成績分析中的應(yīng)用[J].福建電腦,2010,(1):147.

    [8] 白彥輝.關(guān)聯(lián)規(guī)則挖掘在試卷分析系統(tǒng)中的應(yīng)用[J].內(nèi)蒙古民族大學(xué)學(xué)報(自然科學(xué)版),2012,27(2):159-161.

    [9] 黃藝?yán)?改進(jìn)的APRIORI算法在試卷系統(tǒng)數(shù)據(jù)挖掘中的應(yīng)用[J].網(wǎng)絡(luò)安全技術(shù)與應(yīng)用,2014,(09):37+40.

    [10] 李志軍.Apriori算法在學(xué)生成績分析中的應(yīng)用——以中職學(xué)生的考試成績?yōu)槔齕J].福建電腦,2016,32(008):148-149.

    [11] 李毅.基于Apriori算法的試卷知識點關(guān)聯(lián)分析[J].新校園(上旬),2018,(07):52-53.

    [12] 王小越,吳筱萌.基于知識點決策樹的學(xué)生學(xué)習(xí)成績預(yù)測研究——以七年級數(shù)學(xué)為例[J].數(shù)字教育,2020,6(05):70-74.

    [13] 袁路妍,李鋒.改進(jìn)的關(guān)聯(lián)規(guī)則Apriori算法在課程成績分析中的應(yīng)用[J].中國教育信息化,2017,(17):62-65.

    [14] 郝林倩.基于關(guān)聯(lián)規(guī)則的數(shù)據(jù)挖掘算法分析[J].太原學(xué)院學(xué)報(自然科學(xué)版),2020,38(03):42-45.DOI:10.14152/j.cnki.2096-191X.2020.03.009.

    [15] Hájek P,Havel I,Chytil M. The GUHA Method of Automatic Hypotheses Determination [J]. Computing,1966,1(4):293-308.

    Study on the Association Structure of Knowledge in Test Paper Based on Apriori Algorithm

    Zhao Ningning1" Ye Nan2" Chen Xiaohan3" Wang Di4" Wen Hongbo3

    1 School of Chinese Language and Literature of Beijing Normal University,Beijing,100875

    2 Shenzhen Longgang Tongxin Experimental School,Shenzhen,Guangdong,518116

    3 China Basic Education Quality Monitoring Collaborative Innovation Center,Beijing Normal University,Beijing,100875

    4 Chaoyang District Educatioanl Science Academy,Beijing,100028

    Abstract:In recent years,some researchers have used machine learning to mine the relationship among the items knowledge and provide support for teachers' feedback. This study is based on Apriori algorithm,through simulation and empirical research,mining and analyzing test papers with different knowledge point structures. The simulation study shows that Apriori algorithm can mine the association rules among knowledge points for the test questions with complex attributes of knowledge points,and has a high accuracy. With the increase of samples,the accuracy of Apriori algorithm in mining test papers with complex knowledge points increases. The empirical study finds that Apriori algorithm can mine the association rules among knowledge points in the test papers of Chinese,mathematics,primary school science,middle school physics in primary and secondary schools. And the mining results of association rules among disciplines are different. After optimizing the granularity and deleting the basic knowledge points,Apriori algorithm can mine the association relationship between Chinese and mathematics residual knowledge points in primary and secondary schools,and the mining of interdisciplinary knowledge points in primary schools needs to be improved.

    Key words:Knowledge Association Rules,Apriori Algorithm,Disciplin,Interdisciplin,Differences in Knowledge Point Structure

    (責(zé)任編輯:陳暢)

    猜你喜歡
    學(xué)科
    學(xué)科新書架
    【學(xué)科新書導(dǎo)覽】
    學(xué)科新書導(dǎo)覽
    學(xué)科新書導(dǎo)覽
    【學(xué)科新書導(dǎo)覽】
    土木工程學(xué)科簡介
    【學(xué)科新書導(dǎo)覽】
    學(xué)科新書導(dǎo)覽
    關(guān)注一流學(xué)科
    “超學(xué)科”來啦
    男女午夜视频在线观看| 18禁动态无遮挡网站| 亚洲精品av麻豆狂野| 精品酒店卫生间| 人妻一区二区av| a级片在线免费高清观看视频| 欧美变态另类bdsm刘玥| 欧美在线黄色| 精品一品国产午夜福利视频| 岛国毛片在线播放| 亚洲精品久久久久久婷婷小说| 桃花免费在线播放| 亚洲欧美一区二区三区久久| 伊人久久国产一区二区| 国产精品.久久久| 91午夜精品亚洲一区二区三区| 国产精品人妻久久久影院| 国产免费一区二区三区四区乱码| 亚洲伊人色综图| 国产一区二区三区综合在线观看| 欧美精品一区二区免费开放| 亚洲国产精品一区三区| 热re99久久精品国产66热6| 久热这里只有精品99| 欧美激情高清一区二区三区 | 这个男人来自地球电影免费观看 | 丰满乱子伦码专区| 下体分泌物呈黄色| 蜜桃在线观看..| 欧美精品人与动牲交sv欧美| 日韩av免费高清视频| 精品卡一卡二卡四卡免费| 国产精品蜜桃在线观看| 黄色配什么色好看| 国产麻豆69| 久久精品久久精品一区二区三区| 久久久久久久大尺度免费视频| 在线精品无人区一区二区三| 哪个播放器可以免费观看大片| 亚洲精品国产色婷婷电影| www日本在线高清视频| 新久久久久国产一级毛片| 亚洲经典国产精华液单| 99热网站在线观看| 日本欧美国产在线视频| 日韩欧美一区视频在线观看| 日韩av不卡免费在线播放| 高清av免费在线| 我要看黄色一级片免费的| 亚洲伊人色综图| 久久久国产精品麻豆| 日韩中字成人| 大片免费播放器 马上看| 中文字幕亚洲精品专区| 国产精品一区二区在线观看99| 五月伊人婷婷丁香| 观看美女的网站| 日韩中文字幕欧美一区二区 | 国产爽快片一区二区三区| 不卡视频在线观看欧美| 亚洲欧美成人综合另类久久久| 久久影院123| 亚洲欧美一区二区三区国产| 日韩欧美一区视频在线观看| 91国产中文字幕| 亚洲欧洲精品一区二区精品久久久 | 日韩视频在线欧美| 中国三级夫妇交换| 女人精品久久久久毛片| 丝袜在线中文字幕| 精品国产超薄肉色丝袜足j| 黄色毛片三级朝国网站| 国产成人免费无遮挡视频| 老司机亚洲免费影院| 麻豆精品久久久久久蜜桃| 极品少妇高潮喷水抽搐| 宅男免费午夜| 夫妻性生交免费视频一级片| 欧美精品人与动牲交sv欧美| 久久精品国产自在天天线| 熟女少妇亚洲综合色aaa.| 青青草视频在线视频观看| 国产在视频线精品| 黄网站色视频无遮挡免费观看| 新久久久久国产一级毛片| 国产日韩欧美视频二区| 又大又黄又爽视频免费| 亚洲美女视频黄频| 日本wwww免费看| 2018国产大陆天天弄谢| 亚洲精品久久午夜乱码| 在线 av 中文字幕| 如何舔出高潮| 男人添女人高潮全过程视频| 不卡视频在线观看欧美| 天天操日日干夜夜撸| 99热国产这里只有精品6| 有码 亚洲区| 热re99久久国产66热| 国产成人aa在线观看| 国产在线一区二区三区精| 亚洲,欧美精品.| 国产福利在线免费观看视频| 亚洲欧洲国产日韩| 熟女少妇亚洲综合色aaa.| 97人妻天天添夜夜摸| 午夜福利一区二区在线看| 一级,二级,三级黄色视频| 成人漫画全彩无遮挡| 婷婷色av中文字幕| 精品国产露脸久久av麻豆| 99久久中文字幕三级久久日本| 人妻人人澡人人爽人人| 另类亚洲欧美激情| 看非洲黑人一级黄片| 女的被弄到高潮叫床怎么办| 看十八女毛片水多多多| 亚洲国产欧美在线一区| 一级黄片播放器| 久久av网站| av免费观看日本| 毛片一级片免费看久久久久| 久久狼人影院| 国产黄频视频在线观看| 国产1区2区3区精品| 亚洲图色成人| 丝袜美腿诱惑在线| 久久久精品94久久精品| 免费黄网站久久成人精品| 99国产综合亚洲精品| 十分钟在线观看高清视频www| 国产精品嫩草影院av在线观看| 国产精品香港三级国产av潘金莲 | 秋霞伦理黄片| av福利片在线| 精品久久久精品久久久| 国产不卡av网站在线观看| 中文欧美无线码| 高清不卡的av网站| 精品一品国产午夜福利视频| 亚洲美女黄色视频免费看| 午夜福利视频精品| 午夜福利乱码中文字幕| 视频区图区小说| 亚洲精品国产av成人精品| 美女中出高潮动态图| 这个男人来自地球电影免费观看 | 女的被弄到高潮叫床怎么办| 午夜福利网站1000一区二区三区| 天美传媒精品一区二区| 国产日韩欧美亚洲二区| 一区二区三区精品91| 亚洲,一卡二卡三卡| 久久精品国产a三级三级三级| 男女免费视频国产| 啦啦啦中文免费视频观看日本| av在线app专区| 精品福利永久在线观看| 久久精品久久精品一区二区三区| 精品国产一区二区三区四区第35| 五月伊人婷婷丁香| 9热在线视频观看99| 亚洲,欧美精品.| 亚洲av成人精品一二三区| 国产精品久久久久成人av| 秋霞伦理黄片| 91aial.com中文字幕在线观看| 毛片一级片免费看久久久久| 蜜桃在线观看..| 日韩精品有码人妻一区| 亚洲欧美精品综合一区二区三区 | 国产精品欧美亚洲77777| 成人二区视频| 纵有疾风起免费观看全集完整版| 啦啦啦在线免费观看视频4| 一个人免费看片子| 国产黄色免费在线视频| 卡戴珊不雅视频在线播放| 久久久久久久亚洲中文字幕| 免费观看a级毛片全部| 丰满少妇做爰视频| 中文字幕人妻丝袜一区二区 | 一区二区三区乱码不卡18| 久热这里只有精品99| 亚洲av男天堂| 在现免费观看毛片| 捣出白浆h1v1| av网站在线播放免费| 激情视频va一区二区三区| av有码第一页| 亚洲精品国产色婷婷电影| 男人舔女人的私密视频| 国产极品天堂在线| 男男h啪啪无遮挡| 国产xxxxx性猛交| 永久免费av网站大全| 久久影院123| 九九爱精品视频在线观看| 在线看a的网站| 成人漫画全彩无遮挡| 精品亚洲乱码少妇综合久久| 电影成人av| 青青草视频在线视频观看| 999久久久国产精品视频| 在线看a的网站| 亚洲情色 制服丝袜| 亚洲av福利一区| 秋霞在线观看毛片| 免费女性裸体啪啪无遮挡网站| 亚洲av电影在线观看一区二区三区| 狠狠精品人妻久久久久久综合| 最近最新中文字幕大全免费视频 | 国产一区二区三区av在线| 日韩欧美精品免费久久| 国产毛片在线视频| 久久久国产一区二区| 丝袜在线中文字幕| 1024视频免费在线观看| 亚洲国产最新在线播放| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 免费在线观看视频国产中文字幕亚洲 | 日韩av不卡免费在线播放| 一二三四中文在线观看免费高清| 青春草视频在线免费观看| 亚洲精品视频女| 卡戴珊不雅视频在线播放| 久久精品aⅴ一区二区三区四区 | 在线观看www视频免费| 精品国产露脸久久av麻豆| 亚洲国产精品一区三区| 成年动漫av网址| 一区在线观看完整版| 在现免费观看毛片| 久久久久久久久久人人人人人人| 一级毛片电影观看| 国产一区有黄有色的免费视频| 香蕉国产在线看| av不卡在线播放| 久久精品国产亚洲av涩爱| 午夜激情久久久久久久| 国产亚洲精品第一综合不卡| av福利片在线| 久久精品久久久久久久性| 久久人妻熟女aⅴ| 久久青草综合色| 日韩电影二区| 中国三级夫妇交换| 自线自在国产av| 视频在线观看一区二区三区| 在线 av 中文字幕| 毛片一级片免费看久久久久| 亚洲在久久综合| 大片电影免费在线观看免费| 日本91视频免费播放| 一区二区三区精品91| 欧美 亚洲 国产 日韩一| 亚洲精品美女久久av网站| 中文精品一卡2卡3卡4更新| 亚洲国产欧美日韩在线播放| 国产极品天堂在线| 成年人午夜在线观看视频| 国产白丝娇喘喷水9色精品| 精品国产一区二区久久| 丰满少妇做爰视频| 久久久久久伊人网av| 丝袜美足系列| 成人午夜精彩视频在线观看| 免费在线观看黄色视频的| 美国免费a级毛片| 黄片小视频在线播放| 国产一区二区在线观看av| 99久国产av精品国产电影| 精品99又大又爽又粗少妇毛片| 日韩在线高清观看一区二区三区| 中文字幕人妻熟女乱码| 亚洲精品国产av成人精品| 亚洲精品一二三| 精品国产一区二区久久| 亚洲国产精品成人久久小说| 午夜福利,免费看| 亚洲国产av影院在线观看| 亚洲精品第二区| 国产白丝娇喘喷水9色精品| 一边亲一边摸免费视频| 欧美亚洲日本最大视频资源| 日本免费在线观看一区| 午夜久久久在线观看| 建设人人有责人人尽责人人享有的| 90打野战视频偷拍视频| 久久久久视频综合| 国产在视频线精品| 成人午夜精彩视频在线观看| 一级,二级,三级黄色视频| 亚洲色图综合在线观看| 欧美av亚洲av综合av国产av | 国产av码专区亚洲av| 爱豆传媒免费全集在线观看| 一边摸一边做爽爽视频免费| 国产一区二区三区综合在线观看| 亚洲欧洲国产日韩| 又黄又粗又硬又大视频| 精品视频人人做人人爽| 国产黄色免费在线视频| 啦啦啦中文免费视频观看日本| 亚洲精品一区蜜桃| 亚洲欧美精品自产自拍| 久久久久人妻精品一区果冻| 18禁动态无遮挡网站| av.在线天堂| 丰满乱子伦码专区| 欧美 日韩 精品 国产| 成人亚洲欧美一区二区av| 大片电影免费在线观看免费| 久久久精品区二区三区| 久久久国产精品麻豆| 亚洲综合色网址| 一区二区三区激情视频| 性高湖久久久久久久久免费观看| 国产精品人妻久久久影院| 亚洲成人一二三区av| 亚洲精品视频女| av女优亚洲男人天堂| 免费观看av网站的网址| 亚洲综合精品二区| 一级毛片黄色毛片免费观看视频| av电影中文网址| 日韩熟女老妇一区二区性免费视频| 久久人人爽av亚洲精品天堂| 国产精品国产av在线观看| 久久精品久久久久久噜噜老黄| 亚洲精品国产av成人精品| 成年动漫av网址| 亚洲激情五月婷婷啪啪| 国产成人免费无遮挡视频| 亚洲三级黄色毛片| 日产精品乱码卡一卡2卡三| 99久久精品国产国产毛片| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 久久精品久久精品一区二区三区| 精品一品国产午夜福利视频| 色婷婷av一区二区三区视频| 日韩 亚洲 欧美在线| 人体艺术视频欧美日本| 亚洲av电影在线观看一区二区三区| 国产日韩欧美亚洲二区| 视频在线观看一区二区三区| 精品久久久精品久久久| 深夜精品福利| 考比视频在线观看| 亚洲综合色惰| 亚洲欧美日韩另类电影网站| 午夜免费观看性视频| 亚洲熟女精品中文字幕| 一本久久精品| 精品人妻熟女毛片av久久网站| 少妇被粗大猛烈的视频| 成人漫画全彩无遮挡| 亚洲美女搞黄在线观看| 90打野战视频偷拍视频| 精品一区二区三区四区五区乱码 | 精品国产一区二区三区久久久樱花| 观看美女的网站| 午夜免费观看性视频| 一级毛片 在线播放| 最近2019中文字幕mv第一页| 女人久久www免费人成看片| 成人影院久久| 欧美成人午夜免费资源| 老鸭窝网址在线观看| 久久综合国产亚洲精品| 丝袜在线中文字幕| 欧美激情高清一区二区三区 | 91aial.com中文字幕在线观看| 国产1区2区3区精品| 国产色婷婷99| 叶爱在线成人免费视频播放| 亚洲av男天堂| 国产在视频线精品| 久久久a久久爽久久v久久| 91午夜精品亚洲一区二区三区| 观看美女的网站| 国产欧美日韩一区二区三区在线| 人人妻人人澡人人爽人人夜夜| 久久久久视频综合| 秋霞在线观看毛片| 欧美日本中文国产一区发布| 亚洲精品国产av蜜桃| 午夜福利在线观看免费完整高清在| 国产人伦9x9x在线观看 | 美女高潮到喷水免费观看| 亚洲美女视频黄频| 99久久精品国产国产毛片| 欧美老熟妇乱子伦牲交| 人人妻人人澡人人看| 好男人视频免费观看在线| 婷婷成人精品国产| 国产男女超爽视频在线观看| 欧美精品国产亚洲| 侵犯人妻中文字幕一二三四区| 精品少妇黑人巨大在线播放| 国产国语露脸激情在线看| 亚洲一区中文字幕在线| 80岁老熟妇乱子伦牲交| 少妇被粗大猛烈的视频| 免费在线观看视频国产中文字幕亚洲 | 国产麻豆69| 水蜜桃什么品种好| 亚洲视频免费观看视频| 欧美另类一区| 蜜桃在线观看..| 欧美日韩亚洲国产一区二区在线观看 | 观看美女的网站| 久久亚洲国产成人精品v| 黑人猛操日本美女一级片| 天天影视国产精品| 有码 亚洲区| 国产精品麻豆人妻色哟哟久久| 亚洲国产av影院在线观看| 在线亚洲精品国产二区图片欧美| 久久精品国产自在天天线| 国产精品一二三区在线看| 成人手机av| 天堂俺去俺来也www色官网| 最新的欧美精品一区二区| 一级a爱视频在线免费观看| 黄频高清免费视频| 欧美国产精品va在线观看不卡| 美女脱内裤让男人舔精品视频| 大片免费播放器 马上看| 色网站视频免费| av国产久精品久网站免费入址| 黄色配什么色好看| 亚洲 欧美一区二区三区| 99re6热这里在线精品视频| 天堂8中文在线网| 欧美激情 高清一区二区三区| 精品一区在线观看国产| 午夜免费观看性视频| 亚洲综合色网址| 免费黄频网站在线观看国产| 99热网站在线观看| 新久久久久国产一级毛片| 日韩精品有码人妻一区| 99久久人妻综合| 蜜桃在线观看..| 日韩三级伦理在线观看| 亚洲人成网站在线观看播放| 在线观看美女被高潮喷水网站| 国产一区二区激情短视频 | 日本-黄色视频高清免费观看| 久久久久网色| 免费高清在线观看视频在线观看| 亚洲精品国产av蜜桃| 亚洲av男天堂| 人妻 亚洲 视频| 黑人欧美特级aaaaaa片| 看十八女毛片水多多多| 一本大道久久a久久精品| 亚洲av欧美aⅴ国产| 日韩一区二区三区影片| 最新中文字幕久久久久| videos熟女内射| 国产成人精品婷婷| 亚洲国产精品999| 中文字幕av电影在线播放| 美女脱内裤让男人舔精品视频| 国产老妇伦熟女老妇高清| 亚洲精品久久久久久婷婷小说| 香蕉精品网在线| 自线自在国产av| 又大又黄又爽视频免费| 新久久久久国产一级毛片| 熟女少妇亚洲综合色aaa.| 熟女av电影| 亚洲精品av麻豆狂野| 99国产综合亚洲精品| 99久久精品国产国产毛片| 久久久亚洲精品成人影院| 国产精品久久久久久精品古装| 国产精品秋霞免费鲁丝片| 国产又爽黄色视频| 搡老乐熟女国产| 免费大片黄手机在线观看| 午夜91福利影院| 欧美精品人与动牲交sv欧美| 国产精品久久久久久久久免| 成人国语在线视频| 国产成人午夜福利电影在线观看| 黄色毛片三级朝国网站| 男女免费视频国产| 热re99久久精品国产66热6| 亚洲av成人精品一二三区| 巨乳人妻的诱惑在线观看| 亚洲精品国产色婷婷电影| 大香蕉久久网| 老司机亚洲免费影院| 只有这里有精品99| 十八禁高潮呻吟视频| 一边亲一边摸免费视频| 日本黄色日本黄色录像| 一本大道久久a久久精品| freevideosex欧美| 九九爱精品视频在线观看| 亚洲综合色网址| 人人妻人人爽人人添夜夜欢视频| 午夜老司机福利剧场| 成人毛片a级毛片在线播放| 精品国产超薄肉色丝袜足j| 日本vs欧美在线观看视频| 国产av一区二区精品久久| 一区二区三区四区激情视频| 大话2 男鬼变身卡| 老汉色∧v一级毛片| 国产成人免费观看mmmm| 日韩在线高清观看一区二区三区| 亚洲国产欧美网| 久久免费观看电影| 免费黄网站久久成人精品| 久久久国产一区二区| 国产精品二区激情视频| 春色校园在线视频观看| 汤姆久久久久久久影院中文字幕| 久久精品国产亚洲av天美| 久久久国产一区二区| 不卡视频在线观看欧美| 婷婷色综合www| 最新的欧美精品一区二区| 99久久人妻综合| 97在线视频观看| 美女高潮到喷水免费观看| 男人爽女人下面视频在线观看| 欧美精品一区二区免费开放| 欧美av亚洲av综合av国产av | 啦啦啦啦在线视频资源| 99热网站在线观看| 宅男免费午夜| 久久精品国产综合久久久| 亚洲一区二区三区欧美精品| 九九爱精品视频在线观看| 色哟哟·www| 女性生殖器流出的白浆| 国产成人aa在线观看| 亚洲欧洲国产日韩| 少妇被粗大的猛进出69影院| 国产免费一区二区三区四区乱码| 18在线观看网站| 十八禁高潮呻吟视频| 搡老乐熟女国产| 国产精品av久久久久免费| 97人妻天天添夜夜摸| 久久久久精品久久久久真实原创| 国产亚洲一区二区精品| 免费不卡的大黄色大毛片视频在线观看| 宅男免费午夜| 最近手机中文字幕大全| 国产一区二区三区av在线| 国产成人精品一,二区| 黄色怎么调成土黄色| 大话2 男鬼变身卡| 久久久久久久大尺度免费视频| 熟女少妇亚洲综合色aaa.| 精品酒店卫生间| 欧美日韩av久久| 少妇人妻 视频| 午夜免费男女啪啪视频观看| 99九九在线精品视频| 免费高清在线观看视频在线观看| 国产亚洲精品第一综合不卡| 91久久精品国产一区二区三区| 亚洲成人av在线免费| 天堂俺去俺来也www色官网| 各种免费的搞黄视频| 国产探花极品一区二区| 老司机亚洲免费影院| 日韩伦理黄色片| 少妇的逼水好多| 亚洲国产欧美网| 亚洲精品,欧美精品| 在线观看一区二区三区激情| 一区二区三区四区激情视频| 精品人妻偷拍中文字幕| 韩国精品一区二区三区| 久久影院123| 欧美激情高清一区二区三区 | 不卡视频在线观看欧美| 成年人午夜在线观看视频| 国产国语露脸激情在线看| 18+在线观看网站| 日韩免费高清中文字幕av| 久久99蜜桃精品久久| 精品亚洲成a人片在线观看| 精品一区在线观看国产| 成年人免费黄色播放视频| 丰满少妇做爰视频| 天天躁夜夜躁狠狠久久av| 久久精品国产a三级三级三级| 欧美精品av麻豆av| 90打野战视频偷拍视频| 99热全是精品| 18禁裸乳无遮挡动漫免费视频| 亚洲,欧美,日韩| a 毛片基地| 国产成人免费观看mmmm| 亚洲精品美女久久久久99蜜臀 | 午夜91福利影院| 如日韩欧美国产精品一区二区三区| 日韩视频在线欧美| 午夜福利视频精品| 亚洲精品,欧美精品| 久久狼人影院| 99九九在线精品视频| 欧美日韩视频精品一区| 成人午夜精彩视频在线观看| 一本大道久久a久久精品| 久久精品国产自在天天线|