• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    編程題自動(dòng)閱卷系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)

    2014-09-26 23:32:55趙曉靜
    軟件工程 2014年9期

    摘 要:目前C語(yǔ)言編程題的自動(dòng)閱卷主要采用比對(duì)程序運(yùn)行結(jié)果的方法,這種方法由于不查看學(xué)生的程序內(nèi)容,因此評(píng)分有失公允并且不能反映學(xué)生的真實(shí)水平。本系統(tǒng)采用動(dòng)態(tài)評(píng)閱、結(jié)果對(duì)比、靜態(tài)評(píng)閱相結(jié)合的方法,使評(píng)分結(jié)果公正、準(zhǔn)確,更加接近于人工閱卷。該系統(tǒng)已經(jīng)用于實(shí)際的教學(xué)環(huán)節(jié)中,收到了良好的效果。

    關(guān)鍵詞:C語(yǔ)言;編程題;自動(dòng)閱卷

    中圖分類(lèi)號(hào):TP311 文獻(xiàn)標(biāo)識(shí)碼:A

    1 引言(Introduction)

    目前,客觀題的自動(dòng)閱卷技術(shù)已經(jīng)成熟運(yùn)用在各類(lèi)考試系統(tǒng)中,但主觀題的閱卷卻往往采用人工批改。在C語(yǔ)言的教學(xué)和考核過(guò)程中,編程題是C語(yǔ)言的常見(jiàn)題型,也是最能反映考生水平的考試題型。對(duì)于編程題,雖然程序運(yùn)行結(jié)果是有唯一標(biāo)準(zhǔn)的,但程序的表達(dá)方式往往因人而異,難以統(tǒng)一。編程題的自動(dòng)閱卷方法缺少完美的解決方法,一般需要人工輔助批改。

    目前大多數(shù)閱卷方法是通過(guò)檢查考生運(yùn)行程序時(shí)生成結(jié)果文件的正確性來(lái)給分。如全國(guó)計(jì)算機(jī)等級(jí)考試(NCRE)上機(jī)考試中的編程題評(píng)閱系統(tǒng),就是依賴(lài)程序的運(yùn)行結(jié)果。此時(shí)如果考生程序中出現(xiàn)一個(gè)很小的錯(cuò)誤,就會(huì)導(dǎo)致一個(gè)幾乎接近正確的程序因無(wú)法運(yùn)行而沒(méi)有生成結(jié)果文件,考生將丟失全部分?jǐn)?shù)[1]。另一方面,有些題目通過(guò)數(shù)學(xué)計(jì)算或其他方式,可以直接做出一個(gè)正確的結(jié)果文件,無(wú)需編寫(xiě)程序,如果考生利用這點(diǎn)來(lái)投機(jī)取巧,照樣可以獲得滿(mǎn)分,這是很不公平的。這種評(píng)閱方法雖然簡(jiǎn)單,但評(píng)分很不科學(xué),不能反映出考生的真實(shí)水平。

    經(jīng)過(guò)多年的研究和實(shí)踐,我們建立了一個(gè)切實(shí)可行的編程題自動(dòng)閱卷系統(tǒng),本系統(tǒng)采用動(dòng)態(tài)評(píng)閱、結(jié)果對(duì)比、靜態(tài)評(píng)閱相結(jié)合的方法,把試題的總分?jǐn)?shù)分解為結(jié)果分、語(yǔ)法分、詞法分三個(gè)部分。在進(jìn)行程序評(píng)閱時(shí),每部分單獨(dú)評(píng)分,最后累加各部分分?jǐn)?shù)之和得出總分。

    2 閱卷過(guò)程(Marking process)

    閱卷流程設(shè)計(jì)如圖1所示。

    圖1 閱卷流程

    Fig.1 marking process

    具體步驟如下:

    (1)先檢查考生文件夾中的學(xué)生提交的考試程序,如發(fā)現(xiàn)學(xué)生沒(méi)有做過(guò)該題,則直接給0分,同時(shí)閱卷結(jié)束。

    (2)對(duì)學(xué)生保存過(guò)的程序進(jìn)行規(guī)范化處理[2],先刪除程序注釋語(yǔ)句,合并連續(xù)多個(gè)空格,保留一個(gè),然后增加一個(gè)程序塊,該程序塊的功能是自動(dòng)把程序結(jié)果輸出到某個(gè)指定文件。這樣,只要學(xué)生程序有輸出結(jié)果,這個(gè)結(jié)果就能自動(dòng)輸出到文件。

    (3)通過(guò)tcc命令對(duì)考生程序進(jìn)行編譯處理,如能生成可執(zhí)行文件,表示程序沒(méi)有語(yǔ)法錯(cuò)誤,語(yǔ)法分為滿(mǎn)分。接著運(yùn)行可執(zhí)行文件,如沒(méi)有生成結(jié)果文件,結(jié)果分計(jì)為0分;如有結(jié)果文件,根據(jù)結(jié)果文件相似度給分,結(jié)果完全正確時(shí)給滿(mǎn)分。

    (4)如沒(méi)有生成可執(zhí)行文件,表示程序有語(yǔ)法錯(cuò)誤,通過(guò)gcc命令可以輕松獲取c程序的編譯錯(cuò)誤信息文件,根據(jù)錯(cuò)誤信息,盡可能地改正程序中的錯(cuò)誤,并根據(jù)錯(cuò)誤數(shù)目給出相應(yīng)語(yǔ)法分,同時(shí)結(jié)果分計(jì)為0分。

    (5)進(jìn)行詞法分析和關(guān)鍵詞比對(duì)[3],給出詞法分。

    (6)計(jì)算總分,閱卷結(jié)束。

    3 閱卷關(guān)鍵技術(shù)(Marking key technology)

    (1)編譯和運(yùn)行問(wèn)題

    假設(shè)prog1.c為源文件,編譯成功后會(huì)生成目標(biāo)文件prog1.obj和可執(zhí)行文件prog1.exe,通過(guò)判斷編譯之后是否生成此文件來(lái)判斷編譯是否成功。部分程序雖然沒(méi)有語(yǔ)法錯(cuò)誤,能編譯成功,但不一定能生成結(jié)果文件。特別是出現(xiàn)死循環(huán)時(shí),運(yùn)行的程序不能自行結(jié)束,系統(tǒng)用一個(gè)計(jì)時(shí)程序來(lái)解決這個(gè)問(wèn)題,即在規(guī)定時(shí)間內(nèi)檢查程序進(jìn)程,發(fā)現(xiàn)一直沒(méi)有結(jié)束,就強(qiáng)行退出。

    (2)語(yǔ)法分計(jì)算

    通過(guò)命令“gcc 源文件2>錯(cuò)誤結(jié)果文件”可以輕松獲取c程序的編譯錯(cuò)誤信息文件,例如:“gcc prog1.c 2>1.txt”表示編譯prog1.c文件,并把出錯(cuò)信息生成到文件1.txt中。當(dāng)編譯通過(guò)時(shí)文件內(nèi)容為空,否則顯示出錯(cuò)信息,基本格式為:“文件名:行號(hào):錯(cuò)誤提示”。例如:“prog1.c: In function `main':prog1.c:10: error: syntax error before "for" token”指出在main函數(shù)內(nèi),第10行中“for”前面有錯(cuò)。大部分情況下,for為首個(gè)關(guān)鍵字,故錯(cuò)誤在第9行末尾,往往是由于丟失分號(hào)引起的。同理 “'XX'undeclared(first use in this function)”表示在使用XX變量前未定義;“missing terminating XXcharacter”表示丟失XX符號(hào),這些錯(cuò)誤均很容易改正。每改過(guò)一行錯(cuò)誤,記錄下行號(hào)并累計(jì)錯(cuò)誤數(shù)。錯(cuò)誤改正后重新編譯程序,如仍有錯(cuò)誤,導(dǎo)致編譯不通過(guò),則根據(jù)新錯(cuò)誤的行號(hào)進(jìn)行錯(cuò)誤數(shù)累加,對(duì)已統(tǒng)計(jì)過(guò)的行號(hào)不重復(fù)計(jì)算。最后根據(jù)總錯(cuò)誤數(shù)計(jì)算出語(yǔ)法得分。

    (3)結(jié)果分統(tǒng)計(jì)

    由于已準(zhǔn)備好prog1.cint測(cè)試數(shù)據(jù)文件,學(xué)生程序也事先經(jīng)過(guò)了規(guī)范化處理,只要學(xué)生程序有輸出結(jié)果,就會(huì)生成格式一致的prog1.cout結(jié)果文件。測(cè)試數(shù)據(jù)文件中事先準(zhǔn)備多行測(cè)試數(shù)據(jù),對(duì)應(yīng)結(jié)果文件中也有多行結(jié)果。評(píng)分時(shí)只需將學(xué)生程序結(jié)果文件讀取并存放到二維數(shù)組中,和正確的結(jié)果文件進(jìn)行逐行比對(duì),然后根據(jù)相似度來(lái)獲得相應(yīng)的結(jié)果分值。如果學(xué)生程序有死循環(huán)等問(wèn)題,則沒(méi)有結(jié)果輸出,結(jié)果分為零分。

    (4)詞法分統(tǒng)計(jì)

    在人工閱卷時(shí),老師會(huì)忽略不重要的錯(cuò)誤,看關(guān)鍵語(yǔ)句是否正確,在自動(dòng)閱卷過(guò)程中具體分為結(jié)構(gòu)分析和關(guān)鍵詞比對(duì)兩步。結(jié)構(gòu)分析是指先根據(jù)算法,將程序答案分割成各個(gè)語(yǔ)句模塊,如聲明語(yǔ)句、賦值語(yǔ)句、選擇語(yǔ)句、循環(huán)語(yǔ)句、輸入輸出語(yǔ)句等。學(xué)生程序中只要有相應(yīng)模塊就給一定分值。

    關(guān)鍵詞對(duì)比是指我們把標(biāo)準(zhǔn)答案中的關(guān)鍵詞,和學(xué)生答案中的關(guān)鍵詞進(jìn)行比較,根據(jù)關(guān)鍵詞的個(gè)數(shù)給分。具體如下:編程題的源程序可以看成是多行的字符串,對(duì)程序的字符串進(jìn)行掃描和分解,分離出一個(gè)個(gè)“單詞”符號(hào)。這些單詞符號(hào)就是c程序的基本詞法單位。這些單詞符號(hào)可以分成關(guān)鍵字、常數(shù)、標(biāo)識(shí)符、運(yùn)算符、界限符五類(lèi)。在c語(yǔ)言里常用關(guān)鍵字有32個(gè),如int、float,char等;常數(shù)包括整型、浮點(diǎn)型、字符型等;標(biāo)識(shí)符可以用作變量名;運(yùn)算符有算術(shù)運(yùn)算符、邏輯運(yùn)算符等;界限符有逗號(hào)、分號(hào)、括號(hào)等。分別放到不同數(shù)組中,進(jìn)行對(duì)比。

    4 結(jié)論(Conclusion)

    基于上述編程題的自動(dòng)閱卷系統(tǒng)已經(jīng)開(kāi)始使用,系統(tǒng)功能可以全部實(shí)現(xiàn),對(duì)于正確的考生程序,系統(tǒng)能100%準(zhǔn)確評(píng)分,對(duì)于存在錯(cuò)誤的學(xué)生程序,與人工評(píng)分的結(jié)果相差無(wú)幾,避免了極端分?jǐn)?shù)的出現(xiàn)。同時(shí)本系統(tǒng)能減輕教師批改作業(yè)的負(fù)擔(dān),使學(xué)生的成績(jī)更加公正、合理,大大提高閱卷效率,節(jié)省教學(xué)資源。采用這種方法對(duì)編程題進(jìn)行自動(dòng)閱卷,注重考生程序的內(nèi)在結(jié)構(gòu),更加符合人工閱卷的思想,同時(shí)本系統(tǒng)也適用于其他程序設(shè)計(jì)語(yǔ)言課程,具有很好的實(shí)用價(jià)值和應(yīng)用前景。

    參考文獻(xiàn)(References)

    [1] 喬善平,劉振,朱波.編程題的計(jì)算機(jī)閱卷[J].計(jì)算機(jī)應(yīng)用研究,

    2004,8:229-231.

    [2] 馬培軍,王甜甜,蘇小紅.基于程序理解的編程題自動(dòng)評(píng)分方

    法[J].計(jì)算機(jī)研究與發(fā)展2009,46(7):1136-1142.

    [3] 溫湘敏,胡琳.依據(jù)程序依賴(lài)關(guān)系匹配度的C語(yǔ)言程序設(shè)計(jì)題

    評(píng)分方法[J].南昌大學(xué)學(xué)報(bào)(理科版),2013(10):502-506.

    作者簡(jiǎn)介:

    趙曉靜(1973-),女,碩士,講師.研究領(lǐng)域:計(jì)算機(jī)應(yīng)用.endprint

    摘 要:目前C語(yǔ)言編程題的自動(dòng)閱卷主要采用比對(duì)程序運(yùn)行結(jié)果的方法,這種方法由于不查看學(xué)生的程序內(nèi)容,因此評(píng)分有失公允并且不能反映學(xué)生的真實(shí)水平。本系統(tǒng)采用動(dòng)態(tài)評(píng)閱、結(jié)果對(duì)比、靜態(tài)評(píng)閱相結(jié)合的方法,使評(píng)分結(jié)果公正、準(zhǔn)確,更加接近于人工閱卷。該系統(tǒng)已經(jīng)用于實(shí)際的教學(xué)環(huán)節(jié)中,收到了良好的效果。

    關(guān)鍵詞:C語(yǔ)言;編程題;自動(dòng)閱卷

    中圖分類(lèi)號(hào):TP311 文獻(xiàn)標(biāo)識(shí)碼:A

    1 引言(Introduction)

    目前,客觀題的自動(dòng)閱卷技術(shù)已經(jīng)成熟運(yùn)用在各類(lèi)考試系統(tǒng)中,但主觀題的閱卷卻往往采用人工批改。在C語(yǔ)言的教學(xué)和考核過(guò)程中,編程題是C語(yǔ)言的常見(jiàn)題型,也是最能反映考生水平的考試題型。對(duì)于編程題,雖然程序運(yùn)行結(jié)果是有唯一標(biāo)準(zhǔn)的,但程序的表達(dá)方式往往因人而異,難以統(tǒng)一。編程題的自動(dòng)閱卷方法缺少完美的解決方法,一般需要人工輔助批改。

    目前大多數(shù)閱卷方法是通過(guò)檢查考生運(yùn)行程序時(shí)生成結(jié)果文件的正確性來(lái)給分。如全國(guó)計(jì)算機(jī)等級(jí)考試(NCRE)上機(jī)考試中的編程題評(píng)閱系統(tǒng),就是依賴(lài)程序的運(yùn)行結(jié)果。此時(shí)如果考生程序中出現(xiàn)一個(gè)很小的錯(cuò)誤,就會(huì)導(dǎo)致一個(gè)幾乎接近正確的程序因無(wú)法運(yùn)行而沒(méi)有生成結(jié)果文件,考生將丟失全部分?jǐn)?shù)[1]。另一方面,有些題目通過(guò)數(shù)學(xué)計(jì)算或其他方式,可以直接做出一個(gè)正確的結(jié)果文件,無(wú)需編寫(xiě)程序,如果考生利用這點(diǎn)來(lái)投機(jī)取巧,照樣可以獲得滿(mǎn)分,這是很不公平的。這種評(píng)閱方法雖然簡(jiǎn)單,但評(píng)分很不科學(xué),不能反映出考生的真實(shí)水平。

    經(jīng)過(guò)多年的研究和實(shí)踐,我們建立了一個(gè)切實(shí)可行的編程題自動(dòng)閱卷系統(tǒng),本系統(tǒng)采用動(dòng)態(tài)評(píng)閱、結(jié)果對(duì)比、靜態(tài)評(píng)閱相結(jié)合的方法,把試題的總分?jǐn)?shù)分解為結(jié)果分、語(yǔ)法分、詞法分三個(gè)部分。在進(jìn)行程序評(píng)閱時(shí),每部分單獨(dú)評(píng)分,最后累加各部分分?jǐn)?shù)之和得出總分。

    2 閱卷過(guò)程(Marking process)

    閱卷流程設(shè)計(jì)如圖1所示。

    圖1 閱卷流程

    Fig.1 marking process

    具體步驟如下:

    (1)先檢查考生文件夾中的學(xué)生提交的考試程序,如發(fā)現(xiàn)學(xué)生沒(méi)有做過(guò)該題,則直接給0分,同時(shí)閱卷結(jié)束。

    (2)對(duì)學(xué)生保存過(guò)的程序進(jìn)行規(guī)范化處理[2],先刪除程序注釋語(yǔ)句,合并連續(xù)多個(gè)空格,保留一個(gè),然后增加一個(gè)程序塊,該程序塊的功能是自動(dòng)把程序結(jié)果輸出到某個(gè)指定文件。這樣,只要學(xué)生程序有輸出結(jié)果,這個(gè)結(jié)果就能自動(dòng)輸出到文件。

    (3)通過(guò)tcc命令對(duì)考生程序進(jìn)行編譯處理,如能生成可執(zhí)行文件,表示程序沒(méi)有語(yǔ)法錯(cuò)誤,語(yǔ)法分為滿(mǎn)分。接著運(yùn)行可執(zhí)行文件,如沒(méi)有生成結(jié)果文件,結(jié)果分計(jì)為0分;如有結(jié)果文件,根據(jù)結(jié)果文件相似度給分,結(jié)果完全正確時(shí)給滿(mǎn)分。

    (4)如沒(méi)有生成可執(zhí)行文件,表示程序有語(yǔ)法錯(cuò)誤,通過(guò)gcc命令可以輕松獲取c程序的編譯錯(cuò)誤信息文件,根據(jù)錯(cuò)誤信息,盡可能地改正程序中的錯(cuò)誤,并根據(jù)錯(cuò)誤數(shù)目給出相應(yīng)語(yǔ)法分,同時(shí)結(jié)果分計(jì)為0分。

    (5)進(jìn)行詞法分析和關(guān)鍵詞比對(duì)[3],給出詞法分。

    (6)計(jì)算總分,閱卷結(jié)束。

    3 閱卷關(guān)鍵技術(shù)(Marking key technology)

    (1)編譯和運(yùn)行問(wèn)題

    假設(shè)prog1.c為源文件,編譯成功后會(huì)生成目標(biāo)文件prog1.obj和可執(zhí)行文件prog1.exe,通過(guò)判斷編譯之后是否生成此文件來(lái)判斷編譯是否成功。部分程序雖然沒(méi)有語(yǔ)法錯(cuò)誤,能編譯成功,但不一定能生成結(jié)果文件。特別是出現(xiàn)死循環(huán)時(shí),運(yùn)行的程序不能自行結(jié)束,系統(tǒng)用一個(gè)計(jì)時(shí)程序來(lái)解決這個(gè)問(wèn)題,即在規(guī)定時(shí)間內(nèi)檢查程序進(jìn)程,發(fā)現(xiàn)一直沒(méi)有結(jié)束,就強(qiáng)行退出。

    (2)語(yǔ)法分計(jì)算

    通過(guò)命令“gcc 源文件2>錯(cuò)誤結(jié)果文件”可以輕松獲取c程序的編譯錯(cuò)誤信息文件,例如:“gcc prog1.c 2>1.txt”表示編譯prog1.c文件,并把出錯(cuò)信息生成到文件1.txt中。當(dāng)編譯通過(guò)時(shí)文件內(nèi)容為空,否則顯示出錯(cuò)信息,基本格式為:“文件名:行號(hào):錯(cuò)誤提示”。例如:“prog1.c: In function `main':prog1.c:10: error: syntax error before "for" token”指出在main函數(shù)內(nèi),第10行中“for”前面有錯(cuò)。大部分情況下,for為首個(gè)關(guān)鍵字,故錯(cuò)誤在第9行末尾,往往是由于丟失分號(hào)引起的。同理 “'XX'undeclared(first use in this function)”表示在使用XX變量前未定義;“missing terminating XXcharacter”表示丟失XX符號(hào),這些錯(cuò)誤均很容易改正。每改過(guò)一行錯(cuò)誤,記錄下行號(hào)并累計(jì)錯(cuò)誤數(shù)。錯(cuò)誤改正后重新編譯程序,如仍有錯(cuò)誤,導(dǎo)致編譯不通過(guò),則根據(jù)新錯(cuò)誤的行號(hào)進(jìn)行錯(cuò)誤數(shù)累加,對(duì)已統(tǒng)計(jì)過(guò)的行號(hào)不重復(fù)計(jì)算。最后根據(jù)總錯(cuò)誤數(shù)計(jì)算出語(yǔ)法得分。

    (3)結(jié)果分統(tǒng)計(jì)

    由于已準(zhǔn)備好prog1.cint測(cè)試數(shù)據(jù)文件,學(xué)生程序也事先經(jīng)過(guò)了規(guī)范化處理,只要學(xué)生程序有輸出結(jié)果,就會(huì)生成格式一致的prog1.cout結(jié)果文件。測(cè)試數(shù)據(jù)文件中事先準(zhǔn)備多行測(cè)試數(shù)據(jù),對(duì)應(yīng)結(jié)果文件中也有多行結(jié)果。評(píng)分時(shí)只需將學(xué)生程序結(jié)果文件讀取并存放到二維數(shù)組中,和正確的結(jié)果文件進(jìn)行逐行比對(duì),然后根據(jù)相似度來(lái)獲得相應(yīng)的結(jié)果分值。如果學(xué)生程序有死循環(huán)等問(wèn)題,則沒(méi)有結(jié)果輸出,結(jié)果分為零分。

    (4)詞法分統(tǒng)計(jì)

    在人工閱卷時(shí),老師會(huì)忽略不重要的錯(cuò)誤,看關(guān)鍵語(yǔ)句是否正確,在自動(dòng)閱卷過(guò)程中具體分為結(jié)構(gòu)分析和關(guān)鍵詞比對(duì)兩步。結(jié)構(gòu)分析是指先根據(jù)算法,將程序答案分割成各個(gè)語(yǔ)句模塊,如聲明語(yǔ)句、賦值語(yǔ)句、選擇語(yǔ)句、循環(huán)語(yǔ)句、輸入輸出語(yǔ)句等。學(xué)生程序中只要有相應(yīng)模塊就給一定分值。

    關(guān)鍵詞對(duì)比是指我們把標(biāo)準(zhǔn)答案中的關(guān)鍵詞,和學(xué)生答案中的關(guān)鍵詞進(jìn)行比較,根據(jù)關(guān)鍵詞的個(gè)數(shù)給分。具體如下:編程題的源程序可以看成是多行的字符串,對(duì)程序的字符串進(jìn)行掃描和分解,分離出一個(gè)個(gè)“單詞”符號(hào)。這些單詞符號(hào)就是c程序的基本詞法單位。這些單詞符號(hào)可以分成關(guān)鍵字、常數(shù)、標(biāo)識(shí)符、運(yùn)算符、界限符五類(lèi)。在c語(yǔ)言里常用關(guān)鍵字有32個(gè),如int、float,char等;常數(shù)包括整型、浮點(diǎn)型、字符型等;標(biāo)識(shí)符可以用作變量名;運(yùn)算符有算術(shù)運(yùn)算符、邏輯運(yùn)算符等;界限符有逗號(hào)、分號(hào)、括號(hào)等。分別放到不同數(shù)組中,進(jìn)行對(duì)比。

    4 結(jié)論(Conclusion)

    基于上述編程題的自動(dòng)閱卷系統(tǒng)已經(jīng)開(kāi)始使用,系統(tǒng)功能可以全部實(shí)現(xiàn),對(duì)于正確的考生程序,系統(tǒng)能100%準(zhǔn)確評(píng)分,對(duì)于存在錯(cuò)誤的學(xué)生程序,與人工評(píng)分的結(jié)果相差無(wú)幾,避免了極端分?jǐn)?shù)的出現(xiàn)。同時(shí)本系統(tǒng)能減輕教師批改作業(yè)的負(fù)擔(dān),使學(xué)生的成績(jī)更加公正、合理,大大提高閱卷效率,節(jié)省教學(xué)資源。采用這種方法對(duì)編程題進(jìn)行自動(dòng)閱卷,注重考生程序的內(nèi)在結(jié)構(gòu),更加符合人工閱卷的思想,同時(shí)本系統(tǒng)也適用于其他程序設(shè)計(jì)語(yǔ)言課程,具有很好的實(shí)用價(jià)值和應(yīng)用前景。

    參考文獻(xiàn)(References)

    [1] 喬善平,劉振,朱波.編程題的計(jì)算機(jī)閱卷[J].計(jì)算機(jī)應(yīng)用研究,

    2004,8:229-231.

    [2] 馬培軍,王甜甜,蘇小紅.基于程序理解的編程題自動(dòng)評(píng)分方

    法[J].計(jì)算機(jī)研究與發(fā)展2009,46(7):1136-1142.

    [3] 溫湘敏,胡琳.依據(jù)程序依賴(lài)關(guān)系匹配度的C語(yǔ)言程序設(shè)計(jì)題

    評(píng)分方法[J].南昌大學(xué)學(xué)報(bào)(理科版),2013(10):502-506.

    作者簡(jiǎn)介:

    趙曉靜(1973-),女,碩士,講師.研究領(lǐng)域:計(jì)算機(jī)應(yīng)用.endprint

    摘 要:目前C語(yǔ)言編程題的自動(dòng)閱卷主要采用比對(duì)程序運(yùn)行結(jié)果的方法,這種方法由于不查看學(xué)生的程序內(nèi)容,因此評(píng)分有失公允并且不能反映學(xué)生的真實(shí)水平。本系統(tǒng)采用動(dòng)態(tài)評(píng)閱、結(jié)果對(duì)比、靜態(tài)評(píng)閱相結(jié)合的方法,使評(píng)分結(jié)果公正、準(zhǔn)確,更加接近于人工閱卷。該系統(tǒng)已經(jīng)用于實(shí)際的教學(xué)環(huán)節(jié)中,收到了良好的效果。

    關(guān)鍵詞:C語(yǔ)言;編程題;自動(dòng)閱卷

    中圖分類(lèi)號(hào):TP311 文獻(xiàn)標(biāo)識(shí)碼:A

    1 引言(Introduction)

    目前,客觀題的自動(dòng)閱卷技術(shù)已經(jīng)成熟運(yùn)用在各類(lèi)考試系統(tǒng)中,但主觀題的閱卷卻往往采用人工批改。在C語(yǔ)言的教學(xué)和考核過(guò)程中,編程題是C語(yǔ)言的常見(jiàn)題型,也是最能反映考生水平的考試題型。對(duì)于編程題,雖然程序運(yùn)行結(jié)果是有唯一標(biāo)準(zhǔn)的,但程序的表達(dá)方式往往因人而異,難以統(tǒng)一。編程題的自動(dòng)閱卷方法缺少完美的解決方法,一般需要人工輔助批改。

    目前大多數(shù)閱卷方法是通過(guò)檢查考生運(yùn)行程序時(shí)生成結(jié)果文件的正確性來(lái)給分。如全國(guó)計(jì)算機(jī)等級(jí)考試(NCRE)上機(jī)考試中的編程題評(píng)閱系統(tǒng),就是依賴(lài)程序的運(yùn)行結(jié)果。此時(shí)如果考生程序中出現(xiàn)一個(gè)很小的錯(cuò)誤,就會(huì)導(dǎo)致一個(gè)幾乎接近正確的程序因無(wú)法運(yùn)行而沒(méi)有生成結(jié)果文件,考生將丟失全部分?jǐn)?shù)[1]。另一方面,有些題目通過(guò)數(shù)學(xué)計(jì)算或其他方式,可以直接做出一個(gè)正確的結(jié)果文件,無(wú)需編寫(xiě)程序,如果考生利用這點(diǎn)來(lái)投機(jī)取巧,照樣可以獲得滿(mǎn)分,這是很不公平的。這種評(píng)閱方法雖然簡(jiǎn)單,但評(píng)分很不科學(xué),不能反映出考生的真實(shí)水平。

    經(jīng)過(guò)多年的研究和實(shí)踐,我們建立了一個(gè)切實(shí)可行的編程題自動(dòng)閱卷系統(tǒng),本系統(tǒng)采用動(dòng)態(tài)評(píng)閱、結(jié)果對(duì)比、靜態(tài)評(píng)閱相結(jié)合的方法,把試題的總分?jǐn)?shù)分解為結(jié)果分、語(yǔ)法分、詞法分三個(gè)部分。在進(jìn)行程序評(píng)閱時(shí),每部分單獨(dú)評(píng)分,最后累加各部分分?jǐn)?shù)之和得出總分。

    2 閱卷過(guò)程(Marking process)

    閱卷流程設(shè)計(jì)如圖1所示。

    圖1 閱卷流程

    Fig.1 marking process

    具體步驟如下:

    (1)先檢查考生文件夾中的學(xué)生提交的考試程序,如發(fā)現(xiàn)學(xué)生沒(méi)有做過(guò)該題,則直接給0分,同時(shí)閱卷結(jié)束。

    (2)對(duì)學(xué)生保存過(guò)的程序進(jìn)行規(guī)范化處理[2],先刪除程序注釋語(yǔ)句,合并連續(xù)多個(gè)空格,保留一個(gè),然后增加一個(gè)程序塊,該程序塊的功能是自動(dòng)把程序結(jié)果輸出到某個(gè)指定文件。這樣,只要學(xué)生程序有輸出結(jié)果,這個(gè)結(jié)果就能自動(dòng)輸出到文件。

    (3)通過(guò)tcc命令對(duì)考生程序進(jìn)行編譯處理,如能生成可執(zhí)行文件,表示程序沒(méi)有語(yǔ)法錯(cuò)誤,語(yǔ)法分為滿(mǎn)分。接著運(yùn)行可執(zhí)行文件,如沒(méi)有生成結(jié)果文件,結(jié)果分計(jì)為0分;如有結(jié)果文件,根據(jù)結(jié)果文件相似度給分,結(jié)果完全正確時(shí)給滿(mǎn)分。

    (4)如沒(méi)有生成可執(zhí)行文件,表示程序有語(yǔ)法錯(cuò)誤,通過(guò)gcc命令可以輕松獲取c程序的編譯錯(cuò)誤信息文件,根據(jù)錯(cuò)誤信息,盡可能地改正程序中的錯(cuò)誤,并根據(jù)錯(cuò)誤數(shù)目給出相應(yīng)語(yǔ)法分,同時(shí)結(jié)果分計(jì)為0分。

    (5)進(jìn)行詞法分析和關(guān)鍵詞比對(duì)[3],給出詞法分。

    (6)計(jì)算總分,閱卷結(jié)束。

    3 閱卷關(guān)鍵技術(shù)(Marking key technology)

    (1)編譯和運(yùn)行問(wèn)題

    假設(shè)prog1.c為源文件,編譯成功后會(huì)生成目標(biāo)文件prog1.obj和可執(zhí)行文件prog1.exe,通過(guò)判斷編譯之后是否生成此文件來(lái)判斷編譯是否成功。部分程序雖然沒(méi)有語(yǔ)法錯(cuò)誤,能編譯成功,但不一定能生成結(jié)果文件。特別是出現(xiàn)死循環(huán)時(shí),運(yùn)行的程序不能自行結(jié)束,系統(tǒng)用一個(gè)計(jì)時(shí)程序來(lái)解決這個(gè)問(wèn)題,即在規(guī)定時(shí)間內(nèi)檢查程序進(jìn)程,發(fā)現(xiàn)一直沒(méi)有結(jié)束,就強(qiáng)行退出。

    (2)語(yǔ)法分計(jì)算

    通過(guò)命令“gcc 源文件2>錯(cuò)誤結(jié)果文件”可以輕松獲取c程序的編譯錯(cuò)誤信息文件,例如:“gcc prog1.c 2>1.txt”表示編譯prog1.c文件,并把出錯(cuò)信息生成到文件1.txt中。當(dāng)編譯通過(guò)時(shí)文件內(nèi)容為空,否則顯示出錯(cuò)信息,基本格式為:“文件名:行號(hào):錯(cuò)誤提示”。例如:“prog1.c: In function `main':prog1.c:10: error: syntax error before "for" token”指出在main函數(shù)內(nèi),第10行中“for”前面有錯(cuò)。大部分情況下,for為首個(gè)關(guān)鍵字,故錯(cuò)誤在第9行末尾,往往是由于丟失分號(hào)引起的。同理 “'XX'undeclared(first use in this function)”表示在使用XX變量前未定義;“missing terminating XXcharacter”表示丟失XX符號(hào),這些錯(cuò)誤均很容易改正。每改過(guò)一行錯(cuò)誤,記錄下行號(hào)并累計(jì)錯(cuò)誤數(shù)。錯(cuò)誤改正后重新編譯程序,如仍有錯(cuò)誤,導(dǎo)致編譯不通過(guò),則根據(jù)新錯(cuò)誤的行號(hào)進(jìn)行錯(cuò)誤數(shù)累加,對(duì)已統(tǒng)計(jì)過(guò)的行號(hào)不重復(fù)計(jì)算。最后根據(jù)總錯(cuò)誤數(shù)計(jì)算出語(yǔ)法得分。

    (3)結(jié)果分統(tǒng)計(jì)

    由于已準(zhǔn)備好prog1.cint測(cè)試數(shù)據(jù)文件,學(xué)生程序也事先經(jīng)過(guò)了規(guī)范化處理,只要學(xué)生程序有輸出結(jié)果,就會(huì)生成格式一致的prog1.cout結(jié)果文件。測(cè)試數(shù)據(jù)文件中事先準(zhǔn)備多行測(cè)試數(shù)據(jù),對(duì)應(yīng)結(jié)果文件中也有多行結(jié)果。評(píng)分時(shí)只需將學(xué)生程序結(jié)果文件讀取并存放到二維數(shù)組中,和正確的結(jié)果文件進(jìn)行逐行比對(duì),然后根據(jù)相似度來(lái)獲得相應(yīng)的結(jié)果分值。如果學(xué)生程序有死循環(huán)等問(wèn)題,則沒(méi)有結(jié)果輸出,結(jié)果分為零分。

    (4)詞法分統(tǒng)計(jì)

    在人工閱卷時(shí),老師會(huì)忽略不重要的錯(cuò)誤,看關(guān)鍵語(yǔ)句是否正確,在自動(dòng)閱卷過(guò)程中具體分為結(jié)構(gòu)分析和關(guān)鍵詞比對(duì)兩步。結(jié)構(gòu)分析是指先根據(jù)算法,將程序答案分割成各個(gè)語(yǔ)句模塊,如聲明語(yǔ)句、賦值語(yǔ)句、選擇語(yǔ)句、循環(huán)語(yǔ)句、輸入輸出語(yǔ)句等。學(xué)生程序中只要有相應(yīng)模塊就給一定分值。

    關(guān)鍵詞對(duì)比是指我們把標(biāo)準(zhǔn)答案中的關(guān)鍵詞,和學(xué)生答案中的關(guān)鍵詞進(jìn)行比較,根據(jù)關(guān)鍵詞的個(gè)數(shù)給分。具體如下:編程題的源程序可以看成是多行的字符串,對(duì)程序的字符串進(jìn)行掃描和分解,分離出一個(gè)個(gè)“單詞”符號(hào)。這些單詞符號(hào)就是c程序的基本詞法單位。這些單詞符號(hào)可以分成關(guān)鍵字、常數(shù)、標(biāo)識(shí)符、運(yùn)算符、界限符五類(lèi)。在c語(yǔ)言里常用關(guān)鍵字有32個(gè),如int、float,char等;常數(shù)包括整型、浮點(diǎn)型、字符型等;標(biāo)識(shí)符可以用作變量名;運(yùn)算符有算術(shù)運(yùn)算符、邏輯運(yùn)算符等;界限符有逗號(hào)、分號(hào)、括號(hào)等。分別放到不同數(shù)組中,進(jìn)行對(duì)比。

    4 結(jié)論(Conclusion)

    基于上述編程題的自動(dòng)閱卷系統(tǒng)已經(jīng)開(kāi)始使用,系統(tǒng)功能可以全部實(shí)現(xiàn),對(duì)于正確的考生程序,系統(tǒng)能100%準(zhǔn)確評(píng)分,對(duì)于存在錯(cuò)誤的學(xué)生程序,與人工評(píng)分的結(jié)果相差無(wú)幾,避免了極端分?jǐn)?shù)的出現(xiàn)。同時(shí)本系統(tǒng)能減輕教師批改作業(yè)的負(fù)擔(dān),使學(xué)生的成績(jī)更加公正、合理,大大提高閱卷效率,節(jié)省教學(xué)資源。采用這種方法對(duì)編程題進(jìn)行自動(dòng)閱卷,注重考生程序的內(nèi)在結(jié)構(gòu),更加符合人工閱卷的思想,同時(shí)本系統(tǒng)也適用于其他程序設(shè)計(jì)語(yǔ)言課程,具有很好的實(shí)用價(jià)值和應(yīng)用前景。

    參考文獻(xiàn)(References)

    [1] 喬善平,劉振,朱波.編程題的計(jì)算機(jī)閱卷[J].計(jì)算機(jī)應(yīng)用研究,

    2004,8:229-231.

    [2] 馬培軍,王甜甜,蘇小紅.基于程序理解的編程題自動(dòng)評(píng)分方

    法[J].計(jì)算機(jī)研究與發(fā)展2009,46(7):1136-1142.

    [3] 溫湘敏,胡琳.依據(jù)程序依賴(lài)關(guān)系匹配度的C語(yǔ)言程序設(shè)計(jì)題

    評(píng)分方法[J].南昌大學(xué)學(xué)報(bào)(理科版),2013(10):502-506.

    作者簡(jiǎn)介:

    趙曉靜(1973-),女,碩士,講師.研究領(lǐng)域:計(jì)算機(jī)應(yīng)用.endprint

    精品人妻在线不人妻| 国产片特级美女逼逼视频| 看免费av毛片| 青青草视频在线视频观看| 国产精品欧美亚洲77777| av又黄又爽大尺度在线免费看| 人人妻人人澡人人看| 日本与韩国留学比较| 国产黄频视频在线观看| 91午夜精品亚洲一区二区三区| 边亲边吃奶的免费视频| 免费女性裸体啪啪无遮挡网站| 90打野战视频偷拍视频| 亚洲在久久综合| 国产成人午夜福利电影在线观看| 成人综合一区亚洲| 国产亚洲av片在线观看秒播厂| 婷婷成人精品国产| 免费看av在线观看网站| 国产精品一二三区在线看| 少妇熟女欧美另类| 麻豆精品久久久久久蜜桃| 狂野欧美激情性bbbbbb| 在现免费观看毛片| 亚洲,一卡二卡三卡| 国产免费视频播放在线视频| 国产亚洲最大av| xxx大片免费视频| 一本—道久久a久久精品蜜桃钙片| 久久精品国产自在天天线| 91aial.com中文字幕在线观看| 国产精品成人在线| 69精品国产乱码久久久| 男人操女人黄网站| freevideosex欧美| 欧美亚洲 丝袜 人妻 在线| 欧美精品一区二区免费开放| 欧美亚洲 丝袜 人妻 在线| 久久99精品国语久久久| 欧美日韩成人在线一区二区| 如日韩欧美国产精品一区二区三区| av播播在线观看一区| 亚洲美女黄色视频免费看| av福利片在线| 少妇人妻久久综合中文| 久久久久久伊人网av| 久久久久视频综合| 一级a做视频免费观看| 日韩av免费高清视频| 草草在线视频免费看| 少妇被粗大猛烈的视频| 最新中文字幕久久久久| 久久精品久久久久久噜噜老黄| 菩萨蛮人人尽说江南好唐韦庄| 成人国产麻豆网| 亚洲一级一片aⅴ在线观看| 国产亚洲午夜精品一区二区久久| 亚洲精品色激情综合| 又粗又硬又长又爽又黄的视频| 亚洲精品色激情综合| 欧美另类一区| 91在线精品国自产拍蜜月| xxxhd国产人妻xxx| 人人澡人人妻人| 久久97久久精品| 美女内射精品一级片tv| 在线观看免费高清a一片| av国产久精品久网站免费入址| 王馨瑶露胸无遮挡在线观看| 美国免费a级毛片| 日韩免费高清中文字幕av| 亚洲欧美一区二区三区国产| 性色av一级| 天天躁夜夜躁狠狠躁躁| 久久精品国产a三级三级三级| 久久人人97超碰香蕉20202| 午夜精品国产一区二区电影| av黄色大香蕉| 亚洲国产精品成人久久小说| 日本wwww免费看| 久久鲁丝午夜福利片| 少妇高潮的动态图| 人体艺术视频欧美日本| 亚洲av欧美aⅴ国产| 日本与韩国留学比较| 日韩伦理黄色片| 日韩大片免费观看网站| 国产亚洲午夜精品一区二区久久| 国产片内射在线| 久久久精品94久久精品| 国产亚洲午夜精品一区二区久久| 看免费av毛片| 中文字幕av电影在线播放| 中文字幕av电影在线播放| 亚洲,一卡二卡三卡| 亚洲精品国产av成人精品| 国产精品久久久久久精品电影小说| 国产片特级美女逼逼视频| 少妇熟女欧美另类| 999精品在线视频| 日韩制服丝袜自拍偷拍| 男女午夜视频在线观看 | 免费观看在线日韩| 国产精品久久久久久久电影| 99精国产麻豆久久婷婷| 永久免费av网站大全| 免费高清在线观看视频在线观看| 欧美bdsm另类| 国产精品人妻久久久影院| 亚洲欧洲日产国产| 最近中文字幕高清免费大全6| 99久国产av精品国产电影| 少妇熟女欧美另类| 成年av动漫网址| 久久这里有精品视频免费| 国产一区二区激情短视频 | 51国产日韩欧美| 晚上一个人看的免费电影| 国产精品久久久av美女十八| 人妻 亚洲 视频| 久久女婷五月综合色啪小说| 男女啪啪激烈高潮av片| 五月伊人婷婷丁香| 国产亚洲最大av| 性色avwww在线观看| 日日爽夜夜爽网站| av不卡在线播放| 国产69精品久久久久777片| 欧美精品高潮呻吟av久久| av视频免费观看在线观看| 在线天堂中文资源库| 制服丝袜香蕉在线| 免费观看a级毛片全部| 国产一区亚洲一区在线观看| 日韩成人av中文字幕在线观看| 2021少妇久久久久久久久久久| 免费看av在线观看网站| 天天影视国产精品| www.av在线官网国产| 国产成人精品无人区| 看非洲黑人一级黄片| 欧美精品国产亚洲| 亚洲精品av麻豆狂野| 又黄又粗又硬又大视频| 久久99热6这里只有精品| 伊人久久国产一区二区| 日韩成人伦理影院| 国产有黄有色有爽视频| 2022亚洲国产成人精品| av片东京热男人的天堂| 黄片播放在线免费| 美国免费a级毛片| 999精品在线视频| 亚洲三级黄色毛片| 深夜精品福利| 国产精品一区二区在线观看99| 欧美亚洲 丝袜 人妻 在线| 日本wwww免费看| 精品第一国产精品| 王馨瑶露胸无遮挡在线观看| 亚洲人与动物交配视频| 日日啪夜夜爽| 久久精品国产亚洲av涩爱| 满18在线观看网站| 看非洲黑人一级黄片| www.熟女人妻精品国产 | 欧美激情 高清一区二区三区| 免费观看在线日韩| 两性夫妻黄色片 | 老司机亚洲免费影院| 免费看av在线观看网站| 人妻 亚洲 视频| 亚洲av男天堂| 成人18禁高潮啪啪吃奶动态图| 亚洲四区av| 天天躁夜夜躁狠狠躁躁| 尾随美女入室| 母亲3免费完整高清在线观看 | 国产午夜精品一二区理论片| 国产一区二区激情短视频 | 国产精品欧美亚洲77777| 久久久久久久精品精品| 下体分泌物呈黄色| 丁香六月天网| 国产成人一区二区在线| 午夜福利在线观看免费完整高清在| av播播在线观看一区| 少妇人妻久久综合中文| av天堂久久9| 免费日韩欧美在线观看| 中文字幕免费在线视频6| 人妻 亚洲 视频| 国产成人精品久久久久久| 26uuu在线亚洲综合色| 日韩av免费高清视频| 国产成人免费无遮挡视频| 欧美日韩av久久| 男女午夜视频在线观看 | 自拍欧美九色日韩亚洲蝌蚪91| 国产日韩一区二区三区精品不卡| 欧美 亚洲 国产 日韩一| 伊人久久国产一区二区| 久久久久国产网址| 丝袜人妻中文字幕| 久久久久久伊人网av| 欧美性感艳星| 国产 精品1| 午夜影院在线不卡| 人体艺术视频欧美日本| 欧美日韩视频精品一区| 久久人人爽av亚洲精品天堂| 最近2019中文字幕mv第一页| 免费少妇av软件| 国产精品久久久久久久电影| 免费观看a级毛片全部| 观看美女的网站| 麻豆精品久久久久久蜜桃| 日韩电影二区| 国产有黄有色有爽视频| 日本vs欧美在线观看视频| 啦啦啦视频在线资源免费观看| 欧美亚洲日本最大视频资源| 亚洲欧美成人精品一区二区| 交换朋友夫妻互换小说| 搡女人真爽免费视频火全软件| 青青草视频在线视频观看| 一级黄片播放器| 国产av一区二区精品久久| 午夜福利网站1000一区二区三区| 免费播放大片免费观看视频在线观看| 日韩成人av中文字幕在线观看| 在线免费观看不下载黄p国产| 国产色婷婷99| 永久网站在线| 在线看a的网站| 亚洲国产av影院在线观看| 久久97久久精品| 国产无遮挡羞羞视频在线观看| 欧美变态另类bdsm刘玥| 欧美精品人与动牲交sv欧美| 中文精品一卡2卡3卡4更新| 日韩欧美精品免费久久| 97在线人人人人妻| 成人亚洲精品一区在线观看| 1024视频免费在线观看| 欧美国产精品一级二级三级| 国内精品宾馆在线| 丝袜喷水一区| 欧美日韩综合久久久久久| 少妇人妻 视频| 亚洲精品av麻豆狂野| 久热久热在线精品观看| 国产毛片在线视频| 欧美老熟妇乱子伦牲交| 亚洲人成网站在线观看播放| 国产高清国产精品国产三级| 国产高清三级在线| 亚洲精品日韩在线中文字幕| 91久久精品国产一区二区三区| 日韩欧美精品免费久久| 人妻系列 视频| 人妻 亚洲 视频| 久久久久久久久久久久大奶| 自拍欧美九色日韩亚洲蝌蚪91| 免费日韩欧美在线观看| 国产亚洲精品第一综合不卡 | 免费大片18禁| 欧美成人午夜精品| 久久久欧美国产精品| 欧美日韩成人在线一区二区| 美女xxoo啪啪120秒动态图| 久久久久国产精品人妻一区二区| 一区二区日韩欧美中文字幕 | 亚洲欧美成人综合另类久久久| 日韩成人av中文字幕在线观看| 免费看av在线观看网站| 欧美+日韩+精品| 日本与韩国留学比较| 国产综合精华液| 蜜桃国产av成人99| 亚洲国产精品999| 国产精品一国产av| 天美传媒精品一区二区| 三上悠亚av全集在线观看| 久久久久久久久久久免费av| 亚洲国产精品专区欧美| 国产免费一区二区三区四区乱码| 久久久久久人人人人人| 少妇高潮的动态图| 亚洲国产精品专区欧美| 亚洲高清免费不卡视频| 国产深夜福利视频在线观看| 性高湖久久久久久久久免费观看| 五月伊人婷婷丁香| 色视频在线一区二区三区| 男人舔女人的私密视频| 黑丝袜美女国产一区| 国产国拍精品亚洲av在线观看| 少妇精品久久久久久久| 亚洲国产日韩一区二区| 人人妻人人澡人人看| 春色校园在线视频观看| 精品亚洲成a人片在线观看| 成年美女黄网站色视频大全免费| 欧美精品国产亚洲| 亚洲欧美一区二区三区国产| 久久久欧美国产精品| 亚洲美女黄色视频免费看| 看免费av毛片| 女人被躁到高潮嗷嗷叫费观| 亚洲av电影在线进入| 日韩中文字幕视频在线看片| 欧美 亚洲 国产 日韩一| 午夜视频国产福利| 国产精品成人在线| 嫩草影院入口| 天天影视国产精品| 亚洲精品乱码久久久久久按摩| 欧美少妇被猛烈插入视频| 97人妻天天添夜夜摸| 日韩在线高清观看一区二区三区| 在线观看免费日韩欧美大片| 91精品国产国语对白视频| 亚洲欧美色中文字幕在线| 亚洲欧美精品自产自拍| www.熟女人妻精品国产 | 国产黄频视频在线观看| 热re99久久国产66热| 又黄又爽又刺激的免费视频.| 一级片免费观看大全| 欧美性感艳星| 黑人巨大精品欧美一区二区蜜桃 | 亚洲成人手机| 国产色爽女视频免费观看| 男的添女的下面高潮视频| 亚洲欧洲精品一区二区精品久久久 | 欧美国产精品一级二级三级| 韩国高清视频一区二区三区| 国产免费现黄频在线看| 亚洲国产精品专区欧美| 亚洲国产色片| 中国美白少妇内射xxxbb| 精品国产一区二区久久| 欧美国产精品va在线观看不卡| 国产午夜精品一二区理论片| 国产 一区精品| 99九九在线精品视频| 日韩视频在线欧美| 在线观看免费日韩欧美大片| 91精品国产国语对白视频| 夜夜爽夜夜爽视频| 亚洲激情五月婷婷啪啪| 日韩成人av中文字幕在线观看| 国产深夜福利视频在线观看| 99国产综合亚洲精品| 亚洲国产精品一区三区| 久久精品国产a三级三级三级| 永久网站在线| 久久ye,这里只有精品| 伊人久久国产一区二区| 久久久久国产网址| 国产一区二区在线观看av| 最近2019中文字幕mv第一页| 久久精品国产亚洲av涩爱| 桃花免费在线播放| 人妻系列 视频| 人体艺术视频欧美日本| www.熟女人妻精品国产 | 男的添女的下面高潮视频| 日本av手机在线免费观看| 亚洲欧美色中文字幕在线| 欧美日韩成人在线一区二区| 91精品伊人久久大香线蕉| videos熟女内射| 亚洲av国产av综合av卡| 卡戴珊不雅视频在线播放| 国产一区有黄有色的免费视频| 汤姆久久久久久久影院中文字幕| 毛片一级片免费看久久久久| 国产色婷婷99| 午夜av观看不卡| 欧美 亚洲 国产 日韩一| 亚洲国产精品999| 日韩制服骚丝袜av| 在线免费观看不下载黄p国产| 国产欧美亚洲国产| 亚洲精品色激情综合| 久久99热6这里只有精品| 国产高清不卡午夜福利| 亚洲精品国产色婷婷电影| 精品亚洲乱码少妇综合久久| 久久久久久久久久久久大奶| 高清不卡的av网站| 精品一品国产午夜福利视频| 国产欧美日韩综合在线一区二区| 国语对白做爰xxxⅹ性视频网站| 久热这里只有精品99| 亚洲欧洲国产日韩| 国产 精品1| 精品酒店卫生间| 免费久久久久久久精品成人欧美视频 | 在线 av 中文字幕| 高清视频免费观看一区二区| 亚洲精品色激情综合| 亚洲精品中文字幕在线视频| 国产成人精品无人区| 久久99热这里只频精品6学生| 久久狼人影院| 日韩不卡一区二区三区视频在线| 亚洲欧美一区二区三区国产| 久久女婷五月综合色啪小说| 中国国产av一级| 又黄又爽又刺激的免费视频.| 国产 一区精品| 欧美日韩av久久| 亚洲人成77777在线视频| 777米奇影视久久| 女的被弄到高潮叫床怎么办| 成人毛片60女人毛片免费| av卡一久久| 亚洲精品一二三| 国产欧美另类精品又又久久亚洲欧美| 999精品在线视频| 交换朋友夫妻互换小说| 9191精品国产免费久久| 亚洲,欧美精品.| 国产成人精品婷婷| 国产爽快片一区二区三区| 亚洲精品乱码久久久久久按摩| 丰满少妇做爰视频| 久久av网站| 啦啦啦在线观看免费高清www| 中文字幕亚洲精品专区| 亚洲精品日韩在线中文字幕| 亚洲精品国产av成人精品| 不卡视频在线观看欧美| 一边亲一边摸免费视频| 午夜精品国产一区二区电影| av网站免费在线观看视频| 热re99久久国产66热| 久久久欧美国产精品| 亚洲精品乱久久久久久| 女的被弄到高潮叫床怎么办| 一级片免费观看大全| 午夜福利网站1000一区二区三区| 久久韩国三级中文字幕| 国产日韩欧美视频二区| 成年人免费黄色播放视频| av一本久久久久| 99久久人妻综合| 欧美人与性动交α欧美精品济南到 | 黄片无遮挡物在线观看| 水蜜桃什么品种好| 制服丝袜香蕉在线| 日韩欧美精品免费久久| 免费av不卡在线播放| 最近中文字幕高清免费大全6| 黄色配什么色好看| 欧美人与性动交α欧美软件 | 亚洲国产欧美日韩在线播放| av免费在线看不卡| 久久毛片免费看一区二区三区| 日本av手机在线免费观看| 国产高清不卡午夜福利| 九色亚洲精品在线播放| 婷婷色综合大香蕉| 国产成人精品一,二区| 久久ye,这里只有精品| 国产欧美亚洲国产| 国内精品宾馆在线| 国产精品成人在线| 涩涩av久久男人的天堂| av一本久久久久| 久久久久国产网址| 免费日韩欧美在线观看| 91aial.com中文字幕在线观看| 亚洲av在线观看美女高潮| 高清av免费在线| 亚洲成av片中文字幕在线观看 | 亚洲人与动物交配视频| 欧美bdsm另类| 亚洲国产看品久久| 色视频在线一区二区三区| 色网站视频免费| 水蜜桃什么品种好| 日韩伦理黄色片| 午夜影院在线不卡| 国产综合精华液| 精品国产一区二区三区久久久樱花| 97人妻天天添夜夜摸| 69精品国产乱码久久久| 国产又爽黄色视频| 日本av手机在线免费观看| 精品国产露脸久久av麻豆| 久久久久国产精品人妻一区二区| 久久久久精品久久久久真实原创| 国产淫语在线视频| 亚洲色图综合在线观看| 天堂中文最新版在线下载| 青春草国产在线视频| 国产麻豆69| 秋霞伦理黄片| 卡戴珊不雅视频在线播放| 高清黄色对白视频在线免费看| 国产69精品久久久久777片| 亚洲av.av天堂| 国产又色又爽无遮挡免| 王馨瑶露胸无遮挡在线观看| 亚洲精品乱码久久久久久按摩| 中文字幕免费在线视频6| 高清av免费在线| 欧美日本中文国产一区发布| 老司机影院成人| 国产精品成人在线| 国产高清三级在线| 国产综合精华液| 欧美日韩一区二区视频在线观看视频在线| 国产精品国产三级国产专区5o| 日韩制服骚丝袜av| 国产不卡av网站在线观看| 久久午夜福利片| 亚洲精品自拍成人| 伊人久久国产一区二区| 中文字幕最新亚洲高清| 美女脱内裤让男人舔精品视频| 一边摸一边做爽爽视频免费| 国产成人免费观看mmmm| 免费在线观看完整版高清| 亚洲综合精品二区| 久久久亚洲精品成人影院| 人妻系列 视频| 国产成人免费观看mmmm| 尾随美女入室| 日韩免费高清中文字幕av| 在线观看免费日韩欧美大片| 一个人免费看片子| 日韩成人av中文字幕在线观看| 午夜福利在线观看免费完整高清在| 免费看av在线观看网站| 大码成人一级视频| 黄色配什么色好看| 国产成人aa在线观看| 日本wwww免费看| 热99久久久久精品小说推荐| 丰满少妇做爰视频| 国产精品偷伦视频观看了| 丝袜喷水一区| 日本爱情动作片www.在线观看| 最近最新中文字幕大全免费视频 | 黑人高潮一二区| 不卡视频在线观看欧美| av女优亚洲男人天堂| 日韩精品有码人妻一区| 国产又色又爽无遮挡免| 一本久久精品| 男人操女人黄网站| 精品一品国产午夜福利视频| 亚洲成人手机| 欧美日韩成人在线一区二区| 欧美精品高潮呻吟av久久| 青青草视频在线视频观看| 寂寞人妻少妇视频99o| 中文字幕亚洲精品专区| 97在线视频观看| 久久久久久久久久人人人人人人| 青春草国产在线视频| 亚洲精品色激情综合| 成年人免费黄色播放视频| 黄色视频在线播放观看不卡| www.色视频.com| 色5月婷婷丁香| 大香蕉97超碰在线| 精品国产乱码久久久久久小说| 80岁老熟妇乱子伦牲交| av电影中文网址| 亚洲天堂av无毛| 日韩欧美一区视频在线观看| 成人无遮挡网站| 一区二区三区精品91| 国产免费又黄又爽又色| 国产精品久久久久久av不卡| 只有这里有精品99| 久久国产精品男人的天堂亚洲 | 亚洲精品aⅴ在线观看| 丝瓜视频免费看黄片| 欧美性感艳星| 国产免费一级a男人的天堂| 丝瓜视频免费看黄片| 9色porny在线观看| 国产女主播在线喷水免费视频网站| 久久久久久人妻| 国产亚洲最大av| 成年美女黄网站色视频大全免费| 晚上一个人看的免费电影| www.熟女人妻精品国产 | 最近2019中文字幕mv第一页| 桃花免费在线播放| 亚洲国产日韩一区二区| 侵犯人妻中文字幕一二三四区| 日韩大片免费观看网站| www.av在线官网国产| 99热全是精品| 国产一区亚洲一区在线观看| 国产白丝娇喘喷水9色精品| 国产日韩欧美视频二区| 精品午夜福利在线看| 国产在线视频一区二区| 少妇 在线观看| 日韩不卡一区二区三区视频在线| 尾随美女入室| 9热在线视频观看99| 女人精品久久久久毛片| 九草在线视频观看| 免费黄色在线免费观看| 777米奇影视久久|