• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    五子棋人工智能算法實(shí)現(xiàn)研究

    2014-09-28 09:27:46段曉麗
    散文百家·下旬刊 2014年7期
    關(guān)鍵詞:五子棋人工智能

    段曉麗

    摘 要:人工智能是一門正在迅速發(fā)展的新興綜合學(xué)科,博弈是其主要研究領(lǐng)域之一。五子棋游戲,其規(guī)則簡(jiǎn)單,但變化多端,適宜于研究分析人機(jī)博弈算法。本文設(shè)計(jì)實(shí)現(xiàn)了五子棋人工智能功能,主要采用Alpha-Beta剪枝和MinMax算法,優(yōu)化博弈樹(shù)搜索過(guò)程,通過(guò)控制搜索深度,實(shí)現(xiàn)初級(jí)和高級(jí)的人機(jī)對(duì)弈。本文還提出了優(yōu)化五子棋智能算法的思路,并做出了初步探討。

    關(guān)鍵詞:人工智能;五子棋;Alpha-Beta搜索

    五子棋是一種兩人對(duì)弈的純策略型棋類游戲,是起源于中國(guó)古代的傳統(tǒng)黑白棋種之一?,F(xiàn)代五子棋日文稱之為“連珠”,英譯為“Renju”,英文稱之為“Gobang”或“FIR”(Five in a Row的縮寫),亦有“連五子”、“五子連”、“串珠”、“五目”、“五目碰”等多種稱謂[1]。因其規(guī)則簡(jiǎn)單,變化多端,容易上手,而廣受大眾喜愛(ài)。五子棋游戲不僅能增強(qiáng)思維能力,提高智力,而且富含哲理,有助于修身養(yǎng)性。五子棋游戲規(guī)則比較簡(jiǎn)單,棋盤通常采用類似圍棋盤的15路或19路的棋盤,兩人分別執(zhí)黑白兩色棋子,輪流在棋盤上選擇一個(gè)無(wú)子的交叉點(diǎn)落子,無(wú)子的交叉點(diǎn)又被稱為空點(diǎn)或合法點(diǎn),當(dāng)黑白一方有五個(gè)棋子在橫、豎或斜方向上連接成一線即為該方贏。

    人工智能(Artificial Intelligence,AI),是計(jì)算機(jī)科學(xué)的一個(gè)分支,是研究、開(kāi)發(fā)用于模擬、延伸和擴(kuò)展人的智能的理論、方法、技術(shù)及應(yīng)用系統(tǒng)的一門新的綜合性的技術(shù)科學(xué)。該領(lǐng)域的研究包括機(jī)器人、語(yǔ)言識(shí)別、圖像識(shí)別、自然語(yǔ)言處理和專家系統(tǒng)等,而博弈是人工智能研究的一個(gè)重要分支。它不僅存在于游戲、下棋之中,也存在于政治、經(jīng)濟(jì)、軍事和生物競(jìng)爭(zhēng)中。與其他棋類游戲相比,五子棋游戲每一層棋局搜索節(jié)點(diǎn)數(shù)量龐大,規(guī)則簡(jiǎn)單,更便于深入研究博弈算法。本文以五子棋游戲?yàn)檠芯繉?duì)象,采用Alpha-Beta剪枝和最大最小樹(shù)原理,優(yōu)化了博弈樹(shù)搜索過(guò)程,通過(guò)控制搜索深度,實(shí)現(xiàn)了初級(jí)和高級(jí)的人機(jī)對(duì)弈。此外,本文還對(duì)優(yōu)化五子棋智能算法的思路做出了初步探討。

    一、 五子棋傳統(tǒng)算法

    1.人機(jī)博弈傳統(tǒng)算法。

    解決博弈問(wèn)題的傳統(tǒng)算法是搜索樹(shù)法,也叫博弈樹(shù)法。以甲乙兩人對(duì)弈五子棋為例,假定現(xiàn)在該甲走棋且甲有若干種走法,而對(duì)甲的任一走法,乙也可以有與之對(duì)應(yīng)的不同的多種走法,然后又輪到甲走棋,而對(duì)乙的走法甲又有若干種方法應(yīng)對(duì),如此反復(fù)。顯然,可以從當(dāng)前棋局狀態(tài)(根節(jié)點(diǎn))出發(fā),找出所有可能的乙的走法(子節(jié)點(diǎn)),再?gòu)拿總€(gè)子節(jié)點(diǎn)出發(fā)找出甲對(duì)應(yīng)于每個(gè)乙的走法的所有應(yīng)對(duì)(子子節(jié)點(diǎn)),直到出現(xiàn)一方贏局。由此構(gòu)成的樹(shù),就稱為博弈樹(shù)。對(duì)于19*19的棋盤而言,顯然這是一個(gè)典型的指數(shù)復(fù)雜度問(wèn)題,其計(jì)算量之大是目前所有的計(jì)算機(jī)都無(wú)法承受的。因此,用搜索樹(shù)法來(lái)解決人機(jī)博弈時(shí),通常只能搜索到一個(gè)非常有限的深度,并根據(jù)此有限深度的形勢(shì)來(lái)判斷每種走法的優(yōu)劣,從而選擇較優(yōu)位置下子。

    2. 極小極大值算法(MinMax 算法)。

    極小極大算法[3]是考慮雙方對(duì)弈若干步之后, 從可能的走法中選一步相對(duì)好的來(lái)走。若最大(MAX)節(jié)點(diǎn)為己方下的棋,此時(shí)選擇估值最大的點(diǎn)走。最?。∕IN)節(jié)點(diǎn)為對(duì)方下的棋,此時(shí)選擇估值最小的點(diǎn)行走。因此MIN節(jié)點(diǎn)的父節(jié)點(diǎn)(MAX節(jié)點(diǎn))所賦的倒推值等于端節(jié)點(diǎn)估值中的最大值。另一方面,MAX節(jié)點(diǎn)的父節(jié)點(diǎn)(MIN節(jié)點(diǎn))所賦的倒推值等于端節(jié)點(diǎn)估值中的最小值。這樣一級(jí)一級(jí)地計(jì)算倒推值,直至起始節(jié)點(diǎn)的后繼節(jié)點(diǎn)也被賦以倒推值為止,即從下往上逐層交替使用極小極大的選值方法。但當(dāng)搜索深度增加時(shí),搜索節(jié)點(diǎn)快速大幅增加,時(shí)間和內(nèi)存空間消耗太大,且利用先前信息的效率較低。于是人們?cè)跇O小極大的基礎(chǔ)上提出了α-β剪枝技術(shù)。

    3. α-β剪枝算法。

    α-β剪枝算法[2]是在極大極小算法的基礎(chǔ)上,當(dāng)甲向下搜索節(jié)點(diǎn)時(shí)發(fā)現(xiàn)走第一個(gè)子節(jié)點(diǎn)就可以贏了,則剩下的節(jié)點(diǎn)就不需要再搜索,甲的值就是第一個(gè)子節(jié)點(diǎn)的值。即可以將甲的其余后繼節(jié)點(diǎn)拋棄,此過(guò)程稱為剪枝。如果甲所在的層是MAX 節(jié)點(diǎn)的層,則稱此剪枝為α剪枝,否則成為β剪枝。如圖1左半部所示的一棵極大極小樹(shù)的片斷。其中節(jié)點(diǎn)下方數(shù)字為該節(jié)點(diǎn)的值,方形框節(jié)點(diǎn)代表計(jì)算機(jī)走,圓形框節(jié)點(diǎn)代表人走。A節(jié)點(diǎn)表示計(jì)算機(jī)走,由于A是極大值點(diǎn),根據(jù)極小極大搜索原理它要從B和C當(dāng)中選最大的值。假設(shè)目前已經(jīng)通過(guò)估值得出B為18,當(dāng)搜索C節(jié)點(diǎn)時(shí),因?yàn)镃是該人走,所以根據(jù)極小極大搜索原理要從D、E、F中選取最小的值。此時(shí)如果估出D為16,那么C的值必小于或等于16。又因?yàn)橐呀?jīng)得出B的值為18,說(shuō)明節(jié)點(diǎn)A的值為Max(B,C)=18,也就是說(shuō)無(wú)須求出節(jié)點(diǎn)C的其他子節(jié)點(diǎn)如E、F的值就可以得出父節(jié)點(diǎn)A的值。這種將節(jié)點(diǎn)D 的后繼兄弟節(jié)點(diǎn)剪去的方法稱為Alpha剪枝。

    同理,在圖1右半部一棵極大極小樹(shù)的片段中,將節(jié)點(diǎn)D 的后繼兄弟節(jié)點(diǎn)剪去稱為Beta 剪枝。與極小極大算法相比,α-β剪枝需要遍歷的節(jié)點(diǎn)遠(yuǎn)遠(yuǎn)減少,它能在較短的時(shí)間內(nèi)找到最佳的走法節(jié)點(diǎn)。

    二、 五子棋智能算法實(shí)現(xiàn)及優(yōu)化

    1. 估值函數(shù)。

    為使用極大極小算法,需要對(duì)一個(gè)估值函數(shù)Eval (p)對(duì)當(dāng)前棋局進(jìn)行估值,p是當(dāng)前局面。即由這個(gè)估值函數(shù)確定哪個(gè)局面更好,如果Eval(p1)

    2. 算法實(shí)現(xiàn)及優(yōu)化

    使用以上定義的估值函數(shù)和描述的算法,可以實(shí)現(xiàn)基本的人機(jī)對(duì)弈。但是在實(shí)現(xiàn)中,由于搜索深度增加后運(yùn)算量呈指數(shù)級(jí)數(shù)增加,運(yùn)算效率急劇下降。為提高搜索效率,增進(jìn)用戶體驗(yàn),提出以下優(yōu)化改進(jìn)方法:

    減少搜索范圍。對(duì)于19*19的五子棋棋盤而言,傳統(tǒng)算法中計(jì)算機(jī)每走一步都要遍歷整個(gè)棋盤,對(duì)棋面上所有空位都進(jìn)行試探性下子并估值,大大影響了算法的效率。本文采用在某個(gè)時(shí)只要考慮距以棋子為中心邊長(zhǎng)為4的正方形區(qū)域即可,這樣便縮小了搜索空間,提高搜索效率。

    減少計(jì)算量。為進(jìn)一步減少計(jì)算量,提高計(jì)算機(jī)反應(yīng)速度,通過(guò)以空間換時(shí)間的方法,在游戲過(guò)程中維持一個(gè)棋盤所有位置的估值信息的數(shù)組。每次對(duì)棋盤上的每個(gè)位置的當(dāng)前估值進(jìn)行計(jì)算后,存儲(chǔ)在當(dāng)前棋局信息中。當(dāng)新的棋局產(chǎn)生時(shí),只需更新計(jì)算新下子位置和相關(guān)位置的估值,而對(duì)其他可下子位置的估值只需查詢上步棋局信息即可。這樣保持的估值表雖然增大了空間需求,但可以大大減少搜索算法的估值計(jì)算時(shí)間,提高了算法執(zhí)行效率。

    三、 結(jié)論及后續(xù)工作

    本文主要論述了五子棋游戲的基本游戲規(guī)則,傳統(tǒng)五子棋人機(jī)對(duì)弈游戲的基本算法,描述了算法實(shí)現(xiàn)的MinMax算法和Alpha-Beta剪枝算法,并描述了算法實(shí)現(xiàn)的估值函數(shù)定義、數(shù)據(jù)結(jié)構(gòu)等,并通過(guò)減少搜索范圍、減少計(jì)算量和設(shè)置對(duì)弈等級(jí)的方法,對(duì)算法進(jìn)行初步優(yōu)化,提高了算法性能,增進(jìn)了人機(jī)對(duì)弈的用戶體驗(yàn)。下步工作主要是通過(guò)改進(jìn)算法和增加搜索輔助手段的方式,探索分析優(yōu)化搜索性能的方法。比如[2],結(jié)合使用啟發(fā)式搜索,利用五子棋游戲開(kāi)局階段現(xiàn)成的棋譜,進(jìn)行啟發(fā)式搜索,或者加入自學(xué)習(xí)功能等。

    參考文獻(xiàn):

    [1] 百度百科:五子棋[EB/OL]。http://baike.baidu.com/view

    /2697.htm。

    [2] 王長(zhǎng)飛,蔡強(qiáng),李海生。智能五子棋算法的設(shè)計(jì)實(shí)現(xiàn)[J]?!断到y(tǒng)仿真學(xué)報(bào)》,2009.

    摘 要:人工智能是一門正在迅速發(fā)展的新興綜合學(xué)科,博弈是其主要研究領(lǐng)域之一。五子棋游戲,其規(guī)則簡(jiǎn)單,但變化多端,適宜于研究分析人機(jī)博弈算法。本文設(shè)計(jì)實(shí)現(xiàn)了五子棋人工智能功能,主要采用Alpha-Beta剪枝和MinMax算法,優(yōu)化博弈樹(shù)搜索過(guò)程,通過(guò)控制搜索深度,實(shí)現(xiàn)初級(jí)和高級(jí)的人機(jī)對(duì)弈。本文還提出了優(yōu)化五子棋智能算法的思路,并做出了初步探討。

    關(guān)鍵詞:人工智能;五子棋;Alpha-Beta搜索

    五子棋是一種兩人對(duì)弈的純策略型棋類游戲,是起源于中國(guó)古代的傳統(tǒng)黑白棋種之一?,F(xiàn)代五子棋日文稱之為“連珠”,英譯為“Renju”,英文稱之為“Gobang”或“FIR”(Five in a Row的縮寫),亦有“連五子”、“五子連”、“串珠”、“五目”、“五目碰”等多種稱謂[1]。因其規(guī)則簡(jiǎn)單,變化多端,容易上手,而廣受大眾喜愛(ài)。五子棋游戲不僅能增強(qiáng)思維能力,提高智力,而且富含哲理,有助于修身養(yǎng)性。五子棋游戲規(guī)則比較簡(jiǎn)單,棋盤通常采用類似圍棋盤的15路或19路的棋盤,兩人分別執(zhí)黑白兩色棋子,輪流在棋盤上選擇一個(gè)無(wú)子的交叉點(diǎn)落子,無(wú)子的交叉點(diǎn)又被稱為空點(diǎn)或合法點(diǎn),當(dāng)黑白一方有五個(gè)棋子在橫、豎或斜方向上連接成一線即為該方贏。

    人工智能(Artificial Intelligence,AI),是計(jì)算機(jī)科學(xué)的一個(gè)分支,是研究、開(kāi)發(fā)用于模擬、延伸和擴(kuò)展人的智能的理論、方法、技術(shù)及應(yīng)用系統(tǒng)的一門新的綜合性的技術(shù)科學(xué)。該領(lǐng)域的研究包括機(jī)器人、語(yǔ)言識(shí)別、圖像識(shí)別、自然語(yǔ)言處理和專家系統(tǒng)等,而博弈是人工智能研究的一個(gè)重要分支。它不僅存在于游戲、下棋之中,也存在于政治、經(jīng)濟(jì)、軍事和生物競(jìng)爭(zhēng)中。與其他棋類游戲相比,五子棋游戲每一層棋局搜索節(jié)點(diǎn)數(shù)量龐大,規(guī)則簡(jiǎn)單,更便于深入研究博弈算法。本文以五子棋游戲?yàn)檠芯繉?duì)象,采用Alpha-Beta剪枝和最大最小樹(shù)原理,優(yōu)化了博弈樹(shù)搜索過(guò)程,通過(guò)控制搜索深度,實(shí)現(xiàn)了初級(jí)和高級(jí)的人機(jī)對(duì)弈。此外,本文還對(duì)優(yōu)化五子棋智能算法的思路做出了初步探討。

    一、 五子棋傳統(tǒng)算法

    1.人機(jī)博弈傳統(tǒng)算法。

    解決博弈問(wèn)題的傳統(tǒng)算法是搜索樹(shù)法,也叫博弈樹(shù)法。以甲乙兩人對(duì)弈五子棋為例,假定現(xiàn)在該甲走棋且甲有若干種走法,而對(duì)甲的任一走法,乙也可以有與之對(duì)應(yīng)的不同的多種走法,然后又輪到甲走棋,而對(duì)乙的走法甲又有若干種方法應(yīng)對(duì),如此反復(fù)。顯然,可以從當(dāng)前棋局狀態(tài)(根節(jié)點(diǎn))出發(fā),找出所有可能的乙的走法(子節(jié)點(diǎn)),再?gòu)拿總€(gè)子節(jié)點(diǎn)出發(fā)找出甲對(duì)應(yīng)于每個(gè)乙的走法的所有應(yīng)對(duì)(子子節(jié)點(diǎn)),直到出現(xiàn)一方贏局。由此構(gòu)成的樹(shù),就稱為博弈樹(shù)。對(duì)于19*19的棋盤而言,顯然這是一個(gè)典型的指數(shù)復(fù)雜度問(wèn)題,其計(jì)算量之大是目前所有的計(jì)算機(jī)都無(wú)法承受的。因此,用搜索樹(shù)法來(lái)解決人機(jī)博弈時(shí),通常只能搜索到一個(gè)非常有限的深度,并根據(jù)此有限深度的形勢(shì)來(lái)判斷每種走法的優(yōu)劣,從而選擇較優(yōu)位置下子。

    2. 極小極大值算法(MinMax 算法)。

    極小極大算法[3]是考慮雙方對(duì)弈若干步之后, 從可能的走法中選一步相對(duì)好的來(lái)走。若最大(MAX)節(jié)點(diǎn)為己方下的棋,此時(shí)選擇估值最大的點(diǎn)走。最?。∕IN)節(jié)點(diǎn)為對(duì)方下的棋,此時(shí)選擇估值最小的點(diǎn)行走。因此MIN節(jié)點(diǎn)的父節(jié)點(diǎn)(MAX節(jié)點(diǎn))所賦的倒推值等于端節(jié)點(diǎn)估值中的最大值。另一方面,MAX節(jié)點(diǎn)的父節(jié)點(diǎn)(MIN節(jié)點(diǎn))所賦的倒推值等于端節(jié)點(diǎn)估值中的最小值。這樣一級(jí)一級(jí)地計(jì)算倒推值,直至起始節(jié)點(diǎn)的后繼節(jié)點(diǎn)也被賦以倒推值為止,即從下往上逐層交替使用極小極大的選值方法。但當(dāng)搜索深度增加時(shí),搜索節(jié)點(diǎn)快速大幅增加,時(shí)間和內(nèi)存空間消耗太大,且利用先前信息的效率較低。于是人們?cè)跇O小極大的基礎(chǔ)上提出了α-β剪枝技術(shù)。

    3. α-β剪枝算法。

    α-β剪枝算法[2]是在極大極小算法的基礎(chǔ)上,當(dāng)甲向下搜索節(jié)點(diǎn)時(shí)發(fā)現(xiàn)走第一個(gè)子節(jié)點(diǎn)就可以贏了,則剩下的節(jié)點(diǎn)就不需要再搜索,甲的值就是第一個(gè)子節(jié)點(diǎn)的值。即可以將甲的其余后繼節(jié)點(diǎn)拋棄,此過(guò)程稱為剪枝。如果甲所在的層是MAX 節(jié)點(diǎn)的層,則稱此剪枝為α剪枝,否則成為β剪枝。如圖1左半部所示的一棵極大極小樹(shù)的片斷。其中節(jié)點(diǎn)下方數(shù)字為該節(jié)點(diǎn)的值,方形框節(jié)點(diǎn)代表計(jì)算機(jī)走,圓形框節(jié)點(diǎn)代表人走。A節(jié)點(diǎn)表示計(jì)算機(jī)走,由于A是極大值點(diǎn),根據(jù)極小極大搜索原理它要從B和C當(dāng)中選最大的值。假設(shè)目前已經(jīng)通過(guò)估值得出B為18,當(dāng)搜索C節(jié)點(diǎn)時(shí),因?yàn)镃是該人走,所以根據(jù)極小極大搜索原理要從D、E、F中選取最小的值。此時(shí)如果估出D為16,那么C的值必小于或等于16。又因?yàn)橐呀?jīng)得出B的值為18,說(shuō)明節(jié)點(diǎn)A的值為Max(B,C)=18,也就是說(shuō)無(wú)須求出節(jié)點(diǎn)C的其他子節(jié)點(diǎn)如E、F的值就可以得出父節(jié)點(diǎn)A的值。這種將節(jié)點(diǎn)D 的后繼兄弟節(jié)點(diǎn)剪去的方法稱為Alpha剪枝。

    同理,在圖1右半部一棵極大極小樹(shù)的片段中,將節(jié)點(diǎn)D 的后繼兄弟節(jié)點(diǎn)剪去稱為Beta 剪枝。與極小極大算法相比,α-β剪枝需要遍歷的節(jié)點(diǎn)遠(yuǎn)遠(yuǎn)減少,它能在較短的時(shí)間內(nèi)找到最佳的走法節(jié)點(diǎn)。

    二、 五子棋智能算法實(shí)現(xiàn)及優(yōu)化

    1. 估值函數(shù)。

    為使用極大極小算法,需要對(duì)一個(gè)估值函數(shù)Eval (p)對(duì)當(dāng)前棋局進(jìn)行估值,p是當(dāng)前局面。即由這個(gè)估值函數(shù)確定哪個(gè)局面更好,如果Eval(p1)

    2. 算法實(shí)現(xiàn)及優(yōu)化

    使用以上定義的估值函數(shù)和描述的算法,可以實(shí)現(xiàn)基本的人機(jī)對(duì)弈。但是在實(shí)現(xiàn)中,由于搜索深度增加后運(yùn)算量呈指數(shù)級(jí)數(shù)增加,運(yùn)算效率急劇下降。為提高搜索效率,增進(jìn)用戶體驗(yàn),提出以下優(yōu)化改進(jìn)方法:

    減少搜索范圍。對(duì)于19*19的五子棋棋盤而言,傳統(tǒng)算法中計(jì)算機(jī)每走一步都要遍歷整個(gè)棋盤,對(duì)棋面上所有空位都進(jìn)行試探性下子并估值,大大影響了算法的效率。本文采用在某個(gè)時(shí)只要考慮距以棋子為中心邊長(zhǎng)為4的正方形區(qū)域即可,這樣便縮小了搜索空間,提高搜索效率。

    減少計(jì)算量。為進(jìn)一步減少計(jì)算量,提高計(jì)算機(jī)反應(yīng)速度,通過(guò)以空間換時(shí)間的方法,在游戲過(guò)程中維持一個(gè)棋盤所有位置的估值信息的數(shù)組。每次對(duì)棋盤上的每個(gè)位置的當(dāng)前估值進(jìn)行計(jì)算后,存儲(chǔ)在當(dāng)前棋局信息中。當(dāng)新的棋局產(chǎn)生時(shí),只需更新計(jì)算新下子位置和相關(guān)位置的估值,而對(duì)其他可下子位置的估值只需查詢上步棋局信息即可。這樣保持的估值表雖然增大了空間需求,但可以大大減少搜索算法的估值計(jì)算時(shí)間,提高了算法執(zhí)行效率。

    三、 結(jié)論及后續(xù)工作

    本文主要論述了五子棋游戲的基本游戲規(guī)則,傳統(tǒng)五子棋人機(jī)對(duì)弈游戲的基本算法,描述了算法實(shí)現(xiàn)的MinMax算法和Alpha-Beta剪枝算法,并描述了算法實(shí)現(xiàn)的估值函數(shù)定義、數(shù)據(jù)結(jié)構(gòu)等,并通過(guò)減少搜索范圍、減少計(jì)算量和設(shè)置對(duì)弈等級(jí)的方法,對(duì)算法進(jìn)行初步優(yōu)化,提高了算法性能,增進(jìn)了人機(jī)對(duì)弈的用戶體驗(yàn)。下步工作主要是通過(guò)改進(jìn)算法和增加搜索輔助手段的方式,探索分析優(yōu)化搜索性能的方法。比如[2],結(jié)合使用啟發(fā)式搜索,利用五子棋游戲開(kāi)局階段現(xiàn)成的棋譜,進(jìn)行啟發(fā)式搜索,或者加入自學(xué)習(xí)功能等。

    參考文獻(xiàn):

    [1] 百度百科:五子棋[EB/OL]。http://baike.baidu.com/view

    /2697.htm。

    [2] 王長(zhǎng)飛,蔡強(qiáng),李海生。智能五子棋算法的設(shè)計(jì)實(shí)現(xiàn)[J]?!断到y(tǒng)仿真學(xué)報(bào)》,2009.

    摘 要:人工智能是一門正在迅速發(fā)展的新興綜合學(xué)科,博弈是其主要研究領(lǐng)域之一。五子棋游戲,其規(guī)則簡(jiǎn)單,但變化多端,適宜于研究分析人機(jī)博弈算法。本文設(shè)計(jì)實(shí)現(xiàn)了五子棋人工智能功能,主要采用Alpha-Beta剪枝和MinMax算法,優(yōu)化博弈樹(shù)搜索過(guò)程,通過(guò)控制搜索深度,實(shí)現(xiàn)初級(jí)和高級(jí)的人機(jī)對(duì)弈。本文還提出了優(yōu)化五子棋智能算法的思路,并做出了初步探討。

    關(guān)鍵詞:人工智能;五子棋;Alpha-Beta搜索

    五子棋是一種兩人對(duì)弈的純策略型棋類游戲,是起源于中國(guó)古代的傳統(tǒng)黑白棋種之一。現(xiàn)代五子棋日文稱之為“連珠”,英譯為“Renju”,英文稱之為“Gobang”或“FIR”(Five in a Row的縮寫),亦有“連五子”、“五子連”、“串珠”、“五目”、“五目碰”等多種稱謂[1]。因其規(guī)則簡(jiǎn)單,變化多端,容易上手,而廣受大眾喜愛(ài)。五子棋游戲不僅能增強(qiáng)思維能力,提高智力,而且富含哲理,有助于修身養(yǎng)性。五子棋游戲規(guī)則比較簡(jiǎn)單,棋盤通常采用類似圍棋盤的15路或19路的棋盤,兩人分別執(zhí)黑白兩色棋子,輪流在棋盤上選擇一個(gè)無(wú)子的交叉點(diǎn)落子,無(wú)子的交叉點(diǎn)又被稱為空點(diǎn)或合法點(diǎn),當(dāng)黑白一方有五個(gè)棋子在橫、豎或斜方向上連接成一線即為該方贏。

    人工智能(Artificial Intelligence,AI),是計(jì)算機(jī)科學(xué)的一個(gè)分支,是研究、開(kāi)發(fā)用于模擬、延伸和擴(kuò)展人的智能的理論、方法、技術(shù)及應(yīng)用系統(tǒng)的一門新的綜合性的技術(shù)科學(xué)。該領(lǐng)域的研究包括機(jī)器人、語(yǔ)言識(shí)別、圖像識(shí)別、自然語(yǔ)言處理和專家系統(tǒng)等,而博弈是人工智能研究的一個(gè)重要分支。它不僅存在于游戲、下棋之中,也存在于政治、經(jīng)濟(jì)、軍事和生物競(jìng)爭(zhēng)中。與其他棋類游戲相比,五子棋游戲每一層棋局搜索節(jié)點(diǎn)數(shù)量龐大,規(guī)則簡(jiǎn)單,更便于深入研究博弈算法。本文以五子棋游戲?yàn)檠芯繉?duì)象,采用Alpha-Beta剪枝和最大最小樹(shù)原理,優(yōu)化了博弈樹(shù)搜索過(guò)程,通過(guò)控制搜索深度,實(shí)現(xiàn)了初級(jí)和高級(jí)的人機(jī)對(duì)弈。此外,本文還對(duì)優(yōu)化五子棋智能算法的思路做出了初步探討。

    一、 五子棋傳統(tǒng)算法

    1.人機(jī)博弈傳統(tǒng)算法。

    解決博弈問(wèn)題的傳統(tǒng)算法是搜索樹(shù)法,也叫博弈樹(shù)法。以甲乙兩人對(duì)弈五子棋為例,假定現(xiàn)在該甲走棋且甲有若干種走法,而對(duì)甲的任一走法,乙也可以有與之對(duì)應(yīng)的不同的多種走法,然后又輪到甲走棋,而對(duì)乙的走法甲又有若干種方法應(yīng)對(duì),如此反復(fù)。顯然,可以從當(dāng)前棋局狀態(tài)(根節(jié)點(diǎn))出發(fā),找出所有可能的乙的走法(子節(jié)點(diǎn)),再?gòu)拿總€(gè)子節(jié)點(diǎn)出發(fā)找出甲對(duì)應(yīng)于每個(gè)乙的走法的所有應(yīng)對(duì)(子子節(jié)點(diǎn)),直到出現(xiàn)一方贏局。由此構(gòu)成的樹(shù),就稱為博弈樹(shù)。對(duì)于19*19的棋盤而言,顯然這是一個(gè)典型的指數(shù)復(fù)雜度問(wèn)題,其計(jì)算量之大是目前所有的計(jì)算機(jī)都無(wú)法承受的。因此,用搜索樹(shù)法來(lái)解決人機(jī)博弈時(shí),通常只能搜索到一個(gè)非常有限的深度,并根據(jù)此有限深度的形勢(shì)來(lái)判斷每種走法的優(yōu)劣,從而選擇較優(yōu)位置下子。

    2. 極小極大值算法(MinMax 算法)。

    極小極大算法[3]是考慮雙方對(duì)弈若干步之后, 從可能的走法中選一步相對(duì)好的來(lái)走。若最大(MAX)節(jié)點(diǎn)為己方下的棋,此時(shí)選擇估值最大的點(diǎn)走。最?。∕IN)節(jié)點(diǎn)為對(duì)方下的棋,此時(shí)選擇估值最小的點(diǎn)行走。因此MIN節(jié)點(diǎn)的父節(jié)點(diǎn)(MAX節(jié)點(diǎn))所賦的倒推值等于端節(jié)點(diǎn)估值中的最大值。另一方面,MAX節(jié)點(diǎn)的父節(jié)點(diǎn)(MIN節(jié)點(diǎn))所賦的倒推值等于端節(jié)點(diǎn)估值中的最小值。這樣一級(jí)一級(jí)地計(jì)算倒推值,直至起始節(jié)點(diǎn)的后繼節(jié)點(diǎn)也被賦以倒推值為止,即從下往上逐層交替使用極小極大的選值方法。但當(dāng)搜索深度增加時(shí),搜索節(jié)點(diǎn)快速大幅增加,時(shí)間和內(nèi)存空間消耗太大,且利用先前信息的效率較低。于是人們?cè)跇O小極大的基礎(chǔ)上提出了α-β剪枝技術(shù)。

    3. α-β剪枝算法。

    α-β剪枝算法[2]是在極大極小算法的基礎(chǔ)上,當(dāng)甲向下搜索節(jié)點(diǎn)時(shí)發(fā)現(xiàn)走第一個(gè)子節(jié)點(diǎn)就可以贏了,則剩下的節(jié)點(diǎn)就不需要再搜索,甲的值就是第一個(gè)子節(jié)點(diǎn)的值。即可以將甲的其余后繼節(jié)點(diǎn)拋棄,此過(guò)程稱為剪枝。如果甲所在的層是MAX 節(jié)點(diǎn)的層,則稱此剪枝為α剪枝,否則成為β剪枝。如圖1左半部所示的一棵極大極小樹(shù)的片斷。其中節(jié)點(diǎn)下方數(shù)字為該節(jié)點(diǎn)的值,方形框節(jié)點(diǎn)代表計(jì)算機(jī)走,圓形框節(jié)點(diǎn)代表人走。A節(jié)點(diǎn)表示計(jì)算機(jī)走,由于A是極大值點(diǎn),根據(jù)極小極大搜索原理它要從B和C當(dāng)中選最大的值。假設(shè)目前已經(jīng)通過(guò)估值得出B為18,當(dāng)搜索C節(jié)點(diǎn)時(shí),因?yàn)镃是該人走,所以根據(jù)極小極大搜索原理要從D、E、F中選取最小的值。此時(shí)如果估出D為16,那么C的值必小于或等于16。又因?yàn)橐呀?jīng)得出B的值為18,說(shuō)明節(jié)點(diǎn)A的值為Max(B,C)=18,也就是說(shuō)無(wú)須求出節(jié)點(diǎn)C的其他子節(jié)點(diǎn)如E、F的值就可以得出父節(jié)點(diǎn)A的值。這種將節(jié)點(diǎn)D 的后繼兄弟節(jié)點(diǎn)剪去的方法稱為Alpha剪枝。

    同理,在圖1右半部一棵極大極小樹(shù)的片段中,將節(jié)點(diǎn)D 的后繼兄弟節(jié)點(diǎn)剪去稱為Beta 剪枝。與極小極大算法相比,α-β剪枝需要遍歷的節(jié)點(diǎn)遠(yuǎn)遠(yuǎn)減少,它能在較短的時(shí)間內(nèi)找到最佳的走法節(jié)點(diǎn)。

    二、 五子棋智能算法實(shí)現(xiàn)及優(yōu)化

    1. 估值函數(shù)。

    為使用極大極小算法,需要對(duì)一個(gè)估值函數(shù)Eval (p)對(duì)當(dāng)前棋局進(jìn)行估值,p是當(dāng)前局面。即由這個(gè)估值函數(shù)確定哪個(gè)局面更好,如果Eval(p1)

    2. 算法實(shí)現(xiàn)及優(yōu)化

    使用以上定義的估值函數(shù)和描述的算法,可以實(shí)現(xiàn)基本的人機(jī)對(duì)弈。但是在實(shí)現(xiàn)中,由于搜索深度增加后運(yùn)算量呈指數(shù)級(jí)數(shù)增加,運(yùn)算效率急劇下降。為提高搜索效率,增進(jìn)用戶體驗(yàn),提出以下優(yōu)化改進(jìn)方法:

    減少搜索范圍。對(duì)于19*19的五子棋棋盤而言,傳統(tǒng)算法中計(jì)算機(jī)每走一步都要遍歷整個(gè)棋盤,對(duì)棋面上所有空位都進(jìn)行試探性下子并估值,大大影響了算法的效率。本文采用在某個(gè)時(shí)只要考慮距以棋子為中心邊長(zhǎng)為4的正方形區(qū)域即可,這樣便縮小了搜索空間,提高搜索效率。

    減少計(jì)算量。為進(jìn)一步減少計(jì)算量,提高計(jì)算機(jī)反應(yīng)速度,通過(guò)以空間換時(shí)間的方法,在游戲過(guò)程中維持一個(gè)棋盤所有位置的估值信息的數(shù)組。每次對(duì)棋盤上的每個(gè)位置的當(dāng)前估值進(jìn)行計(jì)算后,存儲(chǔ)在當(dāng)前棋局信息中。當(dāng)新的棋局產(chǎn)生時(shí),只需更新計(jì)算新下子位置和相關(guān)位置的估值,而對(duì)其他可下子位置的估值只需查詢上步棋局信息即可。這樣保持的估值表雖然增大了空間需求,但可以大大減少搜索算法的估值計(jì)算時(shí)間,提高了算法執(zhí)行效率。

    三、 結(jié)論及后續(xù)工作

    本文主要論述了五子棋游戲的基本游戲規(guī)則,傳統(tǒng)五子棋人機(jī)對(duì)弈游戲的基本算法,描述了算法實(shí)現(xiàn)的MinMax算法和Alpha-Beta剪枝算法,并描述了算法實(shí)現(xiàn)的估值函數(shù)定義、數(shù)據(jù)結(jié)構(gòu)等,并通過(guò)減少搜索范圍、減少計(jì)算量和設(shè)置對(duì)弈等級(jí)的方法,對(duì)算法進(jìn)行初步優(yōu)化,提高了算法性能,增進(jìn)了人機(jī)對(duì)弈的用戶體驗(yàn)。下步工作主要是通過(guò)改進(jìn)算法和增加搜索輔助手段的方式,探索分析優(yōu)化搜索性能的方法。比如[2],結(jié)合使用啟發(fā)式搜索,利用五子棋游戲開(kāi)局階段現(xiàn)成的棋譜,進(jìn)行啟發(fā)式搜索,或者加入自學(xué)習(xí)功能等。

    參考文獻(xiàn):

    [1] 百度百科:五子棋[EB/OL]。http://baike.baidu.com/view

    /2697.htm。

    [2] 王長(zhǎng)飛,蔡強(qiáng),李海生。智能五子棋算法的設(shè)計(jì)實(shí)現(xiàn)[J]。《系統(tǒng)仿真學(xué)報(bào)》,2009.

    猜你喜歡
    五子棋人工智能
    我校新增“人工智能”本科專業(yè)
    Sim Sim
    2019:人工智能
    商界(2019年12期)2019-01-03 06:59:05
    人工智能與就業(yè)
    數(shù)讀人工智能
    小康(2017年16期)2017-06-07 09:00:59
    下一幕,人工智能!
    下一幕,人工智能!
    學(xué)下五子棋
    90后羅運(yùn)生:五子棋是我生命的一部分
    金色年華(2016年8期)2016-02-28 01:40:31
    財(cái)政部長(zhǎng)吳波的“五子棋局”
    一级黄色大片毛片| 国产不卡一卡二| 色哟哟哟哟哟哟| 动漫黄色视频在线观看| 妹子高潮喷水视频| 国产高清视频在线播放一区| 97人妻精品一区二区三区麻豆 | 白带黄色成豆腐渣| 亚洲午夜精品一区,二区,三区| 黑人巨大精品欧美一区二区mp4| 丝袜在线中文字幕| 免费看a级黄色片| 最近最新免费中文字幕在线| 好男人在线观看高清免费视频 | 亚洲五月色婷婷综合| 91字幕亚洲| 国内揄拍国产精品人妻在线 | 成年免费大片在线观看| 成人亚洲精品av一区二区| 精品第一国产精品| 制服人妻中文乱码| www.熟女人妻精品国产| 美国免费a级毛片| 欧美日韩瑟瑟在线播放| 国产精品99久久99久久久不卡| 久久久久久人人人人人| 午夜福利欧美成人| 美女高潮到喷水免费观看| 亚洲狠狠婷婷综合久久图片| 一夜夜www| 午夜精品在线福利| 桃色一区二区三区在线观看| 最近最新中文字幕大全电影3 | 不卡一级毛片| 国产在线观看jvid| 女生性感内裤真人,穿戴方法视频| 国产精品九九99| 国产av一区二区精品久久| 一区二区三区激情视频| 黄色成人免费大全| 欧美日本亚洲视频在线播放| 亚洲av美国av| av超薄肉色丝袜交足视频| 三级毛片av免费| 久久午夜综合久久蜜桃| 好看av亚洲va欧美ⅴa在| 亚洲三区欧美一区| 亚洲第一av免费看| 国产一区二区激情短视频| 久久亚洲真实| 久久久久久亚洲精品国产蜜桃av| 夜夜躁狠狠躁天天躁| 成人国产综合亚洲| 国产av在哪里看| 亚洲熟妇中文字幕五十中出| 99国产精品一区二区蜜桃av| 热99re8久久精品国产| 男女那种视频在线观看| 国产精品亚洲美女久久久| 久热爱精品视频在线9| 色在线成人网| 视频区欧美日本亚洲| 男人的好看免费观看在线视频 | 一级毛片高清免费大全| 亚洲av五月六月丁香网| 免费看a级黄色片| www.999成人在线观看| 日日干狠狠操夜夜爽| 日韩有码中文字幕| 亚洲天堂国产精品一区在线| 久久久久国产精品人妻aⅴ院| 日韩中文字幕欧美一区二区| 国产一区在线观看成人免费| 一个人免费在线观看的高清视频| 香蕉国产在线看| 成人三级做爰电影| av欧美777| 国产精品自产拍在线观看55亚洲| 精品欧美国产一区二区三| 老司机福利观看| 99国产精品99久久久久| 国产真实乱freesex| 一边摸一边抽搐一进一小说| 国产成人一区二区三区免费视频网站| 九色国产91popny在线| 757午夜福利合集在线观看| 成人国产一区最新在线观看| 欧美av亚洲av综合av国产av| 国产亚洲欧美在线一区二区| 1024手机看黄色片| 级片在线观看| 亚洲国产精品合色在线| 久久久国产欧美日韩av| 琪琪午夜伦伦电影理论片6080| 午夜免费激情av| 一级a爱视频在线免费观看| 亚洲熟妇熟女久久| 88av欧美| 99riav亚洲国产免费| 欧美中文综合在线视频| 色婷婷久久久亚洲欧美| 欧美又色又爽又黄视频| 18禁国产床啪视频网站| 老鸭窝网址在线观看| av片东京热男人的天堂| 中文字幕久久专区| 亚洲电影在线观看av| 一区福利在线观看| 最近最新中文字幕大全免费视频| www国产在线视频色| 最新美女视频免费是黄的| 女人爽到高潮嗷嗷叫在线视频| 欧美一区二区精品小视频在线| 免费av毛片视频| av片东京热男人的天堂| 看片在线看免费视频| 国产99白浆流出| 少妇被粗大的猛进出69影院| 国产成人精品久久二区二区91| 国产亚洲欧美98| 一级毛片高清免费大全| 欧美+亚洲+日韩+国产| 欧美激情 高清一区二区三区| 母亲3免费完整高清在线观看| 性欧美人与动物交配| 亚洲av片天天在线观看| 成人国产一区最新在线观看| 国产精品精品国产色婷婷| 视频区欧美日本亚洲| av超薄肉色丝袜交足视频| 日本免费a在线| 精品一区二区三区四区五区乱码| 一区二区三区国产精品乱码| ponron亚洲| 欧美黄色片欧美黄色片| 一本久久中文字幕| 久久久国产成人精品二区| 亚洲av中文字字幕乱码综合 | 国产熟女午夜一区二区三区| 精品国产乱子伦一区二区三区| 黑人巨大精品欧美一区二区mp4| 美女大奶头视频| 久久中文字幕人妻熟女| 中文字幕精品亚洲无线码一区 | 欧美精品啪啪一区二区三区| 男人舔奶头视频| 久久久水蜜桃国产精品网| 两性夫妻黄色片| 九色国产91popny在线| 熟女电影av网| 18禁国产床啪视频网站| 给我免费播放毛片高清在线观看| 中文字幕最新亚洲高清| 婷婷亚洲欧美| 亚洲精品一区av在线观看| 亚洲av电影在线进入| 国产精品美女特级片免费视频播放器 | 少妇的丰满在线观看| 亚洲午夜理论影院| 日本五十路高清| 露出奶头的视频| 热99re8久久精品国产| 亚洲中文日韩欧美视频| 久久久久亚洲av毛片大全| 欧美性猛交黑人性爽| 国产成人av教育| 久久 成人 亚洲| 日韩免费av在线播放| 成人免费观看视频高清| 日韩一卡2卡3卡4卡2021年| 亚洲精品国产区一区二| 国产一卡二卡三卡精品| 校园春色视频在线观看| 中文字幕高清在线视频| 啦啦啦免费观看视频1| 国产黄色小视频在线观看| 成年免费大片在线观看| 欧美国产精品va在线观看不卡| 久久国产精品影院| 欧美黑人精品巨大| 又大又爽又粗| 黄片播放在线免费| 一区二区三区高清视频在线| 黄色视频不卡| 国产国语露脸激情在线看| 国产99久久九九免费精品| 亚洲精品粉嫩美女一区| 这个男人来自地球电影免费观看| 九色国产91popny在线| 精品国产亚洲在线| 国产欧美日韩精品亚洲av| 欧美久久黑人一区二区| 老司机在亚洲福利影院| 国产精品久久久人人做人人爽| 亚洲精华国产精华精| 亚洲一区二区三区色噜噜| www日本黄色视频网| 亚洲七黄色美女视频| 可以免费在线观看a视频的电影网站| 欧美绝顶高潮抽搐喷水| 一a级毛片在线观看| 亚洲欧美一区二区三区黑人| 法律面前人人平等表现在哪些方面| 白带黄色成豆腐渣| 国产蜜桃级精品一区二区三区| 男女视频在线观看网站免费 | 日本三级黄在线观看| 国产黄片美女视频| 国产精品,欧美在线| 大香蕉久久成人网| 50天的宝宝边吃奶边哭怎么回事| 久久久久久人人人人人| 久久人妻福利社区极品人妻图片| 人人妻人人澡人人看| 精品卡一卡二卡四卡免费| 日韩欧美一区视频在线观看| 免费看美女性在线毛片视频| 99久久综合精品五月天人人| 一本综合久久免费| 亚洲欧美日韩无卡精品| 人成视频在线观看免费观看| 国产人伦9x9x在线观看| 国产爱豆传媒在线观看 | 午夜福利在线观看吧| 正在播放国产对白刺激| 岛国在线观看网站| 香蕉av资源在线| 两性夫妻黄色片| 黄色毛片三级朝国网站| 精品久久久久久,| 啪啪无遮挡十八禁网站| 最近最新中文字幕大全电影3 | 视频区欧美日本亚洲| 亚洲免费av在线视频| 国产精品乱码一区二三区的特点| 国产高清激情床上av| 日韩高清综合在线| 国产1区2区3区精品| 亚洲精品在线观看二区| 成人午夜高清在线视频 | 久久国产精品男人的天堂亚洲| 亚洲aⅴ乱码一区二区在线播放 | 欧美大码av| 在线观看舔阴道视频| 99热这里只有精品一区 | 亚洲久久久国产精品| 好男人在线观看高清免费视频 | 国产免费av片在线观看野外av| 男人的好看免费观看在线视频 | 国产精品99久久99久久久不卡| 91麻豆精品激情在线观看国产| 熟女少妇亚洲综合色aaa.| 99久久99久久久精品蜜桃| 97人妻精品一区二区三区麻豆 | x7x7x7水蜜桃| 中文字幕久久专区| av中文乱码字幕在线| 18禁美女被吸乳视频| 丰满人妻熟妇乱又伦精品不卡| 欧美日韩黄片免| 视频区欧美日本亚洲| 欧美一级毛片孕妇| 精品国产亚洲在线| av在线天堂中文字幕| 免费看日本二区| 国产精品一区二区精品视频观看| www.999成人在线观看| 99久久国产精品久久久| 国语自产精品视频在线第100页| 18禁国产床啪视频网站| 人人妻人人澡人人看| 久久久久国产精品人妻aⅴ院| 91麻豆精品激情在线观看国产| 日韩有码中文字幕| 99久久99久久久精品蜜桃| 亚洲精品久久成人aⅴ小说| 亚洲成av人片免费观看| 日本五十路高清| 日日干狠狠操夜夜爽| 一本精品99久久精品77| 国产精品久久久久久亚洲av鲁大| 免费人成视频x8x8入口观看| 日韩欧美在线二视频| 亚洲国产欧美日韩在线播放| 无人区码免费观看不卡| 女性被躁到高潮视频| 国产私拍福利视频在线观看| aaaaa片日本免费| 成年版毛片免费区| 国产亚洲av嫩草精品影院| 亚洲午夜理论影院| 日韩欧美一区二区三区在线观看| 可以在线观看的亚洲视频| 国产成+人综合+亚洲专区| 精品国产美女av久久久久小说| 1024手机看黄色片| 色婷婷久久久亚洲欧美| 哪里可以看免费的av片| 99久久综合精品五月天人人| 精品一区二区三区视频在线观看免费| 国产黄a三级三级三级人| 欧美成人免费av一区二区三区| 亚洲 欧美 日韩 在线 免费| 久久中文字幕一级| 91老司机精品| 国产精品综合久久久久久久免费| 亚洲七黄色美女视频| 亚洲人成网站高清观看| 神马国产精品三级电影在线观看 | 国产伦人伦偷精品视频| 日本一本二区三区精品| 国产真人三级小视频在线观看| 国产精华一区二区三区| www日本在线高清视频| 深夜精品福利| 老司机福利观看| 国产高清视频在线播放一区| 亚洲精品中文字幕一二三四区| 国产精品一区二区免费欧美| 亚洲精品一区av在线观看| a在线观看视频网站| netflix在线观看网站| 草草在线视频免费看| 午夜精品久久久久久毛片777| 中文字幕久久专区| 婷婷六月久久综合丁香| 很黄的视频免费| 成年版毛片免费区| 精品久久久久久久毛片微露脸| 日韩一卡2卡3卡4卡2021年| 国产精品1区2区在线观看.| 国产精品日韩av在线免费观看| 精品日产1卡2卡| 亚洲中文字幕一区二区三区有码在线看 | 中文字幕精品免费在线观看视频| 欧美性猛交╳xxx乱大交人| 日日爽夜夜爽网站| www.999成人在线观看| 久久人妻av系列| 久久精品成人免费网站| 日本成人三级电影网站| 亚洲精华国产精华精| 美女国产高潮福利片在线看| 国产成人精品无人区| 搞女人的毛片| 51午夜福利影视在线观看| 好看av亚洲va欧美ⅴa在| 久久久精品欧美日韩精品| 国产1区2区3区精品| 亚洲精品粉嫩美女一区| 成人精品一区二区免费| 国产一区二区三区在线臀色熟女| 亚洲国产欧美网| 久久久国产精品麻豆| 久久国产亚洲av麻豆专区| 亚洲精品国产精品久久久不卡| 黄色a级毛片大全视频| 亚洲成人国产一区在线观看| 国产精品一区二区免费欧美| 长腿黑丝高跟| 老司机午夜十八禁免费视频| 身体一侧抽搐| 亚洲精华国产精华精| netflix在线观看网站| 国产私拍福利视频在线观看| 首页视频小说图片口味搜索| 91字幕亚洲| 男人的好看免费观看在线视频 | 熟妇人妻久久中文字幕3abv| 欧美激情极品国产一区二区三区| 成熟少妇高潮喷水视频| 日本五十路高清| 国产av又大| 两性午夜刺激爽爽歪歪视频在线观看 | 日本在线视频免费播放| 国产主播在线观看一区二区| 欧美中文综合在线视频| 18禁国产床啪视频网站| 日韩大尺度精品在线看网址| 国产三级黄色录像| 精品一区二区三区av网在线观看| 日韩欧美三级三区| 国产av一区在线观看免费| 国产蜜桃级精品一区二区三区| 亚洲成国产人片在线观看| 午夜福利高清视频| 在线观看免费日韩欧美大片| 久久国产精品影院| 久久人妻福利社区极品人妻图片| 看片在线看免费视频| 久久久国产精品麻豆| 国产成人av激情在线播放| 午夜a级毛片| 桃色一区二区三区在线观看| 天天躁夜夜躁狠狠躁躁| 老司机午夜十八禁免费视频| 99久久久亚洲精品蜜臀av| 麻豆av在线久日| 热re99久久国产66热| 天堂动漫精品| 国内久久婷婷六月综合欲色啪| 在线永久观看黄色视频| 亚洲一区高清亚洲精品| 麻豆久久精品国产亚洲av| 亚洲精品国产精品久久久不卡| 一卡2卡三卡四卡精品乱码亚洲| 午夜福利在线在线| 1024手机看黄色片| 18禁观看日本| 老司机午夜福利在线观看视频| 18禁观看日本| 麻豆成人午夜福利视频| 999久久久精品免费观看国产| av超薄肉色丝袜交足视频| 不卡av一区二区三区| 女性生殖器流出的白浆| 精品高清国产在线一区| 久久久久久久久久黄片| 欧美大码av| 国产高清激情床上av| x7x7x7水蜜桃| 国产亚洲精品久久久久久毛片| av视频在线观看入口| 在线观看舔阴道视频| 国产一区二区在线av高清观看| 日韩欧美国产在线观看| av在线播放免费不卡| 成年免费大片在线观看| 亚洲熟妇熟女久久| 久久久久久久久免费视频了| 午夜免费观看网址| 亚洲 欧美 日韩 在线 免费| 国产aⅴ精品一区二区三区波| 久久国产乱子伦精品免费另类| 欧美日韩福利视频一区二区| 每晚都被弄得嗷嗷叫到高潮| 午夜免费激情av| 欧美精品亚洲一区二区| 性色av乱码一区二区三区2| 美女 人体艺术 gogo| 国产乱人伦免费视频| 亚洲精品中文字幕一二三四区| 搡老熟女国产l中国老女人| 久久久久久大精品| 精品国产乱子伦一区二区三区| 他把我摸到了高潮在线观看| 色综合欧美亚洲国产小说| 免费看a级黄色片| 午夜精品久久久久久毛片777| 人人妻,人人澡人人爽秒播| 黄色片一级片一级黄色片| 每晚都被弄得嗷嗷叫到高潮| 国产欧美日韩一区二区精品| 老汉色∧v一级毛片| 午夜福利在线观看吧| 身体一侧抽搐| 午夜精品在线福利| 亚洲三区欧美一区| 青草久久国产| 韩国精品一区二区三区| 中文字幕高清在线视频| 欧美日韩中文字幕国产精品一区二区三区| 看免费av毛片| 国产一区二区激情短视频| 男女那种视频在线观看| 亚洲av电影在线进入| 免费观看精品视频网站| 久久中文字幕人妻熟女| 一本大道久久a久久精品| 亚洲九九香蕉| 精品国产国语对白av| 国产午夜精品久久久久久| 欧美大码av| 精品乱码久久久久久99久播| 亚洲人成网站高清观看| 长腿黑丝高跟| 久久青草综合色| АⅤ资源中文在线天堂| 日韩欧美国产在线观看| 99精品欧美一区二区三区四区| 成人18禁高潮啪啪吃奶动态图| 午夜福利一区二区在线看| 亚洲第一电影网av| 精品久久久久久,| 国产成人一区二区三区免费视频网站| av中文乱码字幕在线| 桃色一区二区三区在线观看| 免费看a级黄色片| 在线av久久热| 18禁黄网站禁片免费观看直播| 国产单亲对白刺激| 久久狼人影院| 亚洲国产中文字幕在线视频| 啦啦啦 在线观看视频| 黄片播放在线免费| 天天添夜夜摸| 欧美一级a爱片免费观看看 | 91成年电影在线观看| 在线十欧美十亚洲十日本专区| 欧美成人一区二区免费高清观看 | 亚洲欧美日韩无卡精品| 丰满人妻熟妇乱又伦精品不卡| 变态另类丝袜制服| 少妇熟女aⅴ在线视频| 国产亚洲av嫩草精品影院| 日本五十路高清| 色尼玛亚洲综合影院| 久久香蕉国产精品| 岛国在线观看网站| 久久香蕉激情| 日韩 欧美 亚洲 中文字幕| 精品久久久久久久久久免费视频| 久久中文字幕一级| 亚洲国产高清在线一区二区三 | 欧美日韩亚洲国产一区二区在线观看| 99热只有精品国产| 久久久久免费精品人妻一区二区 | 不卡av一区二区三区| 91国产中文字幕| 亚洲美女黄片视频| 两个人看的免费小视频| 久久中文字幕人妻熟女| 亚洲中文字幕日韩| 97超级碰碰碰精品色视频在线观看| 少妇被粗大的猛进出69影院| 在线国产一区二区在线| 免费看十八禁软件| 国产精品影院久久| 黄色丝袜av网址大全| 露出奶头的视频| 少妇 在线观看| 国产熟女午夜一区二区三区| 精华霜和精华液先用哪个| 黄片播放在线免费| 搡老妇女老女人老熟妇| 不卡一级毛片| 老司机福利观看| 久久久水蜜桃国产精品网| 久久久久国产精品人妻aⅴ院| 男人操女人黄网站| 精品国产一区二区三区四区第35| 一级毛片女人18水好多| 久久久久久久精品吃奶| 国产爱豆传媒在线观看 | 久热爱精品视频在线9| 欧美人与性动交α欧美精品济南到| 天天躁狠狠躁夜夜躁狠狠躁| 欧美久久黑人一区二区| 日本a在线网址| 久久婷婷成人综合色麻豆| 老司机福利观看| 久久香蕉国产精品| 亚洲欧美精品综合一区二区三区| 很黄的视频免费| 宅男免费午夜| 亚洲专区字幕在线| 国产av又大| 在线观看一区二区三区| 麻豆一二三区av精品| 午夜福利在线观看吧| 国产av在哪里看| 两个人看的免费小视频| а√天堂www在线а√下载| 日韩欧美 国产精品| 午夜福利成人在线免费观看| 亚洲熟妇熟女久久| av免费在线观看网站| 精品一区二区三区四区五区乱码| 免费电影在线观看免费观看| 中文资源天堂在线| 久久性视频一级片| 国产又爽黄色视频| 麻豆一二三区av精品| 一边摸一边抽搐一进一小说| 久久久国产欧美日韩av| 一级毛片女人18水好多| 老鸭窝网址在线观看| www.精华液| 久久久水蜜桃国产精品网| 国语自产精品视频在线第100页| 99热6这里只有精品| 亚洲,欧美精品.| 欧美 亚洲 国产 日韩一| 真人一进一出gif抽搐免费| 欧美在线黄色| 免费一级毛片在线播放高清视频| 中国美女看黄片| 精品久久久久久,| 日日夜夜操网爽| 视频在线观看一区二区三区| 2021天堂中文幕一二区在线观 | 制服丝袜大香蕉在线| 成人av一区二区三区在线看| 欧洲精品卡2卡3卡4卡5卡区| 一个人免费在线观看的高清视频| 亚洲国产高清在线一区二区三 | 国产男靠女视频免费网站| 亚洲人成网站高清观看| 欧美zozozo另类| 欧美又色又爽又黄视频| 亚洲在线自拍视频| 国产精品久久久久久人妻精品电影| 国产精品久久久久久亚洲av鲁大| 两个人看的免费小视频| 九色国产91popny在线| av视频在线观看入口| 久久欧美精品欧美久久欧美| 久久热在线av| 狠狠狠狠99中文字幕| 日韩欧美国产一区二区入口| 亚洲在线自拍视频| av超薄肉色丝袜交足视频| 午夜福利18| 看片在线看免费视频| 国产精华一区二区三区|