• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    六子棋中基于局部“路”掃描方式的博弈樹生成算法

    2016-01-18 00:29:31李學(xué)俊,王小龍,吳蕾
    智能系統(tǒng)學(xué)報 2015年2期
    關(guān)鍵詞:估值

    網(wǎng)絡(luò)出版地址:http://www.cnki.net/kcms/detail/23.1538.TP.20150326.1020.008.html

    六子棋中基于局部“路”掃描方式的博弈樹生成算法

    李學(xué)俊1,2,王小龍1,吳蕾1,劉慧婷1

    (1.安徽大學(xué) 計算機(jī)科學(xué)與技術(shù)學(xué)院,安徽 合肥 230601; 2.安徽大學(xué) 計算智能與信號處理重點(diǎn)實(shí)驗(yàn)室,安徽 合肥 230039)

    摘要:針對六子棋博弈比賽中基于“路”的全局掃描方式的博弈樹生成算法效率較低問題,首先分析了基于“路”的全局掃描方式的計算規(guī)則和估值分析,然后將博弈樹生成算法中的全局掃描方式改進(jìn)為局部掃描方式,并給出其計算規(guī)則和估值分析,接著設(shè)計了基于局部掃描方式的博弈樹生成算法,并集成到Alpha-Beta剪枝算法中。最后從搜索效率和博弈水平2個角度對全局掃描和局部掃描進(jìn)行實(shí)驗(yàn),實(shí)驗(yàn)結(jié)果表明,局部掃描方式在比賽時間要求的情況下,能夠大幅度提高搜索效率,并且博弈水平顯著優(yōu)于全局掃描方式。

    關(guān)鍵詞:機(jī)器博弈;六子棋;路;局部掃描;博弈樹;剪枝算法;估值

    DOI:10.3969/j.issn.1673-4785.201401022

    中圖分類號:TP31文獻(xiàn)標(biāo)志碼:A

    收稿日期:2014-01-09. 網(wǎng)絡(luò)出版日期:2015-03-26.

    基金項目:國家自然科學(xué)基金資助項目(61202227).

    作者簡介:

    中文引用格式:李學(xué)俊,王小龍,吳蕾,等. 六子棋中基于局部“路”掃描方式的博弈樹生成算法[J]. 智能系統(tǒng)學(xué)報, 2015, 10(2): 267-272.

    英文引用格式:LI Xuejun, WANG Xiaolong, WU Lei, et al. Game tree generation algorithm based on local-road scanning method for connect 6[J]. CAAI Transactions on Intelligent Systems, 2015, 10(2): 267-272.

    Game tree generation algorithm

    based on local-road scanning method for connect 6

    LI Xuejun1,2, WANG Xiaolong1, WU Lei1, LIU Huiting1

    (1.School of Computer Science and Technology, Anhui University, Hefei 230601, China; 2.Intelligent Computing and Signal Processing Laboratory, Anhui University, Hefei 230039, China)

    Abstract:Aiming at the problem that the game-tree generation algorithm generated by global scanning method is low in efficiency in the connect 6, this paper analyzes the calculation rules and valuation analysis of the global scanning method based on "road". Secondly, it develops the global scanning method of the game-tree generation algorithm into local scanning method, and introduces the calculation rules and valuation analysis. The game-tree generation algorithm is a local scanning method designed and integrated into the alpha-beta pruning search. Finally, the global and local scanning experiments are carried out from the two perspectives of search efficiency and playing skill. The experimental results showed that local scanning could greatly improve search efficiency within the competition time. The game ability is superior to that of the global scanning method.

    Keywords:computer game; connect 6; road; local scanning; game tree; pruning algorithm; evaluation

    通信作者:李學(xué)俊.E-mail:xjli@ahu.edu.cn.

    機(jī)器博弈(即計算機(jī)博弈)是人工智能領(lǐng)域的分支,同時也是該領(lǐng)域公認(rèn)的最具挑戰(zhàn)性的研究課題之一。棋類博弈是人類所能從事的智能活動之一,如果可以掌握博弈的本質(zhì),也就說明可以幫助人類從事智能活動。因?yàn)榇嬖谟谄孱惒┺牡脑瓌t或許就存在于人類的智能活動中[1]。近年來,國內(nèi)外計算機(jī)博弈比賽,極大地推動了計算機(jī)博弈問題的研究,促進(jìn)了計算機(jī)博弈理論和技術(shù)的發(fā)展。

    棋類計算機(jī)博弈涉及的棋種較多,六子棋就是其中之一,它由臺灣國立交通大學(xué)吳毅成教授發(fā)明。六子棋競賽規(guī)則很簡單,對弈雙方分別執(zhí)黑子和白子,在19×19的方格棋盤上,除了黑子先手第1步落一顆子外,雙方輪流落2顆子,先在水平、垂直或?qū)蔷€上形成連續(xù)的6子(或6子以上)的一方為勝[2]。六子棋由五子棋改良而來,但是其復(fù)雜度卻遠(yuǎn)大于五子棋[3],其中博弈樹復(fù)雜度達(dá)到10140,狀態(tài)空間復(fù)雜度達(dá)到10172,僅次于圍棋,與象棋相當(dāng)或略高[4]。

    作為剛興起不久的棋類游戲,六子棋的智能搜索算法研究較少。博弈樹搜索為計算機(jī)博弈的基本搜索算法,它是從根節(jié)點(diǎn)向下遞歸搜索而產(chǎn)生的包含雙方所有對弈過程的搜索樹。由于受搜索時間的嚴(yán)格約束,博弈樹能夠搜索到的葉子節(jié)點(diǎn)極少屬于末端節(jié)點(diǎn)(即根據(jù)對弈規(guī)則可以判定比賽結(jié)果),此時需要通過估值函數(shù)對葉子節(jié)點(diǎn)進(jìn)行量化計算,判斷該葉子節(jié)點(diǎn)所處的棋局狀態(tài)是有利于己方還是對方,且計算其有利程度大小[5]。

    在博弈樹的擴(kuò)展過程中會將雙方可能的對弈過程展示出來,首先對葉子節(jié)點(diǎn)進(jìn)行估值,再倒推計算根節(jié)點(diǎn)各分支節(jié)點(diǎn)的值,選擇估值最大的分支節(jié)點(diǎn)作為最佳解。但是隨著搜索深度的增加,博弈樹的節(jié)點(diǎn)數(shù)量成指數(shù)性增長。在極大極小值算法的基礎(chǔ)上,Alpha-Beta剪枝技術(shù)在搜索的過程中忽略了無用的節(jié)點(diǎn),并將其刪除,不對其估值,刪除無用節(jié)點(diǎn)時不會造成信息丟失,不影響根節(jié)點(diǎn)各分支節(jié)點(diǎn)的估值,提高了搜索速度[6]。在深層次的遞歸搜索中廣泛采用Alpha-Beta剪枝算法。為了提高計算速度,本文采用Alpha-Beta剪枝技術(shù)。

    由于六子棋對弈規(guī)則的特殊性,如果只考慮單個棋子對棋局的影響進(jìn)行估值計算,而未考慮棋子間的位置關(guān)系,肯定會影響棋局狀態(tài)的評估效果,由此產(chǎn)生了基于棋形的掃描方式[7-8]。常見的棋形主要分為六連、長連、活五、眠五、死五、活四、眠四、死四、活三、眠三、朦朧三、活二、眠二、朦朧二等[9]。文獻(xiàn)[2]提出基于棋形的數(shù)據(jù)表示方法,數(shù)據(jù)結(jié)構(gòu)依賴于棋形,將棋局的數(shù)據(jù)表示和局面知識結(jié)合起來,提高搜索效率。

    基于棋形的掃描方式將棋子間的位置關(guān)系聯(lián)系起來,通過產(chǎn)生某種棋形來表示對整個棋局狀態(tài)的影響程度,更具有直觀性,減少對單個棋子進(jìn)行估值的不穩(wěn)定性;然而目前棋形是通過經(jīng)驗(yàn)總結(jié)的,人為因素影響很大,不排除還存在其他種類,這需要通過大量實(shí)驗(yàn)來確定。大部分六子棋的估值計算都是基于棋形的掃描方式,但是由于棋形的判斷要求很高,常見的棋形種類較多,且每種棋形又存在多種落子方式[10],由此文獻(xiàn)[11]提出“路”的掃描方式。所謂“路”就在棋盤的水平、垂直或?qū)蔷€上出現(xiàn)連續(xù)6點(diǎn)連成一線[11]。

    基于“路”掃描方式能有效降低棋形判斷的復(fù)雜度,通過“路”掃描方式的估值相對于通過棋形掃描方式估值較為簡單,實(shí)現(xiàn)方面也更加容易,并且搜索時間較短。文獻(xiàn)[12]在傳統(tǒng)的基于“路”的全局掃描方式上采用自學(xué)習(xí)的方法自動調(diào)整估值函數(shù)的參數(shù),提高搜索精度。文獻(xiàn)[13]在應(yīng)用Alpha-Beta剪枝搜索時引入并行計算,大幅度提高搜索效率。

    “路”掃描方式的引入避免了精確判斷棋形的難題,減少了計算量;同時應(yīng)用面向?qū)ο蟮乃枷?,將“路”的信息抽象成類,易于?shí)現(xiàn)?;凇奥贰?的掃描方式解決了因棋形判斷不準(zhǔn)確而影響博弈水平的問題,但是應(yīng)用博弈樹搜索時,在對每個子節(jié)點(diǎn)的擴(kuò)展時都需要對棋盤進(jìn)行全局掃描。受博弈競賽時間約束,搜索深度和寬度都有所限制,博弈水平也達(dá)不到理想要求。因此本文在博弈樹生成子節(jié)點(diǎn)時將基于“路”的全局掃描方式改進(jìn)為局部掃描,并設(shè)計基于局部“路”掃描方式的博弈樹生成算法。

    1基于“路”的全局掃描方式

    1.1計算規(guī)則

    K子棋可用connect(m,n,k,p,q)表示[14],對弈雙方為黑方和白方,黑方先走。connect(m,n,k,p,q)的規(guī)則包括:1)棋盤的方格為m行n列,即含m×n個交叉點(diǎn);2)對弈時雙方輪流落p顆棋子(根據(jù)六子棋比賽黑方先手規(guī)則,第1次落q顆棋子);3)在棋盤的水平、垂直或?qū)蔷€上先形成k連獲勝。若在規(guī)定時間內(nèi)雙方均無法獲勝,則判為平局。

    K子棋中“路”的計算規(guī)則:1)水平方向:m行×(n-k+1)路/行,如圖1中(a)所示;2)垂直方向:n列×(m-k+1)路/列,類似于水平方向;3)左斜方向:由于k連需要k子連續(xù)相連,在左斜方向前k-1行不可能形成k連,故左斜方向路數(shù)為(m-k+1)行×(n-k+1)路/行,如圖1中(b);4)右斜方向:(n-k+1)列×(m-k+1)路/列,類似于左斜方向。

    六子棋是K子棋的一種[15],采用19×19方格棋盤,可表示為connect(19,19,6,2,1),總路數(shù)為

    (1)

    圖1 水平及左斜方向路數(shù)計算示例 Fig.1 Road number of horizontal and left diagonal direction

    1.2估值分析

    在“路”的信息表示中,設(shè)置n∈{0,1,2,3,4,5,6}表示該路中相同顏色棋子的個數(shù),設(shè)置c∈{′B′,′W′}表示路中棋子的顏色。若某路中含2種顏色棋子,表示該路不可能成為六連,則初始值不變。

    當(dāng)某路中c為已方棋子顏色時分配不同的價值,計算分配價值公式為

    (2)

    式中:Vown表示分配的價值,n越大表明己方在該路越容易形成六連,則分配的價值越大。

    當(dāng)某路中c為對方棋子顏色時分配不同的威脅值,計算威脅值公式為

    (3)

    式中:Vthreat表示分配的威脅值,n越大表明對方在該路越容易形成六連,則分配的威脅值越大。

    全局掃描估值可用己方所有“路”的價值之和減去對方所有“路”的威脅值之和表示。全局掃描棋局估值Vtotal可看作是每步落子后對當(dāng)前棋局的影響程度大小,即落子后棋盤全局掃描估值Vafter減去落子前棋盤全局掃描估值Vpre,可表達(dá)為

    (4)

    2基于“路”的局部掃描方式

    應(yīng)用Alpha-Beta剪枝技術(shù)搜索時,效率和精確度是非常重要又相互影響的因素[16]。文獻(xiàn)[2]中指出棋局狀態(tài)的變化均由新增的棋子引起,在棋局中只有新增棋子的水平方向、垂直方向和對角線方向上的棋形發(fā)生變化,對其他位置棋形無影響。在基于“路”的掃描過程中,每步落子對棋局的影響是由該兩落子在水平方向、垂直方向和對角線方向上的“路”所引起,與其他“路”沒有關(guān)系,故本文在博弈樹生成時,優(yōu)化改進(jìn)“路”的掃描方式。

    2.1計算規(guī)則

    假設(shè)在棋盤的(3,7)位置模擬一個落子,由圖2可得在水平方向有6路包含該落子,由此可得在局部掃描方式下,每步落子所影響的路數(shù)計算如式(5)所示。

    (5)

    式中:Npart表示局部掃描每步落子影響的路數(shù),Ndirect表示每個方向所含的路數(shù),Nscan表示一個落子所要掃描的方向數(shù),Nchess表示每步的落子數(shù)。

    圖2 局部掃描水平方向路數(shù)計算示例 Fig.2 Road number of horizontal direction by the local-road scanning method

    (6)

    2.2估值分析

    局部掃描方式本質(zhì)上和全局掃描方式的不同在于對每個子節(jié)點(diǎn)進(jìn)行擴(kuò)展時都要應(yīng)用“路”進(jìn)行局部掃描而不是全局掃描,它們的估值存在一定的聯(lián)系。

    (7)

    (8)

    3)由于每步落子不會對局部掃描以外的“路”估值產(chǎn)生影響,即落子后除局部掃描以外的“路”估值V″after等于落子前除局部掃描以外的“路”估值V″pre,表達(dá)為

    (9)

    所以,局部掃描的棋局估值為

    (10)

    由式(10)可以看出,局部掃描方式和全局掃描方式的棋盤估值相同,并沒有降低精確度,因此在博弈樹生成時,本文將棋盤掃描方式由全局掃描改進(jìn)為局部掃描,忽略無用掃描,以提高搜索速度。

    3局部掃描方式的博弈樹生成算法

    局部掃描方式的博弈樹生成算法主要用于子節(jié)點(diǎn)的擴(kuò)展過程。因?yàn)樗阉鞯膶挾仁怯邢薜?,根?jié)點(diǎn)遞歸向下搜索時,先采用局部掃描方式擴(kuò)展子節(jié)點(diǎn)并進(jìn)行估值,并通過排序選擇估值排名靠前的Width個節(jié)點(diǎn)繼續(xù)遞歸向下搜索,刪除其他不進(jìn)行遞歸搜索的節(jié)點(diǎn)。為了更方便地應(yīng)用博弈搜索策略,將“2步”落子并作“一步”,對模擬的2步落子進(jìn)行綜合估值,保證搜索效率和博弈水平。基于局部掃描方式的博弈樹生成算法偽代碼如下。

    基于局部掃描的博弈樹生成算法中,輸入模擬落子的棋子顏色Color及搜索寬度Width,輸出估值排名前Width的落子組合點(diǎn)。

    本文的六子棋搜索算法采用Alpha-Beta剪枝技術(shù)實(shí)現(xiàn),設(shè)置深度為Depth,寬度為Width。對弈過程中,根據(jù)當(dāng)前棋局狀態(tài)擴(kuò)展子節(jié)點(diǎn)時,采用基于局部掃描的博弈樹生成算法對所有可以進(jìn)行擴(kuò)展的子節(jié)點(diǎn)進(jìn)行估值,選擇估值為前Width名的子節(jié)點(diǎn)繼續(xù)擴(kuò)展,直至擴(kuò)展深度為Depth為止。通過對葉子節(jié)點(diǎn)估值,倒推計算根部各分支節(jié)點(diǎn)的估值,選擇最大值節(jié)點(diǎn)對應(yīng)的落子方式為最佳解。

    /*Input:Color,Width Output:listWay(估值排名前Width的2步落子組合)*/

    1) Localscanning(int Color,int Width){

    2)AddMovePoints(ListPoints);//計算模擬移動的落子位置

    3)for(i=0;i

    4)for(j=i+1;j

    5)scanPart(ListPoints[i].Point,ListPoints[j].Point);//落子前局部掃描

    6)Part_preValue=Caculate();//計算模擬落子前局部掃描估值

    7)SimulateMove();//模擬落子

    8)scanPart(ListPoints[i].Point,ListPoints[j].Point);//落子后局部掃描

    9)Part_afterValue=Caculate();//計算模擬落子后局部掃描估值

    10)Value=Part_afterValue-Part_preValue;

    11)RestoreMove();//撤銷落子

    12)AddListWay(ListPoints[i].Point,ListPoints[j].Point,Value);

    13)}

    14)GetListWay(ListWay,Width);

    4實(shí)驗(yàn)

    4.1實(shí)驗(yàn)環(huán)境

    基于上述六子棋搜索策略,本文設(shè)計并實(shí)現(xiàn)了六子棋博弈系統(tǒng)DragonWorld(龍行天下)-人機(jī)對弈平臺。該系統(tǒng)采用C#語言開發(fā),操作系統(tǒng)為Windows 7,硬件環(huán)境為聯(lián)想(G490) CPU、2.60GHZ的Inter處理器和4G內(nèi)存。

    4.2實(shí)驗(yàn)與分析

    為比較不同的掃描方式,本文從搜索效率和博弈水平2個角度進(jìn)行實(shí)驗(yàn)對比。通過搜索效率的實(shí)驗(yàn),分析不同深度和寬度對搜索效率的影響。通過博弈水平的實(shí)驗(yàn),在嚴(yán)格遵循競賽時間要求的前提下,分析同等條件下不同搜索深度和寬度對博弈水平的影響。實(shí)驗(yàn)中每局對弈時間不超過15min。

    表1價值與威脅值分配

    Table 1The distribution of the value and threat value

    路數(shù)己方路的價值對方路的威脅值6路100000010000005路20060004路20060003路40502路20251路11

    4.2.1搜索效率實(shí)驗(yàn)

    搜索效率包括深度和寬度2個方面。通過深度實(shí)驗(yàn),分析同等寬度情況下不同搜索深度對搜索效率的影響;通過寬度實(shí)驗(yàn),分析同等深度情況下不同搜索寬度對搜索效率的影響。

    設(shè)置Width=10,采用深度為3、4、5時,全局掃描和局部掃描時間進(jìn)行對比實(shí)驗(yàn),各對弈100局,每步的平均搜索時間如圖3所示。由圖3可得,隨著步數(shù)的增加,全局掃描的搜索時間明顯增加,局部掃描卻無明顯變化。隨著搜索深度的增加,局部掃描的搜索效率優(yōu)化愈加明顯。對于第9步,在深度為3、4、5時,全局掃描搜索時間分別為23.030、269.902、640.780s;而局部掃描搜索時間分別為2.010、31.855、36.301s。

    圖3 2種掃描方式不同深度的搜索時間對比 Fig.3 Search time two scanning method with different depths

    4.2.2博弈水平實(shí)驗(yàn)

    設(shè)置Depth=3,全局掃描和局部掃描采用不同寬度對弈,每個寬度對弈100局,博弈水平如圖4所示。局部掃描顯著優(yōu)于全局掃描,Width=20時,局部掃描和全局掃描的對弈勝率是96:4。設(shè)置Width=10,全局掃描和局部掃描采用不同深度對弈,各深度對弈100局博弈水平如圖6所示。在同等條件下,局部掃描的搜索深度增加,博弈水平遠(yuǎn)遠(yuǎn)超過全局掃描。在Depth=5時,局部掃描和全局掃描的對弈勝率是95:5。因?yàn)殡S著深度增加,搜索層次越大,葉子節(jié)點(diǎn)越接近末端節(jié)點(diǎn),越提高獲勝幾率。

    圖4 2種掃描方式在不同寬度的博弈結(jié)果 Fig.4 Game results with different widths

    圖5 2種掃描方式在不同深度的博弈結(jié)果 Fig.5 Game results with different depths

    5結(jié)束語

    本文將優(yōu)化后的掃描方式應(yīng)用到六子棋博弈中,從搜索效率和博弈水平2個角度評價,相對于全局掃描,局部掃描大幅度提高搜索效率,博弈水平也有明顯提高。本文僅在開局和中局采用局部掃描方式,提高搜索效率,如何在殘局階段改進(jìn)估值提高效率,有待進(jìn)一步研究。博弈樹生成算法仍存在改進(jìn)之處,例如估值方法中對于己方“路”的價值和對方“路”的威脅值的分配仍需手動調(diào)整,搜索深度僅到5層,依然未達(dá)到理想要求。

    參考文獻(xiàn):

    [1]張利群.五道棋計算機(jī)博弈程序的設(shè)計與實(shí)現(xiàn)[J]. 計算機(jī)工程, 2010(10): 227-228, 231.

    ZHANG Liqun. Design and realization of Wudao chess computer game program[J]. Computer Engineering, 2010(10): 227-228, 231.

    [2]徐長明,馬宗民,徐心和.一種新的連珠棋局面表示法及其在六子棋中的應(yīng)用[J].東北大學(xué)學(xué)報:自然科學(xué)版, 2009(4): 60-63.

    XU Changming, MA Zongmin, XU Xinhe. A new board representation method for k-in-a-row games with its application to connect 6[J].Journal Northeastern University: Natural Science, 2009(4): 60-63.

    [3]QIAO Zhihua, YANG Ming, WANG Zijuan. Technologies analysis of connect6 computer game[J]. Advanced Materials Research, 2011, 1077 (171) : 679-682.

    [4]ZHANG Ruimei, LIU Changcheng, WANG Chuandui. Research on connect 6 programming based on mtd(f) and deeper-always transposition table[C]//2012 IEEE 2nd International Conference on Cloud Computing and Intelligence Systems. [S.l.], 2012: 254-255.

    [5]徐長明.基于連珠模式的六子棋機(jī)器博弈關(guān)鍵技術(shù)研究[D]. 沈陽: 東北大學(xué), 2010: 15-36.

    XU Changming. Research on key technologies of connection-pattern based computer connect 6[D]. Shenyang: Northeastern University, 2010: 15-36.

    [6]KNUTH D E, MOORE R W. An analysis of alpha-beta pruning[J]. Artificial Intelligence, 1975, 6(4): 293-326.

    [7]李翠珠.六子棋計算機(jī)博弈系統(tǒng)的研究與實(shí)現(xiàn)[D]. 重慶: 重慶理工大學(xué), 2010: 43-46.

    LI Cuizhu. Research and Implementation of the system of connect 6 game[D]. Chongqing: Chongqing University of Technology, 2010: 43-46.

    [8]張穎.六子棋啟發(fā)式搜索算法的優(yōu)化與設(shè)計[J]. 西北師范大學(xué)學(xué)報: 自然科學(xué)版, 2008(4): 31-36, 58.

    ZHANG Ying. Optimization and design of connect6 heuristic searching algorithm[J]. Journal of Northwest Normal University: Natural Science, 2008(4): 31-36, 58.

    [9]黃繼平,苗華,張棟.用遺傳算法實(shí)現(xiàn)六子棋評估函數(shù)參數(shù)優(yōu)化[J]. 重慶工學(xué)院學(xué)報: 自然科學(xué)版, 2009(11): 91-95.

    HUANG Jiping, MIAO Hua, ZHANG Dong. Optimizing the evaluation function parameters of connect6 with genetic algorithms[J].Journal of Chongqing Institute of Technology: Natural Science, 2009(11): 91-95.

    [10]陳光年.基于智能算法的六子棋博弈行為選擇的應(yīng)用研究[D]. 重慶: 重慶理工大學(xué), 2010: 20-25.

    CHEN Guangnian. The research and application on the behavior election of connect 6 based on intelligent algorithms[D]. Chongqing: Chongqing University of Technology, 2010: 20-25.

    [11]張小川, 陳光年, 張世強(qiáng), 等.六子棋博弈的評估函數(shù)[J]. 重慶理工大學(xué)學(xué)報: 自然科學(xué)版, 2010(2): 68-72.

    ZHANG Xiaochuan, CHEN Guangnian, ZHANG Shiqiang. Research on evaluation functions for computer game of connect6[J]. Journal of Chongqing University of Technology: Natural Science, 2010(2): 68-72.

    [12]徐長明, 馬宗民, 徐心和, 等. 面向機(jī)器博弈的即時差分學(xué)習(xí)研究[J]. 計算機(jī)科學(xué), 2010(8): 225-229.

    XU Changming, MA Zongmin, XU Xinhe. Study of temporal difference learning in computer games[J]. Computer Science, 2010(8): 225-229.

    [13]徐心和, 鄧志立, 王驕, 等.機(jī)器博弈研究面臨的各種挑戰(zhàn)[J]. 智能系統(tǒng)學(xué)報, 2008, 3(4): 10-15.

    XU Xinhe, DENG Zhili, WANG Jiao, et al. Challenging issues facing computer game research[J]. CAAI Transactions on Intelligent Systems, 2008, 3(4): 10-15.

    [14]閔文杰. 六子棋計算機(jī)博弈關(guān)鍵技術(shù)研究[D]. 重慶:重慶交通大學(xué), 2010: 12-18.

    MIN Wenjie. Research on the key technologies of the connect 6 computer game[D]. Chongqing: Chongqing Jiaotong University, 2010: 12-18.

    [15]MARTIN K, SVEN S, RAINER H. Improved tree-based strategies for a connect 6 threat-based hardware design[C]//2013 IEEE Pacific Rim Conference on Communications, Computers and Signal Processing (PACRIM). [S.l.], 2013: 32-36.

    [16]張明亮,吳俊,李凡長.五子棋機(jī)器博弈系統(tǒng)評估函數(shù)的設(shè)計[J]. 計算機(jī)應(yīng)用, 2012(7): 189-192, 210.

    ZHANG Mingliang, WU Jun, LI Fanchang. Design of evaluation function for computer gobang game system[J]. Journal of Computer Applications, 2012(7): 189-192, 210.

    李學(xué)俊,男,1976年生,副教授,中國人工智能學(xué)會機(jī)器博弈專業(yè)委員會理事,主要研究方向?yàn)橹悄苘浖⒃乒ぷ髁鳌?/p>

    王小龍,男,1989年生,碩士,主要研究方向?yàn)闄C(jī)器博弈。

    吳蕾,女,1978年生,講師,博士研究生,中國人工智能學(xué)會機(jī)器博弈專業(yè)委員會理事,主要研究方向?yàn)闄C(jī)器博弈,軟件測試。

    猜你喜歡
    估值
    估值300億!沙特阿美擬分拆上市
    巧用估值法
    《憤怒的小鳥》開發(fā)商或上市,估值20億美元
    玩具世界(2017年8期)2017-02-06 03:01:36
    中國獨(dú)角獸企業(yè)估值榜
    The men’s health center:Disparities in gender specif i c health services among the top 50“best hospitals”in America
    容聯(lián)云通訊:三億美元估值背后
    如何創(chuàng)業(yè)一年估值過十億
    豬八戒網(wǎng)為何估值過百億?
    100億總估值的煉成法
    泰笛洗滌:一個月估值翻了六倍
    黄色丝袜av网址大全| 建设人人有责人人尽责人人享有的| 国产麻豆69| 免费人成视频x8x8入口观看| 老熟妇乱子伦视频在线观看| 女人被躁到高潮嗷嗷叫费观| 一级毛片高清免费大全| 欧美日韩精品网址| 人人妻,人人澡人人爽秒播| 久久人人97超碰香蕉20202| 村上凉子中文字幕在线| 久久精品人人爽人人爽视色| 桃红色精品国产亚洲av| 国产成人免费观看mmmm| 美女福利国产在线| 亚洲精品中文字幕在线视频| 欧美精品亚洲一区二区| 精品国产乱子伦一区二区三区| 看免费av毛片| 国产视频一区二区在线看| 一级a爱片免费观看的视频| 后天国语完整版免费观看| 亚洲欧美激情综合另类| 久久国产亚洲av麻豆专区| 亚洲一区中文字幕在线| 91成人精品电影| 岛国毛片在线播放| 亚洲aⅴ乱码一区二区在线播放 | 亚洲精品久久成人aⅴ小说| 18在线观看网站| 久久精品国产99精品国产亚洲性色 | 不卡av一区二区三区| 丝袜在线中文字幕| 免费在线观看完整版高清| 国产精品久久久久久人妻精品电影| 在线观看免费午夜福利视频| 精品国产乱子伦一区二区三区| 侵犯人妻中文字幕一二三四区| 日本欧美视频一区| 性色av乱码一区二区三区2| 国产精品美女特级片免费视频播放器 | 大型黄色视频在线免费观看| 高清视频免费观看一区二区| 高清毛片免费观看视频网站 | 国产成人啪精品午夜网站| 久久精品亚洲精品国产色婷小说| 国产高清视频在线播放一区| 啪啪无遮挡十八禁网站| aaaaa片日本免费| 在线av久久热| 亚洲午夜理论影院| 国产精品影院久久| 精品久久久久久久毛片微露脸| 别揉我奶头~嗯~啊~动态视频| 国产成人啪精品午夜网站| 又黄又爽又免费观看的视频| 国产精品久久久av美女十八| 精品国产乱码久久久久久男人| 黄色片一级片一级黄色片| 久久青草综合色| 妹子高潮喷水视频| 国产精品二区激情视频| 两性夫妻黄色片| 成人精品一区二区免费| 999久久久国产精品视频| 亚洲久久久国产精品| 亚洲一区二区三区欧美精品| 校园春色视频在线观看| 欧美日韩av久久| 每晚都被弄得嗷嗷叫到高潮| 在线观看免费视频网站a站| 男女免费视频国产| 最新在线观看一区二区三区| 欧美大码av| 一区二区日韩欧美中文字幕| 香蕉丝袜av| 成人手机av| 国产精品一区二区在线不卡| 成人特级黄色片久久久久久久| 热99久久久久精品小说推荐| 国产成人影院久久av| 一区二区三区国产精品乱码| 欧美+亚洲+日韩+国产| 女人久久www免费人成看片| 久9热在线精品视频| 精品久久久久久久久久免费视频 | 亚洲精品国产区一区二| 捣出白浆h1v1| 国产熟女午夜一区二区三区| 亚洲精品av麻豆狂野| 亚洲午夜理论影院| 亚洲精品在线观看二区| 黑丝袜美女国产一区| 18禁黄网站禁片午夜丰满| 日日摸夜夜添夜夜添小说| 午夜精品国产一区二区电影| 在线天堂中文资源库| 麻豆av在线久日| 免费av中文字幕在线| 久久精品国产亚洲av香蕉五月 | 99国产极品粉嫩在线观看| 国产欧美亚洲国产| 99久久国产精品久久久| 久久人人爽av亚洲精品天堂| 黄色 视频免费看| 亚洲熟妇熟女久久| 一级片免费观看大全| 新久久久久国产一级毛片| 在线天堂中文资源库| 99香蕉大伊视频| 国产片内射在线| 久久国产精品影院| 国产xxxxx性猛交| 久久香蕉激情| 亚洲欧美日韩高清在线视频| 欧美亚洲日本最大视频资源| 日本黄色日本黄色录像| 99热国产这里只有精品6| 久久 成人 亚洲| 日韩制服丝袜自拍偷拍| 91av网站免费观看| 中出人妻视频一区二区| 亚洲午夜精品一区,二区,三区| 日韩精品免费视频一区二区三区| videosex国产| 久久午夜亚洲精品久久| 久久久久视频综合| 91麻豆av在线| 男女高潮啪啪啪动态图| 我的亚洲天堂| 亚洲成人手机| 国产精品国产高清国产av | 啪啪无遮挡十八禁网站| 国产麻豆69| 精品少妇久久久久久888优播| 午夜福利影视在线免费观看| 一二三四在线观看免费中文在| 十八禁高潮呻吟视频| 日本精品一区二区三区蜜桃| 国产精品久久久久久人妻精品电影| aaaaa片日本免费| 一级毛片女人18水好多| 一本大道久久a久久精品| 中文亚洲av片在线观看爽 | 国产精品秋霞免费鲁丝片| 国产高清国产精品国产三级| av电影中文网址| 国产99白浆流出| 日韩制服丝袜自拍偷拍| 亚洲欧美一区二区三区黑人| 久久ye,这里只有精品| 美女视频免费永久观看网站| 好男人电影高清在线观看| 亚洲av片天天在线观看| 另类亚洲欧美激情| 男人舔女人的私密视频| 久久国产精品男人的天堂亚洲| 伦理电影免费视频| 国产精品综合久久久久久久免费 | 亚洲成人免费电影在线观看| 国产精品.久久久| 两性夫妻黄色片| 欧美最黄视频在线播放免费 | 在线视频色国产色| 麻豆av在线久日| xxxhd国产人妻xxx| 久久国产乱子伦精品免费另类| 精品福利永久在线观看| 欧美日韩黄片免| 美女高潮到喷水免费观看| 日本vs欧美在线观看视频| 色婷婷久久久亚洲欧美| 欧美黄色片欧美黄色片| 免费不卡黄色视频| 欧美精品亚洲一区二区| 国产一区二区激情短视频| 日本撒尿小便嘘嘘汇集6| 亚洲午夜精品一区,二区,三区| 欧美老熟妇乱子伦牲交| 日韩一卡2卡3卡4卡2021年| 热99国产精品久久久久久7| 国产精品国产av在线观看| 99精品久久久久人妻精品| 午夜福利影视在线免费观看| 亚洲精品一二三| 午夜精品久久久久久毛片777| 午夜日韩欧美国产| 51午夜福利影视在线观看| 亚洲全国av大片| 91av网站免费观看| 黑人猛操日本美女一级片| 美女视频免费永久观看网站| 亚洲欧美一区二区三区黑人| 纯流量卡能插随身wifi吗| 1024视频免费在线观看| 少妇猛男粗大的猛烈进出视频| 国产在线观看jvid| 男人操女人黄网站| 免费在线观看视频国产中文字幕亚洲| 深夜精品福利| 亚洲精品国产色婷婷电影| 亚洲成人免费电影在线观看| 久久中文字幕一级| 久久热在线av| 精品亚洲成a人片在线观看| 亚洲国产欧美一区二区综合| 99国产精品99久久久久| 国产精品久久久人人做人人爽| 在线观看日韩欧美| 久久久久国产精品人妻aⅴ院 | 天天操日日干夜夜撸| 成人影院久久| 十八禁高潮呻吟视频| 麻豆av在线久日| 99国产精品99久久久久| 国产精品久久久人人做人人爽| 国产精品美女特级片免费视频播放器 | 国产成人一区二区三区免费视频网站| 一级a爱视频在线免费观看| 在线天堂中文资源库| 777米奇影视久久| 国产一区二区三区视频了| 欧美激情高清一区二区三区| 91老司机精品| 久久国产精品男人的天堂亚洲| 两性夫妻黄色片| 高清欧美精品videossex| 欧美老熟妇乱子伦牲交| 成年女人毛片免费观看观看9 | 久久久久久久精品吃奶| 久久青草综合色| 啦啦啦免费观看视频1| 国产欧美日韩一区二区精品| 午夜激情av网站| 成人免费观看视频高清| 国产人伦9x9x在线观看| 51午夜福利影视在线观看| 少妇 在线观看| videosex国产| 亚洲五月色婷婷综合| 欧美日韩瑟瑟在线播放| 亚洲国产欧美网| 午夜福利乱码中文字幕| 99热网站在线观看| 国产无遮挡羞羞视频在线观看| 99国产综合亚洲精品| 正在播放国产对白刺激| 欧美av亚洲av综合av国产av| 免费观看a级毛片全部| 成年人午夜在线观看视频| 大香蕉久久网| 亚洲五月婷婷丁香| 国产成+人综合+亚洲专区| 免费在线观看完整版高清| 国产97色在线日韩免费| 国产精品亚洲一级av第二区| 免费观看人在逋| 亚洲欧美日韩高清在线视频| 在线观看免费高清a一片| 日本欧美视频一区| 热99re8久久精品国产| 下体分泌物呈黄色| 日韩欧美免费精品| 亚洲精品av麻豆狂野| 国产av一区二区精品久久| 这个男人来自地球电影免费观看| 黄片播放在线免费| 国产又爽黄色视频| 日韩欧美在线二视频 | 精品国产一区二区久久| 在线观看www视频免费| 男女之事视频高清在线观看| 丝袜美足系列| 91精品三级在线观看| 熟女少妇亚洲综合色aaa.| 999久久久精品免费观看国产| 亚洲av日韩在线播放| 黄色怎么调成土黄色| 久久久精品免费免费高清| 99精品久久久久人妻精品| 亚洲欧美一区二区三区久久| 久久精品人人爽人人爽视色| 91老司机精品| 99精国产麻豆久久婷婷| 亚洲精品av麻豆狂野| 久久天堂一区二区三区四区| 成人三级做爰电影| 亚洲美女黄片视频| 黄网站色视频无遮挡免费观看| 久久中文字幕一级| 精品高清国产在线一区| 成年人免费黄色播放视频| 亚洲精品国产色婷婷电影| 欧美av亚洲av综合av国产av| 99久久精品国产亚洲精品| 国产无遮挡羞羞视频在线观看| 欧美精品人与动牲交sv欧美| 欧美日韩瑟瑟在线播放| 免费女性裸体啪啪无遮挡网站| 国产高清国产精品国产三级| 国产欧美亚洲国产| 制服人妻中文乱码| 在线观看www视频免费| 日韩熟女老妇一区二区性免费视频| 国产精品亚洲av一区麻豆| 成人永久免费在线观看视频| 国产一区在线观看成人免费| 国产成人影院久久av| 中文字幕av电影在线播放| 国产不卡av网站在线观看| 大香蕉久久成人网| 9191精品国产免费久久| 精品国产一区二区三区四区第35| 男人的好看免费观看在线视频 | 丰满饥渴人妻一区二区三| 桃红色精品国产亚洲av| 亚洲欧美精品综合一区二区三区| 丰满迷人的少妇在线观看| 国产高清视频在线播放一区| 人人妻人人爽人人添夜夜欢视频| 日本一区二区免费在线视频| 国产97色在线日韩免费| 精品国产一区二区三区久久久樱花| 十分钟在线观看高清视频www| 777久久人妻少妇嫩草av网站| 99精品欧美一区二区三区四区| 18禁黄网站禁片午夜丰满| 色婷婷久久久亚洲欧美| 在线免费观看的www视频| 人人妻人人澡人人看| 美女国产高潮福利片在线看| 亚洲第一青青草原| 99热网站在线观看| 黑人巨大精品欧美一区二区mp4| 国产一区二区激情短视频| 婷婷丁香在线五月| 亚洲中文字幕日韩| 欧美日韩亚洲综合一区二区三区_| 国产人伦9x9x在线观看| 国产精品影院久久| av网站免费在线观看视频| 人人妻人人添人人爽欧美一区卜| 国产精品综合久久久久久久免费 | 99久久精品国产亚洲精品| 国产乱人伦免费视频| 19禁男女啪啪无遮挡网站| 久久久国产成人精品二区 | 久久婷婷成人综合色麻豆| 中文字幕人妻丝袜制服| 午夜成年电影在线免费观看| 美国免费a级毛片| 在线观看一区二区三区激情| 久久中文字幕一级| 视频区图区小说| 岛国在线观看网站| 深夜精品福利| 久久久久久亚洲精品国产蜜桃av| 国产99久久九九免费精品| 亚洲成人免费av在线播放| 久久久久久久久久久久大奶| 中文字幕av电影在线播放| 精品久久久久久久久久免费视频 | 久久天躁狠狠躁夜夜2o2o| 丰满迷人的少妇在线观看| 亚洲专区国产一区二区| 久久精品人人爽人人爽视色| 成年女人毛片免费观看观看9 | 精品人妻熟女毛片av久久网站| 女人被狂操c到高潮| 亚洲三区欧美一区| 丝袜美腿诱惑在线| 人人妻人人添人人爽欧美一区卜| 国产在线观看jvid| 欧美精品一区二区免费开放| 咕卡用的链子| 精品乱码久久久久久99久播| 在线av久久热| 亚洲成人免费电影在线观看| 天天添夜夜摸| 欧美精品av麻豆av| 亚洲全国av大片| 久久亚洲真实| 午夜福利欧美成人| 国产亚洲精品久久久久久毛片 | 成人18禁在线播放| 亚洲专区中文字幕在线| 精品免费久久久久久久清纯 | 亚洲男人天堂网一区| 日本一区二区免费在线视频| 国产精品乱码一区二三区的特点 | 亚洲午夜理论影院| 久久精品aⅴ一区二区三区四区| 国产av又大| 欧美精品一区二区免费开放| 一本综合久久免费| 久久天堂一区二区三区四区| 极品人妻少妇av视频| 黄色成人免费大全| 一二三四社区在线视频社区8| 成人国语在线视频| 在线观看免费视频日本深夜| 欧美黑人欧美精品刺激| 狂野欧美激情性xxxx| 精品国产超薄肉色丝袜足j| 亚洲精品粉嫩美女一区| 熟女少妇亚洲综合色aaa.| av线在线观看网站| 满18在线观看网站| 精品少妇久久久久久888优播| 午夜福利欧美成人| 99热国产这里只有精品6| 久久国产精品影院| 天天添夜夜摸| 亚洲精品久久午夜乱码| avwww免费| 久久香蕉激情| 在线观看66精品国产| 亚洲九九香蕉| 人妻丰满熟妇av一区二区三区 | 免费人成视频x8x8入口观看| 久久国产亚洲av麻豆专区| 国产主播在线观看一区二区| 无人区码免费观看不卡| 一边摸一边做爽爽视频免费| 俄罗斯特黄特色一大片| 两个人看的免费小视频| 日韩欧美一区视频在线观看| 成年人午夜在线观看视频| 精品国产一区二区三区四区第35| 午夜福利,免费看| 亚洲成国产人片在线观看| 久久婷婷成人综合色麻豆| 亚洲av第一区精品v没综合| 中文字幕av电影在线播放| 少妇被粗大的猛进出69影院| 国产区一区二久久| 国产成+人综合+亚洲专区| 99在线人妻在线中文字幕 | 精品久久久久久,| 久99久视频精品免费| 麻豆成人av在线观看| 水蜜桃什么品种好| 啦啦啦 在线观看视频| 午夜久久久在线观看| 成人特级黄色片久久久久久久| 最近最新中文字幕大全免费视频| 久久青草综合色| 久久精品aⅴ一区二区三区四区| 国产亚洲欧美98| 精品少妇一区二区三区视频日本电影| 久久精品人人爽人人爽视色| 久久人妻av系列| 日韩欧美一区视频在线观看| 首页视频小说图片口味搜索| 中文字幕制服av| 男人操女人黄网站| 亚洲欧美日韩另类电影网站| 男女下面插进去视频免费观看| 在线观看舔阴道视频| 国产精品二区激情视频| 91大片在线观看| 欧美黑人精品巨大| 最近最新中文字幕大全免费视频| 亚洲中文日韩欧美视频| 捣出白浆h1v1| 黄片播放在线免费| 国产精品国产av在线观看| svipshipincom国产片| 亚洲全国av大片| 国产精品偷伦视频观看了| 美女国产高潮福利片在线看| 俄罗斯特黄特色一大片| 丝袜人妻中文字幕| 国产人伦9x9x在线观看| 两性夫妻黄色片| 激情在线观看视频在线高清 | 久久热在线av| 国产xxxxx性猛交| 久久久久国产一级毛片高清牌| 国产在线一区二区三区精| 久久久国产成人免费| 中文亚洲av片在线观看爽 | 亚洲精品久久成人aⅴ小说| 成人手机av| av免费在线观看网站| 午夜福利在线免费观看网站| 欧美最黄视频在线播放免费 | 国产在线一区二区三区精| 欧美人与性动交α欧美精品济南到| 在线观看免费视频日本深夜| 人成视频在线观看免费观看| 真人做人爱边吃奶动态| 国产高清videossex| 亚洲欧美色中文字幕在线| 精品久久久久久电影网| 久久久精品区二区三区| 母亲3免费完整高清在线观看| 美女视频免费永久观看网站| 欧美精品一区二区免费开放| 女同久久另类99精品国产91| 99国产综合亚洲精品| 男男h啪啪无遮挡| 亚洲美女黄片视频| 无人区码免费观看不卡| 老汉色∧v一级毛片| 亚洲人成电影观看| 久久精品亚洲熟妇少妇任你| 天天添夜夜摸| 99国产精品99久久久久| www.999成人在线观看| 淫妇啪啪啪对白视频| 久久精品国产清高在天天线| 高清在线国产一区| 日本欧美视频一区| e午夜精品久久久久久久| 大型黄色视频在线免费观看| 成在线人永久免费视频| 99国产精品99久久久久| 久久久久久久午夜电影 | 久久99一区二区三区| 亚洲国产欧美网| av有码第一页| 国产99久久九九免费精品| 亚洲第一青青草原| 国产高清国产精品国产三级| 两个人免费观看高清视频| 欧美日韩亚洲国产一区二区在线观看 | 国产精品综合久久久久久久免费 | 亚洲午夜精品一区,二区,三区| 亚洲欧美一区二区三区黑人| 搡老熟女国产l中国老女人| 五月开心婷婷网| 高清黄色对白视频在线免费看| 欧美丝袜亚洲另类 | 岛国在线观看网站| 国产有黄有色有爽视频| 99国产精品一区二区三区| 少妇裸体淫交视频免费看高清 | 99精品在免费线老司机午夜| 99re6热这里在线精品视频| 亚洲欧美日韩高清在线视频| 亚洲成av片中文字幕在线观看| 50天的宝宝边吃奶边哭怎么回事| 国产一区二区三区综合在线观看| 免费一级毛片在线播放高清视频 | 久久婷婷成人综合色麻豆| 在线观看日韩欧美| 国产深夜福利视频在线观看| 18禁黄网站禁片午夜丰满| 飞空精品影院首页| 波多野结衣一区麻豆| 久久婷婷成人综合色麻豆| 亚洲人成电影免费在线| 黑人巨大精品欧美一区二区蜜桃| 很黄的视频免费| 国产在线一区二区三区精| 国产区一区二久久| 国产成人系列免费观看| av网站在线播放免费| 国产高清激情床上av| 男女高潮啪啪啪动态图| 亚洲久久久国产精品| 日日爽夜夜爽网站| 久久国产精品大桥未久av| 亚洲自偷自拍图片 自拍| 精品福利永久在线观看| 一二三四在线观看免费中文在| 男人的好看免费观看在线视频 | 久久精品国产综合久久久| 国产伦人伦偷精品视频| 激情在线观看视频在线高清 | 精品福利观看| 一级,二级,三级黄色视频| 日韩免费av在线播放| 精品熟女少妇八av免费久了| 丝瓜视频免费看黄片| 亚洲精品乱久久久久久| av欧美777| 国产片内射在线| 99精品欧美一区二区三区四区| 91精品国产国语对白视频| 免费观看人在逋| www日本在线高清视频| 免费看十八禁软件| 老汉色∧v一级毛片| 日韩有码中文字幕| 无遮挡黄片免费观看| 免费久久久久久久精品成人欧美视频| 精品人妻在线不人妻| 丰满迷人的少妇在线观看| 国产精品.久久久| 久久精品亚洲精品国产色婷小说| cao死你这个sao货| 十分钟在线观看高清视频www| 午夜影院日韩av| 国产亚洲欧美精品永久| 另类亚洲欧美激情| av国产精品久久久久影院| 成人亚洲精品一区在线观看| av电影中文网址| 亚洲欧美一区二区三区黑人| 精品少妇一区二区三区视频日本电影| 中文欧美无线码| 丝瓜视频免费看黄片| 视频区图区小说| 午夜影院日韩av| 亚洲avbb在线观看| 亚洲av美国av| 男男h啪啪无遮挡| 人成视频在线观看免费观看| 欧美 亚洲 国产 日韩一| 久久精品国产亚洲av高清一级| 久久久久国产精品人妻aⅴ院 | 欧美人与性动交α欧美软件| 免费人成视频x8x8入口观看|