• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于沖突分類與消解的多智能體路徑規(guī)劃算法設計

    2022-10-09 01:57:00于連波曹品釗
    導航定位與授時 2022年5期
    關鍵詞:頂點時刻關鍵

    王 東,于連波,曹品釗,連 捷

    (1.大連理工大學工業(yè)裝備智能控制與優(yōu)化教育部重點實驗室,大連 116024;2.大連理工大學控制科學與工程學院,大連 116024)

    0 引言

    多智能體路徑規(guī)劃問題是在已知的環(huán)境地圖中,為一組智能體規(guī)劃從各自的起始點到相應目標點的無沖突路徑,并實現(xiàn)路徑代價總和最小或者最大完工時間最小等優(yōu)化目標。多智能體路徑規(guī)劃已經(jīng)廣泛應用于各個領域,包括自主倉庫管理、多智能體運動規(guī)劃和無人機集群避障等。多智能體路徑規(guī)劃問題的求解困難程度遠大于多個單智能體路徑規(guī)劃問題的疊加,兩者的本質(zhì)區(qū)別是多智能體路徑規(guī)劃問題是在規(guī)劃單個智能體路徑的同時消解智能體間的路徑?jīng)_突。消解沖突是多智能體路徑規(guī)劃問題的關鍵。

    目前主流的一類多智能體路徑規(guī)劃方法為:先分別規(guī)劃單個智能體的最優(yōu)路徑,然后再消解多智能體之間的路徑?jīng)_突。沖突消解方案主要有優(yōu)先級規(guī)劃法、基于行為的避碰方法、分層地圖法以及交通規(guī)則法等。這些沖突消解方案簡單易行,能夠有效消解多智能體間的路徑?jīng)_突。但上述方案多會犧牲路徑長度或智能體運行時間,難以保證多智能體路徑規(guī)劃方案的最優(yōu)性。

    基于沖突搜索(Conflict-Based Search,CBS)的算法是一種經(jīng)典的多智能體路徑規(guī)劃方法,因其具有最優(yōu)性和完備性兩大優(yōu)點近年來受到廣泛研究。CBS是一種兩層搜索算法,算法高層用于找到多個智能體之間的沖突,算法低層將多智能體路徑規(guī)劃問題視為多個單智能體在滿足約束下的路徑規(guī)劃。CBS在大地圖和智能體耦合度不高的情況下具有較高的求解效率。文獻[13]提高了CBS算法的速度,但求得的解只能保證次優(yōu)性。E.Boyarski等提出了改進的基于沖突搜索算法(Improved Conflict-Based Se-arch,ICBS),將路徑?jīng)_突分為關鍵沖突、半關鍵沖突和非關鍵沖突,并對沖突的消解順序進行優(yōu)化。ICBS算法保留了標準CBS算法的最優(yōu)性和完備性,該算法中使用多值決策圖對沖突類型進行判斷,計算量較大。A.Felner等在關鍵沖突的基礎上,設計了帶有啟發(fā)值的代價函數(shù),減少算法中節(jié)點的擴展數(shù)量,從而降低算法的計算量。J.Li等規(guī)定了一種新的沖突類型,即在網(wǎng)格地圖內(nèi)的某些沖突將必然發(fā)生在一個矩形,并提出了相應的檢測和消解方法。上述算法多是在CBS的高層進行改進,文獻[17]在標準CBS的低層使用了增量式路徑規(guī)劃算法,從智能體的路徑重規(guī)劃方面減少了算法的計算量。

    本文設計了一種基于沖突分類與消解的多智能體路徑規(guī)劃算法,以解決多智能體路徑規(guī)劃及路徑?jīng)_突問題。本文在ICBS算法的基礎上,做出以下改進:首先,將多智能體路徑中出現(xiàn)的關鍵沖突類別進一步分類出方向沖突,方向沖突包括相向沖突和交叉沖突;然后,提出方向沖突中相向沖突和交叉沖突的消解方式;最后,提出ICBS高層節(jié)點中的沖突搜索算法。本文算法保留了CBS算法的最優(yōu)性和完備性,并通過新提出的沖突分類及消解方式,減少了ICBS算法高層中約束樹的規(guī)模,從而減少算法在高層中搜索的時間,一定程度上降低了算法的計算量。

    1 問題描述和算法簡介

    1.1 多智能體路徑規(guī)劃問題模型

    多智能體路徑規(guī)劃問題包括一個給定的無向無權圖=(,)和多個智能體={,,…,}。無向無權圖=(,)中,是圖中頂點的集合,是圖中頂點間連接邊的集合。任意一個智能體∈,擁有唯一的起始頂點∈和目標頂點∈。在多智能體路徑規(guī)劃問題中,時間被離散化為時刻序列={0,1,2…},在任意一個時刻智能體在當前頂點等待或者移動到相鄰頂點,移動和等待兩種動作都需要單位代價。智能體的路徑被描述為一個從時間序列到頂點集合映射的序列={(0),(1),…,(),…,()},其中()表示智能體在時刻占用的頂點,表示路徑的長度,路徑重規(guī)劃后,的值會隨著路徑的變化而變化。本文假設智能體保持勻速運行,使用表示智能體的路徑代價。智能體路徑間不能發(fā)生沖突是多智能體路徑規(guī)劃問題的重要約束條件。沖突約束具體描述為:1)任意兩個智能體不能在同一時刻占用同一個頂點,即()≠(),?,∈∧≠;2)任意兩個智能體不能在時刻和+1時刻間交換彼此占用的頂點,即()≠(+1)∨(+1)≠(),?,∈∧≠。多智能體路徑規(guī)劃任務是為智能體={,,…,}規(guī)劃一組從起始頂點到目標頂點的無沖突路徑={,,…,},同時實現(xiàn)路徑代價總和最小的優(yōu)化目標,其中優(yōu)化目標形式化可表示為

    (1)

    1.2 CBS算法

    CBS算法是解決多智能體路徑規(guī)劃問題的重要算法之一。CBS算法擁有兩層結構,其中低層用于規(guī)劃多個單智能體的最優(yōu)路徑,高層用于解決多個智能體之間存在的路徑?jīng)_突。CBS算法引入了約束和沖突的概念,約束用一個元組(,,)表示,表示禁止智能體在時刻占用元素,可以是一個頂點或者是一個邊,如果表示一個頂點,則該約束表示不允許在時刻占用該頂點,進一步可以表示為(,,);如果是一條邊(,),則表示禁止在時刻到+1時刻采取的動作占用該邊,進一步可以表示為(,,,)。沖突用一個元組(,,,)表示,表示智能體在時刻同時占用元素;相應地,沖突可以分為頂點沖突和邊沖突,分別表示為(,,,)和(,,,,)。

    在CBS算法的高層構建一個二叉結構的約束樹,約束樹中的每個節(jié)點包括約束、解和代價三部分。約束樹中根節(jié)點的約束為空集,每個節(jié)點從父節(jié)點中繼承約束。高層搜索每次從優(yōu)先級隊列OPEN中選取代價值最低的節(jié)點進行擴展,若當前節(jié)點的解是一組無沖突路徑,則將當前節(jié)點作為目標節(jié)點,并將該節(jié)點的解作為問題的解;否則,針對當前節(jié)點中的路徑?jīng)_突,分別添加約束擴展出左右子節(jié)點,并添加到OPEN中,重復擴展和添加OPEN中的節(jié)點,直到得到具有無沖突解的目標節(jié)點。CBS算法低層規(guī)劃單個智能體滿足約束的最優(yōu)路徑,即為高層節(jié)點提供解。低層的單智能體路徑規(guī)劃使用任何路徑規(guī)劃算法理論上都可滿足CBS的需求,本文使用A算法。CBS算法對于優(yōu)化路徑而言代價是最優(yōu)的,證明可見文獻[12]。

    1.3 ICBS算法

    CBS算法高層隨機選擇沖突進行節(jié)點擴展,但不恰當?shù)倪x擇會增加約束樹的規(guī)模,從而增加算法的運行時間。ICBS通過兩項改進改善了約束樹節(jié)點規(guī)模較大的問題。不同于CBS算法的隨機選擇沖突進行節(jié)點擴展,ICBS算法將沖突進行優(yōu)先級劃分,分為關鍵沖突、半關鍵沖突和非關鍵沖突。CBS算法對關鍵沖突拆分出的兩個子節(jié)點的代價值均大于當前節(jié)點的代價值,對半關鍵沖突拆分出的兩個子節(jié)點中有且僅有一個子節(jié)點的代價值大于當前節(jié)點的代價值,對非關鍵沖突拆分出的兩個子節(jié)點的代價值均不大于當前節(jié)點的代價值。通過優(yōu)先解決關鍵沖突和半關鍵沖突,最后是非關鍵沖突,在一定程度上加快了算法求解速度。在遇到關鍵沖突時,ICBS和CBS一樣以拆分出該節(jié)點的左右子節(jié)點的方式來解決,在消解半關鍵沖突或非關鍵沖突時不直接將該節(jié)點進行拆分,而是試圖通過尋找有效的繞路使沖突得到解決。因此,在ICBS算法中,高層節(jié)點中除了CBS算法中包含的約束、解和代價三部分以外,還包括該節(jié)點中存在沖突個數(shù)。

    CBS算法及其改進算法側重消解多智能體間的路徑?jīng)_突,通過智能體間中心互聯(lián)式的通信拓撲結構由算法高層直接進行沖突檢測。該類算法注重規(guī)劃滿足約束的無沖突路徑的最優(yōu)性,即路徑長度最短。文獻[18-19]中的適航性、使用Bezier曲線處理單個智能體路徑的平滑性等,本文算法暫不進行研究。

    2 沖突分類與消解算法

    CBS算法和ICBS算法能夠為多智能體路徑規(guī)劃問題求解出最優(yōu)解,但算法單獨地處理當前沖突,沒有考慮當前沖突的處理與后續(xù)路徑或其他路徑?jīng)_突的關系。本章基于當前沖突處理對后續(xù)沖突的影響以及優(yōu)先處理關鍵沖突對其他路徑?jīng)_突的影響,對路徑?jīng)_突進行更加詳細的分類并提出相應沖突消解方案。

    2.1 沖突分類

    在四連通二維柵格地圖中,現(xiàn)有的CBS算法消解關鍵頂點沖突的最佳方案是某一個智能體在沖突發(fā)生時刻前進行等待。該方案在消解當前沖突的同時,對于某些特殊類型的關鍵頂點沖突可能會引起一個新的可預見的沖突,而該新發(fā)生的沖突是完全可以避免的。關鍵沖突具有優(yōu)先消解權限,智能體在沖突發(fā)生前的任意一個時刻等待,均能夠消解關鍵頂點沖突。選擇合適的等待時刻,能夠在消解當前關鍵頂點沖突的同時消解其他的半關鍵沖突或非關鍵沖突。根據(jù)上述分析,本文在ICBS算法的基礎上,根據(jù)發(fā)生沖突的兩個智能體的運行方向,將關鍵頂點沖突進一步分為相向頂點沖突和交叉頂點沖突。本文將沖突定義為={,},其中=(,,,)表示傳統(tǒng)CBS算法中定義的沖突,={,}用于描述沖突類型,表示優(yōu)先級沖突類型,表示方向沖突類型。

    2.1.1 相向頂點沖突

    頂點沖突(,,,)中,若智能體的運行方向完全相反,即智能體通過沖突頂點后交換占用的頂點,則在本文中該類沖突被定義為相向頂點沖突。通過等待的方式消解該類沖突后,必然會引發(fā)一個新的邊沖突。下面以圖1所示的案例及圖2中對應的約束樹直觀展示相向頂點沖突。

    圖1中,智能體從起始頂點出發(fā)去往目標頂點,智能體從起始頂點出發(fā)去往目標頂點。使用CBS算法及ICBS算法為智能體和智能體規(guī)劃路徑,分別為智能體初始規(guī)劃最優(yōu)路徑={,,,},為智能體初始規(guī)劃最優(yōu)路徑={,,,}。智能體和智能體在1時刻共同占用頂點,發(fā)生沖突=(,,,1);在0時刻智能體占用頂點,智能體占用頂點;在2時刻智能體占用頂點,智能體占用頂點,即智能體和智能體在沖突發(fā)生的前后時刻交換彼此占用的頂點。

    圖1 相向頂點沖突案例Fig.1 A case of the opposite vertex conflict

    圖2 相向頂點沖突案例的約束樹Fig.2 A constraint tree of the opposite vertex conflict case

    從圖2所示約束樹的角度來看,依據(jù)初始化路徑構建約束樹的根節(jié)點后,檢測到根節(jié)點中存在頂點沖突=(,,,1),如圖2根節(jié)點中紅色邊框標注所示。為消解頂點沖突,添加約束(,,1)和(,,1)拆分根節(jié)點,擴展出左右子節(jié)點和。雖然子節(jié)點和不存在頂點沖突=(,,,1),但兩個子節(jié)點中都產(chǎn)生了新的邊沖突=(,,,1)或′=(,,,,1)。為消解該沖突必須再一次進行添加約束和擴展節(jié)點的操作,如圖2中由節(jié)點和擴展出節(jié)點、、和所示。

    本文將圖1和圖2展示的在沖突時刻前后交換彼此占用的頂點,并且無法通過一次節(jié)點擴展而消解的特殊頂點沖突稱為相向頂點沖突=(,,,,,),表示智能體在時刻共同占用頂點,在-1時刻和+1時刻交換占用頂點和,下面給出相向頂點沖突的定義。如果一個沖突滿足以下條件,那么稱其為相向頂點沖突:

    1)沖突=(,,,,,)中智能體將在時刻同時占用頂點,即沖突為頂點沖突;

    2)沖突=(,,,,,)是關鍵沖突;

    3)沖突=(,,,,,)中智能體將交換彼此在-1時刻和+1時刻占用頂點和,即智能體將在+1時刻占用智能體在-1時刻占用的頂點,并且智能體將在+1時刻占用智能體在-1時刻占用的頂點。

    2.1.2 交叉頂點沖突

    圖3 交叉頂點沖突案例Fig.3 A case of the intersect vertex conflict

    下面給出交叉頂點沖突的定義,如果一個沖突滿足以下條件,那么稱其為交叉頂點沖突:

    2.2 沖突消解

    2.2.1 相向頂點沖突消解方案

    消解相向頂點沖突=(,,,,,)時,若采用CBS算法或者其改進算法,則首先針對其中的頂點沖突(,,,)添加一個頂點約束(,,)(或(,,))進行一次節(jié)點擴展,然后對隨之產(chǎn)生的邊沖突(,,,,)(或(,,,,))添加約束(,(,),)(或(,(,),))進行第二次的節(jié)點擴展。簡言之,CBS算法及其改進算法至少需要進行兩次連續(xù)的節(jié)點擴展才能將相向頂點沖突完全消解,如圖2所示。本文消解相向頂點沖突的主要思想是提前為沖突整體添加一個約束,僅進行一次節(jié)點擴展便可完全消解相向頂點沖突。具體步驟描述為:

    1)檢測沖突并判斷其為相向頂點沖突=(,,,,,)。

    2)針對相向頂點沖突=(,,,,,),直接分別添加4個組合約束(,,,)、(,,,)、(,;,,,)和(,;,,,)拆分相向頂點沖突所在的節(jié)點,擴展出4個子節(jié)點。其中,組合約束(,,,)表示智能體在時刻不得占用頂點和;組合約束(,,,)表示智能體在時刻不得占用頂點和;組合約束(,;,,,)表示智能體在時刻不得占用頂點,并且智能體在時刻不得占用頂點和;組合約束(,;,,,)表示智能體在時刻不得占用頂點,并且智能體在時刻不得占用頂點和。

    3)新生成的子節(jié)點分別調(diào)用低層路徑規(guī)劃算法,得到消解相向頂點沖突后的路徑。

    下面以圖1中的案例具體展示相向頂點沖突的消解方案。約束樹根節(jié)點的構建與ICBS算法相同。檢測沖突,進一步判斷出其為相向頂點沖突=(,,,,,1),如圖4中節(jié)點的紅色邊框標注部分。對沖突現(xiàn)有的頂點沖突和下一步必然會發(fā)生的邊沖突直接整體添加兩頂點約束(,,,1)和(,,,1)以拆分根節(jié)點,擴展出左右子節(jié)點,分別如圖4中的′和′所示。圖4明確展現(xiàn)出經(jīng)過上述一次節(jié)點擴展,即可將相向頂點沖突完全消解。

    圖4 相向頂點沖突案例的本文方案約束樹Fig.4 A constraint tree of the designed scheme for the opppsite vertex conflict case

    對比圖2和圖4可知,本文設計的沖突消解方案與ICBS算法所求目標節(jié)點的路徑代價值相同,并且本文設計方案的約束樹節(jié)點擴展數(shù)量小于ICBS算法。表1在算法的高層擴展節(jié)點數(shù)、高層生產(chǎn)節(jié)點數(shù)以及低層算法調(diào)用次數(shù)方面具體展示本文設計方案的優(yōu)勢。

    表1 相向頂點沖突案例算法指標對比

    對于相向頂點沖突=(,,,,,),CBS算法及其改進算法至少需要兩次連續(xù)的節(jié)點擴展才能完全消解沖突。本文設計方案僅需一次節(jié)點擴展便能完全消解沖突。本文設計方案在路徑代價方面與ICBS算法具有相同的最優(yōu)性,并且對計算量要求較低,能夠減小算法搜索空間規(guī)模和算法搜索時間。

    2.2.2 交叉頂點沖突消解方案

    圖5 交叉頂點沖突案例的約束樹Fig.5 A constraint tree for the intersect vertex conflict case

    本文設計了針對交叉頂點沖突的消解方案,選擇合適的智能體,讓其在恰當?shù)却龝r刻進行等待,保證在消解當前交叉頂點沖突的同時消解其他半關鍵沖突或者非關鍵沖突,進而減小算法搜索空間以及算法搜索時間。

    交叉頂點沖突的消解方案描述如下:

    圖6 交叉頂點沖突案例的本文方案約束樹Fig.6 A constraint tree of the designed scheme for the intersect vertex conflict case

    對比圖5和圖6可知,本文設計的交叉頂點沖突消解方案與ICBS算法所求目標節(jié)點的路徑代價值相同,并且本文設計方案的約束樹節(jié)點擴展數(shù)量小于ICBS算法。表2在算法的高層擴展節(jié)點數(shù)、高層生成節(jié)點數(shù)以及低層算法調(diào)用次數(shù)方面具體展示本文設計方案的優(yōu)勢。

    表2 交叉頂點沖突案例算法指標對比

    2.3 基于沖突分類與消解的多智能體路徑規(guī)劃算法

    綜合本文提出的相向頂點沖突和交叉頂點沖突分類與消解方案,根據(jù)CBS算法及其改進算法,現(xiàn)給出基于沖突分類與消解的多智能體路徑規(guī)劃算法,如算法1所示。輸入一個多智能體路徑規(guī)劃實例后,首先用低層A算法分別為每個智能體規(guī)劃最優(yōu)路徑并計算路徑代價,進而構建出根節(jié)點,將根節(jié)點插入到OPEN列表,如算法第1~2行所示。第3~14行是算法檢測沖突和添加約束消解沖突的主體部分。第5行調(diào)用搜索高層節(jié)點中的沖突算法檢測沖突,并根據(jù)本文給出的相向頂點沖突和交叉頂點沖突分類判斷沖突類型,具體見算法2。第9~13行根據(jù)本文所提的方向沖突添加不同的約束進行沖突消解,其中第9、10行是相向頂點沖突的檢測與約束添加,第11、12行是交叉頂點沖突的檢測與約束添加,第13行生成新的子節(jié)點,具體見算法3。算法1最終為輸入的多智能體路徑規(guī)劃實例輸出一組無沖突最優(yōu)路徑。

    算法2展示了高層節(jié)點沖突檢測與類型判斷方案,檢測本文所提的方向沖突并將沖突返回給算法1。算法2中增加了半關鍵和非關鍵沖突列表以及智能體沖突表。半關鍵和非關鍵沖突列表分別保存各智能體發(fā)生的半關鍵和非關鍵沖突,智能體沖突表保存各智能體的等待時刻,為消解交叉頂點沖突提供相應信息。

    算法1:基于改進沖突搜索的沖突分類與消解算法輸入:一個多智能體路徑規(guī)劃實例輸出:該實例的一個最優(yōu)解1調(diào)用低層A*算法為每個智能體規(guī)劃初始最優(yōu)路徑2生成根節(jié)點R,并將其放入OPEN列表3while OPEN列表非空時 then4 從OPEN中取出代價值最低的節(jié)點,作為當前節(jié)點N5 調(diào)用搜索高層節(jié)點中的沖突算法檢測沖突6 if節(jié)點N中沒有沖突且不是關鍵沖突then7 調(diào)用低層A*算法重規(guī)劃繞行路徑8 else節(jié)點N中存在沖突且是關鍵沖突then9 if相向頂點沖突then10 添加組合約束11 else交叉頂點沖突then12 添加約束并確定智能體等待時刻13 生成子節(jié)點N'并將其放入OPEN列表14節(jié)點N中沒有沖突15返回路徑規(guī)劃的解

    算法2:搜索高層節(jié)點中的沖突算法輸入:一個約束樹中的節(jié)點N的解輸出:節(jié)點N中存在的沖突C1for智能體中的任意一個組合對(ai,aj)then2 if智能體ai和aj間存在沖突C then3 if沖突C是關鍵沖突then4 判斷相向頂點沖突或交叉頂點沖突5 返回 C6 else if沖突C是半關鍵沖突then7 將C放入半關鍵沖突列表8 else then9 將C放入非關鍵沖突列表10 更新智能體沖突表11 返回第一個半關鍵或非關鍵沖突

    算法3展示了用約束集合生成新的子節(jié)點的算法,和ICBS算法不同之處在于添加的約束是本文設計的針對沖突類型消解方案的組合約束。

    算法3:生成新的子節(jié)點輸入:一個約束樹中的節(jié)點N和對智能體添加的約束輸出:生成的新的子節(jié)點1將對智能體添加的約束加入到節(jié)點N原有的約束2調(diào)用低層路徑規(guī)劃算法更新智能體路徑3生成新的子節(jié)點N'

    3 實驗與仿真

    本章進行對比實驗,以驗證本文設計算法求解多智能體路徑規(guī)劃問題的優(yōu)越性。首先,本文設計的基于沖突分類與消解的多智能體路徑規(guī)劃算法(ICBS-DC)與采用優(yōu)先級方法消解路徑?jīng)_突、使用蟻群算法規(guī)劃智能體路徑的多智能體路徑規(guī)劃方法(Ant-PP)相比,展現(xiàn)出求解結果質(zhì)量的優(yōu)越性,即求解結果路徑代價方面的優(yōu)越性。然后,將本文算法與CBS算法以及ICBS算法進行對比,體現(xiàn)本文算法在計算量方面的優(yōu)勢。本章所有實驗的代碼均采用Python編寫,均在參數(shù)為2.3GHz Intel Core i5-6300HQ 8GB RAM的筆記本電腦上進行。使用大小為8×8的四連通二位柵格地圖,其中障礙物占比為地圖大小的20%,在每次實驗中障礙物均隨機生成。對比實驗中智能體數(shù)量從1到15逐個增加,并且在每個智能體數(shù)量下隨機生成100個多智能體路徑規(guī)劃案例,取各項實驗數(shù)據(jù)的平均值作為最終數(shù)據(jù)。

    圖7和圖8分別展示了本文ICBS-DC算法和使用優(yōu)先級的Ant-PP算法的成功率與路徑規(guī)劃方案的路徑代價。其中,成功率采用文獻[12]中描述的在5min時間限制內(nèi),算法能夠求解出結果的案例數(shù)量與案例總數(shù)量的比值。由圖7和圖8可知,本文的ICBS-DC算法的成功率與路徑規(guī)劃方案的路徑代價均優(yōu)于Ant-PP算法,并且隨著智能體數(shù)量的增加,ICBS-DC算法的優(yōu)勢越加明顯。

    為了驗證本文算法在計算量方面的優(yōu)勢,將本文ICBS-DC算法與CBS及ICBS進行對比實驗,分別比較三種算法的成功率、運行時間、高層約束樹節(jié)點擴展數(shù)量以及低層路徑規(guī)劃算法平均調(diào)用的次數(shù),結果如圖9~圖12所示。

    圖7 ICBS-DC和Ant-PP成功率對比Fig.7 Success rates of ICBS-DC and Ant-PP algorithms

    圖8 ICBS-DC和Ant-PP路徑代價對比Fig.8 Path costs of ICBS-DC and Ant-PP algorithms

    圖9 三種算法成功率對比Fig.9 Success rates of three algorithms

    圖10 三種算法運行時間對比Fig.10 Run times of three algorithms

    圖11 三種算法節(jié)點擴展數(shù)量對比Fig.11 Number of extension nodes of three algorithms

    圖12 三種算法調(diào)用低層路徑規(guī)劃次數(shù)對比Fig.12 Number of calls for low-level of three algorithms

    當智能體數(shù)量較少時,各個智能體的路徑之間發(fā)生沖突的可能性較小,由圖9~圖12所示結果可以看出,三種算法在成功率、平均運行時間、高層約束樹節(jié)點擴展數(shù)量和低層路徑規(guī)劃算法調(diào)用的次數(shù)等方面幾乎具有相當?shù)男阅?。當智能體數(shù)量較多時,各智能體的路徑在環(huán)境中發(fā)生更多的沖突,由圖9報告的結果可知,CBS算法在智能體數(shù)量較多時,其解決多智能體路徑規(guī)劃問題的成功率下降速度最快,其次是ICBS。ICBS-DC相比CBS和ICBS而言,在智能體密度較大的情況下具有更高的成功率。而就圖10報告的平均運行時間而言,ICBS-DC運行速度雖然比CBS快,但相較于ICBS在某些情況下速度稍慢,然而隨著智能體數(shù)量的不斷增加,智能體的路徑之間沖突的可能性增加,ICBS-DC算法的平均運行時間的增長速度與CBS和ICBS相比較為平緩,說明ICBS-DC在智能體比較密集的環(huán)境下展現(xiàn)出更好的運行時間優(yōu)勢。

    由圖11和圖12展現(xiàn)的高層和低層的指標來看,ICBS-DC在高層約束樹節(jié)點擴展數(shù)量及低層路徑規(guī)劃次數(shù)方面均少于CBS和ICBS,但這正是ICBS-DC在一些情況下耗時增加和平均運行時間增長速度稍慢的原因。ICBS-DC為了能使高層約束樹節(jié)點擴展的數(shù)量減少,在算法2中對產(chǎn)生的關鍵沖突再判斷其是否屬于本文提出的方向沖突,并在算法1中對沖突進行捕捉。當環(huán)境中產(chǎn)生的關鍵沖突較多時,判斷方向沖突又在一定程度上增加了運行時間。圖11和圖12報告的結果符合ICBS-DC的主要目的:一方面減少了高層約束樹節(jié)點擴展數(shù)量,使得約束樹的規(guī)模減??;另一方面使得低層路徑規(guī)劃調(diào)用次數(shù)減少。因為算法高層每生成一個節(jié)點就會給相應智能體添加約束,調(diào)用低層路徑規(guī)劃算法對該智能體進行重新規(guī)劃,所以圖11和圖12具有相似的曲線走勢。當高層約束樹中節(jié)點數(shù)量不是很多時,ICBS算法的運行速度與ICBS-DC相當,甚至在一些情況下要快于ICBS-DC;但當智能體數(shù)量較多時,使用本文所提的沖突消解方案可以有效對約束樹的規(guī)模進行限制,從而減小高層算法的搜索時間,這與圖10中報告的ICBS-DC的平均運行時間在智能體數(shù)量大于12時增長速度相比ICBS較為緩慢是一致的,說明ICBS-DC在智能體密集的環(huán)境下能展現(xiàn)出更好的求解速度優(yōu)勢。

    4 結論

    本文設計了一種基于沖突分類與消解的多智能體路徑規(guī)劃算法,以解決多智能體路徑規(guī)劃中的路徑?jīng)_突問題。本文將多智能體路徑?jīng)_突中的關鍵沖突進一步分類出相向頂點沖突和交叉頂點沖突,并針對這兩類沖突類型提出相應的消解方案:1)相向頂點沖突的消解方案以添加兩點約束的方式,避免了在消解該類沖突的過程中引發(fā)的新沖突,減少算法高層約束樹節(jié)點擴展數(shù)量,減小約束樹規(guī)模,降低算法運行時間;2)交叉頂點沖突的消解方案通過選擇恰當?shù)闹悄荏w等待時刻,在消解該類沖突的同時消解其他沖突,提高算法的搜索效率。最后通過仿真實驗驗證了本文提出的沖突分類與消解方案能夠為多智能體路徑規(guī)劃問題求解出路徑代價最優(yōu)的解,并且能夠有效減少算法高層約束樹節(jié)點的數(shù)量以及低層路徑規(guī)劃算法的調(diào)用次數(shù),進而加快算法的求解速度。

    未來的研究工作包括以下兩點:1)本文算法是基于四連通二維柵格地圖設計的,未來考慮將本文算法擴展到三維空間的其他類型地圖;2)在二維及三維環(huán)境中進行實物實驗,驗證本文算法的有效性。

    猜你喜歡
    頂點時刻關鍵
    冬“傲”時刻
    過非等腰銳角三角形頂點和垂心的圓的性質(zhì)及應用(下)
    捕獵時刻
    高考考好是關鍵
    關于頂點染色的一個猜想
    山東科學(2018年6期)2018-12-20 11:08:58
    街拍的歡樂時刻到來了
    一天的時刻
    獲勝關鍵
    NBA特刊(2014年7期)2014-04-29 00:44:03
    生意無大小,關鍵是怎么做?
    中國商人(2013年1期)2013-12-04 08:52:52
    數(shù)學問答
    九色国产91popny在线| 国产又色又爽无遮挡免费看| 一个人免费在线观看电影 | 后天国语完整版免费观看| www国产在线视频色| 精品国内亚洲2022精品成人| 99久久久亚洲精品蜜臀av| 国产主播在线观看一区二区| 成人午夜高清在线视频| xxxwww97欧美| 国产1区2区3区精品| 欧美日韩精品网址| 他把我摸到了高潮在线观看| 日韩高清综合在线| 成人18禁高潮啪啪吃奶动态图| 婷婷亚洲欧美| 男人舔女人下体高潮全视频| 久久亚洲真实| 亚洲天堂国产精品一区在线| 亚洲中文字幕一区二区三区有码在线看 | 国产亚洲精品第一综合不卡| 国产精品一及| svipshipincom国产片| 国产真实乱freesex| 免费在线观看成人毛片| 亚洲人成电影免费在线| 又爽又黄无遮挡网站| 欧美极品一区二区三区四区| 亚洲人成网站高清观看| 色综合婷婷激情| 国产成人欧美在线观看| 成年免费大片在线观看| 男男h啪啪无遮挡| 日本熟妇午夜| 欧美又色又爽又黄视频| 亚洲18禁久久av| 麻豆av在线久日| 国产亚洲欧美98| 久久热在线av| 日韩国内少妇激情av| 夜夜看夜夜爽夜夜摸| 丁香欧美五月| 88av欧美| 亚洲人成77777在线视频| 欧美黑人巨大hd| 又爽又黄无遮挡网站| 亚洲天堂国产精品一区在线| 无限看片的www在线观看| 午夜福利高清视频| 欧美黄色片欧美黄色片| 精品久久久久久久末码| 久久久国产成人免费| 精品久久久久久久久久久久久| 91在线观看av| 久久久久久免费高清国产稀缺| 久久精品国产亚洲av香蕉五月| 性色av乱码一区二区三区2| 日本a在线网址| 成年免费大片在线观看| 欧美3d第一页| 男男h啪啪无遮挡| 一区二区三区高清视频在线| 午夜影院日韩av| 亚洲精品美女久久久久99蜜臀| 一夜夜www| 亚洲精品中文字幕一二三四区| 国产成人av教育| 两个人看的免费小视频| 婷婷精品国产亚洲av| 国内少妇人妻偷人精品xxx网站 | 美女午夜性视频免费| 国产高清视频在线观看网站| av有码第一页| 99国产综合亚洲精品| 久久精品国产亚洲av高清一级| 一本久久中文字幕| aaaaa片日本免费| 成人18禁在线播放| 亚洲国产日韩欧美精品在线观看 | 日韩大尺度精品在线看网址| 757午夜福利合集在线观看| 身体一侧抽搐| 中文字幕人成人乱码亚洲影| 国产黄a三级三级三级人| 亚洲av第一区精品v没综合| 真人一进一出gif抽搐免费| 午夜精品一区二区三区免费看| 久久婷婷成人综合色麻豆| 长腿黑丝高跟| 亚洲人成电影免费在线| 欧美乱色亚洲激情| 国产主播在线观看一区二区| 午夜免费激情av| 久久久久久久久免费视频了| 欧美+亚洲+日韩+国产| 亚洲狠狠婷婷综合久久图片| 亚洲av电影不卡..在线观看| 欧美成人午夜精品| 九色成人免费人妻av| 国产精品美女特级片免费视频播放器 | 亚洲av片天天在线观看| 亚洲国产精品999在线| av视频在线观看入口| svipshipincom国产片| 亚洲熟女毛片儿| 中文字幕人妻丝袜一区二区| av片东京热男人的天堂| 免费无遮挡裸体视频| 国产精品久久久人人做人人爽| 99riav亚洲国产免费| 亚洲在线自拍视频| 日本免费一区二区三区高清不卡| 久久久精品欧美日韩精品| 欧美3d第一页| 成人特级黄色片久久久久久久| 一二三四社区在线视频社区8| av福利片在线| 亚洲最大成人中文| 男女做爰动态图高潮gif福利片| 中国美女看黄片| 夜夜躁狠狠躁天天躁| 老熟妇仑乱视频hdxx| or卡值多少钱| 成人18禁在线播放| 97碰自拍视频| 一级片免费观看大全| 日韩欧美国产在线观看| 国产三级中文精品| 一个人观看的视频www高清免费观看 | 精品久久蜜臀av无| 亚洲精品在线美女| 免费观看人在逋| 亚洲国产精品久久男人天堂| 男人舔女人的私密视频| 69av精品久久久久久| 午夜久久久久精精品| 两个人的视频大全免费| 一夜夜www| 国产高清videossex| 欧美日韩黄片免| 露出奶头的视频| 精品午夜福利视频在线观看一区| 亚洲精品在线美女| 国产精品av久久久久免费| 成人亚洲精品av一区二区| 国产亚洲av高清不卡| 麻豆国产97在线/欧美 | 又粗又爽又猛毛片免费看| 91av网站免费观看| 久久热在线av| 国产在线观看jvid| 中国美女看黄片| 窝窝影院91人妻| 欧美av亚洲av综合av国产av| av超薄肉色丝袜交足视频| 男女那种视频在线观看| 999久久久国产精品视频| 丝袜美腿诱惑在线| 成人18禁高潮啪啪吃奶动态图| 999久久久国产精品视频| 性色av乱码一区二区三区2| 久久久久精品国产欧美久久久| 国产一区二区三区视频了| 露出奶头的视频| 美女扒开内裤让男人捅视频| 欧美三级亚洲精品| 亚洲人成77777在线视频| 欧美日韩亚洲国产一区二区在线观看| 天天躁夜夜躁狠狠躁躁| 一级片免费观看大全| 啦啦啦观看免费观看视频高清| 精品人妻1区二区| 大型av网站在线播放| 黑人欧美特级aaaaaa片| 啦啦啦免费观看视频1| 男人的好看免费观看在线视频 | 亚洲国产精品成人综合色| 欧美久久黑人一区二区| 国产成人系列免费观看| 精品欧美国产一区二区三| 成人欧美大片| 日韩欧美一区二区三区在线观看| 久久久精品国产亚洲av高清涩受| 黑人巨大精品欧美一区二区mp4| av有码第一页| 在线播放国产精品三级| 色在线成人网| 在线观看日韩欧美| 女同久久另类99精品国产91| 精品国产乱码久久久久久男人| 国产精品 欧美亚洲| 12—13女人毛片做爰片一| 午夜亚洲福利在线播放| 国内精品久久久久精免费| 亚洲美女黄片视频| 99riav亚洲国产免费| 日韩欧美在线乱码| 99热只有精品国产| 欧美另类亚洲清纯唯美| 此物有八面人人有两片| 毛片女人毛片| 欧美精品亚洲一区二区| 99国产综合亚洲精品| 中文在线观看免费www的网站 | 成人18禁在线播放| 亚洲欧美日韩无卡精品| 欧美日韩福利视频一区二区| 日韩中文字幕欧美一区二区| 亚洲一码二码三码区别大吗| 欧美乱码精品一区二区三区| 精品国产美女av久久久久小说| 精品一区二区三区四区五区乱码| 婷婷精品国产亚洲av| 久久久国产精品麻豆| 亚洲第一电影网av| 国产精品久久久av美女十八| 在线观看免费日韩欧美大片| 国产精品一区二区三区四区免费观看 | 午夜视频精品福利| 国产一区二区三区在线臀色熟女| 最近最新中文字幕大全电影3| 国产精品久久久久久亚洲av鲁大| 欧美成狂野欧美在线观看| 欧美性长视频在线观看| 亚洲av日韩精品久久久久久密| √禁漫天堂资源中文www| 伊人久久大香线蕉亚洲五| 亚洲五月天丁香| 精品高清国产在线一区| 亚洲男人天堂网一区| 国产单亲对白刺激| 每晚都被弄得嗷嗷叫到高潮| 欧美黑人巨大hd| 欧美高清成人免费视频www| 久久天堂一区二区三区四区| 亚洲精品国产一区二区精华液| 亚洲 国产 在线| 丝袜人妻中文字幕| 国产精品亚洲美女久久久| 亚洲国产欧洲综合997久久,| 高清在线国产一区| 美女午夜性视频免费| 国产成人aa在线观看| 激情在线观看视频在线高清| 丝袜美腿诱惑在线| 久久久久久久久中文| 日韩欧美一区二区三区在线观看| 人妻久久中文字幕网| 91字幕亚洲| 18美女黄网站色大片免费观看| 波多野结衣巨乳人妻| 国产欧美日韩一区二区三| aaaaa片日本免费| 久久久久久免费高清国产稀缺| 久久精品国产亚洲av高清一级| 国产激情偷乱视频一区二区| 88av欧美| 国产又黄又爽又无遮挡在线| 亚洲精品久久成人aⅴ小说| x7x7x7水蜜桃| 两个人的视频大全免费| 国产亚洲av嫩草精品影院| 免费在线观看视频国产中文字幕亚洲| 19禁男女啪啪无遮挡网站| 国产成人啪精品午夜网站| 婷婷精品国产亚洲av在线| 十八禁人妻一区二区| 熟妇人妻久久中文字幕3abv| 中文字幕熟女人妻在线| 精品国产乱子伦一区二区三区| 久久亚洲精品不卡| 99久久综合精品五月天人人| 久久欧美精品欧美久久欧美| 日本一区二区免费在线视频| 99久久久亚洲精品蜜臀av| 精品久久久久久久末码| 国产精品国产高清国产av| 久久精品综合一区二区三区| 国产激情欧美一区二区| 天堂动漫精品| 91老司机精品| 宅男免费午夜| 欧美中文综合在线视频| 国产精品香港三级国产av潘金莲| 亚洲免费av在线视频| 国产精品综合久久久久久久免费| 欧美乱妇无乱码| 777久久人妻少妇嫩草av网站| 免费观看人在逋| 精品高清国产在线一区| 久久久久久久午夜电影| 久久 成人 亚洲| 国产精品免费一区二区三区在线| 正在播放国产对白刺激| 久久99热这里只有精品18| 亚洲第一欧美日韩一区二区三区| 男人舔奶头视频| 欧美成狂野欧美在线观看| 黄色成人免费大全| 欧美黑人巨大hd| 不卡av一区二区三区| or卡值多少钱| 亚洲午夜理论影院| a级毛片a级免费在线| 看免费av毛片| 九色成人免费人妻av| 久久人妻av系列| 日韩精品免费视频一区二区三区| 亚洲av电影不卡..在线观看| 色噜噜av男人的天堂激情| 国产区一区二久久| 国产三级在线视频| 成人av在线播放网站| 国产99白浆流出| 欧美成人一区二区免费高清观看 | avwww免费| e午夜精品久久久久久久| 一区二区三区高清视频在线| 国产精华一区二区三区| 国产精品久久久久久久电影 | 免费观看人在逋| 在线国产一区二区在线| 中文字幕熟女人妻在线| 韩国av一区二区三区四区| 色综合站精品国产| 国产成人精品久久二区二区免费| 国产精品爽爽va在线观看网站| 人妻丰满熟妇av一区二区三区| 18禁国产床啪视频网站| 观看免费一级毛片| 99热只有精品国产| 精品国产乱子伦一区二区三区| 免费电影在线观看免费观看| 精品久久久久久久久久久久久| 午夜a级毛片| 91麻豆av在线| 国产不卡一卡二| 精品久久蜜臀av无| 99re在线观看精品视频| 免费看日本二区| 女人高潮潮喷娇喘18禁视频| 首页视频小说图片口味搜索| 亚洲国产精品999在线| 最新在线观看一区二区三区| 天天躁狠狠躁夜夜躁狠狠躁| 国产单亲对白刺激| 色噜噜av男人的天堂激情| 亚洲欧美精品综合久久99| 亚洲国产精品sss在线观看| 亚洲免费av在线视频| 婷婷精品国产亚洲av在线| 午夜老司机福利片| 午夜免费成人在线视频| xxxwww97欧美| 国产成人系列免费观看| 欧美极品一区二区三区四区| 国产精品av视频在线免费观看| 亚洲精品国产一区二区精华液| 国产真人三级小视频在线观看| 欧美一级毛片孕妇| 亚洲片人在线观看| 久久久久精品国产欧美久久久| 久久婷婷人人爽人人干人人爱| 亚洲avbb在线观看| 草草在线视频免费看| 久久伊人香网站| 欧美黑人精品巨大| 亚洲天堂国产精品一区在线| 国产高清视频在线观看网站| 黄色毛片三级朝国网站| 亚洲中文av在线| 啦啦啦韩国在线观看视频| 国产精品一区二区三区四区久久| 可以在线观看毛片的网站| 国产av不卡久久| 国产av麻豆久久久久久久| 久久久久久国产a免费观看| 亚洲av中文字字幕乱码综合| 91成年电影在线观看| 日日爽夜夜爽网站| 亚洲狠狠婷婷综合久久图片| 欧美绝顶高潮抽搐喷水| av视频在线观看入口| 亚洲午夜精品一区,二区,三区| 免费人成视频x8x8入口观看| 国产精品98久久久久久宅男小说| 国产精品久久视频播放| 精品国产超薄肉色丝袜足j| 欧美成狂野欧美在线观看| 黄色 视频免费看| 国产真实乱freesex| 999久久久国产精品视频| 狂野欧美白嫩少妇大欣赏| 嫩草影视91久久| x7x7x7水蜜桃| 精华霜和精华液先用哪个| 老司机福利观看| 一a级毛片在线观看| 美女扒开内裤让男人捅视频| 久久精品国产清高在天天线| 午夜精品一区二区三区免费看| 九色成人免费人妻av| 一区二区三区国产精品乱码| 日本免费a在线| 亚洲国产精品合色在线| 中亚洲国语对白在线视频| 亚洲人成网站在线播放欧美日韩| 亚洲成av人片免费观看| 亚洲欧美精品综合久久99| 国产又色又爽无遮挡免费看| 一本精品99久久精品77| 亚洲精品美女久久av网站| 国产激情欧美一区二区| 俄罗斯特黄特色一大片| 激情在线观看视频在线高清| 黄片大片在线免费观看| 久久久久久人人人人人| 亚洲欧美激情综合另类| 国产又色又爽无遮挡免费看| 最新美女视频免费是黄的| 亚洲av美国av| 黄色毛片三级朝国网站| 91av网站免费观看| 一二三四在线观看免费中文在| 国模一区二区三区四区视频 | 免费高清视频大片| 亚洲成av人片在线播放无| 精品国产乱码久久久久久男人| 成人高潮视频无遮挡免费网站| 老鸭窝网址在线观看| 全区人妻精品视频| 黄色片一级片一级黄色片| 亚洲乱码一区二区免费版| 精品久久蜜臀av无| 1024香蕉在线观看| 亚洲av中文字字幕乱码综合| 国产伦人伦偷精品视频| 久热爱精品视频在线9| 禁无遮挡网站| 久久久久亚洲av毛片大全| 久久久国产成人精品二区| 亚洲国产精品sss在线观看| 日韩欧美在线二视频| 亚洲国产精品久久男人天堂| 1024香蕉在线观看| 亚洲av中文字字幕乱码综合| 我要搜黄色片| 精品少妇一区二区三区视频日本电影| 亚洲欧美日韩高清专用| 国产精品影院久久| 99热这里只有精品一区 | 国产精品精品国产色婷婷| 日本熟妇午夜| 男插女下体视频免费在线播放| 久久久久久九九精品二区国产 | 色综合亚洲欧美另类图片| 高潮久久久久久久久久久不卡| 久久久国产精品麻豆| 日韩国内少妇激情av| 午夜福利在线观看吧| 老汉色∧v一级毛片| 亚洲人成伊人成综合网2020| 亚洲国产看品久久| 夜夜躁狠狠躁天天躁| 国产一区二区三区在线臀色熟女| 欧美不卡视频在线免费观看 | 男女午夜视频在线观看| 日韩欧美在线二视频| 亚洲18禁久久av| 9191精品国产免费久久| 啪啪无遮挡十八禁网站| 老汉色∧v一级毛片| 99久久精品国产亚洲精品| 男女下面进入的视频免费午夜| xxx96com| 国产精品av久久久久免费| 国产黄片美女视频| 亚洲人成电影免费在线| 精华霜和精华液先用哪个| 国产aⅴ精品一区二区三区波| 长腿黑丝高跟| 99国产精品一区二区三区| 日韩高清综合在线| 97碰自拍视频| 午夜成年电影在线免费观看| 变态另类丝袜制服| 少妇熟女aⅴ在线视频| 欧美成人一区二区免费高清观看 | 国产精品爽爽va在线观看网站| 又黄又爽又免费观看的视频| 久久九九热精品免费| 日韩欧美国产一区二区入口| √禁漫天堂资源中文www| 一二三四社区在线视频社区8| 欧美乱码精品一区二区三区| 在线观看午夜福利视频| 波多野结衣高清无吗| 国产精品久久电影中文字幕| 国产黄a三级三级三级人| 两性午夜刺激爽爽歪歪视频在线观看 | 91九色精品人成在线观看| 夜夜爽天天搞| 日韩欧美 国产精品| 首页视频小说图片口味搜索| 在线免费观看的www视频| 亚洲国产欧美网| 国产精品久久久久久人妻精品电影| 久久精品91蜜桃| 两人在一起打扑克的视频| 日韩欧美一区二区三区在线观看| 久久人妻av系列| 十八禁网站免费在线| 日日爽夜夜爽网站| 欧美日韩中文字幕国产精品一区二区三区| 可以在线观看毛片的网站| 女生性感内裤真人,穿戴方法视频| 啦啦啦韩国在线观看视频| 九色成人免费人妻av| 国产激情欧美一区二区| 国产一区二区在线av高清观看| 精品国内亚洲2022精品成人| 哪里可以看免费的av片| 国产探花在线观看一区二区| 黄色视频不卡| 日日爽夜夜爽网站| 九九热线精品视视频播放| 波多野结衣巨乳人妻| 成在线人永久免费视频| 久久精品亚洲精品国产色婷小说| 精品免费久久久久久久清纯| 少妇熟女aⅴ在线视频| cao死你这个sao货| 国产精品1区2区在线观看.| 99riav亚洲国产免费| 999久久久精品免费观看国产| 国产熟女午夜一区二区三区| 99久久久亚洲精品蜜臀av| 狂野欧美白嫩少妇大欣赏| 亚洲精品在线观看二区| 亚洲免费av在线视频| 国产成人系列免费观看| 美女扒开内裤让男人捅视频| 少妇被粗大的猛进出69影院| 观看免费一级毛片| 变态另类丝袜制服| 亚洲成av人片在线播放无| 性色av乱码一区二区三区2| 白带黄色成豆腐渣| bbb黄色大片| 两个人免费观看高清视频| 国产精品电影一区二区三区| 亚洲国产精品成人综合色| 18禁观看日本| 99久久综合精品五月天人人| 男女做爰动态图高潮gif福利片| 成人18禁高潮啪啪吃奶动态图| 亚洲精品粉嫩美女一区| 中文资源天堂在线| 久久精品国产亚洲av高清一级| 国产精品一区二区精品视频观看| 丝袜人妻中文字幕| 国产99白浆流出| 黄色片一级片一级黄色片| 亚洲自拍偷在线| 国产精品久久电影中文字幕| 亚洲,欧美精品.| 国产99久久九九免费精品| 亚洲国产欧美人成| 国产午夜精品论理片| 啪啪无遮挡十八禁网站| 国产视频一区二区在线看| 香蕉国产在线看| 男人舔女人的私密视频| 欧美3d第一页| 色噜噜av男人的天堂激情| 久久久久精品国产欧美久久久| 日本精品一区二区三区蜜桃| 99精品在免费线老司机午夜| 久久久国产精品麻豆| 国产精品亚洲美女久久久| 最近最新免费中文字幕在线| 全区人妻精品视频| av福利片在线| 亚洲自拍偷在线| 日韩欧美在线二视频| 岛国视频午夜一区免费看| 免费一级毛片在线播放高清视频| 中文字幕熟女人妻在线| 两性午夜刺激爽爽歪歪视频在线观看 | 久久久久性生活片| avwww免费| 91老司机精品| 色综合站精品国产| 亚洲自偷自拍图片 自拍| av超薄肉色丝袜交足视频| 12—13女人毛片做爰片一| aaaaa片日本免费| 国产真人三级小视频在线观看| 欧美大码av| 久久久久久国产a免费观看| 国产亚洲精品一区二区www| 黄频高清免费视频| 国产亚洲精品久久久久久毛片| 欧美乱妇无乱码| 波多野结衣高清无吗| 人妻久久中文字幕网| 国产精品,欧美在线| 国产av麻豆久久久久久久| 午夜亚洲福利在线播放| 小说图片视频综合网站| 日韩有码中文字幕| 97人妻精品一区二区三区麻豆| 午夜久久久久精精品| 免费高清视频大片| 国产激情偷乱视频一区二区|