• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    求解分布式約束優(yōu)化問(wèn)題的鄰居忽略策略局部搜索算法

    2025-04-10 00:00:00石美鳳賈國(guó)艷

    摘 要:針對(duì)現(xiàn)有基于局部搜索思想的分布式約束優(yōu)化問(wèn)題求解算法存在容易陷入局部最優(yōu)的問(wèn)題,提出了一系列用于求解分布式約束優(yōu)化問(wèn)題(DCOP)的基于鄰居忽略策略(NI)的局部搜索算法,以擴(kuò)大對(duì)解空間的搜索,避免陷入局部最優(yōu)。為了研究智能體之間約束關(guān)系的可變性和隨機(jī)性對(duì)局部搜索的影響和極值對(duì)于局部搜索的影響,分別設(shè)計(jì)了單個(gè)隨機(jī)鄰居忽略策略和極值鄰居忽略策略。同時(shí),基于單個(gè)鄰居隨機(jī)忽略策略和極值鄰居忽略策略,設(shè)計(jì)了用于平衡算法探索和開(kāi)發(fā)能力的混合策略。此外,還設(shè)計(jì)了多個(gè)鄰居隨機(jī)忽略策略,以探討求解DCOP時(shí)同時(shí)隨機(jī)忽略多個(gè)鄰居的可行性,并在理論上證明了隨機(jī)鄰居忽略策略對(duì)智能體之間的約束關(guān)系沒(méi)有影響。將提出的一系列基于鄰居忽略策略的局部搜索算法與十種先進(jìn)的非完備算法在三類(lèi)基準(zhǔn)問(wèn)題上的尋優(yōu)結(jié)果進(jìn)行了實(shí)驗(yàn)對(duì)比,結(jié)果表明所提一系列用于求解DCOP的基于鄰居忽略策略的局部搜索算法顯著優(yōu)于目前先進(jìn)的非完備算法。

    關(guān)鍵詞:分布式約束優(yōu)化問(wèn)題;鄰居忽略;解空間擴(kuò)大搜索;局部搜索算法

    中圖分類(lèi)號(hào):TP18"" 文獻(xiàn)標(biāo)志碼:A"" 文章編號(hào):1001-3695(2025)03-019-0788-07

    doi:10.19734/j.issn.1001-3695.2024.08.0297

    Series of neighbor ignoring strategies for local search algorithms for distributed constraint optimization problems

    Shi Meifeng,Jia Guoyan

    (Dept.of Computer Science amp; Engineering,Chongqing University of Technology,Chongqing 400054,China)

    Abstract:The local search algorithm for solving DCOP has the advantages of high flexibility,high efficiency,and high fault tolerance,but also easy to fall into the local optimum as the incomplete algorithm.Considering this,this paper designed a series of neighbor ignoring strategies to expand the search for solution spaces.Specifically,the single random neighbor ignoring strategy delved into the impact of variability and randomness in the constraint relationships among agents on the local search.In contrast,extreme neighbor ignoring focused on discussing the influence of extreme values on the local search algorithm.Furthermore,the hybrid strategy denoted as single random and extreme neighbor ignoring integrated the previous two to strike a more optimal balance between exploration and exploitation.In addition,the multiple random neighbor ignoring strategy offers a way to investigate the feasibility and implications of ignoring multiple neighbors simultaneously when solving DCOP.Theoretical ana-lysis reveals that the proposed neighbor ignoring strategy has no discernible impact on the constraints between agents.The extensive experimental results on three benchmark problems demonstrate the superiority of utilizing the neighbor ignoring strategy within the local search framework over the current state-of-the-art incomplete algorithms.

    Key words:distributed constraint optimization problem(DCOP);neighbor ignoring(NI);exploration space expanding;local search algorithms

    0 引言

    多智能體系統(tǒng)(multi-agent system,MAS)[1]是由多個(gè)獨(dú)立智能體組成的系統(tǒng),這些智能體可以相互交互、協(xié)作和競(jìng)爭(zhēng),以實(shí)現(xiàn)共同目標(biāo)或解決復(fù)雜問(wèn)題。分布式約束優(yōu)化問(wèn)題(DCOP)[2]是多智能體系統(tǒng)的基本模型,已成功應(yīng)用于任務(wù)調(diào)度、移動(dòng)傳感器協(xié)調(diào)、合作搜索等實(shí)際問(wèn)題[3~8]。

    學(xué)者們提出了許多求解DCOP的算法,根據(jù)其求解目標(biāo)可以分為完備算法和非完備算法。由于DCOP是NP-hard[2]問(wèn)題,隨著問(wèn)題規(guī)模的擴(kuò)大,完備算法的計(jì)算開(kāi)銷(xiāo)會(huì)呈指數(shù)級(jí)增長(zhǎng),所以并不適用于解決實(shí)際問(wèn)題。與完備算法不同,非完備算法在保證全局最優(yōu)的前提下,更加注重求解效率,即在有限資源的條件下盡可能以較低的計(jì)算開(kāi)銷(xiāo)找到最終的賦值組合[8]。因此,非完備算法的研究方向一直是DCOP領(lǐng)域的研究熱點(diǎn)。具體來(lái)說(shuō),非完備算法的研究方向主要分為基于推理的算法、基于采樣的算法、局部搜索算法和基于種群的算法四個(gè)方向。

    基于推理的算法包括max-sum[9]、bouned max-sum[10]、max-sum_ADVP[11] 和damped max-sum[12]。max-sum通過(guò)在因子圖中傳遞消息,不斷累積效用以尋找最優(yōu)分配。bouned max-sum消除了對(duì)智能體構(gòu)造無(wú)環(huán)圖傳遞消息影響最小的約束,并引入了近似比來(lái)提高解的質(zhì)量。max-sum_ADVP發(fā)送選值并消除無(wú)效值,以解決重復(fù)效用問(wèn)題。damped max-sum通過(guò)構(gòu)建等效的分裂約束因子圖來(lái)描述智能體之間約束的不對(duì)稱(chēng)性,以平衡探索和開(kāi)發(fā)。

    基于采樣的算法包括DUCT[13]、D-Gibbs[14]、SD-Gibbs[15]和PD-Gibbs[15]。DUCT是一種采用抽樣和置信界限來(lái)求解的DCOP算法。D-Gibbs將DCOP轉(zhuǎn)換為馬爾可夫隨機(jī)場(chǎng)中的最大似然估計(jì)問(wèn)題。SD-Gibbs和PD-Gibbs可以在線(xiàn)性空間內(nèi)解決大內(nèi)存限制問(wèn)題。

    局部搜索算法憑借高靈活性、高效率和高容錯(cuò)等優(yōu)點(diǎn),成為最受關(guān)注的非完備算法。局部搜索算法主要包括DSA[16]、MGM[17]、MGM-2[18]、MGM-3[17,18]、DSAN[19]和GDBA[20]。DSA是一種不需要通信結(jié)構(gòu)的算法。它主要通過(guò)尋找一個(gè)最大程度降低局部代價(jià)的新值,并以一定概率替換原值來(lái)實(shí)現(xiàn)目標(biāo)優(yōu)化。MGM專(zhuān)注于調(diào)整產(chǎn)生最大局部收益的智能體的值。DSAN通過(guò)在退火算法中引入動(dòng)態(tài)概率的思想,尋求一種跳出局部最優(yōu)解的機(jī)制。MGM-2和MGM-3可以根據(jù)k-optimal思想[21,22]找到最優(yōu)分配,但仍然面臨著一個(gè)巨大的挑戰(zhàn),即時(shí)間復(fù)雜度隨著k的增加而急劇增加。GDBA是基于DSA的變體DBA[16]的改進(jìn)算法,提出了有效成本、約束違反和修改矩陣范圍等方法實(shí)現(xiàn)更高的性能。局部搜索算法因其邏輯簡(jiǎn)單、高靈活性和高有效性而成為最流行的算法,但是它們無(wú)法保證找到全局最優(yōu)解。因此,研究者們提出了k-optimal、t-distance和anytime[23]等改進(jìn)機(jī)制來(lái)提高算法的優(yōu)化質(zhì)量和魯棒性。此外,PDS[24]提出了局部決策框架,打破了傳統(tǒng)鄰居分配的依賴(lài)性,通過(guò)局部決策機(jī)制提高了解的質(zhì)量。

    近年來(lái),基于種群的算法在DCOP求解中表現(xiàn)出優(yōu)異的性能。ACO_DCOP[25]通過(guò)結(jié)合信息素和啟發(fā)式信息進(jìn)行決策,將傳統(tǒng)的蟻群優(yōu)化擴(kuò)展到DCOP的求解中,其中信息素和啟發(fā)式信息分別為全局代價(jià)和局部代價(jià)。LSGA[26]是一種基于遺傳算法的框架,使用全賦值作為染色體進(jìn)行編碼。VLSs[27]根據(jù)分配對(duì)應(yīng)的概率進(jìn)行抽樣,并設(shè)計(jì)方差調(diào)整機(jī)制設(shè)置初始解,在多個(gè)并行解中交替執(zhí)行貪婪選擇。HLC[28]利用局部代價(jià)歷史記錄求解ADCOP。LPOS[29]通過(guò)自身的取值并行地搜索局部所有鄰居取值來(lái)進(jìn)一步擴(kuò)大對(duì)解空間的搜索。RDMAD[30]通過(guò)多種群分工配合分級(jí)更新策略更好地平衡算法的探索和開(kāi)發(fā)能力。LIEAD[31]引入局部信息熵和重啟機(jī)制,幫助智能體自適應(yīng)選擇信息素更新策略和值選擇策略,從而打破信息素的積累狀態(tài)。LCS[32]結(jié)合了指數(shù)加權(quán)移動(dòng)平均法和群體優(yōu)化技術(shù),利用智能體的歷史值潛力,進(jìn)一步提高局部搜索算法的探索能力。

    然而,無(wú)論哪種非完備算法,陷入局部最優(yōu)問(wèn)題都是一個(gè)不可避免的問(wèn)題。因此,如何設(shè)計(jì)相應(yīng)的策略,盡可能避免算法陷入局部最優(yōu),是一個(gè)非常值得研究的課題和挑戰(zhàn)。為了盡可能擴(kuò)大對(duì)解空間搜索的范圍,提出了一系列用于求解DCOP的基于鄰居忽略策略的局部搜索算法,以尋找算法跳出局部最優(yōu)的路徑。隨機(jī)鄰居忽略策略通過(guò)減少智能體間的約束來(lái)進(jìn)一步擴(kuò)大對(duì)解空間搜索的范圍,即使這樣會(huì)增加噪聲,但也為算法尋找最優(yōu)解提供了更多的機(jī)會(huì)。

    本文算法在智能家居任務(wù)調(diào)度[33]、市場(chǎng)貿(mào)易[34]等領(lǐng)域均具有應(yīng)用價(jià)值。在此,以智能家居任務(wù)調(diào)度為例展開(kāi)闡釋?zhuān)鐖D1所示。在智能家居的場(chǎng)景下,將社區(qū)中的每個(gè)家庭視為一個(gè)智能體,智能家居設(shè)備傳感器則被當(dāng)作變量,這些變量能夠反映智能家居系統(tǒng)的各種狀態(tài)信息。同時(shí),設(shè)定智能家居運(yùn)行過(guò)程中所產(chǎn)生的成本為約束代價(jià),這里的成本涵蓋了多個(gè)方面,比如能源消耗成本、設(shè)備損耗成本等?;诂F(xiàn)實(shí)中智能家居設(shè)備的實(shí)際環(huán)境狀況,構(gòu)建約束圖以及與之相對(duì)應(yīng)的DCOP模型,即可用本文算法進(jìn)行求解。最終求解得到的結(jié)果是各個(gè)家居設(shè)備消耗能量的最小值集合。這個(gè)集合對(duì)于智能家居的能源管理具有重要意義,它能夠?yàn)榧彝ヌ峁┳顑?yōu)的設(shè)備使用策略,從而實(shí)現(xiàn)節(jié)能的目的,降低智能家居系統(tǒng)的運(yùn)行成本。

    本文的貢獻(xiàn)可總結(jié)如下:a)提出了一系列鄰居忽略策略,以減少智能體之間的約束條件,從而擴(kuò)大算法對(duì)解空間搜索的范圍,增強(qiáng)算法的探索能力;b)從迭代優(yōu)化的角度,理論證明了隨機(jī)鄰居忽略策略不會(huì)影響原始DCOP的約束關(guān)系;c)為解決大規(guī)模、高密度的DCOP提供了一種新思路,即通過(guò)忽略部分鄰居來(lái)降低問(wèn)題的密度,從而通過(guò)解決密度較低的問(wèn)題來(lái)處理復(fù)雜的高密度問(wèn)題。

    1 背景與相關(guān)工作

    1.1 分布式約束優(yōu)化問(wèn)題

    一個(gè)DCOP可以定義為一個(gè)四元組〈A、X、D、F〉,其中:A={a1,a2,…,an}是智能體的集合,其中智能體ai控制一個(gè)或多個(gè)離散變量;X={x1,x2,…,xm}是離散變量的集合,其中每個(gè)變量xj都分配給一個(gè)智能體;D={D1,D2,…,Dm}是離散變量的有限值域集合,其中X中各變量的值分別取自離散域D1,D2,…,Dm;F={f1,f2,…,fq}是約束關(guān)系函數(shù)的集合,約束fi∈F:Di1×…×Dik→R指定分配給每一組變量的集合的約束代價(jià)。

    圖2展示了一個(gè)DCOP的實(shí)例。其中,圖2(a)是6個(gè)變量的約束圖,每條邊代表著約束代價(jià)函數(shù)。圖2(b)為各約束代價(jià)函數(shù)的約束矩陣。為了便于理解,假設(shè)一個(gè)智能體控制一個(gè)變量。因此,本文將智能體ai和變量xi視為同一概念。

    一個(gè)DCOP的解是對(duì)所有變量的賦值組合X,X使所有智能體之間產(chǎn)生的所有約束代價(jià)函數(shù)之和最小化,如式(1)所示。

    X*=arg mindi∈Di,dj∈Dj∑fi,j∈Ffi,j(xi∈di,xj∈dj)

    (1)

    1.2 分布式種群

    分布式種群是傳統(tǒng)種群的一種變體,它將所有智能體的全部賦值中的一組賦值視為一個(gè)個(gè)體,其中每個(gè)個(gè)體代表一個(gè)解,所有智能體屬于一個(gè)分布式種群。分布式種群的優(yōu)勢(shì)在于充分利用多個(gè)進(jìn)程或節(jié)點(diǎn)來(lái)計(jì)算資源,加快進(jìn)化算法的收斂速度,從而解決大規(guī)模問(wèn)題。分布式種群是基于種群的DCOPs求解算法中常用的一種方法。如圖3所示,分布式種群中的任何個(gè)體都受所有智能體控制,每個(gè)智能體控制所有個(gè)體中特定維度的一個(gè)變量。

    1.3 LCS

    基于局部代價(jià)的模擬算法LCS是一種基于局部搜索的算法,它通過(guò)模擬歷史代價(jià)來(lái)優(yōu)化局部代價(jià),并在群體中不斷尋求最優(yōu)解,從而解決優(yōu)化問(wèn)題。

    如算法1所示,在初始化階段,所有個(gè)體模擬最壞情況下的初始代價(jià)值est0ck(di)并開(kāi)啟循環(huán)。在初始輪中,每個(gè)個(gè)體從值域中隨機(jī)選擇一個(gè)初始值Vck,p并將其添加到取值集合Vi中。所有個(gè)體完成隨機(jī)選值后,智能體ai將Vi發(fā)送給其鄰居。當(dāng)智能體ai接收到所有的鄰居值集合Vm時(shí),根據(jù)式(3)計(jì)算所有個(gè)體的局部代價(jià)locck,p。隨后,根據(jù)式(4)更新局部模擬代價(jià)estrck(di)。為了加強(qiáng)種群交流,LCS設(shè)置交換輪次并根據(jù)式(5)更新局部模擬代價(jià)。最后,所有個(gè)體根據(jù)式(6)選取新值Vck,p,智能體ai將Vck,p加入Vi并發(fā)送給鄰居。

    算法1 LCS算法(for智能體ai)

    輸入:初始化參數(shù)C,P,α,β,γ,ecy。

    輸出:使全局約束代價(jià)最小的一組賦值組合X。

    a)初始化算法。

    b)若收到鄰居智能體的信息Vm,進(jìn)行下述步驟。

    c)更新智能體的取值,并根據(jù)式(3)計(jì)算所有個(gè)體的局部代價(jià)locck,p。

    d)根據(jù)式(4)更新當(dāng)前輪次的局部模擬代價(jià)estrck(di)。

    e)若該輪為交換輪次,根據(jù)式(5)進(jìn)行種群交流,更新局部模擬代價(jià)。

    f)根據(jù)式(6)進(jìn)行下一輪選值Vck,p,智能體ai將Vck,p加入Vi并發(fā)送給鄰居。返回步驟b)進(jìn)行下一輪。

    本節(jié)以50輪為例來(lái)分析算法的收斂速度,如表4所示。根據(jù)表4可知,基于鄰居忽略策略的局部搜索算法在大多數(shù)情況下展現(xiàn)出更快的收斂速度。其中,LCS-SRNI僅忽略一個(gè)鄰居,其打破局部最優(yōu)的能力break較弱,且噪聲干擾N相對(duì)較大,導(dǎo)致算法探索度Dexplore較小;而LCS-ENI、LCS-SRENI和LCS-MRNI由于忽略多個(gè)鄰居,使得算法跳出局部最優(yōu)的概率增加,打破局部最優(yōu)的能力break增大,相對(duì)噪聲干擾N也更強(qiáng),其策略的算法探索度Dexplore比LCS-SRNI的算法探索度Dexplore大。

    根據(jù)鄰居忽略策略,對(duì)各策略的收斂精度進(jìn)行深入分析。針對(duì)單個(gè)鄰居隨機(jī)忽略策略,需要隨機(jī)忽略一個(gè)鄰居,則求解精度為1-1/E;針對(duì)極值鄰居忽略策略,需要忽略約束代價(jià)最大和最小的鄰居,則求解精度為1-2/E;針對(duì)混合鄰居忽略策略,由于單個(gè)隨機(jī)忽略的鄰居可能與約束代價(jià)最大和最小的鄰居重合,所以求解精度為[1-3/E,1-2/E];針對(duì)多個(gè)鄰居隨機(jī)忽略策略,各約束邊被保留的概率為1-1/4r,則求解精度為1-1/4r。隨著智能體數(shù)量和輪次的增加,原始約束邊的集合E不斷擴(kuò)大,則四種策略的求解精度隨之增加,得到的解越逼近問(wèn)題的解。這是因?yàn)榧s束邊被保留的概率增加,算法在搜索解的過(guò)程中能夠更全面地考慮問(wèn)題的約束條件,從而使得求解結(jié)果更接近原問(wèn)題的最優(yōu)解,提高了算法的精度。

    4 復(fù)雜性分析

    本章對(duì)基于鄰居忽略策略的局部搜索算法及其對(duì)比算法的復(fù)雜性進(jìn)行了深入分析。由于部分對(duì)比算法較為久遠(yuǎn),本章選取了近年來(lái)較為典型的算法進(jìn)行比較,包括LSGA、GDBA、ACO_DCOP、LIEAD、LCS。

    對(duì)于空間復(fù)雜度,假設(shè)智能體鄰居總數(shù)為|A|=n且ai∈A。根據(jù)鄰居忽略策略,智能體只需保存每個(gè)種群的局部代價(jià)模擬值,每個(gè)種群的模擬值數(shù)量等于值域大小M,其空間復(fù)雜度為O(M),因此總的空間復(fù)雜度為種群數(shù)量與單個(gè)種群復(fù)雜度的乘積,即O(C×M)。根據(jù)參考文獻(xiàn)[20,25,26,31,32],LSGA的最壞情況消息空間需求為O(2n×|Ni|),交叉消息空間為O(M);GDBA的空間復(fù)雜度為O(|Ni|×|Di|×maxj∈Ni|Dj|);ACO_DCOP空間復(fù)雜度包括值消息大小O(n×K),信息素消息大小O((K+1)n+K)以及存儲(chǔ)信息素路徑空間為O(ω×|Di|×|Dj|);LIEAD的空間復(fù)雜度主要由種群信息,信息素大小和存儲(chǔ)信息素軌跡構(gòu)成,分別為O(n×m×K),O(n(mK+1)+mK),O(|Hi|×|Di|×|Dj|+2);LCS需要O(|C|×|P|)??傮w而言,基于鄰居忽略策略的局部搜索算法的空間復(fù)雜度與原始LCS算法相同,但較其他算法具有更低的空間開(kāi)銷(xiāo)。

    對(duì)于時(shí)間復(fù)雜度,基于鄰居忽略策略的局部搜索算法的時(shí)間復(fù)雜度主要為初始化模擬值、計(jì)算局部代價(jià)、更新模擬值種群交互和計(jì)算取值概率方面。在初始化模擬值階段,通過(guò)遍歷約束矩陣以找到最壞約束代價(jià),其復(fù)雜度為O(N×M×M),其中N為鄰居數(shù)量。在計(jì)算局部代價(jià)時(shí),查找約束表的復(fù)雜度為O(1)。然而,由于需要對(duì)所有個(gè)體進(jìn)行查找,故總復(fù)雜度為O(C×P×N),其P為個(gè)體數(shù)量。在更新模擬值期間,復(fù)雜度為O(C×P×M),其中C是約束數(shù)量,M是種群大小。在種群交互階段,其復(fù)雜度為O(C×P)。在計(jì)算概率時(shí),只需遍歷所有模擬值,因此復(fù)雜度為O(C×max(P×M)),其中P是個(gè)體數(shù)量,M是種群數(shù)量。就發(fā)送信息的大小而言,智能體需要發(fā)送值消息和局部代價(jià)消息,這兩者都與種群數(shù)量有關(guān),故復(fù)雜度為O(C×P),其中C是約束數(shù)量,P是種群個(gè)體數(shù)量。關(guān)于信息數(shù)量方面,每輪迭代中智能體只需向其鄰居發(fā)送值消息和局部代價(jià)消息。對(duì)于隨機(jī)鄰居忽略策略的值消息,每次迭代發(fā)送值信息的復(fù)雜度為O(N-K),其中N為鄰居總數(shù),K為忽略鄰居的數(shù)量。LSGA需要O(M×|Ni|)時(shí)間;GDBA的時(shí)間復(fù)雜度為O(|Ni|×|Di|);ACO_DCOP的時(shí)間復(fù)雜度為O(K|Hi|×|Di|);LIEAD的時(shí)間復(fù)雜度主要分為局部最優(yōu)階段和更新局部信息熵階段,分別為O(K|Hi|×|Di|+1)和O(|Hi|×|Di|×|Dj|);LCS的時(shí)間復(fù)雜度為O(n)。因此,基于鄰居忽略策略的局部搜索算法時(shí)間復(fù)雜度與原始LCS算法相同,但相較于其他算法具備更低的計(jì)算開(kāi)銷(xiāo)和更高的效率。這說(shuō)明基于鄰居忽略策略的局部搜索算法在保持良好性能的同時(shí),能夠顯著降低計(jì)算資源的消耗,展現(xiàn)出較優(yōu)的時(shí)間效率優(yōu)勢(shì)。

    5 實(shí)驗(yàn)結(jié)果分析

    本章通過(guò)實(shí)驗(yàn)分析算法LCS-SRNI、LCS-ENI、LCS-SRENI和LCS-MRNI的性能。LCS-SRNI、LCS-ENI、LCS-SRENI和LCS-MRNI分別表示基于單個(gè)鄰居隨機(jī)忽略策略、極值鄰居忽略策略、混合鄰居忽略策略以及多個(gè)鄰居隨機(jī)忽略策略的LCS算法?;卩従雍雎圆呗缘木植克阉魉惴ㄅc最先進(jìn)的局部搜索算法及種群算法,即LSGA、DSA(type C且p=0.6)、MGM、GDBA、PDS-DSA、Max-sum-ADVP、MaxsumDamping、LCS和ACO_DCOP(稀疏K=13,密集K=19)進(jìn)行比較。實(shí)驗(yàn)基準(zhǔn)問(wèn)題包括隨機(jī)DCOP、無(wú)尺度網(wǎng)絡(luò)和加權(quán)圖著色問(wèn)題。此外,鑒于非完備算法的隨機(jī)性,所有問(wèn)題算法都獨(dú)立執(zhí)行30輪,并對(duì)實(shí)驗(yàn)結(jié)果進(jìn)行統(tǒng)計(jì)分析,平均值作為實(shí)驗(yàn)結(jié)果。最大迭代次數(shù)設(shè)置為660?;鶞?zhǔn)問(wèn)題的具體配置如表5所示。

    根據(jù)參考文獻(xiàn)[32],LCS的參數(shù)分別設(shè)置為:C=4,P=24,β={0.9,0.8,0.7,0.6},γ=0.7,α取值如表6所示。

    為了深入了解各算法的收斂過(guò)程,圖4~9展示了算法在不同基準(zhǔn)問(wèn)題的收斂曲線(xiàn)。根據(jù)2.3節(jié),鄰居忽略策略的概率呈遞增趨勢(shì),這意味著跳出局部最優(yōu)的概率在不斷增加。實(shí)驗(yàn)結(jié)果顯示,求解質(zhì)量依次為L(zhǎng)CS-SRNI gt; LCS-ENI gt; LCS-SRENI gt; LCS-MRNI。LCS-SRNI忽略概率較低,適合小范圍調(diào)整;LCS-ENI忽略代價(jià)最大和最小的鄰居,提升全局優(yōu)化的可能性;LCS-SRENI結(jié)合了隨機(jī)與極值忽略,兼顧靈活性和針對(duì)性;而LCS-MRNI通過(guò)大規(guī)模擾動(dòng)顯著增加了全局搜索的機(jī)會(huì),從而更有助于復(fù)雜問(wèn)題的優(yōu)化。

    圖4、5展示了各個(gè)算法在求解70個(gè)智能體的稀疏和稠密隨機(jī)DCOP上的收斂曲線(xiàn)。在稀疏隨機(jī)DCOP上,相較于LCS,LCS-SRNI、LCS-ENI、LCS-SRENI和LCS-MRNI的性能分別提升了約17.1%、29.4%、40.7%和58.8%;LCS-MRNI 相較于其他算法提升了59.7%~68.6%。這表明引入不同的改進(jìn)機(jī)制顯著增強(qiáng)了LCS的性能,特別是由于LCS-SRENI和LCS-MRNI忽略鄰居概率相對(duì)較高,優(yōu)化效果最為顯著。從各算法的收斂曲線(xiàn)可以看出,MGM和DSA算法因缺乏全局信息,全局優(yōu)化能力欠佳。盡管在DSA算法中引入了PDS框架提升了局部搜索能力,但整體性能提升幅度有限。相比之下,ACO_DCOP、LIEAD、LCS等算法通過(guò)種群協(xié)作機(jī)制提升了尋優(yōu)能力。然而,基于鄰居忽略策略的局部搜索算法借助鄰居忽略策略在收斂速度和解質(zhì)量方面表現(xiàn)更為突出,其優(yōu)化過(guò)程中的效率明顯優(yōu)于其他算法,展示了更強(qiáng)的全局搜索和收斂能力。在稠密問(wèn)題中,由于測(cè)試問(wèn)題密度的增加,智能體之間的約束變得更加復(fù)雜,鄰居忽略策略作用有限,相較于稀疏問(wèn)題,本文算法尋優(yōu)性能提升幅度較弱,其解質(zhì)量相較于原始LCS分別提高了2.8%、5.1%、7.6%和53.4%。同時(shí),與其他算法相比,LCS-MRNI性能提升幅度在53.7%~57.1%,進(jìn)一步證明了該算法在應(yīng)對(duì)高密度約束問(wèn)題時(shí),具備更強(qiáng)的全局優(yōu)化能力和更優(yōu)的解質(zhì)量。通過(guò)這些改進(jìn),基于鄰居忽略策略的局部搜索算法在復(fù)雜問(wèn)題情境下仍能保持穩(wěn)健的性能。

    在求解120個(gè)智能體的稀疏問(wèn)題中,四種改進(jìn)算法相較于原始LCS的性能提升顯著,分別約為9.5%、16.8%、24.3%和54.9%。相比于其他算法,忽略鄰居概率較高的LCS-MRNI性能提升幅度在55.2%~62.2%,在處理稀疏問(wèn)題時(shí)存在明顯優(yōu)勢(shì)。這表明,本文算法能夠更有效地利用稀疏問(wèn)題的特性,顯著增強(qiáng)了優(yōu)化能力。在求解120個(gè)智能體的稠密問(wèn)題中,四種改進(jìn)算法相較于原始LCS的性能提升分別為1.5%、2.9%、4.3%和51.9%。相較于其他算法,LCS-MRNI提升幅度在52.1%~55.1%??傮w來(lái)看,四種本文算法在稀疏問(wèn)題中表現(xiàn)出色,能夠有效提升優(yōu)化性能,而在稠密問(wèn)題中,因其忽略鄰居策略作用不明顯,提升幅度較小,但本文算法仍能提供一定的性能優(yōu)勢(shì),特別是LCS-MRN表現(xiàn)突出。這表明,這些算法在不同稠密問(wèn)題下依然能發(fā)揮其獨(dú)特的優(yōu)勢(shì)。

    圖6、7展示了各個(gè)算法在求解150個(gè)智能體的稀疏和稠密無(wú)尺度網(wǎng)絡(luò)問(wèn)題上的收斂曲線(xiàn)。在稀疏問(wèn)題中,四種基于LCS的改進(jìn)算法相較于原始LCS的性能分別提升了19.7%、33.0%、44.5%和56.5%。其中,LCS-MRNI相比其他算法提高了57%~67.1%。在稠密問(wèn)題中,改進(jìn)算法的提升幅度分別為6.1%、11.2%、16.3%和53.5%,而LCS-MRNI的提升幅度在53.3%~59.7%。本文算法在處理無(wú)尺度網(wǎng)絡(luò)問(wèn)題時(shí)表現(xiàn)優(yōu)越,證明了鄰居忽略策略在結(jié)構(gòu)化問(wèn)題求解中的有效性和顯著性能提升。

    圖8、9比較了算法在求解120個(gè)智能體的加權(quán)圖著色問(wèn)題時(shí)的收斂曲線(xiàn)。相較于原始LCS算法,本文算法性能提升分別為28.3%、38.2%、55.1%和76.5%。特別地,LCS-MRNI的性能提升幅度在84.1%~97.8%,顯著優(yōu)于其他算法。實(shí)驗(yàn)結(jié)果表明,基于鄰居忽略策略的局部搜索算法的性能優(yōu)于其他對(duì)比算法。但值得注意的是,各個(gè)算法之間的性能差距并不明顯,這是因?yàn)榕c其他基準(zhǔn)問(wèn)題相比,加權(quán)圖著色問(wèn)題是約束滿(mǎn)足問(wèn)題,相較于其他約束優(yōu)化問(wèn)題更為簡(jiǎn)單,求解難度較低。

    表7詳細(xì)地展示了所有對(duì)比實(shí)驗(yàn)結(jié)果。實(shí)驗(yàn)具體數(shù)據(jù)也表明,LCS-MRNI在所有基準(zhǔn)問(wèn)題均表現(xiàn)出最佳的性能,其次是LCS-SRENI、LCS-ENI、LCS-SRNI。

    6 結(jié)束語(yǔ)

    為了盡可能避免算法陷入局部最優(yōu)解,本文提出了一系列用于求解DCOP的基于鄰居忽略策略的局部搜索算法,包括LCS-SRNI、LCS-ENI、LCS-SRENI和LCS-MRNI。這些算法通過(guò)擴(kuò)大對(duì)解空間的搜索范圍找到更好的解決方案,從而引導(dǎo)算法跳出局部最優(yōu)解。在理論上證明了,從迭代優(yōu)化的角度來(lái)看,隨機(jī)鄰居忽略策略對(duì)智能體之間的約束關(guān)系沒(méi)有影響。此外,大量的實(shí)驗(yàn)結(jié)果表明,鄰居忽略策略可以通過(guò)減少智能體之間的約束,進(jìn)一步擴(kuò)大算法對(duì)解空間的搜索,即使這會(huì)在一定程度上增加噪聲,但也為算法尋找更優(yōu)解提供了更多的機(jī)會(huì)。因此,基于鄰居忽略策略的局部搜索算法可以極大地提升算法的全局探索能力,為求解大規(guī)模高密度DCOP提供了一種新穎的思路。未來(lái),將深入探究低密度問(wèn)題的解決方法,并將其應(yīng)用于復(fù)雜的高密度問(wèn)題的處理。

    參考文獻(xiàn):

    [1]Cerquides J,F(xiàn)arinelli A,Meseguer P,et al.A tutorial on optimization for multi-agent systems[J].The Computer Journal,2014,57(6):799-824.

    [2]Leite A R,Enembreck F,Barthès J A.Distributed constraint optimization problems:review and perspectives[J].Expert Systems with Applications,2014,41(11):5139-5157.

    [3]Fioretto F,Pontelli E,Yeoh W.Distributed constraint optimization problems and applications:a survey[J].Journal of Artificial Intelligence Research,2018,61:623-698.

    [4]Sato D M V,Borges A P,Peter M,et al.I-DCOP:train classification based on an iterative process using distributed constraint optimization[J].Procedia Computer Science,2015,51:2297-2306.

    [5]Zivan R,Parash T,Cohen-Lavi L,et al.Applying max-sum to asymmetric distributed constraint optimization problems[J].Autonomous Agents and Multi-Agent Systems,2020,34(1):13.

    [6]Sultanik E A,Modi P J,Regli W C,et al.On modeling multiagent task scheduling as a distributed constraint optimization problem[C]//Proc of the 20th International Joint Conference on Artificial Intelligence.New York:ACM Press,2007:1531-1536.

    [7]Acevedo J J,Arrue B C,Maza I,et al.Cooperative large area surveillance with a team of aerial mobile robots for long endurance missions[J].Journal of Intelligent amp; Robotic Systems,2013,70(1):329-345.

    [8]Vinyals M,Juan A.Rodríguez et al.Generalizing DPOP:action-GDL,a new complete algorithm for DCOPs[C]//Proc of the 8th International Conference on Autonomous Agents amp; Multiagent Systems.[S.l.]:International Foundation for Autonomous Agents and Multiagent Systems,2009:1239-1240.

    [9]Farinelli A,Rogers A,Petcu A,et al.Decentralised coordination of low-power embedded devices using the max-sum algorithm[C]//Proc of the 7th International Joint Conference on Autonomous Agents and Multiagent Systems.New York:ACM Press,2008:639-646.

    [10]Rogers A,F(xiàn)arinelli A,Stranders R,et al.Bounded approximate decentralised coordination via the max-sum algorithm[J].Artificial Intelligence,2011,175(2):730-759.

    [11]Zivan R,Peled H,Zivan R,et al.Max/Min-sum distributed constraint optimization through value propagation on an alternating DAG[C]//Proc of the 11th International Conference on Autonomous Agents and Multiagent Systems.New York:ACM Press,2012:265-272.

    [12]Cohen L,Zivan R.Max-sum revisited:the real power of damping[C]//Autonomous Agents and Multiagent Systems.Cham:Springer International Publishing,2017:111-124.

    [13]Ottens B,Dimitrakakis C,F(xiàn)altings B.DUCT:an upper confidence bound approach to distributed constraint optimisation problems[J].ACM Trans on Intelligent Systems,2017,8(5):1-69.27.

    [14]Nguyen D T,Yeoh W,Lau H C.Distributed Gibbs:a memory-bounded sampling-based DCOP algorithm[C]//Proc of the 12th International Conference on Autonomous Agents and Multiagent Systems.[S.l.]:International Foundation for Autonomous Agents and Multiagent Systems,2013:167-174.

    [15]Nguyen D T,Yeoh W,Lau H C,et al.Distributed Gibbs:a linear-space sampling-based DCOP algorithm[J].Journal of Artificial Intelligence Research,2019,64:705-748.

    [16]Zhang Weixiong,Wang Guandong,Xing Zhao,et al.Distributed stochastic search and distributed breakout:properties,comparison and applications to constraint optimization problems in sensor networks[J].Artificial Intelligence,2005,161(1-2):55-87.

    [17]Maheswaran R T,Pearce J P,Tambe M.Distributed algorithms for DCOP:a graphical-game-based approach[C]//Proc of the 17th ISCA International Conference on Parallel and Distributed Computing Systems.2004:432-439.

    [18]Maheswaran R T,Pearce J P,Tambe M.A family of graphical-game-based algorithms for distributed constraint optimization problems[M]//Scerri P,Vincent R,Mailler R.Coordination of Large-Scale Multiagent Systems.New York:Springer-Verlag,2006:127-146.

    [19]Arshad M,Silaghi M C.Distributed simulated annealing[EB/OL].(2014).https://cs.fit.edu/~msilaghi/pages/papers/IOSDSA.pdf.

    [20]Okamoto S,Zivan R,Nahon A.Distributed breakout:beyond satisfaction[C]//Proc of the 25th International Joint Conference on Artificial Intelligence.Palo Alto,CA:AAAI Press,2016,447-453.

    [21]Pearce J P,Tambe M,Pearce J P,et al.Quality guarantees on k-optimal solutions for distributed constraint optimization problems[C]//Proc of the 20th International Joint Conference on Artifical Intelligence.New York:ACM Press,2007:1446-1451.

    [22]Bowring E,Pearce J,Portway C D,et al.On k-optimal distributed constraint optimization algorithms:new bounds and algorithms[C]//Proc of the 7th International Joint Conference on Autonomous Agents and Multiagent Systems.2008:607-614.

    [23]Zivan R,Okamoto S,Peled H.Explorative anytime local search for distributed constraint optimization[J].Artificial Intelligence,2014,212(1):1-26.

    [24]Yu Zhepeng,Chen Ziyu,He Jingyuan,et al.A partial decision scheme for local search algorithms for distributed constraint optimization problems[C]//Proc of the 16th Conference on Autonomous Agents and Multiagent Systems.New York:ACM Press,2017:187-194.

    [25]Chen Ziyu,Wu Tengfei,Deng Yanchen,et al.An ant-based algorithm to solve distributed constraint optimization problems[C]//Proc of AAAI Conference on Artificial Intelligence.Palo Alto,CA:AAAI Press,2018:4654-4661.

    [26]Chen Ziyu,Liu Lizhen,He Jingyuan,et al.A genetic algorithm based framework for local search algorithms for distributed constraint optimization problems[J].Autonomous Agents and Multi-Agent Systems,2020,34(2):article No.41.

    [27]Li Fukui,He Jingyuan,Zhou Mingliang,et al.VLSs:a local search algorithm for distributed constraint optimization problems[J].International Journal of Pattern Recognition and Artificial Intelligence,2022,36(3):2259006.

    [28]石美鳳,吳俊,陳媛.一種歷史局部代價(jià)求解ADCOPs的算法[J].重慶理工大學(xué)學(xué)報(bào):自然科學(xué),2022,36(9):156-163.(Shi Mei-feng,Wu Jun,Chen Yuan.Historical local cost based algorithm to solve ADCOPs[J].Journal of Chongqing University of Technology Natural Science,2022,36(9):156-163.)

    [29]石美鳳,楊海,陳媛,等.基于局部并行搜索的分布式約束優(yōu)化算法框架[J].計(jì)算機(jī)應(yīng)用研究,2022,39(8):2376-2380.(Shi Mei-feng,Yang Hai,Chen Yuan,et al.Local parallel search framework for distributed constraint optimization problems[J].Application Research of Computers,2022,39(8):2376-2380.)

    [30]石美鳳,肖詩(shī)川,馮欣.基于多種群的隨機(jī)擾動(dòng)蟻群算法求解分布式約束優(yōu)化問(wèn)題[J].計(jì)算機(jī)應(yīng)用研究,2022,39(9):2683-2688.(Shi Meifeng,Xiao Shichuan,F(xiàn)eng Xin.Random disturbance based multi-population ant colony algorithm to solve distributed constraint optimization problems[J].Application Research of Computers,2022,39(9):2683-2688.)

    [31]Shi Meifeng,Xiao Shichuan,F(xiàn)eng Xin.An adaptive ant colony algorithm based on local information entropy to solve distributed constraint optimization problems[J].International Journal of Pattern Recognition and Artificial Intelligence,2023,37(9):2359013.

    [32]Shi Meifeng,Liang Feipeng,Chen Yuan,et al.A local cost simulation-based algorithm to solve distributed constraint optimization problems[J].PeerJ Computer Science,2023,9:e1296.

    [33]Fioretto F,Yeoh W,Pontelli E,et al.A multiagent system approach to scheduling devices in smart homes[C]//Proc of the 16th Conference on Autonomous Agents and MultiAgent Systems.New York:ACM Press,2017:981-989.

    [34]Cerquides J,Picard G,Rodríguez-Aguilar J A,et al.Designing a market place for the trading and distribution of energy in the smart grid[C]//Proc of International Conference on Autonomous Agents and Multiagent Systems.New York:ACM Press,2015:1285-1293.

    嫩草影院精品99| 黄片播放在线免费| 一级黄色大片毛片| 亚洲美女黄片视频| 久久人妻av系列| 午夜久久久在线观看| 如日韩欧美国产精品一区二区三区| 亚洲五月婷婷丁香| 午夜精品在线福利| 国产精品秋霞免费鲁丝片| 色综合欧美亚洲国产小说| 中文字幕最新亚洲高清| 级片在线观看| 欧美日韩亚洲国产一区二区在线观看| 50天的宝宝边吃奶边哭怎么回事| 可以在线观看毛片的网站| 99国产精品99久久久久| 一级毛片精品| 国产熟女xx| 高清欧美精品videossex| 亚洲自偷自拍图片 自拍| 国产精品1区2区在线观看.| 熟女少妇亚洲综合色aaa.| 两性夫妻黄色片| 日韩大码丰满熟妇| 国产av在哪里看| 超碰97精品在线观看| 黑人巨大精品欧美一区二区mp4| 欧美日韩瑟瑟在线播放| 久久精品亚洲熟妇少妇任你| 在线十欧美十亚洲十日本专区| 欧美 亚洲 国产 日韩一| 亚洲午夜精品一区,二区,三区| 丰满饥渴人妻一区二区三| 亚洲成人免费av在线播放| 亚洲第一青青草原| 国内毛片毛片毛片毛片毛片| 欧美色视频一区免费| 久久草成人影院| 国产99久久九九免费精品| 欧美人与性动交α欧美软件| 18禁观看日本| 精品人妻在线不人妻| 久久久精品欧美日韩精品| 亚洲人成电影观看| 欧美一级毛片孕妇| 亚洲第一欧美日韩一区二区三区| 在线观看免费高清a一片| 亚洲精品成人av观看孕妇| 亚洲欧美日韩无卡精品| 丝袜美腿诱惑在线| 这个男人来自地球电影免费观看| 日本vs欧美在线观看视频| 久久热在线av| 国产精品99久久99久久久不卡| 自线自在国产av| 一进一出好大好爽视频| 国产成人精品久久二区二区91| 国产无遮挡羞羞视频在线观看| 乱人伦中国视频| 欧美日韩中文字幕国产精品一区二区三区 | 99久久精品国产亚洲精品| xxx96com| 亚洲欧美日韩另类电影网站| av在线播放免费不卡| videosex国产| 人人妻人人澡人人看| 伦理电影免费视频| 黑人巨大精品欧美一区二区mp4| 欧美av亚洲av综合av国产av| 91精品三级在线观看| 国产伦人伦偷精品视频| 操美女的视频在线观看| 韩国av一区二区三区四区| 精品一区二区三区视频在线观看免费 | 可以免费在线观看a视频的电影网站| 黄色a级毛片大全视频| 欧美日韩精品网址| 日韩欧美一区视频在线观看| 国产精品久久视频播放| 国产精品永久免费网站| 777久久人妻少妇嫩草av网站| 亚洲精品在线观看二区| 日韩视频一区二区在线观看| 欧美精品一区二区免费开放| 久久热在线av| 国产精品99久久99久久久不卡| 亚洲美女黄片视频| 露出奶头的视频| 满18在线观看网站| e午夜精品久久久久久久| 搡老乐熟女国产| 日韩国内少妇激情av| 天天躁夜夜躁狠狠躁躁| 另类亚洲欧美激情| 中文字幕人妻丝袜制服| 国产国语露脸激情在线看| 国产精品 欧美亚洲| 免费av中文字幕在线| 看黄色毛片网站| 亚洲精品中文字幕在线视频| 亚洲中文av在线| 超色免费av| 日本三级黄在线观看| 超碰成人久久| av天堂在线播放| 中文字幕人妻丝袜一区二区| 国产亚洲欧美在线一区二区| 精品国产一区二区久久| 级片在线观看| 妹子高潮喷水视频| 日韩欧美三级三区| 国产有黄有色有爽视频| 日韩一卡2卡3卡4卡2021年| 黄片播放在线免费| 日韩免费av在线播放| 国产一卡二卡三卡精品| 午夜亚洲福利在线播放| 一级毛片精品| 涩涩av久久男人的天堂| 亚洲九九香蕉| 亚洲第一欧美日韩一区二区三区| 一进一出抽搐动态| 国产熟女午夜一区二区三区| 丁香欧美五月| 免费看a级黄色片| 一a级毛片在线观看| 日韩成人在线观看一区二区三区| ponron亚洲| 99久久人妻综合| 欧美激情 高清一区二区三区| 老鸭窝网址在线观看| 极品人妻少妇av视频| 中文字幕av电影在线播放| 亚洲熟女毛片儿| 在线观看免费视频网站a站| 在线看a的网站| 欧美成人免费av一区二区三区| 久久热在线av| 每晚都被弄得嗷嗷叫到高潮| 久久精品人人爽人人爽视色| 精品一区二区三区四区五区乱码| 国产精品久久电影中文字幕| 国内久久婷婷六月综合欲色啪| 国产99久久九九免费精品| 丝袜在线中文字幕| 午夜福利免费观看在线| 成人亚洲精品av一区二区 | 天堂√8在线中文| 麻豆国产av国片精品| 久久国产精品人妻蜜桃| 亚洲中文字幕日韩| 欧美日本中文国产一区发布| 一区在线观看完整版| 精品一区二区三区av网在线观看| 午夜精品国产一区二区电影| 日韩视频一区二区在线观看| 亚洲avbb在线观看| 亚洲人成网站在线播放欧美日韩| 国产免费av片在线观看野外av| 中亚洲国语对白在线视频| 少妇的丰满在线观看| 老司机深夜福利视频在线观看| 亚洲少妇的诱惑av| 叶爱在线成人免费视频播放| 97超级碰碰碰精品色视频在线观看| 久久国产亚洲av麻豆专区| 韩国精品一区二区三区| 国产黄a三级三级三级人| 中文字幕人妻熟女乱码| 黑人操中国人逼视频| 男女午夜视频在线观看| 黄色视频,在线免费观看| x7x7x7水蜜桃| 人人妻人人添人人爽欧美一区卜| 老汉色∧v一级毛片| 国产亚洲精品久久久久久毛片| www.999成人在线观看| 男人的好看免费观看在线视频 | 色在线成人网| 国产三级黄色录像| 久久精品国产99精品国产亚洲性色 | 变态另类成人亚洲欧美熟女 | 日韩欧美一区视频在线观看| 超色免费av| 久久人人爽av亚洲精品天堂| 老汉色∧v一级毛片| 啦啦啦 在线观看视频| 99久久国产精品久久久| 免费日韩欧美在线观看| 亚洲精品久久成人aⅴ小说| 一级片免费观看大全| 国产激情久久老熟女| 老熟妇乱子伦视频在线观看| 在线永久观看黄色视频| 一边摸一边抽搐一进一小说| 久久热在线av| 久热爱精品视频在线9| 亚洲成人国产一区在线观看| bbb黄色大片| 国产成人精品久久二区二区免费| 亚洲美女黄片视频| 一级,二级,三级黄色视频| 黑人猛操日本美女一级片| 亚洲欧美精品综合一区二区三区| 99在线人妻在线中文字幕| 久久久国产成人免费| 在线观看免费高清a一片| 婷婷精品国产亚洲av在线| 欧美日韩中文字幕国产精品一区二区三区 | 99re在线观看精品视频| 亚洲国产欧美一区二区综合| 精品国产乱子伦一区二区三区| 黄色 视频免费看| videosex国产| av网站在线播放免费| 亚洲午夜精品一区,二区,三区| 久久精品aⅴ一区二区三区四区| 黄片大片在线免费观看| 在线国产一区二区在线| 午夜免费成人在线视频| 日韩人妻精品一区2区三区| 最近最新中文字幕大全电影3 | 18禁美女被吸乳视频| 欧洲精品卡2卡3卡4卡5卡区| 91字幕亚洲| 国产有黄有色有爽视频| 法律面前人人平等表现在哪些方面| 水蜜桃什么品种好| 一二三四社区在线视频社区8| 99热国产这里只有精品6| 一本大道久久a久久精品| 日本 av在线| 久久99一区二区三区| 级片在线观看| 亚洲伊人色综图| 亚洲av第一区精品v没综合| 十分钟在线观看高清视频www| 亚洲av五月六月丁香网| 国产精品av久久久久免费| 成人亚洲精品av一区二区 | 老司机午夜十八禁免费视频| 999久久久精品免费观看国产| 中文字幕人妻丝袜制服| 一级毛片女人18水好多| 欧美午夜高清在线| 在线av久久热| 18禁观看日本| 麻豆国产av国片精品| 97人妻天天添夜夜摸| 国产精品日韩av在线免费观看 | 一进一出抽搐动态| 欧美精品啪啪一区二区三区| 88av欧美| 成人国语在线视频| 亚洲 欧美 日韩 在线 免费| 国产成人精品久久二区二区91| 亚洲在线自拍视频| 国产野战对白在线观看| 欧美乱妇无乱码| 女人爽到高潮嗷嗷叫在线视频| 国产又爽黄色视频| 一区二区三区精品91| 丰满人妻熟妇乱又伦精品不卡| 超碰97精品在线观看| 俄罗斯特黄特色一大片| 日本三级黄在线观看| 一本综合久久免费| 宅男免费午夜| 国产成人欧美在线观看| 在线观看www视频免费| 久久久精品欧美日韩精品| 国产激情久久老熟女| 黑人巨大精品欧美一区二区mp4| 国产欧美日韩精品亚洲av| 亚洲免费av在线视频| 成年版毛片免费区| 88av欧美| 国产精品秋霞免费鲁丝片| 午夜激情av网站| 黄色女人牲交| 欧美成狂野欧美在线观看| 国产熟女xx| 男女下面进入的视频免费午夜 | 国产精品野战在线观看 | 免费在线观看亚洲国产| 老熟妇乱子伦视频在线观看| 国产高清激情床上av| www.自偷自拍.com| 中文字幕人妻丝袜一区二区| 91麻豆av在线| av免费在线观看网站| 国产精品香港三级国产av潘金莲| 黄片小视频在线播放| 久久久久久久久中文| 亚洲av片天天在线观看| 99久久99久久久精品蜜桃| 丁香六月欧美| 天天躁夜夜躁狠狠躁躁| 亚洲少妇的诱惑av| 一级黄色大片毛片| 少妇 在线观看| 曰老女人黄片| 欧美日韩av久久| 757午夜福利合集在线观看| 欧美国产精品va在线观看不卡| 亚洲欧美精品综合一区二区三区| 三上悠亚av全集在线观看| 黄色视频不卡| 午夜久久久在线观看| 成人av一区二区三区在线看| 99国产精品一区二区蜜桃av| 精品国内亚洲2022精品成人| 搡老岳熟女国产| 欧美精品一区二区免费开放| 老司机亚洲免费影院| 中文字幕人妻丝袜一区二区| 美女扒开内裤让男人捅视频| 自线自在国产av| 日韩人妻精品一区2区三区| 真人做人爱边吃奶动态| 国产主播在线观看一区二区| 99在线视频只有这里精品首页| 9191精品国产免费久久| 免费在线观看完整版高清| 男人操女人黄网站| 亚洲自偷自拍图片 自拍| 午夜免费观看网址| 中出人妻视频一区二区| 久久婷婷成人综合色麻豆| 久久精品国产亚洲av高清一级| 黄色a级毛片大全视频| 亚洲国产精品sss在线观看 | 色婷婷av一区二区三区视频| 黑人巨大精品欧美一区二区mp4| 精品久久久久久久毛片微露脸| 国产精品 欧美亚洲| 麻豆成人av在线观看| 成在线人永久免费视频| xxxhd国产人妻xxx| 欧美黑人精品巨大| 日本wwww免费看| 欧美精品亚洲一区二区| 黄色视频,在线免费观看| 级片在线观看| 亚洲 国产 在线| 欧美在线一区亚洲| 一区二区三区国产精品乱码| 18禁国产床啪视频网站| 亚洲欧美精品综合久久99| 国产欧美日韩一区二区三区在线| 日韩人妻精品一区2区三区| 咕卡用的链子| 日本免费a在线| 两个人看的免费小视频| 亚洲国产精品sss在线观看 | 亚洲欧美日韩高清在线视频| 午夜a级毛片| 99久久精品国产亚洲精品| 亚洲五月天丁香| av电影中文网址| 最好的美女福利视频网| 成人手机av| 一本大道久久a久久精品| 精品乱码久久久久久99久播| 精品无人区乱码1区二区| 天堂俺去俺来也www色官网| 国产亚洲精品久久久久5区| 亚洲中文日韩欧美视频| 欧美黄色片欧美黄色片| 校园春色视频在线观看| 欧美+亚洲+日韩+国产| 男人的好看免费观看在线视频 | 妹子高潮喷水视频| 亚洲av熟女| 国产亚洲精品一区二区www| 国产av一区二区精品久久| tocl精华| 欧美不卡视频在线免费观看 | 操美女的视频在线观看| 欧美不卡视频在线免费观看 | 亚洲五月天丁香| 在线观看免费高清a一片| 精品国产美女av久久久久小说| 老司机午夜福利在线观看视频| 热re99久久精品国产66热6| 亚洲狠狠婷婷综合久久图片| 国内久久婷婷六月综合欲色啪| 神马国产精品三级电影在线观看 | 熟女少妇亚洲综合色aaa.| www.自偷自拍.com| 亚洲一区二区三区欧美精品| 91九色精品人成在线观看| 99精品欧美一区二区三区四区| 老司机福利观看| 国产精品综合久久久久久久免费 | 亚洲av日韩精品久久久久久密| 欧美大码av| 欧美在线黄色| 操美女的视频在线观看| 亚洲成人久久性| 夜夜爽天天搞| 欧美日韩瑟瑟在线播放| 一边摸一边抽搐一进一小说| 麻豆久久精品国产亚洲av | 精品久久久久久,| 久久草成人影院| 一a级毛片在线观看| 久久伊人香网站| 亚洲精品一二三| 精品久久久久久久久久免费视频 | 最新美女视频免费是黄的| 男女床上黄色一级片免费看| 在线观看免费高清a一片| 极品教师在线免费播放| 激情在线观看视频在线高清| 麻豆av在线久日| 日本黄色视频三级网站网址| 久久久国产成人免费| www.自偷自拍.com| 成年女人毛片免费观看观看9| 午夜a级毛片| 国产精品一区二区在线不卡| 欧美日本中文国产一区发布| 搡老熟女国产l中国老女人| 国产伦人伦偷精品视频| 侵犯人妻中文字幕一二三四区| 18禁裸乳无遮挡免费网站照片 | 亚洲色图综合在线观看| 天天添夜夜摸| 91九色精品人成在线观看| 国产一区二区在线av高清观看| av天堂久久9| 久久久国产成人精品二区 | 男女床上黄色一级片免费看| 国产熟女午夜一区二区三区| 好看av亚洲va欧美ⅴa在| 男女午夜视频在线观看| 成人手机av| 亚洲专区国产一区二区| 欧美激情高清一区二区三区| 精品久久久久久久久久免费视频 | 久久狼人影院| 色精品久久人妻99蜜桃| 一区二区三区国产精品乱码| 午夜免费观看网址| 国产亚洲欧美精品永久| 久久欧美精品欧美久久欧美| 亚洲国产欧美一区二区综合| 久久精品亚洲精品国产色婷小说| www.999成人在线观看| 亚洲欧美精品综合久久99| 国产成人欧美| 免费女性裸体啪啪无遮挡网站| 最新美女视频免费是黄的| 女人高潮潮喷娇喘18禁视频| 免费看十八禁软件| 热99国产精品久久久久久7| av超薄肉色丝袜交足视频| 中文字幕精品免费在线观看视频| 午夜福利一区二区在线看| 99re在线观看精品视频| 国产欧美日韩综合在线一区二区| 999久久久国产精品视频| 黄色片一级片一级黄色片| 身体一侧抽搐| 男人的好看免费观看在线视频 | 日本免费一区二区三区高清不卡 | 免费在线观看黄色视频的| 国产精品一区二区精品视频观看| 日韩欧美免费精品| 日日爽夜夜爽网站| 国产免费av片在线观看野外av| 中文字幕色久视频| 亚洲视频免费观看视频| 啦啦啦在线免费观看视频4| 免费观看人在逋| 精品福利观看| 欧美色视频一区免费| 欧美日本亚洲视频在线播放| 色尼玛亚洲综合影院| 99在线人妻在线中文字幕| av电影中文网址| 久久天躁狠狠躁夜夜2o2o| 免费在线观看影片大全网站| 国产区一区二久久| 另类亚洲欧美激情| 日韩大尺度精品在线看网址 | 首页视频小说图片口味搜索| 久久狼人影院| 脱女人内裤的视频| 狠狠狠狠99中文字幕| 丰满饥渴人妻一区二区三| 很黄的视频免费| 午夜a级毛片| xxxhd国产人妻xxx| 日本a在线网址| 国产亚洲av高清不卡| 午夜老司机福利片| 久久精品国产亚洲av香蕉五月| 黄色a级毛片大全视频| 叶爱在线成人免费视频播放| 女同久久另类99精品国产91| 国产极品粉嫩免费观看在线| 欧美在线黄色| 国产精品电影一区二区三区| 精品免费久久久久久久清纯| 亚洲成人免费电影在线观看| av片东京热男人的天堂| 国产欧美日韩一区二区三| 精品高清国产在线一区| 人成视频在线观看免费观看| 午夜视频精品福利| 可以免费在线观看a视频的电影网站| 他把我摸到了高潮在线观看| 黄色毛片三级朝国网站| 69av精品久久久久久| 免费在线观看影片大全网站| 婷婷丁香在线五月| 久久久水蜜桃国产精品网| 老司机亚洲免费影院| 在线观看免费日韩欧美大片| 亚洲成人免费av在线播放| 成人18禁在线播放| 午夜福利在线免费观看网站| 又紧又爽又黄一区二区| 美女 人体艺术 gogo| 国产蜜桃级精品一区二区三区| 国产99久久九九免费精品| 亚洲欧美一区二区三区黑人| 日韩中文字幕欧美一区二区| 欧美黄色淫秽网站| 亚洲激情在线av| 精品高清国产在线一区| av网站免费在线观看视频| 12—13女人毛片做爰片一| 老司机午夜十八禁免费视频| 18禁国产床啪视频网站| 国产伦一二天堂av在线观看| 欧美精品一区二区免费开放| 无遮挡黄片免费观看| 级片在线观看| 丝袜美腿诱惑在线| 超碰97精品在线观看| 精品欧美一区二区三区在线| 亚洲精品美女久久久久99蜜臀| 成人永久免费在线观看视频| 成人手机av| 亚洲欧美日韩无卡精品| 日韩大尺度精品在线看网址 | 女警被强在线播放| 久久亚洲精品不卡| 看黄色毛片网站| 又大又爽又粗| 女人高潮潮喷娇喘18禁视频| 9色porny在线观看| а√天堂www在线а√下载| 久久久久久免费高清国产稀缺| 中出人妻视频一区二区| 国产午夜精品久久久久久| 777久久人妻少妇嫩草av网站| 午夜老司机福利片| 国产91精品成人一区二区三区| av电影中文网址| 制服诱惑二区| 精品一品国产午夜福利视频| 在线国产一区二区在线| 高清毛片免费观看视频网站 | 国产成人av教育| 亚洲激情在线av| 亚洲自偷自拍图片 自拍| 69精品国产乱码久久久| 精品人妻在线不人妻| 午夜91福利影院| 久久性视频一级片| 日韩 欧美 亚洲 中文字幕| 一区二区三区国产精品乱码| 国产成人影院久久av| 亚洲欧美日韩无卡精品| 国产激情欧美一区二区| 国产精品 国内视频| 女人高潮潮喷娇喘18禁视频| 亚洲欧美日韩高清在线视频| 啪啪无遮挡十八禁网站| 神马国产精品三级电影在线观看 | 日韩欧美免费精品| 每晚都被弄得嗷嗷叫到高潮| svipshipincom国产片| 国产一区二区三区在线臀色熟女 | 最新在线观看一区二区三区| 亚洲精品美女久久久久99蜜臀| 欧美日韩av久久| 99久久精品国产亚洲精品| 亚洲久久久国产精品| 97人妻天天添夜夜摸| 国产区一区二久久| 在线天堂中文资源库| 国产精品一区二区精品视频观看| 国产亚洲欧美98| 日本精品一区二区三区蜜桃| 欧美日韩av久久| 亚洲免费av在线视频| 啦啦啦 在线观看视频| 亚洲五月色婷婷综合| 最新在线观看一区二区三区| 黄色视频不卡| 午夜两性在线视频| av网站在线播放免费| 亚洲狠狠婷婷综合久久图片| 亚洲精品中文字幕在线视频| 国产精品 欧美亚洲| 免费观看人在逋| 18禁观看日本| 国产精品一区二区免费欧美| 免费搜索国产男女视频|