• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于動態(tài)重組和協(xié)同交流策略的蟻群優(yōu)化算法

    2021-08-07 07:42:44劉一凡游曉明
    計算機(jī)與生活 2021年8期
    關(guān)鍵詞:蟻群二叉樹螞蟻

    劉一凡,游曉明+,劉 升

    1.上海工程技術(shù)大學(xué) 電子電氣工程學(xué)院,上海 201620

    2.上海工程技術(shù)大學(xué) 管理學(xué)院,上海 201620

    旅行商問題[1](traveling salesman problem,TSP)是一類經(jīng)典的組合優(yōu)化問題,可以描述為:旅行商從一個城市出發(fā),不重復(fù)地遍歷完所有城市并最終回到起始城市,需要在所有滿足以上條件的路徑中找出最短路徑的問題。國內(nèi)外學(xué)者采用多種算法來研究此問題,目前主要有遺傳算法[2]、模擬退火法[3]、粒子群算法[4]和蟻群算法[5]等。其中,蟻群算法具有較強(qiáng)的魯棒性、良好的并行性和易與其他算法結(jié)合等特點,在求解TSP 問題中取得很好的效果,并被廣泛應(yīng)用于車輛調(diào)度、圖像處理和多目標(biāo)組合優(yōu)化等諸多優(yōu)化領(lǐng)域。

    蟻群算法是一種新興智能仿生優(yōu)化算法,最初于20 世紀(jì)90 年代由意大利學(xué)者Dorigo 等人提出。1996 年,Dorigo 等人在螞蟻系統(tǒng)(ant system,AS)[6]的基礎(chǔ)上,采用信息素全局更新和局部更新兩種信息素更新方式,提出蟻群系統(tǒng)(ant colony system,ACS)[7]算法,加快了算法收斂速度。2000年,Stutzle等人提出了最大最小螞蟻系統(tǒng)(max-min ant system,MMAS)[8],為每條路徑上信息素濃度設(shè)定了上、下限閾值,避免信息素濃度無限累加而停滯,提高了算法的多樣性。以上基本蟻群算法具有高效的搜索能力,但仍存在著易陷入局部最優(yōu)、收斂速度慢等問題。

    蟻群優(yōu)化算法(ant colony optimization,ACO)是對基本蟻群算法進(jìn)行改進(jìn)的一系列優(yōu)化算法,為了提高基本蟻群算法的性能,國內(nèi)外學(xué)者主要在路徑選擇、信息素更新、添加局部優(yōu)化算子和與其他算法結(jié)合等方面進(jìn)行改進(jìn)。文獻(xiàn)[9]引入精英策略思想,提出一種基于排序加權(quán)的信息素更新策略,通過強(qiáng)化較優(yōu)路徑信息對螞蟻的反饋作用,提高了算法收斂速度和求解質(zhì)量。文獻(xiàn)[10]從蟻群算法的理論研究、算法融合、多蟻群算法研究等方面對蟻群算法在移動機(jī)器人路徑規(guī)劃中的未來研究內(nèi)容和研究熱點進(jìn)行展望。文獻(xiàn)[11]依據(jù)聚類算法對環(huán)境復(fù)雜程度的準(zhǔn)確判別自動改變尋優(yōu)半徑,達(dá)到充分利用機(jī)器人有限的計算能力,提高收斂速度的目的,但算法多樣性仍有待提升。針對這一不足,文獻(xiàn)[12]利用改進(jìn)的頭尾搜索機(jī)制,并引入獎懲因子、信息素最大最小閾值和遺傳算法變異因子,提高了算法全局搜索能力和跳出局部最優(yōu)的能力。以上單種群蟻群優(yōu)化算法在解決中小規(guī)模TSP 問題方面得到了很大的改進(jìn),但在解決大規(guī)模TSP 問題時,其求解精度仍需要進(jìn)一步提高。

    為進(jìn)一步提高算法的搜索能力和求解性能,許多算法采用了多種群策略。在文獻(xiàn)[13]中,姜慧楠等人結(jié)合人工魚群算法(artificial fish swarms algorithm,AFSA)前期收斂速度快和混合蛙跳算法(shuffled frog leaping algorithm,SFLA)局部搜索能力強(qiáng)的優(yōu)勢,提出一種人工魚群-蛙跳混合優(yōu)化算法(AFSA-SFLA),提高了種群的質(zhì)量和算法的高效性。文獻(xiàn)[14]中魏士偉提出了一種基于協(xié)同進(jìn)化的遺傳算法(co-evolution genetic algorithm,CEGA)用于解決遺傳算法(genetic algorithm,GA)的缺陷,既保證了種群向最優(yōu)解的方向移動,又保持了種群的多樣性。此外,多種群策略在蟻群優(yōu)化算法中也有許多體現(xiàn),文獻(xiàn)[15-17]利用蟻群算法與其他優(yōu)化算法的良好結(jié)合特性,提出了一系列的融合蟻群算法,有效提升了蟻群算法的收斂速度和算法多樣性,但對于大規(guī)模TSP 問題的求解精度和跳出局部最優(yōu)的能力有待進(jìn)一步改善。

    為了在提升收斂速度的同時提高求解精度和穩(wěn)定性,需要進(jìn)一步平衡蟻群多樣性和算法收斂性,為此,本文提出一種基于動態(tài)重組和協(xié)同交流策略的蟻群優(yōu)化算法(ant colony optimization algorithm based on dynamic recombination and cooperative communication strategy,RCACO)。其主要改進(jìn)思想是:(1)多種群策略。將蟻群劃分為貪婪蟻群和探索蟻群,貪婪蟻群沿用ACS 的路徑構(gòu)建規(guī)則和信息素更新策略,主要負(fù)責(zé)尋找當(dāng)前較優(yōu)路徑,提高算法的收斂速度,探索蟻群采用改進(jìn)的路徑構(gòu)建規(guī)則和信息素更新策略,主要負(fù)責(zé)探索有潛力的非較優(yōu)路徑,增加算法的多樣性。(2)動態(tài)重組策略。提出一種基于線索二叉樹的新型重組算子,并采用不同的重組策略對解集進(jìn)行動態(tài)重組,避免隨機(jī)盲目重組的同時增加了算法的導(dǎo)向性,以提升算法的多樣性和平均求解質(zhì)量。(3)協(xié)同交流策略。提出一種基于相似度和潛力值的協(xié)同交流策略,讓兩類蟻群并行搜索那些有潛力成為最優(yōu)解的路徑,將所搜索到的優(yōu)良路徑作為共享信息進(jìn)行種群間的交流,從而有效提高算法的收斂速度。(4)停止規(guī)避策略。為避免算法因次優(yōu)路徑上信息素濃度過高而陷入停滯,加入了停滯規(guī)避策略,保證了算法后續(xù)循環(huán)的有效性,從而增強(qiáng)算法的搜索性能,以幫助蟻群跳出局部最優(yōu),獲得標(biāo)準(zhǔn)最優(yōu)解。

    1 相關(guān)工作

    1.1 ACS 蟻群算法原理

    1.1.1 路徑構(gòu)建

    ACS 算法中每只螞蟻從城市i到城市j的狀態(tài)轉(zhuǎn)移規(guī)則如下:

    其中,q是一個在區(qū)間[0,1]上的隨機(jī)數(shù),q0(0 ≤q0≤1)是一個可調(diào)參數(shù),τij表示i和j城市路徑上的信息素總量,ηij表示i和j城市之間距離的倒數(shù),allowed表示當(dāng)前可選城市的集合。s是采用輪盤賭的方式選出的下一個城市,使得算法可以有偏向性地探索各條邊,城市之間信息素濃度高和距離近的城市被選擇的概率更大,但其他次優(yōu)路徑也有一定概率被選到,具體公式如下:

    本文中的兩類蟻群沿用了ACS 的狀態(tài)轉(zhuǎn)移規(guī)則,但兩類算法分別采用不同的q0。貪婪蟻群采用較大的q0,對當(dāng)前最優(yōu)區(qū)域進(jìn)行深度探索,加快收斂速度;探索蟻群采用較小的q0,對其他次優(yōu)區(qū)域進(jìn)行廣度搜索,增加算法多樣性。

    1.1.2 信息素的更新

    ACS 算法中的信息素更新策略分為局部信息素更新和全局信息素更新兩部分。

    局部信息素更新:當(dāng)每只螞蟻從城市i經(jīng)過下一個城市j之后,算法會對這條路徑進(jìn)行局部信息素更新,公式為:

    其中,τ0為每條邊上的起始信息素濃度,ξ是局部信息素的蒸發(fā)率。局部信息素更新可以防止算法過早陷入局部最優(yōu),增加算法的多樣性。

    全局信息素更新:當(dāng)所有螞蟻都完成路徑構(gòu)建后,算法會對當(dāng)前全局最優(yōu)路徑進(jìn)行全局信息素更新,公式為:

    其中,Δτij是信息素增量;Lgb是當(dāng)前全局最優(yōu)路徑的長度;ρ是全局信息素的蒸發(fā)率。全局信息素更新會對全局最優(yōu)螞蟻走過的路徑進(jìn)行信息素獎勵,可以起到正反饋的作用,增加算法的導(dǎo)向性和收斂速度。

    1.2 線索二叉樹

    在二叉樹的節(jié)點上加上線索的二叉樹稱為線索二叉樹,線索二叉樹中的線索能記錄每個節(jié)點前驅(qū)和后繼信息。為了區(qū)別線索指針和孩子指針,在每個節(jié)點中設(shè)置兩個標(biāo)志ltag 和rtag。

    傳統(tǒng)線索二叉樹的節(jié)點結(jié)構(gòu)如表1 所示。

    Table 1 Node structure of traditional clew binary tree表1 傳統(tǒng)線索二叉樹的節(jié)點結(jié)構(gòu)

    表1 中:ltag=0 時,lchild 指向左兒子;ltag=1 時,lchild 指向前驅(qū);rtag=0 時,rchild 指向右兒子;rtag=1時,rchild 指向后繼。

    2 改進(jìn)策略

    2.1 多種群信息素更新策略

    傳統(tǒng)的信息素更新策略會對全局最優(yōu)螞蟻走過的路徑進(jìn)行信息素獎勵,可以起到正反饋的作用,提高算法的導(dǎo)向性和收斂速度,本文將其作為信息素更新1 應(yīng)用于貪婪蟻群。但是,傳統(tǒng)蟻群算法的正反饋策略會在較短的路徑上留下更多的信息素,吸引更多的螞蟻選擇此路徑,在迭代一定次數(shù)后,這些較短的路徑上容易堆積大量信息素,即使最終這些路徑并不是最優(yōu)路徑,也會使后續(xù)的蟻群都去選擇這些次優(yōu)路徑,導(dǎo)致蟻群不能對解空間進(jìn)一步進(jìn)行廣度搜索,進(jìn)而出現(xiàn)停滯現(xiàn)象,陷入局部最優(yōu)解。

    為此,本文引入貢獻(xiàn)度因子,借鑒精英策略和MMAS 的思想,提出一種改進(jìn)的信息素更新策略,并將其作為信息素更新策略2 應(yīng)用于探索蟻群。貢獻(xiàn)度因子是指每條路徑歷史累計更新的次數(shù),在所有螞蟻完成路徑構(gòu)建后,對所有路徑進(jìn)行升序排序,取出本次迭代的前10%的螞蟻,并按照路徑長短進(jìn)行不同程度的信息素更新,對于當(dāng)前全局最優(yōu)的路徑會給予額外獎勵。在依次對這些精英螞蟻所經(jīng)過的路徑段進(jìn)行更新后,該路徑段貢獻(xiàn)度+1,當(dāng)貢獻(xiàn)度到達(dá)一定次數(shù)后,這段路徑就不予更新,以此達(dá)到控制路徑上信息素閾值的效果。具體公式如下:

    2.2 動態(tài)重組策略

    2.2.1 改進(jìn)線索二叉樹

    螞蟻完成路徑構(gòu)建后得出一組城市序列,每2 個城市及連接它們的1 條路徑構(gòu)成一個最短子路徑。輸入兩組城市序列A、B,將A中的每個城市節(jié)點及其最短子路徑拿出來和B作對比,本文算法對傳統(tǒng)線索二叉樹結(jié)構(gòu)進(jìn)行改進(jìn)以存儲每個城市節(jié)點及其最短子路徑的相關(guān)信息,如表2 所示。

    線索二叉樹構(gòu)建完成后,對Scount 求和再除以城市個數(shù),可得出A和B兩組城市序列的相似度SAB,其取值范圍為[0,1],相似度在后文的協(xié)同交流階段中控制兩類蟻群交流的頻率起作用。

    例如有一個10 城市的TSP,其兩個解向量的城市序列分別為A=[1 2 3 4 5 6 7 8 9 10]和B=[5 7 8 6 9 1 10 2 3 4]。以城市4 為例,其在A和B序列中的前驅(qū)節(jié)點都為3,后繼節(jié)點都為5,說明3→4 和4→5 均是重復(fù)路徑,以此類推,兩個解向量具有4 個相同最短子路徑:2→3,3→4,4→5,7→8,即SAB=0.4。

    2.2.2 新型動態(tài)重組算子

    為加強(qiáng)算法多樣性和跳出局部最優(yōu)的能力,在以往的遺傳算法和與之結(jié)合的蟻群算法中大多會采用重組策略,可大致描述為:若兩條路徑節(jié)點序列中具有公共節(jié)點,則隨機(jī)選其一公共節(jié)點進(jìn)行交叉操作,產(chǎn)生兩條新路徑;若路徑節(jié)點序列沒有公共節(jié)點,則在該兩條路徑中分別隨機(jī)剔除一條路段,通過交叉拼接得到兩條新路徑。這樣的重組策略隨機(jī)性強(qiáng),雖然多樣性會增加,但效率較低,往往得不到優(yōu)于目前最優(yōu)解的解。

    為避免盲目隨機(jī)重組,本文采用結(jié)合線索二叉樹的新型重組算子對算法進(jìn)行動態(tài)重組。首先由城市序列A和B構(gòu)建出線索二叉樹矩陣,為保留一定的隨機(jī)性,增加多樣性,在全部城市節(jié)點中隨機(jī)選出一個節(jié)點作為新路徑的第一個節(jié)點,接下來循環(huán)進(jìn)行后續(xù)節(jié)點的選擇,最后依次將選出的節(jié)點添加到新路徑中,構(gòu)成新的城市序列。具體操作如下:

    Table 2 Node structure of improved cue binary tree表2 改進(jìn)的線索二叉樹的節(jié)點結(jié)構(gòu)

    動態(tài)重組算子會保留公共子路徑,將非公共子路徑按策略重組,提升算法的收斂速度,具體操作為:將選出的第一個城市節(jié)點作為當(dāng)前節(jié)點node,若當(dāng)前節(jié)點有后繼節(jié)點Anode(Bnode),說明原路徑A和B都包含有這段最短子路徑,則待選節(jié)點選其后繼節(jié)點;若無后繼節(jié)點,則優(yōu)先選擇距離當(dāng)前節(jié)點之間路徑距離近的、信息素濃度高的、貢獻(xiàn)度值大的城市節(jié)點作為后續(xù)節(jié)點,還有概率直接選擇原序列A或B中的下一節(jié)點,將其作為后續(xù)節(jié)點添加到新路徑中。

    該重組策略根據(jù)線索二叉樹來保留公共路徑,根據(jù)城市距離矩陣、信息素表和貢獻(xiàn)度表共同影響進(jìn)行導(dǎo)向性重組,實驗發(fā)現(xiàn)重組后優(yōu)于原路徑的概率大大增加,而重組后沒有改進(jìn)的路徑會被舍棄,這就有效提升了蟻群整體的求解質(zhì)量。

    2.2.3 動態(tài)重組策略

    (1)種群內(nèi)部動態(tài)重組

    在每次迭代過程中,算法會對兩類蟻群內(nèi)部所產(chǎn)生的解單獨進(jìn)行動態(tài)重組。具體操作為:當(dāng)種群內(nèi)的m只蟻群全部構(gòu)建完路徑后,對全部路徑進(jìn)行升序排序,用Li表示本次迭代中排名為i的解(0

    (2)種群之間動態(tài)重組

    在改進(jìn)蟻群算法中,貪婪蟻群和探索蟻群完成迭代后共得到2m個解,每個解包含路徑長度和城市序列,將每個解按照路徑長度進(jìn)行升序排列,將整個蟻群分為N組,每組包含M只螞蟻,即滿足2m=N×M。具體分組情況如表3 所示。

    這樣劃分后的每組解的質(zhì)量相似,能保證種群中更多的差解得到進(jìn)化,提升解集的平均質(zhì)量。對于每組螞蟻,用Lb表示組中最短路徑的解,Lw表示組中最長路徑的解,Lg表示所有螞蟻當(dāng)前全局最短路徑的解,則有Lg≤Lb≤Lw。分別取Lb為A,Lw為B,利用上文中結(jié)合線索二叉樹的新型重組算子生成新解Lnew,然后對各組螞蟻中的Lb和Lw循環(huán)進(jìn)行更新,公式如下:

    Table 3 Grouping situation table表3 分組情況表

    動態(tài)重組算子很大程度上改善了整體蟻群解集的平均質(zhì)量,重組算子增加了算法的多樣性和跳出局部最優(yōu)的能力,有效提高了算法的收斂速度和求解精度。

    2.3 協(xié)同交流策略

    2.3.1 引入相似度的交流頻率策略

    當(dāng)兩類蟻群交流間隔過短時,會造成算法多樣性下降,產(chǎn)生的結(jié)果會類似于一個種群,起不到分兩個種群的作用;而當(dāng)信息交流間隔過長時,會削弱兩類蟻群之間互相學(xué)習(xí)和促進(jìn)的作用,不利于提升收斂速度。

    為此,本文采用引入相似度[18]的交流頻率策略,對交流間隔進(jìn)行自適應(yīng)調(diào)整。在兩類蟻群完成本次迭代后,進(jìn)入?yún)f(xié)同交流階段,首先分別用貪婪蟻群和探索蟻群得到的全局最優(yōu)路徑作為A和B,并構(gòu)建線索二叉樹,進(jìn)而得到兩條路徑的相似度。當(dāng)相似度過高時,兩類蟻群趨于一致,多樣性較差,不適合交流;當(dāng)相似度過低時,兩類蟻群的多樣性較高,應(yīng)進(jìn)行信息交流。每隔K次迭代,根據(jù)式(11)判斷是否交流,公式如下:

    式中,L為判斷是否可交流的邏輯值,SAB是兩類種群最優(yōu)解的相似度,S是相似度閾值。

    2.3.2 引入潛力值的激勵策略

    傳統(tǒng)蟻群算法通常只對最優(yōu)的螞蟻進(jìn)行信息素更新,忽略了其他次優(yōu)螞蟻攜帶最優(yōu)路徑片段的潛力,從而容易陷入局部最優(yōu)解。

    為此,本文引入潛力值的概念,潛力值受貢獻(xiàn)度和最小生成樹的共同影響。首先,貪婪蟻群和探索蟻群各有一份貢獻(xiàn)度表,將兩份貢獻(xiàn)度表整合成一張,某段路徑的貢獻(xiàn)度越高,代表這條路徑被兩類種群都選為最優(yōu)路徑片段的概率越高,即可認(rèn)為這條路徑段成為最優(yōu)路徑的潛力值就比較大,即潛力值和貢獻(xiàn)度呈正比關(guān)系。此外,在TSP 問題中,標(biāo)準(zhǔn)最優(yōu)路徑與最小生成樹中70%~80%的路徑是吻合的,而最小生成樹不是唯一的,因此多個最小生成樹所重復(fù)包含的路徑的潛力值也是比較大的。將潛力值因子結(jié)合到求解TSP 問題中去,對合并貢獻(xiàn)度表中貢獻(xiàn)度值較大的前n條路徑以及生成最小生成樹重合路徑最多的前n條路徑進(jìn)行額外的信息素獎勵,將會綜合兩類蟻群的優(yōu)點,提升算法的收斂性能,其公式如下:

    其中,Δτij是由式(5)得出的信息素增量,ρ是全局信息素的蒸發(fā)率。對潛力值高的路徑進(jìn)行額外更新可以使兩類蟻群的信息得到交融,起到一定的正導(dǎo)向性,從而加快算法的收斂速度并提高收斂精度。

    2.4 停滯規(guī)避策略

    傳統(tǒng)蟻群算法迭代一定次數(shù)后,可能在次優(yōu)路徑上積累大量信息素,進(jìn)而出現(xiàn)停滯現(xiàn)象,而算法停滯后的循環(huán)都是在做無用功,為加強(qiáng)算法跳出局部最優(yōu)的能力,應(yīng)對停滯現(xiàn)象做出檢測及相應(yīng)處理措施。

    本文的算法停滯檢測分為兩種:第一種是當(dāng)本次迭代所有螞蟻所構(gòu)建的路徑相似度過高,甚至趨于一條路徑;第二種是在一定迭代次數(shù)內(nèi),仍未出現(xiàn)更優(yōu)的解。具體檢測判斷公式如下:

    其中,L1為判斷是否停滯的邏輯值;Sall是所有螞蟻的相似度均值;T和q1是可調(diào)參數(shù)。

    本文對算法停滯的具體措施如下:當(dāng)檢測到算法中兩類蟻群都停滯時,首先將兩類蟻群中所有路徑上的信息素置為初始值,然后篩選出兩類蟻群都停滯時所產(chǎn)生最優(yōu)路徑的公共路徑,最后加強(qiáng)公共路徑上的信息素。公式如下:

    其中,τ0為每條邊上的起始信息素濃度,Δτij是兩類蟻群分別由式(5)得出的信息素增量。加強(qiáng)公共路徑的信息素會增強(qiáng)算法停滯后再次運(yùn)行的導(dǎo)向性,并使得算法減少在公共路徑上的搜索,將算法的側(cè)重點放在非公共路徑的城市序列的優(yōu)化中。該策略有利于算法發(fā)現(xiàn)更優(yōu)的路徑,幫助算法在后續(xù)的循環(huán)中能有效跳出局部最優(yōu)。

    2.5 算法步驟和算法流程圖

    算法整體流程圖如圖1 所示。

    Fig.1 Algorithm overall flow chart圖1 算法整體流程圖

    算法步驟:

    步驟1參數(shù)初始化。

    步驟2將蟻群劃分為貪婪蟻群和探索蟻群,并分別單獨進(jìn)行迭代,兩類蟻群均采用式(1)、式(2)的城市轉(zhuǎn)移規(guī)則以及式(3)的局部信息素更新策略。

    步驟3當(dāng)每類蟻群完成路徑構(gòu)建后,運(yùn)用新型重組算子,根據(jù)式(9)對蟻群所產(chǎn)生的解集進(jìn)行內(nèi)部動態(tài)重組。

    步驟4進(jìn)入全局信息素更新階段,貪婪蟻群采用式(4)、式(5)即ACS 中的全局信息素更新策略1,而探索蟻群采用式(6)~式(8)即改進(jìn)的全局信息素更新策略2。

    步驟5將兩類蟻群所產(chǎn)生解集混合并分組,根據(jù)式(10)對兩類蟻群之間進(jìn)行動態(tài)重組,然后混洗蟻群。

    步驟6進(jìn)入?yún)f(xié)同交流階段,計算兩類蟻群的相似度,然后根據(jù)式(11)判斷是否進(jìn)行交流,若是,轉(zhuǎn)步驟7,否則,轉(zhuǎn)步驟8。

    步驟7由各路徑的貢獻(xiàn)度和最小生成樹計算潛力值,并根據(jù)式(12)進(jìn)行各種群間的交流。

    步驟8根據(jù)式(13)對算法是否停滯做出檢測,若是,轉(zhuǎn)步驟9,否則,轉(zhuǎn)步驟10。

    步驟9根據(jù)式(14)對算法停滯做出相應(yīng)處理。

    步驟10當(dāng)NC≤NCmax時,NC=NC+1,跳轉(zhuǎn)到步驟2;否則,轉(zhuǎn)到步驟11。

    步驟11輸出最優(yōu)解。

    3 實驗仿真

    為了驗證RCACO算法的有效性,使用MATLAB-2019a 對TSPLIB 標(biāo)準(zhǔn)庫中的15 個不同規(guī)模的城市進(jìn)行實驗仿真,其中包括10 個中小規(guī)模城市實例和5個大規(guī)模城市實例。以上述TSP 實例為對象,分別對ACS、ACS+3opt 和不同優(yōu)化方案下的RCACO 進(jìn)行15 次實驗,每輪迭代2 000 次,同時從收斂速度(迭代次數(shù))、誤差率(最優(yōu)解)、穩(wěn)定性(平均解)等幾個方向進(jìn)行實驗分析。其中,誤差率用來衡量每種ACO與測試集最優(yōu)解之間的差距,計算公式如下:

    其中,LACO為三種ACO 算法所找到的最優(yōu)解,LBest為測試集的標(biāo)準(zhǔn)最優(yōu)解。

    3.1 參數(shù)設(shè)置

    為保證實驗合理性,ACS、ACS+3opt 和RCACO算法在各TSP 實例中的實驗參數(shù)設(shè)置均如表4 所示。

    Table 4 Setting of parameters表4 參數(shù)設(shè)置

    表4 中,m為螞蟻數(shù)量,螞蟻數(shù)量越多,得到的最優(yōu)解就越精確,但會產(chǎn)生不少重復(fù)解,增加時間復(fù)雜度;α為信息啟發(fā)因子,α值越小,螞蟻選擇之前走過的路徑可能性就越小,可以加強(qiáng)搜索路徑的隨機(jī)性,但容易陷入局部最優(yōu);β為期望啟發(fā)因子,β值越大,蟻群就越容易選擇局部較短路徑,可以加快收斂速度,但是多樣性較差;q0是式(1)中的參數(shù),q0越大,貪婪性卻強(qiáng),收斂速度越快,但多樣性越低;ρ是全局信息素蒸發(fā)率,ξ是局部信息素蒸發(fā)率,蒸發(fā)率過小時,會影響到算法的收斂速率,蒸發(fā)率過大時,會影響到最優(yōu)值的搜索;S是式(11)中的相似度閾值,相似度均值超過S后不再進(jìn)行交流;K是交流間隔,K值過大會降低交流策略的效果,K值過小會讓兩種蟻群趨于一致,失去設(shè)立多蟻群的意義。

    經(jīng)過多次實驗,統(tǒng)計對比其結(jié)果發(fā)現(xiàn),參數(shù)設(shè)置如表4 所示效果更好。

    3.2 算法性能分析

    為驗證RCACO 算法中不同改進(jìn)策略的作用,本文將不同的改進(jìn)策略重新組合為不同的優(yōu)化方案,并進(jìn)行對比分析,優(yōu)化方案編號如表5 所示。

    Table 5 Optimization scheme number表5 優(yōu)化方案編號

    從進(jìn)行仿真實驗的15 個不同規(guī)模的TSP 實例中,分別選取小規(guī)模實例Eil51 和rat99、中規(guī)模實例ch130和KroA200、大規(guī)模實例tsp225 和a280,并采用表5 中的四種優(yōu)化方案對每個TSP 實例都進(jìn)行15 次實驗,每次實驗均迭代2 000 次。選取四種優(yōu)化方案在各組TSP 實例中的最小值作為最優(yōu)解,并根據(jù)實驗數(shù)據(jù)計算出誤差率和平均誤差率,實驗結(jié)果如表6 與圖2 所示。

    由以上實驗結(jié)果可以看出,在小規(guī)模實例中,四

    種優(yōu)化方案均能得到標(biāo)準(zhǔn)最優(yōu)解,而從圖2 中的rat99的迭代情況來看,改進(jìn)算法的收斂速度明顯較快。在中大規(guī)模實例中,優(yōu)化方案A 不論是收斂速度還是求解精度上都不是很理想,其平均誤差率也高于改進(jìn)算法。

    Table 6 Performance comparison of optimization schemes表6 優(yōu)化方案性能對比

    Fig.2 Comparison of partial test set experiments圖2 部分測試集實驗對比

    由優(yōu)化方案B 的實驗數(shù)據(jù)和迭代情況可以看出,在對信息素更新規(guī)則進(jìn)行優(yōu)化并加入?yún)f(xié)同交流策略后,在城市數(shù)小于200 時均能得到標(biāo)準(zhǔn)最優(yōu)解,在城市數(shù)大于200 時也能明顯降低迭代次數(shù)和誤差率。說明協(xié)同交流策略能在提高算法收斂速度的同時,增加算法的多樣性,改善求解精度。

    由優(yōu)化方案C 的實驗數(shù)據(jù)和迭代情況可以看出,在方案B 的基礎(chǔ)上加入動態(tài)重組策略后,收斂速度和求解精度得到了進(jìn)一步提高,平均誤差率也得到了明顯下降。說明動態(tài)重組策略能夠提高算法多樣性和改善解的質(zhì)量,但仍未能找到標(biāo)準(zhǔn)最優(yōu)解。

    由優(yōu)化方案D 的實驗數(shù)據(jù)和迭代情況可以看出,在方案C 的基礎(chǔ)上加入停滯規(guī)避策略后,改進(jìn)算法能在算法停滯后跳出局部最優(yōu),在選取的6 組不同規(guī)模的TSP 實例中均能在較少的迭代次數(shù)內(nèi)找到標(biāo)準(zhǔn)最優(yōu)解。說明停滯規(guī)避策略能夠幫助算法跳出局部最優(yōu),提高全局最優(yōu)解的搜索能力。

    3.3 與傳統(tǒng)蟻群算法對比分析

    為了分析RCACO 在中小規(guī)模問題中的性能,將ACS、ACS+3opt 及RCACO 分別應(yīng)用于不同城市規(guī)模的TSP 實例中,結(jié)果如表7 與圖3 所示。

    Table 7 Performance comparison of test sets for small and medium-sized cities表7 中小規(guī)模城市測試集的性能對比

    Fig.3 Experimental comparison of small and medium-sized test sets圖3 部分中小規(guī)模測試集實驗對比

    由表7 中實驗數(shù)據(jù)可以看出,對于Oliver30、Eil51、Eil76、rat99、KroA100 等城市數(shù)量在100 及100以下的小規(guī)模TSP 問題中,三種算法都能得到標(biāo)準(zhǔn)最優(yōu)解,但ACS 和ACS+3opt 收斂速度較慢,而RCACO在迭代次數(shù)小于100 的情況下就得到了標(biāo)準(zhǔn)最優(yōu)解,有效提高了算法的收斂速度。對于ch130、ch150、KroB150、KroA200、KroB200 等城市數(shù)量在100 以上及200 以下 的中規(guī) 模TSP 問題,ACS 和ACS+3opt 均陷入局部最優(yōu),未能得到標(biāo)準(zhǔn)最優(yōu)解,且誤差率偏高。而RCACO 除KroB200 外均在1 000 代之內(nèi)得到了標(biāo)準(zhǔn)最優(yōu)解,KroB200 雖未得到最優(yōu)解,但也有效地將誤差率控制在0.1%以內(nèi),表明改進(jìn)的算法能夠在提高算法收斂速度的同時,提高解的精度及降低誤差率。

    圖3 為Eil76、ch130、KroB150、KroA200 四組實驗使用RCACO 算法得到解的路徑和三種算法在四組實驗中的性能對比。由圖3 可以看出,RCACO 算法顯著改進(jìn)解的質(zhì)量,并且相較經(jīng)典算法,改進(jìn)算法有更好的收斂速度表現(xiàn)。例如在ch130 實驗中,改進(jìn)算法曲線有最快的下降速度和最小的數(shù)據(jù)值,并且具有跳出局部最優(yōu)的能力。

    為了進(jìn)一步分析改進(jìn)算法在大規(guī)模問題中的性能表現(xiàn),分別將三種算法運(yùn)用到tsp225、gil262、a280、rand300、lin318 實驗中,實驗結(jié)果由表8 與圖4 所示。

    由表8 可以看出,在5 組大規(guī)模問題中,ACS 和ACS+3opt都未能取得標(biāo)準(zhǔn)最優(yōu)解,且迭代次數(shù)較多,收斂速度都需要進(jìn)一步優(yōu)化,而RCACO 在tsp225 和a280 得到了標(biāo)準(zhǔn)最優(yōu)解,在另外3 組不同規(guī)模城市的實驗中,都能將最優(yōu)解的誤差率控制在1%以下,且迭代次數(shù)都比較少,表明改進(jìn)算法能很好地改善解的質(zhì)量,提高求解速度。

    由圖4 可以看出,改進(jìn)算法的收斂速度較快,且具有較強(qiáng)的跳出局部最優(yōu)的能力。例如在tsp225 的實驗中,改進(jìn)算法的曲線圖下降速度明顯優(yōu)于傳統(tǒng)蟻群算法,而且在算法多次迭代沒有變化時,改進(jìn)的算法可以對停滯現(xiàn)象做出處理,跳出局部最優(yōu),最終得到標(biāo)準(zhǔn)最優(yōu)解。

    圖5 是參加實驗的15 個TSP 實例的穩(wěn)定性對比圖,其中,平均誤差率是指對每個TSP 實例進(jìn)行15 次實驗的誤差率均值,也即平均解的誤差率。其值越小,說明算法隨機(jī)進(jìn)行某次實驗得到高質(zhì)量解的概率越大,也即穩(wěn)定性越強(qiáng)。在不同規(guī)模的TSP 實例中,兩種傳統(tǒng)蟻群算法的平均誤差率各有高低,而RCACO 算法的平均誤差率一直優(yōu)于傳統(tǒng)蟻群算法,且穩(wěn)定在2%以內(nèi),這表明RCACO 算法能有效改善平均解的質(zhì)量,增強(qiáng)算法的穩(wěn)定性。

    綜合以上對實驗結(jié)果的對比分析,可以明確看出:相比于傳統(tǒng)蟻群算法而言,RCACO 算法無論是在中小規(guī)模還是大規(guī)模的TSP 實例中,其收斂速度都更快、收斂精度都更高、穩(wěn)定性都更強(qiáng),表明了改進(jìn)算法能夠有效平衡解的質(zhì)量和收斂速度之間的矛盾,并進(jìn)一步提升了算法的穩(wěn)定性和跳出局部最優(yōu)的能力。

    Table 8 Performance comparison of test sets for large-scale cities表8 大規(guī)模城市測試集的性能對比

    Fig.4 Experimental comparison of large-scale test sets圖4 部分大規(guī)模測試集實驗對比

    Table 9 Comparison of RCACO and other improved algorithms表9 RCACO 與其他改進(jìn)算法對比

    Fig.5 Comparison of algorithm stability圖5 算法穩(wěn)定性對比

    3.4 與當(dāng)今最新改進(jìn)算法對比分析

    為進(jìn)一步檢驗算法的性能,本文將RCACO 算法與最新的改進(jìn)蟻群算法及其他算法進(jìn)行比較,結(jié)果如表9 所示。表中數(shù)據(jù)為各算法所得到的最優(yōu)解及其與標(biāo)準(zhǔn)最優(yōu)解之間的誤差率。

    根據(jù)表9 的對比結(jié)果可以看出:在小規(guī)模TSP 問題中,RCACO 算法求解的精度不遜色于其他算法;在中大規(guī)模的TSP 問題中,其他算法未能求出標(biāo)準(zhǔn)最優(yōu)解的情況下,RCACO 算法依舊可以找到標(biāo)準(zhǔn)最優(yōu)解。由此可見,RCACO 算法求解旅行商問題的性能更為高效。

    4 結(jié)束語

    針對傳統(tǒng)蟻群算法收斂速度慢、易陷入局部最優(yōu)等問題,本文提出了一種基于動態(tài)重組和協(xié)同交流策略的蟻群優(yōu)化算法(RCACO)。算法將蟻群劃分為貪婪蟻群和探索蟻群,兩類蟻群分別執(zhí)行不同的狀態(tài)轉(zhuǎn)移規(guī)則和信息素更新規(guī)則,共同向最優(yōu)解靠近,有效平衡了算法的收斂速度和多樣性。其次,本文提出了一種基于線索二叉樹的新型重組算子,并采用不同的重組策略對解集進(jìn)行動態(tài)重組,避免了傳統(tǒng)的盲目隨機(jī)重組,有效提升了算法的多樣性和平均求解質(zhì)量。此外,本文提出了一種基于相似度和潛力值的協(xié)同交流策略,讓兩類蟻群將潛力較大的優(yōu)良路徑片段作為共享信息進(jìn)行種群間的交流,有效提高了算法的收斂速度。最后,算法還加入了停滯規(guī)避策略,保證了算法后續(xù)循環(huán)的有效性,大大增強(qiáng)了算法跳出局部最優(yōu)的能力。

    在標(biāo)準(zhǔn)TSP 實例上的仿真結(jié)果表明,改進(jìn)的蟻群算法在收斂速度、求解精度和算法穩(wěn)定性等方面均有顯著提升。算法能在較少的迭代次數(shù)內(nèi)找到中小規(guī)模TSP 問題的最優(yōu)解,能較好改善大規(guī)模TSP 問題上解的平均質(zhì)量,但對于超大規(guī)模TSP 問題求解精度仍需進(jìn)一步提高。為提高超大規(guī)模TSP 問題中解的精度,今后將在優(yōu)化多種群之間的博弈策略和信息素更新策略上作進(jìn)一步研究。

    猜你喜歡
    蟻群二叉樹螞蟻
    CSP真題——二叉樹
    電腦報(2022年37期)2022-09-28 05:31:07
    二叉樹創(chuàng)建方法
    游戲社會:狼、猞猁和蟻群
    基于自適應(yīng)蟻群的FCM聚類優(yōu)化算法研究
    基于奇異值差分譜分析和蟻群算法的小波閾值降噪
    我們會“隱身”讓螞蟻來保護(hù)自己
    螞蟻
    一種由層次遍歷和其它遍歷構(gòu)造二叉樹的新算法
    螞蟻找吃的等
    論復(fù)雜二叉樹的初始化算法
    河南科技(2014年24期)2014-02-27 14:20:01
    久久久久久久久中文| 成人三级做爰电影| 亚洲第一电影网av| 午夜日韩欧美国产| 日韩欧美国产一区二区入口| 国内揄拍国产精品人妻在线| 九九热线精品视视频播放| 国产亚洲精品久久久久5区| a在线观看视频网站| 中文字幕精品亚洲无线码一区| 黄色丝袜av网址大全| 久久精品国产综合久久久| 欧美激情久久久久久爽电影| 韩国av一区二区三区四区| 欧美一区二区精品小视频在线| 国产一区二区在线观看日韩 | 色播亚洲综合网| 欧美乱妇无乱码| 色尼玛亚洲综合影院| 久久午夜综合久久蜜桃| 色老头精品视频在线观看| 午夜福利高清视频| 两个人免费观看高清视频| 狠狠狠狠99中文字幕| 成年人黄色毛片网站| 久久久国产成人精品二区| 黄色a级毛片大全视频| 女同久久另类99精品国产91| 99re在线观看精品视频| 狠狠狠狠99中文字幕| 亚洲成人久久爱视频| 色尼玛亚洲综合影院| 国产黄片美女视频| 巨乳人妻的诱惑在线观看| 久久人妻福利社区极品人妻图片| 一进一出抽搐动态| 国产精品电影一区二区三区| 亚洲精品在线美女| 久久精品综合一区二区三区| 1024手机看黄色片| 正在播放国产对白刺激| 国产精品一区二区三区四区免费观看 | 精品无人区乱码1区二区| 欧美日韩福利视频一区二区| 无人区码免费观看不卡| 操出白浆在线播放| 国产激情久久老熟女| 亚洲 欧美一区二区三区| 亚洲成av人片在线播放无| 欧美乱色亚洲激情| av福利片在线观看| 无遮挡黄片免费观看| 一级a爱片免费观看的视频| 日韩欧美一区二区三区在线观看| 日本精品一区二区三区蜜桃| 国产精品自产拍在线观看55亚洲| 国产精品久久久久久人妻精品电影| 51午夜福利影视在线观看| 日本a在线网址| 俺也久久电影网| 在线观看午夜福利视频| 少妇的丰满在线观看| www.熟女人妻精品国产| 亚洲av中文字字幕乱码综合| 无限看片的www在线观看| 欧美又色又爽又黄视频| 日韩中文字幕欧美一区二区| 熟女电影av网| 色综合婷婷激情| www.www免费av| 一个人观看的视频www高清免费观看 | 三级国产精品欧美在线观看 | 两个人免费观看高清视频| 国产一区二区在线av高清观看| 99精品久久久久人妻精品| 熟女少妇亚洲综合色aaa.| 国产熟女xx| 悠悠久久av| 亚洲美女视频黄频| 久久久久九九精品影院| 中出人妻视频一区二区| 亚洲专区国产一区二区| 美女午夜性视频免费| 嫩草影院精品99| 一本一本综合久久| 级片在线观看| 女同久久另类99精品国产91| 宅男免费午夜| 91国产中文字幕| 日韩欧美国产在线观看| 身体一侧抽搐| 香蕉丝袜av| 热99re8久久精品国产| 国产激情偷乱视频一区二区| ponron亚洲| 久久这里只有精品中国| 中国美女看黄片| 精品久久蜜臀av无| 黑人操中国人逼视频| 欧美日本亚洲视频在线播放| 久久久精品欧美日韩精品| 两人在一起打扑克的视频| 窝窝影院91人妻| 国产乱人伦免费视频| 他把我摸到了高潮在线观看| 十八禁人妻一区二区| 色综合欧美亚洲国产小说| 亚洲午夜理论影院| av天堂在线播放| www.999成人在线观看| 日韩大码丰满熟妇| 麻豆一二三区av精品| 国产爱豆传媒在线观看 | √禁漫天堂资源中文www| 好看av亚洲va欧美ⅴa在| 美女大奶头视频| 亚洲性夜色夜夜综合| 在线观看免费午夜福利视频| 国产午夜精品论理片| 国产精品久久久久久亚洲av鲁大| 欧美在线一区亚洲| 伦理电影免费视频| 白带黄色成豆腐渣| 长腿黑丝高跟| 欧美日韩一级在线毛片| 午夜日韩欧美国产| 少妇被粗大的猛进出69影院| www.www免费av| 成人一区二区视频在线观看| 悠悠久久av| 国产精品一及| 成人av在线播放网站| 久久久精品大字幕| 成人三级黄色视频| 一个人观看的视频www高清免费观看 | 天天添夜夜摸| 桃色一区二区三区在线观看| 欧美 亚洲 国产 日韩一| 婷婷精品国产亚洲av在线| 日韩三级视频一区二区三区| 国产成人av教育| 精品第一国产精品| 2021天堂中文幕一二区在线观| 国产亚洲欧美在线一区二区| 97超级碰碰碰精品色视频在线观看| 一级毛片高清免费大全| 伊人久久大香线蕉亚洲五| 精品电影一区二区在线| 久久精品国产亚洲av香蕉五月| cao死你这个sao货| 成人18禁在线播放| 亚洲国产高清在线一区二区三| 九色成人免费人妻av| 亚洲欧美日韩高清专用| 99国产精品99久久久久| 他把我摸到了高潮在线观看| 欧美成狂野欧美在线观看| 亚洲在线自拍视频| 97人妻精品一区二区三区麻豆| 久久人妻福利社区极品人妻图片| www.精华液| 老司机靠b影院| 久久精品影院6| 麻豆成人午夜福利视频| 亚洲国产日韩欧美精品在线观看 | 国产久久久一区二区三区| 亚洲va日本ⅴa欧美va伊人久久| 亚洲乱码一区二区免费版| 69av精品久久久久久| 99久久综合精品五月天人人| 一本大道久久a久久精品| 亚洲美女黄片视频| 性色av乱码一区二区三区2| 日本在线视频免费播放| 在线观看www视频免费| 丰满人妻一区二区三区视频av | 美女免费视频网站| 国产精品久久久久久人妻精品电影| 精品日产1卡2卡| av天堂在线播放| 露出奶头的视频| 亚洲avbb在线观看| 欧美+亚洲+日韩+国产| 岛国在线免费视频观看| 美女扒开内裤让男人捅视频| av福利片在线观看| 哪里可以看免费的av片| 午夜福利视频1000在线观看| 一级毛片精品| 成人三级黄色视频| 日本a在线网址| 亚洲在线自拍视频| 最好的美女福利视频网| a级毛片在线看网站| 国产精品电影一区二区三区| 国产三级中文精品| 欧美zozozo另类| 精品一区二区三区av网在线观看| 97碰自拍视频| 岛国在线免费视频观看| 国产探花在线观看一区二区| 人人妻,人人澡人人爽秒播| 日韩欧美免费精品| 久久精品亚洲精品国产色婷小说| 国产三级在线视频| 国产精品久久久久久人妻精品电影| 免费在线观看黄色视频的| 欧美最黄视频在线播放免费| 久久久久久免费高清国产稀缺| 亚洲成人国产一区在线观看| 免费观看人在逋| 精品国产超薄肉色丝袜足j| 亚洲电影在线观看av| 精品人妻1区二区| 欧美黑人欧美精品刺激| 国内毛片毛片毛片毛片毛片| 69av精品久久久久久| 久久这里只有精品19| 男女那种视频在线观看| 三级国产精品欧美在线观看 | 亚洲成人国产一区在线观看| 三级毛片av免费| 一本综合久久免费| 久久99热这里只有精品18| 毛片女人毛片| netflix在线观看网站| 国产精品久久久av美女十八| 99精品久久久久人妻精品| 香蕉久久夜色| 91麻豆精品激情在线观看国产| 国产精品久久视频播放| 免费在线观看视频国产中文字幕亚洲| 久久亚洲精品不卡| 久久久国产成人免费| 在线国产一区二区在线| ponron亚洲| 午夜福利在线观看吧| 成人一区二区视频在线观看| 搡老岳熟女国产| 欧美日韩一级在线毛片| 欧美不卡视频在线免费观看 | 啦啦啦观看免费观看视频高清| 日韩欧美 国产精品| 国产精品爽爽va在线观看网站| 很黄的视频免费| 国产亚洲av高清不卡| 国产午夜精品久久久久久| 桃色一区二区三区在线观看| av免费在线观看网站| 国产高清视频在线观看网站| 又爽又黄无遮挡网站| 国产精品1区2区在线观看.| 亚洲国产欧美人成| 色av中文字幕| 午夜福利高清视频| 51午夜福利影视在线观看| 一级毛片精品| 草草在线视频免费看| 男插女下体视频免费在线播放| 亚洲欧美日韩东京热| 亚洲激情在线av| 别揉我奶头~嗯~啊~动态视频| 亚洲一区二区三区不卡视频| 欧美日韩中文字幕国产精品一区二区三区| 熟女少妇亚洲综合色aaa.| 在线观看www视频免费| 久久人妻福利社区极品人妻图片| 国产aⅴ精品一区二区三区波| 精华霜和精华液先用哪个| 在线观看午夜福利视频| 成人永久免费在线观看视频| 欧美日韩中文字幕国产精品一区二区三区| 国产精品 欧美亚洲| 国内少妇人妻偷人精品xxx网站 | 桃红色精品国产亚洲av| 一级黄色大片毛片| 国产伦在线观看视频一区| 好男人电影高清在线观看| 久久精品影院6| 别揉我奶头~嗯~啊~动态视频| 高潮久久久久久久久久久不卡| 不卡av一区二区三区| 午夜免费成人在线视频| 亚洲中文av在线| 亚洲一卡2卡3卡4卡5卡精品中文| 精品国产乱子伦一区二区三区| 全区人妻精品视频| 亚洲激情在线av| 国产精品自产拍在线观看55亚洲| 亚洲成a人片在线一区二区| 亚洲精品av麻豆狂野| 日本黄大片高清| 女人高潮潮喷娇喘18禁视频| 最近视频中文字幕2019在线8| 色综合欧美亚洲国产小说| 日本黄大片高清| 最近视频中文字幕2019在线8| 亚洲av成人精品一区久久| 国产三级在线视频| 亚洲精品久久国产高清桃花| 国产精品99久久99久久久不卡| 久久精品影院6| 女人被狂操c到高潮| 18禁观看日本| 十八禁人妻一区二区| 在线国产一区二区在线| 亚洲av五月六月丁香网| 黄色视频不卡| xxx96com| 亚洲成人中文字幕在线播放| e午夜精品久久久久久久| 欧美成人午夜精品| 日本免费a在线| 脱女人内裤的视频| 色噜噜av男人的天堂激情| 亚洲人与动物交配视频| 手机成人av网站| 在线永久观看黄色视频| 日本撒尿小便嘘嘘汇集6| 一进一出抽搐gif免费好疼| 18禁美女被吸乳视频| 国内精品久久久久精免费| 丰满的人妻完整版| 免费看日本二区| 身体一侧抽搐| a在线观看视频网站| 超碰成人久久| 久久久国产精品麻豆| 啦啦啦韩国在线观看视频| 国产在线观看jvid| 欧美日韩福利视频一区二区| 亚洲色图av天堂| 欧美性猛交黑人性爽| 1024手机看黄色片| 精品国产亚洲在线| 亚洲一码二码三码区别大吗| 日日摸夜夜添夜夜添小说| 88av欧美| 日本在线视频免费播放| 国产亚洲精品第一综合不卡| 三级毛片av免费| 特级一级黄色大片| 99在线人妻在线中文字幕| 麻豆成人午夜福利视频| 亚洲精品在线美女| 亚洲国产欧美一区二区综合| 欧美乱色亚洲激情| 久久人妻福利社区极品人妻图片| 亚洲精品av麻豆狂野| 国产蜜桃级精品一区二区三区| 老司机午夜福利在线观看视频| 亚洲专区中文字幕在线| 在线观看免费日韩欧美大片| 国产亚洲精品久久久久久毛片| 欧美性猛交╳xxx乱大交人| 淫妇啪啪啪对白视频| 丰满人妻一区二区三区视频av | 亚洲精品在线美女| 亚洲av熟女| 一级毛片精品| 18禁国产床啪视频网站| 国产激情久久老熟女| 亚洲av成人不卡在线观看播放网| a级毛片在线看网站| 国产精品一区二区精品视频观看| 俄罗斯特黄特色一大片| 免费在线观看日本一区| 国产亚洲欧美在线一区二区| 黄色a级毛片大全视频| 亚洲美女视频黄频| 正在播放国产对白刺激| 国产精品香港三级国产av潘金莲| 老司机午夜福利在线观看视频| 18禁观看日本| 久久久久九九精品影院| 精品一区二区三区视频在线观看免费| 母亲3免费完整高清在线观看| 欧美高清成人免费视频www| 十八禁网站免费在线| 美女扒开内裤让男人捅视频| 无遮挡黄片免费观看| 国产区一区二久久| 在线观看www视频免费| 欧美成狂野欧美在线观看| 精品福利观看| 51午夜福利影视在线观看| 成人18禁在线播放| 一级a爱片免费观看的视频| x7x7x7水蜜桃| 一进一出抽搐gif免费好疼| 可以在线观看的亚洲视频| 中文字幕最新亚洲高清| 亚洲乱码一区二区免费版| 午夜精品久久久久久毛片777| 熟妇人妻久久中文字幕3abv| 日韩欧美免费精品| 亚洲成av人片在线播放无| 久久精品国产清高在天天线| 啦啦啦观看免费观看视频高清| 99久久精品热视频| 美女扒开内裤让男人捅视频| 一进一出好大好爽视频| svipshipincom国产片| 久久人人精品亚洲av| 国产真实乱freesex| 国产精品99久久99久久久不卡| 精品国产乱码久久久久久男人| 麻豆一二三区av精品| 日本精品一区二区三区蜜桃| 国产精品电影一区二区三区| 亚洲国产欧洲综合997久久,| 午夜福利成人在线免费观看| 欧美在线黄色| 国产v大片淫在线免费观看| 五月伊人婷婷丁香| 最新在线观看一区二区三区| 午夜免费成人在线视频| 成年女人毛片免费观看观看9| 好男人电影高清在线观看| 1024手机看黄色片| 午夜免费成人在线视频| 99热6这里只有精品| 日韩欧美 国产精品| 国产精品 国内视频| 午夜两性在线视频| 18美女黄网站色大片免费观看| 搡老熟女国产l中国老女人| 久久精品国产亚洲av高清一级| 欧美乱码精品一区二区三区| 中文字幕熟女人妻在线| 看黄色毛片网站| 床上黄色一级片| 91在线观看av| 最近视频中文字幕2019在线8| 国产精品亚洲美女久久久| 淫秽高清视频在线观看| 在线观看舔阴道视频| 亚洲无线在线观看| 麻豆一二三区av精品| 黄片小视频在线播放| 免费在线观看日本一区| 国产欧美日韩精品亚洲av| www.精华液| 久久久久久久久久黄片| 天堂影院成人在线观看| 日韩成人在线观看一区二区三区| 成人手机av| 免费搜索国产男女视频| 国产成人aa在线观看| 亚洲精品av麻豆狂野| 午夜福利欧美成人| 久久久久国内视频| 成人18禁高潮啪啪吃奶动态图| 我的老师免费观看完整版| 久久精品国产亚洲av高清一级| 成熟少妇高潮喷水视频| av福利片在线观看| 久久精品国产亚洲av香蕉五月| 51午夜福利影视在线观看| 丰满人妻熟妇乱又伦精品不卡| 亚洲成a人片在线一区二区| 熟女电影av网| 无限看片的www在线观看| cao死你这个sao货| 亚洲 欧美 日韩 在线 免费| 一本久久中文字幕| 色综合婷婷激情| 欧美性猛交黑人性爽| 天堂av国产一区二区熟女人妻 | 51午夜福利影视在线观看| 国产精品99久久99久久久不卡| 亚洲一码二码三码区别大吗| 日韩精品中文字幕看吧| 一边摸一边抽搐一进一小说| 国产视频一区二区在线看| 一边摸一边抽搐一进一小说| 午夜视频精品福利| 午夜激情福利司机影院| 99国产极品粉嫩在线观看| 午夜福利成人在线免费观看| 日本 av在线| 啦啦啦观看免费观看视频高清| 亚洲国产欧洲综合997久久,| 中文在线观看免费www的网站 | 亚洲色图 男人天堂 中文字幕| 国语自产精品视频在线第100页| 免费搜索国产男女视频| 免费无遮挡裸体视频| 99久久无色码亚洲精品果冻| 黄色成人免费大全| 久久天躁狠狠躁夜夜2o2o| 亚洲精品一卡2卡三卡4卡5卡| 国产精品av久久久久免费| 日日夜夜操网爽| 九九热线精品视视频播放| 久久久久免费精品人妻一区二区| 欧美性猛交╳xxx乱大交人| 在线观看舔阴道视频| 国内毛片毛片毛片毛片毛片| 日韩国内少妇激情av| 男插女下体视频免费在线播放| 亚洲 欧美 日韩 在线 免费| 日韩大码丰满熟妇| 此物有八面人人有两片| 99热6这里只有精品| 91字幕亚洲| 特大巨黑吊av在线直播| 国内揄拍国产精品人妻在线| 一卡2卡三卡四卡精品乱码亚洲| 免费在线观看完整版高清| 久久久久久久久免费视频了| 五月玫瑰六月丁香| 男男h啪啪无遮挡| 国产精品免费一区二区三区在线| 亚洲国产欧美网| 国产精品av久久久久免费| 91在线观看av| 国产成人精品无人区| 国产精品一区二区三区四区免费观看 | 国产又黄又爽又无遮挡在线| 久久天堂一区二区三区四区| 精品一区二区三区av网在线观看| 欧美日韩亚洲综合一区二区三区_| 亚洲一区二区三区不卡视频| 最近最新中文字幕大全免费视频| 黄色成人免费大全| 中文字幕精品亚洲无线码一区| 神马国产精品三级电影在线观看 | 精品电影一区二区在线| 午夜福利在线观看吧| 国产免费男女视频| 国内毛片毛片毛片毛片毛片| 91大片在线观看| 一a级毛片在线观看| 人妻久久中文字幕网| 精品久久久久久,| 又爽又黄无遮挡网站| 亚洲成人中文字幕在线播放| 免费在线观看成人毛片| 91麻豆精品激情在线观看国产| 久久国产精品人妻蜜桃| 亚洲熟妇中文字幕五十中出| 两个人看的免费小视频| 久久精品综合一区二区三区| netflix在线观看网站| 性色av乱码一区二区三区2| 亚洲国产日韩欧美精品在线观看 | 女人高潮潮喷娇喘18禁视频| 性欧美人与动物交配| 一级a爱片免费观看的视频| 50天的宝宝边吃奶边哭怎么回事| 哪里可以看免费的av片| 国产成人精品久久二区二区免费| 俄罗斯特黄特色一大片| 曰老女人黄片| 午夜老司机福利片| 黄色女人牲交| 日韩欧美在线乱码| 丝袜人妻中文字幕| 国产三级在线视频| 国产成人av激情在线播放| 一夜夜www| 悠悠久久av| 国产精品久久电影中文字幕| 淫秽高清视频在线观看| 中文亚洲av片在线观看爽| 国产精品亚洲av一区麻豆| 国产成年人精品一区二区| 在线十欧美十亚洲十日本专区| 在线观看日韩欧美| 黄色女人牲交| 国产成+人综合+亚洲专区| 亚洲欧美日韩高清专用| 久久亚洲精品不卡| 黑人操中国人逼视频| 久久性视频一级片| 中文字幕人成人乱码亚洲影| 国产1区2区3区精品| 久久精品成人免费网站| 亚洲真实伦在线观看| 成人18禁高潮啪啪吃奶动态图| 免费观看人在逋| 日韩欧美 国产精品| 日本在线视频免费播放| 舔av片在线| av免费在线观看网站| 久久午夜亚洲精品久久| 国产三级中文精品| 国产精品一区二区免费欧美| 国产三级黄色录像| 91在线观看av| 欧美黑人巨大hd| 国产亚洲av高清不卡| 可以免费在线观看a视频的电影网站| 男女做爰动态图高潮gif福利片| 欧美久久黑人一区二区| 亚洲精品美女久久av网站| 国产精品免费视频内射| 国产av又大| 嫩草影视91久久| 欧美3d第一页| 亚洲国产欧美人成| 成人永久免费在线观看视频| 中亚洲国语对白在线视频| 午夜福利18| 正在播放国产对白刺激| 19禁男女啪啪无遮挡网站| 国产亚洲精品一区二区www| 1024手机看黄色片| 村上凉子中文字幕在线| 久久久久精品国产欧美久久久| 欧美黑人欧美精品刺激| 91九色精品人成在线观看| 男女视频在线观看网站免费 | 麻豆国产97在线/欧美 |