• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    結(jié)合價格波動策略與動態(tài)回溯機制的蟻群算法

    2022-06-17 07:10:56趙家波游曉明
    計算機與生活 2022年6期
    關(guān)鍵詞:螞蟻局部動態(tài)

    趙家波,游曉明+,劉 升

    1.上海工程技術(shù)大學(xué) 電子電氣學(xué)院,上海 201620

    2.上海工程技術(shù)大學(xué) 管理學(xué)院,上海 201620

    旅行商問題(traveling salesman problem,TSP)是一類經(jīng)典的組合優(yōu)化問題,可以描述為一位旅行商從某一城市出發(fā),要求不重復(fù)通過所有規(guī)定的城市,最后回到最初城市的最短路徑問題。

    在20 世紀90 年代,意大利學(xué)者Dorigo、Maniezzo等人受到自然界螞蟻覓食的啟發(fā),模擬螞蟻覓食的行為,提出了蟻群算法(ant colony optimization,ACO),并應(yīng)用于旅行商的問題與分布式優(yōu)化問題,取得了較好的結(jié)果。之后學(xué)者們根據(jù)自身研究領(lǐng)域?qū)⑾伻核惴☉?yīng)用于配電網(wǎng)故障定位、火力分配問題、網(wǎng)絡(luò)路由問題、車間調(diào)度問題等。

    由于信息素的正反饋作用,螞蟻系統(tǒng)在后期常常因為個別路徑信息素的快速積累導(dǎo)致螞蟻不會選擇其他路徑,從而陷入局部最優(yōu)問題。為了避免信息素的過度積累,減少陷入局部最優(yōu)的概率,Dorigo在螞蟻系統(tǒng)(ant system,AS)算法的基礎(chǔ)上提出蟻群系統(tǒng)(ant colony system,ACS)算法,并提出了全局信息素更新方式與局部信息素更新方式,加入局部搜索算法,改善了算法陷入局部最優(yōu)的情況。之后,為了避免信息素過多而導(dǎo)致陷入局部最優(yōu),Stutzle 等人提出了最大-最小螞蟻系統(tǒng)(max-min ant system,MMAS),通過分別設(shè)置信息素最大最小閾值,將信息素的濃度控制在一定范圍內(nèi),從而避免信息素的不斷堆積造成局部最優(yōu)。以上是經(jīng)典的蟻群算法,雖然它們具有高效的探索尋優(yōu)能力,但仍存在著容易陷入局部最優(yōu)、收斂速度慢等問題。針對這些問題,許多學(xué)者提出各自的改進策略。

    一些學(xué)者在加快蟻群算法的收斂速度上做出一些改進,如文獻[9]結(jié)合遺傳算法,提出使用螞蟻的基因控制螞蟻選擇城市,減少算法初期探索全部路徑的時間成本,加快算法前期收斂速度。文獻[10]通過全局路徑重新設(shè)定初始信息素分布,使得算法前期路徑的探索具有一定導(dǎo)向性,并且通過信息素的二次揮發(fā),加快算法后期的收斂能力,使算法能夠在較短時間內(nèi)找到較優(yōu)解。文獻[11]提出一種改進的信息素差異化更新策略,在所有螞蟻完成本次路徑構(gòu)建后,對優(yōu)于平均路徑長度的路徑進行信息素加強,對劣于平均路徑長度的路徑進行信息素削弱,從而增大較優(yōu)路徑的吸引力,削弱較差路徑對螞蟻路徑選擇的干擾,加快算法整體的收斂速度。上述學(xué)者較好地解決了蟻群算法收斂速度慢的問題,但算法仍存在易陷入局部最優(yōu)的問題。文獻[12]提出一種具有記憶特征的區(qū)間蟻群優(yōu)化算法,將信息素濃度推廣為一定區(qū)間范圍,不再束縛于信息素為某一定值,并引入長短時記憶的信息素更新方式,對應(yīng)不同的揮發(fā)系數(shù),使得算法呈現(xiàn)更具層次的多樣性。文獻[13]為了解決算法陷入局部最優(yōu)的問題,使用平滑信息素的方法削弱所有路徑信息素的差異性,并通過自適應(yīng)改變算法的取值,增大算法接受隨機解的概率,從而實現(xiàn)跳出局部最優(yōu)。文獻[14]根據(jù)蟻群算法與魚群算法的優(yōu)勢互補,提出一種先魚群再蟻群的混合算法,通過更新率的調(diào)整,前期借助魚群算法找到更多的解,當(dāng)更新率達到某一值時,轉(zhuǎn)為蟻群算法進行更好的尋優(yōu),當(dāng)算法陷入局部最優(yōu)時,再通過更新率的變化轉(zhuǎn)為魚群算法,從而平衡收斂速度慢、易陷入局部最優(yōu)等問題。雖然以上改進的蟻群算法都從加快收斂速度與提高多樣性進行改善,但在解決中大規(guī)模的TSP 問題中仍然存在收斂速度慢且容易陷入局部最優(yōu)等問題。

    為了在中大規(guī)模TSP 問題中較好地平衡解的多樣性與收斂速度的關(guān)系,本文提出一種結(jié)合價格波動策略與動態(tài)回溯的蟻群算法(ant colony algorithm based on price fluctuation strategy and dynamic backtracking mechanism,PBACO)。在價格波動策略中,結(jié)合時間序列思想將蟻群算法完整迭代周期根據(jù)不同需求分為三類,并根據(jù)價格波動平衡,將影響價格波動的供求關(guān)系進行匹配,通過分析算法在各類時期的不同需求,對信息素揮發(fā)因子進行自適應(yīng)動態(tài)供給,來滿足算法各階段的動態(tài)需求,較好地改善算法整體性能。當(dāng)價格波動策略的供給關(guān)系無法實現(xiàn)平衡時,算法將面臨局部最優(yōu)問題,此時引入動態(tài)回溯機制,以迭代最優(yōu)螞蟻的個體相似度作為標(biāo)準(zhǔn),將路徑信息素回溯至相似度差異顯著的時期,而非將路徑信息素清零,保證了算法收斂速度的同時能夠有效跳出局部最優(yōu)。通過MATLAB 對TSP 中的不同測試集進行仿真,結(jié)果表明該算法在保證收斂速度的基礎(chǔ)上,有效提高了解的質(zhì)量,較好地平衡了多樣性與收斂速度的關(guān)系。本文的主要工作總結(jié)如下:

    (1)結(jié)合時間序列的思想,將蟻群算法完整迭代周期根據(jù)不同內(nèi)在需求分為A、B、C 三類,并采用價格波動策略對三類不同時期的不同需求,自適應(yīng)調(diào)整信息素揮發(fā)因子進行動態(tài)供給,使算法能夠在不同時期對多樣性差與收斂速度慢的問題做出相應(yīng)的改善,優(yōu)于傳統(tǒng)算法恒定的信息素揮發(fā)因子。

    (2)通過分析三類不同時期的陷入局部最優(yōu)情況,引入斐波那契數(shù)列抽樣來判定算法是否陷入局部最優(yōu),而非傳統(tǒng)算法逐個判斷若干代最短路徑均不變的方法。采用斐波那契數(shù)列抽樣的方式通過抽樣更少樣本數(shù)來判定陷入局部最優(yōu),節(jié)約時間成本,同時對不同時期采用不同的最大樣本數(shù),更為合理地進行抽樣樣本數(shù)的調(diào)整,進一步加快算法收斂速度。

    (3)在算法陷入局部最優(yōu)后,最優(yōu)路徑信息素積累較多,此時引入動態(tài)回溯機制,以迭代最優(yōu)螞蟻的個體相似度作為標(biāo)準(zhǔn),將路徑信息素回溯至相似度差異顯著的時期,可以將路徑信息素重置為若干代前的路徑信息素,這樣既增加了下代螞蟻選擇路徑的多樣性,同時未完全重置信息素,節(jié)省了螞蟻重新構(gòu)建路徑信息素的時間成本,在保證收斂速度的同時能夠有效跳出局部最優(yōu)。

    1 相關(guān)工作

    1.1 ACS 蟻群算法1.1.1 路徑構(gòu)建

    ACS 中每只螞蟻從城市到城市的選擇公式:

    其中,τ()代表著時刻城市和城市之間的信息素的濃度大小,每條邊上的起始濃度都是相同的,記為。 η代表的是、城市之間距離d的倒數(shù),即η=1/d。是在區(qū)間[0,1]的常數(shù)值,是在區(qū)間[0,1]的隨機數(shù),∈表示城市屬于禁忌表外的可選城市集合。表示當(dāng)≤時將要被選擇的下一個城市。是式(2)輪盤賭的選擇方式。、分別表示信息啟發(fā)式因子和期望啟發(fā)式因子,越大,表示對下一條路徑選擇受啟發(fā)式信息素的影響越大,而值越大,表示對下一條路徑選擇受城市間距離的影響越大。

    式(1)、式(2)表明,當(dāng)≤時,城市之間信息素高的城市和距離相對近的城市被選擇的概率更大,當(dāng)不符合上述條件,采用式(2)輪盤賭進行路徑構(gòu)建。

    ACS 蟻群算法的更新機制分為局部信息素更新和全局信息素更新兩部分。

    全局信息素更新:當(dāng)所有螞蟻都完成一次迭代之后,算法只對當(dāng)前最優(yōu)路徑上的信息素進行更新,通過算法的正反饋作用,使得最優(yōu)路徑和非最優(yōu)路徑上的信息素的差距逐漸拉大,為蟻群的路徑選擇增加指向性,加快了算法的收斂速度。公式如下:

    其中,是全局信息素的蒸發(fā)率;Δτ是信息素增量;是當(dāng)前最優(yōu)路徑長度。

    局部信息素更新:當(dāng)每只螞蟻完成一次周游后,算法便會對其走過的路徑進行局部信息素更新。局部信息素更新是對所有螞蟻都進行更新,其作用是為了縮短最優(yōu)路徑和非最優(yōu)路徑之間信息素的差距,增加算法的多樣性,提高算法全局搜索能力,避免陷入局部最優(yōu)。公式如下:

    其中,Δτ是信息素增量;為每條邊上的起始濃度;是局部信息素的蒸發(fā)率。

    1.2 時間序列分析法

    時間序列分析法是統(tǒng)計學(xué)中常用于預(yù)測未來發(fā)展變化趨勢的一種方法,能夠以時間的推移預(yù)測市場需求趨勢,通過將經(jīng)濟跌漲、購買力大小、價格變動等同一常數(shù)的觀察值,按照時間順序進行排列,再運用數(shù)理統(tǒng)計方法對市場未來趨勢的變化進行預(yù)測,來確定市場的預(yù)測值。

    一個時間序列通常由四種要素組成:長期趨勢變動、季節(jié)變動、循環(huán)變動和不規(guī)則變動。長期趨勢變動是指時間序列在長時期內(nèi)呈現(xiàn)出來的持續(xù)向上或持續(xù)向下的變動;季節(jié)變動是指時間序列在隨季節(jié)而重復(fù)出現(xiàn)的周期性波動,受氣候條件、節(jié)假日等各種因素的影響;循環(huán)變動是指時間序列變化為非固定時長的周期性波動,其循環(huán)周期與趨勢不同,它并非是單一方向的長時變化,而是漲落有序的交替波動;不規(guī)則變動是指時間序列中除去以上三種要素所剩余的變動,通常隨機出現(xiàn)在時間序列中,使時間序列產(chǎn)生不平穩(wěn)的震蕩波動。

    時間序列函數(shù)可由以上四種元素進行表示,即=(,,,),常用所構(gòu)建的模型可分為兩種,加法模型=+++以及乘法模型=***。當(dāng)時間序列隨時間等寬推進時,常用加法模型;當(dāng)時間序列的季節(jié)變動與長期趨勢變動成正比時,常用乘法模型。

    1.3 個體相似度

    在相似度算法的距離度量中,距離越近則兩者差異性較小,證明其相似度越高。但是這類相似度無法直接應(yīng)用于蟻群算法中,因為當(dāng)蟻群算法陷入局部最優(yōu)時,其最優(yōu)路徑基本保持不變,前后兩次路徑的差異性較小,相似度高,但是對于需要跳出局部最優(yōu)的問題并非一個好的結(jié)果。

    考慮到螞蟻個體在尋找路徑時是通過城市節(jié)點的連接來進行路徑尋優(yōu),個體之間形成的閉環(huán)路徑總會有一些相同路徑,因此可用個體間的相同路徑信息來表示個體之間的相似度,路徑信息相同數(shù)越多,則代表個體間的相似度越高,而相同數(shù)越少,也表示個體間差異性較為明顯。個體相似度的計算過程如下所示。

    個體相似度的計算通過相同路徑的多少來進行,設(shè)兩個個體和,其路徑信息借助連接矩陣表示,如對應(yīng)連接矩陣,對應(yīng)連接矩陣,則有:

    其中,代表城市數(shù),在矩陣中,x表示城市至城市的路徑信息,如果個體的路徑信息中具有城市至城市,則使x=1,否則x=0;因為xx均表示城市至城市的路徑信息,所以x=x,為對稱矩陣,個體的連接矩陣同理所示。

    個體相似度借助連接矩陣則可以較為明顯地比較兩個個體的路徑信息。在算法運行初期,從隨機城市出發(fā)的兩個螞蟻個體可能走過完全不同的路徑,此時兩者的相似度應(yīng)為0,在算法陷入局部最優(yōu)或算法運行末期,因為信息素正反饋的作用,兩個螞蟻個體走過的路徑可能大體相同,此時兩者的相似度為1 或近似為1,所以可構(gòu)建個體相似度函數(shù),將兩個個體的相同路徑進行統(tǒng)計處理,使個體間的相似度處于0~1 的范圍。個體相似度函數(shù)的公式如下所示:

    2 改進的蟻群算法

    2.1 價格波動策略

    價格波動策略結(jié)合了價格理論中商品的供求關(guān)系對價格的影響,在不同時期商品的價格會受供給和需求的不同而產(chǎn)生變化,但總體價格呈現(xiàn)出波動平衡的狀態(tài)。而傳統(tǒng)蟻群算法在進行路徑探索時,存在易陷入局部最優(yōu)、收斂速度慢等問題,雖然后續(xù)提出信息素揮發(fā)因子來避免信息素過度積累,改善解的質(zhì)量,但傳統(tǒng)蟻群算法的信息素揮發(fā)因子仍具有一定的局限性,信息素揮發(fā)因子作為蟻群算法的重要參數(shù),設(shè)置為某一定值無法發(fā)揮其在算法各階段的不同作用,對算法整體的適應(yīng)性較差,因此提出價格波動策略,使算法不同時期的供求關(guān)系處于動態(tài)平衡狀態(tài)。

    時間序列分析法處理的數(shù)據(jù)通常是根據(jù)時間排列的數(shù)據(jù),用來進行曲線的預(yù)測與內(nèi)在發(fā)展趨勢的變化,本文通過將時間序列思想引入蟻群算法,對蟻群算法各時期的不同狀態(tài)進行分析分類,為2.1.2 小節(jié)價格波動策略的供求關(guān)系匹配奠定基礎(chǔ)。

    下面將通過分析最短路徑收斂圖來對蟻群算法各時期的不同狀態(tài)進行分類,為了提高此分類方法的普適性,本文根據(jù)文獻[7]的ACS 算法,對城市集eil51、eil76、KroA100、KroB100、ch130、ch150、KroA200 和KroB200 進行15 次獨立實驗,獲取各城市集的最短路徑收斂圖。為了增強說服力,選取各城市集15 次實驗中的最優(yōu)路徑收斂圖作為典型進行分析。

    如圖1 所示,蟻群算法的收斂曲線是以迭代數(shù)為時間軸,對本次迭代最優(yōu)螞蟻的最短距離進行統(tǒng)計,從而繪制成的曲線,因此曲線不會出現(xiàn)往上回升的變化,只存在下降與持平的情況。考慮到以上原因在蟻群算法的特殊性,蟻群算法最短路徑的變化曲線在結(jié)合時間序列思想時會對曲線的要素做出相應(yīng)調(diào)整,構(gòu)建符合蟻群算法邏輯的模型。

    圖1 最短路徑收斂圖Fig.1 Shortest path convergence graph

    圖1 將根據(jù)算法不同時期的不同變化對對應(yīng)時期的曲線進行要素分類。在圖1 中,各城市集的最短路徑曲線都可分為A、B 和C 三個階段。在A 階段,各城市集曲線呈極速下降趨勢,階段特征為曲線在較少迭代數(shù)內(nèi)落差明顯,此時處于算法前期,螞蟻主要受期望啟發(fā)式的影響積極探索路徑,稱之為極速下降變化;在B 階段,各城市集曲線呈階梯下降趨勢,階段特征為曲線在持平較短迭代數(shù)后發(fā)生下降變化,之后再次持平與下降,循環(huán)進行,此時處于算法前中期,路徑信息素積累至一定程度,螞蟻的路徑選擇受啟發(fā)式與信息素濃度的共同作用,波折探索更短路徑,稱之為階梯下降變化;在C 階段,各城市集曲線呈長期持平或長期持平后下降趨勢,階段特征為曲線在較長迭代數(shù)內(nèi)持平,或在較長迭代數(shù)內(nèi)持平后出現(xiàn)下降,此時處于算法中后期,信息素的正反饋積累使當(dāng)前最優(yōu)路徑的信息素達到較大值,陷入局部最優(yōu),算法只能通過輪盤賭的小概率來尋找更短路徑,因此曲線在較長迭代數(shù)保持持平,若能找出更短路徑,即出現(xiàn)下降現(xiàn)象,稱之為恒定兼隨機變化。

    因為最優(yōu)路徑曲線是以每代進行統(tǒng)計,以上四種分類滿足時間序列加法模型,所以可以構(gòu)建價格波動策略分類模型,如式(9)所示。

    其中,為最短路徑收斂曲線中的極速下降變化,為極速下降的時長,該時段算法多樣性較好,容易找出更優(yōu)解;為最短路徑收斂曲線中的階梯下降變化,為階梯下降的時長,該時段信息啟發(fā)式與期望啟發(fā)式共同作用,算法多樣性逐漸降低,開始陷入局部最優(yōu),又跳出局部最優(yōu)的階段;為恒定兼隨機變化,為恒定兼隨機變化的時長,該時期算法的多樣性較低,已經(jīng)陷入局部最優(yōu)問題,若能跳出局部最優(yōu),則為隨機變化,若未能跳出局部最優(yōu),則為長期恒定變化;為完整收斂曲線,為各階段時長的總和。

    上述通過結(jié)合時間序列的思想,分析了蟻群算法最短路徑的變化曲線,將蟻群算法迭代周期分為三種階段時期,在不同時期算法具有不同的需求,而當(dāng)信息素揮發(fā)算子設(shè)置為定值時,無法動態(tài)調(diào)整信息素在各個階段發(fā)揮不同的作用,對算法整體的適應(yīng)性較差。因此本文提出一種價格波動策略,將影響價格波動的供求關(guān)系進行匹配,對信息素揮發(fā)因子進行動態(tài)調(diào)整,用于全局信息素更新公式中,來平衡算法各階段不同時期的需求。

    在算法運行前期,即A 階段,最優(yōu)路徑曲線處于極速下降變化階段,此時路徑信息素積累量較少,此時若將信息素揮發(fā)因子設(shè)定為較大值,雖然會削弱正反饋的作用,但此時算法會將期望啟發(fā)式因子作為主導(dǎo)地位,從而使螞蟻容易聚集在期望啟發(fā)式因子最強的路徑,變?yōu)轭愗澬乃惴?,容易陷入局部最?yōu);而將信息素揮發(fā)算子設(shè)為較小值時,有助于加快算法前期的收斂速度,因此在算法前期設(shè)置信息素揮發(fā)因子為較小值。在算法運行前中期,即B 階段,最優(yōu)路徑曲線呈階梯下降階段,路徑信息素積累較為密集,易陷入局部最優(yōu),此時采用較大值的信息素揮發(fā)因子,來平衡最優(yōu)路徑與其他路徑的差異性,使螞蟻選擇其他路徑的可能性增大,從而增加探索更優(yōu)解的概率。在算法運行中后期,即C 階段,最優(yōu)路徑曲線呈恒定兼隨機變化,算法跳出局部最優(yōu)能力較弱,并在當(dāng)前最優(yōu)解上浪費了大量時間成本,因此此時應(yīng)適當(dāng)增加算法的收斂速度,應(yīng)減小信息素揮發(fā)因子,以實現(xiàn)算法后期的快速收斂。

    綜合上述分析,并結(jié)合MMAS 的范圍限制思想,本文構(gòu)建一種服從高斯分布的自適應(yīng)信息素揮發(fā)因子。

    圖2 全局信息素揮發(fā)因子Fig.2 Global pheromone volatilization factor

    由圖2 可知,在算法前期的A 階段,服從高斯分布的自適應(yīng)信息素揮發(fā)因子將處于較小值,滿足算法前期信息素揮發(fā)因子較小的需求;當(dāng)算法運行至中前期的B 階段,此時算法路徑信息素積累逐漸密集,且隨迭代數(shù)的增加與解的精度的提高,算法陷入局部最優(yōu)后再跳出局部最優(yōu)的能力逐漸減弱,此時需要信息素揮發(fā)因子也隨之增加,而服從高斯分布的自適應(yīng)信息素揮發(fā)因子隨迭代數(shù)增加而增加,滿足此階段的需求;在算法中后期的C 階段,最優(yōu)路徑信息素的積累達到較大值,隨迭代數(shù)的增加與信息素的積累,算法跳出局部最優(yōu)的概率逐漸降低,此時算法會在當(dāng)前最優(yōu)解上浪費大量的時間成本,此時服從高斯分布的信息素揮發(fā)因子隨迭代數(shù)逐步減小,提升算法后期的收斂速度,滿足此階段的需求。

    服從高斯分布的自適應(yīng)信息素揮發(fā)因子公式如下所示:

    全局信息素更新公式為:

    其中,是位置參數(shù),這里設(shè)定為1 000;>0 是尺度參數(shù);是調(diào)整倍數(shù)。通過調(diào)整和的值,使信息素揮發(fā)因子范圍保持在圖中各分布區(qū)間,對于具體參數(shù)選擇,在后續(xù)實驗中會進行分析對比,選出一組相對較好的參數(shù)。

    2.2 動態(tài)回溯機制

    動態(tài)回溯思想受中值法與最優(yōu)化估計算法啟發(fā),在進行優(yōu)化計算時通過取區(qū)間中值來對最優(yōu)解不斷逼近,當(dāng)一次中值法結(jié)束,對最優(yōu)解存在區(qū)間再次進行中值法,循環(huán)往復(fù)直至逼近最優(yōu)解或得到最優(yōu)解。而在蟻群算法中,常常會遇到陷入局部最優(yōu)的問題,導(dǎo)致算法在較優(yōu)解而非最優(yōu)解浪費大量時間成本,并且解的精度提升較小,因此提出一種動態(tài)回溯機制來實現(xiàn)跳出局部最優(yōu),改善解的質(zhì)量。信息素是蟻群算法的核心因素,螞蟻通過信息素的積累來進行下一個城市的選擇,而動態(tài)回溯機制正是通過將路徑信息素回溯至個體相似度差異顯著的時期,此時在未完全陷入局部最優(yōu)的同時,保留路徑信息素的完整性,區(qū)別于將信息素初始化的大災(zāi)變,節(jié)省時間成本,并能有效地跳出局部最優(yōu)。

    動態(tài)回溯的核心在于將信息素重置為較優(yōu)迭代時刻,在判斷重置為哪些較優(yōu)迭代時刻的選擇問題上,本文借助個體相似度作為標(biāo)準(zhǔn),來判斷信息素較好的較優(yōu)時刻,從而進行動態(tài)回溯。

    該機制首先要對是否陷入局部最優(yōu)進行判斷,傳統(tǒng)判斷局部最優(yōu)方式為若干代的至今最短路徑是否均相等,此類判斷方法需要在每次迭代結(jié)束后將最優(yōu)路徑與若干代前每一代的最優(yōu)路徑進行對比,浪費了時間成本。本文借助斐波那契數(shù)列來對陷入局部最優(yōu)進行判定,通過斐波那契數(shù)列的抽樣方式,結(jié)合價格波動策略不同階段時期的特殊情況,對算法是否陷入局部最優(yōu)進行判定,在算法前期的A 階段,算法基本不會出現(xiàn)陷入局部最優(yōu)的情況;在算法前中期的B 階段,算法會在陷入局部持續(xù)較短迭代數(shù),再跳出局部,此時斐波那契數(shù)列抽樣的最大樣本數(shù)會相應(yīng)減小;在算法中后期的C 階段,算法會陷入局部最優(yōu),并持續(xù)較長迭代數(shù),此時斐波那契數(shù)列抽樣的最大樣本數(shù)會相應(yīng)增加。如圖3 所示,對比傳統(tǒng)局部最優(yōu)判定方式,假設(shè)樣本迭代數(shù)為50 代,即連續(xù)50 代的最短路徑均相等,最短路徑不發(fā)生變化時,判定算法陷入局部最優(yōu);而斐波那契數(shù)列抽樣的方式,在算法前中期設(shè)置最大樣本數(shù)為30,即可通過抽樣第1、2、3、5、8、13 和21 這7 組迭代樣本的最短路徑進行比較,從而判定算法是否陷入局部最優(yōu)。在算法中后期適當(dāng)提高最大樣本數(shù),設(shè)置最大樣本數(shù)為50,抽樣方式同理。隨著斐波那契數(shù)列的遞進,樣本抽樣跨度顯著提高,可以省去檢測大量重復(fù)樣本的時間。采用斐波那契數(shù)列抽樣進行局部最優(yōu)的判定,其優(yōu)點在于能通過抽樣的方式快捷合理地判斷是否陷入局部最優(yōu),節(jié)約時間成本,并結(jié)合動態(tài)回溯機制實現(xiàn)跳出局部最優(yōu),使算法解的精度得到較好的提升。

    圖3 斐波那契數(shù)列抽樣對比圖Fig.3 Comparison chart of Fibonacci sequence sampling

    在算法運行時,若出現(xiàn)下一代最優(yōu)路徑與至今最優(yōu)路徑相等,則調(diào)用斐波那契數(shù)列函數(shù)進行判定,設(shè)定當(dāng)前代斐波那契數(shù)為1,下一代斐波那契數(shù)為2,校驗后續(xù)滿足斐波那契數(shù)列代數(shù)的最優(yōu)路徑,若經(jīng)過斐波那契數(shù)列抽樣后的最優(yōu)路徑都相等,則判定算法陷入局部最優(yōu)。斐波那契抽樣函數(shù)公式如下:

    其中,為抽樣時刻;=1 為采樣周期;()為斐波那契函數(shù);為整數(shù)。

    若抽樣得到的最短路徑均相等,則判定算法陷入局部最優(yōu),此時對下一代螞蟻的路徑信息素進行回溯,通過式(14)相似度判別公式作為判定條件,回溯到滿足此條件且距離當(dāng)前迭代數(shù)最近的較優(yōu)代,根據(jù)式(15)重置其信息素,使其信息素回溯至若干代前個體相似度差異顯著的時期,借助此時跳出局部最優(yōu)能力更強的信息素重新進行路徑尋優(yōu),迭代代,若仍未跳出局部最優(yōu)則再次使用式(14),找出滿足條件的下一個較優(yōu)代,再次進行信息素回溯,以此循環(huán)直至跳出局部最優(yōu)或達到迭代最大代數(shù),動態(tài)回溯示意圖與動態(tài)回溯機制流程圖如圖4、圖5 所示。

    其中,為個體相似度判定算子,為0 至1 的某一常數(shù)??紤]到取1 時,等同于將信息素重置為與至今最優(yōu)路徑相同的路徑信息素,并不一定能實現(xiàn)跳出局部最優(yōu)。為滿足相似度判別公式時的迭代數(shù)。為信息素回溯后的迭代數(shù),與成正比,當(dāng)個體相似度高時,回溯的較優(yōu)代與此時代數(shù)相差步長較小,陷入局部最優(yōu)嚴重,需要迭代時間加長;反之當(dāng)個體相似度低時,回溯的較優(yōu)代與此時代數(shù)相差較大,信息素差異明顯,此時迭代時間適當(dāng)縮小。

    圖4 動態(tài)回溯示意圖Fig.4 Dynamic backtracking diagram

    圖5 動態(tài)回溯機制流程圖Fig.5 Flow chart of dynamic backtracking mechanism

    當(dāng)價格波動策略難以通過自適應(yīng)調(diào)整信息素揮發(fā)因子來滿足算法的需求時,算法陷入局部最優(yōu)問題,此時將會啟用動態(tài)回溯機制,使跳出局部最優(yōu)成為算法的首要任務(wù),通過式(17)強制提升信息素揮發(fā)因子,使其達到最大值,來更好地解決跳出局部最優(yōu)問題。

    其中,為價格波動策略的最大揮發(fā)因子值,當(dāng)(,)≤時,算法已經(jīng)陷入局部最優(yōu),強制全局信息素揮發(fā)因子調(diào)整為最大值。

    2.3 算法流程

    初始化參數(shù),=0。

    將只螞蟻隨機分配到各個節(jié)點。

    根據(jù)ACS 算法進行迭代,根據(jù)式(10)自適應(yīng)調(diào)整信息素揮發(fā)因子,將式(11)作為全局最優(yōu)更新公式進行信息素更新。

    若發(fā)現(xiàn)相鄰兩代最優(yōu)路徑的距離相同,調(diào)用斐波那契函數(shù)進行抽樣,若抽樣后的最優(yōu)路徑距離不全部相同,則跳回步驟3;若抽樣后的最優(yōu)路徑距離完全相同,則跳到步驟5。

    當(dāng)算法陷入局部最優(yōu)時,根據(jù)式(14)進行動態(tài)回溯,匹配滿足個體相似度算子的迭代數(shù),記錄至今最優(yōu)路徑,根據(jù)式(15)將對應(yīng)的信息素賦予下一代。

    以重置后的信息素進行次迭代,若迭代數(shù)達到最大迭代時,則找到并輸出最優(yōu)解;若未達到時,則對比當(dāng)前最優(yōu)路徑與至今最優(yōu)路徑,若當(dāng)前最優(yōu)路徑小于至今最優(yōu)路徑,則跳出局部最優(yōu),跳至步驟7;若不小于至今最優(yōu)路徑,則取滿足式(14)的下一個最近迭代數(shù)時的信息素回溯,跳回步驟6。

    重復(fù)上述步驟2~6,直至迭代次,找到并輸出最優(yōu)解。

    2.4 算法復(fù)雜度分析

    雖然本文通過回溯信息素濃度的方式實現(xiàn)跳出局部最優(yōu),但并未對迭代總數(shù)進行改變。從上述算法流程的分析可以看出,本文算法總的迭代數(shù)為,假設(shè)算法在第1 代陷入局部最優(yōu),動態(tài)回溯機制會將若干代前滿足相似度標(biāo)準(zhǔn)的該代信息素賦予1代,并運行1 代,若無法跳出局部最優(yōu)則繼續(xù)向前尋找滿足相似度標(biāo)準(zhǔn)的信息素,賦予第(1+1)代。以此循環(huán),假設(shè)迭代數(shù)達到代也未能跳出局部最優(yōu),則運行總代數(shù)為(1+1+2+…+)代,其中=1+1+2+…+;若假設(shè)在運行代時實現(xiàn)跳出局部最優(yōu),則當(dāng)前運行代數(shù)為(1+1+2+…+),隨后運行-(1+1+2+…+)代。綜上所述,算法迭代總數(shù)仍為,螞蟻的數(shù)量是,城市數(shù)為,在每次迭代時因為禁忌表的使用,每只螞蟻只能搜尋除自身初始城市外的城市,即-1 個城市,因此算法的時間復(fù)雜度為(××(-1))即(××),與傳統(tǒng)ACS 算法的時間復(fù)雜度相同。

    3 實驗對比與結(jié)果分析

    為檢驗PBACO 的算法性能,本文實驗使用Windows10 系統(tǒng),MATLAB2016a 版本的仿真環(huán)境,選取國際標(biāo)準(zhǔn)TSP 數(shù)據(jù)庫的多組數(shù)據(jù)集進行仿真實驗。

    3.1 節(jié)將進行公共參數(shù)、價格波動策略與動態(tài)回溯機制的參數(shù)設(shè)置。首先引用文獻[7]的公共參數(shù),為了檢驗后續(xù)參數(shù)的性能,采用控制變量法,后續(xù)全部實驗將在統(tǒng)一的公共參數(shù)上進行。在設(shè)置價格波動策略參數(shù)中,以KroA100 作為數(shù)據(jù)集,將圖1 中動態(tài)揮發(fā)因子的九組不同區(qū)間參數(shù),與全局信息素揮發(fā)因子為恒定值0.3 時的算法作對比,通過比較30 次獨立實驗中的最小誤差率、滿足誤差率在0.5%的比例和平均解,來分析揮發(fā)因子的動態(tài)調(diào)整所改善的性能;同時挑出幾組較優(yōu)的區(qū)間參數(shù),在A200 數(shù)據(jù)集上進行30 次獨立實驗,再次與恒值為0.3 時的算法作對比,通過分析對比更大規(guī)模數(shù)據(jù)集的結(jié)果,再次驗證算法的改善,并選出一組最佳參數(shù)。最后分析動態(tài)回溯機制的個體相似度判定因子對性能的影響,綜合分析后確定其取值。

    3.2 節(jié)將進行算法的性能分析,分析不同改進方法的作用。在數(shù)據(jù)集eil76、KroA150 與tsp225 進行仿真實驗,分別對ACS、ACS+波動平衡策略、ACS+波動平衡策略+動態(tài)回溯機制進行20 次仿真實驗,通過對比實驗分析各改進方法的作用及優(yōu)勢。

    3.3 節(jié)將在多組數(shù)據(jù)集中對ACS、ACS+3opt 與PBACO 算法進行仿真實驗,證明本文算法性能更優(yōu),有效改善了蟻群算法解的質(zhì)量,較好地平衡了解的多樣性與收斂速度的關(guān)系。

    3.4 節(jié)將會與其他最新改進算法進行對比分析,再次驗證本文改進算法的性能。

    3.1 實驗參數(shù)設(shè)置

    本文在ACS的基礎(chǔ)上進行多次實驗,測試了多組參數(shù)對算法性能的敏感性作用,統(tǒng)計發(fā)現(xiàn)公共參數(shù)為表1 所示參數(shù)時效果更好。因此,在本文后續(xù)實驗中,在表1 公共參數(shù)不變的基礎(chǔ)上測試其他參數(shù),進行敏感性分析。

    表1 PBACO 的公共參數(shù)設(shè)置Table 1 Public parameter setting of PBACO

    表1 中,為信息啟發(fā)因子,影響信息素在路徑構(gòu)建的作用,越小,螞蟻探索非最優(yōu)路徑的概率增加,解的多樣性變好,但容易使期望啟發(fā)因子作用加強而陷入局部最優(yōu);為期望啟發(fā)因子,越大,螞蟻選擇距離最短路徑的概率加大,收斂速度加快,但多樣性會降低;為局部信息素揮發(fā)率,揮發(fā)率過小時,會容易陷入局部最優(yōu),揮發(fā)率過大時,會影響最優(yōu)路徑的探索;為螞蟻數(shù)量,螞蟻數(shù)量越大,得到的解越多,算法精度相應(yīng)提升,但會增加時間成本,影響收斂速度;為式(1)的判別閾值,越大,算法探索信息素與距離更短的路徑概率越大,收斂速度加快,但多樣性降低;為總迭代數(shù)。

    表2 節(jié)點分配組合表Table 2 Node allocation combination table

    首先將圖2 中的9 組區(qū)間參數(shù),與=0.3 在公共參數(shù)相同的基礎(chǔ)上進行實驗對比,在KroA100數(shù)據(jù)集上進行獨立實驗30 次,得到的運行結(jié)果如表3 所示。

    以=0.3 作對比,觀察表3 可知,在KroA100 數(shù)據(jù)集上,各組參數(shù)均能找到最優(yōu)解;在0.1~0.3 區(qū)間時,其滿足誤差率比例與平均解都最優(yōu),同時參數(shù)為0.1~0.5、0.1~0.9、0.3~0.7 與0.5~0.9 在平均解上都略優(yōu)于0.3,前三組參數(shù)在滿足誤差率比例上與0.3 持平,雖然0.5~0.9 略低,但在后續(xù)仿真時也加入實驗,避免遺失潛在優(yōu)質(zhì)參數(shù)。通過表3 數(shù)據(jù)可知,價格波動策略在算法各時期對的動態(tài)調(diào)整,對算法性能具有一定改善作用。

    表3 不同區(qū)間ρ 在KroA100 對蟻群算法性能的影響Table 3 Effect of different interval ρ in KroA100 on performance of ant colony algorithm

    為了確定最佳參數(shù),同時驗證算法性能,將以上較優(yōu)的參數(shù)在KroA200 數(shù)據(jù)集上再次進行獨立實驗30 次,得到的運行結(jié)果如表4 所示。

    表4 不同區(qū)間ρ 在KroA200 對蟻群算法性能的影響Table 4 Effect of different interval ρ in KroA200 on performance of ant colony algorithm

    以=0.3 作對比,觀察表4 可知,在KroA200 數(shù)據(jù)集上,參數(shù)為0.1~0.3 和0.1~0.5 在最小誤差率上最小,能找到精確解的能力優(yōu)于其余參數(shù),證明此時參數(shù)會使解的質(zhì)量得到提升;在滿足誤差率比例上,參數(shù)為0.1~0.3 和0.1~0.5 均以40%比例高于其他參數(shù),此時參數(shù)穩(wěn)定性能優(yōu)于其他參數(shù);最后通過比較15組實驗最短路徑的平均解,發(fā)現(xiàn)參數(shù)0.1~0.5 的平均解優(yōu)于參數(shù)0.1~0.3,雖然在滿足誤差率比例上兩者持平,但從平均解分析可發(fā)現(xiàn)參數(shù)0.1~0.5 在解的質(zhì)量上會略優(yōu),因此確定波動平衡策略的參數(shù)區(qū)間為0.1~0.5,根據(jù)式(6),可計算出=577.4,=698.6。

    動態(tài)回溯機制中參數(shù)設(shè)置涉及個體相似度判定因子,值越大,個體與最優(yōu)螞蟻的路徑相似度越高,越難跳出局部最優(yōu),值越小,路徑差異越明顯,但此時也要花費較多的時間成本。綜合上述分析并在多組數(shù)據(jù)集上進行實驗,發(fā)現(xiàn)在算法陷入局部最優(yōu)后,回溯至前300 代,個體相似度可降至0.95,回溯至前500 代,個體相似度可降至0.9,再往前回溯雖然個體相似度會較快下降,但其原因是已經(jīng)貼近初始運行時期,類似于大災(zāi)變,因此綜合考慮將值設(shè)定為0.9。

    3.2 算法性能分析

    為了驗證PBACO 算法各個改進策略的作用,本文將不同策略組合為三組優(yōu)化方案,分別在數(shù)據(jù)集eil76、KroA150 與tsp225 進行仿真實驗,優(yōu)化方案如表5 所示。每組優(yōu)化方案在各數(shù)據(jù)集進行20 次獨立實驗,并統(tǒng)計各組方案的最優(yōu)解、最優(yōu)解誤差率、平均解與迭代次數(shù),并結(jié)合收斂曲線與多樣性曲線來進行對比與分析,統(tǒng)計結(jié)果如表6 和圖6 所示。

    表5 優(yōu)化方案表Table 5 Optimization scheme table

    表6 優(yōu)化方案性能對比表Table 6 Performance comparison table of optimization scheme

    從eil76 數(shù)據(jù)集的實驗結(jié)果可以發(fā)現(xiàn),A、B、C 方案都可以找到最優(yōu)解,但是B、C 方案在收斂速度上明顯優(yōu)于ACS 算法,并且更快速地跳出局部最優(yōu)找到最優(yōu)解,能夠較好地平衡算法多樣性與收斂速度,同時從平均解可以看出,改進算法的穩(wěn)定性也優(yōu)于ACS 算法。

    圖6 各測試集收斂情況Fig.6 Convergence of each test set

    從KroA150 數(shù)據(jù)集的實驗結(jié)果可以發(fā)現(xiàn),在迭代前期,B 方案通過價格波動策略在短時間內(nèi)就能夠找到較優(yōu)解,優(yōu)于A 方案,C 方案雖然因為陷入局部最優(yōu),未找到較優(yōu)解,但在300 代左右仍能快速跳出,并找到優(yōu)于A、B 方案的更優(yōu)解。在迭代中后期陷入局部最優(yōu)后,B 方案通過價格波動策略,最先使算法跳出局部最優(yōu),但解的精度不高;在此基礎(chǔ)上改進的C 方案通過動態(tài)回溯機制,進一步跳出局部最優(yōu),使算法整體解的精度得到較好的改善。

    從tsp225 數(shù)據(jù)集的實驗結(jié)果可以發(fā)現(xiàn),B、C 方案在前期收斂速度與探索較優(yōu)解的能力明顯優(yōu)于A 方案,在中后期的收斂曲線中,C 方案借助動態(tài)回溯策略,在更高精度的解中多次跳出局部最優(yōu),找到更優(yōu)解,同時結(jié)合表6 中的最優(yōu)解與平均解可以發(fā)現(xiàn),C方案在解的精度上得到了有效提升,并且相比A、B方案,解的穩(wěn)定性也得到了明顯改善。

    3.3 與傳統(tǒng)蟻群算法對比分析

    為了分析PBACO 算法在不同規(guī)模數(shù)據(jù)集的性能,將ACS、ACS+3opt、PBACO 算法應(yīng)用于不同城市規(guī)模的TSP 實例中,其中ACS 與ACS+3opt 為傳統(tǒng)判定局部最優(yōu)方式,PBACO 算法中的動態(tài)回溯機制為斐波那契數(shù)列抽樣方式判定是否陷入局部最優(yōu),結(jié)果如表7、圖7 和圖8 所示。

    圖7 PBACO 算法在部分城市集最短路徑Fig.7 Optimal path of PBACO algorithm for part of city sets

    圖8 部分城市集收斂情況Fig.8 Convergence for part of city sets

    圖7 和圖8 按順序分別展示了改進算法在eil76、KroA100、KroB100、ch130、ch150、KroA150、KroB150、KroA200、KroB200、tsp225、a280 和lin318 城市集中的最短路徑和收斂情況。從表7、圖7 和圖8 可以看出,在小規(guī)模城市集中,三種算法均能找到最優(yōu)解,但ACS 與ACS+3opt 的收斂速度明顯慢于PBACO 算法,改進算法在前期通過價格波動策略對算法進行改善,能夠較快收斂且找到精度較高的解。城市數(shù)在100 至200 之間的中規(guī)模城市集中,傳統(tǒng)算法無法找到ch130 的最優(yōu)解,而改進算法能通過中后期的動態(tài)回溯機制跳出局部最優(yōu),找到最優(yōu)解;對于ch150、KroA150 與KroB150,PBACO 算法相比傳統(tǒng)算法均能有效地提高解的精度,并且在KroB150 城市集能精確找到最優(yōu)解,同時找到最優(yōu)解的迭代數(shù)明顯縮減。在城市數(shù)大于200 的城市集中,從表7 中可以發(fā)現(xiàn),PBACO 算法在解的精度上得到了較大的改善,并且找到最優(yōu)解的迭代數(shù)也有部分減少,其中KroA200找到貼近最優(yōu)解的較優(yōu)解,KroA200 與a280 在改善解的精度的同時將收斂速度提升,雖然在tsp225 城市集中PBACO 迭代數(shù)較大,但在動態(tài)回溯機制的作用下,多次跳出局部最優(yōu),找到更優(yōu)解。在大規(guī)模城市集lin318 中,雖然在迭代前期PBACO 算法陷入短暫的局部最優(yōu),但在200 代之后算法解的精度明顯提高,在550 代相比傳統(tǒng)算法已經(jīng)找到更優(yōu)解,并在之后陷入局部最優(yōu)后,通過動態(tài)回溯機制多次跳出局部最優(yōu),將解的質(zhì)量明顯改善。

    表7 不同規(guī)模城市數(shù)據(jù)集的性能對比Table 7 Performance comparison of urban datasets of different sizes

    3.4 與至今最新改進算法對比分析

    為了進一步驗證PBACO 算法性能,本文選用至今最新改進的融合貓群算法的動態(tài)分組蟻群算法(CACS)、考慮動態(tài)導(dǎo)向與鄰域交互的雙蟻型算法(TREEACS)和文獻[11]進行比對,如表8 所示。由表8 可以看出,PBACO 算法在小規(guī)模城市中與其他算法都能找到最優(yōu)解,但在中規(guī)模城市與大規(guī)模城市中,PBACO 算法解的精度相比其他算法得到了較好的改善。

    表8 PBACO 與其他最新改進算法比較Table 8 Comparison of PBACO with other newly improved algorithms

    通過實驗分析與結(jié)果對比可知,本文改進后的PBACO 算法與傳統(tǒng)蟻群算法ACS、ACS+3opt和至今最新改進的蟻群算法相比,解的精度與收斂性都有明顯的改善。

    4 結(jié)束語

    針對傳統(tǒng)蟻群算法存在易陷入局部最優(yōu)、收斂速度較慢等問題,本文提出一種結(jié)合價格波動策略與動態(tài)回溯機制的蟻群優(yōu)化算法(PBACO)。通過價格波動策略,以時間序列分析的思想將算法不同需求的時期進行分類,以價格波動平衡的供求思想對信息素揮發(fā)因子進行自適應(yīng)動態(tài)供給,在保證收斂速度的同時增大跳出局部最優(yōu)的能力,能夠有效地改善解的質(zhì)量。在算法陷入局部最優(yōu)后,引入動態(tài)回溯機制,以迭代最優(yōu)螞蟻的個體相似度作為標(biāo)準(zhǔn),將路徑信息素回溯至相似度差異顯著的時期,在保證收斂速度的同時能夠有效地跳出局部最優(yōu),明顯改善解的精度,并且保證解的穩(wěn)定性。雖然在實驗對比中相較其他算法解的質(zhì)量得到較好的改善,但在超大規(guī)模城市集中算法解的精度還需要進一步提升,因此下一步將進行多種群合作競爭的算法研究,以提高算法在超大規(guī)模城市集中的求解能力。

    猜你喜歡
    螞蟻局部動態(tài)
    國內(nèi)動態(tài)
    國內(nèi)動態(tài)
    國內(nèi)動態(tài)
    局部分解 巧妙求值
    非局部AB-NLS方程的雙線性B?cklund和Darboux變換與非線性波
    動態(tài)
    我們會“隱身”讓螞蟻來保護自己
    螞蟻
    局部遮光器
    吳觀真漆畫作品選
    国产白丝娇喘喷水9色精品| 国产国拍精品亚洲av在线观看| 嫩草影视91久久| 永久网站在线| 成年版毛片免费区| 亚洲最大成人中文| 欧美绝顶高潮抽搐喷水| 成人永久免费在线观看视频| 91午夜精品亚洲一区二区三区| 我的女老师完整版在线观看| 99久久无色码亚洲精品果冻| 国产单亲对白刺激| 国产av麻豆久久久久久久| 波野结衣二区三区在线| 一区福利在线观看| 精品免费久久久久久久清纯| 国产视频内射| 亚洲三级黄色毛片| 亚洲欧美精品自产自拍| 日韩制服骚丝袜av| 免费搜索国产男女视频| 麻豆乱淫一区二区| 97超碰精品成人国产| 悠悠久久av| av免费在线看不卡| 最近手机中文字幕大全| 天堂影院成人在线观看| 高清毛片免费看| 91在线观看av| 日日啪夜夜撸| 天美传媒精品一区二区| 久久99热6这里只有精品| 欧美最黄视频在线播放免费| 国产免费一级a男人的天堂| 久久精品国产清高在天天线| 丝袜美腿在线中文| 中文字幕免费在线视频6| 亚洲国产日韩欧美精品在线观看| 三级国产精品欧美在线观看| 亚洲熟妇中文字幕五十中出| 亚洲精品国产av成人精品 | 中文亚洲av片在线观看爽| 搡老岳熟女国产| 国产一区二区三区在线臀色熟女| 99热6这里只有精品| 黄色欧美视频在线观看| 91久久精品电影网| 国产三级中文精品| 国产精品一二三区在线看| 国产精品人妻久久久影院| 色在线成人网| 神马国产精品三级电影在线观看| av天堂中文字幕网| 一个人看视频在线观看www免费| av黄色大香蕉| 色视频www国产| 麻豆av噜噜一区二区三区| 蜜桃亚洲精品一区二区三区| 精品午夜福利视频在线观看一区| 欧美成人精品欧美一级黄| 国内久久婷婷六月综合欲色啪| 国产又黄又爽又无遮挡在线| 国产精品一区二区免费欧美| 中文字幕久久专区| 麻豆一二三区av精品| 亚洲无线观看免费| 国产高清不卡午夜福利| 一区福利在线观看| 18禁裸乳无遮挡免费网站照片| 欧美极品一区二区三区四区| 大香蕉久久网| 色综合亚洲欧美另类图片| 亚洲欧美日韩卡通动漫| 国产精品久久电影中文字幕| 亚洲精品一卡2卡三卡4卡5卡| 深夜a级毛片| 欧美性感艳星| 秋霞在线观看毛片| 日韩成人伦理影院| 亚洲精品日韩av片在线观看| 两个人视频免费观看高清| 蜜桃亚洲精品一区二区三区| 白带黄色成豆腐渣| 美女黄网站色视频| 国产片特级美女逼逼视频| 亚洲在线观看片| 欧美三级亚洲精品| 久久久久久久午夜电影| 夜夜夜夜夜久久久久| 精品99又大又爽又粗少妇毛片| 成人美女网站在线观看视频| 亚洲三级黄色毛片| 国产精品人妻久久久久久| 网址你懂的国产日韩在线| 亚洲激情五月婷婷啪啪| 亚洲av中文av极速乱| 国产老妇女一区| 黄色日韩在线| 熟女电影av网| 国产午夜精品久久久久久一区二区三区 | 国产真实乱freesex| 国产亚洲av嫩草精品影院| 免费在线观看成人毛片| 桃色一区二区三区在线观看| 国产久久久一区二区三区| 国产色爽女视频免费观看| 久久久久国产网址| 变态另类成人亚洲欧美熟女| 看免费成人av毛片| 人妻夜夜爽99麻豆av| 午夜福利在线在线| 久久精品久久久久久噜噜老黄 | 欧美中文日本在线观看视频| 亚洲在线观看片| 中文字幕av在线有码专区| 亚洲经典国产精华液单| 成人毛片a级毛片在线播放| 在线观看免费视频日本深夜| 国产极品精品免费视频能看的| 国产女主播在线喷水免费视频网站 | 国产精品一区二区免费欧美| 国产亚洲精品av在线| 在线观看66精品国产| 91午夜精品亚洲一区二区三区| 日韩一本色道免费dvd| 最新中文字幕久久久久| 18禁黄网站禁片免费观看直播| 免费av毛片视频| 成人特级av手机在线观看| 久久韩国三级中文字幕| 国产黄色小视频在线观看| 一个人观看的视频www高清免费观看| 日日摸夜夜添夜夜爱| 国产欧美日韩一区二区精品| 久久久久久大精品| 国产男人的电影天堂91| 观看美女的网站| 在线免费十八禁| 欧美色欧美亚洲另类二区| 久久久久性生活片| 国产亚洲欧美98| 亚洲不卡免费看| 国产精品不卡视频一区二区| 你懂的网址亚洲精品在线观看 | 久久久久性生活片| 国产 一区 欧美 日韩| 欧美最黄视频在线播放免费| 精品熟女少妇av免费看| 婷婷精品国产亚洲av在线| 午夜a级毛片| 国产成年人精品一区二区| 国产成年人精品一区二区| 亚洲内射少妇av| av卡一久久| 99热全是精品| 久久久精品大字幕| av福利片在线观看| 老熟妇仑乱视频hdxx| 久久久久久久久久黄片| 噜噜噜噜噜久久久久久91| 久久午夜亚洲精品久久| 亚洲欧美精品综合久久99| 人妻丰满熟妇av一区二区三区| 中国美白少妇内射xxxbb| 亚洲一区二区三区色噜噜| 男人舔奶头视频| 日韩欧美三级三区| 精品免费久久久久久久清纯| 最近的中文字幕免费完整| 美女 人体艺术 gogo| 国产精品久久电影中文字幕| 国产午夜精品论理片| 国产老妇女一区| 五月伊人婷婷丁香| 99在线人妻在线中文字幕| 毛片一级片免费看久久久久| 欧美色欧美亚洲另类二区| 日日摸夜夜添夜夜添小说| 1000部很黄的大片| 亚洲av美国av| 国产精品av视频在线免费观看| 激情 狠狠 欧美| 免费搜索国产男女视频| 国产人妻一区二区三区在| 亚洲在线自拍视频| 亚洲专区国产一区二区| 午夜福利18| 国产成人福利小说| 一区二区三区四区激情视频 | 一个人观看的视频www高清免费观看| 日本撒尿小便嘘嘘汇集6| 成人亚洲精品av一区二区| 中文在线观看免费www的网站| 欧美+日韩+精品| 欧美三级亚洲精品| 久久久成人免费电影| 亚洲国产精品成人综合色| 久久天躁狠狠躁夜夜2o2o| 99久国产av精品国产电影| 午夜福利视频1000在线观看| 免费看日本二区| 特级一级黄色大片| 日韩av不卡免费在线播放| 少妇丰满av| 亚洲性夜色夜夜综合| 欧美成人a在线观看| 午夜激情欧美在线| 内地一区二区视频在线| 老师上课跳d突然被开到最大视频| 亚洲丝袜综合中文字幕| 看免费成人av毛片| 又粗又爽又猛毛片免费看| 亚洲一级一片aⅴ在线观看| 一个人观看的视频www高清免费观看| 欧美色欧美亚洲另类二区| 日日摸夜夜添夜夜添小说| 免费观看在线日韩| 99热只有精品国产| 18禁在线无遮挡免费观看视频 | av免费在线看不卡| 亚洲av第一区精品v没综合| 午夜激情福利司机影院| 又黄又爽又刺激的免费视频.| 两性午夜刺激爽爽歪歪视频在线观看| 国产老妇女一区| 成年版毛片免费区| 小说图片视频综合网站| 3wmmmm亚洲av在线观看| 露出奶头的视频| 久久久久九九精品影院| 欧美另类亚洲清纯唯美| 国产精品乱码一区二三区的特点| 91久久精品电影网| 久久亚洲精品不卡| 乱人视频在线观看| 欧美丝袜亚洲另类| 成人一区二区视频在线观看| 夜夜看夜夜爽夜夜摸| 少妇丰满av| 久久午夜福利片| 美女高潮的动态| 国产色爽女视频免费观看| 午夜视频国产福利| 小说图片视频综合网站| 五月伊人婷婷丁香| 欧美性猛交╳xxx乱大交人| 最后的刺客免费高清国语| 能在线免费观看的黄片| 在线观看午夜福利视频| aaaaa片日本免费| 午夜免费男女啪啪视频观看 | 在线观看美女被高潮喷水网站| 狂野欧美白嫩少妇大欣赏| 联通29元200g的流量卡| 在线观看免费视频日本深夜| 日本色播在线视频| 日本免费a在线| 一本久久中文字幕| 久久久国产成人精品二区| 国产精品不卡视频一区二区| 国产三级在线视频| 亚洲性夜色夜夜综合| 欧美xxxx性猛交bbbb| 国产在线男女| 婷婷精品国产亚洲av在线| 亚洲最大成人av| 国产视频内射| 国产亚洲精品综合一区在线观看| 久久热精品热| 国产欧美日韩精品亚洲av| 好男人在线观看高清免费视频| 99热这里只有是精品50| 久久99热这里只有精品18| 免费看av在线观看网站| 久久欧美精品欧美久久欧美| 午夜免费激情av| 国产亚洲精品综合一区在线观看| 国产一区二区亚洲精品在线观看| 国产探花在线观看一区二区| 深夜精品福利| 中文在线观看免费www的网站| av国产免费在线观看| 国产成人aa在线观看| 国产视频一区二区在线看| 男女之事视频高清在线观看| 国产精品亚洲美女久久久| 女生性感内裤真人,穿戴方法视频| 国产aⅴ精品一区二区三区波| 搡老岳熟女国产| 免费在线观看成人毛片| 男人舔奶头视频| 99在线视频只有这里精品首页| av福利片在线观看| 最近中文字幕高清免费大全6| 99久久精品一区二区三区| 在线免费观看的www视频| 晚上一个人看的免费电影| 国产精品久久久久久亚洲av鲁大| 美女 人体艺术 gogo| 国产免费一级a男人的天堂| 日韩欧美精品免费久久| 欧美区成人在线视频| 日日干狠狠操夜夜爽| 午夜日韩欧美国产| 人人妻,人人澡人人爽秒播| 听说在线观看完整版免费高清| 国内久久婷婷六月综合欲色啪| 亚洲av不卡在线观看| 国产白丝娇喘喷水9色精品| 免费电影在线观看免费观看| 少妇高潮的动态图| 日韩国内少妇激情av| 黄色日韩在线| 蜜臀久久99精品久久宅男| 国产高清激情床上av| 欧美在线一区亚洲| 亚洲av五月六月丁香网| 久久鲁丝午夜福利片| 一个人看的www免费观看视频| 97碰自拍视频| 搡老岳熟女国产| 亚洲高清免费不卡视频| 国产欧美日韩一区二区精品| 亚洲性久久影院| 少妇被粗大猛烈的视频| 简卡轻食公司| 老熟妇仑乱视频hdxx| 欧美zozozo另类| 亚洲性久久影院| 久久久久久久久大av| 高清毛片免费看| 天天躁夜夜躁狠狠久久av| 麻豆成人午夜福利视频| 国语自产精品视频在线第100页| 天美传媒精品一区二区| 欧美最黄视频在线播放免费| 国产精品一区二区三区四区久久| 又爽又黄无遮挡网站| 国产精品久久久久久亚洲av鲁大| 国产亚洲av嫩草精品影院| 国产熟女欧美一区二区| 久久久久久久午夜电影| 国产亚洲精品综合一区在线观看| 久久精品综合一区二区三区| 老师上课跳d突然被开到最大视频| 22中文网久久字幕| 国产成人aa在线观看| 国产精品亚洲美女久久久| 波多野结衣高清作品| 亚洲婷婷狠狠爱综合网| 国产精品精品国产色婷婷| 日韩欧美一区二区三区在线观看| 乱人视频在线观看| 国产精品一二三区在线看| 老女人水多毛片| 国语自产精品视频在线第100页| 国产高清视频在线播放一区| 亚洲欧美成人综合另类久久久 | 啦啦啦啦在线视频资源| 日本黄大片高清| 色综合站精品国产| 国产av麻豆久久久久久久| 最好的美女福利视频网| 免费看av在线观看网站| 搡老岳熟女国产| 亚洲成人久久爱视频| ponron亚洲| 天天躁日日操中文字幕| 国产精品久久久久久久电影| 欧美激情在线99| 久久鲁丝午夜福利片| 国产高清视频在线观看网站| 免费一级毛片在线播放高清视频| 久久久精品欧美日韩精品| 国产aⅴ精品一区二区三区波| 久久中文看片网| 99热这里只有是精品在线观看| 亚洲精品一区av在线观看| 欧美成人一区二区免费高清观看| 伦理电影大哥的女人| 九九热线精品视视频播放| 久久精品夜色国产| 又粗又爽又猛毛片免费看| 校园人妻丝袜中文字幕| 欧美潮喷喷水| 最好的美女福利视频网| 老司机福利观看| 欧美三级亚洲精品| 毛片一级片免费看久久久久| 久久久久久久亚洲中文字幕| 久久久久久久久久黄片| 男人和女人高潮做爰伦理| 国产高潮美女av| 日韩精品青青久久久久久| 好男人在线观看高清免费视频| 成人av一区二区三区在线看| aaaaa片日本免费| 亚洲自拍偷在线| 在线免费十八禁| 久久精品人妻少妇| 插阴视频在线观看视频| 成人av一区二区三区在线看| 久久人人爽人人爽人人片va| 波多野结衣巨乳人妻| 少妇被粗大猛烈的视频| 桃色一区二区三区在线观看| 欧美日韩一区二区视频在线观看视频在线 | 不卡视频在线观看欧美| 香蕉av资源在线| 精品久久久久久久久久免费视频| 最好的美女福利视频网| 美女 人体艺术 gogo| 亚洲乱码一区二区免费版| 国内精品宾馆在线| 97碰自拍视频| 最近2019中文字幕mv第一页| 国产真实伦视频高清在线观看| 一区二区三区免费毛片| 我的老师免费观看完整版| 偷拍熟女少妇极品色| 成人精品一区二区免费| 国产一区二区三区在线臀色熟女| 亚洲图色成人| 在线观看免费视频日本深夜| 变态另类丝袜制服| 中文字幕精品亚洲无线码一区| 九九在线视频观看精品| 精品久久国产蜜桃| 又黄又爽又刺激的免费视频.| 亚洲精品日韩在线中文字幕 | 成人综合一区亚洲| 午夜福利高清视频| 最后的刺客免费高清国语| 国产精品乱码一区二三区的特点| 黄片wwwwww| 日本撒尿小便嘘嘘汇集6| 亚洲色图av天堂| 一级毛片久久久久久久久女| 老女人水多毛片| 午夜a级毛片| 一区二区三区免费毛片| 精品少妇黑人巨大在线播放 | 亚洲综合色惰| 99riav亚洲国产免费| 免费无遮挡裸体视频| 亚洲最大成人av| 色尼玛亚洲综合影院| 无遮挡黄片免费观看| 欧美色视频一区免费| 国产免费男女视频| a级毛片免费高清观看在线播放| 麻豆成人午夜福利视频| 成人永久免费在线观看视频| 久久精品91蜜桃| av在线播放精品| 最近2019中文字幕mv第一页| 成人永久免费在线观看视频| 又爽又黄无遮挡网站| 国产亚洲精品av在线| 亚洲熟妇中文字幕五十中出| 国产中年淑女户外野战色| 麻豆久久精品国产亚洲av| 一级毛片久久久久久久久女| 免费人成在线观看视频色| 国产三级中文精品| 别揉我奶头~嗯~啊~动态视频| 日本一本二区三区精品| 国产精品久久久久久亚洲av鲁大| 午夜福利18| 国产麻豆成人av免费视频| 精品少妇黑人巨大在线播放 | 久久草成人影院| 亚洲国产日韩欧美精品在线观看| 嫩草影视91久久| 午夜精品在线福利| 色5月婷婷丁香| 高清日韩中文字幕在线| 国产v大片淫在线免费观看| 婷婷精品国产亚洲av在线| 性插视频无遮挡在线免费观看| 日韩欧美在线乱码| 国产伦在线观看视频一区| 神马国产精品三级电影在线观看| 一级毛片电影观看 | 青春草视频在线免费观看| 一区二区三区高清视频在线| 男女边吃奶边做爰视频| 国产乱人偷精品视频| 国内少妇人妻偷人精品xxx网站| 禁无遮挡网站| 国产精品野战在线观看| 精品午夜福利在线看| 国产精品一区www在线观看| 国产精品不卡视频一区二区| 国产亚洲精品久久久久久毛片| 欧美激情在线99| 久久久a久久爽久久v久久| 国产精品国产三级国产av玫瑰| 亚洲第一电影网av| 国内少妇人妻偷人精品xxx网站| 一进一出抽搐动态| 在线观看av片永久免费下载| 精品99又大又爽又粗少妇毛片| 亚州av有码| 亚洲天堂国产精品一区在线| 狂野欧美激情性xxxx在线观看| 丝袜喷水一区| 免费看美女性在线毛片视频| 亚洲专区国产一区二区| 午夜福利在线观看吧| 大型黄色视频在线免费观看| 欧美成人a在线观看| ponron亚洲| 一卡2卡三卡四卡精品乱码亚洲| 免费看光身美女| 99久久精品国产国产毛片| 日本与韩国留学比较| 桃色一区二区三区在线观看| 亚洲一级一片aⅴ在线观看| 国产亚洲精品av在线| 嫩草影院精品99| 国产老妇女一区| 美女内射精品一级片tv| 国产精品久久久久久亚洲av鲁大| 亚洲美女搞黄在线观看 | 亚洲一区高清亚洲精品| 久久久午夜欧美精品| 亚洲国产精品国产精品| 欧美日韩精品成人综合77777| 黄色欧美视频在线观看| av在线播放精品| 色综合色国产| 简卡轻食公司| 亚洲电影在线观看av| 干丝袜人妻中文字幕| 日韩三级伦理在线观看| 99久久成人亚洲精品观看| or卡值多少钱| 99视频精品全部免费 在线| av视频在线观看入口| 成人av一区二区三区在线看| 欧美色视频一区免费| www日本黄色视频网| 成人一区二区视频在线观看| 国产精品日韩av在线免费观看| h日本视频在线播放| 久99久视频精品免费| ponron亚洲| 亚洲不卡免费看| 露出奶头的视频| 亚洲人成网站在线播放欧美日韩| 99久久精品国产国产毛片| 国产 一区精品| 亚洲人成网站高清观看| 变态另类丝袜制服| 国语自产精品视频在线第100页| 热99re8久久精品国产| 嫩草影视91久久| 国产日本99.免费观看| 97人妻精品一区二区三区麻豆| 色av中文字幕| 精品久久国产蜜桃| 国产高清不卡午夜福利| 一本久久中文字幕| 国产免费男女视频| 亚洲aⅴ乱码一区二区在线播放| 日韩一区二区视频免费看| 成人漫画全彩无遮挡| 亚洲精华国产精华液的使用体验 | 男插女下体视频免费在线播放| 国产精品久久久久久亚洲av鲁大| 在线播放国产精品三级| 久久精品国产清高在天天线| 国产精品99久久久久久久久| 日本欧美国产在线视频| 久久热精品热| 中文字幕人妻熟人妻熟丝袜美| 最近视频中文字幕2019在线8| 搞女人的毛片| 亚洲成人久久爱视频| 久久久久久久久大av| 亚洲精品乱码久久久v下载方式| 噜噜噜噜噜久久久久久91| av.在线天堂| 人妻久久中文字幕网| 久久久久久国产a免费观看| 午夜免费男女啪啪视频观看 | 国内精品一区二区在线观看| 禁无遮挡网站| 少妇丰满av| 女的被弄到高潮叫床怎么办| 91久久精品国产一区二区三区| 国产高清不卡午夜福利| 在现免费观看毛片| 亚洲美女视频黄频| 亚洲欧美成人精品一区二区| 色综合站精品国产| 赤兔流量卡办理| 欧美性猛交╳xxx乱大交人| 伦理电影大哥的女人| 亚洲最大成人手机在线| 黄色一级大片看看| 综合色丁香网| 中文字幕av成人在线电影| 99久久成人亚洲精品观看| 日韩成人av中文字幕在线观看 | 国产成人a∨麻豆精品| 欧美又色又爽又黄视频| 干丝袜人妻中文字幕| 男女边吃奶边做爰视频| 亚洲欧美日韩东京热| 麻豆国产97在线/欧美| 成熟少妇高潮喷水视频| 老熟妇乱子伦视频在线观看| 亚洲高清免费不卡视频|