• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    MgdFlow:微電網(wǎng)場(chǎng)景下的多粒度數(shù)據(jù)流管理算法

    2023-11-19 06:53:02荊有波曹清越朱瑞
    通信學(xué)報(bào) 2023年10期
    關(guān)鍵詞:粗粒度流表表項(xiàng)

    荊有波,曹清越,朱瑞

    (1.鄭州大學(xué)河南先進(jìn)技術(shù)研究院,河南 鄭州 450003;2.中國(guó)科學(xué)院微電子研究所,北京 100029)

    0 引言

    微電網(wǎng)是指由分布式電源、儲(chǔ)能裝置、能量轉(zhuǎn)換裝置等組成的小型配電系統(tǒng),它以分布式電源為主,利用儲(chǔ)能和控制裝置進(jìn)行調(diào)節(jié),實(shí)現(xiàn)網(wǎng)絡(luò)內(nèi)部的電力平衡。微電網(wǎng)的出現(xiàn)豐富了傳統(tǒng)電網(wǎng)的運(yùn)行模式,提高了供電系統(tǒng)的靈活性和可靠性[1]。由于其發(fā)電設(shè)備多為分布式[2],具有分布稀疏、發(fā)電不連續(xù)且不確定、運(yùn)行隨機(jī)性大等缺陷,傳統(tǒng)的集中式優(yōu)化方式難以揭示多主體之間的交互行為[3],因此對(duì)微電網(wǎng)運(yùn)行情況的調(diào)度控制需要全局動(dòng)態(tài)信息,同時(shí)還要保證在電網(wǎng)災(zāi)變等特殊情況下供電不受影響。

    軟件定義網(wǎng)絡(luò)(SDN,software defined network)是一種網(wǎng)絡(luò)虛擬化方法,被譽(yù)為下一代網(wǎng)絡(luò)的關(guān)鍵技術(shù)[4],其通過(guò)OpenFlow 分離網(wǎng)絡(luò)的控制平面和數(shù)據(jù)平面,從而實(shí)現(xiàn)對(duì)網(wǎng)絡(luò)的可編程性。近年來(lái),隨著網(wǎng)絡(luò)應(yīng)用的迅速發(fā)展,SDN 逐漸在學(xué)術(shù)界和工業(yè)界備受關(guān)注[4-6]。SDN 通過(guò)將網(wǎng)絡(luò)設(shè)備的控制平面與數(shù)據(jù)平面分離,以及邏輯上的集中控制,可以實(shí)現(xiàn)對(duì)網(wǎng)絡(luò)流量的靈活控制,促使網(wǎng)絡(luò)資源得到更充分的利用,推動(dòng)網(wǎng)絡(luò)創(chuàng)新的進(jìn)一步發(fā)展。

    SDN 的控制轉(zhuǎn)發(fā)分離技術(shù)能很好地滿足微電網(wǎng)全局調(diào)度、及時(shí)處置突發(fā)情況的需求,通過(guò)集中控制特性,能夠感知全局網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)及通信資源使用情況,具有合理分配帶寬、靈活調(diào)度業(yè)務(wù)、改善服務(wù)質(zhì)量(QoS,quality of service)的功能[7],突發(fā)的、不在預(yù)設(shè)方案內(nèi)的網(wǎng)絡(luò)情況會(huì)觸發(fā)packet-in 消息,從而通過(guò)控制器下發(fā)流表解決實(shí)際網(wǎng)絡(luò)問(wèn)題,但在SDN 應(yīng)用中這種OpenFlow被動(dòng)式插入流表項(xiàng)[6]的控制方式容易導(dǎo)致存儲(chǔ)占用和調(diào)度資源過(guò)頻,從而影響微電網(wǎng)中網(wǎng)絡(luò)的健康狀況。

    在SDN 中,通常在網(wǎng)絡(luò)的初始化階段采用主動(dòng)式放置流表項(xiàng)以滿足對(duì)網(wǎng)絡(luò)帶寬和網(wǎng)絡(luò)時(shí)延方面有要求的應(yīng)用,而被動(dòng)式放置流表項(xiàng)的方式通常被側(cè)重負(fù)載均衡的應(yīng)用所采用,2 種方式結(jié)合起來(lái)能夠讓SDN 充分調(diào)整網(wǎng)絡(luò)中的負(fù)載壓力,讓擁擠的路由得到及時(shí)的緩解,讓空閑的設(shè)備得到更充分的利用。然而,每臺(tái)OpenFlow 交換機(jī)所能存儲(chǔ)的流表項(xiàng)數(shù)目和流條目處理能力有限[8],導(dǎo)致現(xiàn)有的流量調(diào)度方案存在以下問(wèn)題。1) 負(fù)載均衡得不到保證:目前商用OpenFlow 交換機(jī)至多能支持存儲(chǔ)數(shù)萬(wàn)條流表項(xiàng),突發(fā)流量的激增、流處理能力的不足和流表溢出[9]會(huì)導(dǎo)致活動(dòng)路由的流量分布不均,部分路由過(guò)分擁擠甚至堵塞,影響負(fù)載均衡的實(shí)現(xiàn)。2) 服務(wù)質(zhì)量產(chǎn)生波動(dòng):隨著涌入網(wǎng)絡(luò)的流量增加,丟包率也不斷提升,那些沒(méi)有主動(dòng)式配置流表項(xiàng)的流量會(huì)促發(fā)packet-in 消息風(fēng)暴,導(dǎo)致控制器不得不做出大量響應(yīng)處理這些攜帶流信息的數(shù)據(jù)包,與此同時(shí),交換機(jī)設(shè)備的流表項(xiàng)也無(wú)法及時(shí)進(jìn)行增刪改操作,進(jìn)一步延緩了后續(xù)流量的處理,惡化了網(wǎng)絡(luò)服務(wù)質(zhì)量。

    為了解決以上問(wèn)題,實(shí)現(xiàn)微電網(wǎng)中活動(dòng)路由的負(fù)載均衡和服務(wù)質(zhì)量,SDN 控制器需要考慮每條路由的鏈路負(fù)載和每個(gè)流帶來(lái)的負(fù)載,并且主動(dòng)式地插入引導(dǎo)式流表項(xiàng)使瞬間大量涌入的流量可以按照網(wǎng)絡(luò)中的已有路由均勻分發(fā),在多個(gè)節(jié)點(diǎn)對(duì)這些流量進(jìn)行引導(dǎo)將極大提升網(wǎng)絡(luò)的負(fù)載均衡性能以及網(wǎng)絡(luò)服務(wù)質(zhì)量,最后階段利用細(xì)粒度的被動(dòng)式調(diào)度插入相應(yīng)流表項(xiàng)完成流的運(yùn)輸任務(wù)。

    1 相關(guān)工作

    為研究在保持網(wǎng)絡(luò)設(shè)備正常負(fù)載的情況下,減少各設(shè)備的存儲(chǔ)占用和冗余損耗,國(guó)內(nèi)外的諸多學(xué)者已經(jīng)做了大量的研究。Shirali-Shahreza 等[10]提出了延遲安裝與加速驅(qū)逐2 種技術(shù),通過(guò)使用TCP RST/FIN 數(shù)據(jù)包預(yù)測(cè)TCP 流何時(shí)終止來(lái)模擬及時(shí)驅(qū)逐流表規(guī)則以及利用延遲安裝來(lái)彌補(bǔ)針對(duì)非TCP 流方案的缺陷,從而極大地減少了流表項(xiàng)占用率。Guo 等[11]提出了動(dòng)態(tài)流調(diào)度方案(AggreFlow),通過(guò)流集路由、延遲重路由和自適應(yīng)重路由3 種技術(shù)靈活地對(duì)流進(jìn)行調(diào)度,并且將大量同時(shí)進(jìn)行的重路由操作分?jǐn)傇谝欢蜗鄬?duì)較長(zhǎng)的時(shí)間內(nèi),實(shí)現(xiàn)了在較低開(kāi)銷內(nèi)活動(dòng)路由的負(fù)載均衡和較低功耗與延遲。Soliman 等[12]提出了一種基于多協(xié)議標(biāo)簽交換(MPLS)標(biāo)簽的轉(zhuǎn)發(fā)方案,交換機(jī)根據(jù)這些攜帶路由信息的MPLS 標(biāo)簽來(lái)轉(zhuǎn)發(fā)數(shù)據(jù)包,從而降低了對(duì)流表項(xiàng)的占用,但也帶來(lái)了額外的損耗,尤其在小數(shù)據(jù)流情況下更加明顯。文獻(xiàn)[13]提出利用數(shù)據(jù)包包頭的可用VLAN 標(biāo)識(shí)符(VID)來(lái)攜帶路由信息,并且在指定的交換機(jī)上放置流表項(xiàng)減少了SDN 中流表的使用,在不同新流量到達(dá)的單播和多播場(chǎng)景,降低了流拒絕率,極大地推遲了第一次流量拒絕時(shí)間。李佳[14]提出的自適應(yīng)兩級(jí)流表超時(shí)機(jī)制,采用了兩級(jí)流表架構(gòu),根據(jù)流的到達(dá)時(shí)間特征不斷修改流表項(xiàng)中主流表的空閑超時(shí)與次級(jí)流表的硬超時(shí),從而減少了packet-in 消息的產(chǎn)生,并且提高了流表空間的利用率。劉振鵬等[15]提出了基于時(shí)序與集合的SDN 流表更新策略,將網(wǎng)絡(luò)中的交換機(jī)按照新舊路由分類,分類集合按次序分別更新流表,保證了流表更新的一致性,并且減少了流表空間的占用。曾友雯等[16]采用OpenFlow 交換機(jī)的服務(wù)器負(fù)載均衡策略,利用多地址定向流表對(duì)服務(wù)請(qǐng)求進(jìn)行分類,通過(guò)蟻群算法求解最佳負(fù)載重定向方案,降低了流表項(xiàng)數(shù)目規(guī)模,比傳統(tǒng)負(fù)載策略的性能更優(yōu)越。馬曉航[17]通過(guò)動(dòng)態(tài)調(diào)節(jié)流表項(xiàng)的超時(shí)時(shí)間和超時(shí)方式,對(duì)控制通道占用率、流表項(xiàng)存活數(shù)、大象流偵測(cè)精度3個(gè)目標(biāo)進(jìn)行聯(lián)立優(yōu)化,其設(shè)計(jì)的混合超時(shí)機(jī)制的優(yōu)化效果優(yōu)于硬超時(shí)和空閑超時(shí)。嚴(yán)可意[18]提出的區(qū)分大象流和老鼠流的檢測(cè)算法以及動(dòng)態(tài)預(yù)測(cè)并設(shè)置流表項(xiàng)超時(shí)時(shí)間,不僅減少了交換機(jī)與控制器的頻繁通信開(kāi)銷,還提升了流表利用率。齊嬋等[19]針對(duì)SDN 配置更新所引起的數(shù)據(jù)包處理不一致問(wèn)題,提出一種基于分類和時(shí)序的SDN 流表更新一致性方案,有效控制了交換機(jī)存儲(chǔ)空間的占用率并降低了控制器的負(fù)載。

    以上方案在微電網(wǎng)場(chǎng)景下的應(yīng)用中都存在不足。Shirali-Shahreza 等[10]提出的方案針對(duì)TCP 流具有良好的節(jié)省表項(xiàng)占用效率,但對(duì)于非TCP 流的處理方案不能滿足微電網(wǎng)設(shè)備運(yùn)行間歇性大、具有隨機(jī)性的需求。Guo 等[11]提出的AggreFlow對(duì)微電網(wǎng)設(shè)備出現(xiàn)的隨機(jī)性流進(jìn)行聚合不夠高效。Soliman 等[12]提出的方案處理分布稀疏的設(shè)備產(chǎn)生的小流量時(shí)會(huì)導(dǎo)致更大的資源損耗。李佳[14]提出的方案能夠減少重定向流的調(diào)度資源,但比傳統(tǒng)OpenFlow 方式又增加了流表項(xiàng)數(shù)量。劉振鵬等[15]提出的流表更新一致性策略減少了控制負(fù)載和流表項(xiàng)占用,但不適于微電網(wǎng)場(chǎng)景下復(fù)雜的網(wǎng)絡(luò)環(huán)境。曾友雯等[16]提出的負(fù)載均衡策略較傳統(tǒng)算法有更優(yōu)的性能,但是要求預(yù)先部署多地址定向流表;文獻(xiàn)[17-19]分別提出的動(dòng)態(tài)優(yōu)化機(jī)制和流表更新一致性能夠提升流表的利用率,但對(duì)具備相同特征的流表項(xiàng)沒(méi)有聚合利用。

    針對(duì)微電網(wǎng)設(shè)備容易帶來(lái)的調(diào)度指令過(guò)頻和存儲(chǔ)占用問(wèn)題,本文提出了一種通過(guò)延遲排序和多重聚合分流的數(shù)據(jù)流(MgdFlow,multi-granularity data flow)管理算法,在保證良好網(wǎng)絡(luò)通暢的情況下,比傳統(tǒng)OpenFlow方案[6]和自適應(yīng)兩級(jí)流表方案[14]減少了交換機(jī)中平均流表項(xiàng)的安裝數(shù)目和調(diào)度指令下發(fā)次數(shù),在負(fù)載均衡和降低流表項(xiàng)占有率方面的性能更優(yōu)越。

    2 系統(tǒng)模型

    2.1 目標(biāo)函數(shù)

    1) 負(fù)載均衡。負(fù)載均衡主要考慮2 個(gè)指標(biāo):交換機(jī)的平均負(fù)載情況和交換機(jī)的平均表項(xiàng)占有率[20-22]。交換機(jī)的最大負(fù)載均衡路由決定了自身負(fù)載均衡表項(xiàng)的上限,而通過(guò)粗粒度聚合的流表劃分,將路由盡可能均勻地發(fā)送到網(wǎng)絡(luò)中的各臺(tái)交換機(jī),避免極端情況下交換機(jī)超出最大負(fù)載利用率。由網(wǎng)絡(luò)平均負(fù)載與各交換機(jī)負(fù)載的均方根誤差(RMSE)來(lái)評(píng)估網(wǎng)絡(luò)中整體負(fù)載均衡,計(jì)算式為

    交換機(jī)的硬件條件限制了其存儲(chǔ)空間的大小,因而對(duì)流表項(xiàng)的存儲(chǔ)存在著嚴(yán)重的限制[8-9,23]。通過(guò)聚合與分流可以極大限度地減少交換機(jī)中流表項(xiàng)的插入,以交換機(jī)平均表項(xiàng)占有率衡量該算法的效果,計(jì)算式為

    2) ImproveQoS。通常QoS 考慮的指標(biāo)為可用性、吞吐量、時(shí)延變化等,在本文SDN 應(yīng)用場(chǎng)景下,主要考慮2 個(gè)指標(biāo):丟包率、控制器下發(fā)消息總數(shù)量。一是因?yàn)榭刂破飨掳l(fā)控制新流消息的開(kāi)銷會(huì)帶來(lái)路由開(kāi)銷,在聚合與分流策略的作用下,可以盡可能減少新流加入時(shí)控制器的相應(yīng)消息,在入口交換機(jī)中用于粗粒度聚合的流表項(xiàng)增多時(shí)效果更明顯。二是因?yàn)閬G包率與流集匹配路由有關(guān),更多的流能夠直接匹配流集路由進(jìn)入網(wǎng)絡(luò)中,而不需要等待控制器下發(fā)指令,網(wǎng)絡(luò)的處理能力更好。因此本文提出一種新的考量指標(biāo)ImproveQoS,即需要重路由的流占所有流的比例為

    其中,f表示進(jìn)入網(wǎng)絡(luò)中的任意一個(gè)流,fsn表示對(duì)網(wǎng)絡(luò)中的流聚合成的第n個(gè)流集?!苀表示進(jìn)入網(wǎng)絡(luò)的所有流,用其減去在流集中匹配處理的流后得到需要控制器指令下發(fā)調(diào)度的流數(shù)量。

    2.2 限制條件

    1) 交換機(jī)負(fù)載限制。S表示交換機(jī)的集合,si∈S表示每臺(tái)交換機(jī),Routei表示在時(shí)間t經(jīng)過(guò)交換機(jī)si的路由,每臺(tái)交換機(jī)處理流的總速率不能超過(guò)上限v,則有

    2) 交換機(jī)存儲(chǔ)空間限制。SO 表示所有交換機(jī)流表項(xiàng)的集合,每臺(tái)交換機(jī)存儲(chǔ)的流表項(xiàng)soi∈SO不能超過(guò)上限r(nóng),則有

    3) 交換機(jī)數(shù)量限制。粗粒度聚合階段交換機(jī)總數(shù)和細(xì)粒度分流階段交換機(jī)總數(shù)之和等于網(wǎng)絡(luò)總交換機(jī)數(shù),則有

    2.3 問(wèn)題描述

    針對(duì)當(dāng)前微電網(wǎng)場(chǎng)景下的實(shí)際問(wèn)題,通過(guò)減少交換機(jī)平均流表項(xiàng)占有率和減小交換機(jī)的平均負(fù)載,從而達(dá)到網(wǎng)絡(luò)整體負(fù)載均衡;同時(shí)還需要減少丟包率和控制消息的下發(fā)數(shù)目,從而提高ImproveQos 整體表現(xiàn)。因此,針對(duì)這3 個(gè)優(yōu)化目標(biāo),問(wèn)題可以被量化為

    3 MgdFlow 算法設(shè)計(jì)

    3.1 主要思想

    以單個(gè)數(shù)據(jù)包為粒度,將進(jìn)入網(wǎng)絡(luò)的流先重定向加入一個(gè)200 μs 的緩沖隊(duì)列,設(shè)置隊(duì)列中可以緩沖的最大數(shù)據(jù)包個(gè)數(shù)為16 個(gè),在該緩沖時(shí)間內(nèi)對(duì)隊(duì)列中的數(shù)據(jù)包進(jìn)行排序,初步聚合屬于同一流的數(shù)據(jù)包,從而降低同一流的數(shù)據(jù)包中交換機(jī)中匹配表項(xiàng)的miss 概率,減少CPU 調(diào)度指令的數(shù)量進(jìn)而增加吞吐量、提高網(wǎng)絡(luò)的負(fù)載均衡性能。針對(duì)加入一段時(shí)延緩沖隊(duì)列排序是否會(huì)對(duì)整體時(shí)延造成更大影響的問(wèn)題,Hamid 等[24]所構(gòu)建的reframer 工具中已經(jīng)充分驗(yàn)證了數(shù)據(jù)包排序能夠極大地提高服務(wù)器內(nèi)存層次的利用率,從而提升了時(shí)延、CPU 利用率等性能指標(biāo),因此在后續(xù)的求解算法中不再考慮這一問(wèn)題。

    圖1 展示了一個(gè)延時(shí)排序的簡(jiǎn)單示例。在設(shè)定的200 μs 的緩沖隊(duì)列中,充斥著屬于不同流A、B、C 的數(shù)據(jù)包,通過(guò)對(duì)亂序數(shù)據(jù)包打上不同的標(biāo)簽進(jìn)行分類,隨后將這三類標(biāo)簽對(duì)于流的處理規(guī)則寫入入口交換機(jī)中,從而完成了不同流中交織的亂序數(shù)據(jù)包的處理。

    圖1 延時(shí)排序示例

    以主要業(yè)務(wù)功能為條件,將經(jīng)過(guò)初步時(shí)延排序的不同流再次進(jìn)行基于流的粗粒度聚合和細(xì)粒度分流。在粗粒度聚合階段,以目的IP 地址為分流依據(jù),將不同的流分為N個(gè)流集,分別指向N個(gè)中轉(zhuǎn)交換機(jī),同時(shí)在入口邊緣交換機(jī)處插入N個(gè)用作粗粒度聚合流的流表項(xiàng),從入口交換機(jī)到N個(gè)不同的交換機(jī)之間共存在M條路由,并在這些路由經(jīng)過(guò)的交換機(jī)上插入指向相應(yīng)中轉(zhuǎn)交換機(jī)的流表項(xiàng),從而實(shí)現(xiàn)粗粒度聚合階段流到達(dá)中轉(zhuǎn)交換機(jī)的功能。在細(xì)粒度分流階段,以源IP 地址為分流依據(jù),將所需大業(yè)務(wù)下的不同小業(yè)務(wù)流進(jìn)行分發(fā),在中轉(zhuǎn)交換機(jī)處插入細(xì)粒度分流的流表項(xiàng);同時(shí),對(duì)于中轉(zhuǎn)交換機(jī)可能存在的流表項(xiàng)占用率高以及網(wǎng)絡(luò)中mice flow 占據(jù)了絕大多數(shù)的流表項(xiàng)的情況[18,25],將所有中轉(zhuǎn)交換機(jī)的流表項(xiàng)的idle_time 從一般的5 s 修改為1 s,達(dá)到快速淘汰mice flow 對(duì)應(yīng)表項(xiàng)。

    圖2 展示了聚合與分流示例,在經(jīng)過(guò)初步時(shí)延排序處理后,當(dāng)前網(wǎng)絡(luò)的處理對(duì)象由有各種具備不同屬性(如源IP 地址、目的IP 地址、源MAC地址、目的MAC 地址等)的屬于不同流A、B、C、D、E、F 的數(shù)據(jù)包組成,通過(guò)主動(dòng)式放置在入口交換機(jī)的流表項(xiàng)粗粒度聚合成流集,在本例中,流集a包括流A、C、D,流集b包括流B、E、F,在第一步的粗粒度聚合中,根據(jù)流集分成兩大類;在第二步的細(xì)粒度分流中,由交換機(jī)響應(yīng)式細(xì)粒度地插入流表項(xiàng)完成轉(zhuǎn)發(fā)到終端的任務(wù),經(jīng)過(guò)N次粗粒度聚合的篩選,最終流集中的其他流也發(fā)送到了終端。

    圖2 聚合與分流示例

    本文將微電網(wǎng)場(chǎng)景下的負(fù)載、存儲(chǔ)占用和指令調(diào)度抽象為一個(gè)多目標(biāo)優(yōu)化問(wèn)題,MgdFlow 模型的符號(hào)及含義如表1 所示。使用N=(S,L)來(lái)描述網(wǎng)絡(luò),其中,S表示交換機(jī)集合包含h臺(tái)交換機(jī),并將其分別劃分給j個(gè)粗粒度階段網(wǎng)絡(luò)和k個(gè)細(xì)粒度階段網(wǎng)絡(luò),故;L表示S中交換機(jī)之間的q條鏈路,故。

    表1 MgdFlow 模型的符號(hào)及含義

    3.2 算法描述

    其中,x=1表示流集被分配給routem,x=0表示流集沒(méi)有被分配給routem。

    在細(xì)粒度分流階段,在n臺(tái)中轉(zhuǎn)交換機(jī)處,對(duì)已經(jīng)粗粒度過(guò)濾的流集再進(jìn)行細(xì)粒度的劃分,將其分為g個(gè)流集,并在每臺(tái)中轉(zhuǎn)交換機(jī)處將g個(gè)用于進(jìn)一步分流的流表項(xiàng)插入,此時(shí)將有ng個(gè)流表項(xiàng)插入;網(wǎng)絡(luò)中所有設(shè)備和鏈路組成了m′條傳輸路由,即Route′=。

    對(duì)流集 fsn進(jìn)行再次劃分,則有。

    細(xì)粒度分流階段的所有交換機(jī)流表項(xiàng)數(shù)量SO=[so1,so2,…,sok],任一臺(tái)交換機(jī)中流表項(xiàng)數(shù)量表示為

    3.3 算法求解

    根據(jù)微電網(wǎng)場(chǎng)景下整體路由建立的過(guò)程,可以概括如下。

    1) SDN 控制器根據(jù)流表項(xiàng)占用和網(wǎng)絡(luò)鏈路負(fù)載更新粗粒度聚合節(jié)點(diǎn)的表項(xiàng)和整體動(dòng)態(tài)視圖拓?fù)洹?/p>

    2) 粗粒度聚合節(jié)點(diǎn)發(fā)出路由請(qǐng)求,轉(zhuǎn)到步驟3),否則轉(zhuǎn)到步驟1)。

    3) SDN 控制器依次響應(yīng)插入流表項(xiàng)引導(dǎo)達(dá)到每一跳的節(jié)點(diǎn)并記錄該條路由的表項(xiàng)數(shù)量。

    4) 重復(fù)步驟1)~步驟3),直至獲取所有鏈路和路由的流表項(xiàng)占用和負(fù)載情況。

    5) 更新粗粒度聚合節(jié)點(diǎn)的流表項(xiàng)并生成新的流集。

    6) 當(dāng)表項(xiàng)空間不足或負(fù)載指標(biāo)達(dá)到閾值時(shí),增大粗粒度聚合節(jié)點(diǎn)的范圍并在損耗多的鏈路路由進(jìn)行再次聚合與分流。

    7) 網(wǎng)絡(luò)節(jié)點(diǎn)根據(jù)插入的表項(xiàng)完成路由。

    4 實(shí)驗(yàn)仿真及分析

    4.1 實(shí)驗(yàn)環(huán)境與配置

    為模擬微電網(wǎng)場(chǎng)景下的SDN 設(shè)備情況,研究在ubuntu 環(huán)境下利用2.3.0 版本的Mininet 網(wǎng)絡(luò)仿真器搭建SDN 仿真環(huán)境,并且采用基于Java 的15.0.0 版本的OpenDayLight(ODL)作為SDN 控制器,Open vSwitch 作為虛擬交換機(jī),軟件版本和硬件配置如表2 和表3 所示。

    表2 軟件版本

    表3 硬件配置

    構(gòu)建實(shí)驗(yàn)網(wǎng)絡(luò)拓?fù)淙鐖D3 所示。實(shí)驗(yàn)網(wǎng)絡(luò)由18 個(gè)節(jié)點(diǎn)組成,其中包含9 臺(tái)交換機(jī)、8 臺(tái)終端主機(jī)和一臺(tái)控制器c0。網(wǎng)絡(luò)拓?fù)渲械膕1為入口交換機(jī),插入了不同粗粒度的聚合流集的流表項(xiàng),用來(lái)對(duì)進(jìn)入流量進(jìn)行初步聚合發(fā)送;s4、s5、s6為中轉(zhuǎn)交換機(jī),插入了進(jìn)行第二次聚合的粗粒度的流表項(xiàng),用來(lái)對(duì)進(jìn)入的流量進(jìn)行二次分流發(fā)送;s7、s8、s9為出口交換機(jī),插入了精確的細(xì)粒度流表項(xiàng),完成最后的傳輸任務(wù)。h8主機(jī)以固定速率向h1~h7主機(jī)發(fā)送數(shù)據(jù)包,網(wǎng)絡(luò)的傳輸速率控制在500~800 Mbit/s,對(duì)實(shí)驗(yàn)節(jié)點(diǎn)進(jìn)行10 次仿真測(cè)試,并利用Wireshark 在各個(gè)節(jié)點(diǎn)進(jìn)行抓包分析與記錄。

    4.2 評(píng)估指標(biāo)

    1) 交換機(jī)平均負(fù)載RMSE。交換機(jī)與鏈路的負(fù)載決定了整個(gè)網(wǎng)絡(luò)的最大流量的容載上限,每條鏈路和交換機(jī)的負(fù)載都影響到整體的最大容載率,某條鏈路的過(guò)載可能導(dǎo)致某條路由甚至幾條路由的擁塞和崩潰,因此針對(duì)已有網(wǎng)絡(luò)中的交換機(jī)負(fù)載和鏈路承載上限,本文通過(guò)計(jì)算每條路由上的交換機(jī)平均負(fù)載情況,并計(jì)算整體的RMSE 來(lái)評(píng)估網(wǎng)絡(luò)中整體鏈路的承載狀態(tài)。

    2) 交換機(jī)平均流表項(xiàng)占有率。在具備一定規(guī)模的SDN 中,OpenFlow 交換機(jī)需要通過(guò)存儲(chǔ)大量的流表項(xiàng)來(lái)應(yīng)對(duì)處理進(jìn)入網(wǎng)絡(luò)的流量,受限于三態(tài)內(nèi)容尋址存儲(chǔ)器(TCAM,ternary content addressable memory)內(nèi)存容量,流表所能存儲(chǔ)的流表項(xiàng)數(shù)目也是有限的,而TCAM 造價(jià)昂貴且耗能,所以通過(guò)增加TCAM 容量來(lái)應(yīng)對(duì)大流量的流表項(xiàng)數(shù)目是不現(xiàn)實(shí)的[8-9,26],因此針對(duì)一臺(tái)OpenFlow 交換機(jī)的存儲(chǔ)空間十分有限的現(xiàn)狀,聚焦于通過(guò)盡可能減少流表項(xiàng)占用,以最精簡(jiǎn)的存儲(chǔ)策略來(lái)完成網(wǎng)絡(luò)流量的處理。交換機(jī)流表項(xiàng)的占用空間反映了維持一個(gè)網(wǎng)絡(luò)正常運(yùn)行下該節(jié)點(diǎn)所需要占用的空間代價(jià),平均流表項(xiàng)占用率則反映了整個(gè)網(wǎng)絡(luò)設(shè)備中所有節(jié)點(diǎn)的平均存儲(chǔ)空間占用情況,這一指標(biāo)不同于最大流表項(xiàng)占用率和中位數(shù)流表項(xiàng)占用率可能受制于極大值或者極小值存儲(chǔ)占用的影響,而是由整體設(shè)備的存儲(chǔ)占用所決定,能夠真實(shí)地反映出網(wǎng)絡(luò)各設(shè)備的存儲(chǔ)情況。

    3) ImproveQoS。隨著網(wǎng)絡(luò)負(fù)載的增加,涌入的流量逐漸增多,超過(guò)了原本設(shè)定的閾值,導(dǎo)致丟包率增大,流量因得不到及時(shí)的處理而阻塞在各個(gè)節(jié)點(diǎn)。同時(shí),沒(méi)有匹配流表項(xiàng)的流量會(huì)激發(fā)table-miss表項(xiàng),使交換機(jī)向控制器發(fā)送packet-in 消息并將這種類型的數(shù)據(jù)包發(fā)給控制器處理,導(dǎo)致控制器調(diào)度信息的下發(fā)[27],增加了資源的損耗與負(fù)載。通過(guò)關(guān)注丟包率與控制器下發(fā)消息的數(shù)目,并將其歸結(jié)為需要重定向處理消息的流占總流的比例,從而衡量在不同策略下網(wǎng)絡(luò)的服務(wù)質(zhì)量。

    4.3 多目標(biāo)優(yōu)化結(jié)果與分析

    1) 負(fù)載均衡性能

    通過(guò)對(duì)比傳統(tǒng)OpenFlow 方案[6]、自適應(yīng)兩級(jí)流表方案[14]以及本文提出的MgdFlow,得到3 種方案下網(wǎng)絡(luò)鏈路負(fù)載情況,如圖4 所示。其中,RMSE 越小則性能越好。箱線圖的上橫線和下橫線分別代表第三四分位數(shù)(Q3)和第一四分位數(shù)(Q1),也就是數(shù)據(jù)的上下分位,箱線圖的高度表示數(shù)據(jù)的分位;同時(shí),每個(gè)箱線圖數(shù)據(jù)的平均數(shù)用三角形標(biāo)出,可以看出不同方案下得出的指標(biāo)數(shù)據(jù)的總體分布。

    圖4 3 種方案不同方案下網(wǎng)絡(luò)鏈路負(fù)載情況

    2) 平均流表項(xiàng)占有率

    通過(guò)對(duì)比傳統(tǒng)OpenFlow 方案、自適應(yīng)兩級(jí)流表方案以及MgdFlow,得到3 種方案在不同路由節(jié)點(diǎn)數(shù)量下的網(wǎng)絡(luò)所需流表項(xiàng),如圖5 所示。從圖5可知,隨著網(wǎng)絡(luò)規(guī)模逐漸擴(kuò)大,路由節(jié)點(diǎn)數(shù)量逐漸增多,被添加到各臺(tái)交換機(jī)中的流表項(xiàng)數(shù)量不斷增加,自適應(yīng)兩級(jí)流表方案對(duì)流表項(xiàng)的損耗最多,傳統(tǒng)OpenFlow 方案其次,MgdFlow 方案損耗的流表項(xiàng)數(shù)始終低于這2 種方案。

    圖5 3 種方案在不同路由節(jié)點(diǎn)數(shù)量下的網(wǎng)絡(luò)所需流表項(xiàng)

    3) ImproveQoS

    通過(guò)對(duì)比傳統(tǒng)OpenFlow 方案、自適應(yīng)兩級(jí)流表方案以及MgdFlow,得到3 種方案在不同路由節(jié)點(diǎn)數(shù)量下出現(xiàn)網(wǎng)絡(luò)擁塞時(shí)需要重定向流量占比,如圖6 所示。從圖6 可知,MgdFlow 的ImproveQoS指標(biāo)始終低于另外2 種方案。當(dāng)流量激增時(shí),網(wǎng)絡(luò)的丟包率增加,對(duì)交織在不同流中的數(shù)據(jù)包進(jìn)行訪問(wèn)就會(huì)反復(fù)調(diào)用線程,此時(shí)會(huì)增加對(duì)調(diào)度信息的需求,在需要重定向的流中,大象流占比越少、老鼠流占比越多,則同一丟包率下的ImproveQoS 越高。

    圖6 3 種方案在不同路由節(jié)點(diǎn)數(shù)量下出現(xiàn)網(wǎng)絡(luò)擁塞時(shí)需要重定向流量占比

    3 種方案對(duì)比如表4 所示。從表4 可以看出,與傳統(tǒng)OpenFlow 方案和自適應(yīng)兩級(jí)流表方案相比,在負(fù)載均衡方面,MgdFlow 分別提升了25%和18%;在平均流表項(xiàng)占有率方面,MgdFlow 分別提升了9%和16%;在ImproveQoS 方面,MgdFlow分別提升了24%和12%。

    表4 3 種方案對(duì)比

    5 結(jié)束語(yǔ)

    針對(duì)微電網(wǎng)需要全局調(diào)度、及時(shí)處理突發(fā)情況的需求,結(jié)合SDN 的控制轉(zhuǎn)發(fā)分離技術(shù),提出了針對(duì)微電網(wǎng)業(yè)務(wù)場(chǎng)景下的多粒度數(shù)據(jù)管理算法MgdFlow,通過(guò)對(duì)數(shù)據(jù)包進(jìn)行延時(shí)排序和對(duì)數(shù)據(jù)流完成聚合與分流,在SDN 中有效提高負(fù)載均衡性能和服務(wù)質(zhì)量,降低平均交換機(jī)流表項(xiàng)的占有率和調(diào)度指令的下發(fā)次數(shù),提高整體網(wǎng)絡(luò)對(duì)于流量的處理能力。對(duì)比傳統(tǒng)OpenFlow 方案和自適應(yīng)兩級(jí)流表方案,本文方案在負(fù)載均衡性能、存儲(chǔ)表項(xiàng)利用和調(diào)度指令占用方面都有明顯的改進(jìn)和較高的可用性。雖然延時(shí)緩沖隊(duì)列排序會(huì)增加一段時(shí)延,但對(duì)整體網(wǎng)絡(luò)性能的提升卻是巨大的,本文中加入的緩沖隊(duì)列是靜態(tài)設(shè)置的,未來(lái)的工作將研究在微電網(wǎng)場(chǎng)景下的自適應(yīng)延時(shí)緩沖隊(duì)列排序,從而進(jìn)一步提升性能。

    猜你喜歡
    粗粒度流表表項(xiàng)
    一種端到端的加密流量多分類粗粒度融合算法*
    一種改進(jìn)的TCAM路由表項(xiàng)管理算法及實(shí)現(xiàn)
    基于時(shí)序與集合的SDN流表更新策略
    基于卷積神經(jīng)網(wǎng)絡(luò)的粗粒度數(shù)據(jù)分布式算法
    基于ARMA模型預(yù)測(cè)的交換機(jī)流表更新算法
    基于緩存策略的OpenFlow流表存儲(chǔ)優(yōu)化方案研究
    簡(jiǎn)析yangUI流表控制
    軟件定義網(wǎng)絡(luò)中一種兩步式多級(jí)流表構(gòu)建算法
    在線評(píng)論情感分析研究綜述
    SDN數(shù)據(jù)中心網(wǎng)絡(luò)基于流表項(xiàng)轉(zhuǎn)換的流表調(diào)度優(yōu)化
    久久久久国产一级毛片高清牌| 国产成人一区二区三区免费视频网站| 老汉色av国产亚洲站长工具| 日韩成人在线观看一区二区三区| 色在线成人网| 精品国产亚洲在线| 无限看片的www在线观看| 色婷婷久久久亚洲欧美| 欧美最黄视频在线播放免费| 欧美另类亚洲清纯唯美| 正在播放国产对白刺激| 怎么达到女性高潮| 老司机福利观看| 91老司机精品| 婷婷丁香在线五月| 欧美大码av| 久久热在线av| 中文字幕高清在线视频| 亚洲最大成人中文| 一区二区三区激情视频| 欧美乱码精品一区二区三区| 窝窝影院91人妻| 成人永久免费在线观看视频| 婷婷亚洲欧美| 夜夜看夜夜爽夜夜摸| 每晚都被弄得嗷嗷叫到高潮| 亚洲专区中文字幕在线| www.自偷自拍.com| 国产在线观看jvid| 99热只有精品国产| 国产一区二区激情短视频| 黄色视频,在线免费观看| 欧美成人性av电影在线观看| 午夜亚洲福利在线播放| 欧美在线一区亚洲| 国产亚洲av嫩草精品影院| 日本一区二区免费在线视频| 国产区一区二久久| 精品久久久久久久久久久久久 | 黑人操中国人逼视频| 精品福利观看| 欧美一区二区精品小视频在线| 一级a爱片免费观看的视频| 他把我摸到了高潮在线观看| 99在线人妻在线中文字幕| 亚洲九九香蕉| 这个男人来自地球电影免费观看| 一级作爱视频免费观看| 国产精品美女特级片免费视频播放器 | 日韩国内少妇激情av| 色哟哟哟哟哟哟| ponron亚洲| 亚洲国产看品久久| 香蕉av资源在线| 国产午夜精品久久久久久| 免费观看人在逋| 大香蕉久久成人网| e午夜精品久久久久久久| 午夜成年电影在线免费观看| 露出奶头的视频| 国产精品精品国产色婷婷| 99国产精品一区二区蜜桃av| 欧美成狂野欧美在线观看| 亚洲成a人片在线一区二区| 99国产精品99久久久久| 男人舔奶头视频| 免费高清在线观看日韩| www国产在线视频色| 欧美国产精品va在线观看不卡| 亚洲欧美日韩无卡精品| a级毛片在线看网站| 久久伊人香网站| 岛国在线观看网站| 此物有八面人人有两片| 国产精品二区激情视频| 欧美色欧美亚洲另类二区| 91在线观看av| 午夜a级毛片| 国产精品 国内视频| 国内久久婷婷六月综合欲色啪| 久热爱精品视频在线9| 精品国产美女av久久久久小说| 又大又爽又粗| 国产精品野战在线观看| 亚洲 国产 在线| 午夜福利免费观看在线| 色av中文字幕| 久久精品91蜜桃| 亚洲精品美女久久av网站| 在线观看日韩欧美| 一本大道久久a久久精品| 91成人精品电影| 一二三四社区在线视频社区8| 99国产精品一区二区蜜桃av| 欧美乱妇无乱码| 日本一区二区免费在线视频| 精品第一国产精品| 日本a在线网址| 国产精品 国内视频| 国产亚洲欧美98| 久久午夜综合久久蜜桃| 国产亚洲精品一区二区www| 亚洲最大成人中文| 美女国产高潮福利片在线看| ponron亚洲| 国产精品免费一区二区三区在线| 18禁美女被吸乳视频| a在线观看视频网站| 免费在线观看亚洲国产| 观看免费一级毛片| 一本综合久久免费| 国产一区二区三区视频了| 美女大奶头视频| 国产成年人精品一区二区| 久久精品国产亚洲av高清一级| 欧美色视频一区免费| 夜夜夜夜夜久久久久| 成人三级做爰电影| 成人欧美大片| 变态另类成人亚洲欧美熟女| 亚洲av成人不卡在线观看播放网| 国产一区在线观看成人免费| 亚洲精品美女久久久久99蜜臀| 日本免费a在线| 好男人在线观看高清免费视频 | 18禁观看日本| 欧美成人性av电影在线观看| 日韩欧美在线二视频| 美女国产高潮福利片在线看| 国产三级在线视频| 长腿黑丝高跟| 久久精品国产亚洲av高清一级| bbb黄色大片| 久久国产精品人妻蜜桃| 欧美精品啪啪一区二区三区| 99国产极品粉嫩在线观看| 亚洲久久久国产精品| 露出奶头的视频| 国产av一区二区精品久久| 午夜亚洲福利在线播放| 性欧美人与动物交配| 亚洲一区二区三区不卡视频| 亚洲专区中文字幕在线| videosex国产| 操出白浆在线播放| 成人18禁高潮啪啪吃奶动态图| 一级黄色大片毛片| 国产又爽黄色视频| 久久中文字幕人妻熟女| 欧美日韩福利视频一区二区| 国内久久婷婷六月综合欲色啪| www日本在线高清视频| 国产精品久久久久久亚洲av鲁大| 日本精品一区二区三区蜜桃| 18禁美女被吸乳视频| 性欧美人与动物交配| 在线观看舔阴道视频| 国产亚洲av高清不卡| 日本 av在线| 中亚洲国语对白在线视频| 老司机福利观看| 亚洲五月色婷婷综合| 国产主播在线观看一区二区| 老鸭窝网址在线观看| 狂野欧美激情性xxxx| 亚洲国产欧美网| 亚洲三区欧美一区| 久久精品夜夜夜夜夜久久蜜豆 | 日韩欧美 国产精品| 国产欧美日韩一区二区三| 亚洲黑人精品在线| 两个人看的免费小视频| 精品久久久久久,| www.www免费av| 脱女人内裤的视频| 久热这里只有精品99| 久久香蕉激情| 女同久久另类99精品国产91| 午夜福利免费观看在线| 亚洲国产精品久久男人天堂| av天堂在线播放| a级毛片在线看网站| 成人欧美大片| 亚洲激情在线av| 黄色片一级片一级黄色片| 色老头精品视频在线观看| 99精品欧美一区二区三区四区| 亚洲成a人片在线一区二区| 变态另类成人亚洲欧美熟女| 国产亚洲欧美在线一区二区| 亚洲天堂国产精品一区在线| 精华霜和精华液先用哪个| 中亚洲国语对白在线视频| 久久国产亚洲av麻豆专区| 在线观看一区二区三区| 国产日本99.免费观看| 少妇 在线观看| 欧美日韩中文字幕国产精品一区二区三区| 亚洲精品国产一区二区精华液| 免费在线观看影片大全网站| 视频在线观看一区二区三区| 黑人操中国人逼视频| 他把我摸到了高潮在线观看| 亚洲第一欧美日韩一区二区三区| 欧美三级亚洲精品| 啦啦啦 在线观看视频| 欧美乱妇无乱码| 亚洲天堂国产精品一区在线| 亚洲国产精品sss在线观看| 欧美日韩乱码在线| 欧美另类亚洲清纯唯美| 男人舔女人的私密视频| 嫁个100分男人电影在线观看| 女人爽到高潮嗷嗷叫在线视频| 色综合亚洲欧美另类图片| 中文字幕人妻熟女乱码| 在线观看免费视频日本深夜| 国产高清有码在线观看视频 | 韩国av一区二区三区四区| 日韩欧美一区二区三区在线观看| 久久久久久亚洲精品国产蜜桃av| 亚洲中文字幕一区二区三区有码在线看 | 亚洲精品av麻豆狂野| 欧美一区二区精品小视频在线| 69av精品久久久久久| 一级毛片精品| 婷婷六月久久综合丁香| 欧美一级毛片孕妇| 国产精品影院久久| 丝袜人妻中文字幕| 婷婷亚洲欧美| 免费女性裸体啪啪无遮挡网站| 国产成人av激情在线播放| 精品久久久久久,| tocl精华| 一级黄色大片毛片| 欧美zozozo另类| 国产1区2区3区精品| 国产高清激情床上av| 中文字幕精品亚洲无线码一区 | 人成视频在线观看免费观看| 又黄又粗又硬又大视频| videosex国产| 亚洲 欧美一区二区三区| 日韩欧美一区视频在线观看| 欧美丝袜亚洲另类 | a在线观看视频网站| 亚洲一区二区三区不卡视频| 美女高潮到喷水免费观看| 国产精品永久免费网站| 无遮挡黄片免费观看| 麻豆国产av国片精品| 久久久久免费精品人妻一区二区 | 午夜老司机福利片| 悠悠久久av| 男女视频在线观看网站免费 | 免费看a级黄色片| 禁无遮挡网站| 侵犯人妻中文字幕一二三四区| 久久中文字幕一级| 夜夜躁狠狠躁天天躁| 久久亚洲精品不卡| 国产区一区二久久| 婷婷精品国产亚洲av在线| 亚洲成av人片免费观看| 国产亚洲精品久久久久久毛片| 精品国产乱码久久久久久男人| 免费观看精品视频网站| 欧美午夜高清在线| 欧洲精品卡2卡3卡4卡5卡区| 国产又色又爽无遮挡免费看| 老司机午夜福利在线观看视频| 午夜福利高清视频| 欧美激情高清一区二区三区| 久久久精品国产亚洲av高清涩受| 白带黄色成豆腐渣| 满18在线观看网站| 国产免费男女视频| 俄罗斯特黄特色一大片| 91在线观看av| or卡值多少钱| 波多野结衣巨乳人妻| 亚洲第一青青草原| 午夜老司机福利片| 欧美成人午夜精品| 视频在线观看一区二区三区| 国产精品免费视频内射| 一级片免费观看大全| 搡老熟女国产l中国老女人| 亚洲欧美日韩无卡精品| 老鸭窝网址在线观看| 在线播放国产精品三级| 国产一区二区三区视频了| 精品久久久久久久毛片微露脸| 国产成人av教育| 又黄又粗又硬又大视频| 婷婷六月久久综合丁香| 欧美乱妇无乱码| 在线观看舔阴道视频| 在线永久观看黄色视频| 后天国语完整版免费观看| 无限看片的www在线观看| 成人免费观看视频高清| 黄色毛片三级朝国网站| 亚洲熟妇熟女久久| 精品国产乱子伦一区二区三区| 国产精品久久久人人做人人爽| 91麻豆av在线| 人人妻人人澡欧美一区二区| 国产精品美女特级片免费视频播放器 | 欧洲精品卡2卡3卡4卡5卡区| 日本 av在线| 成年女人毛片免费观看观看9| 亚洲一区二区三区色噜噜| 欧美成人一区二区免费高清观看 | 亚洲第一电影网av| 国产精品久久久人人做人人爽| 精品日产1卡2卡| 久久国产乱子伦精品免费另类| 中文字幕精品亚洲无线码一区 | 在线观看免费日韩欧美大片| 亚洲欧美精品综合一区二区三区| 精品久久久久久久末码| 国产黄片美女视频| 午夜福利在线观看吧| 精品一区二区三区av网在线观看| 亚洲国产精品999在线| 99久久精品国产亚洲精品| 日本免费一区二区三区高清不卡| 国产真实乱freesex| 妹子高潮喷水视频| 国产av又大| 国产视频一区二区在线看| 亚洲国产欧美一区二区综合| 国产黄片美女视频| 亚洲五月天丁香| 岛国在线观看网站| 夜夜爽天天搞| 亚洲国产精品合色在线| 免费人成视频x8x8入口观看| 欧美不卡视频在线免费观看 | 午夜福利成人在线免费观看| av在线播放免费不卡| 少妇的丰满在线观看| 最好的美女福利视频网| 首页视频小说图片口味搜索| 亚洲国产毛片av蜜桃av| 久久草成人影院| 亚洲美女黄片视频| 性欧美人与动物交配| 午夜影院日韩av| 亚洲成a人片在线一区二区| 婷婷精品国产亚洲av在线| 美女 人体艺术 gogo| 男人舔女人的私密视频| 老司机午夜十八禁免费视频| 人人妻,人人澡人人爽秒播| 国产精品久久久久久人妻精品电影| 国产激情偷乱视频一区二区| 一个人免费在线观看的高清视频| 久久久久久久久免费视频了| www日本黄色视频网| 午夜激情福利司机影院| 久热爱精品视频在线9| avwww免费| 波多野结衣高清作品| 精品久久久久久成人av| 日韩精品青青久久久久久| a在线观看视频网站| 天天一区二区日本电影三级| 亚洲精品美女久久av网站| 国产亚洲欧美精品永久| 老熟妇仑乱视频hdxx| 亚洲精品久久国产高清桃花| 亚洲最大成人中文| 免费高清在线观看日韩| 怎么达到女性高潮| 欧美午夜高清在线| 熟女少妇亚洲综合色aaa.| 2021天堂中文幕一二区在线观 | 亚洲va日本ⅴa欧美va伊人久久| 国产精品免费一区二区三区在线| 99久久精品国产亚洲精品| 免费无遮挡裸体视频| 久久中文字幕一级| 看片在线看免费视频| 中文字幕人妻丝袜一区二区| 国产精品 欧美亚洲| 国产成人系列免费观看| 亚洲人成电影免费在线| 国产精品99久久99久久久不卡| 久久久精品欧美日韩精品| 久久国产精品人妻蜜桃| 97人妻精品一区二区三区麻豆 | 成人18禁高潮啪啪吃奶动态图| 韩国精品一区二区三区| 久久久久九九精品影院| 免费在线观看视频国产中文字幕亚洲| 亚洲精品色激情综合| 一卡2卡三卡四卡精品乱码亚洲| 自线自在国产av| 日韩大码丰满熟妇| 757午夜福利合集在线观看| 亚洲精品国产精品久久久不卡| 欧美中文综合在线视频| 国产男靠女视频免费网站| 给我免费播放毛片高清在线观看| 不卡av一区二区三区| 午夜福利免费观看在线| 淫妇啪啪啪对白视频| 亚洲精品久久成人aⅴ小说| av片东京热男人的天堂| 一进一出抽搐gif免费好疼| 俺也久久电影网| www日本在线高清视频| 亚洲av电影在线进入| 观看免费一级毛片| 丰满的人妻完整版| 成人三级做爰电影| 亚洲欧美日韩无卡精品| 中文字幕人妻熟女乱码| 国产一级毛片七仙女欲春2 | 久久精品91蜜桃| 中亚洲国语对白在线视频| 国产亚洲精品一区二区www| 国产亚洲欧美在线一区二区| 91大片在线观看| 久久国产精品男人的天堂亚洲| 成年免费大片在线观看| 12—13女人毛片做爰片一| 99riav亚洲国产免费| 激情在线观看视频在线高清| 久久中文字幕一级| 精品国内亚洲2022精品成人| 午夜免费观看网址| 国产激情久久老熟女| 国产一区在线观看成人免费| 最新在线观看一区二区三区| 99久久久亚洲精品蜜臀av| 国产精品 国内视频| 色老头精品视频在线观看| 久久中文字幕人妻熟女| 国产1区2区3区精品| 天堂√8在线中文| 亚洲中文日韩欧美视频| 亚洲av熟女| 日本成人三级电影网站| 欧美人与性动交α欧美精品济南到| 神马国产精品三级电影在线观看 | 色婷婷久久久亚洲欧美| 黄片大片在线免费观看| 男人舔奶头视频| 91麻豆av在线| 岛国视频午夜一区免费看| 国产av一区在线观看免费| 久久中文看片网| 可以在线观看毛片的网站| 成在线人永久免费视频| 老司机在亚洲福利影院| 麻豆国产av国片精品| av中文乱码字幕在线| 亚洲avbb在线观看| www.999成人在线观看| 亚洲精品在线美女| 可以在线观看的亚洲视频| 无遮挡黄片免费观看| 日本三级黄在线观看| 亚洲精品美女久久久久99蜜臀| 国产亚洲精品综合一区在线观看 | 女人被狂操c到高潮| 国产av一区二区精品久久| 日韩大尺度精品在线看网址| 亚洲九九香蕉| 在线观看免费视频日本深夜| 国产国语露脸激情在线看| 亚洲国产精品sss在线观看| 精品久久久久久久久久久久久 | xxx96com| 亚洲性夜色夜夜综合| 欧美日韩精品网址| 在线观看日韩欧美| 啦啦啦免费观看视频1| 可以免费在线观看a视频的电影网站| 午夜福利18| 欧美成人免费av一区二区三区| 天天躁狠狠躁夜夜躁狠狠躁| 十分钟在线观看高清视频www| 日韩精品青青久久久久久| 国产熟女午夜一区二区三区| 亚洲国产欧美日韩在线播放| 精品熟女少妇八av免费久了| 日韩欧美 国产精品| 天堂影院成人在线观看| 国产三级黄色录像| 美女国产高潮福利片在线看| 国产欧美日韩一区二区精品| 精品久久久久久,| 91大片在线观看| 午夜福利免费观看在线| 婷婷精品国产亚洲av| 99在线视频只有这里精品首页| 无遮挡黄片免费观看| 午夜久久久久精精品| 亚洲av日韩精品久久久久久密| 色老头精品视频在线观看| 一本一本综合久久| 国产在线观看jvid| 午夜免费鲁丝| 51午夜福利影视在线观看| 亚洲三区欧美一区| 国产97色在线日韩免费| 免费电影在线观看免费观看| 久久精品国产综合久久久| 色精品久久人妻99蜜桃| 日韩欧美国产一区二区入口| 国产精品永久免费网站| 90打野战视频偷拍视频| 一二三四在线观看免费中文在| 女警被强在线播放| 久热这里只有精品99| 久久 成人 亚洲| 国产高清有码在线观看视频 | 波多野结衣av一区二区av| 国产aⅴ精品一区二区三区波| 嫩草影院精品99| 精品少妇一区二区三区视频日本电影| 老司机午夜十八禁免费视频| 国产私拍福利视频在线观看| 在线观看舔阴道视频| 日韩大码丰满熟妇| 最好的美女福利视频网| 黑人欧美特级aaaaaa片| 国内毛片毛片毛片毛片毛片| 欧美三级亚洲精品| 亚洲第一欧美日韩一区二区三区| 长腿黑丝高跟| 激情在线观看视频在线高清| 一进一出抽搐动态| 久久精品国产亚洲av香蕉五月| 热re99久久国产66热| 18美女黄网站色大片免费观看| 国产精品影院久久| 欧美大码av| 精品国产乱码久久久久久男人| 欧美三级亚洲精品| 精品欧美一区二区三区在线| 啦啦啦 在线观看视频| 亚洲午夜精品一区,二区,三区| 久99久视频精品免费| 午夜a级毛片| 精品高清国产在线一区| 又大又爽又粗| 亚洲欧美日韩无卡精品| 看免费av毛片| 男女视频在线观看网站免费 | 国产精品精品国产色婷婷| 中文亚洲av片在线观看爽| 国产亚洲欧美98| 日本精品一区二区三区蜜桃| 欧美日韩瑟瑟在线播放| 欧美日韩福利视频一区二区| 黄色女人牲交| 久久久久免费精品人妻一区二区 | 国产精品1区2区在线观看.| 99热6这里只有精品| 久久精品国产清高在天天线| 国产熟女xx| tocl精华| 久久亚洲精品不卡| 欧美日本视频| 久久九九热精品免费| 国产成人系列免费观看| 成人欧美大片| 久久精品成人免费网站| 在线视频色国产色| 国产激情欧美一区二区| 1024视频免费在线观看| 精品久久久久久,| 啦啦啦韩国在线观看视频| 亚洲黑人精品在线| 人人妻,人人澡人人爽秒播| 欧美久久黑人一区二区| 国产高清有码在线观看视频 | 亚洲专区国产一区二区| 国产97色在线日韩免费| 亚洲精品美女久久av网站| 国语自产精品视频在线第100页| 日韩一卡2卡3卡4卡2021年| 亚洲第一青青草原| 岛国在线观看网站| 99热6这里只有精品| 少妇被粗大的猛进出69影院| 欧美最黄视频在线播放免费| 免费女性裸体啪啪无遮挡网站| 麻豆成人av在线观看| 中文字幕精品亚洲无线码一区 | 午夜成年电影在线免费观看| 欧美性猛交╳xxx乱大交人| 久久婷婷成人综合色麻豆| √禁漫天堂资源中文www| 亚洲九九香蕉| 一进一出抽搐gif免费好疼| 精品久久久久久久久久久久久 | 亚洲av片天天在线观看| 成人手机av| 一区二区日韩欧美中文字幕| 一本综合久久免费| 日韩有码中文字幕| 国产精品免费一区二区三区在线| 岛国在线观看网站| 欧美色欧美亚洲另类二区| 国产欧美日韩一区二区三| 一级毛片高清免费大全| 色播亚洲综合网| 午夜影院日韩av|