• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    SDN多控制器一致性的量化研究

    2016-07-18 11:50:54李軍飛蘭巨龍胡宇翔鄔江興
    通信學(xué)報 2016年6期
    關(guān)鍵詞:一致性研究

    李軍飛,蘭巨龍,胡宇翔,鄔江興

    ?

    SDN多控制器一致性的量化研究

    李軍飛,蘭巨龍,胡宇翔,鄔江興

    (國家數(shù)字交換系統(tǒng)工程技術(shù)研究中心,河南鄭州 450002)

    針對SDN網(wǎng)絡(luò)中多控制器的一致性問題,提出了一種量化的研究方法,為控制層的東西向擴展提供更為精準(zhǔn)有效的共享網(wǎng)絡(luò)視圖方法。首先,結(jié)合SDN的特性,給出了控制器之間一致性、性能以及可用性的度量指標(biāo),建立通用的量化分析模型。其次,針對其中3類典型的一致性問題進行了量化研究,明確了其取得最優(yōu)值的條件,為一致性參數(shù)的配置提供了參考。最后,通過仿真實驗對該量化方法進行驗證。實驗結(jié)果表明,該量化方法能夠有效提高SDN控制層的性能和可用性。

    SDN;多控制器;一致性;性能;可用性

    1 引言

    隨著網(wǎng)絡(luò)應(yīng)用的快速發(fā)展,傳統(tǒng)的網(wǎng)絡(luò)交換設(shè)備承載著越來越多的控制邏輯,已難以適應(yīng)虛擬化、云計算、大數(shù)據(jù)及相關(guān)業(yè)務(wù)發(fā)展對數(shù)據(jù)高速傳輸、資源靈活配置、協(xié)議快速部署的需求。軟件定義網(wǎng)絡(luò)(SDN, software defined network)提出了控制與轉(zhuǎn)發(fā)分離的設(shè)計結(jié)構(gòu),實現(xiàn)了開放的可編程網(wǎng)絡(luò)接口,為網(wǎng)絡(luò)提供了更細(xì)粒度的管理,引起了學(xué)術(shù)界和產(chǎn)業(yè)界的廣泛研究[1,2]。然而,SDN的集中式控制在為網(wǎng)絡(luò)應(yīng)用帶來創(chuàng)新與便利的同時,也帶來了可靠性、可擴展性以及可用性等方面的問題。目前,無論是針對SDN的可靠性問題[3],還是可擴展性問題[4],大多數(shù)的解決方法均采用多控制器間主備冗余或?qū)Φ葏f(xié)同的方法。

    然而,多個控制器之間如何高效地共享網(wǎng)絡(luò)視圖,以期實現(xiàn)快速的主備切換或有效的集中式控制,即SDN控制器的一致性(consensus)問題,仍是SDN多控制器網(wǎng)絡(luò)面臨的主要難題之一。維護SDN控制器一致性的主要目的就在于要保證主控制器獲取的網(wǎng)絡(luò)事件能夠共享給從控制器,或本地控制器獲取的網(wǎng)絡(luò)事件能夠傳播給全局其余的控制器,以使多個控制器在關(guān)于全網(wǎng)的視圖問題上達成一致。在SDN網(wǎng)絡(luò)中,強一致性有利于多個控制器間具有更加一致的網(wǎng)絡(luò)視圖,使基于集中式控制的上層應(yīng)用的效果更好。但是,這也會帶來更多的通信開銷和延遲,影響控制層面的性能并降低其可用性。

    目前,SDN控制器的一致性主要是通過分布式數(shù)據(jù)存儲系統(tǒng)來實現(xiàn)[5],其可供選擇的一致性協(xié)議、數(shù)據(jù)交互和同步方法有限,難以滿足上層應(yīng)用的多樣化部署和流量優(yōu)化需求[6,7]。而且,控制器一致性的研究主要集中在設(shè)計和實現(xiàn)方面,多是針對不同強度一致性的定性研究,缺少對其進一步的量化和優(yōu)化。因此,研究多控制器之間一致性、性能以及可用性的量化關(guān)系,并基于此來尋求SDN多控制器間的協(xié)同優(yōu)化配置,對于提升SDN控制層面的整體性能具有重要的現(xiàn)實應(yīng)用價值。

    綜上,本文提出了一種SDN多控制器的一致性量化研究方法,希望能引起相關(guān)研究者的興趣。具體而言,本文通過建立SDN多控制器的通用量化分析模型,研究其一致性、性能及可用性之間的協(xié)同優(yōu)化配置,以減少同步的通信開銷、提高可用性。

    2 相關(guān)工作

    SDN的主要優(yōu)勢之一就是具有全局的網(wǎng)絡(luò)視圖,供部署在控制器上層的應(yīng)用所使用,以簡潔高效地解決傳統(tǒng)網(wǎng)絡(luò)中難以解決的問題,如Handigol、Wang等[1,2]的研究結(jié)果表明集中式網(wǎng)絡(luò)具有更為有效的負(fù)載均衡管理。然而,SDN網(wǎng)絡(luò)中也存在著可靠性、可擴展性以及可用性等方面的問題,成為了該領(lǐng)域的研究熱點。例如,Li等[3]針對主控制器異常會造成整個網(wǎng)絡(luò)癱瘓的問題,提出了多個冗余控制器采用BFT (byzantine fault tolerant)技術(shù),以增強控制層的可靠性。另外,Dixit等[4]針對不斷增長的SDN網(wǎng)絡(luò)規(guī)模及單個控制器性能有限的問題,提出了多個分布式控制器協(xié)同工作的方法,以解決SDN網(wǎng)絡(luò)的可擴展性。因此,無論是解決SDN網(wǎng)絡(luò)中的可靠性還是可擴展性,目前大多數(shù)的方法都是基于多控制器的思想。然而,由于不同控制器管理的交換機不同或角色不同,導(dǎo)致其獲得的網(wǎng)絡(luò)視圖不同,為了能夠達到SDN的集中式控制效果,多個控制器之間需要同步其網(wǎng)絡(luò)視圖??刂破髦g如何同步,使具有更加一致的網(wǎng)絡(luò)視圖,是上述研究要解決的根本問題。

    HyperFlow[8]是第一個提出在SDN網(wǎng)絡(luò)中引入分布式控制器概念的,控制器之間通過構(gòu)建在分布式文件系統(tǒng)WheelFS之上的訂閱—發(fā)布平臺實現(xiàn)數(shù)據(jù)同步,以確保節(jié)點之間對網(wǎng)絡(luò)視圖的一致性。同時,文獻[8]也評估了HyperFlow中控制器節(jié)點之間的同步性能,即每秒能夠處理1 000次以下的網(wǎng)絡(luò)事件更新,但沒有對一致性強弱對性能的影響做進一步的研究。Onix[5]是第一款產(chǎn)品級的強調(diào)可用性和可擴展性的SDN控制器,由于其針對大規(guī)模的商用級網(wǎng)絡(luò)所開發(fā),所以廣泛應(yīng)用于Google、VMware等公司的商用網(wǎng)絡(luò)中。Onix控制器為上層應(yīng)用提供了NIB (network information base) 的網(wǎng)絡(luò)視圖,并有2種可供選擇的不同類型的數(shù)據(jù)庫用于節(jié)點間的數(shù)據(jù)同步:面向SQL的、具有強一致性的事務(wù)型數(shù)據(jù)庫,但其同步性能較低;基于DHT (distributed Hash map)的、僅能最終一致性的Key-Value數(shù)據(jù)庫,但有較好的同步性能。然而,Onix是一款不開源的控制器,且僅提供了2種不同強弱的一致性模型,難以適應(yīng)SDN上層應(yīng)用的多樣化需求。OpenDayLight是一個以商用為初衷的開源的控制器項目,得到Cisco、IBM等公司的支持,其中的多控制器協(xié)同主要是采用云計算中的Infinispan數(shù)據(jù)存儲框架[9],但由于其目前仍在開發(fā)之中,沒有達到理想的性能指標(biāo),故需要重新考慮該部分的設(shè)計[10]。

    另外,Bailis等[11]研究了如何采用PBS (probabilistically bounded staleness) 模型預(yù)測分布式節(jié)點間數(shù)據(jù)的最終一致性強度,為一致性和性能之間的權(quán)衡提供了借鑒方法。但是,該模型針對通用的分布式系統(tǒng),沒有結(jié)合SDN的特性給出具體的優(yōu)化方法。Hassas等[12]提出了一種層次式架構(gòu)來實現(xiàn)多控制器間的一致性,其中,上下兩層控制器形成樹狀結(jié)構(gòu),下層的控制器負(fù)責(zé)局部交換機的管理,上層控制器協(xié)調(diào)下層控制器的同步,維護網(wǎng)絡(luò)視圖的一致性。然而,該方法僅改變了多控制器間的通信模式,并沒有緩解一致性和性能之間的沖突問題。

    3 一致性問題的量化模型

    3.1 動機

    在分布式系統(tǒng)一致性的研究中,一致性與性能之間的平衡始終是研究熱點,針對不同的應(yīng)用場景提出了不同強弱的一致性協(xié)議[13,14]。例如,Paxos是解決分布式系統(tǒng)一致性問題的經(jīng)典算法,可以保證多控制器之間具有強一致的網(wǎng)絡(luò)視圖,但是在一次數(shù)據(jù)同步中,proposer、acceptor和learner之間需要多次交互。如圖1所示,這種信息交互方式會產(chǎn)生較大的網(wǎng)絡(luò)通信開銷,尤其是在選舉失敗或提議沖突的情況下消耗的網(wǎng)絡(luò)帶寬更為嚴(yán)重。因此,采用弱一致性協(xié)議或最終一致性協(xié)議來降低節(jié)點間同步的通信開銷,對于提升性能具有較好的效果。然而,弱一致性導(dǎo)致了控制器之間網(wǎng)絡(luò)視圖的差異,影響某些上層應(yīng)用的功能和效果,文獻[6]中所提及的流量負(fù)載均衡應(yīng)用。因此,如何在滿足上層應(yīng)用一致性要求的情況下,實現(xiàn)最小的同步通信開銷以及最高的可用性,是本文的研究重點。

    3.2 相關(guān)概念

    3.2.1 一致性

    對于一個SDN控制器節(jié)點,由于本地緩存或通信延遲,使其控制區(qū)域內(nèi)更新的網(wǎng)絡(luò)事件沒有及時地共享給它其余的控制器,造成了節(jié)點間網(wǎng)絡(luò)視圖的不一致。因此,這里采用控制器間網(wǎng)絡(luò)事件的差異度作為一致性的度量指標(biāo),控制器之間網(wǎng)絡(luò)事件的差異度越大,意味著系統(tǒng)的一致性越弱。另外,控制器節(jié)點上有不同類型的網(wǎng)絡(luò)事件,表1中列舉了部分常見的事件,如新的主機節(jié)點加入、鏈路斷開、流量負(fù)載更新等,并且,一致性的強弱很大程度上依賴于具體的應(yīng)用,例如,對于路徑計算應(yīng)用來說是弱一致性的協(xié)議,而對于負(fù)載均衡應(yīng)用來說卻可能是強一致性的。同時,不同的網(wǎng)絡(luò)事件對于同一上層應(yīng)用的一致性影響是不同的,例如,對于路徑計算應(yīng)用的一致性而言,網(wǎng)絡(luò)拓?fù)涞淖兓鄬τ诹髁控?fù)載的變化,具有更大的影響。

    表1 常見的網(wǎng)絡(luò)事件

    綜上可知,一致性的分析是要針對某一具體的上層應(yīng)用,且取決于該應(yīng)用中所涉及網(wǎng)絡(luò)事件的類型和數(shù)量。所以,對于部署在多個SDN控制器上的某一應(yīng)用,定義控制器節(jié)點CN的一致性為

    其中,E(1≤≤)表示在控制器節(jié)點CN上應(yīng)用中所涉及的網(wǎng)絡(luò)事件的類型,|E|表示該控制器節(jié)點上已更新的但還沒有及時同步的網(wǎng)絡(luò)事件E的最大數(shù)量,λ表示事件E在應(yīng)用中的影響因子??梢钥闯觯?i>c的取值越大,該節(jié)點的一致性越弱。進一步地,可以定義應(yīng)用在整個系統(tǒng)中的一致性為

    (2)

    其中,表示網(wǎng)絡(luò)中控制器的數(shù)目。那么,當(dāng)僅有,,,意味著SDN控制層面僅有一個控制器節(jié)點有事件更新,對應(yīng)用于增強SDN網(wǎng)絡(luò)可靠性的主備冗余多控制器網(wǎng)絡(luò);當(dāng),,意味著每個節(jié)點最多有一個需要同步的事件,對應(yīng)強一致性的分布式多控制器網(wǎng)絡(luò)。

    3.2.2 性能

    控制器之間進行一致性同步的性能主要受限于2個因素:1)節(jié)點間的通信開銷;2)單節(jié)點的同步負(fù)載。下面將逐一分析上述因素與一致性的關(guān)系,以研究性能與一致性之間的平衡點。

    對于通信開銷,控制器節(jié)點CN在同步一個網(wǎng)絡(luò)事件E時,產(chǎn)生的數(shù)據(jù)分組通常較小,平均在1 KB左右,最大不超過4 KB[15],如圖1中步驟2的數(shù)據(jù)分組。而且,一致性協(xié)議交互過程中的其余數(shù)據(jù)分組的大小也大都在該范圍內(nèi),差異不大,如圖1中步驟3~步驟5通信過程的數(shù)據(jù)分組。因此,使用單位時間內(nèi)的通信次數(shù)作為衡量通信開銷的指標(biāo),文獻[16]中也采用了該近似方法。那么,當(dāng)控制器節(jié)點CN每次均在達到一致性上限C時,節(jié)點間進行一次一致性同步,則可以獲得最小的通信開銷,速率為

    其中,是一個固定的常數(shù),取決于系統(tǒng)中采用的一致性協(xié)議。g表示控制器節(jié)點CN上網(wǎng)絡(luò)事件E的產(chǎn)生速率。進一步,可以計算整個系統(tǒng)通信開銷的最小速率為

    (4)

    單節(jié)點的同步負(fù)載主要是指本地發(fā)送的或接受遠(yuǎn)程的同步請求,可以采用同步次數(shù)作為其量化指標(biāo),即上文中所述的V。因此,式(3)和式(4)可以表示一致性與性能之間的關(guān)系。

    3.2.3 可用性

    可用性是另一個與一致性沖突的因素,在要求強一致性的多控制器網(wǎng)絡(luò)中,當(dāng)某個節(jié)點出現(xiàn)故障時,使控制器之間的網(wǎng)絡(luò)視圖形成差異。此時,控制層由于無法達成強一致性的網(wǎng)絡(luò)視圖,將不能再繼續(xù)工作,失去可用性??刂破鞴?jié)點間如果減弱一致性強度,在本地緩存部分更新的網(wǎng)絡(luò)事件,則能夠容忍短時間的故障。

    進而,整個控制層的可用性可以被度量為

    (6)

    3.3 一致性問題

    在對SDN多控制器的一致性、性能以及可用性進行量化分析之后,接下來本文研究它們之間的平衡點,以獲取最大的效益。在對某一上層應(yīng)用進行一致性配置時,通常會有2類針對不同目標(biāo)的優(yōu)化問題:1)在給定一致性的約束條件下,求解可以實現(xiàn)的最大性能或最高可用性;2)在給定性能或可用性約束的條件下,求解可以實現(xiàn)的最大一致性。對于這些約束條件,一般從全局的角度對整個系統(tǒng)進行約束,進一步地,考慮到網(wǎng)絡(luò)環(huán)境和應(yīng)用需求的多樣性,也可以對每個控制器節(jié)點進行具體的約束。因此,該一致性問題又可以細(xì)分為幾類具體的子問題,下面選取其中具有代表性的3個問題進行詳細(xì)的描述和分析。

    1) 給定一致性的全局約束,求能實現(xiàn)的最大性能

    Q1:對某一上層應(yīng)用,已知其在各個控制器節(jié)點上所涉及網(wǎng)絡(luò)事件的更新速率,即,在式(2)的一致性約束的條件下,求式(4)的最小取值。

    2) 給定一致性的全局約束,求可獲得的最高可用性

    Q2:對某一上層應(yīng)用,已知其在各個控制器節(jié)點上所涉及網(wǎng)絡(luò)事件的更新速率,即,以及故障節(jié)點修復(fù)時間t,在式(2)的一致性約束的條件下,求式(6)的最大取值。

    3) 給定一致性的具體約束,求能實現(xiàn)的最大性能

    Q3:對某一上層應(yīng)用,已知其在各個控制器節(jié)點上所涉及網(wǎng)絡(luò)事件的更新速率,即。給定式(1)的一致性約束,及式(2)的約束,且,求式(4)的最小取值。

    4 一致性問題的求解

    本節(jié)將逐一討論上述一致性問題的最優(yōu)解,并分析其獲得最優(yōu)解的條件。

    4.1 問題Q1的最優(yōu)解

    (8)

    c的取值雖然復(fù)雜,但其含義是簡單清晰的,可以稱其為“平方根分布法則”[16],表示每個節(jié)點的一致性上限與其產(chǎn)生網(wǎng)絡(luò)事件速率的平方根成正比。所以,在給定一致性的全局約束下,可以根據(jù)各個節(jié)點產(chǎn)生網(wǎng)絡(luò)事件的速率來分配各節(jié)點的一致性上限,以獲得最小的通信開銷,實現(xiàn)更高的性能。

    4.2 問題Q2的最優(yōu)解

    同問題Q1類似,c的取值取決于節(jié)點產(chǎn)生網(wǎng)絡(luò)事件的速率,當(dāng)兩者之間構(gòu)成正比關(guān)系時,整個控制層的可用性達到最大。同時,本文也注意到該問題的最優(yōu)解并不唯一,上述僅是其中的一組。

    4.3 問題Q3的最優(yōu)解

    問題Q3的求解是一個典型的多約束非線性規(guī)劃問題,可形式化描述為

    MNP啟發(fā)式算法

    在該啟發(fā)式算法中,首先按照4.1節(jié)中的平方根分布法則,計算在全局約束下取得最優(yōu)解的點(第4)、5)行),以其作為啟發(fā),搜索臨近的近似最優(yōu)解。同時,記錄與局部一致性相沖突的項x,構(gòu)成集合(第6)、7)行)。然后,在能夠較快接近最優(yōu)解的方向上搜索,即在集合中選擇x,使其對應(yīng)的t是所有沖突項中最大的,并使其滿足局部一致性約束(第13)、14)行)。最后,從解向量中去除x項(第15)、16)行),進行下一輪的最優(yōu)解搜索,直至所有的項同時也滿足局部約束(第8)~11)行)。

    5 實驗驗證與分析

    5.1 測試環(huán)境

    為了測試該量化模型,本文采用C++語言實現(xiàn)了一個仿真器,來模擬多控制器之間的一致性交互。該仿真器基于Internet 2 OS3E網(wǎng)絡(luò)拓?fù)?,OS3E是一個遍布美國的用于先進科學(xué)研究的SDN網(wǎng)絡(luò)[18]。如圖2所示,OS3E具有34個節(jié)點和42條鏈路,每個節(jié)點表示一個獨立的大學(xué)或組織,通常需要部署一個SDN控制器。因此,在該仿真器中,本文假定OS3E的每個節(jié)點上均部署一個控制器,控制器之間需要一致性交互。

    同時,在該仿真器中實現(xiàn)了3種一致性策略:1) Strict Mode:確保SDN網(wǎng)絡(luò)中的每個事件能夠被及時地全局共享,即,類似于Onix中基于SQL的強一致性模型;2) Relaxed Mode:在滿足一致性約束的前提下,節(jié)點間選擇最弱的一致性協(xié)議,且各節(jié)點的一致性配置相同,即,類似于Onix中基于Key-Value的弱一致性模型;3) Elastic Mode:基于上述量化模型的分析結(jié)果,設(shè)計一種具有彈性的一致性協(xié)議,使各節(jié)點的一致性配置與其網(wǎng)絡(luò)事件的更新速率相協(xié)調(diào)。通過分析上述3種策略的仿真結(jié)果,來說明該量化模型相對于SDN網(wǎng)絡(luò)中常用一致性模型的優(yōu)勢。

    5.2 實驗數(shù)據(jù)

    對于要在多個控制器節(jié)點上部署的上層應(yīng)用,假定其全局一致性約束C= 68,并在上述實驗環(huán)境中對其進行仿真測試。圖4所示為在該約束下全局通信開銷的仿真結(jié)果,包括同構(gòu)網(wǎng)絡(luò)和異構(gòu)網(wǎng)絡(luò)2種仿真場景,其中的軸采用西八區(qū)(PST)時間。從仿真結(jié)果可以看出,在3種一致性策略中,Elastic Mode一直具有最小的通信開銷,Strict Mode的通信開銷最大,且三者隨時間的走勢大致相同。所以,Elastic Mode相對于常用的一致性策略能夠?qū)崿F(xiàn)更好的性能。另一方面,通過對比分析具體的數(shù)據(jù),可以發(fā)現(xiàn)在異構(gòu)網(wǎng)絡(luò)中,Elastic Mode具有更好的效果,即各節(jié)點網(wǎng)絡(luò)事件數(shù)量的差異越大,Elastic Mode提升性能的效果越顯著。

    進一步地,在全局一致性約束的基礎(chǔ)上,再對每個控制器節(jié)點做具體的約束,即,其中,b在[1, 3]內(nèi)隨機取值。Elastic Mode采用4.3節(jié)所述的啟發(fā)式算法,計算每個節(jié)點的一致性參數(shù)c。這里僅在異構(gòu)網(wǎng)絡(luò)中進行了仿真,圖5給出了該一致性約束下的通信開銷。同樣,Elastic Mode具有最小的通信開銷,而Strict Mode的通信開銷最大。另外,與圖4(b)對比,圖5中Relaxed Mode通信開銷的抖動較大,即在一些特殊情況下的性能較差(如圖5中7 h、11 h、19 h等時刻),而Elastic Mode通信開銷的變化較為平穩(wěn),能適應(yīng)不同情況的一致性約束。

    對于可用性的仿真測試,為了便于對比分析,考慮另一個在多個控制器節(jié)點上部署的上層應(yīng)用,假定其全局一致性約束C= 1 700。由于各節(jié)點產(chǎn)生網(wǎng)絡(luò)事件的速率很快,為了不致使其在故障發(fā)生后均能超出本地一致性約束的上限,假定系統(tǒng)可以在很短的時間內(nèi)修復(fù)故障,即t= 0.01 s。這里也僅在異構(gòu)網(wǎng)絡(luò)中進行了仿真,測試結(jié)果如圖6所示,軸表示式(6)中的。其中,Elastic Mode和Relaxed Mode的可用性大致相當(dāng),在9~15 h時,Elastic Mode的可用性略占優(yōu)勢。而Strict Mode的可用性為定值,遠(yuǎn)低于上述兩者的可用性。

    圖5 具體約束下的通信開銷

    綜合上述分析可以發(fā)現(xiàn),在多控制器的SDN網(wǎng)絡(luò)中,基于該量化模型來適時調(diào)整一致性參數(shù)的Elastic Mode,相對于傳統(tǒng)的一致性策略Strict Mode和Relaxed Mode,在減小通信開銷和提高可用性上,都具有一定的優(yōu)勢。因此,該量化模型對于研究多控制器之間的一致性問題,提升控制層面的性能和可用性,具有重要的意義。

    6 結(jié)束語

    本文針對SDN多控制器間的一致性問題,首先介紹了該領(lǐng)域的相關(guān)工作和研究。然后,結(jié)合SDN的特性,給出了一致性、性能及可用性的度量指標(biāo),建立了量化分析模型。然后,選擇其中的幾類一致性問題進行量化研究,求解其最優(yōu)值以及獲得最優(yōu)值的條件,為一致性參數(shù)的配置提供了指導(dǎo)。最后,將基于上述量化模型的一致性配置方法與傳統(tǒng)的一致性方法進行了對比,實驗結(jié)果表明該方法能夠有效提高控制層面的性能和可用性。下一步的工作是把該方法應(yīng)用到OpenDayLight控制器上,將其作為東西向接口以實現(xiàn)控制器之間的同步,測試在真實SDN環(huán)境下的一致性效果。

    [1] HANDIGOL N, SEETHARAMAN S, FLAJSLIK M, et al. Plugin-serve: load-balancing Web traffic using OpenFlow[J]. ACM SIGCOMM Demo, 2009, 4(5): 6.

    [2] WANG R, BUTNARIU D, REXFORD J. OpenFlow-based server load balancing gone wild[C]//USENIX HotICE. c2011:12.

    [3] LI H, LI P, GUO S, et al. Byzantine-resilient secure software-defined networks with multiple controllers in cloud[J]. IEEE Transactions on Cloud Computing, 2014, 2(4): 436-447.

    [4] DIXIT A, HAO F, MUKHERJEE S, et al. Towards an elastic distributed SDN controller[C]//ACM SIGCOMM Computer Communication Review, 2013, 43(4): 7-12.

    [5] KOPONEN T, CASADO M, GUDE N, et al. Onix: a distributed control platform for large-scale production networks[C]//OSDI. c2010: 1-6.

    [6] LEVIN D, WUNDSAM A, HELLER B, et al. Logically centralized: state distribution trade-offs in software defined networks[C]//The First Workshop on Hot Topics in Software Defined Networks. ACM, c2012: 1-6.

    [7] STRAU? J. Control-plane consensus in software-defined networking: distributed controller synchronization using the ISIS2 toolkit[J/OL]. http://elib.uni-stuttgart.de/handle/1162/357/.

    [8] TOOTOONCHIAN A, GANJALI Y. HyperFlow: a distributed control plane for OpenFlow[C]//The 2010 Internet Network Management Conference on Research on Enterprise Networking. USENIX Association, c2010: 3.

    [9] LUO M, WU X, ZENG Y, et al. Multi-dimensional hashing for fast network information processing in SDN[C]//Complex, Intelligent, and Software Intensive Systems (CISIS), 2015 Ninth International Conference. IEEE, c2015: 140-147.

    [10] BOTELHO F, BESSANI A, RAMOS F, et al. SmartLight: a practical fault-tolerant SDN controller[J]. arXiv preprint arXiv:1407.6062.

    [11] BAILIS P, VENKATARAMAN S, FRANKLIN M J, et al. Probabilistically bounded staleness for practical partial quorums[J]. Proceedings of the VLDB Endowment, 2012, 5(8): 776-787.

    [12] HASSAS Y S, GANJALI Y. Kandoo: a framework for efficient and scalable offloading of control applications[C]//The First Workshop on Hot Topics in Software Defined Networks. ACM, c2012: 19-24.

    [13] BAILIS P, VENKATARAMAN S, FRANKLIN M J, et al. Quantifying eventual consensus with PBS[J]. The VLDB Journal, 2014, 23(2): 279-302.

    [14] DIAO Z. Consistency models for cloud-based online games: the storage system’s perspective[J/OL]. http://ceur-ws.org/Vol-1020/paper_03.pdf.

    [15] BOTELHO F, RAMOS V, MANUEL F, et al. On the feasibility of a consistent and fault-tolerant data store for SDNs[C]//Software Defined Networks (EWSDN), 2013 Second European Workshop. IEEE, c2013: 38-43.

    [16] ZHANG C, ZHANG Z. Trading replication consensus for performance and availability: an adaptive approach[C]//Distributed Computing Systems, 23rd International Conference. IEEE, c2003: 687-695.

    [17] YU H, VAHDAT A. The costs and limits of availability for replicated services[J]. ACM SIGOPS Operating Systems Review, ACM, 2001, 35(5): 29-42.

    [18] Internet2 open science, scholarship and services exchange[EB/OL]. http://www.internet2.edu/network/ose/.

    [19] SHALIMOV A, ZUIKOV D, ZIMARINA D, et al. Advanced study of SDN/OpenFlow controllers[C]//The 9th Central & Eastern European Software Engineering Conference in Russia. ACM, c2013: 1.

    Quantitative approach of multi-controller’s consensus in SDN

    LI Jun-fei, LAN Ju-long, HU Yu-xiang, WU Jiang-xing

    (National Digital Switching System Engineering & Technological R&D Center, Zhengzhou 450002, China)

    For the problem of multi-controller’s consensus in SDN, a quantitative approach was proposed, which provided a more accurate and effective method of sharing network view for the control layer's east-west extension. Firstly, the metrics of consensus, performance and availability between the controllers with the feature of SDN was provided, establishing the common model for quantitative research. Secondly, for the three typical questions in the research of multi-controller’s consensus, the condition to achieve its optimal value was explicated, which provided a reference for the configuration of consensus. Finally, to verify the validity of the quantitative approach by simulation, experimental results show that this approach can improve the performance and availability of the control layer in SDN effectively.

    SDN, multi-controller, consensus, performance, availability

    TP393

    A

    10.11959/j.issn.1000-436x.2016119

    2015-10-19;

    2016-05-10

    國家重點基礎(chǔ)研究發(fā)展計劃(“973”計劃)基金資助項目(No.2012CB315901, No.2013CB329104);國家自然科學(xué)基金資助項目(No.61521003,No.61372121);國家高技術(shù)研究發(fā)展計劃(“863”計劃)基金資助項目(No.2015AA016102, No.2013AA013505)

    The National Basic Research Program of China(973 Program) (No.2012CB315901, No.2013CB329104), The National Natural Science Foundation of China (No.61521003, No.61372121), The National High Technology Research and Development Program of China(863 Program) (No.2015AA016102, No.2013AA013505)

    李軍飛(1989-),男,河南安陽人,國家數(shù)字交換系統(tǒng)工程技術(shù)研究中心博士生,主要研究方向為集中式網(wǎng)絡(luò)管控下的主動防護技術(shù)。

    蘭巨龍(1962-),男,河北張北人,博士,國家數(shù)字交換系統(tǒng)工程技術(shù)研究中心總工程師、教授、博士生導(dǎo)師,主要研究方向為新一代信息網(wǎng)絡(luò)關(guān)鍵理論與技術(shù)。

    胡宇翔(1982-),男,河南周口人,博士,國家數(shù)字交換系統(tǒng)工程技術(shù)研究中心講師,主要研究方向為新一代信息網(wǎng)絡(luò)關(guān)鍵理論與技術(shù)。

    鄔江興(1953-),男,浙江嘉興人,國家數(shù)字交換系統(tǒng)工程技術(shù)研究中心教授、博士生導(dǎo)師,主要研究方向為網(wǎng)絡(luò)通信和網(wǎng)絡(luò)安全。

    猜你喜歡
    一致性研究
    關(guān)注減污降碳協(xié)同的一致性和整體性
    公民與法治(2022年5期)2022-07-29 00:47:28
    FMS與YBT相關(guān)性的實證研究
    注重教、學(xué)、評一致性 提高一輪復(fù)習(xí)效率
    對歷史課堂教、學(xué)、評一體化(一致性)的幾點探討
    2020年國內(nèi)翻譯研究述評
    遼代千人邑研究述論
    IOl-master 700和Pentacam測量Kappa角一致性分析
    視錯覺在平面設(shè)計中的應(yīng)用與研究
    科技傳播(2019年22期)2020-01-14 03:06:54
    EMA伺服控制系統(tǒng)研究
    新版C-NCAP側(cè)面碰撞假人損傷研究
    少妇被粗大的猛进出69影院 | 午夜老司机福利剧场| 亚洲精品成人av观看孕妇| 亚洲国产精品国产精品| 少妇高潮的动态图| av在线观看视频网站免费| 国产日韩欧美视频二区| 亚洲精品国产av成人精品| 久久久久久久大尺度免费视频| 国产xxxxx性猛交| 99国产综合亚洲精品| 日韩伦理黄色片| 欧美性感艳星| 超碰97精品在线观看| 热99久久久久精品小说推荐| 一级片免费观看大全| 少妇的丰满在线观看| 一二三四中文在线观看免费高清| 亚洲国产成人一精品久久久| 成人免费观看视频高清| 日韩不卡一区二区三区视频在线| av国产精品久久久久影院| 丰满饥渴人妻一区二区三| 一区二区日韩欧美中文字幕 | 校园人妻丝袜中文字幕| 三上悠亚av全集在线观看| 深夜精品福利| 亚洲天堂av无毛| 欧美性感艳星| 亚洲精品456在线播放app| 国产精品不卡视频一区二区| 亚洲熟女精品中文字幕| 国产1区2区3区精品| 美女视频免费永久观看网站| 成年人免费黄色播放视频| 欧美亚洲 丝袜 人妻 在线| 一级毛片电影观看| 水蜜桃什么品种好| 免费在线观看完整版高清| 亚洲激情五月婷婷啪啪| 视频中文字幕在线观看| 天天躁夜夜躁狠狠躁躁| 99精国产麻豆久久婷婷| 国产男人的电影天堂91| 国产精品一区www在线观看| 免费少妇av软件| 免费观看av网站的网址| 一级a做视频免费观看| 国产片特级美女逼逼视频| 国产日韩欧美在线精品| 日韩人妻精品一区2区三区| 又粗又硬又长又爽又黄的视频| av不卡在线播放| 乱人伦中国视频| 亚洲国产精品999| 热99久久久久精品小说推荐| 国产精品国产三级国产av玫瑰| 女人精品久久久久毛片| 亚洲av成人精品一二三区| 色哟哟·www| 高清av免费在线| 欧美激情极品国产一区二区三区 | 亚洲国产欧美在线一区| 丝袜美足系列| 亚洲精品中文字幕在线视频| 黑人巨大精品欧美一区二区蜜桃 | 国产精品欧美亚洲77777| 中文字幕av电影在线播放| 国产亚洲精品久久久com| 性色av一级| 国产精品久久久av美女十八| 亚洲性久久影院| 欧美日韩一区二区视频在线观看视频在线| 亚洲精品,欧美精品| av片东京热男人的天堂| 美女xxoo啪啪120秒动态图| 亚洲高清免费不卡视频| 亚洲欧美日韩另类电影网站| 成年av动漫网址| 赤兔流量卡办理| 色94色欧美一区二区| 成人毛片a级毛片在线播放| 免费在线观看黄色视频的| 国产精品三级大全| 毛片一级片免费看久久久久| 97精品久久久久久久久久精品| 高清在线视频一区二区三区| 久久av网站| 制服丝袜香蕉在线| 少妇被粗大猛烈的视频| 国产亚洲欧美精品永久| 丰满乱子伦码专区| 啦啦啦视频在线资源免费观看| 国产精品久久久久成人av| 99热这里只有是精品在线观看| 涩涩av久久男人的天堂| 免费在线观看完整版高清| 国产成人精品久久久久久| 一区二区三区精品91| 极品人妻少妇av视频| 免费av中文字幕在线| 久久久久久久精品精品| 春色校园在线视频观看| 亚洲精品国产av蜜桃| 欧美老熟妇乱子伦牲交| 美女大奶头黄色视频| 人人妻人人澡人人看| 一级毛片电影观看| 亚洲综合精品二区| 亚洲人成网站在线观看播放| 少妇被粗大猛烈的视频| 欧美日韩国产mv在线观看视频| 午夜影院在线不卡| 国产精品偷伦视频观看了| xxxhd国产人妻xxx| 又黄又爽又刺激的免费视频.| 欧美xxⅹ黑人| 视频中文字幕在线观看| 亚洲欧美色中文字幕在线| 午夜福利网站1000一区二区三区| 日韩成人av中文字幕在线观看| 午夜精品国产一区二区电影| 国产免费福利视频在线观看| 久久人人爽av亚洲精品天堂| 天天躁夜夜躁狠狠躁躁| 美女大奶头黄色视频| 丰满迷人的少妇在线观看| 飞空精品影院首页| 国产毛片在线视频| 国产精品一国产av| 亚洲欧美清纯卡通| 午夜福利,免费看| 少妇被粗大猛烈的视频| 我要看黄色一级片免费的| 成年女人在线观看亚洲视频| 欧美亚洲 丝袜 人妻 在线| av国产精品久久久久影院| 97在线人人人人妻| 超色免费av| 久久97久久精品| 精品人妻一区二区三区麻豆| 中文天堂在线官网| 国产成人av激情在线播放| 久久人人97超碰香蕉20202| 你懂的网址亚洲精品在线观看| 夫妻午夜视频| 九九爱精品视频在线观看| 中文字幕人妻丝袜制服| 午夜免费鲁丝| 丁香六月天网| 欧美精品一区二区免费开放| 日本欧美国产在线视频| 91精品三级在线观看| 精品久久久久久电影网| 韩国av在线不卡| 少妇高潮的动态图| 丰满乱子伦码专区| 国产日韩欧美亚洲二区| 亚洲精品自拍成人| 咕卡用的链子| 高清视频免费观看一区二区| 日韩中文字幕视频在线看片| 女人被躁到高潮嗷嗷叫费观| 国产女主播在线喷水免费视频网站| 精品第一国产精品| 亚洲av在线观看美女高潮| 午夜福利在线观看免费完整高清在| 精品一区在线观看国产| 男女午夜视频在线观看 | 在线免费观看不下载黄p国产| 高清视频免费观看一区二区| 自拍欧美九色日韩亚洲蝌蚪91| 丰满饥渴人妻一区二区三| 人人妻人人澡人人爽人人夜夜| 午夜激情久久久久久久| 国产欧美日韩一区二区三区在线| 日韩一本色道免费dvd| 亚洲精品久久午夜乱码| 在线观看免费视频网站a站| 91aial.com中文字幕在线观看| 美女内射精品一级片tv| 国产伦理片在线播放av一区| 国产片特级美女逼逼视频| 国产色爽女视频免费观看| 视频在线观看一区二区三区| 国产人伦9x9x在线观看| 午夜影院日韩av| 午夜福利免费观看在线| 99久久综合精品五月天人人| 大型黄色视频在线免费观看| 99riav亚洲国产免费| 看片在线看免费视频| 在线观看一区二区三区激情| 成人手机av| 精品久久久精品久久久| 亚洲av成人av| 自拍欧美九色日韩亚洲蝌蚪91| 国产99白浆流出| 叶爱在线成人免费视频播放| 搡老乐熟女国产| 国产在线一区二区三区精| 交换朋友夫妻互换小说| 精品卡一卡二卡四卡免费| 久久精品aⅴ一区二区三区四区| 成人黄色视频免费在线看| 国产亚洲精品一区二区www | 中文字幕av电影在线播放| 国产真人三级小视频在线观看| 欧美乱妇无乱码| 成人永久免费在线观看视频| 人人妻人人爽人人添夜夜欢视频| 欧美另类亚洲清纯唯美| 国产野战对白在线观看| 亚洲人成电影观看| 欧美精品啪啪一区二区三区| 日本精品一区二区三区蜜桃| 欧美中文综合在线视频| 丝瓜视频免费看黄片| av超薄肉色丝袜交足视频| 啦啦啦视频在线资源免费观看| 成年动漫av网址| 在线观看免费午夜福利视频| 久热爱精品视频在线9| 一个人免费在线观看的高清视频| 精品久久久久久久久久免费视频 | 一二三四在线观看免费中文在| 欧美激情 高清一区二区三区| 中国美女看黄片| 男男h啪啪无遮挡| 国产高清激情床上av| 久久久精品国产亚洲av高清涩受| 超碰97精品在线观看| 天堂中文最新版在线下载| 精品国产乱子伦一区二区三区| 欧美在线黄色| 99热网站在线观看| 中文字幕制服av| 久久亚洲真实| 超碰成人久久| 久久精品人人爽人人爽视色| 久久久久久久久免费视频了| 少妇被粗大的猛进出69影院| 老司机午夜福利在线观看视频| 亚洲精品中文字幕在线视频| 99riav亚洲国产免费| 日韩免费高清中文字幕av| 日韩欧美三级三区| 成人18禁在线播放| 美女午夜性视频免费| 操出白浆在线播放| 建设人人有责人人尽责人人享有的| 91av网站免费观看| 丝袜美足系列| 十八禁网站免费在线| 大码成人一级视频| 女人高潮潮喷娇喘18禁视频| 在线观看免费午夜福利视频| 亚洲欧美激情在线| 亚洲av欧美aⅴ国产| 在线国产一区二区在线| 欧美日本中文国产一区发布| 丰满迷人的少妇在线观看| 在线观看一区二区三区激情| 夜夜夜夜夜久久久久| 精品一区二区三区视频在线观看免费 | 免费少妇av软件| 日韩有码中文字幕| 丝袜在线中文字幕| 男人的好看免费观看在线视频 | 亚洲成人免费av在线播放| 欧美精品一区二区免费开放| 亚洲欧美激情在线| 1024视频免费在线观看| 午夜激情av网站| 国产精品自产拍在线观看55亚洲 | 黑丝袜美女国产一区| 9色porny在线观看| 另类亚洲欧美激情| 大码成人一级视频| 午夜免费成人在线视频| 国产精品美女特级片免费视频播放器 | 校园春色视频在线观看| 久久久国产欧美日韩av| 日韩一卡2卡3卡4卡2021年| 999精品在线视频| 啪啪无遮挡十八禁网站| 欧美日韩瑟瑟在线播放| 少妇裸体淫交视频免费看高清 | 老司机亚洲免费影院| 五月开心婷婷网| 成人影院久久| 丰满的人妻完整版| 熟女少妇亚洲综合色aaa.| 日韩欧美国产一区二区入口| 18禁黄网站禁片午夜丰满| 成人特级黄色片久久久久久久| 男女免费视频国产| 亚洲自偷自拍图片 自拍| 成人亚洲精品一区在线观看| 中文字幕av电影在线播放| 免费在线观看完整版高清| 欧洲精品卡2卡3卡4卡5卡区| 亚洲国产看品久久| 久久久久视频综合| 精品久久久久久,| 女警被强在线播放| 老司机亚洲免费影院| 国产精品久久久人人做人人爽| 免费看十八禁软件| www.熟女人妻精品国产| 国产99白浆流出| 五月开心婷婷网| 女人精品久久久久毛片| 一边摸一边抽搐一进一出视频| 日韩欧美一区视频在线观看| 免费看十八禁软件| 亚洲色图综合在线观看| tube8黄色片| 老鸭窝网址在线观看| 亚洲在线自拍视频| 亚洲av成人不卡在线观看播放网| 天堂中文最新版在线下载| 多毛熟女@视频| 免费在线观看影片大全网站| 大陆偷拍与自拍| 国产精品 欧美亚洲| 少妇粗大呻吟视频| 精品免费久久久久久久清纯 | 国产精品二区激情视频| 黄色a级毛片大全视频| 另类亚洲欧美激情| svipshipincom国产片| 啦啦啦免费观看视频1| av片东京热男人的天堂| 精品亚洲成国产av| 国产亚洲欧美98| 嫩草影视91久久| 亚洲熟女精品中文字幕| 国产成人欧美| 久久性视频一级片| 国产欧美日韩综合在线一区二区| 老汉色∧v一级毛片| 大香蕉久久成人网| 精品国产亚洲在线| 国产av又大| 热re99久久精品国产66热6| 中国美女看黄片| 国产精品98久久久久久宅男小说| 久久精品91无色码中文字幕| 亚洲欧美日韩另类电影网站| 高清毛片免费观看视频网站 | 好男人电影高清在线观看| 成人黄色视频免费在线看| 精品国产亚洲在线| 波多野结衣一区麻豆| 国产无遮挡羞羞视频在线观看| 男人的好看免费观看在线视频 | 欧美激情 高清一区二区三区| 在线播放国产精品三级| 在线观看免费视频网站a站| 自拍欧美九色日韩亚洲蝌蚪91| 国产精品久久久av美女十八| 国产亚洲欧美精品永久| 美女午夜性视频免费| 国产成人免费观看mmmm| 在线视频色国产色| 亚洲成国产人片在线观看| 色在线成人网| 国产区一区二久久| 欧美精品高潮呻吟av久久| 亚洲成国产人片在线观看| 精品久久久久久,| 在线av久久热| 精品一区二区三卡| 法律面前人人平等表现在哪些方面| 国产淫语在线视频| 色尼玛亚洲综合影院| 午夜福利一区二区在线看| 日韩欧美在线二视频 | 国产精品电影一区二区三区 | 欧美精品啪啪一区二区三区| 夜夜爽天天搞| 侵犯人妻中文字幕一二三四区| 国产精品 国内视频| 欧美日韩av久久| 国产精品久久久久久人妻精品电影| 9热在线视频观看99| 欧美精品人与动牲交sv欧美| 在线观看免费视频日本深夜| 欧美乱妇无乱码| 黄色 视频免费看| 一区在线观看完整版| 飞空精品影院首页| 99热国产这里只有精品6| 91字幕亚洲| 免费在线观看亚洲国产| 丁香欧美五月| 熟女少妇亚洲综合色aaa.| 亚洲片人在线观看| √禁漫天堂资源中文www| 在线永久观看黄色视频| 精品第一国产精品| 国产午夜精品久久久久久| 99国产精品99久久久久| 久久人妻福利社区极品人妻图片| 久久久久国产精品人妻aⅴ院 | 美女视频免费永久观看网站| 日本一区二区免费在线视频| 极品少妇高潮喷水抽搐| 777米奇影视久久| 午夜福利欧美成人| 黄色丝袜av网址大全| 日韩欧美三级三区| 久久国产亚洲av麻豆专区| 国产精品一区二区在线观看99| 黑人操中国人逼视频| 欧美激情高清一区二区三区| 激情在线观看视频在线高清 | 午夜精品国产一区二区电影| 夜夜夜夜夜久久久久| 啦啦啦免费观看视频1| 日韩欧美在线二视频 | 精品卡一卡二卡四卡免费| 久久中文字幕人妻熟女| 手机成人av网站| 亚洲一区二区三区欧美精品| 黄网站色视频无遮挡免费观看| 亚洲熟女精品中文字幕| 午夜免费成人在线视频| 高清av免费在线| 亚洲视频免费观看视频| xxxhd国产人妻xxx| 黄色视频,在线免费观看| 亚洲va日本ⅴa欧美va伊人久久| av网站免费在线观看视频| 一级黄色大片毛片| 后天国语完整版免费观看| 久久久久久人人人人人| 首页视频小说图片口味搜索| 国产av一区二区精品久久| 亚洲欧洲精品一区二区精品久久久| 人妻一区二区av| 日日夜夜操网爽| 亚洲性夜色夜夜综合| 亚洲欧美一区二区三区久久| 日韩制服丝袜自拍偷拍| 精品熟女少妇八av免费久了| 久久久国产欧美日韩av| 黑人猛操日本美女一级片| 一本一本久久a久久精品综合妖精| 国精品久久久久久国模美| 亚洲av电影在线进入| 两性午夜刺激爽爽歪歪视频在线观看 | 电影成人av| 亚洲欧美激情在线| 无人区码免费观看不卡| 搡老岳熟女国产| 免费av中文字幕在线| 亚洲熟妇中文字幕五十中出 | 国产在线一区二区三区精| 老司机午夜福利在线观看视频| 久久久精品免费免费高清| 国产成人av激情在线播放| 国产成人精品在线电影| 超碰成人久久| 大香蕉久久成人网| 亚洲伊人色综图| 大片电影免费在线观看免费| 高清视频免费观看一区二区| 丰满迷人的少妇在线观看| 国产不卡一卡二| 久久久久国产一级毛片高清牌| 国产精品影院久久| 国产av又大| 亚洲熟女毛片儿| 母亲3免费完整高清在线观看| 两性午夜刺激爽爽歪歪视频在线观看 | 91精品国产国语对白视频| 日韩 欧美 亚洲 中文字幕| 十分钟在线观看高清视频www| 国产精品综合久久久久久久免费 | 亚洲色图av天堂| 男女免费视频国产| 免费在线观看视频国产中文字幕亚洲| 黑丝袜美女国产一区| 看黄色毛片网站| 19禁男女啪啪无遮挡网站| 黄色怎么调成土黄色| 人人妻人人爽人人添夜夜欢视频| 丰满迷人的少妇在线观看| 一进一出好大好爽视频| 高清在线国产一区| 欧美黑人精品巨大| 国产男女内射视频| 国产一区在线观看成人免费| 色综合欧美亚洲国产小说| 亚洲片人在线观看| 啦啦啦在线免费观看视频4| 天堂中文最新版在线下载| 中文亚洲av片在线观看爽 | 久久狼人影院| 国产成人av激情在线播放| 极品教师在线免费播放| 麻豆成人av在线观看| 亚洲人成电影免费在线| 国产不卡一卡二| 亚洲精品久久午夜乱码| 精品免费久久久久久久清纯 | 99久久精品国产亚洲精品| 国产不卡一卡二| 精品人妻在线不人妻| 免费在线观看日本一区| 亚洲av日韩精品久久久久久密| 久久精品亚洲熟妇少妇任你| 欧美精品一区二区免费开放| 午夜福利视频在线观看免费| 欧美久久黑人一区二区| 香蕉丝袜av| 亚洲熟女毛片儿| 成年人黄色毛片网站| 村上凉子中文字幕在线| av天堂久久9| 日韩熟女老妇一区二区性免费视频| 色老头精品视频在线观看| 男人操女人黄网站| 欧美在线黄色| 亚洲 欧美一区二区三区| 性色av乱码一区二区三区2| 黄网站色视频无遮挡免费观看| 99久久精品国产亚洲精品| 欧美午夜高清在线| 亚洲欧美一区二区三区久久| 十八禁人妻一区二区| 新久久久久国产一级毛片| av天堂久久9| 99国产综合亚洲精品| 亚洲欧美激情在线| 欧美黄色淫秽网站| 人妻一区二区av| 中文字幕精品免费在线观看视频| 18禁裸乳无遮挡免费网站照片 | 久久九九热精品免费| 久久国产乱子伦精品免费另类| 亚洲情色 制服丝袜| 久久中文字幕人妻熟女| 天堂俺去俺来也www色官网| 国产精品亚洲av一区麻豆| 宅男免费午夜| 夜夜躁狠狠躁天天躁| 日韩三级视频一区二区三区| 亚洲中文日韩欧美视频| 欧美日韩亚洲综合一区二区三区_| 91在线观看av| 亚洲精品自拍成人| 免费看a级黄色片| 黑人欧美特级aaaaaa片| 亚洲av第一区精品v没综合| 国产无遮挡羞羞视频在线观看| 亚洲第一欧美日韩一区二区三区| 亚洲av成人av| 9热在线视频观看99| 国产成人av教育| 黄色女人牲交| 欧美乱码精品一区二区三区| 青草久久国产| 精品一区二区三卡| 久久国产亚洲av麻豆专区| 国产精品久久视频播放| 乱人伦中国视频| 久久人妻av系列| 黄频高清免费视频| 飞空精品影院首页| 夫妻午夜视频| 99国产综合亚洲精品| 妹子高潮喷水视频| 亚洲综合色网址| 日韩熟女老妇一区二区性免费视频| 变态另类成人亚洲欧美熟女 | 一区在线观看完整版| 久久精品熟女亚洲av麻豆精品| 久久国产亚洲av麻豆专区| 麻豆av在线久日| 亚洲美女黄片视频| 黄色怎么调成土黄色| 啪啪无遮挡十八禁网站| 婷婷精品国产亚洲av在线 | 精品国产一区二区三区久久久樱花| 高清毛片免费观看视频网站 | www.自偷自拍.com| 99久久综合精品五月天人人| 亚洲久久久国产精品| 9热在线视频观看99| 亚洲欧美激情综合另类| 国产欧美日韩一区二区三| 精品国产国语对白av| 久久午夜亚洲精品久久| 亚洲精品久久成人aⅴ小说| 亚洲国产欧美网| 桃红色精品国产亚洲av| 国产精品久久久av美女十八| 免费一级毛片在线播放高清视频 | 狠狠狠狠99中文字幕| 亚洲 国产 在线| 久久热在线av| 国产成人精品久久二区二区91| av线在线观看网站| 亚洲情色 制服丝袜| 免费人成视频x8x8入口观看| 午夜免费成人在线视频| 精品国产乱子伦一区二区三区| 老鸭窝网址在线观看| 村上凉子中文字幕在线| 日日摸夜夜添夜夜添小说| 欧美亚洲 丝袜 人妻 在线| 国产又爽黄色视频|