• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    軟件定義數(shù)據(jù)中心網(wǎng)絡(luò)研究

    2014-10-21 00:57楊旭周燁李勇
    中興通訊技術(shù) 2014年5期
    關(guān)鍵詞:軟件定義網(wǎng)絡(luò)網(wǎng)絡(luò)結(jié)構(gòu)數(shù)據(jù)中心

    楊旭 周燁 李勇

    摘要:提出了一種基于軟件定義網(wǎng)絡(luò)的數(shù)據(jù)中心網(wǎng)絡(luò)方案,并對其結(jié)構(gòu)和部署進(jìn)行了詳細(xì)介紹。通過使用軟件定義網(wǎng)絡(luò)技術(shù),該方案解決了傳統(tǒng)數(shù)據(jù)中心中網(wǎng)絡(luò)利用效率低下、管控方式復(fù)雜、建設(shè)運維成本較高等問題。該方案具有結(jié)構(gòu)簡單、易于部署的優(yōu)點。在負(fù)載均衡、域內(nèi)虛擬機遷移等典型應(yīng)用中,我們對該方案進(jìn)行了驗證,結(jié)果表明該方案具有良好的實用性。該方案為數(shù)據(jù)中心網(wǎng)絡(luò)架構(gòu)設(shè)計提供了一種重要思路。

    關(guān)鍵詞:軟件定義網(wǎng)絡(luò);數(shù)據(jù)中心;網(wǎng)絡(luò)結(jié)構(gòu)

    Abstract: This paper proposes a data center network deployment scheme based on software-defined networking. By using SDN, this scheme solves the problems such as low efficiency, complex management, and high operation cost in traditional data centers. This scheme has a simple architecture and can be easily deployed. After tested with some typical applications, such as load balancing and intra data center virtual machine migration, the availability of this scheme is presented. This scheme provides a valuable reference for data center network architecture.

    Key words: software-defined network; data center; network architecture

    近年來,數(shù)據(jù)中心受到學(xué)術(shù)界和產(chǎn)業(yè)界的廣泛關(guān)注,并成為網(wǎng)絡(luò)研究領(lǐng)域的一個重點內(nèi)容。數(shù)據(jù)中心由一個或多個計算機集群及配套的通信、存儲、管理、安全設(shè)備、軟件等組成。建立數(shù)據(jù)中心,可以將計算、存儲等資源集中起來,通過統(tǒng)一規(guī)劃從而減少相應(yīng)的建設(shè)、管理和運營費用;另一方面能夠為用戶提供更強的服務(wù)能力并使其獲得與接入軟硬件環(huán)境無關(guān)的統(tǒng)一體驗。然而,現(xiàn)有的數(shù)據(jù)中心網(wǎng)絡(luò)存在著建設(shè)管理復(fù)雜、控制不靈活等問題,影響了其進(jìn)一步的發(fā)展。

    軟件定義網(wǎng)絡(luò)[1](SDN)是近年來在網(wǎng)絡(luò)領(lǐng)域備受重視的一個新熱點,它提出將網(wǎng)絡(luò)控制功能從轉(zhuǎn)發(fā)設(shè)備上分離出來,集中抽象后形成控制平面,對各轉(zhuǎn)發(fā)設(shè)備進(jìn)行控制,從而提升網(wǎng)絡(luò)控制的靈活性和可編程性[2]。在控制方面,區(qū)別于傳統(tǒng)IP網(wǎng)絡(luò),它采用中心控制,這能夠大幅簡化控制邏輯、提高計算速度,使得控制層能夠更好地對網(wǎng)絡(luò)進(jìn)行管理。此外,SDN還能方便實現(xiàn)網(wǎng)絡(luò)虛擬化等一些功能。

    利用SDN技術(shù)來搭建數(shù)據(jù)中心網(wǎng)絡(luò),可以簡化其網(wǎng)絡(luò)管理、優(yōu)化網(wǎng)絡(luò)性能,進(jìn)一步提高數(shù)據(jù)中心的業(yè)務(wù)承載能力,因而受到了業(yè)界和學(xué)術(shù)界的廣泛重視[3]。例如,IBM和NEC提出了基于SDN的數(shù)據(jù)中心模型[4],Yahoo[5]、Google[6]和Microsof[7]等公司使用SDN技術(shù)搭建數(shù)據(jù)中心并實現(xiàn)互聯(lián),中國電信和騰訊等互聯(lián)網(wǎng)企業(yè)也開始試驗將SDN技術(shù)運用于數(shù)據(jù)中心環(huán)境。

    然而,由于SDN還處于研究和發(fā)展的起步階段,基于軟件定義的數(shù)據(jù)中心網(wǎng)絡(luò)尚未有成熟的解決方案,仍有一些問題尚待研究,例如,如何對數(shù)據(jù)中心實現(xiàn)擴展性良好的有效控制,數(shù)據(jù)中心之間如何互聯(lián),數(shù)據(jù)中心與用戶間的流量怎樣進(jìn)行優(yōu)化等。文章中作者提出了一個基于軟件定義的數(shù)據(jù)中心網(wǎng)絡(luò)方案,具有結(jié)構(gòu)簡單、易于部署的特點。在原型系統(tǒng)實現(xiàn)上,使用了自主研發(fā)的OpenFlow設(shè)備并部署了管理及測量系統(tǒng),提供了良好的可編程特性和對資源的管理、監(jiān)控能力。目前該數(shù)據(jù)中心已經(jīng)實現(xiàn)了負(fù)載均衡、虛擬機域內(nèi)遷移等功能,并對進(jìn)一步研究數(shù)據(jù)中心域間互聯(lián)等關(guān)鍵問題提供了基礎(chǔ)環(huán)境。

    1 數(shù)據(jù)中心網(wǎng)絡(luò)

    數(shù)據(jù)中心中的一個關(guān)鍵問題是如何有效分配和調(diào)度物理資。在數(shù)據(jù)中心中,物理資源主要包括計算資源、存儲資源和網(wǎng)絡(luò)資源等。其中,計算和存儲資源的管理技術(shù)相對來說已經(jīng)比較成熟:在計算資源方面,有vSphere[8]、HyperV[9]等虛擬機管理軟件,通過虛擬化靈活管控服務(wù)器的CPU、內(nèi)存、硬盤等資源;在存儲資源方面,有網(wǎng)絡(luò)附接存儲(NAS)、存儲區(qū)域網(wǎng)絡(luò)(SAN)等方案,提供管理、備份等功能。但在網(wǎng)絡(luò)資源方面,數(shù)據(jù)中心中現(xiàn)有的管理技術(shù)存在著諸如管控復(fù)雜、控制不靈活等問題,制約了數(shù)據(jù)中心的發(fā)展和高效利用[10]。

    1.1 網(wǎng)絡(luò)利用效率低下

    現(xiàn)有數(shù)據(jù)中心網(wǎng)絡(luò)的管理不夠智能,無法根據(jù)實時情況對資源進(jìn)行調(diào)配,實現(xiàn)最優(yōu)利用。另一方面,現(xiàn)行數(shù)據(jù)中心中,計算資源和網(wǎng)絡(luò)資源的管理沒有得到有效融合,這使得一些依賴網(wǎng)絡(luò)的應(yīng)用無法得到高效實現(xiàn),比如數(shù)據(jù)中心中常見的虛擬機遷移,其實現(xiàn)并沒有充分考慮網(wǎng)絡(luò)狀態(tài),效率較低。

    1.2 網(wǎng)絡(luò)管控方式復(fù)雜

    搭建數(shù)據(jù)中心的一個優(yōu)勢是通過資源的集中化來簡化建設(shè)管理工作,從而降低成本。目前,計算和存儲資源都有集中式的管理工具來提供統(tǒng)一的資源調(diào)配和自動優(yōu)化配置,但對于網(wǎng)絡(luò)資源,這種集中式的管理工具仍比較缺乏。

    當(dāng)前的網(wǎng)絡(luò)管理控制功能分布在各個網(wǎng)絡(luò)轉(zhuǎn)發(fā)設(shè)備上,并沒有統(tǒng)一的配置接口,管理員要分別設(shè)置各個轉(zhuǎn)發(fā)設(shè)備才能使網(wǎng)絡(luò)正常工作。另外,目前的配置方式以命令行為主,管理人員需要通過轉(zhuǎn)發(fā)設(shè)備提供的配置命令設(shè)置轉(zhuǎn)發(fā)協(xié)議、端口配置、接入策略等,這種方式耗時較長且工作量較大。還有,不同廠商的設(shè)備在管理接口和功能實現(xiàn)上存在差異,若使用不同的設(shè)備進(jìn)行組網(wǎng),需要管理人員熟悉多種設(shè)備的配置命令及性能指標(biāo),進(jìn)一步增加了管理人員的工作難度。

    1.3 建設(shè)和運維成本較高

    不同廠商的轉(zhuǎn)發(fā)設(shè)備都有各自獨特的結(jié)構(gòu)和管理接口,為了應(yīng)用某些產(chǎn)品特色或者簡化管理,建設(shè)數(shù)據(jù)中心時,往往傾向于使用同一廠商的設(shè)備。這在一定程度上限制了設(shè)備的選擇范圍,提高了數(shù)據(jù)中心的建設(shè)成本。

    除了轉(zhuǎn)發(fā)設(shè)備外,數(shù)據(jù)中心還需要購買流量鏡像等監(jiān)測設(shè)備,防火墻等安全設(shè)備等。多種設(shè)備的應(yīng)用使得數(shù)據(jù)中心網(wǎng)絡(luò)環(huán)境極為復(fù)雜,同時不同設(shè)備的管理接口又不盡相同,這就進(jìn)一步增加了管理難度,提高運維成本。

    2 基于SDN的數(shù)據(jù)中心

    SDN是近年來網(wǎng)絡(luò)領(lǐng)域的新興技術(shù),具有如下幾個特點[11]:

    ·將轉(zhuǎn)發(fā)設(shè)備中的網(wǎng)絡(luò)控制功能分離出來組成抽象的控制平面,并通過集中式控制器對各轉(zhuǎn)發(fā)設(shè)備進(jìn)行統(tǒng)一控制。

    ·通過軟件定義的方式實現(xiàn)控制器,并實現(xiàn)網(wǎng)絡(luò)控制可編程,允許靈活地制訂控制策略。

    ·對網(wǎng)絡(luò)轉(zhuǎn)發(fā)功能進(jìn)行抽象,為不同的轉(zhuǎn)發(fā)設(shè)備提供統(tǒng)一的轉(zhuǎn)發(fā)控制接口,提高設(shè)備通用性。

    采用SDN技術(shù)搭建數(shù)據(jù)中心網(wǎng)絡(luò),能夠較好地解決目前存在的問題。

    2.1 提高網(wǎng)絡(luò)利用效率

    SDN采用集中式控制,相比分布式控制,能更好地把握網(wǎng)絡(luò)狀態(tài),更快速地進(jìn)行調(diào)整,從而實現(xiàn)更加智能、更加高效的管理模式,對網(wǎng)絡(luò)進(jìn)行優(yōu)化。

    通過軟件定義的控制器,管理人員能夠?qū)崿F(xiàn)自動化的流量均衡[12]、安全控制[13]等功能,并能方便地進(jìn)行策略的調(diào)整。另一方面,通過融合良好的網(wǎng)絡(luò)監(jiān)控機制,控制器可以實現(xiàn)實時的網(wǎng)絡(luò)優(yōu)化,并且還可以大幅提高網(wǎng)絡(luò)利用效率。

    最后,集中式、程序化的控制器能夠方便地與數(shù)據(jù)中心的計算、存儲資源管理系統(tǒng)進(jìn)行融合,在虛擬機遷移等場景下優(yōu)化網(wǎng)絡(luò)性能,提高處理能力,從而提升整個數(shù)據(jù)中心的運行效率。

    2.2 簡化網(wǎng)絡(luò)管理控制

    SDN實現(xiàn)了控制平面和數(shù)據(jù)平面的分離,將網(wǎng)絡(luò)管控功能遷移到了控制器上,為網(wǎng)絡(luò)管理提供了一個集中式的接口,使得對網(wǎng)絡(luò)進(jìn)行統(tǒng)一管理和控制成為了可能。在SDN環(huán)境下,管理人員僅通過對控制器進(jìn)行調(diào)整即可實現(xiàn)對全網(wǎng)轉(zhuǎn)發(fā)設(shè)備的配置,大幅簡化了配置流程,也降低了策略部署響應(yīng)時間。

    另一方面,通過使用軟件定義的控制器,管理人員避免了大量的命令行操作??刂破骼猛ㄓ谜Z言編寫,使得管理人員可以快速上手,同時它屏蔽了不同廠商的管理接口,使得管理復(fù)雜度得以降低。

    2.3降低建設(shè)和運維成本

    SDN將控制功能從轉(zhuǎn)發(fā)設(shè)備中剝離,簡化了轉(zhuǎn)發(fā)設(shè)備的功能,從而實現(xiàn)通用性更強的轉(zhuǎn)發(fā)設(shè)備。這一方面使得建設(shè)數(shù)據(jù)中心時能更靈活地選擇設(shè)備。另一方面,通過減少轉(zhuǎn)發(fā)設(shè)備的生產(chǎn)成本,使得數(shù)據(jù)中心建設(shè)成本得到降低。

    控制器的強大計算能力和可編程能力使得部分傳統(tǒng)的監(jiān)測、安全設(shè)備功能能夠以軟件的形式實現(xiàn),從而簡化管理并減少額外的設(shè)備支出。

    可以看出,SDN技術(shù)在數(shù)據(jù)中心網(wǎng)絡(luò)資源管理方面有著很好的應(yīng)用前景,能進(jìn)一步節(jié)省其建設(shè)和運維成本,推動數(shù)據(jù)中心的發(fā)展。

    3 軟件定義數(shù)據(jù)中心網(wǎng)絡(luò)

    方案

    為了研究和驗證SDN技術(shù)在數(shù)據(jù)中心網(wǎng)絡(luò)建設(shè)和管理方面的作用,我們設(shè)計了一種基于軟件定義的數(shù)據(jù)中心網(wǎng)絡(luò)方案并加以實現(xiàn)。在進(jìn)行數(shù)據(jù)中心網(wǎng)絡(luò)設(shè)計時,需要考慮設(shè)備組網(wǎng)、邏輯結(jié)構(gòu)等方面。下面將逐一進(jìn)行介紹。

    設(shè)備組網(wǎng)如圖1所示。我們設(shè)計了一個多站點的數(shù)據(jù)中心組網(wǎng)方案,整體方案分為兩層:一層為數(shù)據(jù)中心站點,一層為全局管理系統(tǒng)。

    在各數(shù)據(jù)中心站點內(nèi)部,包含物理交換機、虛擬交換機、網(wǎng)關(guān)及本地控制器等設(shè)備。物理交換機和虛擬交換機都支持SDN,其中,物理交換機負(fù)責(zé)連接各臺服務(wù)器和網(wǎng)關(guān);虛擬交換機運行在各臺服務(wù)器上,為其上的各個虛擬機提供連接功能。網(wǎng)關(guān)是數(shù)據(jù)中心對外的統(tǒng)一接口,對進(jìn)出數(shù)據(jù)中心的數(shù)據(jù)進(jìn)行處理。物理交換機、虛擬交換機及網(wǎng)關(guān)共同構(gòu)成數(shù)據(jù)中心內(nèi)部的網(wǎng)絡(luò)。本地控制器是數(shù)據(jù)中心站點的管控單元,負(fù)責(zé)對服務(wù)器、虛擬機、網(wǎng)絡(luò)轉(zhuǎn)發(fā)設(shè)備等進(jìn)行管理和維護(hù),它通過控制平面與各物理設(shè)備相連,通過調(diào)用HyperVisor、SDN等的接口實現(xiàn)管控功能。

    全局管理系統(tǒng)主要為全局控制器。和各數(shù)據(jù)中心站點中的本地控制器不同,全局控制器不對轉(zhuǎn)發(fā)設(shè)備進(jìn)行直接控制,而是對各數(shù)據(jù)中心站點間的信息進(jìn)行協(xié)調(diào)和維護(hù)。例如在用戶占用多站點資源的情況下,保存各虛擬機與站點、服務(wù)器之間的映射關(guān)系,以便進(jìn)行跨站點通信。全局控制器與各本地控制器相連,獲取各站點內(nèi)部的信息,同時對站點間的信息進(jìn)行協(xié)調(diào),最后通過向各本地控制器發(fā)送信息實現(xiàn)跨站點的通信。

    方案的整體邏輯結(jié)構(gòu)如圖2所示。數(shù)據(jù)中心站有3層:設(shè)備層、管理層和應(yīng)用層。其中,設(shè)備層由各站點內(nèi)的物理、虛擬轉(zhuǎn)發(fā)設(shè)備及服務(wù)器等組成,是數(shù)據(jù)中心中的基礎(chǔ)設(shè)施;管理層包括設(shè)備管理、拓?fù)浒l(fā)現(xiàn)、虛擬

    網(wǎng)建立、狀態(tài)監(jiān)測等功能,通過和設(shè)備層進(jìn)行通信,它能夠獲取整個數(shù)據(jù)中心的運行狀態(tài),并在分析處理后對設(shè)備層進(jìn)行控制;應(yīng)用層是開放給各數(shù)據(jù)中心用戶的接口,包括一般用戶接口和管理員接口,分別提供虛擬網(wǎng)建立以及數(shù)據(jù)中心運行策略配置等功能。

    全局控制器也分為3層:站內(nèi)信息層、虛擬化信息層和應(yīng)用層。底層為站內(nèi)信息層,存放從各本地控制器獲取的數(shù)據(jù)中心站點信息;虛擬化信息層將跨域虛擬網(wǎng)的信息進(jìn)行分析和存儲;應(yīng)用層類似于數(shù)據(jù)中心站內(nèi)的結(jié)構(gòu),也是提供給用戶的接口,但提供的功能都是基于站點間通信的。

    采用如上方案,將SDN融入到數(shù)據(jù)中心當(dāng)中,能夠有效地提高數(shù)據(jù)中心的管理能力和運行效率。通過將數(shù)據(jù)中心網(wǎng)絡(luò)納入可控范圍,管理層可以快速發(fā)現(xiàn)網(wǎng)絡(luò)狀態(tài)的變化并適時進(jìn)行調(diào)整,提高網(wǎng)絡(luò)運行效率;通過將SDN與計算資源管理系統(tǒng)融合,使得整個數(shù)據(jù)中心設(shè)施有了統(tǒng)一的管理系統(tǒng),提高了管理能力。管理層的操作都集中到本地和全局控制器當(dāng)中,通過修改控制器的邏輯即可對數(shù)據(jù)中心進(jìn)行配置,簡化了管理操作。另一方面,軟件化的實現(xiàn)使得管理人員可以靈活地對策略進(jìn)行修改并實現(xiàn)多種多樣的功能,如在網(wǎng)關(guān)上實現(xiàn)防火墻等,這既提高了管控能力也在一定程度上降低了成本。

    4 軟件定義數(shù)據(jù)中心網(wǎng)絡(luò)

    原型系統(tǒng)

    按照上述方案,我們搭建了一個數(shù)據(jù)中心原型系統(tǒng),下面從拓?fù)浣Y(jié)構(gòu)、計算資源控制系統(tǒng)、網(wǎng)絡(luò)資源控制系統(tǒng)等方面進(jìn)行介紹。

    如表1所示,該原型系統(tǒng)中使用的設(shè)備包括商用OpenFlow交換機、TUNIE FPGA板卡、PC服務(wù)器、機架及機架服務(wù)器等。

    TUNIE FPGA是一款由清華大學(xué)自主研發(fā)的、支持OpenFlow協(xié)議的可編程交換機,它具有8個1 Gbit/s的網(wǎng)絡(luò)端口,具備基本的邏輯運算能力,成本較低。另外,它還具有可編程特性,支持對OpenFlow協(xié)議進(jìn)行修改,從而實現(xiàn)更為靈活可控的網(wǎng)絡(luò)管理。在原型系統(tǒng)中,該板卡主要用于服務(wù)器接入。

    在網(wǎng)絡(luò)上層,轉(zhuǎn)發(fā)設(shè)備需要連接大量設(shè)備并且處理更多數(shù)據(jù),因此需要使用商用OpenFlow交換機?,F(xiàn)有的商用OpenFlow交換機大多具有幾十個網(wǎng)絡(luò)接口,提供1 G/10 G的網(wǎng)絡(luò)帶寬,具備較強的邏輯運算能力,能夠滿足大數(shù)據(jù)量的處理需求。

    在網(wǎng)絡(luò)拓?fù)浞矫?,如圖3所示,我們搭建了兩個數(shù)據(jù)中心站點,每個站點都使用二層clos網(wǎng)絡(luò)拓?fù)?。其中站點1使用PC機作為服務(wù)器,商用OpenFlow交換機作為上層轉(zhuǎn)發(fā)設(shè)備,TUNIE FPGA作為底層轉(zhuǎn)發(fā)設(shè)備;站點2使用機架服務(wù)器,轉(zhuǎn)發(fā)設(shè)備都使用TUNIE FPGA。站點之前通過校園網(wǎng)相連。

    在計算資源控制系統(tǒng)方面,我們采用開源的OpenStack系統(tǒng)[14],其結(jié)構(gòu)如圖4所示:一臺服務(wù)器作為管理節(jié)點,部署OpenStack的若干管理組件,包括管理虛擬機狀態(tài)的Nova,管理虛擬機鏡像的Glance,管理虛擬機網(wǎng)絡(luò)的Quantum,管理塊存儲的Cinder,以及提供網(wǎng)頁管理界面的Horizon等。其他服務(wù)器作為計算節(jié)點,部署虛擬機運行相關(guān)組件,包括Nova、Quantum及KVM、OpenVSwitch等。管理節(jié)點與計算節(jié)點通過管理網(wǎng)絡(luò)連接,計算節(jié)點間通過數(shù)據(jù)網(wǎng)絡(luò)連接。

    網(wǎng)絡(luò)資源控制系統(tǒng)方面,核心是OpenFlow控制器。在管理節(jié)點上,運行了開源的Floodlight控制器[15],它通過控制網(wǎng)絡(luò)與各轉(zhuǎn)發(fā)設(shè)備相連,獲取網(wǎng)絡(luò)狀態(tài),并對轉(zhuǎn)發(fā)策略進(jìn)行配置。另外,它以REST API的方式與計算資源管理系統(tǒng)進(jìn)行通信,將網(wǎng)絡(luò)管理與計算管理融合到一起[16]。

    為了能夠?qū)崟r獲取整個數(shù)據(jù)中心的運行狀態(tài),我們還部署了一套監(jiān)測系統(tǒng),主要包括3個部分,分別用于監(jiān)測物理機(如圖5所示)、虛擬機和網(wǎng)絡(luò)轉(zhuǎn)發(fā)設(shè)備的狀態(tài)。物理機狀態(tài)通過各臺服務(wù)器上安裝的簡單網(wǎng)絡(luò)管理協(xié)議(SNMP)協(xié)議來收集,虛擬機狀態(tài)由OpenStack調(diào)用HyperVisor來進(jìn)行收集和維護(hù),網(wǎng)絡(luò)轉(zhuǎn)發(fā)設(shè)備狀態(tài)則主要由Floodlight控制器通過OpenFlow協(xié)議來進(jìn)行獲取[17]。這些監(jiān)測指標(biāo)能夠通過訪問網(wǎng)頁來進(jìn)行實時獲取。

    5 原型系統(tǒng)驗證

    為了驗證原型系統(tǒng)的性能,我們部署了一些demo并進(jìn)行了測試。

    負(fù)載均衡是一種常見的流量工程,在傳統(tǒng)IP網(wǎng)絡(luò)中實施較為復(fù)雜,而在SDN中,通過中心控制器可以較為容易地監(jiān)控并部署負(fù)載均衡機制,同時其優(yōu)化效果也更好。在原型系統(tǒng)中,我們部署了初步的負(fù)載均衡算法,現(xiàn)有的控制端算法包括隨機均衡、輪詢均衡和流量比例均衡3種。其實際效果已通過現(xiàn)場可編程門陣列(FPGA)進(jìn)行測試,能夠達(dá)到較好效果[18]。

    虛擬機遷移是數(shù)據(jù)中心中的基礎(chǔ)功能。和傳統(tǒng)數(shù)據(jù)中心中遷移過程只涉及計算資源管理不同,在該原型系統(tǒng)中,遷移過程融合了網(wǎng)絡(luò)資源的管理,在遷移前后,控制器要對數(shù)據(jù)中心網(wǎng)絡(luò)進(jìn)行操作,優(yōu)化鏈路狀態(tài)并保障遷移過程中虛擬機的通信不中斷。這增強了遷移過程中網(wǎng)絡(luò)的可控性,提高了網(wǎng)絡(luò)的利用效率。

    6 結(jié)束語

    近年來,數(shù)據(jù)中心受到了越來越廣泛的關(guān)注。但現(xiàn)有的網(wǎng)絡(luò)方案仍存在著一些問題,如管控復(fù)雜、成本較高等。SDN是最近興起的網(wǎng)絡(luò)技術(shù),它通過將網(wǎng)絡(luò)管控功能與轉(zhuǎn)發(fā)功能分離并采用集中控制的思路,能夠有效地解決現(xiàn)有數(shù)據(jù)中心網(wǎng)絡(luò)遇到的困難。因此,基于軟件定義的數(shù)據(jù)中心方案有著良好的前景。

    文章中設(shè)計了基于SDN的數(shù)據(jù)中心網(wǎng)絡(luò)方案,并進(jìn)行了原型系統(tǒng)的實現(xiàn)。該方案具有復(fù)雜度低、管控能力強、操作簡便、成本較低等特色。目前,該原型系統(tǒng)已經(jīng)在部署當(dāng)中,并實現(xiàn)了若干演示應(yīng)用,如數(shù)據(jù)中心狀態(tài)監(jiān)測、負(fù)載均衡、域內(nèi)虛擬機遷移等,后續(xù)的研究方案包括跨域虛擬機遷移、域間流量均衡演示等。

    參考文獻(xiàn)

    [1] McKeown Keynote talk: software-defined networking [C]//Proceedings of IEEE INFOCOM. Apr 18-25, 2009, Rio de Janeiro, Brazil. Brazil : IEEE Press, 2009:1-1.

    [2] MCKEOWN N, ANDERSON T, BALAKRISHNAN H, et al. OpenFlow: enabling innovation in campus networks [J]. ACM SIGCOMM Computer Communication Review, 2008, 38(2): 69-74.

    [3] SDN概念升溫, 市場角力加劇[EB/OL]. [2013-4-10]. http://www.cnii.com.cn/wlkb/rmydb/content/2013-01/31/content_1088793.htm

    [4] IBM and NEC Bring SDN/OpenFlow to Enterprise Data Center Networks [EB/OL]. [2012-01].http://public.dhe.ibm.com/common/ssi/ecm/en/qcl12364usen/QCL12364USEN.PDF

    [5] Warehouse Scale Datacenters: The case for a New Approach to Networking [EB/OL]. [2011-10-18] http://www.opennetsummit.org/archives/oct11/gahinsky-tue.pdf

    [6] JAIN S, KUMAR A, MANDAL S, et al. B4: Experience with a globally-deployed software defined WAN[C]//Proceedings of the ACM SIGCOMM 2013 Conference on SIGCOMM. Aug 13, 2013, Hong Kong, China. 2013: 3-14.

    [7] HONG C Y, KANDULA S, MAHAJAN R, et al. Achieving high utilization with software-driven wan[C]//Proceedings of the ACM SIGCOMM 2013 conference on SIGCOMM. Aug 13, 2013, Hong Kong, China. 2013: 15-26.

    [8] VMware vSphere [EB/OL]. http://www.vmware.com/cn/products/vsphere

    [9] Hyper-V概述 [EB/OL]. http://technet.microsoft.com/zh-cn/library/hh831531.aspx

    [10] GREENBER A, HAMILTON J, MALTZ D A, et al. The cost of a cloud: research problems in data center networks [J]. ACM SIGCOMM Computer Communication Review, 2008, 39 (1): 68-73.

    [11] JAIN R, PAUL S. Network virtualization and software defined networking for cloud computing: a survey [J]. Communications Magazine, IEEE, 2013, 51 (11): 24-31.

    [12] KOERNER M, KAO O. Multiple service load-balancing with OpenFlow[C]// 2012 IEEE 13th International Conference on High Performance Switching and Routing (HPSR). Jun 24-27, 2012. 2012: 210-214.

    [13] SHIN S, PORRAS P, YEGNESWARAN V, et al. Fresco: Modular composable security services for software-defined networks[J]. Internet Society NDSS, 2013.

    [14] OpenStack [EB/OL]. http://www.openstack.org/

    [15] Floodlight Open SDN Controller [EB/OL]. http://www.projectfloodlight.org/floodlight/

    [16] 龐冉, 黃永亮. SDN技術(shù)在綜合承載傳送網(wǎng)中的應(yīng)用分析[J]. 郵電設(shè)計技術(shù), 2013, (11): 11-24.

    [17] 劉媛妮, 唐紅, 趙國鋒. 未來互聯(lián)網(wǎng)體系結(jié)構(gòu)研究[J]. 重慶郵電大學(xué)學(xué)報(自然科學(xué)版), 2013,25(1):52-58.

    [18] 蔣培成, 陳鳴, 李兵. OpenFlow軟交換機的性能測量[J]. 重慶郵電大學(xué)學(xué)報(自然科學(xué)版), 2013,25(1): 24-29.

    [5] Warehouse Scale Datacenters: The case for a New Approach to Networking [EB/OL]. [2011-10-18] http://www.opennetsummit.org/archives/oct11/gahinsky-tue.pdf

    [6] JAIN S, KUMAR A, MANDAL S, et al. B4: Experience with a globally-deployed software defined WAN[C]//Proceedings of the ACM SIGCOMM 2013 Conference on SIGCOMM. Aug 13, 2013, Hong Kong, China. 2013: 3-14.

    [7] HONG C Y, KANDULA S, MAHAJAN R, et al. Achieving high utilization with software-driven wan[C]//Proceedings of the ACM SIGCOMM 2013 conference on SIGCOMM. Aug 13, 2013, Hong Kong, China. 2013: 15-26.

    [8] VMware vSphere [EB/OL]. http://www.vmware.com/cn/products/vsphere

    [9] Hyper-V概述 [EB/OL]. http://technet.microsoft.com/zh-cn/library/hh831531.aspx

    [10] GREENBER A, HAMILTON J, MALTZ D A, et al. The cost of a cloud: research problems in data center networks [J]. ACM SIGCOMM Computer Communication Review, 2008, 39 (1): 68-73.

    [11] JAIN R, PAUL S. Network virtualization and software defined networking for cloud computing: a survey [J]. Communications Magazine, IEEE, 2013, 51 (11): 24-31.

    [12] KOERNER M, KAO O. Multiple service load-balancing with OpenFlow[C]// 2012 IEEE 13th International Conference on High Performance Switching and Routing (HPSR). Jun 24-27, 2012. 2012: 210-214.

    [13] SHIN S, PORRAS P, YEGNESWARAN V, et al. Fresco: Modular composable security services for software-defined networks[J]. Internet Society NDSS, 2013.

    [14] OpenStack [EB/OL]. http://www.openstack.org/

    [15] Floodlight Open SDN Controller [EB/OL]. http://www.projectfloodlight.org/floodlight/

    [16] 龐冉, 黃永亮. SDN技術(shù)在綜合承載傳送網(wǎng)中的應(yīng)用分析[J]. 郵電設(shè)計技術(shù), 2013, (11): 11-24.

    [17] 劉媛妮, 唐紅, 趙國鋒. 未來互聯(lián)網(wǎng)體系結(jié)構(gòu)研究[J]. 重慶郵電大學(xué)學(xué)報(自然科學(xué)版), 2013,25(1):52-58.

    [18] 蔣培成, 陳鳴, 李兵. OpenFlow軟交換機的性能測量[J]. 重慶郵電大學(xué)學(xué)報(自然科學(xué)版), 2013,25(1): 24-29.

    [5] Warehouse Scale Datacenters: The case for a New Approach to Networking [EB/OL]. [2011-10-18] http://www.opennetsummit.org/archives/oct11/gahinsky-tue.pdf

    [6] JAIN S, KUMAR A, MANDAL S, et al. B4: Experience with a globally-deployed software defined WAN[C]//Proceedings of the ACM SIGCOMM 2013 Conference on SIGCOMM. Aug 13, 2013, Hong Kong, China. 2013: 3-14.

    [7] HONG C Y, KANDULA S, MAHAJAN R, et al. Achieving high utilization with software-driven wan[C]//Proceedings of the ACM SIGCOMM 2013 conference on SIGCOMM. Aug 13, 2013, Hong Kong, China. 2013: 15-26.

    [8] VMware vSphere [EB/OL]. http://www.vmware.com/cn/products/vsphere

    [9] Hyper-V概述 [EB/OL]. http://technet.microsoft.com/zh-cn/library/hh831531.aspx

    [10] GREENBER A, HAMILTON J, MALTZ D A, et al. The cost of a cloud: research problems in data center networks [J]. ACM SIGCOMM Computer Communication Review, 2008, 39 (1): 68-73.

    [11] JAIN R, PAUL S. Network virtualization and software defined networking for cloud computing: a survey [J]. Communications Magazine, IEEE, 2013, 51 (11): 24-31.

    [12] KOERNER M, KAO O. Multiple service load-balancing with OpenFlow[C]// 2012 IEEE 13th International Conference on High Performance Switching and Routing (HPSR). Jun 24-27, 2012. 2012: 210-214.

    [13] SHIN S, PORRAS P, YEGNESWARAN V, et al. Fresco: Modular composable security services for software-defined networks[J]. Internet Society NDSS, 2013.

    [14] OpenStack [EB/OL]. http://www.openstack.org/

    [15] Floodlight Open SDN Controller [EB/OL]. http://www.projectfloodlight.org/floodlight/

    [16] 龐冉, 黃永亮. SDN技術(shù)在綜合承載傳送網(wǎng)中的應(yīng)用分析[J]. 郵電設(shè)計技術(shù), 2013, (11): 11-24.

    [17] 劉媛妮, 唐紅, 趙國鋒. 未來互聯(lián)網(wǎng)體系結(jié)構(gòu)研究[J]. 重慶郵電大學(xué)學(xué)報(自然科學(xué)版), 2013,25(1):52-58.

    [18] 蔣培成, 陳鳴, 李兵. OpenFlow軟交換機的性能測量[J]. 重慶郵電大學(xué)學(xué)報(自然科學(xué)版), 2013,25(1): 24-29.

    猜你喜歡
    軟件定義網(wǎng)絡(luò)網(wǎng)絡(luò)結(jié)構(gòu)數(shù)據(jù)中心
    基于SNA的網(wǎng)絡(luò)輿論突發(fā)事件信息傳播網(wǎng)絡(luò)結(jié)構(gòu)研究
    關(guān)于間接蒸發(fā)冷機組在數(shù)據(jù)中心中應(yīng)用的節(jié)能分析
    2018年數(shù)據(jù)中心支出創(chuàng)新高
    2017第十屆中國數(shù)據(jù)中心大會榜單
    業(yè)務(wù)功能鏈技術(shù)及其應(yīng)用探析
    針對大規(guī)模軟件定義網(wǎng)絡(luò)的子域劃分及控制器部署方法
    一種新的SDN架構(gòu)下端到端網(wǎng)絡(luò)主動測量機制
    超高吞吐率Wi—Fi融合應(yīng)用新技術(shù)分析
    試論分布式計算機網(wǎng)絡(luò)結(jié)構(gòu)分析與優(yōu)化
    帶通信配網(wǎng)故障指示器故障監(jiān)測方法及安裝分析
    日韩成人在线观看一区二区三区| 一a级毛片在线观看| 亚洲精品影视一区二区三区av| 久久久久性生活片| 99久国产av精品| 97人妻精品一区二区三区麻豆| 一本精品99久久精品77| 深夜a级毛片| 丰满人妻熟妇乱又伦精品不卡| 免费观看人在逋| av天堂在线播放| 国产乱人伦免费视频| 极品教师在线免费播放| 国产三级黄色录像| 亚州av有码| 久久久久久久久大av| 91字幕亚洲| 全区人妻精品视频| 国产探花极品一区二区| 99精品在免费线老司机午夜| 怎么达到女性高潮| 一本精品99久久精品77| 亚洲天堂国产精品一区在线| 欧美高清性xxxxhd video| 青草久久国产| 91久久精品国产一区二区成人| 男女做爰动态图高潮gif福利片| 国产亚洲精品久久久久久毛片| av黄色大香蕉| 51国产日韩欧美| 一边摸一边抽搐一进一小说| 精品久久国产蜜桃| 国产乱人视频| 国产精品亚洲一级av第二区| 日本在线视频免费播放| 亚洲自拍偷在线| 少妇高潮的动态图| 欧洲精品卡2卡3卡4卡5卡区| 一级黄片播放器| 日韩有码中文字幕| 亚洲内射少妇av| 淫妇啪啪啪对白视频| x7x7x7水蜜桃| 99久国产av精品| 国内精品一区二区在线观看| 中文字幕人妻熟人妻熟丝袜美| 国产成人av教育| 最后的刺客免费高清国语| 亚洲av熟女| 久久精品国产亚洲av天美| 日韩免费av在线播放| 日本一本二区三区精品| 中亚洲国语对白在线视频| 国产野战对白在线观看| 在线播放国产精品三级| .国产精品久久| 国产精品久久视频播放| 国产一区二区三区视频了| 免费观看精品视频网站| 国产一级毛片七仙女欲春2| www.www免费av| 久久精品国产亚洲av香蕉五月| 禁无遮挡网站| 成年人黄色毛片网站| 91在线精品国自产拍蜜月| 日韩欧美三级三区| av天堂在线播放| 国产综合懂色| 国产高清激情床上av| 我要看日韩黄色一级片| 亚洲成人精品中文字幕电影| 国产精品1区2区在线观看.| 免费av观看视频| 精品人妻一区二区三区麻豆 | 久久性视频一级片| 在线播放无遮挡| 在线国产一区二区在线| 亚洲国产精品999在线| 99热只有精品国产| 成年女人永久免费观看视频| 欧美日韩黄片免| 欧美日韩福利视频一区二区| 成人特级黄色片久久久久久久| 一个人免费在线观看电影| 欧美日韩黄片免| 91狼人影院| 亚洲成人久久爱视频| 成年人黄色毛片网站| 狠狠狠狠99中文字幕| 夜夜看夜夜爽夜夜摸| 黄色日韩在线| 51午夜福利影视在线观看| 岛国在线免费视频观看| a级毛片免费高清观看在线播放| 日韩欧美三级三区| 超碰av人人做人人爽久久| 男女床上黄色一级片免费看| 禁无遮挡网站| 99热6这里只有精品| 十八禁国产超污无遮挡网站| 欧美激情久久久久久爽电影| 免费人成视频x8x8入口观看| 最近在线观看免费完整版| 听说在线观看完整版免费高清| 两个人视频免费观看高清| 国产精品,欧美在线| 国产一区二区亚洲精品在线观看| 国产精品久久视频播放| 如何舔出高潮| 在线播放无遮挡| 999久久久精品免费观看国产| 精品久久久久久久久亚洲 | 自拍偷自拍亚洲精品老妇| 男女做爰动态图高潮gif福利片| 欧美精品国产亚洲| 日韩欧美精品免费久久 | 熟妇人妻久久中文字幕3abv| 国产精品一区二区性色av| 国产三级中文精品| 欧美又色又爽又黄视频| 90打野战视频偷拍视频| 97超级碰碰碰精品色视频在线观看| 高潮久久久久久久久久久不卡| 久久精品国产亚洲av涩爱 | 中文字幕av成人在线电影| 白带黄色成豆腐渣| 在线观看舔阴道视频| 亚洲无线观看免费| 男女之事视频高清在线观看| 91麻豆av在线| 亚洲欧美日韩东京热| 精品一区二区三区av网在线观看| 日韩欧美在线乱码| 午夜福利高清视频| 久久久久久大精品| x7x7x7水蜜桃| 国产精品电影一区二区三区| 一进一出抽搐gif免费好疼| 丰满人妻一区二区三区视频av| 在线观看美女被高潮喷水网站 | 91在线精品国自产拍蜜月| 三级毛片av免费| 国产在线男女| 午夜福利欧美成人| 国产精华一区二区三区| 国产av麻豆久久久久久久| 动漫黄色视频在线观看| 久久中文看片网| 99国产精品一区二区蜜桃av| 99热这里只有精品一区| 丁香六月欧美| 婷婷精品国产亚洲av在线| 国产一区二区激情短视频| 给我免费播放毛片高清在线观看| 精品久久久久久久久久久久久| 免费av观看视频| 婷婷亚洲欧美| 国产蜜桃级精品一区二区三区| 国产精品自产拍在线观看55亚洲| 嫩草影院入口| 国产精品永久免费网站| 欧美激情久久久久久爽电影| 午夜福利18| 天堂动漫精品| 日韩高清综合在线| 国产视频内射| 国产69精品久久久久777片| 国产成人a区在线观看| 日本成人三级电影网站| 国产不卡一卡二| 一区福利在线观看| 国产黄片美女视频| 亚洲内射少妇av| 赤兔流量卡办理| 国产一区二区亚洲精品在线观看| 久久精品国产亚洲av涩爱 | 国产精品久久久久久亚洲av鲁大| 夜夜看夜夜爽夜夜摸| 欧美不卡视频在线免费观看| 日本三级黄在线观看| 国产久久久一区二区三区| 亚洲不卡免费看| 麻豆av噜噜一区二区三区| 精品欧美国产一区二区三| 色综合亚洲欧美另类图片| 成人国产一区最新在线观看| av在线蜜桃| 国产亚洲精品综合一区在线观看| 亚洲精品在线观看二区| 日韩免费av在线播放| 悠悠久久av| av天堂在线播放| 波多野结衣高清无吗| ponron亚洲| 国产亚洲精品久久久久久毛片| 欧美日韩福利视频一区二区| 在线观看一区二区三区| 国产午夜福利久久久久久| 国产伦在线观看视频一区| 9191精品国产免费久久| 婷婷丁香在线五月| 国产真实乱freesex| 99精品久久久久人妻精品| 少妇人妻精品综合一区二区 | 国产美女午夜福利| 一级av片app| 首页视频小说图片口味搜索| 久99久视频精品免费| 可以在线观看的亚洲视频| 国产精品爽爽va在线观看网站| 中亚洲国语对白在线视频| 在线观看一区二区三区| 亚洲欧美激情综合另类| 最近最新免费中文字幕在线| 乱人视频在线观看| 少妇熟女aⅴ在线视频| 99国产精品一区二区三区| 国产精品国产高清国产av| 免费在线观看影片大全网站| 色综合亚洲欧美另类图片| 18禁裸乳无遮挡免费网站照片| 欧美极品一区二区三区四区| 一区二区三区四区激情视频 | 欧美性猛交黑人性爽| 草草在线视频免费看| 国产午夜精品论理片| 成年女人毛片免费观看观看9| 精品午夜福利在线看| 国产精品伦人一区二区| 欧美3d第一页| 人妻制服诱惑在线中文字幕| 午夜福利在线在线| 亚洲,欧美精品.| 精品久久久久久久久亚洲 | 欧美又色又爽又黄视频| 日韩欧美国产一区二区入口| 成人三级黄色视频| 欧美最黄视频在线播放免费| 精品熟女少妇八av免费久了| 亚洲av第一区精品v没综合| 亚洲一区高清亚洲精品| 国产成人aa在线观看| 精品久久久久久成人av| 99久久99久久久精品蜜桃| 757午夜福利合集在线观看| 99久久精品一区二区三区| 亚洲第一电影网av| 国产精品人妻久久久久久| 国产黄片美女视频| 一a级毛片在线观看| 国产精品av视频在线免费观看| 麻豆国产97在线/欧美| 国产av不卡久久| 一区二区三区免费毛片| 亚洲成人久久爱视频| 欧美黄色淫秽网站| 精品久久久久久久久久免费视频| 最近最新中文字幕大全电影3| 亚洲最大成人中文| 一进一出抽搐gif免费好疼| av欧美777| 亚洲熟妇熟女久久| 中文字幕熟女人妻在线| 亚洲av.av天堂| 黄色女人牲交| 久久久久久国产a免费观看| 免费大片18禁| 简卡轻食公司| 国产色爽女视频免费观看| 99国产精品一区二区三区| 午夜两性在线视频| 精品一区二区免费观看| 午夜福利在线观看吧| 精品午夜福利视频在线观看一区| 亚洲欧美日韩高清在线视频| 国产精品国产高清国产av| 97碰自拍视频| 日韩欧美一区二区三区在线观看| 啦啦啦韩国在线观看视频| 亚洲狠狠婷婷综合久久图片| 久久精品国产清高在天天线| 男女下面进入的视频免费午夜| 亚洲av电影在线进入| 国产淫片久久久久久久久 | 国产高清有码在线观看视频| 神马国产精品三级电影在线观看| 无人区码免费观看不卡| 97超级碰碰碰精品色视频在线观看| 亚洲人成网站高清观看| 免费无遮挡裸体视频| 日韩精品青青久久久久久| 麻豆久久精品国产亚洲av| 日韩中文字幕欧美一区二区| 成人三级黄色视频| 亚洲av一区综合| 男人和女人高潮做爰伦理| 观看免费一级毛片| 欧美乱色亚洲激情| 成年女人看的毛片在线观看| 午夜免费成人在线视频| 色吧在线观看| 成人无遮挡网站| 久久草成人影院| 观看免费一级毛片| 夜夜看夜夜爽夜夜摸| 欧美日韩黄片免| 日本黄色片子视频| 非洲黑人性xxxx精品又粗又长| 欧美xxxx黑人xx丫x性爽| 欧美成狂野欧美在线观看| 精品欧美国产一区二区三| 老熟妇仑乱视频hdxx| 美女 人体艺术 gogo| 成人国产一区最新在线观看| 亚洲第一区二区三区不卡| 大型黄色视频在线免费观看| 精品午夜福利在线看| 88av欧美| 男女之事视频高清在线观看| 精品人妻熟女av久视频| 99热只有精品国产| 一个人看视频在线观看www免费| 久久热精品热| 日本免费a在线| 中文字幕精品亚洲无线码一区| 国产精品野战在线观看| 我的老师免费观看完整版| 亚洲av电影在线进入| 欧美国产日韩亚洲一区| 久久精品91蜜桃| 亚洲无线在线观看| 午夜精品久久久久久毛片777| 色尼玛亚洲综合影院| av天堂中文字幕网| 嫩草影院精品99| 国产成人av教育| 美女被艹到高潮喷水动态| 熟女电影av网| 观看美女的网站| 久久精品国产亚洲av天美| xxxwww97欧美| 国产精品嫩草影院av在线观看 | 国产真实伦视频高清在线观看 | 国产淫片久久久久久久久 | 夜夜看夜夜爽夜夜摸| 51午夜福利影视在线观看| 亚洲久久久久久中文字幕| 国产精品乱码一区二三区的特点| 欧美不卡视频在线免费观看| 丰满的人妻完整版| 久久亚洲真实| 日本a在线网址| 日日干狠狠操夜夜爽| 欧美xxxx性猛交bbbb| 真人做人爱边吃奶动态| 成人高潮视频无遮挡免费网站| 国产男靠女视频免费网站| 舔av片在线| 听说在线观看完整版免费高清| 国产乱人视频| 亚洲美女黄片视频| 亚洲片人在线观看| 禁无遮挡网站| 中文字幕高清在线视频| 午夜影院日韩av| 乱人视频在线观看| 国产v大片淫在线免费观看| 又爽又黄a免费视频| 国产精品亚洲一级av第二区| 亚洲av.av天堂| 禁无遮挡网站| 18+在线观看网站| 国产野战对白在线观看| 18美女黄网站色大片免费观看| 国产精品野战在线观看| 最好的美女福利视频网| 亚洲五月天丁香| 在线观看舔阴道视频| 精品久久国产蜜桃| 一级av片app| 在线观看免费视频日本深夜| 色综合站精品国产| 国产久久久一区二区三区| 欧美乱色亚洲激情| 国产精品不卡视频一区二区 | 国产精品一区二区三区四区久久| 欧美激情在线99| 18禁在线播放成人免费| 久久伊人香网站| 波多野结衣高清无吗| 精品久久久久久久末码| 99热这里只有是精品50| 最好的美女福利视频网| 亚洲av成人不卡在线观看播放网| 国产男靠女视频免费网站| 毛片女人毛片| 成人高潮视频无遮挡免费网站| 男女下面进入的视频免费午夜| 亚洲av.av天堂| 亚洲七黄色美女视频| 国产午夜精品论理片| 听说在线观看完整版免费高清| 麻豆一二三区av精品| 99久久精品热视频| 欧美色视频一区免费| 在线十欧美十亚洲十日本专区| 色哟哟·www| 亚洲av成人精品一区久久| 亚洲国产精品999在线| 欧美午夜高清在线| 成人午夜高清在线视频| 男人狂女人下面高潮的视频| 亚洲av二区三区四区| 乱人视频在线观看| 高潮久久久久久久久久久不卡| avwww免费| bbb黄色大片| 中文亚洲av片在线观看爽| 90打野战视频偷拍视频| 99久久成人亚洲精品观看| 国产午夜精品久久久久久一区二区三区 | 久久人人精品亚洲av| 最后的刺客免费高清国语| 国产av一区在线观看免费| 精华霜和精华液先用哪个| 午夜激情福利司机影院| 黄色日韩在线| 一夜夜www| 亚洲成av人片在线播放无| 琪琪午夜伦伦电影理论片6080| 精品久久久久久久久久免费视频| 一a级毛片在线观看| 一进一出抽搐动态| 悠悠久久av| 欧美成人a在线观看| 内射极品少妇av片p| 麻豆国产97在线/欧美| 色尼玛亚洲综合影院| 午夜影院日韩av| 中文字幕精品亚洲无线码一区| 一进一出抽搐gif免费好疼| 亚洲最大成人手机在线| 日本熟妇午夜| 久久久久久久午夜电影| 国产探花在线观看一区二区| 91麻豆精品激情在线观看国产| 欧美成狂野欧美在线观看| 99久久精品国产亚洲精品| 成人国产综合亚洲| 午夜亚洲福利在线播放| 亚洲无线观看免费| 精品午夜福利在线看| 亚洲美女搞黄在线观看 | 老鸭窝网址在线观看| 国产成人a区在线观看| 在线观看一区二区三区| 午夜免费激情av| 中文资源天堂在线| 国产高清激情床上av| 我要看日韩黄色一级片| 蜜桃久久精品国产亚洲av| 午夜免费男女啪啪视频观看 | av专区在线播放| 一区福利在线观看| 国产精品亚洲av一区麻豆| 久久人人精品亚洲av| 99在线视频只有这里精品首页| 日本熟妇午夜| 岛国在线免费视频观看| 亚洲三级黄色毛片| www.色视频.com| 亚洲欧美激情综合另类| 日韩免费av在线播放| 午夜激情福利司机影院| 国产极品精品免费视频能看的| 亚洲av一区综合| 日韩国内少妇激情av| 69av精品久久久久久| 一本一本综合久久| 日本熟妇午夜| 亚洲av成人精品一区久久| 亚洲人成电影免费在线| 日本成人三级电影网站| 岛国在线免费视频观看| 搡老熟女国产l中国老女人| 久久中文看片网| 性欧美人与动物交配| 国产三级中文精品| 国产麻豆成人av免费视频| 精品人妻偷拍中文字幕| 最近中文字幕高清免费大全6 | 久久久久国产精品人妻aⅴ院| 国产国拍精品亚洲av在线观看| av在线老鸭窝| 一区福利在线观看| 国产精品永久免费网站| 3wmmmm亚洲av在线观看| 好男人在线观看高清免费视频| 欧美区成人在线视频| a在线观看视频网站| 999久久久精品免费观看国产| 国产欧美日韩一区二区精品| 成人毛片a级毛片在线播放| 一本一本综合久久| 不卡一级毛片| 最近最新免费中文字幕在线| 国产精品国产高清国产av| 日韩av在线大香蕉| 国产毛片a区久久久久| 嫩草影院入口| 熟女电影av网| 久久九九热精品免费| 悠悠久久av| bbb黄色大片| 最好的美女福利视频网| 性欧美人与动物交配| 欧美bdsm另类| 国产精品久久电影中文字幕| 黄色女人牲交| 久久国产精品人妻蜜桃| 一二三四社区在线视频社区8| 天堂影院成人在线观看| www.色视频.com| 国产色爽女视频免费观看| 国产欧美日韩精品亚洲av| a级一级毛片免费在线观看| 色哟哟·www| 欧美日本视频| 噜噜噜噜噜久久久久久91| 麻豆一二三区av精品| 丰满的人妻完整版| 99热这里只有是精品50| 久久人人爽人人爽人人片va | 伊人久久精品亚洲午夜| 久久久久久久精品吃奶| 亚洲无线观看免费| 亚洲欧美日韩卡通动漫| 9191精品国产免费久久| 色综合站精品国产| 国产成+人综合+亚洲专区| 69av精品久久久久久| 国产精品亚洲一级av第二区| 成年人黄色毛片网站| 日韩欧美 国产精品| 一本久久中文字幕| 免费av不卡在线播放| 久久九九热精品免费| 久久精品人妻少妇| 女人被狂操c到高潮| 搡女人真爽免费视频火全软件 | 99久久精品热视频| 国内久久婷婷六月综合欲色啪| 在线免费观看的www视频| 美女被艹到高潮喷水动态| 国产精品精品国产色婷婷| 国内精品一区二区在线观看| 亚洲精品久久国产高清桃花| 亚洲欧美日韩东京热| 亚洲精品影视一区二区三区av| 欧美区成人在线视频| 别揉我奶头~嗯~啊~动态视频| 国产精品影院久久| 男人狂女人下面高潮的视频| 国产野战对白在线观看| 欧美高清性xxxxhd video| www.色视频.com| 成人欧美大片| 国内毛片毛片毛片毛片毛片| 亚洲av二区三区四区| 在现免费观看毛片| 成人特级黄色片久久久久久久| 亚洲精华国产精华精| 日本黄色视频三级网站网址| 国模一区二区三区四区视频| 精品一区二区三区人妻视频| 午夜激情欧美在线| 婷婷色综合大香蕉| av在线老鸭窝| 欧美一区二区国产精品久久精品| 欧美绝顶高潮抽搐喷水| 亚洲精华国产精华精| 国产精品综合久久久久久久免费| 亚洲欧美激情综合另类| 一a级毛片在线观看| 久久国产精品人妻蜜桃| 欧美日韩中文字幕国产精品一区二区三区| 老司机深夜福利视频在线观看| 欧美黑人巨大hd| 1000部很黄的大片| 国产成人欧美在线观看| 搡女人真爽免费视频火全软件 | 亚洲av成人av| 91狼人影院| 99国产精品一区二区蜜桃av| 免费看光身美女| 午夜福利视频1000在线观看| 国产视频一区二区在线看| 一级作爱视频免费观看| 欧美+亚洲+日韩+国产| 亚洲男人的天堂狠狠| 欧美黑人欧美精品刺激| 国产在线男女| 亚洲国产精品成人综合色| 国产亚洲精品久久久久久毛片| 亚洲av第一区精品v没综合| 一区二区三区激情视频| bbb黄色大片| 少妇被粗大猛烈的视频| 亚洲av不卡在线观看| avwww免费| a级一级毛片免费在线观看| av视频在线观看入口| 精品国产亚洲在线| 在线看三级毛片| 精品一区二区免费观看|