• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    云計(jì)算中基于多目標(biāo)優(yōu)化的虛擬機(jī)整合算法

    2020-03-02 10:05:28胡志剛肖慧李克勤
    關(guān)鍵詞:元組利用率數(shù)據(jù)中心

    胡志剛,肖慧?,李克勤

    (1.中南大學(xué) 計(jì)算機(jī)學(xué)院,湖南 長沙410083;2.湖南大學(xué) 信息科學(xué)與工程學(xué)院,湖南 長沙410082)

    近年來,隨著云計(jì)算商業(yè)模式和技術(shù)架構(gòu)的越來越成熟,云用戶大幅度增加,為了滿足他們的需求而新建的數(shù)據(jù)中心、新置的服務(wù)器和制冷設(shè)備也隨之大幅度增加,解決數(shù)據(jù)中心的高能耗問題已經(jīng)成為一個(gè)大的挑戰(zhàn)[1].同時(shí),云用戶對云服務(wù)的性能需求也愈加具體嚴(yán)格化,用戶在交易前會(huì)與云服務(wù)商制定服務(wù)水平協(xié)議(Service Level Agreement,SLA)來規(guī)范化質(zhì)量等級(Quality of Service,QoS)需求,以確保本次服務(wù)交易的完美達(dá)成[2].如果云服務(wù)商無法提供事先商定的QoS,違背用戶的期望,會(huì)給用戶造成不可預(yù)估的損失.因此,在減少數(shù)據(jù)中心能耗的同時(shí),提供用戶所期望的QoS是云計(jì)算發(fā)展迫切需要解決的問題.

    虛擬機(jī)整合[3]可以根據(jù)變化的資源需求周期性地調(diào)整當(dāng)前的虛擬機(jī)主機(jī)間映射關(guān)系,在主機(jī)間遷移虛擬機(jī)以充分并均衡地利用計(jì)算資源.虛擬機(jī)整合技術(shù)主要包括啟發(fā)式貪心算法[4-7]、線性/約束規(guī)劃技術(shù)[8-11]和元啟發(fā)式算法[12-15].貪心算法因其時(shí)間復(fù)雜度低、實(shí)現(xiàn)簡單等優(yōu)點(diǎn)被廣泛應(yīng)用來進(jìn)行虛擬機(jī)動(dòng)態(tài)整合.貪心算法雖然計(jì)算開銷低,但卻容易陷入局部最優(yōu)而錯(cuò)過最優(yōu)解.線性/約束規(guī)劃技術(shù)可以獲得最優(yōu)解,但受問題規(guī)模和復(fù)雜性的限制,無法很好地?cái)U(kuò)展到大型數(shù)據(jù)中心.近年來研究人員提出了許多基于生物啟發(fā)計(jì)算的元啟發(fā)整合算法,例如蟻群算法、基因算法、人工蜂群算法,可以有效幫助解決大規(guī)模問題并避免局部最優(yōu)解.蟻群系統(tǒng)算法(Ant Colony System,ACS)[16-17],作為蟻群算法的一種,通過在解空間中進(jìn)行基于概率式的搜索,可以在多項(xiàng)式時(shí)間復(fù)雜度里找到近似最優(yōu)解.

    現(xiàn)有的虛擬機(jī)整合研究大多只關(guān)注了云數(shù)據(jù)中心的能耗問題.然而,為了實(shí)現(xiàn)云系統(tǒng)交付的QoS,還應(yīng)該同時(shí)考慮SLA違約問題.虛擬機(jī)整合可以通過將虛擬機(jī)整合到盡可能少的主機(jī)上來降低能耗,然而過分整合可能會(huì)降低系統(tǒng)性能并導(dǎo)致SLA違約[18].因此,最優(yōu)虛擬機(jī)整合方法應(yīng)在能耗和QoS之間取得平衡.

    本文將虛擬機(jī)整合問題構(gòu)建為一個(gè)多目標(biāo)組合優(yōu)化問題,優(yōu)化目標(biāo)包括降低能耗、保證QoS要求和減少遷移次數(shù),提出了一種基于多目標(biāo)優(yōu)化的虛擬機(jī)整合算法(Multi-objective Virtual Machine Consolidation,MOVMC).首先使用CPU利用率雙閾值[4]來判斷主機(jī)負(fù)載狀態(tài),確定整合時(shí)機(jī);然后基于ACS假設(shè)虛擬機(jī)和主機(jī)之間的映射關(guān)系是食物源,使用人工蟻群同時(shí)選擇待遷移虛擬機(jī)和目標(biāo)主機(jī),尋找虛擬機(jī)和主機(jī)之間的最佳映射關(guān)系.通過在CloudSim平臺(tái)上使用真實(shí)工作負(fù)載來評估所提出的方法.實(shí)驗(yàn)結(jié)果表明,該方法在減少能耗、SLA違約和虛擬機(jī)遷移方面具有明顯的優(yōu)勢.

    1 基于多目標(biāo)優(yōu)化的虛擬機(jī)整合模型

    1.1 數(shù)據(jù)中心模型

    在數(shù)據(jù)中心中有許多不同配置的主機(jī),虛擬機(jī)根據(jù)各自的資源需求被分別部署到合適的主機(jī)上運(yùn)行.將數(shù)據(jù)中心里的主機(jī)集群記為:

    H={h1,h2,…,hj,…,hm}

    其中m為主機(jī)的數(shù)量.數(shù)據(jù)中心中運(yùn)行的虛擬機(jī)集合記為:

    V={v1,v2,…,vi,…,vn}

    其中n為虛擬機(jī)的數(shù)量.變量xij表示虛擬機(jī)vi是否分配給主機(jī)hj,若已分配則值為1,否則為0.矩陣X=[xi,j]n×m表示數(shù)據(jù)中心里虛擬機(jī)和主機(jī)間的映射關(guān)系.部署了虛擬機(jī)vi的主機(jī)記為h(vi),主機(jī)hj上運(yùn)行的虛擬機(jī)集合記為V(hj).虛擬機(jī)vi申請的CPU資源量記為VRj,主機(jī)hj總CPU資源需求量PRj可表達(dá)為:

    主機(jī)hj的CPU資源總量記為CRj,則主機(jī)hj的CPU資源利用率Uj可通過式(2)計(jì)算得到:

    1.2 能耗模型

    數(shù)據(jù)中心中主機(jī)的能耗與工作負(fù)載程度有關(guān),取決于CPU、內(nèi)存、磁盤和網(wǎng)卡等資源的利用率.大多數(shù)研究表明,主機(jī)的能耗主要來自CPU,和CPU利用率呈高度正相關(guān)關(guān)系[19-20].基于此,數(shù)據(jù)中心總能耗可以表示為:

    式中:ECj(Uj)表示主機(jī)hj隨CPU利用率Uj變化而產(chǎn)生的能耗.

    1.3 多目標(biāo)組合優(yōu)化

    綜合考慮影響虛擬機(jī)整合的多個(gè)因素,本文定義了以下虛擬機(jī)整合優(yōu)化目標(biāo).

    為了降低能耗和節(jié)約能源,應(yīng)該盡量減少數(shù)據(jù)中心總能耗EC,即min(EC).

    同一主機(jī)上的虛擬機(jī)間存在資源競爭.以往研究表明[21],當(dāng)資源競爭越激烈,尤其當(dāng)資源利用率接近或超過一定閾值時(shí),主機(jī)的性能越差,QoS水平越容易下降.顯然,主機(jī)的QoS水平與資源利用率有很大的關(guān)系.因此為了更方便有效地優(yōu)化QoS,通過限制主機(jī)CPU資源利用率低于過載閾值Thro,以保證主機(jī)QoS,如式(4)所示:

    另外,虛擬機(jī)整合觸發(fā)的虛擬機(jī)遷移會(huì)消耗能源和計(jì)算資源,給網(wǎng)絡(luò)傳輸造成負(fù)擔(dān),也會(huì)影響數(shù)據(jù)中心里其他運(yùn)行虛擬機(jī)的性能[22],因此需盡可能減少虛擬機(jī)遷移次數(shù)MG,即min(MG).

    為了優(yōu)化以上目標(biāo),通過線性加權(quán)的方式將其整合到一起,簡化表達(dá)為一個(gè)有著資源限制的最小組合優(yōu)化問題,如式(5)所示:

    式中:ωmg代表遷移次數(shù)MG相對于總能耗EC的相對權(quán)重.

    2 MOVMC整合算法

    虛擬機(jī)動(dòng)態(tài)整合支持虛擬機(jī)在運(yùn)行的主機(jī)之間動(dòng)態(tài)遷移,來適應(yīng)數(shù)據(jù)中心里不斷變動(dòng)的負(fù)載.對于任何一種虛擬機(jī)整合算法,有3個(gè)關(guān)鍵問題必須加以解決[23].第一,虛擬機(jī)整合在什么條件下會(huì)被觸發(fā)(選擇整合時(shí)機(jī));第二,選擇哪些虛擬機(jī)遷移能達(dá)到最好的能耗和QoS(選擇遷移虛擬機(jī));第三,將選擇遷移的虛擬機(jī)重新部署到哪些主機(jī)上最好(選擇目標(biāo)主機(jī)).

    本文提出的MOVMC整合算法利用CPU利用率雙閾值和ACS來解決上述問題.基于靜態(tài)雙閾值策略,MOVMC算法通過設(shè)置主機(jī)CPU利用率上限閾值Thro和下限閾值Thru(0≤Thru<Thro≤1)來確定整合時(shí)機(jī).利用設(shè)置的靜態(tài)閾值識(shí)別主機(jī)的負(fù)載狀態(tài),將所有主機(jī)劃分為3個(gè)集合,過載主機(jī)集合Ho、正常負(fù)載主機(jī)集合Hn、低載主機(jī)集合Hu.對主機(jī)Hj而言,當(dāng)Thro≤Uj<1時(shí),主機(jī)過載;當(dāng)Thru≤Uj<Thro時(shí),主機(jī)為正常負(fù)載狀態(tài);當(dāng)0<Uj<Thru時(shí),主機(jī)低載.當(dāng)主機(jī)過載或低載時(shí)需要進(jìn)行虛擬機(jī)整合.根據(jù)Beloglazov[4]等的研究并通過實(shí)驗(yàn)驗(yàn)證得到:當(dāng)設(shè)置上限閾值Thro為80%,下限閾值Thru為40%時(shí),算法可以獲得優(yōu)秀的性能.

    定義映射關(guān)系元組集合T={(vm,hd)},T中每個(gè)元組包括兩個(gè)元素:選擇遷移的虛擬機(jī)vm和目標(biāo)主機(jī)hd.MOVMC算法將T中的元組看作食物源,使用ACS搜索T中的元組,來更新虛擬機(jī)主機(jī)映射關(guān)系.

    虛擬機(jī)整合算法的執(zhí)行時(shí)間主要取決于T中元組的數(shù)量.為了減少算法的時(shí)間復(fù)雜度,進(jìn)行多階段整合,限制T中元組的數(shù)量.一方面,先對過載主機(jī)進(jìn)行虛擬機(jī)整合,再對低載主機(jī)進(jìn)行整合.另一方面,在選擇目標(biāo)主機(jī)時(shí),為了盡量減少低載主機(jī)數(shù)量以降低能耗,首先在正常負(fù)載主機(jī)集合中選擇,若尋找目標(biāo)主機(jī)失敗,則在低載主機(jī)集合中選擇.只有當(dāng)無法將虛擬機(jī)遷移到正在運(yùn)行的主機(jī)上時(shí),才會(huì)激活處于睡眠模式的主機(jī).這樣可以縮小每次搜索的解空間,提高螞蟻搜索解的效率,在不影響解質(zhì)量的情況下,能大大減少算法的計(jì)算時(shí)間.

    在虛擬機(jī)整合過程中,MOVMC算法創(chuàng)建信息素矩陣[τi,j]n×m來保存過去搜索的經(jīng)驗(yàn),τi,j表示選擇映射關(guān)系元組(vi,hj)的有利度.使用局部信息素更新和全局信息素更新兩種規(guī)則來更新元組信息素.定義啟發(fā)式因子來基于偽隨機(jī)比例規(guī)則指導(dǎo)螞蟻選擇最優(yōu)元組,獲得最小能耗和最少遷移次數(shù).在下文中,將給出以上概念的詳細(xì)定義.

    2.1 信息素蹤跡

    螞蟻在尋找食物源的途中會(huì)沉積信息素,其他螞蟻聞到信息素后,會(huì)傾向于選擇信息素濃度較高的途徑.在初始化信息素矩陣[τi,j]n×m時(shí),采用Dorigo等人[17]使用的解質(zhì)量評估方法來計(jì)算信息素的初始值,定義為:

    式中:EC0是初始狀態(tài)下所有主機(jī)的功耗;MG是近似最優(yōu)的遷移次數(shù),其值可以通過最近鄰啟發(fā)式算法[17]估計(jì)得到.

    在每次選擇新元組(vi,hj)后,螞蟻會(huì)使用以下局部信息素更新規(guī)則來更新遍歷元組的信息素水平:

    式中:ρl∈[0,1]為局部信息素消散參數(shù).

    在所有螞蟻完成解的構(gòu)建后,根據(jù)目標(biāo)函數(shù)評估當(dāng)前所有解的質(zhì)量.為了保存螞蟻以往搜索過程中獲得的經(jīng)驗(yàn),針對全局最優(yōu)解應(yīng)用以下全局信息素更新規(guī)則:

    式中:Δτ為增加的額外信息素量;ρg∈[0,1]是全局信息素消散參數(shù);X+是算法目前找到的最優(yōu)解.

    2.2 啟發(fā)式因子

    在ACS中,啟發(fā)式因子被用來與信息素相結(jié)合,共同指導(dǎo)螞蟻構(gòu)建解方案.啟發(fā)式因子用ηi,j表示,代表選擇元組(vi,hj)的期望值.

    在考慮虛擬機(jī)選擇和目標(biāo)主機(jī)選擇的基礎(chǔ)上,定義一種選擇元組(vi,hj)的混合啟發(fā)式因子ηi,j為:

    式中:ηv(h(vi),-vi)是從vi的源主機(jī)h(vi)選擇遷移vi的啟發(fā)式因子,而ηh(hj,+vi)是將vi重新部署到目標(biāo)主機(jī)hj的啟發(fā)式因子.

    2.2.1 選擇虛擬機(jī)

    當(dāng)主機(jī)過載時(shí),必須從主機(jī)遷出某些虛擬機(jī)以釋放部分資源以防止SLA違約.遷移CPU利用率高的虛擬機(jī)可以盡量緩解主機(jī)的過載危機(jī),減少虛擬機(jī)遷移次數(shù).對過載主機(jī)hj∈Ho,定義選擇虛擬機(jī)vi遷移的啟發(fā)式因子如下:

    當(dāng)主機(jī)處于低載狀態(tài)時(shí),應(yīng)該遷出該主機(jī)上的所有虛擬機(jī),并將其切換到休眠狀態(tài),以避免空閑功耗.因此,為了盡可能減少無效遷移和低載主機(jī)數(shù)量,應(yīng)優(yōu)先選擇遷移虛擬機(jī),使低載主機(jī)遷出后資源利用率盡量低.因此定義選擇低載主機(jī)hj∈Hu中虛擬機(jī)vi遷移的啟發(fā)式因子為:

    式中:Uj(-vi)代表主機(jī)hj遷出虛擬機(jī)vi后的CPU利用率.

    2.2.2 選擇目標(biāo)主機(jī)

    為了避免主機(jī)CPU利用率過高導(dǎo)致的QoS降級,在正常負(fù)載主機(jī)集合中選擇目標(biāo)主機(jī)時(shí),選擇遷入虛擬機(jī)后資源利用率低的主機(jī)更有利.為虛擬機(jī)vi選擇目標(biāo)主機(jī)hj∈Hn的啟發(fā)式因子定義如下:

    式中:Uj(+vi)是主機(jī)hj遷入虛擬機(jī)vi后的CPU利用率.另外在啟發(fā)式因子中設(shè)置了CPU資源利用率約束,以防止導(dǎo)致目標(biāo)主機(jī)過載的遷移.

    低負(fù)載主機(jī)的資源利用率較低,可以保證QoS卻十分浪費(fèi)能源.因此,在低負(fù)載主機(jī)集合Hu中選擇目標(biāo)主機(jī)hj時(shí),優(yōu)先選擇遷入虛擬機(jī)之后資源利用率更高的主機(jī),以最小化低載主機(jī)數(shù)量,對應(yīng)的啟發(fā)式因子定義如下:

    2.3 偽隨機(jī)比例規(guī)則

    基于啟發(fā)式因子和信息素信息,螞蟻使用偽隨機(jī)比例規(guī)則來選擇下一個(gè)元組(vm,hd)進(jìn)行遍歷,如式(14)所示:

    式中:α和β分別為控制信息素和啟發(fā)式因子的重要性參數(shù);q為一個(gè)均勻分布在[0,1]的隨機(jī)數(shù);q0∈[0,1]是一個(gè)固定的參數(shù),決定累積經(jīng)驗(yàn)與隨機(jī)選擇的相對重要性;(vs,hg)是根據(jù)式(15)中的概率分布選擇的隨機(jī)元組變量.

    結(jié)合上文中提出的啟發(fā)式因子計(jì)算準(zhǔn)則和偽隨機(jī)比例規(guī)則,本文提出一種選擇元組算法(Next Tuple Selection,NTS),該算法基于源主機(jī)和目標(biāo)主機(jī)負(fù)載狀態(tài)標(biāo)識(shí)heuP選擇下一個(gè)映射關(guān)系元組(vm,hd)進(jìn)行遍歷,算法偽代碼如算法1所示.本文提出的虛擬機(jī)整合算法MOVMC的偽代碼如算法2所示.MOVMC算法通過限制蟻群算法搜索的解集合大小有效降低了算法復(fù)雜度.從算法2的偽代碼可以看出,MOVMC在最壞情況下的算法復(fù)雜度是,其中nI是迭代的次數(shù),分別表示過載主機(jī)和低載主機(jī)中虛擬機(jī)的總數(shù)量.如算法2中第3行所示,最外層循環(huán)迭代nI次.因?yàn)槲浵伩梢圆⑿兴阉鞲髯缘慕?,所以算?中第4行所示的第2層循環(huán)不會(huì)對算法的時(shí)間復(fù)雜度造成影響.如算法2中第5行和18行所示,在最壞情況下,第3層循環(huán)需要分別迭代次.在每次迭代時(shí),如算法1所示,需要循環(huán)計(jì)算個(gè)元組對應(yīng)的概率以選擇下一個(gè)元組進(jìn)行遍歷.

    算法1選擇元組進(jìn)行遍歷(NTS)輸入:T,heuP輸出:(vm,hd)1.switch(heuP)2.//選擇虛擬機(jī)從過載主機(jī)遷移到正常負(fù)載主機(jī)3.case“ON”4.根據(jù)式(10)(12)(9)計(jì)算η={ηmd|?(vm,hd)∈T}5.break 6.//選擇虛擬機(jī)從過載主機(jī)遷移到低負(fù)載主機(jī)7.case“OU”8.根據(jù)式(10)(13)(9)計(jì)算η={ηmd|?(vm,hd)∈T}9.break 10.//選擇虛擬機(jī)從低載主機(jī)遷移到正常負(fù)載主機(jī)11.case“UN”12.根據(jù)式(11)(12)(9)計(jì)算η={ηmd|?(vm,hd)∈T}13.break 14.//選擇虛擬機(jī)從低載主機(jī)遷移到低負(fù)載主機(jī)15.case“UU”16.根據(jù)式(11)(13)(9)計(jì)算η={ηmd|?(vm,hd)∈T}17.break 18.根據(jù)式(15)計(jì)算Pvmc={pmd|?(vm,hd)∈T}19.根據(jù)式(14)選擇下一個(gè)遍歷的元組(vm,hd)∈T

    算法2 MOVMC輸入:X輸出:X+1.S←φ,X+←φ,Xk←φ,t←φ 2.根據(jù)式(6)將信息素矩陣初始化為τ0 3.for i∈[1,nI]do 4.for k∈[1,nA]do 5.for vo∈V(Ho)do//過載主機(jī)虛擬機(jī)整合6.Ton←{(vm,hd)|h(vm)∈Ho∧Hd∈Hn}7.t←NTS(Ton,“ON”)8.if t為空then 9.Tou←{(vm,hd)|h(vm)∈Ho∧Hd∈Hu}10.t←NTS(Tou,“OU”)11.if t為空then 12.break 13.end if 14.end if 15.更新虛擬機(jī)主機(jī)映射關(guān)系16.根據(jù)式(7)對t應(yīng)用局部信息素更新規(guī)則17.end for 18.for vu∈V(Hu)do//低載主機(jī)虛擬機(jī)整合

    19.Tun←{(vm,hd)|h(vm)∈Hu∧Hd∈Hn}20.t←NTS(Tun,“UN”)21.if t為空then 22.Tuu←{(vm,hd)|h(vm)∈Hu∧Hd∈Hu}23.t←NTS(Tuu,“UU”)24.if t為空then 25.break 26.end if 27.end if 28.更新虛擬機(jī)主機(jī)映射關(guān)系29.根據(jù)式(7)對t應(yīng)用局部信息素更新規(guī)則30.end for 31.S←S∪{Xk}32.end for 33.X+←arg maxXk∈S{F(Xk)}34.根據(jù)式(8)對X+應(yīng)用全局信息素更新規(guī)則35.end for

    3 實(shí)驗(yàn)與算法評估

    3.1 實(shí)驗(yàn)環(huán)境和配置

    為了評估算法性能,采用CloudSim模擬云計(jì)算環(huán)境[24]進(jìn)行仿真實(shí)驗(yàn).CloudSim是一個(gè)離散型事件模擬器,支持虛擬環(huán)境建模和虛擬資源管理.實(shí)驗(yàn)中模擬的云數(shù)據(jù)中心包含800臺(tái)物理主機(jī),主機(jī)有兩種配置,一半為HP ProLiant G4,另一半為HP Pro-Liant G5.主機(jī)配置詳情見表1.此外,本次實(shí)驗(yàn)使用了4種Amazon EC2虛擬機(jī)[25],虛擬機(jī)實(shí)例詳情如表2所示.實(shí)驗(yàn)中使用的工作負(fù)載來自CoMon項(xiàng)目,該項(xiàng)目主要負(fù)責(zé)監(jiān)控PlanetLab[26]中基礎(chǔ)設(shè)施的運(yùn)行情況.實(shí)驗(yàn)采用的數(shù)據(jù)從遍布全球500多個(gè)地區(qū)超過1 000個(gè)虛擬機(jī)上采集獲得.

    表1 主機(jī)配置Tab.1 Host configuration

    表2 虛擬機(jī)類型Tab.2 VM types

    3.2 評估指標(biāo)

    3.2.1 能耗指標(biāo)

    隨著數(shù)據(jù)中心內(nèi)主機(jī)硬件設(shè)施不斷升級,例如多核處理器,大容量內(nèi)存和硬盤,傳統(tǒng)的CPU利用率-能耗模型已經(jīng)無法再準(zhǔn)確地描述能耗.為了得到更準(zhǔn)確的能耗值,使用標(biāo)準(zhǔn)性能評估公司(Standard Performance Evaluation Corporation)提供的真實(shí)數(shù)據(jù).表3顯示了不同負(fù)載級別下HP ProLiant G4和HP ProLiant G5主機(jī)的能耗.

    表3 主機(jī)在不同CPU利用率級別下的能耗Tab.3 Host energy consumption at different CPU utilization levels

    3.2.2 SLA違約指標(biāo)

    在數(shù)據(jù)中心里,保證用戶所需QoS十分重要,SLA規(guī)定了用戶的QoS需求.為了更好地優(yōu)化QoS,Beloglazov等[5]提出了若干衡量SLA違約的度量標(biāo)準(zhǔn).

    SLAVO定義為主機(jī)資源利用率達(dá)到100%的時(shí)間所占的比例,以衡量主機(jī)過載導(dǎo)致的SLA違約,如式(16)所示:

    虛擬機(jī)遷移會(huì)導(dǎo)致總體性能下降.SLAVM代表因虛擬機(jī)遷移而造成的SLA違約,定義為:

    SLAV用于評估云數(shù)據(jù)中心的整體QoS水平,能綜合反映出由主機(jī)超載和虛擬機(jī)遷移導(dǎo)致的總性能下降,定義如下:

    SLAV變量值越小,說明SLA違約越少,QoS水平越高.

    3.2.3 能耗-性能指標(biāo)

    虛擬機(jī)整合應(yīng)該平衡地對能耗和SLA違約進(jìn)行優(yōu)化.通過結(jié)合能耗指標(biāo)EC和SLA違約指標(biāo)SLAV獲得綜合的能耗-性能指標(biāo)ESV,如式(19)所示:

    式中:EC表示數(shù)據(jù)中心總能耗.EC值越低,表明數(shù)據(jù)中心能源效率越高.

    3.2.4 虛擬機(jī)遷移次數(shù)

    虛擬機(jī)的動(dòng)態(tài)遷移會(huì)產(chǎn)生一定的開銷,例如占用計(jì)算資源和消耗能源.此外,由于虛擬機(jī)遷移導(dǎo)致的服務(wù)暫停可能會(huì)影響QoS.因此,減少虛擬機(jī)遷移數(shù)量可以節(jié)約資源和能耗并提高QoS,有助于虛擬機(jī)整合獲得理想的效果.

    3.3 參數(shù)選擇

    在MOVMC算法中,α和β值分別控制蟻群算法中信息素和啟發(fā)式因子的重要性,對蟻群算法的性能有很大的影響.α反映了螞蟻在以往搜索過程中積累的信息素在指導(dǎo)蟻群尋找新解時(shí)的重要程度.α值越大,螞蟻越有可能選擇之前走過的路徑,尋找隨機(jī)解的可能性隨之降低.β則反映了啟發(fā)式因子在指導(dǎo)蟻群尋找新解時(shí)的重要程度.β值越大,啟發(fā)式因子的重要程度越大.α和β的取值越大,計(jì)算量也越大,計(jì)算時(shí)間就越長.考慮到數(shù)據(jù)中心內(nèi)龐大的數(shù)據(jù)量,為了得到最優(yōu)的算法性能,選擇α和β值在[0.5,3.5]內(nèi)以0.5為單位遞增,討論α和β的組合取值對算法目標(biāo)函數(shù)值的影響,實(shí)驗(yàn)結(jié)果如圖1所示.算法中使用的其他參數(shù)值如表4所示.當(dāng)α和β取值過大時(shí),算法容易過早收斂,易陷入局部最優(yōu).當(dāng)α和β取值過小時(shí),基于經(jīng)驗(yàn)值和先驗(yàn)性因素的指導(dǎo)作用減弱,致使算法很難找到最優(yōu)解.從圖1中可以看出,當(dāng)α和β取值分別為1和1.5時(shí),對應(yīng)的目標(biāo)函數(shù)值最小,系統(tǒng)可以取得最好的性能.故在后面的對比實(shí)驗(yàn)中,將α和β分別取值為1和1.5作為系統(tǒng)參數(shù)值.

    圖1 不同α和β取值對比Fig.1 Comparison of differentαandβ

    表4 MOVMC算法參數(shù)Tab.4 MOVMC parameters

    3.4 結(jié)果分析

    為了評估MOVMC算法的性能,本研究將MOVMC算法與6種虛擬機(jī)動(dòng)態(tài)分配算法ST[4]、DT[4]、MAD[5]、IQR[5]、LR[5]和EVMCACS[15]進(jìn)行比較.圖2為在實(shí)際工作負(fù)載下MOVMC、ST、DT、MAD、IQR、LR、EVMCACS的能耗值.算法名稱后面的數(shù)值為該算法的當(dāng)前參數(shù)值.與ST、DT、MAD、IQR、LR、EVMCACS相比,MOVMC消耗的能源最少.由于MOVMC算法優(yōu)先將虛擬機(jī)遷移到正常負(fù)載的主機(jī),因此許多低載主機(jī)都可以切換到睡眠模式,從而減少了數(shù)據(jù)中心中活躍主機(jī)的數(shù)量并節(jié)省大量能源.

    圖2 能耗值對比Fig.2 Comparison of energy consumption

    圖3是算法針對SLA違約指標(biāo)進(jìn)行的比較.圖3(a)是對SLAV的比較,可以看出,與其他算法相比,MOVMC算法在實(shí)際工作負(fù)載下具有最低的SLA違約率.MOVMC算法從過載主機(jī)中遷出虛擬機(jī),通過保證主機(jī)的CPU利用率低于過載閾值來防止SLA違約.另外,啟發(fā)式準(zhǔn)則確保目標(biāo)主機(jī)在遷入虛擬機(jī)后不會(huì)超出過載閾值.因此,MOVMC算法的SLAV性能優(yōu)于其他算法.

    圖3 SLA性能指標(biāo)值對比Fig.3 Comparison of SLA performance indexes

    SLAV是綜合SLAVO和SLAVM得到的指標(biāo),因此接下來分別對算法的SLAVO和SLAVM進(jìn)行分析.圖3(b)為SLAVO值的對比,可以清楚地看出MOVMC算法的SLAVO值低于其他算法.這主要是因?yàn)镸OVMC算法將主機(jī)的資源利用率限制在過載閾值以下,有效地降低了主機(jī)資源過載的風(fēng)險(xiǎn),保證了運(yùn)行主機(jī)的QoS.此外,在重新部署虛擬機(jī)時(shí),MOVMC算法優(yōu)先選擇正常負(fù)載主機(jī)中資源利用率更低的主機(jī),從另一個(gè)角度保證了主機(jī)運(yùn)行時(shí)的QoS.圖3(c)為不同算法的SLAVM性能比較.從圖中可以看出,MOVMC算法在SLAVM方面的性能最優(yōu).根據(jù)圖4,MOVMC算法有效地減少了虛擬機(jī)遷移次數(shù),從而減少了遷移對服務(wù)質(zhì)量的影響.因此,與其他算法相比,MOVMC算法具有較低的SLAVM.

    由圖4可知,MOVMC算法提高了遷移效率并獲得了最少的遷移次數(shù).MOVMC算法有效地保證了運(yùn)行主機(jī)良好的QoS,降低了主機(jī)過載風(fēng)險(xiǎn),從而減少了主機(jī)過載觸發(fā)的虛擬機(jī)遷移數(shù)量.另一方面,MOVMC算法中定義的目標(biāo)函數(shù)趨于最少化虛擬機(jī)遷移的次數(shù).

    圖4 虛擬機(jī)遷移次數(shù)對比Fig.4 Comparison of the number of VM migrations

    圖5展示了利用ESV指標(biāo)進(jìn)行評估得到的算法綜合性能,可以看出MOVMC算法綜合性能最好.根據(jù)仿真結(jié)果,MOVMC算法的ESV指標(biāo)值僅是DT算法的33%,ST算法的ESV指標(biāo)最差.主要原因是MOVMC算法通過精確識(shí)別主機(jī)負(fù)載狀態(tài),有效降低了主機(jī)過載風(fēng)險(xiǎn)和虛擬機(jī)遷移次數(shù),減少了低載主機(jī)的數(shù)量.

    以上實(shí)驗(yàn)結(jié)果表明,MOVMC算法能做出更合理的虛擬機(jī)遷移決策,在降低數(shù)據(jù)中心能耗和保證QoS方面有較好的性能.

    圖5 ESV值對比Fig.5 Comparison of ESV

    4 結(jié)論

    本文提出了一種基于多目標(biāo)組合優(yōu)化的虛擬機(jī)整合算法,通過將虛擬機(jī)整合到合適的主機(jī)中來解決數(shù)據(jù)中心中高能耗和QoS降級的問題.虛擬機(jī)整合問題被構(gòu)建為一個(gè)多目標(biāo)優(yōu)化問題,基于雙閾值決定觸發(fā)虛擬機(jī)整合的條件.將虛擬機(jī)與主機(jī)之間的映射關(guān)系比作食物源,基于ACS通過多階段整合來優(yōu)化映射關(guān)系.通過人工螞蟻的分布式搜索和協(xié)作,獲得虛擬機(jī)與主機(jī)之間的全局最優(yōu)映射關(guān)系.使用實(shí)際工作負(fù)載對所提出方法的性能進(jìn)行評估,仿真結(jié)果表明,與其他方法相比,該方法能有效降低數(shù)據(jù)中心的能耗,并保證高水平QoS.

    在未來的工作中,進(jìn)一步研究在整合時(shí)間決策過程中,針對不斷變化的工作負(fù)載采用自適應(yīng)閾值,做出更合理的遷移決策.進(jìn)行更多的仿真實(shí)驗(yàn)來評估所提出的方法在實(shí)際工作負(fù)載中的性能.

    猜你喜歡
    元組利用率數(shù)據(jù)中心
    酒泉云計(jì)算大數(shù)據(jù)中心
    Python核心語法
    海量數(shù)據(jù)上有效的top-kSkyline查詢算法*
    化肥利用率穩(wěn)步增長
    做好農(nóng)村土地流轉(zhuǎn) 提高土地利用率
    民航綠色云數(shù)據(jù)中心PUE控制
    電子測試(2018年11期)2018-06-26 05:56:24
    基于減少檢索的負(fù)表約束優(yōu)化算法
    淺議如何提高涉煙信息的利用率
    板材利用率提高之研究
    基于云計(jì)算的交通運(yùn)輸數(shù)據(jù)中心實(shí)現(xiàn)與應(yīng)用
    国产伦人伦偷精品视频| 无限看片的www在线观看| 视频区欧美日本亚洲| 少妇熟女aⅴ在线视频| ponron亚洲| 激情在线观看视频在线高清| 成人三级做爰电影| 午夜福利18| 亚洲国产精品合色在线| 国产成+人综合+亚洲专区| 欧美性长视频在线观看| 色哟哟哟哟哟哟| 夜夜看夜夜爽夜夜摸| 成人av一区二区三区在线看| 妹子高潮喷水视频| 色老头精品视频在线观看| 老熟妇仑乱视频hdxx| 每晚都被弄得嗷嗷叫到高潮| 日韩精品免费视频一区二区三区| 99国产精品免费福利视频| 在线天堂中文资源库| 日韩三级视频一区二区三区| 黄色视频不卡| av天堂在线播放| 精品不卡国产一区二区三区| 美国免费a级毛片| 大码成人一级视频| 91成年电影在线观看| 99re在线观看精品视频| 巨乳人妻的诱惑在线观看| 国产欧美日韩一区二区三区在线| 黄色成人免费大全| 亚洲自偷自拍图片 自拍| 免费无遮挡裸体视频| 一级毛片高清免费大全| 精品国产一区二区久久| 午夜福利视频1000在线观看 | 色老头精品视频在线观看| 制服诱惑二区| 国产精品二区激情视频| 美女高潮喷水抽搐中文字幕| 亚洲人成77777在线视频| 无遮挡黄片免费观看| 国产视频一区二区在线看| 99久久久亚洲精品蜜臀av| 日本五十路高清| 天天一区二区日本电影三级 | 国产三级黄色录像| 大陆偷拍与自拍| or卡值多少钱| 亚洲国产看品久久| 一二三四社区在线视频社区8| 久久久久久久午夜电影| 日本 av在线| 超碰成人久久| svipshipincom国产片| 久久久精品欧美日韩精品| 欧美黄色片欧美黄色片| 制服丝袜大香蕉在线| 在线观看日韩欧美| 色综合欧美亚洲国产小说| 精品久久久久久久人妻蜜臀av | 村上凉子中文字幕在线| 女性生殖器流出的白浆| 久久午夜亚洲精品久久| 可以免费在线观看a视频的电影网站| 色av中文字幕| 亚洲自偷自拍图片 自拍| 亚洲专区国产一区二区| 亚洲国产毛片av蜜桃av| 19禁男女啪啪无遮挡网站| 19禁男女啪啪无遮挡网站| 亚洲色图综合在线观看| 久99久视频精品免费| 18禁黄网站禁片午夜丰满| 极品人妻少妇av视频| 国产欧美日韩一区二区三区在线| 欧美日韩精品网址| 91精品国产国语对白视频| 欧美不卡视频在线免费观看 | 一区福利在线观看| 两个人看的免费小视频| 性少妇av在线| svipshipincom国产片| 欧美一级毛片孕妇| √禁漫天堂资源中文www| 97超级碰碰碰精品色视频在线观看| svipshipincom国产片| 国产1区2区3区精品| 国产精品亚洲一级av第二区| 久久午夜综合久久蜜桃| 久久精品成人免费网站| 国产av一区在线观看免费| 久久久久精品国产欧美久久久| 美国免费a级毛片| 国产欧美日韩一区二区三区在线| 亚洲激情在线av| 亚洲av第一区精品v没综合| 无人区码免费观看不卡| 高潮久久久久久久久久久不卡| 曰老女人黄片| 日韩欧美国产一区二区入口| 久久婷婷人人爽人人干人人爱 | 亚洲性夜色夜夜综合| 亚洲精品久久成人aⅴ小说| 午夜精品久久久久久毛片777| 午夜免费激情av| 中亚洲国语对白在线视频| 久久精品91无色码中文字幕| 国产成人精品在线电影| 成人av一区二区三区在线看| 久热爱精品视频在线9| 精品日产1卡2卡| 后天国语完整版免费观看| 国产精品精品国产色婷婷| 老鸭窝网址在线观看| 精品熟女少妇八av免费久了| 国产片内射在线| 国产精品98久久久久久宅男小说| 国产在线观看jvid| 亚洲人成77777在线视频| av视频在线观看入口| 色播亚洲综合网| 麻豆国产av国片精品| 亚洲黑人精品在线| 99久久99久久久精品蜜桃| 亚洲欧美激情在线| 亚洲成人久久性| 又黄又爽又免费观看的视频| 欧美国产精品va在线观看不卡| 亚洲三区欧美一区| 亚洲三区欧美一区| 国产麻豆69| 亚洲一卡2卡3卡4卡5卡精品中文| 日韩欧美一区二区三区在线观看| 久久精品91蜜桃| 成人18禁在线播放| 欧美国产精品va在线观看不卡| 亚洲国产精品999在线| 黑丝袜美女国产一区| 亚洲成a人片在线一区二区| netflix在线观看网站| 韩国精品一区二区三区| 国产一区二区三区在线臀色熟女| 给我免费播放毛片高清在线观看| 久久国产精品人妻蜜桃| 波多野结衣巨乳人妻| 亚洲国产高清在线一区二区三 | 91av网站免费观看| 精品熟女少妇八av免费久了| www.精华液| 不卡av一区二区三区| 纯流量卡能插随身wifi吗| 男女下面进入的视频免费午夜 | 国产精品国产高清国产av| 大型黄色视频在线免费观看| 国产91精品成人一区二区三区| 久久性视频一级片| 国产片内射在线| 亚洲欧洲精品一区二区精品久久久| 久久精品亚洲精品国产色婷小说| 亚洲国产精品sss在线观看| 日韩欧美免费精品| 热99re8久久精品国产| 国产区一区二久久| 在线av久久热| 精品一区二区三区四区五区乱码| 色精品久久人妻99蜜桃| 黄片大片在线免费观看| а√天堂www在线а√下载| 黄片小视频在线播放| 欧美性长视频在线观看| 色婷婷久久久亚洲欧美| 国语自产精品视频在线第100页| 国产精品亚洲一级av第二区| 欧美一区二区精品小视频在线| 国产精品影院久久| 日韩 欧美 亚洲 中文字幕| 精品一品国产午夜福利视频| 国产xxxxx性猛交| 啦啦啦免费观看视频1| 亚洲电影在线观看av| 日韩欧美一区二区三区在线观看| 少妇被粗大的猛进出69影院| 亚洲成av片中文字幕在线观看| 99国产精品免费福利视频| 精品国产一区二区三区四区第35| 18禁观看日本| 精品乱码久久久久久99久播| 满18在线观看网站| 在线观看免费午夜福利视频| 91国产中文字幕| 国产成人av教育| 日本三级黄在线观看| 黄色成人免费大全| 亚洲av美国av| 精品欧美国产一区二区三| 热re99久久国产66热| 侵犯人妻中文字幕一二三四区| 国产精品香港三级国产av潘金莲| 国产精品 国内视频| 欧美丝袜亚洲另类 | 老司机在亚洲福利影院| 中文亚洲av片在线观看爽| 国产xxxxx性猛交| 欧美黄色片欧美黄色片| 好男人在线观看高清免费视频 | netflix在线观看网站| 精品一区二区三区视频在线观看免费| 曰老女人黄片| 国产精品久久久人人做人人爽| 99国产精品一区二区蜜桃av| 免费不卡黄色视频| 久久国产亚洲av麻豆专区| 欧美精品啪啪一区二区三区| 精品国产一区二区三区四区第35| 男女下面插进去视频免费观看| 三级毛片av免费| 久久热在线av| 又大又爽又粗| 亚洲av日韩精品久久久久久密| 国产色视频综合| 亚洲免费av在线视频| 非洲黑人性xxxx精品又粗又长| 欧美久久黑人一区二区| 国产精品电影一区二区三区| 神马国产精品三级电影在线观看 | 成人18禁高潮啪啪吃奶动态图| 精品电影一区二区在线| 丝袜美腿诱惑在线| 欧美成人免费av一区二区三区| 免费无遮挡裸体视频| 亚洲熟妇中文字幕五十中出| 久99久视频精品免费| 成人永久免费在线观看视频| 一区福利在线观看| 欧美成狂野欧美在线观看| 日韩欧美国产在线观看| 午夜两性在线视频| 久久久久久国产a免费观看| 无人区码免费观看不卡| 色婷婷久久久亚洲欧美| 丰满的人妻完整版| a在线观看视频网站| 国产精品一区二区在线不卡| 免费无遮挡裸体视频| 一级a爱片免费观看的视频| 国产av精品麻豆| 热99re8久久精品国产| 日韩国内少妇激情av| 国产不卡一卡二| 免费看十八禁软件| 成人国语在线视频| 99国产精品99久久久久| 午夜精品国产一区二区电影| 亚洲精品久久成人aⅴ小说| 亚洲精品久久成人aⅴ小说| 亚洲伊人色综图| 99精品欧美一区二区三区四区| www.999成人在线观看| 91国产中文字幕| 亚洲成a人片在线一区二区| 91精品国产国语对白视频| 亚洲精品一区av在线观看| 久久6这里有精品| 色视频www国产| 两性午夜刺激爽爽歪歪视频在线观看| 婷婷精品国产亚洲av在线| 日本精品一区二区三区蜜桃| 在线免费观看不下载黄p国产 | 国产高潮美女av| 国产av不卡久久| 18禁裸乳无遮挡免费网站照片| 91麻豆av在线| 国产精品亚洲一级av第二区| 亚洲av日韩精品久久久久久密| 色av中文字幕| 亚洲专区国产一区二区| 少妇的逼好多水| 免费看av在线观看网站| 免费av不卡在线播放| 天堂√8在线中文| 很黄的视频免费| 赤兔流量卡办理| 老熟妇乱子伦视频在线观看| 日本三级黄在线观看| 亚洲av中文字字幕乱码综合| 婷婷精品国产亚洲av在线| 深爱激情五月婷婷| 国产精品一区www在线观看 | 亚洲第一区二区三区不卡| 久久久午夜欧美精品| 国内毛片毛片毛片毛片毛片| 国产成人av教育| 天堂av国产一区二区熟女人妻| av在线蜜桃| 久久久久久国产a免费观看| 久久99热6这里只有精品| 中文字幕av在线有码专区| 亚洲男人的天堂狠狠| 俺也久久电影网| 亚洲人成网站高清观看| 欧美日韩黄片免| 色综合站精品国产| 可以在线观看的亚洲视频| 日韩在线高清观看一区二区三区 | 欧美又色又爽又黄视频| 嫩草影院精品99| 91精品国产九色| 亚洲国产精品久久男人天堂| aaaaa片日本免费| 国产在视频线在精品| 麻豆久久精品国产亚洲av| 亚洲性夜色夜夜综合| 欧美3d第一页| 在线观看免费视频日本深夜| 色在线成人网| 亚洲欧美日韩高清在线视频| 国产高清视频在线播放一区| 日韩强制内射视频| 久久精品国产鲁丝片午夜精品 | 国产一区二区三区av在线 | 99国产极品粉嫩在线观看| 欧美一区二区亚洲| 午夜激情福利司机影院| 国产精品国产高清国产av| 一a级毛片在线观看| 欧美日韩乱码在线| 三级毛片av免费| 亚洲一区高清亚洲精品| 国产精品永久免费网站| 精品久久久久久久久亚洲 | 国产伦在线观看视频一区| 日本熟妇午夜| 亚洲欧美日韩东京热| 欧美一区二区精品小视频在线| 精品久久久久久久久亚洲 | 久久精品国产99精品国产亚洲性色| 亚洲天堂国产精品一区在线| 欧美潮喷喷水| 亚洲内射少妇av| 国产精品三级大全| 日本 欧美在线| 国产视频内射| 色5月婷婷丁香| 少妇被粗大猛烈的视频| 无人区码免费观看不卡| 亚洲一区二区三区色噜噜| 岛国在线免费视频观看| 免费观看精品视频网站| 成人国产麻豆网| 午夜爱爱视频在线播放| 白带黄色成豆腐渣| 色哟哟·www| 国产在视频线在精品| 91av网一区二区| 国产人妻一区二区三区在| 一个人看的www免费观看视频| 亚洲国产欧美人成| 人妻久久中文字幕网| 国产高潮美女av| 免费观看人在逋| 美女被艹到高潮喷水动态| 国产精品免费一区二区三区在线| 久久久国产成人精品二区| 国内少妇人妻偷人精品xxx网站| 久久亚洲真实| 91在线观看av| 在线免费观看的www视频| 99久国产av精品| 成人av一区二区三区在线看| 亚洲av成人av| 干丝袜人妻中文字幕| 日韩欧美 国产精品| 色精品久久人妻99蜜桃| 欧美+日韩+精品| 精品久久久久久久久av| 亚洲第一电影网av| 91午夜精品亚洲一区二区三区 | 亚洲人成网站高清观看| 国产男靠女视频免费网站| 给我免费播放毛片高清在线观看| 欧美不卡视频在线免费观看| 床上黄色一级片| 国产久久久一区二区三区| 97碰自拍视频| 毛片一级片免费看久久久久 | 日日夜夜操网爽| 免费黄网站久久成人精品| 三级男女做爰猛烈吃奶摸视频| 淫秽高清视频在线观看| 老女人水多毛片| 日韩欧美精品v在线| 禁无遮挡网站| 亚洲国产日韩欧美精品在线观看| 五月玫瑰六月丁香| 内地一区二区视频在线| 人人妻,人人澡人人爽秒播| 久久午夜亚洲精品久久| 免费看光身美女| 国产av不卡久久| 亚洲av不卡在线观看| 久久久久久九九精品二区国产| 一区二区三区免费毛片| 亚洲在线自拍视频| 如何舔出高潮| 在线观看免费视频日本深夜| 观看美女的网站| 精品一区二区三区av网在线观看| 91午夜精品亚洲一区二区三区 | 国产69精品久久久久777片| 国语自产精品视频在线第100页| 国产午夜福利久久久久久| 99热只有精品国产| 国产淫片久久久久久久久| 少妇熟女aⅴ在线视频| 久久国产乱子免费精品| 国模一区二区三区四区视频| 免费人成在线观看视频色| 午夜a级毛片| 国内精品宾馆在线| 色综合色国产| 国产一区二区在线av高清观看| 成人亚洲精品av一区二区| 97人妻精品一区二区三区麻豆| 久久国内精品自在自线图片| 国产精品乱码一区二三区的特点| 超碰av人人做人人爽久久| 午夜免费男女啪啪视频观看 | 听说在线观看完整版免费高清| 中文在线观看免费www的网站| 自拍偷自拍亚洲精品老妇| 午夜爱爱视频在线播放| 小说图片视频综合网站| 69av精品久久久久久| 人人妻人人看人人澡| 国产精品一区二区三区四区久久| 亚洲美女视频黄频| 亚洲黑人精品在线| 日日摸夜夜添夜夜添av毛片 | 成人亚洲精品av一区二区| 色在线成人网| 久久久久性生活片| 色哟哟哟哟哟哟| 一个人观看的视频www高清免费观看| 深夜精品福利| 国产在线男女| 国产精品,欧美在线| 毛片女人毛片| 亚洲av日韩精品久久久久久密| 91麻豆精品激情在线观看国产| 国产蜜桃级精品一区二区三区| 熟女人妻精品中文字幕| 国产精品亚洲一级av第二区| 一区二区三区四区激情视频 | 香蕉av资源在线| 国产亚洲欧美98| 97碰自拍视频| 午夜精品在线福利| av黄色大香蕉| 国产探花在线观看一区二区| 无遮挡黄片免费观看| 久久99热6这里只有精品| 久久久午夜欧美精品| 免费在线观看成人毛片| 成人毛片a级毛片在线播放| 亚洲精品久久国产高清桃花| 成人永久免费在线观看视频| 九色成人免费人妻av| 久久久久久久亚洲中文字幕| 美女免费视频网站| 久久99热6这里只有精品| 最好的美女福利视频网| 亚洲成a人片在线一区二区| 自拍偷自拍亚洲精品老妇| xxxwww97欧美| 无遮挡黄片免费观看| 性欧美人与动物交配| 久久国产乱子免费精品| 91精品国产九色| 久久精品久久久久久噜噜老黄 | 小蜜桃在线观看免费完整版高清| 精品久久国产蜜桃| 可以在线观看毛片的网站| 亚洲精品粉嫩美女一区| 大又大粗又爽又黄少妇毛片口| 亚洲熟妇熟女久久| 国产探花在线观看一区二区| 哪里可以看免费的av片| 国产探花在线观看一区二区| 日本精品一区二区三区蜜桃| 又爽又黄a免费视频| 久久久久久久久大av| 精品久久久久久久久久久久久| 国产高清激情床上av| 国产久久久一区二区三区| 3wmmmm亚洲av在线观看| 成年女人毛片免费观看观看9| 亚洲精品在线观看二区| 18禁黄网站禁片午夜丰满| 三级国产精品欧美在线观看| 国产成人影院久久av| 国产伦在线观看视频一区| 免费看美女性在线毛片视频| 亚洲欧美日韩东京热| 国产精品久久久久久av不卡| 亚洲国产精品合色在线| 日韩av在线大香蕉| 国产精品1区2区在线观看.| 久久午夜福利片| 日韩,欧美,国产一区二区三区 | 久久久久久久亚洲中文字幕| 精品人妻视频免费看| 麻豆精品久久久久久蜜桃| 精品一区二区三区人妻视频| 午夜免费激情av| 动漫黄色视频在线观看| 国产精品嫩草影院av在线观看 | 在线免费观看的www视频| 色尼玛亚洲综合影院| 日本 av在线| 欧美日韩亚洲国产一区二区在线观看| 精品久久久久久,| 成熟少妇高潮喷水视频| av天堂在线播放| 国产美女午夜福利| 亚洲第一区二区三区不卡| 国产亚洲精品久久久com| 三级国产精品欧美在线观看| 成人特级av手机在线观看| 午夜视频国产福利| 国产高清不卡午夜福利| 毛片一级片免费看久久久久 | 国产一级毛片七仙女欲春2| 亚洲av免费高清在线观看| 国产熟女欧美一区二区| 亚洲四区av| 成人毛片a级毛片在线播放| 精品人妻熟女av久视频| 成人国产一区最新在线观看| 免费人成视频x8x8入口观看| 国产亚洲精品综合一区在线观看| 精品乱码久久久久久99久播| 免费看美女性在线毛片视频| 欧美成人一区二区免费高清观看| 真人做人爱边吃奶动态| 亚洲一级一片aⅴ在线观看| 观看免费一级毛片| 国产精品久久久久久精品电影| 蜜桃久久精品国产亚洲av| 午夜福利在线在线| 亚洲成a人片在线一区二区| 国产午夜福利久久久久久| 日韩亚洲欧美综合| 男人舔奶头视频| 美女高潮的动态| 精品人妻1区二区| 1024手机看黄色片| 成人国产一区最新在线观看| 久久亚洲真实| 真实男女啪啪啪动态图| 波野结衣二区三区在线| 亚州av有码| 联通29元200g的流量卡| 欧美一区二区国产精品久久精品| 亚洲性久久影院| 日本爱情动作片www.在线观看 | 中文字幕免费在线视频6| 国产一级毛片七仙女欲春2| 国产精品嫩草影院av在线观看 | a级毛片a级免费在线| 久久精品国产亚洲av涩爱 | 成人三级黄色视频| 别揉我奶头 嗯啊视频| 天堂动漫精品| 免费人成在线观看视频色| 国产精品精品国产色婷婷| 亚洲av五月六月丁香网| 男女做爰动态图高潮gif福利片| 欧美色欧美亚洲另类二区| 国产不卡一卡二| 国产色婷婷99| 日本免费a在线| 在线a可以看的网站| 麻豆成人午夜福利视频| 亚洲美女黄片视频| 亚洲天堂国产精品一区在线| 九九热线精品视视频播放| 欧美激情久久久久久爽电影| 久久国内精品自在自线图片| 日日啪夜夜撸| 校园春色视频在线观看| АⅤ资源中文在线天堂| 欧美激情国产日韩精品一区| 亚洲精华国产精华精| 精品一区二区三区视频在线观看免费| 简卡轻食公司| 日本色播在线视频| 亚洲av成人精品一区久久| 国产精品女同一区二区软件 | 哪里可以看免费的av片| 免费看光身美女| 午夜精品在线福利| 村上凉子中文字幕在线| 最近中文字幕高清免费大全6 | 俄罗斯特黄特色一大片| 一级黄色大片毛片| 99在线视频只有这里精品首页| 亚洲精品在线观看二区| 欧美国产日韩亚洲一区| 国产高清视频在线观看网站| 91狼人影院| 嫩草影院入口| 大型黄色视频在线免费观看| 婷婷丁香在线五月|