• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    異構(gòu)系統(tǒng)中帶可用性約束的性能優(yōu)化調(diào)度算法

    2018-02-27 10:57:52孫健張興軍董小社
    關(guān)鍵詞:處理機(jī)任務(wù)調(diào)度可用性

    孫健,張興軍,董小社

    (西安交通大學(xué)電子與信息工程學(xué)院,710049,西安)

    可用性是衡量復(fù)雜計(jì)算機(jī)系統(tǒng)的關(guān)鍵指標(biāo)之一,特別是近年來(lái)異構(gòu)系統(tǒng)的日益發(fā)展,伴隨系統(tǒng)規(guī)模以及實(shí)時(shí)應(yīng)用范圍的逐步擴(kuò)大,研究異構(gòu)系統(tǒng)中多實(shí)時(shí)任務(wù)的可用性需求問(wèn)題具有非常重要的理論與實(shí)際意義。該研究領(lǐng)域內(nèi)涌現(xiàn)出諸多以滿足實(shí)時(shí)任務(wù)的具體可用性需求,并通過(guò)帶可用性約束的調(diào)度策略來(lái)實(shí)現(xiàn)系統(tǒng)內(nèi)實(shí)時(shí)任務(wù)合理調(diào)度分配的實(shí)時(shí)任務(wù)調(diào)度算法[1-2]。

    早期實(shí)時(shí)任務(wù)調(diào)度理論中對(duì)任務(wù)調(diào)度算法的最基本假設(shè)是系統(tǒng)內(nèi)所有用于任務(wù)分配執(zhí)行的處理機(jī)節(jié)點(diǎn)均可用[3]。該假設(shè)僅在理想狀態(tài)的多處理機(jī)系統(tǒng)實(shí)時(shí)任務(wù)調(diào)度中是合理的,但在復(fù)雜計(jì)算機(jī)系統(tǒng)特別是異構(gòu)系統(tǒng)中,由于系統(tǒng)故障宕機(jī)、失效修復(fù)等情況時(shí)有發(fā)生常導(dǎo)致系統(tǒng)不可用,此時(shí)該假設(shè)便不再適用。另外,異構(gòu)系統(tǒng)內(nèi)各處理機(jī)節(jié)點(diǎn)的實(shí)時(shí)任務(wù)執(zhí)行時(shí)間即任務(wù)響應(yīng)時(shí)間也各不相同,為選取系統(tǒng)內(nèi)任務(wù)分配的處理機(jī)節(jié)點(diǎn)增添了難度。為此,在設(shè)計(jì)實(shí)時(shí)任務(wù)調(diào)度算法時(shí)應(yīng)充分考慮各實(shí)時(shí)任務(wù)的具體可用性需求即可用性約束,并在此基礎(chǔ)上權(quán)衡系統(tǒng)調(diào)度分配過(guò)程中的任務(wù)響應(yīng)時(shí)間,保證在任務(wù)可調(diào)度性以及可用性的前提下實(shí)現(xiàn)異構(gòu)系統(tǒng)中實(shí)時(shí)任務(wù)的合理調(diào)度。

    針對(duì)上述問(wèn)題,本文提出一種異構(gòu)系統(tǒng)中帶可用性約束的性能優(yōu)化調(diào)度算法,構(gòu)建系統(tǒng)內(nèi)處理機(jī)節(jié)點(diǎn)、實(shí)時(shí)任務(wù)以及帶可用性約束的實(shí)時(shí)任務(wù)調(diào)度模型,通過(guò)引入可用性成本和系統(tǒng)綜合開(kāi)銷,考慮可用性成本與任務(wù)平均響應(yīng)時(shí)間的折中,為實(shí)時(shí)任務(wù)分配系統(tǒng)綜合開(kāi)銷最少的處理機(jī)節(jié)點(diǎn),合理利用異構(gòu)系統(tǒng)調(diào)度資源,在提升實(shí)時(shí)任務(wù)調(diào)度可用性的同時(shí)進(jìn)一步優(yōu)化異構(gòu)系統(tǒng)的調(diào)度性能。

    1 相關(guān)工作

    目前,異構(gòu)系統(tǒng)中可用性相關(guān)的實(shí)時(shí)任務(wù)調(diào)度算法大致可分為兩類:一類是可用性受限的實(shí)時(shí)任務(wù)調(diào)度算法,即在滿足實(shí)時(shí)任務(wù)可用性約束的前提下,對(duì)以往僅考慮任務(wù)執(zhí)行時(shí)間的調(diào)度算法進(jìn)行優(yōu)化改進(jìn),典型算法如QoS-SAC[4]、SSAC[5]等;另一類是實(shí)時(shí)任務(wù)本身無(wú)可用性約束,而在算法設(shè)計(jì)中考慮可用性因素調(diào)度策略,旨在提升系統(tǒng)整體以及實(shí)時(shí)任務(wù)分配執(zhí)行的可用性水平和性能,如HMSAS[6]、ADSS[7]等。

    多處理機(jī)異構(gòu)環(huán)境下的實(shí)時(shí)任務(wù)最優(yōu)分配一直是一個(gè)難以解決的NP完全問(wèn)題[8]。考慮可用性受限的實(shí)時(shí)任務(wù)調(diào)度算法,Xie等首次提出了異構(gòu)系統(tǒng)中帶可用性約束的多任務(wù)組調(diào)度策略(SSAC)[9],該策略的核心思想是結(jié)合任務(wù)平均響應(yīng)時(shí)間和可用性約束對(duì)實(shí)時(shí)任務(wù)進(jìn)行數(shù)學(xué)建模,根據(jù)任務(wù)的具體可用性約束,為其選擇系統(tǒng)內(nèi)滿足該約束的候選處理機(jī)集合,并將任務(wù)分配至集合中任務(wù)平均響應(yīng)時(shí)間最短的處理機(jī)處理執(zhí)行,在提升調(diào)度性能的同時(shí)提高系統(tǒng)可用性。此外,Tong等考慮系統(tǒng)QoS以及可用性需求,在文獻(xiàn)[5,9]的基礎(chǔ)上,針對(duì)異構(gòu)分布式系統(tǒng)設(shè)計(jì)可用性受限的實(shí)時(shí)任務(wù)調(diào)度算法(QoS-SAC)[4],以縮短實(shí)時(shí)任務(wù)的完成時(shí)間同時(shí)提高系統(tǒng)可用性。

    本文提出的異構(gòu)系統(tǒng)中帶可用性約束的性能優(yōu)化調(diào)度算法(PO-SSAC),在實(shí)時(shí)任務(wù)調(diào)度執(zhí)行時(shí)考慮任務(wù)平均響應(yīng)時(shí)間與可用性成本的折中,并為其分配系統(tǒng)綜合開(kāi)銷最少的處理機(jī)節(jié)點(diǎn),與SSAC以及其他現(xiàn)有算法相比,進(jìn)一步提升了異構(gòu)系統(tǒng)的實(shí)時(shí)任務(wù)調(diào)度可用性以及性能,實(shí)現(xiàn)了系統(tǒng)資源的合理利用。

    2 實(shí)時(shí)任務(wù)調(diào)度模型

    2.1 帶可用性約束的實(shí)時(shí)任務(wù)調(diào)度框架結(jié)構(gòu)

    本文所需解決的具體問(wèn)題是如何在可用性受限的情況下對(duì)異構(gòu)系統(tǒng)中實(shí)時(shí)任務(wù)進(jìn)行合理調(diào)度分配,并在提升系統(tǒng)任務(wù)調(diào)度可用性的基礎(chǔ)上進(jìn)一步優(yōu)化調(diào)度性能。根據(jù)上述問(wèn)題描述,異構(gòu)系統(tǒng)中帶可用性約束的實(shí)時(shí)任務(wù)調(diào)度框架結(jié)構(gòu)如圖1所示。

    圖1 帶可用性約束的實(shí)時(shí)任務(wù)調(diào)度框架結(jié)構(gòu)

    調(diào)度器是實(shí)時(shí)任務(wù)調(diào)度框架結(jié)構(gòu)的核心,負(fù)責(zé)調(diào)度分配來(lái)自各不同用戶的任務(wù)組隊(duì)列,并實(shí)時(shí)監(jiān)測(cè)異構(gòu)系統(tǒng)內(nèi)所有處理機(jī)節(jié)點(diǎn)的運(yùn)行狀態(tài),及時(shí)獲取各處理機(jī)節(jié)點(diǎn)的運(yùn)行狀態(tài)信息。調(diào)度隊(duì)列負(fù)責(zé)接收來(lái)自各用戶的任務(wù)組,調(diào)度器按照先來(lái)先服務(wù)原則接收所有到達(dá)的實(shí)時(shí)任務(wù),分配其至各處理機(jī)節(jié)點(diǎn),并由處理機(jī)節(jié)點(diǎn)內(nèi)本地隊(duì)列實(shí)現(xiàn)對(duì)各實(shí)時(shí)任務(wù)的并行處理。

    對(duì)于每個(gè)來(lái)自用戶的實(shí)時(shí)任務(wù),處理機(jī)定位器為其篩選一個(gè)候選處理機(jī)集合,集合包含所有滿足該任務(wù)可用性需求即可用性約束的處理機(jī)節(jié)點(diǎn)。若集合非空,調(diào)度器從集合內(nèi)選擇系統(tǒng)綜合開(kāi)銷最少的處理機(jī)節(jié)點(diǎn),并分配任務(wù)至該處理機(jī)節(jié)點(diǎn)處理執(zhí)行;若集合為空,說(shuō)明沒(méi)有候選處理機(jī)節(jié)點(diǎn)滿足當(dāng)前任務(wù)的可用性約束,此時(shí)可用性成本計(jì)算器計(jì)算系統(tǒng)內(nèi)能夠滿足該任務(wù)可用性約束的處理機(jī)節(jié)點(diǎn),并將其添加至候選處理機(jī)集合。負(fù)載均衡檢測(cè)器檢測(cè)候選處理機(jī)節(jié)點(diǎn)是否超載,超載時(shí)實(shí)時(shí)任務(wù)將被分配至負(fù)載最輕的處理機(jī)節(jié)點(diǎn),否則分配至該處理機(jī)節(jié)點(diǎn)處理執(zhí)行。

    2.2 處理機(jī)和實(shí)時(shí)任務(wù)模型

    對(duì)異構(gòu)系統(tǒng)內(nèi)處理機(jī)和實(shí)時(shí)任務(wù)進(jìn)行如下的形式化數(shù)學(xué)描述。①處理機(jī)模型。異構(gòu)系統(tǒng)指由一定數(shù)量?jī)?nèi)部構(gòu)造不同且相互獨(dú)立的自治節(jié)點(diǎn),通過(guò)高速互聯(lián)網(wǎng)絡(luò)相互連接所共同組成的高性能、高可用計(jì)算機(jī)系統(tǒng),能夠作為一個(gè)整體為用戶提供所需的應(yīng)用服務(wù)。設(shè)異構(gòu)系統(tǒng)處理機(jī)集合H={N1,N2,…,Nj,…,Nn,j=1~n},n為處理機(jī)節(jié)點(diǎn)數(shù)。H中各處理機(jī)節(jié)點(diǎn)處理能力由每秒百萬(wàn)條指令(MIPS)來(lái)衡量,同時(shí)由于是異構(gòu)系統(tǒng),假設(shè)各處理機(jī)節(jié)點(diǎn)處理能力和可用性均不相同。②實(shí)時(shí)任務(wù)模型。設(shè)實(shí)時(shí)任務(wù)集合TG={t1,t2,…,ti,…,tm,i=1~m},m為來(lái)自用戶的實(shí)時(shí)任務(wù)數(shù)。系統(tǒng)根據(jù)用戶的可用性需求為實(shí)時(shí)任務(wù)設(shè)定可用性約束,范圍為0~1,實(shí)時(shí)任務(wù)必須分配至能夠滿足其可用性約束的處理機(jī)節(jié)點(diǎn)以確保得到成功處理。

    定義實(shí)時(shí)任務(wù)ti在處理機(jī)節(jié)點(diǎn)Nj上執(zhí)行的平均響應(yīng)時(shí)間

    φj))

    (1)

    式中:sj為實(shí)時(shí)任務(wù)集合TG在處理機(jī)節(jié)點(diǎn)Nj上的服務(wù)時(shí)間;sj2為sj的二階矩;E(sj)為服務(wù)時(shí)間均值;E(sj2)為服務(wù)時(shí)間均方。處理機(jī)節(jié)點(diǎn)Nj的任務(wù)到達(dá)率為Λj,服務(wù)率為φj,假設(shè)異構(gòu)系統(tǒng)內(nèi)任務(wù)到達(dá)模式和服務(wù)率是先驗(yàn)的,則Λj與φj均可通過(guò)代碼剖析和統(tǒng)計(jì)預(yù)測(cè)方法估算得出。

    2.3 帶可用性約束的實(shí)時(shí)任務(wù)調(diào)度模型

    本文異構(gòu)系統(tǒng)中可用性均為穩(wěn)態(tài)可用性,是指在某個(gè)時(shí)間段內(nèi)系統(tǒng)維持正常運(yùn)行狀態(tài)的概率。定義異構(gòu)系統(tǒng)內(nèi)處理機(jī)節(jié)點(diǎn)Nj的可用性為ξj,表示任意時(shí)間段內(nèi)處理機(jī)節(jié)點(diǎn)Nj可提供持續(xù)運(yùn)算處理的概率,相應(yīng)的異構(gòu)系統(tǒng)內(nèi)處理機(jī)節(jié)點(diǎn)Nj的不可用性為θj。定義實(shí)時(shí)任務(wù)ti的可用性約束為ai,代表任務(wù)ti必須執(zhí)行成功的概率,例如,當(dāng)ai=0.85時(shí),任務(wù)ti執(zhí)行失敗的概率不得高于0.15。

    進(jìn)一步定義aij為實(shí)時(shí)任務(wù)ti在處理機(jī)節(jié)點(diǎn)Nj上的可用性成本

    aij=pijθj/μij

    (2)

    式中:pij為實(shí)時(shí)任務(wù)ti分配至處理機(jī)節(jié)點(diǎn)Nj的概率;μij為實(shí)時(shí)任務(wù)ti分配至處理機(jī)節(jié)點(diǎn)Nj的服務(wù)率。

    本文引入綜合性能開(kāi)銷的概念,定義Cij為實(shí)時(shí)任務(wù)ti在處理機(jī)節(jié)點(diǎn)Nj上的系統(tǒng)綜合開(kāi)銷,結(jié)合式(1)和式(2),得到Cij的計(jì)算公式為

    (3)

    結(jié)合2.2小節(jié)對(duì)處理機(jī)和實(shí)時(shí)任務(wù)模型的相關(guān)分析,將帶可用性約束的性能優(yōu)化調(diào)度問(wèn)題抽象為異構(gòu)系統(tǒng)可用性與實(shí)時(shí)任務(wù)平均響應(yīng)時(shí)間兩者之間的折中,則本文調(diào)度算法的設(shè)計(jì)目標(biāo)可描述為:提高實(shí)時(shí)任務(wù)調(diào)度分配的可用性;合理利用資源減少系統(tǒng)綜合開(kāi)銷,即保證較短的實(shí)時(shí)任務(wù)平均響應(yīng)時(shí)間和較低的處理執(zhí)行可用性成本,得到如下數(shù)學(xué)模型

    (4)

    系統(tǒng)綜合開(kāi)銷約束條件為

    ?1≤i≤m,1≤j≤n,ai≤ξj:minCij

    在該數(shù)學(xué)模型中,A為異構(gòu)系統(tǒng)實(shí)時(shí)任務(wù)調(diào)度的系統(tǒng)可用性;λi為實(shí)時(shí)任務(wù)ti的到達(dá)率且符合泊松過(guò)程;λ為實(shí)時(shí)任務(wù)集合TG在異構(gòu)系統(tǒng)中的總平均到達(dá)率。

    3 帶可用性約束的性能優(yōu)化調(diào)度算法

    實(shí)時(shí)任務(wù)平均響應(yīng)時(shí)間在很大程度上依賴于異構(gòu)系統(tǒng)中各處理機(jī)節(jié)點(diǎn)所采用的具體排序策略,因此本文所提PO-SSAC算法采用文獻(xiàn)[10]中給出的最優(yōu)排序策略以最大程度減少異構(gòu)系統(tǒng)中實(shí)時(shí)任務(wù)集合的平均響應(yīng)時(shí)間,并作如下命題。

    命題1 已知m組實(shí)時(shí)任務(wù)隊(duì)列和由n個(gè)處理機(jī)節(jié)點(diǎn)構(gòu)成的異構(gòu)系統(tǒng),根據(jù)最優(yōu)排序策略,在處理機(jī)節(jié)點(diǎn)Nj上,當(dāng)μij≥μkj時(shí),實(shí)時(shí)任務(wù)ti的優(yōu)先級(jí)高于tk。

    上述命題說(shuō)明高服務(wù)率的實(shí)時(shí)任務(wù)在調(diào)度分配時(shí)必須擁有相對(duì)較高的優(yōu)先級(jí),以達(dá)到縮短任務(wù)平均響應(yīng)時(shí)間的目的。為簡(jiǎn)化描述進(jìn)一步作如下假設(shè)。

    假設(shè)1 假設(shè)異構(gòu)系統(tǒng)內(nèi)實(shí)時(shí)任務(wù)集合TG按照服務(wù)率從高到低排序,即

    ρ1≥ρ2≥…≥ρi…≥ρm

    式中:ρi為實(shí)時(shí)任務(wù)ti分配至H的總服務(wù)率。根據(jù)該假設(shè),調(diào)度策略可以在執(zhí)行最初對(duì)所有實(shí)時(shí)任務(wù)按照服務(wù)率從高到低順序進(jìn)行重新排列,以方便之后的調(diào)度分配。

    在PO-SSAC算法中,執(zhí)行程序首先按照命題1和假設(shè)1為高服務(wù)率的實(shí)時(shí)任務(wù)分配高優(yōu)先級(jí)并按照優(yōu)先級(jí)進(jìn)行排序,之后進(jìn)入對(duì)實(shí)時(shí)任務(wù)集合的循環(huán)處理。循環(huán)處理是PO-SSAC算法的核心部分,首先判斷候選處理機(jī)子集是否為空,若子集非空,說(shuō)明子集內(nèi)至少包含1個(gè)處理機(jī)節(jié)點(diǎn)能夠滿足實(shí)時(shí)任務(wù)ti的可用性約束,進(jìn)而循環(huán)計(jì)算候選處理機(jī)子集中各候選處理機(jī)節(jié)點(diǎn)的系統(tǒng)綜合開(kāi)銷Cij,選取子集中系統(tǒng)綜合開(kāi)銷最少的處理機(jī)節(jié)點(diǎn),并將該處理機(jī)節(jié)點(diǎn)選為任務(wù)調(diào)度的執(zhí)行節(jié)點(diǎn)。

    討論調(diào)度的特殊情況,若候選處理機(jī)子集為空,說(shuō)明此時(shí)異構(gòu)系統(tǒng)中所有處理機(jī)節(jié)點(diǎn)均無(wú)法滿足實(shí)時(shí)任務(wù)ti的可用性約束。在該情況下PO-SSAC算法將采取相應(yīng)的措施盡可能對(duì)ti的調(diào)度執(zhí)行可用性進(jìn)行提升。循環(huán)計(jì)算ti在異構(gòu)系統(tǒng)內(nèi)處理機(jī)節(jié)點(diǎn)的可用性成本aij,并為ti分配系統(tǒng)內(nèi)可用性成本最低的處理機(jī)節(jié)點(diǎn)。另外,如果系統(tǒng)內(nèi)存在2個(gè)或2個(gè)以上可用性成本取值相同且最低的處理機(jī)節(jié)點(diǎn),則ti將分配至其中平均響應(yīng)時(shí)間相對(duì)較短的處理機(jī)節(jié)點(diǎn)上。

    當(dāng)某候選處理機(jī)節(jié)點(diǎn)Ns選定以后,PO-SSAC主函數(shù)將調(diào)用loadBalance()函數(shù)進(jìn)行負(fù)載均衡檢測(cè)并最終分配實(shí)時(shí)任務(wù)ti至相應(yīng)的處理機(jī)節(jié)點(diǎn)處理執(zhí)行。loadBalance()函數(shù)首先估算H內(nèi)所有處理機(jī)節(jié)點(diǎn)的負(fù)載指標(biāo)并找到其中負(fù)載最輕的處理機(jī)節(jié)點(diǎn)Nnmin,令該節(jié)點(diǎn)負(fù)載指標(biāo)為L(zhǎng)min。對(duì)于所選取的處理機(jī)節(jié)點(diǎn)Ns,如果Ns沒(méi)有超載,系統(tǒng)將分配ti至該節(jié)點(diǎn)處理執(zhí)行;如果Ns超載,系統(tǒng)將分配ti至H內(nèi)負(fù)載最輕的處理機(jī)節(jié)點(diǎn)Nnmin處理執(zhí)行,負(fù)載閾值為L(zhǎng)T。

    對(duì)于PO-SSAC主函數(shù),TG按照服務(wù)率從高到低排序的時(shí)間復(fù)雜度為O(mlbm),處理機(jī)節(jié)點(diǎn)選取的時(shí)間復(fù)雜度為O(n),則對(duì)于實(shí)時(shí)任務(wù)集合TG,PO-SSAC主函數(shù)在最差執(zhí)行情況下的時(shí)間復(fù)雜度為O(mn)。進(jìn)一步分析loadBalance()函數(shù),循環(huán)計(jì)算異構(gòu)系統(tǒng)內(nèi)所有處理機(jī)節(jié)點(diǎn)負(fù)載指標(biāo)的時(shí)間復(fù)雜度為O(n),假設(shè)單次任務(wù)調(diào)度分配中,PO-SSAC主函數(shù)和loadBalance()函數(shù)中其他步驟執(zhí)行時(shí)間復(fù)雜度為O(1),則對(duì)于實(shí)時(shí)任務(wù)集合TG,PO-SSAC算法任務(wù)分配的時(shí)間復(fù)雜度為O(m(n+1))。綜合上述分析,PO-SSAC算法在最差執(zhí)行情況下的整體時(shí)間復(fù)雜度為O(mlbm)+O(mn)+O(m(n+1))≈O(2mn)。

    圖2給出了PO-SSAC調(diào)度策略的一個(gè)抽象實(shí)例,假設(shè)異構(gòu)系統(tǒng)由8個(gè)處理機(jī)節(jié)點(diǎn)(N1~N8)組成,其中各處理機(jī)節(jié)點(diǎn)可用性取值范圍為0.68~0.97,任務(wù)平均響應(yīng)時(shí)間取值范圍為42~204 s,可用性成本取值范圍為0.031~0.297。假設(shè)實(shí)時(shí)任務(wù)可用性約束為0.80,則符合該可用性約束的候選處理機(jī)集合為N3、N4、N6、N7和N8,各候選處理機(jī)的系統(tǒng)綜合開(kāi)銷取值范圍為2.94~21.42。按照PO-SSAC調(diào)度策略,調(diào)度器將最終分配實(shí)時(shí)任務(wù)至系統(tǒng)綜合開(kāi)銷最少的處理機(jī)節(jié)點(diǎn)N3處理執(zhí)行。

    圖2 PO-SSAC調(diào)度策略實(shí)例

    4 實(shí)驗(yàn)分析

    本文面向異構(gòu)系統(tǒng)設(shè)計(jì)了帶可用性約束的性能優(yōu)化調(diào)度算法PO-SSAC,并通過(guò)隨機(jī)實(shí)時(shí)任務(wù)集在異構(gòu)系統(tǒng)內(nèi)的調(diào)度分配對(duì)現(xiàn)有實(shí)時(shí)任務(wù)調(diào)度算法SSAC、MinMin、Sufferage以及PO-SSAC進(jìn)行對(duì)比仿真實(shí)驗(yàn)。異構(gòu)系統(tǒng)選用GridSim仿真工具進(jìn)行構(gòu)建,代碼用Java通過(guò)eclipse編譯實(shí)現(xiàn),仿真環(huán)境為Red Hat Enterprise Linux 7.0操作系統(tǒng),CPU為Inter Core i7-6700k@4.00 GHz四核,內(nèi)存為16 GB,硬盤(pán)為希捷ST3000DM001-1ER166(3 TB)。

    4.1 實(shí)驗(yàn)用例

    實(shí)驗(yàn)主要從任務(wù)總平均到達(dá)率和處理機(jī)節(jié)點(diǎn)數(shù)的變化情況對(duì)異構(gòu)系統(tǒng)內(nèi)PO-SSAC算法以及對(duì)比算法的調(diào)度執(zhí)行情況進(jìn)行分析。實(shí)驗(yàn)運(yùn)行200次并記錄實(shí)驗(yàn)結(jié)果,去掉其中5次最大和最小結(jié)果,取剩余結(jié)果均值作為最終實(shí)驗(yàn)結(jié)果。實(shí)驗(yàn)參數(shù)和取值情況見(jiàn)表1,參數(shù)或者參照文獻(xiàn)[5,9]中實(shí)驗(yàn)部分的參數(shù)取值,或者取自異構(gòu)系統(tǒng)的實(shí)際評(píng)測(cè)經(jīng)驗(yàn)值。

    異構(gòu)系統(tǒng)處理機(jī)節(jié)點(diǎn)數(shù)為n,實(shí)時(shí)任務(wù)集合TG通過(guò)GridSim仿真工具隨機(jī)生成,任務(wù)平均響應(yīng)時(shí)間Tij為1~500 s內(nèi)隨機(jī)整數(shù)。根據(jù)對(duì)實(shí)時(shí)任務(wù)調(diào)度模型的分析可知,任務(wù)總平均到達(dá)率λ服從泊松分布,任務(wù)平均響應(yīng)時(shí)間Tij、處理機(jī)節(jié)點(diǎn)可用性ξj以及任務(wù)可用性約束ai均服從均勻分布,負(fù)載閾值LT取固定經(jīng)驗(yàn)值。

    實(shí)驗(yàn)選取與PO-SSAC算法相近似的另外3個(gè)調(diào)度算法進(jìn)行對(duì)比,包括SSAC、MinMin[11]以及Sufferage算法[12],上述算法均適用于異構(gòu)系統(tǒng)中的實(shí)時(shí)任務(wù)調(diào)度分配,同時(shí)也適用于分布式或同構(gòu)系統(tǒng)的任務(wù)調(diào)度情況。

    實(shí)驗(yàn)主要評(píng)價(jià)指標(biāo)包括異構(gòu)系統(tǒng)實(shí)時(shí)任務(wù)調(diào)度系統(tǒng)可用性、系統(tǒng)總平均響應(yīng)時(shí)間以及系統(tǒng)綜合開(kāi)銷。

    4.2 實(shí)驗(yàn)結(jié)果分析

    首先分析任務(wù)總平均到達(dá)率λ變化情況下異構(gòu)系統(tǒng)實(shí)時(shí)任務(wù)調(diào)度的各評(píng)價(jià)指標(biāo)。λ取值范圍為0.2~1.0,增量為0.2,處理機(jī)節(jié)點(diǎn)數(shù)n=16。實(shí)時(shí)任務(wù)調(diào)度分配實(shí)驗(yàn)結(jié)果如圖3所示。

    (a)系統(tǒng)可用性

    (b)系統(tǒng)平均響應(yīng)時(shí)間

    (c)系統(tǒng)綜合性能開(kāi)銷圖3 任務(wù)總平均到達(dá)率不同時(shí)系統(tǒng)的各項(xiàng)性能實(shí)驗(yàn)結(jié)果

    由圖3a可以看出,采用可用性約束調(diào)度策略的PO-SSAC與SSAC可用性提升明顯,與MinMin算法相比,可用性提升約76.9%,與Sufferage算法相比,可用性提升約76.5%,同時(shí)PO-SSAC更優(yōu)于SSAC,可用性提升約3.4%,原因在于PO-SSAC在實(shí)時(shí)任務(wù)處理機(jī)節(jié)點(diǎn)選取時(shí)考慮了實(shí)時(shí)任務(wù)可用性成本與平均響應(yīng)時(shí)間的折中,為其分配系統(tǒng)綜合開(kāi)銷最少的處理機(jī)節(jié)點(diǎn)調(diào)度執(zhí)行,該策略使實(shí)時(shí)任務(wù)調(diào)度分配的可用性能夠得到進(jìn)一步的提升。圖3b、圖3c中實(shí)驗(yàn)結(jié)果表明,PO-SSAC在獲取較高系統(tǒng)可用性的同時(shí)增加了異構(gòu)系統(tǒng)內(nèi)實(shí)時(shí)任務(wù)的調(diào)度執(zhí)行時(shí)間,有效降低了系統(tǒng)綜合開(kāi)銷,與系統(tǒng)綜合開(kāi)銷最多的Sufferage算法相比,減少近30%,優(yōu)化了異構(gòu)系統(tǒng)的性能。

    進(jìn)一步分析處理機(jī)節(jié)點(diǎn)數(shù)n變化時(shí)異構(gòu)系統(tǒng)實(shí)時(shí)任務(wù)調(diào)度的各評(píng)價(jià)指標(biāo)。n取值為16、32、64、128時(shí),任務(wù)總平均到達(dá)率λ=1。實(shí)時(shí)任務(wù)調(diào)度分配實(shí)驗(yàn)結(jié)果如圖4所示。

    (a)系統(tǒng)可用性

    (b)系統(tǒng)平均響應(yīng)時(shí)間

    (c)系統(tǒng)綜合開(kāi)銷圖4 處理機(jī)節(jié)點(diǎn)數(shù)不同時(shí)系統(tǒng)的各項(xiàng)性能實(shí)驗(yàn)結(jié)果

    與任務(wù)到達(dá)率變化實(shí)驗(yàn)結(jié)果類似,與其他3個(gè)算法相比,PO-SSAC系統(tǒng)可用性有所提升,但由于考慮可用性約束,增加了異構(gòu)系統(tǒng)的實(shí)時(shí)任務(wù)調(diào)度執(zhí)行時(shí)間。由圖4c中實(shí)驗(yàn)結(jié)果可以看出,與其他3個(gè)算法相比,PO-SSAC系統(tǒng)綜合開(kāi)銷最少。另外,本實(shí)驗(yàn)結(jié)果也說(shuō)明當(dāng)異構(gòu)系統(tǒng)規(guī)模擴(kuò)大,即處理機(jī)節(jié)點(diǎn)數(shù)增多時(shí),系統(tǒng)綜合開(kāi)銷會(huì)減少,實(shí)時(shí)任務(wù)調(diào)度可用性和系統(tǒng)性能將得到提升。

    5 結(jié) 論

    本文提出了一種異構(gòu)系統(tǒng)中帶可用性約束的性能優(yōu)化調(diào)度算法,該算法對(duì)異構(gòu)系統(tǒng)內(nèi)處理機(jī)節(jié)點(diǎn)、實(shí)時(shí)任務(wù)以及帶可用性約束的實(shí)時(shí)任務(wù)調(diào)度進(jìn)行數(shù)學(xué)建模,引入系統(tǒng)綜合開(kāi)銷概念并考慮可用性成本與任務(wù)平均響應(yīng)時(shí)間的折中,將實(shí)時(shí)任務(wù)分配給系統(tǒng)綜合開(kāi)銷最少的處理機(jī)節(jié)點(diǎn),以達(dá)到系統(tǒng)調(diào)度資源合理利用的目的。實(shí)驗(yàn)結(jié)果表明,與現(xiàn)有算法相比,PO-SSAC算法提升了異構(gòu)系統(tǒng)實(shí)時(shí)任務(wù)調(diào)度的系統(tǒng)可用性,系統(tǒng)調(diào)度性能也得到了進(jìn)一步優(yōu)化。

    [1] FAN J, LU X W, LIU P H. Integrated scheduling of production and delivery on a single machine with availability constraint [J]. Theoretical Computer Science, 2015, 562: 581-589.

    [2] BELMABROUK M, MARRAKCHI M. Optimal parallel scheduling for resolution a triangular system with availability constraints [C]∥Proceedings of the International Conference on Computer Systems and Applications. Piscataway, NJ, USA: IEEE, 2015: 1-7.

    [3] SALFNER F, WOLTER K. A Petri net model for service availability in redundant computing systems [C]∥Proceedings of the 2009 Winter Simulation Conference. Piscataway, NJ, USA: IEEE, 2009: 819-826.

    [4] TONG Z, LI K L, XIAO Z, et al. A Qos scheduling scheme with availability constraint in distributed systems [C]∥Proceedings of the 13th International Conference on Parallel and Distributed Computing, Applications and Technologies. Piscataway, NJ, USA: IEEE, 2012: 481-486.

    [5] QIN X, XIE T. An availability-aware task scheduling for heterogeneous systems [J]. IEEE Transactions on Computers, 2008, 57(2): 188-199.

    [6] KHOUDI A, BERRICHI A, YALAOUI F. Heuristics to maximize system availability on parallel machine scheduling problem [C]∥Proceedings of the International Symposium on Programming and Systems. Piscataway, NJ, USA: IEEE, 2015: 1-6.

    [7] ZHU M, GUO W, XIAO S L, et al. Availability-driven scheduling for real-time directed acyclic graph applications in optical grids [J]. Journal of Optical Communications and Networking, 2010, 2(7): 469-480.

    [8] 李智勇, 陳少淼, 楊波, 等. 異構(gòu)云環(huán)境多目標(biāo)Memetic優(yōu)化任務(wù)調(diào)度方法 [J]. 計(jì)算機(jī)學(xué)報(bào), 2016, 39(2): 377-390. LI Zhiyong, CHEN Shaomiao, YANG Bo, et al. Multi-object memetic algorithm for task scheduling on heterogeneous cloud [J]. Chinese Journal of Computers, 2016, 39(2): 377-390.

    [9] XIE T, QIN X. Stochastic scheduling with availability constraints in heterogeneous clusters [C]∥Proceedings of the International Conference on Cluster Computing. Piscataway, NJ, USA: IEEE, 2006: 1-10.

    [10]SETHURAMAN J, SQUILLANTE M S. Optimal stochastic scheduling in multiclass parallel queues [J]. ACM Sigmetrics Performance Evaluation Review, 1999, 27(1): 93-102.

    [11]TAN M, SIEGEL H J, ANTONIO J K, et al. Minimizing the application execution time through scheduling of subtasks and communication traffic in a heterogeneous computing system [J]. IEEE Transactions on Parallel and Distributed Systems, 1997, 8(8): 857-871.

    [12]SONG S S, HWANG K, KWOK Y K. Risk-resilient heuristics and genetic algorithms for security-assured grid job scheduling [J]. IEEE Transactions on Computers, 2006, 55(6): 703-719.

    猜你喜歡
    處理機(jī)任務(wù)調(diào)度可用性
    基于文獻(xiàn)計(jì)量學(xué)的界面設(shè)計(jì)可用性中外對(duì)比研究
    包裝工程(2023年24期)2023-12-27 09:18:26
    基于輻射傳輸模型的GOCI晨昏時(shí)段數(shù)據(jù)的可用性分析
    污泥干化處理機(jī)翻拋軸的模態(tài)分析
    一種改進(jìn)的wRR獨(dú)立任務(wù)調(diào)度算法研究
    基于改進(jìn)NSGA-Ⅱ算法的協(xié)同制造任務(wù)調(diào)度研究
    基于時(shí)間負(fù)載均衡蟻群算法的云任務(wù)調(diào)度優(yōu)化
    基于VPX標(biāo)準(zhǔn)的二次監(jiān)視雷達(dá)通用處理機(jī)設(shè)計(jì)
    電子制作(2016年1期)2016-11-07 08:42:47
    能卷鉛筆的廢紙?zhí)幚頇C(jī)
    云計(jì)算環(huán)境中任務(wù)調(diào)度策略
    云計(jì)算中基于進(jìn)化算法的任務(wù)調(diào)度策略
    精品人妻在线不人妻| 一区二区三区精品91| 亚洲人成电影观看| 给我免费播放毛片高清在线观看| 少妇粗大呻吟视频| 国产精品爽爽va在线观看网站 | 9色porny在线观看| 9色porny在线观看| 亚洲精品久久成人aⅴ小说| 这个男人来自地球电影免费观看| 女人高潮潮喷娇喘18禁视频| 亚洲av五月六月丁香网| 欧洲精品卡2卡3卡4卡5卡区| 国产精品,欧美在线| 亚洲五月色婷婷综合| 婷婷丁香在线五月| 国产精品亚洲一级av第二区| 99在线人妻在线中文字幕| 大码成人一级视频| 999久久久精品免费观看国产| 18禁美女被吸乳视频| 中文字幕av电影在线播放| 一二三四社区在线视频社区8| 操美女的视频在线观看| 乱人伦中国视频| 国产精品一区二区三区四区久久 | 两个人视频免费观看高清| 精品人妻1区二区| 美国免费a级毛片| 非洲黑人性xxxx精品又粗又长| 在线国产一区二区在线| 两个人免费观看高清视频| bbb黄色大片| 国产精品一区二区三区四区久久 | 一进一出抽搐gif免费好疼| 精品久久久久久,| 两个人免费观看高清视频| 国产精品,欧美在线| 美女高潮到喷水免费观看| 亚洲va日本ⅴa欧美va伊人久久| 久久人妻熟女aⅴ| 国产亚洲精品综合一区在线观看 | 精品国产美女av久久久久小说| 丰满人妻熟妇乱又伦精品不卡| 长腿黑丝高跟| 精品久久久久久久久久免费视频| 香蕉丝袜av| 免费av毛片视频| 亚洲欧美日韩无卡精品| 国产精品99久久99久久久不卡| 十分钟在线观看高清视频www| 一级,二级,三级黄色视频| 精品不卡国产一区二区三区| 久久久久久亚洲精品国产蜜桃av| 97人妻精品一区二区三区麻豆 | 日韩一卡2卡3卡4卡2021年| 国产精品久久电影中文字幕| 一级毛片精品| 婷婷丁香在线五月| 在线天堂中文资源库| 亚洲精品国产色婷婷电影| 亚洲一码二码三码区别大吗| 女同久久另类99精品国产91| 一级片免费观看大全| 亚洲电影在线观看av| 亚洲人成伊人成综合网2020| 久久香蕉国产精品| 岛国视频午夜一区免费看| 婷婷精品国产亚洲av在线| 天天一区二区日本电影三级 | 自拍欧美九色日韩亚洲蝌蚪91| 长腿黑丝高跟| 女人被狂操c到高潮| 乱人伦中国视频| 亚洲av五月六月丁香网| 国产高清视频在线播放一区| 国产一级毛片七仙女欲春2 | 黄频高清免费视频| 欧美精品亚洲一区二区| 国产精品爽爽va在线观看网站 | 性色av乱码一区二区三区2| 亚洲视频免费观看视频| 成年版毛片免费区| 黑人操中国人逼视频| 熟女少妇亚洲综合色aaa.| 欧美在线一区亚洲| 午夜福利18| 国产成人精品久久二区二区免费| av在线播放免费不卡| 午夜久久久久精精品| 亚洲精品粉嫩美女一区| 久久久久久久午夜电影| 老鸭窝网址在线观看| 久久久精品国产亚洲av高清涩受| 老司机午夜福利在线观看视频| 黑人欧美特级aaaaaa片| 久久 成人 亚洲| 久久久久国内视频| 国产精品久久久人人做人人爽| 久久国产精品人妻蜜桃| 青草久久国产| 日韩欧美一区视频在线观看| 国产人伦9x9x在线观看| 久久久精品欧美日韩精品| 亚洲国产毛片av蜜桃av| 国产精品电影一区二区三区| 一级毛片高清免费大全| 黄色a级毛片大全视频| 久久久久精品国产欧美久久久| 色播亚洲综合网| 日韩av在线大香蕉| 亚洲一区二区三区色噜噜| 中文字幕色久视频| 免费高清在线观看日韩| 身体一侧抽搐| 久热爱精品视频在线9| 日本一区二区免费在线视频| 51午夜福利影视在线观看| 国产精品久久久av美女十八| 久久人妻av系列| 18禁裸乳无遮挡免费网站照片 | 99在线视频只有这里精品首页| 亚洲国产毛片av蜜桃av| 亚洲精品av麻豆狂野| 成人18禁在线播放| 日本三级黄在线观看| www.熟女人妻精品国产| 久久久国产成人精品二区| 在线观看免费日韩欧美大片| 女生性感内裤真人,穿戴方法视频| 亚洲av成人不卡在线观看播放网| 法律面前人人平等表现在哪些方面| 婷婷六月久久综合丁香| 97人妻天天添夜夜摸| 亚洲欧美精品综合一区二区三区| 欧美日韩黄片免| 色在线成人网| 欧美+亚洲+日韩+国产| 色播在线永久视频| 99在线视频只有这里精品首页| 88av欧美| 国产午夜福利久久久久久| 最新美女视频免费是黄的| 一进一出抽搐动态| 一夜夜www| 国产私拍福利视频在线观看| 亚洲国产看品久久| 成年版毛片免费区| 亚洲专区字幕在线| 丝袜在线中文字幕| www日本在线高清视频| 国产精品 欧美亚洲| 久久精品国产亚洲av香蕉五月| 日本撒尿小便嘘嘘汇集6| 国产亚洲av嫩草精品影院| 熟女少妇亚洲综合色aaa.| 亚洲国产日韩欧美精品在线观看 | 亚洲aⅴ乱码一区二区在线播放 | 国产av精品麻豆| 少妇熟女aⅴ在线视频| 亚洲免费av在线视频| 一夜夜www| 欧美黑人精品巨大| 国产亚洲av高清不卡| 99久久精品国产亚洲精品| 在线永久观看黄色视频| 国产高清激情床上av| 午夜免费成人在线视频| 女人爽到高潮嗷嗷叫在线视频| 久久草成人影院| 99久久综合精品五月天人人| 精品国产一区二区久久| 俄罗斯特黄特色一大片| 无遮挡黄片免费观看| 色播在线永久视频| √禁漫天堂资源中文www| 人人妻人人爽人人添夜夜欢视频| 动漫黄色视频在线观看| 亚洲精品av麻豆狂野| 99精品久久久久人妻精品| 国产精品久久久久久人妻精品电影| 亚洲国产精品sss在线观看| 91九色精品人成在线观看| 校园春色视频在线观看| 99香蕉大伊视频| 亚洲精品美女久久av网站| 亚洲精品在线美女| 亚洲电影在线观看av| 女人被躁到高潮嗷嗷叫费观| 国产成人精品久久二区二区免费| 国产av又大| 精品久久久久久成人av| 又黄又爽又免费观看的视频| 国产亚洲精品第一综合不卡| 天天添夜夜摸| 国产成人一区二区三区免费视频网站| 国产精品 欧美亚洲| 国产精品国产高清国产av| 国产真人三级小视频在线观看| 亚洲第一欧美日韩一区二区三区| 人人妻人人爽人人添夜夜欢视频| 亚洲专区中文字幕在线| 午夜福利一区二区在线看| 一级片免费观看大全| 在线av久久热| 韩国av一区二区三区四区| 99国产极品粉嫩在线观看| 中文字幕人成人乱码亚洲影| 亚洲电影在线观看av| 亚洲中文日韩欧美视频| 法律面前人人平等表现在哪些方面| 国产精品av久久久久免费| 天堂动漫精品| 欧美亚洲日本最大视频资源| 日本在线视频免费播放| 亚洲第一电影网av| 国产aⅴ精品一区二区三区波| 久9热在线精品视频| 美女高潮喷水抽搐中文字幕| 丝袜美腿诱惑在线| 亚洲七黄色美女视频| 国产伦人伦偷精品视频| 88av欧美| 久久久国产欧美日韩av| 人妻丰满熟妇av一区二区三区| 波多野结衣一区麻豆| 黄色片一级片一级黄色片| 亚洲精品av麻豆狂野| 色哟哟哟哟哟哟| 一二三四社区在线视频社区8| 真人一进一出gif抽搐免费| 精品国内亚洲2022精品成人| 黑人巨大精品欧美一区二区蜜桃| 亚洲精品粉嫩美女一区| 免费在线观看亚洲国产| www国产在线视频色| 亚洲成a人片在线一区二区| 操出白浆在线播放| 久久久久九九精品影院| 国产精品 国内视频| 午夜福利免费观看在线| 国产又色又爽无遮挡免费看| 波多野结衣av一区二区av| 一二三四在线观看免费中文在| 波多野结衣巨乳人妻| 91精品国产国语对白视频| 91老司机精品| 日日爽夜夜爽网站| 好看av亚洲va欧美ⅴa在| 国产精品一区二区免费欧美| 午夜久久久久精精品| 国产亚洲欧美98| 人人妻人人澡人人看| tocl精华| 一进一出抽搐动态| 丝袜人妻中文字幕| 88av欧美| 波多野结衣一区麻豆| 日日爽夜夜爽网站| 国产精品久久久久久亚洲av鲁大| 天天添夜夜摸| 亚洲男人的天堂狠狠| 激情视频va一区二区三区| 长腿黑丝高跟| 国产区一区二久久| 国产亚洲欧美精品永久| 国产精品秋霞免费鲁丝片| 欧美激情高清一区二区三区| 久热这里只有精品99| 国产野战对白在线观看| www.自偷自拍.com| 久久亚洲精品不卡| 免费高清在线观看日韩| av有码第一页| 99在线人妻在线中文字幕| 一区二区三区精品91| 18禁黄网站禁片午夜丰满| www.精华液| 高清在线国产一区| 天堂影院成人在线观看| 午夜老司机福利片| 免费看十八禁软件| 日本 av在线| 午夜福利免费观看在线| 免费搜索国产男女视频| 99久久精品国产亚洲精品| 淫妇啪啪啪对白视频| 欧美一区二区精品小视频在线| 超碰成人久久| 欧美成人免费av一区二区三区| 男女下面插进去视频免费观看| 久久精品国产清高在天天线| 91字幕亚洲| 窝窝影院91人妻| 国产激情久久老熟女| 制服丝袜大香蕉在线| 欧美激情 高清一区二区三区| 99国产极品粉嫩在线观看| 日韩精品青青久久久久久| 一区二区三区国产精品乱码| 搡老熟女国产l中国老女人| 夜夜躁狠狠躁天天躁| 久久久久精品国产欧美久久久| 三级毛片av免费| 视频在线观看一区二区三区| 亚洲一卡2卡3卡4卡5卡精品中文| 多毛熟女@视频| 看片在线看免费视频| 丁香欧美五月| 日本a在线网址| 亚洲精品国产色婷婷电影| 成人精品一区二区免费| 国产亚洲精品一区二区www| 国产精品久久视频播放| 日本a在线网址| av视频在线观看入口| 亚洲av熟女| 精品一品国产午夜福利视频| 国产精品1区2区在线观看.| 亚洲国产日韩欧美精品在线观看 | 可以免费在线观看a视频的电影网站| 国产不卡一卡二| 亚洲自偷自拍图片 自拍| 在线观看免费日韩欧美大片| 久久人妻av系列| 久久天躁狠狠躁夜夜2o2o| 视频在线观看一区二区三区| 日本欧美视频一区| av在线播放免费不卡| 琪琪午夜伦伦电影理论片6080| 日韩高清综合在线| 99riav亚洲国产免费| 成年人黄色毛片网站| 国产精品九九99| 老司机靠b影院| 国产精品综合久久久久久久免费 | 亚洲第一电影网av| 国产99久久九九免费精品| 黄色毛片三级朝国网站| 制服人妻中文乱码| 久久国产精品人妻蜜桃| 亚洲男人的天堂狠狠| 久久久久久久久免费视频了| 欧美乱色亚洲激情| 日韩免费av在线播放| 老司机靠b影院| 国产精品综合久久久久久久免费 | 国产成人av激情在线播放| 亚洲av片天天在线观看| netflix在线观看网站| 少妇熟女aⅴ在线视频| 9色porny在线观看| 欧美黄色淫秽网站| 十分钟在线观看高清视频www| 一卡2卡三卡四卡精品乱码亚洲| 18禁黄网站禁片午夜丰满| 欧美丝袜亚洲另类 | 搡老妇女老女人老熟妇| 美女大奶头视频| 国产精品亚洲一级av第二区| 亚洲国产看品久久| 国产真人三级小视频在线观看| 久久精品aⅴ一区二区三区四区| 国产av一区二区精品久久| 人人妻人人爽人人添夜夜欢视频| 国产成年人精品一区二区| 一个人免费在线观看的高清视频| 一二三四社区在线视频社区8| 丁香欧美五月| 啦啦啦 在线观看视频| 午夜精品久久久久久毛片777| x7x7x7水蜜桃| 中文字幕最新亚洲高清| 在线国产一区二区在线| 很黄的视频免费| 在线播放国产精品三级| 侵犯人妻中文字幕一二三四区| 国产精品亚洲一级av第二区| 男女午夜视频在线观看| 午夜影院日韩av| 国产三级黄色录像| 一级片免费观看大全| 欧美日韩一级在线毛片| 免费一级毛片在线播放高清视频 | 亚洲 国产 在线| 一级a爱片免费观看的视频| 国产高清有码在线观看视频 | 日韩欧美一区二区三区在线观看| 国产三级黄色录像| 中文字幕人妻丝袜一区二区| 亚洲九九香蕉| 成人三级做爰电影| 一级毛片女人18水好多| 亚洲最大成人中文| 一a级毛片在线观看| 久久精品国产清高在天天线| 极品人妻少妇av视频| 人人澡人人妻人| 欧美乱色亚洲激情| 亚洲成人精品中文字幕电影| 国产伦人伦偷精品视频| 高潮久久久久久久久久久不卡| 国产亚洲av高清不卡| 国产蜜桃级精品一区二区三区| 亚洲五月婷婷丁香| 啦啦啦观看免费观看视频高清 | a在线观看视频网站| 国产精品野战在线观看| 99国产精品免费福利视频| 免费看十八禁软件| 美女扒开内裤让男人捅视频| 一夜夜www| 国产区一区二久久| 亚洲自偷自拍图片 自拍| 久久久久久国产a免费观看| 亚洲人成伊人成综合网2020| 夜夜看夜夜爽夜夜摸| 国产黄a三级三级三级人| 亚洲avbb在线观看| 久久久久国产精品人妻aⅴ院| 亚洲国产精品999在线| 很黄的视频免费| 欧美不卡视频在线免费观看 | 亚洲伊人色综图| 欧美午夜高清在线| 亚洲第一av免费看| 久久久久久免费高清国产稀缺| 久久国产乱子伦精品免费另类| 亚洲精品中文字幕一二三四区| 首页视频小说图片口味搜索| 熟妇人妻久久中文字幕3abv| 久久香蕉国产精品| 成人三级做爰电影| 他把我摸到了高潮在线观看| 欧美一级毛片孕妇| 国产精品,欧美在线| 欧美另类亚洲清纯唯美| 在线免费观看的www视频| 很黄的视频免费| 日本欧美视频一区| 老司机午夜福利在线观看视频| 欧美亚洲日本最大视频资源| 国产精品美女特级片免费视频播放器 | 国产精品野战在线观看| 国产av精品麻豆| www.熟女人妻精品国产| 日韩三级视频一区二区三区| 韩国av一区二区三区四区| 色综合站精品国产| 久久久久国产精品人妻aⅴ院| 啦啦啦 在线观看视频| 夜夜躁狠狠躁天天躁| 在线观看免费视频网站a站| 亚洲国产中文字幕在线视频| av中文乱码字幕在线| 在线av久久热| 97人妻天天添夜夜摸| 性色av乱码一区二区三区2| 久久久久久久久中文| а√天堂www在线а√下载| www.熟女人妻精品国产| 国产一区二区激情短视频| 又黄又粗又硬又大视频| 女生性感内裤真人,穿戴方法视频| 国产精品一区二区在线不卡| 波多野结衣av一区二区av| 国产亚洲欧美精品永久| 97碰自拍视频| 嫁个100分男人电影在线观看| 色婷婷久久久亚洲欧美| 午夜免费激情av| 亚洲国产欧美网| 最近最新中文字幕大全免费视频| 曰老女人黄片| 免费女性裸体啪啪无遮挡网站| 两性午夜刺激爽爽歪歪视频在线观看 | 日本vs欧美在线观看视频| 国产精品国产高清国产av| 亚洲七黄色美女视频| 亚洲三区欧美一区| 丝袜人妻中文字幕| 身体一侧抽搐| 99久久精品国产亚洲精品| 老司机靠b影院| 亚洲一区高清亚洲精品| 国产精品98久久久久久宅男小说| 欧美乱妇无乱码| 久久人人97超碰香蕉20202| 十八禁人妻一区二区| 国产精品综合久久久久久久免费 | 久久青草综合色| 在线观看一区二区三区| 人妻丰满熟妇av一区二区三区| 亚洲全国av大片| 成熟少妇高潮喷水视频| 99精品欧美一区二区三区四区| 欧美日韩亚洲国产一区二区在线观看| 一级片免费观看大全| 午夜激情av网站| 一级,二级,三级黄色视频| 超碰成人久久| 香蕉国产在线看| 国产精品一区二区精品视频观看| 亚洲五月婷婷丁香| 国产乱人伦免费视频| 国产av又大| 欧美av亚洲av综合av国产av| 成年女人毛片免费观看观看9| 日韩欧美一区二区三区在线观看| 亚洲中文字幕一区二区三区有码在线看 | 一进一出抽搐gif免费好疼| 久久精品成人免费网站| 久久人人97超碰香蕉20202| 精品一区二区三区四区五区乱码| www.自偷自拍.com| 色尼玛亚洲综合影院| 97人妻精品一区二区三区麻豆 | 18禁黄网站禁片午夜丰满| 变态另类成人亚洲欧美熟女 | 一本大道久久a久久精品| 久久久水蜜桃国产精品网| 搡老熟女国产l中国老女人| 91成年电影在线观看| 亚洲欧美精品综合一区二区三区| 日韩视频一区二区在线观看| 国产视频一区二区在线看| 性少妇av在线| 亚洲精品一区av在线观看| 久久亚洲真实| 91大片在线观看| 欧美老熟妇乱子伦牲交| 国产伦一二天堂av在线观看| 国产精品爽爽va在线观看网站 | 啦啦啦韩国在线观看视频| 免费女性裸体啪啪无遮挡网站| 日日摸夜夜添夜夜添小说| 国产精品久久久久久人妻精品电影| 免费观看精品视频网站| 日本a在线网址| 黑人巨大精品欧美一区二区mp4| 亚洲国产欧美一区二区综合| 国产成人欧美| 亚洲成av人片免费观看| 美女免费视频网站| 两个人看的免费小视频| 色综合亚洲欧美另类图片| 黑人操中国人逼视频| 国产成人精品在线电影| 又黄又爽又免费观看的视频| 黄片大片在线免费观看| 亚洲成人久久性| 美女扒开内裤让男人捅视频| 午夜福利欧美成人| 精品久久久久久久人妻蜜臀av | 一本久久中文字幕| 国产精品影院久久| 国产成人一区二区三区免费视频网站| 国产xxxxx性猛交| 国产成人影院久久av| 久久人人精品亚洲av| 级片在线观看| 男女床上黄色一级片免费看| 免费在线观看视频国产中文字幕亚洲| 日本 欧美在线| 精品少妇一区二区三区视频日本电影| 真人一进一出gif抽搐免费| 午夜精品国产一区二区电影| 美女扒开内裤让男人捅视频| av视频免费观看在线观看| 精品久久久久久久人妻蜜臀av | 国产亚洲欧美98| 欧美黄色片欧美黄色片| 久久人妻av系列| 日本a在线网址| 12—13女人毛片做爰片一| 亚洲欧美激情综合另类| 99精品欧美一区二区三区四区| 在线国产一区二区在线| 制服丝袜大香蕉在线| 少妇粗大呻吟视频| 国产av又大| 一区福利在线观看| 热re99久久国产66热| av有码第一页| av免费在线观看网站| 国内精品久久久久久久电影| 亚洲国产精品999在线| 成人欧美大片| 久久精品成人免费网站| 欧美亚洲日本最大视频资源| 婷婷丁香在线五月| 国产一区二区激情短视频| 无限看片的www在线观看| 别揉我奶头~嗯~啊~动态视频| 久久国产乱子伦精品免费另类| 色综合欧美亚洲国产小说| 久久香蕉国产精品| 韩国av一区二区三区四区| 99riav亚洲国产免费| 一级a爱片免费观看的视频| 色综合欧美亚洲国产小说| 午夜福利免费观看在线| 动漫黄色视频在线观看| 久久九九热精品免费| 午夜福利欧美成人| 黑人操中国人逼视频| 免费观看人在逋| 每晚都被弄得嗷嗷叫到高潮| 国产片内射在线| 1024香蕉在线观看| 岛国在线观看网站| 很黄的视频免费| 波多野结衣av一区二区av| 看片在线看免费视频| 国产精华一区二区三区|