• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    一種使用改進(jìn)預(yù)測成本矩陣任務(wù)優(yōu)先排序的異構(gòu)計(jì)算系統(tǒng)列表調(diào)度算法

    2023-02-18 08:36:36宋宇鯤楊國偉張多利
    電子與信息學(xué)報(bào) 2023年1期
    關(guān)鍵詞:列表復(fù)雜度排序

    姚 宇 宋宇鯤 楊國偉 黃 英 張多利

    (合肥工業(yè)大學(xué)微電子學(xué)院 合肥 230601)

    1 引言

    異構(gòu)計(jì)算系統(tǒng)可以將應(yīng)用程序分配在多個(gè)處理器上執(zhí)行,并且通過處理器間的互聯(lián)網(wǎng)絡(luò)進(jìn)行數(shù)據(jù)通信,應(yīng)用程序在系統(tǒng)上的并行計(jì)算大幅提高了執(zhí)行效率。異構(gòu)計(jì)算系統(tǒng)通常由不同的處理器以及連接各個(gè)處理器的網(wǎng)絡(luò)組成。不同任務(wù)在相同處理器上的執(zhí)行時(shí)間一般是不同的,而且,由于處理器的異構(gòu)性,相同任務(wù)在不同處理器上的執(zhí)行時(shí)間一般也是不同的。

    應(yīng)用程序表示為有向無環(huán)圖(Directed Acyclic Graph, DAG)[1],描述了應(yīng)用程序的屬性,例如每個(gè)任務(wù)在不同處理器上的執(zhí)行時(shí)間,任務(wù)之間的數(shù)據(jù)依賴關(guān)系以及通信時(shí)間。

    異構(gòu)列表調(diào)度的目標(biāo)是將應(yīng)用程序分配到異構(gòu)計(jì)算系統(tǒng)的處理器上。在這個(gè)過程中,需要考慮不同任務(wù)在不同處理器上執(zhí)行時(shí)間的不同以及通信時(shí)間不同的問題。該問題是一個(gè)非確定多項(xiàng)式時(shí)間(Nondeterministic Polynomial-time, NP)完全問題[2-4]。在多項(xiàng)式時(shí)間內(nèi)獲得最調(diào)度方案幾乎是不可能的,于是如何在多項(xiàng)式時(shí)間內(nèi)產(chǎn)生較好的調(diào)度方案,成為相關(guān)工作的熱點(diǎn)研究內(nèi)容。

    對于此問題,很多相關(guān)工作采用了啟發(fā)式算法。這些啟發(fā)式算法主要分為3類,包括基于聚類的啟發(fā)式算法[5-7]、基于復(fù)制的啟發(fā)式算法[8-10]和基于列表的啟發(fā)式算法[11-22]。

    相關(guān)工作中的基于啟發(fā)式的列表調(diào)度算法將問題求解的搜索空間縮小,在降低了時(shí)間復(fù)雜度的基礎(chǔ)上獲得較好的解。為了下文的說明,現(xiàn)令DAG中任務(wù)數(shù)量為 tn,異構(gòu)計(jì)算系統(tǒng)中處理器數(shù)量為p n。

    異構(gòu)最早完成時(shí)間(Heterogeneous Earliest Finish Time, HEFT)[11]算法具有O(pn·tn2)的時(shí)間復(fù)雜度。它在任務(wù)優(yōu)先級排序階段使用 r ankμ作為依據(jù),該值表示了一個(gè)任務(wù)到出口任務(wù)的最長路徑。在處理器選擇階段,它為任務(wù)選擇獲得最早完成時(shí)(Earliest Finish Time, EFT)的處理器。但是其只根據(jù)單個(gè)任務(wù)的計(jì)算屬性來選擇處理器,忽略了對后繼任務(wù)帶來的不利后果。

    前瞻(lookahead)[12]算法針對HEFT的缺點(diǎn)進(jìn)行了改進(jìn)。在任務(wù)優(yōu)先級排序階段,前瞻使用rankμ作為排序依據(jù)。在處理器選擇階段,它會(huì)對當(dāng)前任務(wù)的后繼任務(wù)的處理器選擇進(jìn)行預(yù)測,并傾向于選擇能使當(dāng)前任務(wù)的所有后繼任務(wù)在所有處理器的最大EFT最小化的處理器。但是,前瞻算法的時(shí)間復(fù)雜度增加到O(pn3·tn4)。

    預(yù)測最早完成時(shí)間(Predict Earliest Finish Time, PEFT)[13]算法通過計(jì)算樂觀成本表(Optimistic Cost Table, O CT)作為算法中抉擇的關(guān)鍵依據(jù),在保持O(pn·tn2)的復(fù)雜度的基礎(chǔ)上,適用了前瞻特性,并且相比HEFT有較大的性能提升。用于任務(wù)優(yōu)先級排序階段的 r ankOCT沒有考慮當(dāng)前任務(wù)在處理上的計(jì)算消耗成本,導(dǎo)致優(yōu)先級列表的預(yù)測準(zhǔn)確性不佳。

    預(yù)測優(yōu)先任務(wù)調(diào)度(Predict Priority Task Scheduling, PPTS)[14]算法使用預(yù)測成本矩陣(Predict Cost Matrix, P CM ) 替代O CT,同時(shí)考慮了當(dāng)前任務(wù)和直接后繼任務(wù)的計(jì)算消耗,能夠更好地預(yù)測任務(wù)的執(zhí)行,保持了O(pn·tn2)的時(shí)間復(fù)雜度,性能比PEFT有進(jìn)一步的提升。但是,由于P CM中考慮的是當(dāng)前任務(wù)在直接后繼任務(wù)處理器上的計(jì)算消耗,做出的預(yù)測偏向于產(chǎn)生相鄰任務(wù)在同一處理器上執(zhí)行的局部最優(yōu)解。而且,PPTS在處理器選擇階段使用P CM也會(huì)導(dǎo)致同樣的問題。PPTS的作者又提出了增強(qiáng)的預(yù)測優(yōu)先任務(wù)調(diào)度(Improved Predict Priority Task Scheduling, IPPTS)[22],通過在優(yōu)先級排序階段考慮了任務(wù)的出度,在大任務(wù)數(shù)量應(yīng)用中獲得了提升,但其仍未完全解決其使用PCM所帶來的問題。

    總體來說,此類型的相關(guān)工作中,設(shè)計(jì)用于任務(wù)優(yōu)先級排序或處理器選擇的預(yù)測列表或矩陣仍有不合理之處,不能充分發(fā)揮異構(gòu)計(jì)算系統(tǒng)的性能。

    本文針對異構(gòu)列表調(diào)度問題,提出一種新的具有2次時(shí)間復(fù)雜度的調(diào)度算法,稱為改進(jìn)的預(yù)測優(yōu)先任務(wù)和樂觀處理器選擇調(diào)度(Improved Predict Priority and Optimistic processor Selection Scheduling, IPPOSS)。IPPOSS優(yōu)于PPTS和PEFT并且保持2次復(fù)雜度。該算法是在PPTS和PEFT基礎(chǔ)上的改進(jìn),同樣具有任務(wù)優(yōu)先級排序和處理器選擇兩個(gè)階段,并且具有前瞻的特性。與PPTS和PEFT相比,IPPOSS計(jì)算改進(jìn)預(yù)測成本矩陣(Improved Predict Cost Matrix, IPCM),該矩陣中的每個(gè)元素表示為特定任務(wù)選擇特定處理器時(shí)的執(zhí)行成本的預(yù)計(jì)值。然后計(jì)算任務(wù)優(yōu)先級rankIPCM,也就是任務(wù)在不同處理器上的I PCM值的均值,然后使用r ankIPCM對任務(wù)進(jìn)行排序。在處理器選擇階段,基于實(shí)驗(yàn)結(jié)果,IPPOSS使用基于EFTOCT[13]的處理器選擇策略。但是由于任務(wù)優(yōu)先級排序階段使用了更好的方法,IPPOSS產(chǎn)生了與PEFT完全不同的處理器選擇結(jié)果。隨機(jī)生成的應(yīng)用圖和真實(shí)世界的應(yīng)用圖的實(shí)驗(yàn)結(jié)果分析表明,IPPOSS的性能優(yōu)于現(xiàn)有相關(guān)算法。

    2 調(diào)度問題模型

    調(diào)度模型用于應(yīng)用程序到計(jì)算系統(tǒng)上的調(diào)度,并且達(dá)到一定的性能指標(biāo)。一般來說任務(wù)調(diào)度的主要目的是獲得最小調(diào)度長度,也稱為m akespan。

    調(diào)度模型中的應(yīng)用描述為一種 D AG=(T,E),如圖1和表1所示。T是節(jié)點(diǎn)的集合,任意ti ∈T表示DAG中的一個(gè)任務(wù)。E是有向邊e的集合,任意ei,j ∈E表示DAG中的一次通信,也就是任務(wù)ti到

    表1 計(jì)算消耗

    圖1 具有10 任務(wù)和3 處理器的任務(wù)以及計(jì)算消耗

    任意通信ei,j在計(jì)算系統(tǒng)網(wǎng)絡(luò)中傳輸所消耗的時(shí)間表示為ci,j。 由于ci,j必 須要在執(zhí)行ti和tj的處理器被確定的情況下才能計(jì)算出,而靜態(tài)列表調(diào)度以通信消耗作為輸入?yún)?shù),必須提前預(yù)知該值,所以一般的做法是,使用平均通信時(shí)間ci,j來 表示ei,j的時(shí)間消耗。當(dāng)ti和tj被分配在不同處理器上時(shí),ci,j的計(jì)算方法為

    其中,l表示所有處理器的平均延遲,也就是平均傳輸啟動(dòng)時(shí)間。b表示所有處理器之間的平均帶寬。Di,j表示在本次通信中ti需要傳輸?shù)絫j的數(shù)據(jù)量。ci,j表示了平均傳輸啟動(dòng)時(shí)間和特定量的數(shù)據(jù)在傳輸開始后到傳輸結(jié)束所消耗時(shí)間的和。如果ti和tj被分配在同一個(gè)處理器上,它們之間不需要通過網(wǎng)絡(luò)進(jìn)行數(shù)據(jù)傳輸,則ci,j為0。tj的通信。通信ei,j也 表示了任務(wù)ti和tj間的數(shù)據(jù)依賴關(guān)系。任務(wù)ti被稱為tj的直接前驅(qū)任務(wù),任務(wù)tj被稱為ti的直接后繼任務(wù)。通信消耗標(biāo)注于圖1的對應(yīng)邊上,計(jì)算消耗標(biāo)注于表1,因系統(tǒng)為異構(gòu)架構(gòu),任務(wù)在不同的處理器上具有不同計(jì)算消耗。

    調(diào)度模型中的計(jì)算系統(tǒng)包含處理器的集合P。本文的調(diào)度模型中,應(yīng)用程序在計(jì)算系統(tǒng)上的執(zhí)行過程進(jìn)行了一些假設(shè):1個(gè)任務(wù)指令必須在計(jì)算系統(tǒng)中的1個(gè)處理器上執(zhí)行;多個(gè)處理器可以同時(shí)執(zhí)行不同任務(wù);任務(wù)在處理器上的執(zhí)行不會(huì)發(fā)生爭用;任意兩個(gè)處理器之間都通過網(wǎng)絡(luò)連接并且能進(jìn)行數(shù)據(jù)傳輸;任意兩次通信之間不會(huì)發(fā)生干擾。

    任務(wù)ti在 處理器pm上 的計(jì)算時(shí)間表示為W(ti,pm)。它的行數(shù)是DAG中任務(wù)數(shù)量 tn,列數(shù)是計(jì)算系統(tǒng)中處理器數(shù)量 pn。因?yàn)楸疚挠懻摰氖钱悩?gòu)計(jì)算系統(tǒng),所以對于相同的ti以及不同的pm,W(ti,pm)也具有不同的值。平均計(jì)算時(shí)間表示了不指定處理器的情況下,執(zhí)行任務(wù)ti預(yù)計(jì)所花費(fèi)時(shí)間,表示為

    3 IPPOSS算法

    IPPOSS包含兩個(gè)階段,分別為任務(wù)優(yōu)先級排序階段和處理器選擇階段。改進(jìn)預(yù)測成本矩陣被用于任務(wù)優(yōu)先級排序階段,本節(jié)首先介紹它的定義和計(jì)算方法。

    3.1 改進(jìn)預(yù)測成本矩陣

    IPPOSS的任務(wù)優(yōu)先級排序階段基于改進(jìn)預(yù)測成本矩陣,是對PPTS[14]中的P CM的改進(jìn)。每個(gè)元素IPCM(ti,pm)代 表任務(wù)ti選 擇在pm上執(zhí)行時(shí),任務(wù)ti到 出口任務(wù)的最短路徑的預(yù)計(jì)最大值。IPCM中的所有元素通過遞歸的過程計(jì)算,計(jì)算過程開始于出口任務(wù),并向上遍歷所有的任務(wù),結(jié)束于入口任務(wù)。I PCM(ti,pm)的計(jì)算公式為

    其中,W(ti,pm)表 示ti在pm上執(zhí)行的異構(gòu)運(yùn)算時(shí)間。 succ(ti) 表示ti的所有直接后繼任務(wù)的集合。P表示所有處理器的集合。ci,j表 示ti到tj的平均通信時(shí)間。當(dāng)ti和tj在同一個(gè)處理器上運(yùn)行時(shí),也就是pm=pn時(shí),ci,j=0。W(tj,pn)表示直接后繼任務(wù)tj在pn上 執(zhí)行的異構(gòu)運(yùn)算時(shí)間。當(dāng)ti為texit,也就是出口任務(wù)時(shí),有 succ(ti)=? ,IPCM(ti,pm)=W(texit,pm) 。IPCM(ti,pm)不僅考慮了直接后繼任務(wù)tj在可以獲取最小計(jì)算、通信時(shí)間之和的處理器上執(zhí)行的時(shí)間消耗,而且考慮了當(dāng)前任務(wù)ti在選擇的處理器pm上 的時(shí)間消耗,所以,I PCM(ti,pm)表示了ti選 擇在pm上 執(zhí)行時(shí),任務(wù)ti到出口任務(wù)的最短路徑的預(yù)計(jì)最大值。而PPTS中的P CM沒用使用準(zhǔn)確的當(dāng)前任務(wù)計(jì)算消耗,而是使用了一種近似表示,也就是當(dāng)前任務(wù)在其直接后繼任務(wù)選擇的處理器上的計(jì)算消耗。這導(dǎo)致不能準(zhǔn)確地進(jìn)行調(diào)度預(yù)測,從而限制了調(diào)度性能。

    3.2 任務(wù)優(yōu)先級排序階段

    IPPOSS的任務(wù)優(yōu)先級排序階段根據(jù)rankIPCM(ti)的元素來進(jìn)行,具有較大的r ankIPCM(ti)的 任務(wù)ti被置于任務(wù)優(yōu)先級列表的前面。r ankIPCM(ti)通過任務(wù)ti在 每個(gè)處理器上的I PCM的平均值求得,定義為

    rankIPCM是I PCM 的平均值,所以它能夠反映任務(wù)在調(diào)度列表中的重要程度。對于圖1的DAG1,HEFT, PEFT, PPTS和IPPOSS算法得到了完全不同的任務(wù)優(yōu)先級排序列表。表2給出DAG1的IPCM的所有元素,由表3可以確定4種算法的任務(wù)優(yōu)先級列表??梢钥闯?,r ankμ與r ankOCT對于T1之后優(yōu)先進(jìn)行的任務(wù)做出了相同的選擇T2,而 rankPCM與rankIPCM則選擇T1,T3和T6作為開始的3個(gè)任務(wù)。rankIPCM與所有3種算法最顯著的不同是,將T7排在了T4和T5的前面,而且從圖1可以看出,這種優(yōu)先級排序是一種“越級”排序,因?yàn)門4和T5是入口任務(wù)T1的直接后繼,而T7則不是。對于DAG1,使用r ankIPCM相比其他3種算法的r ank,更具有在全局范圍內(nèi)調(diào)整任務(wù)優(yōu)先級列表順序的能力,而不是按照DAG1中每個(gè)任務(wù)的分級僅在局部進(jìn)行優(yōu)先級順序的調(diào)整,這使得IPPOSS可以獲得更好的調(diào)度性能。

    表2 圖 1 中 DAG1 的 IPCM

    表3 圖 1 中 DAG1 的各算法任務(wù)優(yōu)先級列表

    3.3 處理器選擇階段

    IPPOSS的處理器選擇階段沒有使用E FTIPCM。通過隨機(jī)生成的應(yīng)用圖實(shí)驗(yàn)發(fā)現(xiàn),雖然在兩個(gè)階段中都使用I PCM,會(huì)獲得優(yōu)于PEFT和PPTS的解,但是如果在處理器選擇階段使用E FTOCT,則會(huì)獲得更好的解。表4給出了基于 E FTIPCM的處理器選擇策略的IPPOSS與PEFT, PPTS和基于E FTOCT的處理器選擇策略的IPPOSS的調(diào)度長度率(Scheduling Length Ratio, SLR)對比,可以看出,雖然基于EFTIPCM處理器選擇策略的IPPOSS比PEFT降低了1.75%的平均S LR,并且有57.5%的樣本獲得了更低調(diào)度長度,但是相比于PPTS,該方法并沒有明顯的提升。而基于E FTOCT處理器選擇策略的IPPOSS的平均SLR進(jìn)一步降低,此外,樣本的成對調(diào)度長度對比結(jié)果也有進(jìn)一步的優(yōu)化。

    表4 不同方法的SLR對比(%)

    基于實(shí)驗(yàn)結(jié)果,IPPOSS在處理器選擇階段使用PEFT中的方法,也就是選擇具有最小E FTOCT[13]的處理器,E FTOCT的計(jì)算公式為

    一些相關(guān)工作[11,13,14]在處理器選擇階段使用了基于插入的(insertion-based)策略。它們在調(diào)度中可以通過充分利用處理器上的空閑時(shí)間槽,減少總體調(diào)度時(shí)間??紤]算法對比的公平性,本文同樣使用該策略。

    3.4 IPPOSS算法詳細(xì)描述

    IPPOSS算法的細(xì)節(jié)如算法1所示。

    算法1 IPPOSS算法

    IPPOSS首先計(jì)算I PCM, O CT( 第1行)和rankIPCM(第2行)。然后,通過查找未分配處理器且所有直接前驅(qū)任務(wù)都已經(jīng)分配處理器的任務(wù)來更新就緒列表(第3行)。接著,為就緒列表中具有最高rankIPCM(ti)的任務(wù)ti分 配處理器,以獲得最小的EFTOCT(ti,pm)(第4~10行),并更新L istready(第11行)。最后,如果更新后的就緒列表為空,則算法結(jié)束(第4、第12行)。

    圖2給出了4種算法對DAG1的調(diào)度結(jié)果。其中,PEFT的m akespan 為158 ,PPTS的makespan為156,而本文IPPOSS的m akespan為151。

    圖2 4種算法對圖1中DAG1產(chǎn)生的調(diào)度結(jié)果

    從時(shí)間復(fù)雜度上來說,相比于PEFT和PPTS,IPPOSS的復(fù)雜度并沒有提高。計(jì)算 I PCM 和OCT的時(shí)間復(fù)雜度都是O(pn·(en+tn)),處理器選擇階段的時(shí)間復(fù)雜度為O(pn·tn2)??倳r(shí)間復(fù)雜度為O(2·pn·(en+tn)+pn·tn2)。對于密集型DAG,有 e n=tn2,總時(shí)間復(fù)雜度約為O(pn·tn2)。因此,IPPOSS具有與這些算法相同的時(shí)間復(fù)雜度。

    4 實(shí)驗(yàn)結(jié)果和討論

    本節(jié)對比了IPPOSS與其他3種算法(HEFT[11],PEFT[13]和PPTS[14])的調(diào)度性能。設(shè)置了兩種應(yīng)用圖:隨機(jī)生成的應(yīng)用圖和真實(shí)世界應(yīng)用的應(yīng)用圖。通過設(shè)置對比的指標(biāo),將4種算法的性能進(jìn)行了比較。4種對比指標(biāo)分別為SLR[11]、加速比(Speedup)[15]、松弛度(Slack)[23]和更好的解發(fā)生的比例(Percentage of Occurrences of Better Solutions, POBS)[11]。

    4.1 隨機(jī)生成的應(yīng)用圖

    本節(jié)首先評估HEFT[11], PEFT[13], PPTS[14]和本文的IPPOSS算法對隨機(jī)DAG的調(diào)度性能。本文使用了一款開源的DAG生成軟件daggen[24],利用其基本參數(shù)生成實(shí)驗(yàn)所需的隨機(jī)DAG。

    實(shí)驗(yàn)中使用了以下參數(shù)的組合來生成隨機(jī)DAG:n=[10,20,30,40,50,60,70,80,90,100],表示DAG中的任務(wù)數(shù)量;c cr=[0.1,0.2,0.5,1,2,5,10],表示平均通信時(shí)間與平均計(jì)算時(shí)間的比值;β=[0.1,0.2,0.5,1,2],表示處理器速度的異構(gòu)性因子;j ump=[1,2,4],表示任務(wù)間通信跨越的最大層級數(shù)量;r egular=[0.2,0.8],表示DAG的不同級別之間任務(wù)分配的規(guī)律性; fat=[0.1,0.4,0.8],表示DAG中可能出現(xiàn)的并行執(zhí)行的任務(wù)的最大數(shù)量;density=[0.2,0.8],表示DAG中兩個(gè)相鄰層級中的任務(wù)間的依賴的數(shù)量系數(shù);p n=[4,8,16,32],表示異構(gòu)計(jì)算系統(tǒng)中處理器的數(shù)量。

    以上8個(gè)參數(shù)總共有50400種組合,對于每一種組合,隨機(jī)生成10個(gè)DAG,總數(shù)量為504000。

    圖3顯示了任務(wù)數(shù)量值為[10,20,30,40,50,60,70,80,90,100]的平均SLR、平均加速比和平均松弛度。每個(gè)數(shù)據(jù)節(jié)點(diǎn)都是50400個(gè)隨機(jī)生成DAG的實(shí)驗(yàn)結(jié)果平均值。圖3(a)表明,對于不同任務(wù)數(shù)量值,IPPOSS算法的平均SLR是4種算法中最低的。與HEFT算法相比,當(dāng)任務(wù)數(shù)量為10時(shí),IPPOSS算法的平均SLR降低最高達(dá)7.82%。圖3(b)表明,對于不同任務(wù)數(shù)量值,IPPOSS算法的平均加速比是4種算法中最高的。與PEFT算法相比,當(dāng)任務(wù)數(shù)量為50時(shí),平均加速比的提高最高達(dá)3.97%。相比其他算法,IPPOSS在任務(wù)優(yōu)先級排序階段使用IPCM 進(jìn)行預(yù)測,I PCM不僅考慮了直接后繼任務(wù)在可以獲取最小計(jì)算、通信時(shí)間之和的處理器上執(zhí)行的時(shí)間消耗,而且考慮了當(dāng)前任務(wù)在選擇的處理器上的時(shí)間消耗,因此IPPOSS進(jìn)行了更準(zhǔn)確的預(yù)測,為處理器選擇提供了更合理的優(yōu)先級列表,從而獲得了更高的平均加速比。而 I PCM的計(jì)算相比其他算法的預(yù)測表或預(yù)測矩陣并未提高時(shí)間復(fù)雜度,且算法中其他流程也未提高時(shí)間復(fù)雜度,從而在保持時(shí)間復(fù)雜度不變的基礎(chǔ)上提高了平均加速比。圖3(c)表明,對于不同任務(wù)數(shù)量值,IPPOSS算法的平均松弛度低于HEFT和PEFT算法。 相比于PPTS算法,在任務(wù)數(shù)量≤50時(shí),IPPOSS的平均松弛度與PPTS接近。在任務(wù)數(shù)量≥60時(shí),IPPOSS的平均松弛度略高于PPTS。因?yàn)镮PPOSS算法具有較為激進(jìn)性能策略,在獲得更短的調(diào)度長度和更高的加速比的同時(shí),降低了一定的穩(wěn)定性。但在任務(wù)數(shù)量≥60時(shí),IPPOSS仍比PPTS具有更高的穩(wěn)定性。

    圖3 4種算法對不同任務(wù)數(shù)量的DAG的調(diào)度結(jié)果

    圖4顯示了ccr值為[ 0.1,0.2,0.5,1,2,5,10]的平均SLR、平均加速比和平均松弛度。每個(gè)數(shù)據(jù)節(jié)點(diǎn)都是72000個(gè)隨機(jī)生成DAG的實(shí)驗(yàn)結(jié)果平均值。圖4(a)表明,對于不同ccr值,IPPOSS算法的平均S LR 是4種算法中最低的。與HEFT算法相比當(dāng)ccr為1時(shí),平均SLR的降低最高達(dá)5.96%。圖4(b)表明,對于不同ccr值,IPPOSS算法的平均加速比高于HEFT和PEFT。與PEFT算法相比,當(dāng)ccr為1時(shí),平均加速比提高最高達(dá)5.10%。相比于PPTS算法,在ccr≤0.5時(shí),IPPOSS的平均加速比高于PPTS。在ccr≥1時(shí),IPPOSS的平均加速比與PPTS相近。這是因?yàn)?,PPTS使用的P CM會(huì)導(dǎo)致鄰近任務(wù)在相同處理器上執(zhí)行的趨勢,這會(huì)在通信量較高也就是ccr較高的情況下,通過更多地避免通信來獲得較好的性能。但是,這種方法會(huì)導(dǎo)致陷入單處理器化的局部最優(yōu)解,因此只在ccr較高時(shí)獲得了與IPPOSS相近的平均加速比,而在ccr較低時(shí)獲得了比IPPOSS差的平均加速比。圖4(c)表明,對于不同ccr值,IPPOSS算法的平均松弛度低于HEFT和PEFT。雖然在ccr≥1時(shí),IPPOSS與PPTS的加速比接近,但是IPPOSS在SLR和松弛度指標(biāo)上仍然優(yōu)于PPTS,這意味著在此情況下IPPOSS比PPTS更容易獲得較短的調(diào)度長度和更好的穩(wěn)定性。

    圖4 4種算法對不同ccr的DAG的調(diào)度結(jié)果

    圖5顯示了處理器數(shù)量值為[ 4,8,16,32]的平均SLR和平均加速比。每個(gè)數(shù)據(jù)節(jié)點(diǎn)都是126000個(gè)隨機(jī)生成DAG的實(shí)驗(yàn)結(jié)果平均值。圖5表明,對于不同處理器數(shù)量,IPPOSS的平均SLR和平均加速比在大多數(shù)情況下優(yōu)于其他算法。在處理器數(shù)量為4時(shí),IPPOSS的平均SLR與PPTS相近,平均加速比略低于PPTS。原因?yàn)镻PTS的預(yù)測策略傾向于在同一處理器上執(zhí)行任務(wù),其在處理器數(shù)量較少時(shí)具有一定優(yōu)勢。圖5(a)表明,與HEFT算法相比,當(dāng)處理器數(shù)量為32時(shí),IPPOSS算法的平均SLR降低最高達(dá)6.76%。圖5(b)表明,與HEFT算法相比,當(dāng)處理器數(shù)量為32時(shí),平均加速比的提高最高達(dá)2.00%。

    圖5 4種算法對不同處理器數(shù)量的DAG的調(diào)度結(jié)果

    表5列出了IPPOSS與其他算法相比產(chǎn)生的更好、相等和更差的調(diào)度長度的百分比。IPPOSS算法分別在44.9%, 58.8%和66.7%的DAG中獲得了更短的調(diào)度長度,只在22.7%, 15.2%和23.5%的DAG中獲得了更長的調(diào)度長度。

    表5 4種算法的調(diào)度長度的成對比較(%)

    4.2 真實(shí)世界應(yīng)用的應(yīng)用圖

    除了隨機(jī)生成的應(yīng)用圖,本文還評估了HEFT[11],PEFT[13], PPTS[14]和IPPOSS算法對兩種真實(shí)世界應(yīng)用的DAG圖的調(diào)度性能,包括高斯消元[25]和蒙太奇(Montage)[26]。前者是用于求解線性方程組等重要矩陣運(yùn)算中的算法,后者是一種天文圖像拼接引擎,可將天空的各個(gè)圖像組合成一個(gè)拼接圖。這兩種應(yīng)用的DAG在具有一定的并行性的同時(shí)還具有一定的復(fù)雜性。此外,它們的DAG中的任務(wù)數(shù)量可以被較靈活地定義。所以,本文實(shí)驗(yàn)中使用了這兩種真實(shí)世界的應(yīng)用。

    對于這些應(yīng)用的DAG,因?yàn)榛拘螤罱Y(jié)構(gòu)已經(jīng)固定了,本文設(shè)置3種參數(shù)用于生成具有不同通信和運(yùn)算特性的應(yīng)用圖,這些參數(shù)包括:ccr=[0.1,0.2,0.5,1,2,5,10],β=[0.1,0.2,0.5,1,2] ,pn=[4,8,16,32]。

    第1種真實(shí)世界應(yīng)用的應(yīng)用圖是高斯消元,其任務(wù)數(shù)量等于(m2+m-2)/2,其中m是矩陣的尺寸。實(shí)驗(yàn)中使用的矩陣尺寸m=[5,10,15,20],對應(yīng)任務(wù)數(shù)量t n=[14,54,119,209]。

    圖6顯示了不同矩陣尺寸下的平均SLR和平均加速比。圖6(a)表明對于不同矩陣尺寸值,IPPOSS的平均SLR是4種算法中最低的。與HEFT算法相比,IPPOSS算法的平均SLR降低分別為9.93%,5.57%, 5.16%和5.14%。與PPTS算法相比,IPPOSS算法的平均SLR降低分別為6.43%, 3.43%, 6.33%和6.91%。圖6(b)表明對于不同矩陣尺寸值,IPPOSS算法的平均加速比是4種算法中最高的。與HEFT算法相比,IPPOSS算法的平均加速比提高分別為3.44%, 4.21%, 3.88%和3.53%。

    圖6 4種算法對不同矩陣尺寸的高斯消元應(yīng)用的調(diào)度結(jié)果

    第2種真實(shí)世界應(yīng)用的應(yīng)用圖是蒙太奇,任務(wù)數(shù)量設(shè)為[ 33,50,96,195,411]。

    圖7顯示了不同任務(wù)數(shù)量下的平均SLR和平均加速比。圖7(a)表明對于不同任務(wù)數(shù)量,IPPOSS算法的平均SLR是4種算法中最低的。與HEFT算法相比,IPPOSS算法的平均SLR降低分別為8.49%, 8.46%, 8.18%, 9.28%和9.68%。圖7(b)表明對于不同任務(wù)數(shù)量,IPPOSS算法的平均加速比是4種算法中最高的。

    圖7 4種算法對不同任務(wù)數(shù)量的蒙太奇應(yīng)用的調(diào)度結(jié)果

    5 結(jié)論

    本文針對異構(gòu)列表調(diào)度問題,提出一種同時(shí)優(yōu)于PPTS和PEFT并且保持2次復(fù)雜度的調(diào)度算法IPPOSS。本算法使用IPCM進(jìn)行預(yù)測,更合理地進(jìn)行了任務(wù)優(yōu)先級排序,從而在經(jīng)過處理器選擇階段后獲得了更好的解。在隨機(jī)生成的應(yīng)用圖實(shí)驗(yàn)中,IPPOSS的SLR優(yōu)于HEFT, PEFT和PPTS。對于加速比和松弛度指標(biāo),IPPOSS比HEFT和PEFT更好,并且與PPTS的結(jié)果相近。此外,對于相同的DAG,相比于其他3種算法,IPPOSS容易出現(xiàn)更好的調(diào)度結(jié)果。對于真實(shí)世界應(yīng)用高斯消元和蒙太奇,IPPOSS算法的SLR和加速比指標(biāo)也優(yōu)于這4種算法。

    猜你喜歡
    列表復(fù)雜度排序
    巧用列表來推理
    排序不等式
    學(xué)習(xí)運(yùn)用列表法
    擴(kuò)列吧
    恐怖排序
    一種低復(fù)雜度的慣性/GNSS矢量深組合方法
    節(jié)日排序
    刻舟求劍
    兒童繪本(2018年5期)2018-04-12 16:45:32
    求圖上廣探樹的時(shí)間復(fù)雜度
    某雷達(dá)導(dǎo)51 頭中心控制軟件圈復(fù)雜度分析與改進(jìn)
    亚洲精品乱码久久久久久按摩| 亚洲精品一二三| av国产久精品久网站免费入址| 高清av免费在线| 观看av在线不卡| 国产永久视频网站| av天堂中文字幕网| 少妇的逼水好多| 国产大屁股一区二区在线视频| 建设人人有责人人尽责人人享有的 | 午夜免费观看性视频| 久久精品国产a三级三级三级| 亚洲精品第二区| 性色avwww在线观看| 一级毛片久久久久久久久女| av免费在线看不卡| 这个男人来自地球电影免费观看 | 欧美精品人与动牲交sv欧美| 性高湖久久久久久久久免费观看| 国产在线男女| 欧美97在线视频| 久久精品国产鲁丝片午夜精品| 婷婷色av中文字幕| 五月天丁香电影| 日韩欧美精品免费久久| 高清不卡的av网站| 成人特级av手机在线观看| 中国三级夫妇交换| 久久久成人免费电影| 精品人妻视频免费看| 国产熟女欧美一区二区| 成人免费观看视频高清| 亚洲久久久国产精品| 80岁老熟妇乱子伦牲交| 一级毛片aaaaaa免费看小| 亚洲美女搞黄在线观看| 韩国高清视频一区二区三区| 99热6这里只有精品| 国产人妻一区二区三区在| 插阴视频在线观看视频| 能在线免费看毛片的网站| 毛片一级片免费看久久久久| 3wmmmm亚洲av在线观看| 男人舔奶头视频| 日本-黄色视频高清免费观看| av天堂中文字幕网| 免费av不卡在线播放| 岛国毛片在线播放| 伦精品一区二区三区| 亚洲欧美成人精品一区二区| 另类亚洲欧美激情| 国产免费又黄又爽又色| 亚洲三级黄色毛片| 男女无遮挡免费网站观看| 97在线人人人人妻| 纯流量卡能插随身wifi吗| 久久精品国产亚洲网站| 久久精品久久久久久久性| 日本黄色片子视频| 99热全是精品| 欧美成人精品欧美一级黄| 99热这里只有是精品在线观看| 久久精品夜色国产| 亚洲四区av| 高清av免费在线| 日本午夜av视频| 国产 一区精品| 黄色日韩在线| 丰满人妻一区二区三区视频av| 大片电影免费在线观看免费| 99热这里只有精品一区| 在线观看国产h片| 国产人妻一区二区三区在| 国产免费福利视频在线观看| 蜜桃在线观看..| 亚洲精华国产精华液的使用体验| 另类亚洲欧美激情| 99久久精品一区二区三区| 欧美97在线视频| 精品一区二区三卡| 在线观看免费视频网站a站| 久久精品熟女亚洲av麻豆精品| 国产色婷婷99| 日韩一区二区视频免费看| 国产成人精品一,二区| 新久久久久国产一级毛片| 久久久久久久久久久丰满| 丝瓜视频免费看黄片| 亚洲不卡免费看| 香蕉精品网在线| 在线亚洲精品国产二区图片欧美 | 少妇高潮的动态图| 久久综合国产亚洲精品| 日本猛色少妇xxxxx猛交久久| 性色avwww在线观看| 日韩一区二区视频免费看| 亚洲av欧美aⅴ国产| 国产成人aa在线观看| 日韩精品有码人妻一区| 少妇高潮的动态图| 99热6这里只有精品| 成人国产麻豆网| 久久99精品国语久久久| 亚洲精品久久久久久婷婷小说| 在线精品无人区一区二区三 | 夜夜看夜夜爽夜夜摸| 欧美激情国产日韩精品一区| 国产日韩欧美亚洲二区| 97热精品久久久久久| 91在线精品国自产拍蜜月| 少妇裸体淫交视频免费看高清| 一级片'在线观看视频| av免费观看日本| 中文字幕av成人在线电影| 99视频精品全部免费 在线| 超碰97精品在线观看| 五月伊人婷婷丁香| 欧美精品一区二区大全| 在线观看av片永久免费下载| 高清黄色对白视频在线免费看 | 免费不卡的大黄色大毛片视频在线观看| 熟妇人妻不卡中文字幕| 人妻系列 视频| 婷婷色av中文字幕| 97精品久久久久久久久久精品| 亚洲国产欧美在线一区| 七月丁香在线播放| 亚洲成人中文字幕在线播放| 99热国产这里只有精品6| 五月伊人婷婷丁香| 欧美日韩视频精品一区| 18禁裸乳无遮挡动漫免费视频| 国产精品一及| 亚洲av国产av综合av卡| 在线看a的网站| 亚洲三级黄色毛片| 国产精品久久久久久久久免| 特大巨黑吊av在线直播| 99热这里只有是精品在线观看| 性色avwww在线观看| 在线观看免费高清a一片| 自拍欧美九色日韩亚洲蝌蚪91 | 亚洲成人一二三区av| 精品一区二区免费观看| 亚洲精品日韩在线中文字幕| 网址你懂的国产日韩在线| 国产毛片在线视频| 亚洲国产精品国产精品| 欧美 日韩 精品 国产| 美女内射精品一级片tv| 久久精品久久精品一区二区三区| 精品一区二区免费观看| 黄片无遮挡物在线观看| 街头女战士在线观看网站| 久久热精品热| 欧美激情国产日韩精品一区| 国产精品人妻久久久久久| 夜夜爽夜夜爽视频| 成人美女网站在线观看视频| 麻豆成人午夜福利视频| 日韩 亚洲 欧美在线| 狂野欧美激情性bbbbbb| 国产淫片久久久久久久久| 简卡轻食公司| 欧美精品亚洲一区二区| 久久久久网色| 在线 av 中文字幕| 一本一本综合久久| 一本一本综合久久| 丰满少妇做爰视频| 久久99热这里只频精品6学生| 边亲边吃奶的免费视频| 国产精品.久久久| 国产精品国产av在线观看| 亚洲精品一区蜜桃| 高清在线视频一区二区三区| 九九爱精品视频在线观看| 99久久综合免费| 日本黄色日本黄色录像| 亚洲国产毛片av蜜桃av| 18禁动态无遮挡网站| 少妇裸体淫交视频免费看高清| av视频免费观看在线观看| 色视频www国产| 久久国产亚洲av麻豆专区| 亚洲精品久久久久久婷婷小说| 亚洲国产精品一区三区| 一级毛片黄色毛片免费观看视频| 亚洲成色77777| 亚洲中文av在线| av.在线天堂| 国内少妇人妻偷人精品xxx网站| 国产在线视频一区二区| 小蜜桃在线观看免费完整版高清| 精品视频人人做人人爽| 联通29元200g的流量卡| 直男gayav资源| 三级国产精品片| 成人18禁高潮啪啪吃奶动态图 | 一本—道久久a久久精品蜜桃钙片| 精品视频人人做人人爽| 国产欧美日韩一区二区三区在线 | 亚洲精品乱码久久久久久按摩| 九九爱精品视频在线观看| 亚洲国产欧美在线一区| 在线观看免费视频网站a站| 一本久久精品| 3wmmmm亚洲av在线观看| 亚洲三级黄色毛片| 久久99热这里只频精品6学生| 成人毛片a级毛片在线播放| 女的被弄到高潮叫床怎么办| 一级片'在线观看视频| 久久精品人妻少妇| 在线免费观看不下载黄p国产| 日韩av在线免费看完整版不卡| 国产欧美日韩一区二区三区在线 | 日韩欧美一区视频在线观看 | 一级av片app| 精华霜和精华液先用哪个| 亚洲精品亚洲一区二区| 国产黄色免费在线视频| 成人毛片a级毛片在线播放| av在线观看视频网站免费| 91午夜精品亚洲一区二区三区| 国产 一区精品| 亚洲伊人久久精品综合| 综合色丁香网| 国产亚洲一区二区精品| 亚洲av成人精品一区久久| 人人妻人人澡人人爽人人夜夜| 人妻夜夜爽99麻豆av| 欧美bdsm另类| 免费久久久久久久精品成人欧美视频 | 日产精品乱码卡一卡2卡三| 精品午夜福利在线看| 亚洲精品久久午夜乱码| 亚洲欧美中文字幕日韩二区| 又黄又爽又刺激的免费视频.| 欧美激情国产日韩精品一区| 国产免费福利视频在线观看| 亚洲欧洲国产日韩| 日韩精品有码人妻一区| 国产精品精品国产色婷婷| 91精品国产国语对白视频| 一级毛片我不卡| 久久久久久久国产电影| 国产成人freesex在线| 精品一区二区免费观看| 久久女婷五月综合色啪小说| 成人午夜精彩视频在线观看| 国产精品一区二区性色av| 黑人高潮一二区| 在现免费观看毛片| 国产色爽女视频免费观看| 亚洲欧美精品自产自拍| 国产精品人妻久久久影院| 免费大片18禁| 久久久久国产精品人妻一区二区| 日韩一区二区视频免费看| 久久精品人妻少妇| av一本久久久久| 丝袜脚勾引网站| 久热这里只有精品99| 蜜臀久久99精品久久宅男| 偷拍熟女少妇极品色| 一级黄片播放器| 日韩欧美一区视频在线观看 | 午夜老司机福利剧场| 亚洲人成网站在线播| 久久久久久久久久成人| 久久99精品国语久久久| xxx大片免费视频| 最近中文字幕高清免费大全6| 最近中文字幕高清免费大全6| 欧美xxxx性猛交bbbb| 秋霞在线观看毛片| 亚洲第一av免费看| 成人毛片60女人毛片免费| 国产男女内射视频| 五月天丁香电影| 国产亚洲av片在线观看秒播厂| 在线精品无人区一区二区三 | 爱豆传媒免费全集在线观看| 黄色怎么调成土黄色| 国产精品一二三区在线看| 美女中出高潮动态图| 欧美日韩视频精品一区| 中文字幕精品免费在线观看视频 | av播播在线观看一区| 亚洲精品色激情综合| 国产成人a∨麻豆精品| 久久久久性生活片| 欧美激情国产日韩精品一区| 国产男人的电影天堂91| 欧美3d第一页| 夜夜看夜夜爽夜夜摸| 国产高清有码在线观看视频| 在线观看一区二区三区激情| 亚洲熟女精品中文字幕| 午夜福利影视在线免费观看| 一个人免费看片子| 全区人妻精品视频| 免费大片18禁| 国产日韩欧美亚洲二区| 久久久久久伊人网av| 少妇人妻精品综合一区二区| 亚洲精品aⅴ在线观看| av国产精品久久久久影院| 久久精品熟女亚洲av麻豆精品| 99热网站在线观看| 亚洲av综合色区一区| 亚洲av日韩在线播放| 亚洲va在线va天堂va国产| 99国产精品免费福利视频| 十分钟在线观看高清视频www | 国产亚洲一区二区精品| 男女免费视频国产| 久久韩国三级中文字幕| 十八禁网站网址无遮挡 | 亚洲精品色激情综合| 国产精品国产三级国产专区5o| 交换朋友夫妻互换小说| 国产精品女同一区二区软件| 欧美极品一区二区三区四区| 美女中出高潮动态图| 蜜臀久久99精品久久宅男| 成人漫画全彩无遮挡| 老熟女久久久| 男的添女的下面高潮视频| 欧美性感艳星| 色视频www国产| 国产精品.久久久| 伦理电影免费视频| 日本黄色片子视频| 久久av网站| 看非洲黑人一级黄片| 免费观看无遮挡的男女| 夜夜爽夜夜爽视频| 国产一区二区在线观看日韩| 国产综合精华液| 久热久热在线精品观看| 免费大片黄手机在线观看| 日韩av在线免费看完整版不卡| 日本爱情动作片www.在线观看| 欧美成人午夜免费资源| 永久网站在线| 高清日韩中文字幕在线| 国内精品宾馆在线| 国产免费又黄又爽又色| 免费高清在线观看视频在线观看| 青春草亚洲视频在线观看| 在线观看免费高清a一片| 男人爽女人下面视频在线观看| 国产色婷婷99| 亚洲一区二区三区欧美精品| 在线观看美女被高潮喷水网站| 久久99热6这里只有精品| 久久亚洲国产成人精品v| 精品久久久久久电影网| 日本一二三区视频观看| 国产在线男女| 日本与韩国留学比较| 91久久精品国产一区二区成人| 亚洲综合精品二区| 国产在线一区二区三区精| 人人妻人人澡人人爽人人夜夜| 久久热精品热| 国产视频首页在线观看| a 毛片基地| 国产欧美日韩精品一区二区| 亚洲精品,欧美精品| 日日摸夜夜添夜夜爱| 亚洲图色成人| 亚洲美女搞黄在线观看| 91精品国产国语对白视频| 亚洲图色成人| 夫妻性生交免费视频一级片| av一本久久久久| 男人狂女人下面高潮的视频| 国产av精品麻豆| 久久青草综合色| 新久久久久国产一级毛片| 国产免费一级a男人的天堂| 九色成人免费人妻av| 51国产日韩欧美| 色5月婷婷丁香| 看非洲黑人一级黄片| 色吧在线观看| 午夜福利视频精品| 九九爱精品视频在线观看| 肉色欧美久久久久久久蜜桃| 激情 狠狠 欧美| 亚洲精品中文字幕在线视频 | 中文乱码字字幕精品一区二区三区| 亚洲精品国产av蜜桃| 欧美日韩综合久久久久久| 精品一区在线观看国产| 人人妻人人看人人澡| 亚洲精品乱久久久久久| 一级毛片aaaaaa免费看小| 18禁裸乳无遮挡动漫免费视频| 久久国产精品男人的天堂亚洲 | 欧美 日韩 精品 国产| 亚洲中文av在线| 久久午夜福利片| 国产一区二区三区综合在线观看 | 欧美高清成人免费视频www| 亚洲一级一片aⅴ在线观看| 国产乱人偷精品视频| 亚洲精品乱久久久久久| 少妇精品久久久久久久| 日韩不卡一区二区三区视频在线| 亚洲人成网站在线播| 欧美亚洲 丝袜 人妻 在线| 亚洲av综合色区一区| 日韩av在线免费看完整版不卡| 一级黄片播放器| 亚洲一区二区三区欧美精品| 国产中年淑女户外野战色| 男人舔奶头视频| 亚洲国产精品成人久久小说| 国产免费福利视频在线观看| 一级黄片播放器| 亚洲精品乱码久久久久久按摩| 欧美精品亚洲一区二区| 精品熟女少妇av免费看| 欧美成人a在线观看| 18+在线观看网站| 亚州av有码| 国产伦精品一区二区三区四那| 国产亚洲91精品色在线| 99久久人妻综合| 少妇被粗大猛烈的视频| 国产爽快片一区二区三区| 一级毛片 在线播放| 亚洲图色成人| 亚洲熟女精品中文字幕| 精品亚洲成a人片在线观看 | av在线app专区| 3wmmmm亚洲av在线观看| 免费看av在线观看网站| 视频区图区小说| 欧美日韩亚洲高清精品| 99久久精品热视频| 老熟女久久久| 日韩中文字幕视频在线看片 | 国产女主播在线喷水免费视频网站| 男人爽女人下面视频在线观看| 人妻夜夜爽99麻豆av| 久久国产亚洲av麻豆专区| 一级毛片黄色毛片免费观看视频| 我的女老师完整版在线观看| 国产av国产精品国产| 国产一区有黄有色的免费视频| 国产午夜精品久久久久久一区二区三区| 亚洲国产最新在线播放| 色5月婷婷丁香| 我要看日韩黄色一级片| 人妻系列 视频| 不卡视频在线观看欧美| 亚洲av.av天堂| 国产精品一区www在线观看| 女性生殖器流出的白浆| 国产人妻一区二区三区在| 成人免费观看视频高清| 99热国产这里只有精品6| 国产在视频线精品| 在线播放无遮挡| 国产精品av视频在线免费观看| 亚洲av免费高清在线观看| 亚洲经典国产精华液单| 欧美少妇被猛烈插入视频| 国产欧美日韩一区二区三区在线 | 青青草视频在线视频观看| 久久久久国产网址| 国产精品免费大片| 免费在线观看成人毛片| 一区二区三区乱码不卡18| 久久久久久久亚洲中文字幕| 国产精品成人在线| 热99国产精品久久久久久7| av视频免费观看在线观看| 一边亲一边摸免费视频| 特大巨黑吊av在线直播| av福利片在线观看| av又黄又爽大尺度在线免费看| 久久久国产一区二区| 久久久久久久大尺度免费视频| 国产在线视频一区二区| 777米奇影视久久| 国产精品久久久久久精品古装| 永久网站在线| 亚洲,一卡二卡三卡| 亚洲av成人精品一区久久| 午夜福利高清视频| av在线播放精品| 久久久a久久爽久久v久久| 99热国产这里只有精品6| 免费黄色在线免费观看| 免费观看在线日韩| 久久 成人 亚洲| av专区在线播放| 草草在线视频免费看| 久久精品国产亚洲网站| 亚洲精品aⅴ在线观看| 简卡轻食公司| 日本黄色日本黄色录像| 少妇的逼好多水| 天堂8中文在线网| 亚洲欧美中文字幕日韩二区| 高清视频免费观看一区二区| 一级片'在线观看视频| 亚洲欧美中文字幕日韩二区| 亚洲成色77777| 欧美一区二区亚洲| 欧美成人午夜免费资源| 22中文网久久字幕| 在线观看免费高清a一片| 午夜免费观看性视频| 少妇人妻久久综合中文| 天堂俺去俺来也www色官网| 肉色欧美久久久久久久蜜桃| 免费观看性生交大片5| 国产乱人偷精品视频| 美女国产视频在线观看| 国产v大片淫在线免费观看| 精品人妻一区二区三区麻豆| 日韩视频在线欧美| 欧美日韩在线观看h| 欧美成人a在线观看| 美女中出高潮动态图| 国产一区亚洲一区在线观看| 女的被弄到高潮叫床怎么办| 亚洲激情五月婷婷啪啪| 搡女人真爽免费视频火全软件| 久久 成人 亚洲| 久久久欧美国产精品| 国产男人的电影天堂91| 性色av一级| 一区在线观看完整版| 亚洲欧美日韩另类电影网站 | 日韩成人av中文字幕在线观看| 99国产精品免费福利视频| 日本爱情动作片www.在线观看| 久久精品熟女亚洲av麻豆精品| 2018国产大陆天天弄谢| 免费少妇av软件| 精品久久久久久久久av| 成年女人在线观看亚洲视频| 欧美精品国产亚洲| 内地一区二区视频在线| 日韩制服骚丝袜av| 特大巨黑吊av在线直播| 日本av免费视频播放| 亚洲av不卡在线观看| 一区二区三区精品91| 亚洲欧美一区二区三区国产| 在线播放无遮挡| 大话2 男鬼变身卡| 女人久久www免费人成看片| 偷拍熟女少妇极品色| 精品一区二区三卡| 亚洲精品色激情综合| 男人添女人高潮全过程视频| 国产欧美另类精品又又久久亚洲欧美| 中文字幕人妻熟人妻熟丝袜美| 日本vs欧美在线观看视频 | 男男h啪啪无遮挡| 成人美女网站在线观看视频| 亚洲人成网站在线观看播放| 久久久久精品久久久久真实原创| 一级av片app| 在线观看免费日韩欧美大片 | 亚洲av不卡在线观看| 一区二区三区精品91| 极品教师在线视频| 国产精品成人在线| 国产精品国产三级国产专区5o| 1000部很黄的大片| 2021少妇久久久久久久久久久| 在线观看av片永久免费下载| 亚洲国产精品成人久久小说| 国产免费福利视频在线观看| 夜夜骑夜夜射夜夜干| 国产av码专区亚洲av| 能在线免费看毛片的网站| 全区人妻精品视频| 亚洲精品国产av成人精品| 精品国产一区二区三区久久久樱花 | 插阴视频在线观看视频| 成人亚洲欧美一区二区av| 久久青草综合色| 看免费成人av毛片| 青青草视频在线视频观看| 人人妻人人看人人澡| 国产高清国产精品国产三级 | 深夜a级毛片| 国产69精品久久久久777片| 汤姆久久久久久久影院中文字幕| 国产一级毛片在线| 久久久久久久久大av| 国产一区有黄有色的免费视频| 精品一区在线观看国产| 日韩,欧美,国产一区二区三区| 亚洲高清免费不卡视频| 人妻夜夜爽99麻豆av| 久久久久国产精品人妻一区二区| 久久国产乱子免费精品| 亚洲美女搞黄在线观看| 亚洲综合色惰| 涩涩av久久男人的天堂| av免费在线看不卡| 日韩电影二区| 色视频在线一区二区三区|