• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    工業(yè)互聯(lián)網(wǎng)智能調(diào)度建模與方法研究綜述

    2022-08-11 00:41:28賴?yán)铈戮?/span>
    計算機集成制造系統(tǒng) 2022年7期

    賴?yán)铈戮瑥?霖,任 磊,王 凌

    (1.北京航空航天大學(xué) 自動化科學(xué)與電氣工程學(xué)院,北京 100191; 2.清華大學(xué) 自動化系,北京 100084)

    0 引言

    工業(yè)互聯(lián)網(wǎng)是未來20年支撐中國經(jīng)濟社會繁榮發(fā)展的“新基建”之一,更是實現(xiàn)智能制造的重要基礎(chǔ)[1-2]。習(xí)近平指出,工業(yè)互聯(lián)網(wǎng)將加速中國新型工業(yè)化進程,為疫情陰霾籠罩下的世界經(jīng)濟創(chuàng)造新的發(fā)展機遇?!吨泄仓醒腙P(guān)于制定國民經(jīng)濟和社會發(fā)展第十四個五年規(guī)劃和二〇三五年遠景目標(biāo)的建議》[3]提出要給予高端制造和智能制造大力關(guān)注,推動互聯(lián)網(wǎng)、大數(shù)據(jù)、人工智能等與各產(chǎn)業(yè)的深度融合。2020年政府工作報告指出,在“互聯(lián)網(wǎng)+工業(yè)”的基礎(chǔ)上充分理解工業(yè)客戶的應(yīng)用場景和需求痛點,已成為中國制造企業(yè)轉(zhuǎn)型升級的必然選擇。

    工業(yè)互聯(lián)網(wǎng)的建設(shè)關(guān)鍵在于云端和邊緣端資源協(xié)同互補地對工業(yè)現(xiàn)場進行全面感知與連接[4-5]。與傳統(tǒng)網(wǎng)絡(luò)化制造系統(tǒng)不同,復(fù)雜產(chǎn)品制造過程依賴于云端—邊緣端—工業(yè)終端的多主體資源聯(lián)動控制。云端能夠提供普適的、隨需應(yīng)變的、集中的計算資源、存儲資源和網(wǎng)絡(luò)訪問通道,接收大量工業(yè)過程相關(guān)的復(fù)雜解算任務(wù)、工業(yè)智能算法所需的大規(guī)模訓(xùn)練任務(wù)、工業(yè)過程分析、工業(yè)大數(shù)據(jù)存儲與解析任務(wù)等[6-8];邊緣端能夠在工業(yè)終端附近的網(wǎng)絡(luò)邊緣側(cè)提供分散的異構(gòu)計算資源,緩解因大規(guī)模工業(yè)終端接入云端帶來的高通信負載和計算負載,從而支撐近端數(shù)據(jù)采集、終端控制、過程監(jiān)測、數(shù)據(jù)預(yù)處理、分布式?jīng)Q策與實時仿真等快速任務(wù)需求[9-11]??梢姡七厖f(xié)同計算旨在為復(fù)雜制造全流程提供具有自組織、快速響應(yīng)和自主決策能力的近遠端協(xié)同計算服務(wù)。

    云端和邊緣端資源的引入使得工業(yè)互聯(lián)網(wǎng)的結(jié)構(gòu)更加復(fù)雜,也為工業(yè)互聯(lián)網(wǎng)中制造過程的任務(wù)調(diào)度帶來了更大的挑戰(zhàn)。傳統(tǒng)網(wǎng)絡(luò)化制造系統(tǒng)中,平臺將分別針對分布式工業(yè)現(xiàn)場及其網(wǎng)絡(luò)中的關(guān)聯(lián)服務(wù)進行制造任務(wù)調(diào)度和計算服務(wù)調(diào)度[12-13]。而在工業(yè)互聯(lián)網(wǎng)環(huán)境下,平臺需要依據(jù)涌現(xiàn)的制造任務(wù)及其關(guān)聯(lián)計算任務(wù)和海量數(shù)據(jù)通信的需求,一方面選擇合適的分布式制造資源實現(xiàn)多產(chǎn)品生產(chǎn),另一方面選擇相關(guān)計算任務(wù)是否在云端或邊緣端執(zhí)行以及部署在哪一個計算資源運行,并配置相應(yīng)的網(wǎng)絡(luò)。這個過程中,制造任務(wù)之間存在著復(fù)雜的前驅(qū)后繼關(guān)系,計算任務(wù)之間存在著復(fù)雜通信關(guān)系,且制造任務(wù)與計算任務(wù)間又存在著復(fù)雜交互關(guān)系,如實時交互、循環(huán)交互、數(shù)據(jù)依賴、數(shù)據(jù)同步等。如何對計算—制造混合任務(wù)進行快速合理的調(diào)度,是決定工業(yè)互聯(lián)網(wǎng)能否高效運行的關(guān)鍵。

    為此,本文針對Web of Science檢索的工業(yè)互聯(lián)網(wǎng)智能調(diào)度相關(guān)的近五年相關(guān)研究論文[14-120],將云端、邊緣端和工業(yè)終端的任務(wù)分為4大類,并依據(jù)決策變量的不同和決策層級的不同探討了工業(yè)互聯(lián)網(wǎng)環(huán)境下的7大類基本調(diào)度問題及其組合問題,總結(jié)了主流的建模方法和調(diào)度算法,并探討了它們的應(yīng)用范圍。依據(jù)工業(yè)互聯(lián)網(wǎng)環(huán)境下智能調(diào)度所面臨的5大類挑戰(zhàn),分析了挑戰(zhàn)背后的根源,并總結(jié)了應(yīng)對當(dāng)前挑戰(zhàn)可能的技術(shù)途徑,為未來工業(yè)互聯(lián)網(wǎng)智能調(diào)度研究提供技術(shù)參考。

    1 工業(yè)互聯(lián)網(wǎng)環(huán)境下的任務(wù)與基本調(diào)度問題

    工業(yè)互聯(lián)網(wǎng)主流架構(gòu)可簡化表示為圖1,主要由云端、邊緣端和分布于各地的工業(yè)終端組成。云端提供網(wǎng)絡(luò)存儲、海量計算資源池,實現(xiàn)平臺集中控制功能;邊緣端提供分布于各地基站或工業(yè)現(xiàn)場附近的分散異構(gòu)計算資源,緩解云端負載壓力,實現(xiàn)近端快速分散控制功能;工業(yè)終端接收工業(yè)互聯(lián)網(wǎng)平臺指派的用戶需求和任務(wù),運行過程不斷向云端和邊緣端發(fā)送數(shù)據(jù),與云端和邊緣端計算資源形成實時動態(tài)交互。這其中涉及計算任務(wù)、通信任務(wù)、制造任務(wù)和物流任務(wù)4大類型任務(wù)。

    各任務(wù)在云—邊—工業(yè)終端三端的分布關(guān)系如圖2所示。計算任務(wù)主要由云端和邊緣端執(zhí)行,當(dāng)工業(yè)終端具有一定計算能力時,也能承載小規(guī)模計算任務(wù);由于三端資源交互密切,因此通信任務(wù)廣泛存在于三端之間;而制造任務(wù)只能由工業(yè)終端設(shè)備執(zhí)行;物流任務(wù)主要由分布于各地的制造任務(wù)協(xié)作生產(chǎn)帶來,物流資源也可作為工業(yè)互聯(lián)網(wǎng)工業(yè)終端資源的一種,因此,物流任務(wù)也僅存在于工業(yè)終端。三端資源各司其職,圍繞4大類型任務(wù)形成松散靈活的協(xié)作模式。

    針對這一場景,筆者團隊調(diào)研了近五年Web of Science檢索的圍繞工業(yè)互聯(lián)網(wǎng)各層次調(diào)度問題的100余篇研究論文,并依據(jù)論文分布對問題進行分解(如圖3),圖3左側(cè)為云端、邊緣端和工業(yè)終端的7類基本調(diào)度問題:計算任務(wù)卸載、計算任務(wù)調(diào)度、計算資源配置、網(wǎng)絡(luò)資源配置、通信任務(wù)路由、制造任務(wù)調(diào)度、物流任務(wù)調(diào)度。

    圖3中間部分列舉了各個問題的主要求解變量,若同時考慮多個變量因素,又會形成右側(cè)表現(xiàn)的3類主要的云邊協(xié)同混合任務(wù)調(diào)度問題:云邊協(xié)同計算任務(wù)調(diào)度、云邊協(xié)同網(wǎng)絡(luò)資源配置、云—邊—工業(yè)終端協(xié)同的計算—制造混合任務(wù)調(diào)度。

    從問題分布層次來看,云端主要包含傳統(tǒng)計算任務(wù)調(diào)度和計算資源配置,因為當(dāng)前云架構(gòu)下計算資源池中異構(gòu)資源以較為統(tǒng)一的網(wǎng)絡(luò)連接模式管理,所以,云架構(gòu)下的網(wǎng)絡(luò)資源調(diào)度在近五年研究較少。邊緣端作為云端和工業(yè)終端聯(lián)接的中間層,既需要管理工業(yè)終端和邊緣端之間連接的有線網(wǎng)絡(luò)或無線傳感網(wǎng)絡(luò),又需要與云端計算資源連接進行數(shù)據(jù)傳輸,涉及了大量的異構(gòu)網(wǎng)絡(luò)資源配置、大量云端知識數(shù)據(jù)傳輸路由和工業(yè)終端數(shù)據(jù)上載,因此全面覆蓋了計算任務(wù)卸載、計算任務(wù)調(diào)度、計算資源配置、網(wǎng)絡(luò)資源配置和通信任務(wù)路由5種調(diào)度問題。工業(yè)終端的調(diào)度問題主要是傳統(tǒng)制造任務(wù)和物流任務(wù)的調(diào)度,與傳統(tǒng)網(wǎng)絡(luò)化制造系統(tǒng)環(huán)境不同的是,制造任務(wù)和物流任務(wù)在執(zhí)行過程中,承載任務(wù)的工業(yè)終端資源可能與云端或邊緣端有數(shù)據(jù)通信,且存在工業(yè)現(xiàn)場監(jiān)控、數(shù)據(jù)同步、遠程知識提取或近端實時控制等關(guān)聯(lián)的計算任務(wù)同步執(zhí)行,因此制造任務(wù)的開始和結(jié)束時間約束、任務(wù)前驅(qū)后繼約束將更復(fù)雜,工業(yè)終端資源的能力和能耗方面的計算方式也隨之更復(fù)雜。

    依據(jù)本文調(diào)研的100余篇論文分布情況,可發(fā)現(xiàn)7類基本問題在近五年工業(yè)互聯(lián)網(wǎng)調(diào)度問題研究中的比例(如圖4)。其中,計算任務(wù)卸載問題由邊緣計算技術(shù)引入,在工業(yè)互聯(lián)網(wǎng)環(huán)境下得到了廣泛的關(guān)注,約30%的研究均關(guān)注于各類計算任務(wù)向云端或邊緣端的卸載研究,包含配置任務(wù)卸載數(shù)量或任務(wù)卸載比例,決策任務(wù)是否卸載到云端或邊緣端、或在具備計算能力的工業(yè)終端執(zhí)行,選擇卸載任務(wù)時間等。其次,約20%的研究關(guān)注于計算任務(wù)調(diào)度的研究,計算任務(wù)的調(diào)度涉及邊緣端計算任務(wù)和云端計算任務(wù),旨在選擇執(zhí)行計算任務(wù)的資源,是傳統(tǒng)計算任務(wù)調(diào)度問題的一個擴充。與計算任務(wù)調(diào)度不同,計算資源配置主要集中于資源能力、服務(wù)、容器等配置,在工業(yè)互聯(lián)網(wǎng)環(huán)境下,還擴展地包含配置執(zhí)行任務(wù)的資源緩存、功率以及對服務(wù)和容器的再調(diào)度等,在有些研究工作中也包含計算任務(wù)調(diào)度。該方面研究占工業(yè)互聯(lián)網(wǎng)智能調(diào)度研究的18%左右。由于邊緣計算可以和運營商部署的5G網(wǎng)絡(luò)以及軟件定義網(wǎng)絡(luò)(Software Defined Network, SDN)、網(wǎng)絡(luò)功能虛擬化(Network Function Virtualization, NFV)等軟件控制技術(shù)適配應(yīng)用,在工業(yè)互聯(lián)網(wǎng)環(huán)境下,為充分挖掘分布式計算的潛力,約18%的研究也聚焦于網(wǎng)絡(luò)資源配置方面,旨在配置傳輸任務(wù)的網(wǎng)絡(luò)切片,為任務(wù)配置虛擬化網(wǎng)絡(luò)功能等。依據(jù)邊緣端計算資源接收工業(yè)終端定時發(fā)送的現(xiàn)場數(shù)據(jù),為加快傳輸效率,諸多研究也在網(wǎng)絡(luò)資源配置方面引入了配置傳輸任務(wù)的采樣頻率、配置傳輸任務(wù)并行穩(wěn)定傳輸?shù)臄?shù)據(jù)復(fù)制量、傳輸功率、傳輸時間戳和傳輸信道等。由于多層網(wǎng)絡(luò)結(jié)構(gòu)的形成,也有研究聚焦于通信任務(wù)的路由方面,但在工業(yè)互聯(lián)網(wǎng)環(huán)境下這類調(diào)度問題的研究僅占4%左右。在工業(yè)互聯(lián)網(wǎng)環(huán)境下智能調(diào)度的研究中,制造任務(wù)調(diào)度和物流任務(wù)調(diào)度的研究比例分別占7%和3%,主要在傳統(tǒng)網(wǎng)絡(luò)化制造環(huán)境中的制造過程調(diào)度和供應(yīng)鏈調(diào)度問題基礎(chǔ)上延伸,以選擇執(zhí)行任務(wù)的工業(yè)終端資源和選擇監(jiān)控與輔助當(dāng)前制造任務(wù)的云端或邊緣端計算資源為制造任務(wù)調(diào)度變量,以選擇執(zhí)行物流任務(wù)的車輛和路徑為物流任務(wù)調(diào)度變量。

    2 工業(yè)互聯(lián)網(wǎng)基本調(diào)度問題建模

    總結(jié)7類基本調(diào)度問題的目標(biāo)、約束以及云—邊—終端協(xié)同特性如表1所示,這些問題在傳統(tǒng)云計算、邊緣計算、以及網(wǎng)絡(luò)化制造場景均被廣泛研究過,但在工業(yè)互聯(lián)網(wǎng)環(huán)境中因云—邊—工業(yè)終端的協(xié)同特性,使得目標(biāo)約束的計算方法發(fā)生了變化。三端協(xié)同特性在不同問題中的主要體現(xiàn)如表1第4列所示,其對目標(biāo)和約束帶來的主要影響項在表中加粗顯示。

    表1 工業(yè)互聯(lián)網(wǎng)各類調(diào)度問題的目標(biāo)、約束與特性

    續(xù)表1

    針對上述問題,工業(yè)互聯(lián)網(wǎng)環(huán)境下的調(diào)度問題主要通過6類建模方法進行分析:數(shù)學(xué)規(guī)劃模型(含整數(shù)規(guī)劃模型和線性規(guī)劃模型)[14-68,120]、非線性數(shù)學(xué)模型[69-83,111,115-119]、馬爾科夫過程模型[84-92]、狀態(tài)空間模型[93-102,112-114]、李雅普諾夫優(yōu)化模型[103-106]、博弈模型[107-110]。

    各類基本調(diào)度問題的研究所采用的主流建模方法映射情況如表2所示,主流建模方法的研究分布如圖5所示。其中,計算任務(wù)卸載、計算任務(wù)調(diào)度與計算資源配置需求一般并行出現(xiàn),也常常合并決策,已有較為成熟的數(shù)學(xué)規(guī)劃模型可統(tǒng)一表示計算任務(wù)卸載、計算任務(wù)調(diào)度、計算資源配置3個基本問題的決策變量、約束和目標(biāo),因此在數(shù)學(xué)規(guī)劃模型基礎(chǔ)上進行分析的研究占比最多。針對這3個問題的基本建模方法較為常用的還有非線性數(shù)學(xué)模型,即使用連續(xù)或離散的變量表示決策變量,并采用非線性多峰目標(biāo)函數(shù)和約束不等式表示問題的方法。此外,馬爾科夫過程模型、狀態(tài)空間模型、李雅普諾夫優(yōu)化模型和博弈模型也紛紛被引入實現(xiàn)這3個問題不同角度的建模?,F(xiàn)有研究中,前5種建模方法均被用于網(wǎng)絡(luò)資源配置問題的分析,只有博弈模型還未發(fā)現(xiàn)被用于網(wǎng)絡(luò)資源配置中。這可能是由于網(wǎng)絡(luò)資源配置涉及網(wǎng)絡(luò)參數(shù)較多,如網(wǎng)絡(luò)切片、虛擬網(wǎng)絡(luò)功能、傳輸功率、信道、帶寬、時間戳等,各參數(shù)所屬層次不同,網(wǎng)絡(luò)不同層次參數(shù)間的耦合約束關(guān)系并非博弈決策關(guān)系。此外,通信任務(wù)路由在工業(yè)互聯(lián)網(wǎng)環(huán)境下研究較少,主要基于傳統(tǒng)通信路由模型擴展建模,因此,主流建模方法為數(shù)學(xué)規(guī)劃模型。制造任務(wù)調(diào)度問題和物流任務(wù)調(diào)度問題在工業(yè)互聯(lián)網(wǎng)環(huán)境下的建模也與傳統(tǒng)建模大同小異,集中體現(xiàn)為數(shù)學(xué)規(guī)劃模型、非線性數(shù)學(xué)模型。隨著強化學(xué)習(xí)方法在這類問題中的應(yīng)用,狀態(tài)空間模型也被應(yīng)用于這兩個問題的建模中,將資源或任務(wù)作為智能體構(gòu)建狀態(tài)空間和運動空間。

    表2 工業(yè)互聯(lián)網(wǎng)環(huán)境下的基本調(diào)度問題采用的主流建模方法映射情況

    3 工業(yè)互聯(lián)網(wǎng)智能調(diào)度算法

    基于前述六類模型,工業(yè)互聯(lián)網(wǎng)智能調(diào)度方法可分為6類:數(shù)學(xué)規(guī)劃算法[14,16,22,25,30,33-34,43,49,55,68,78,84,95,104,107,120]、啟發(fā)式算法[19,21,23-24,27,35,37-38,40,65,98,103,115-119]、進化算法[17,31,36,46,53,59-60,62,66-67,69-71,75,80-81,96,111]、博弈算法[29,50,108-109]、強化學(xué)習(xí)算法[32,41,44-45,56-57,61,63,72,85-89,91-92,97,99-100,102,105,112-114]、機器學(xué)習(xí)算法[15,18,20,26]。

    各類基本調(diào)度問題的研究所采用的主流建模方法映射情況如表3所示,主流建模方法的研究分布如圖6所示。其中以強化學(xué)習(xí)算法的應(yīng)用研究占比最多,占27%。該方面研究試圖聯(lián)合云端計算能力強、邊緣端實時處理速度快的特征,設(shè)計線下訓(xùn)練與線上決策結(jié)合的方式對工業(yè)互聯(lián)網(wǎng)環(huán)境下的計算任務(wù)、通信任務(wù)、制造任務(wù)和物流任務(wù)進行調(diào)度,并通過強化學(xué)習(xí)訓(xùn)練得到的智能體先驗知識,對高動態(tài)場景進行快速決策響應(yīng)。其次,進化算法(占比22%)、數(shù)學(xué)規(guī)劃算法(占比21%)和啟發(fā)式算法(占比21%)平分秋色,其中啟發(fā)式算法和進化算法廣泛應(yīng)用于除通信路由外的6類基本問題中,而數(shù)學(xué)規(guī)劃算法則大多應(yīng)用到計算任務(wù)卸載、計算任務(wù)調(diào)度、計算資源配置、網(wǎng)絡(luò)資源配置和通信任務(wù)路由中。在針對工業(yè)互聯(lián)網(wǎng)環(huán)境下的制造任務(wù)調(diào)度和物流任務(wù)調(diào)度的近五年研究中,使用數(shù)學(xué)規(guī)劃算法進行問題求解的較少。針對這類問題,現(xiàn)有研究常采用啟發(fā)式算法、進化算法或強化學(xué)習(xí)算法進行求解。

    表3 工業(yè)互聯(lián)網(wǎng)環(huán)境下的基本調(diào)度問題采用的智能調(diào)度算法映射情況

    相應(yīng)地,博弈算法和機器學(xué)習(xí)算法在6類基本調(diào)度問題的研究中使用較少,但求解問題的角度較為新穎。其中,博弈算法主要用于計算任務(wù)卸載、計算任務(wù)調(diào)度、計算資源配置和制造任務(wù)調(diào)度中;機器學(xué)習(xí)算法主要引入到計算任務(wù)調(diào)度、計算資源配置兩類問題。

    4 工業(yè)互聯(lián)網(wǎng)智能調(diào)度面臨的挑戰(zhàn)與主要發(fā)展途徑

    上述研究主要針對當(dāng)前工業(yè)互聯(lián)網(wǎng)環(huán)境下所面臨的新挑戰(zhàn),對傳統(tǒng)場景下的模型進行修改,試圖更貼近于工業(yè)實際場景下任務(wù)和資源的運行模式,并運用和設(shè)計不同的智能調(diào)度算法提高決策質(zhì)量和決策速度。總結(jié)來說,當(dāng)前工業(yè)互聯(lián)網(wǎng)智能調(diào)度面臨以下5項挑戰(zhàn)

    (1)大規(guī)模 在云端、邊緣端和工業(yè)終端的靈活協(xié)同模式下,工業(yè)互聯(lián)網(wǎng)環(huán)境下分布制造資源、邊緣端計算資源和云端計算資源數(shù)量急劇增大,計算任務(wù)、通信任務(wù)、制造任務(wù)和物流任務(wù)規(guī)模化涌現(xiàn)。任務(wù)規(guī)模可達數(shù)萬計,工業(yè)互聯(lián)網(wǎng)資源節(jié)點可達數(shù)千個,如何對萬級任務(wù)進行快速調(diào)度,實現(xiàn)任務(wù)毫秒級響應(yīng),是工業(yè)互聯(lián)網(wǎng)環(huán)境面臨的首要挑戰(zhàn)。

    (2)高動態(tài) 工業(yè)互聯(lián)網(wǎng)環(huán)境下的動態(tài)性主要體現(xiàn)在任務(wù)動態(tài)性,如計算任務(wù)動態(tài)涌現(xiàn)、通信任務(wù)延遲/丟包、制造/物流任務(wù)插入/變更/取消等;資源動態(tài)性,如云端和邊緣端資源的動態(tài)占用狀態(tài)、資源宕機、工業(yè)終端資源的臨時維修維護、通信通道的堵塞與中斷、物流通路的變更等;場景動態(tài)性,如工業(yè)生產(chǎn)線的重構(gòu)、物流資源的替換、訂單需求的變化等。這些動態(tài)特征大多通過區(qū)間數(shù)、模糊數(shù)或隨機分布的方式在調(diào)度問題中體現(xiàn),但實際場景的動態(tài)變化大都不服從上述3類分布,如何響應(yīng)工業(yè)互聯(lián)網(wǎng)環(huán)境下的急速變化,實現(xiàn)任務(wù)精準(zhǔn)調(diào)度,是工業(yè)互聯(lián)網(wǎng)環(huán)境面臨的又一挑戰(zhàn)。

    (3)不確定 這里的不確定性主要體現(xiàn)在工業(yè)現(xiàn)場任務(wù)方面。當(dāng)前面向工業(yè)互聯(lián)網(wǎng)環(huán)境的智能調(diào)度研究僅考慮了執(zhí)行時間固定的任務(wù),并假設(shè)任務(wù)不能分割,任務(wù)前驅(qū)后繼關(guān)系不變,且任務(wù)之間不存在循環(huán)執(zhí)行或?qū)崟r數(shù)據(jù)傳輸?shù)年P(guān)系,但實際工業(yè)現(xiàn)場并非如此。首先,工業(yè)現(xiàn)場的制造任務(wù)和物流任務(wù)不僅包含固定時間的自動執(zhí)行任務(wù),還包含大量人機協(xié)作任務(wù),且人機協(xié)作任務(wù)通常伴隨著實時現(xiàn)場監(jiān)控數(shù)據(jù)的傳輸以及控制指令或操作步驟的調(diào)整。尤其是對定制化產(chǎn)品及其零部件來說,任務(wù)流程可變,人機協(xié)作性強,且具有諸多循環(huán)判定環(huán)境和實時數(shù)據(jù)傳輸環(huán)節(jié),過程具有較強的不確定性,如何針對這些任務(wù)及其不確定性進行建模、分析、預(yù)測和調(diào)度,是實現(xiàn)精準(zhǔn)調(diào)度亟待解決的一個問題。

    (4)強耦合 強耦合指的是變量之間的耦合關(guān)系較強,主要體現(xiàn)在工業(yè)計算任務(wù)和工業(yè)制造任務(wù)之間的聯(lián)系上。工業(yè)計算任務(wù)和工業(yè)制造任務(wù)之間主要存在緊密的數(shù)據(jù)傳輸,既包含從工業(yè)終端的定時數(shù)據(jù)采集,支撐現(xiàn)場監(jiān)控、數(shù)字孿生模型同步構(gòu)建與更新、云端知識學(xué)習(xí)、人工智能黑箱數(shù)據(jù)模型訓(xùn)練等;又包含從云端和邊緣端的先驗信息獲取,如云端人工智能模型的部署和調(diào)用,云端知識的提取和應(yīng)用,云端存儲數(shù)據(jù)的獲取與可視化分析,邊緣端服務(wù)應(yīng)用同步部署,邊緣端實時控制指令發(fā)送等。這些任務(wù)聯(lián)系,不僅增加了更復(fù)雜的任務(wù)開始時間、結(jié)束時間、等待時間的約束關(guān)系,帶來了更多數(shù)據(jù)上行和下行傳輸負載,還大大增加了各個層次基本調(diào)度問題之間的耦合性,使得不同問題變量之間產(chǎn)生更強的隱性約束。在這種情況下,針對基本問題的單獨決策就很容易失效,如何聯(lián)合多個問題進行云—邊—工業(yè)終端協(xié)同任務(wù)調(diào)度,又成為一個新的挑戰(zhàn)。

    (5)多目標(biāo) 從表1可發(fā)現(xiàn),工業(yè)互聯(lián)網(wǎng)環(huán)境下7類基本調(diào)度問題均呈現(xiàn)多目標(biāo)決策需求,當(dāng)多個基本問題聯(lián)合決策時,從任務(wù)運行效率、響應(yīng)延時、能耗、成本、服務(wù)質(zhì)量等方面的決策目標(biāo)和評價指標(biāo)必然會發(fā)生倍增,如何實現(xiàn)多個目標(biāo)之間的平衡,也是當(dāng)前研究討論的熱點之一。

    表4總結(jié)了工業(yè)互聯(lián)網(wǎng)各類調(diào)度問題主要應(yīng)對的挑戰(zhàn)。計算任務(wù)卸載、計算任務(wù)調(diào)度、網(wǎng)絡(luò)資源配置和制造任務(wù)調(diào)度問題不可避免地面臨著上述5項挑戰(zhàn)。計算資源配置問題針對計算任務(wù)配置資源或服務(wù),不確定性較??;通信任務(wù)路由問題聚焦固定網(wǎng)絡(luò)結(jié)構(gòu)下的傳輸通道和傳輸流程選擇,還未充分涉及大規(guī)模、高動態(tài)、不確定和強耦合等挑戰(zhàn);而物流任務(wù)調(diào)度問題主要面臨規(guī)模增大、動態(tài)場景需求以及決策目標(biāo)增多的挑戰(zhàn),較少涉及不確定性和與其他層次決策變量的強耦合性。

    表4 工業(yè)互聯(lián)網(wǎng)各類調(diào)度研究應(yīng)對挑戰(zhàn)的情況

    總地來說,未來工業(yè)互聯(lián)網(wǎng)將面臨數(shù)十萬計超大規(guī)模任務(wù)和資源的調(diào)度與管理。由于云端、邊緣端和工業(yè)終端的緊密連接,計算任務(wù)和制造任務(wù)的緊密耦合,單獨對7大基本問題進行逐一決策顯然不符合實際,這需要忽略任務(wù)之間的耦合關(guān)系,并加入諸多不符合現(xiàn)實的強假設(shè)約束來將各部分變量劃分開,就容易得到不符合實際要求的決策方案。因此,未來工業(yè)互聯(lián)網(wǎng)智能調(diào)度方面的研究必然是面向云—邊—工業(yè)終端協(xié)同的計算—通信—制造任務(wù)的多目標(biāo)動態(tài)調(diào)度問題,且問題中包含各自不確定性因素和變量強耦合關(guān)系。

    針對變量大規(guī)模、場景高動態(tài)、任務(wù)不確定、變量強耦合的多目標(biāo)優(yōu)化調(diào)度問題,可以引入一些先進方法提升決策過程的速度和決策解的質(zhì)量。

    (1)應(yīng)對大規(guī)模挑戰(zhàn)的技術(shù)途徑 首先,可引入并行化技術(shù),將問題變量進行分解形成子問題,利用啟發(fā)式調(diào)度算法、數(shù)學(xué)規(guī)劃算法或進化算法進行子問題并行快速求解,再合并問題進行精優(yōu)和微調(diào)[121];其次,可以運用代理模型,將大規(guī)模調(diào)度問題中耗時較長的目標(biāo)函數(shù)計算和梯度計算利用代理模型替代,實現(xiàn)優(yōu)化解的快速搜索[122-124];再者,可以使用自編碼器等技術(shù)對耦合變量進行壓縮求解,再展開回原問題進行精優(yōu)調(diào)校[125];此外,還可以引入多任務(wù)學(xué)習(xí)思路[126-127],混合使用原目標(biāo)函數(shù)和代理模型進行同步并行決策,一方面提高求解效率,另一方面能夠補償代理模型帶來的精度誤差。

    (2)應(yīng)對高動態(tài)挑戰(zhàn)的技術(shù)途徑 首先,可引入當(dāng)前先進的基于進化迭代的動態(tài)優(yōu)化算法[128-130],通過環(huán)境變化動態(tài)檢測算法與解集快速變更方法結(jié)合,在環(huán)境發(fā)生動態(tài)變化時快速生成新的解集;其次,可以采用環(huán)境變化動態(tài)檢測算法與深度強化學(xué)習(xí)結(jié)合的方式[131],在線下先對可能的動態(tài)場景生成大量解集并評估,實現(xiàn)深度強化學(xué)習(xí)模型的訓(xùn)練,再運用訓(xùn)練好的深度強化學(xué)習(xí)模型實現(xiàn)線上決策。在此基礎(chǔ)上,還可引入基于增量式策略的強化學(xué)習(xí)算法[132],進一步響應(yīng)未知動態(tài)環(huán)境,并實時對深度強化學(xué)習(xí)模型進行調(diào)校,進而快速給出動態(tài)環(huán)境下的決策方案。

    (3)應(yīng)對不確定性挑戰(zhàn)的技術(shù)途徑 針對決策過程不確定性因素的主流方法包含基于仿真的推演方法[133-135]、貝葉斯推理方法[136-137]、基于機器學(xué)習(xí)的預(yù)測方法和預(yù)優(yōu)化方法[138-139]。具體地說,可根據(jù)任務(wù)流程的變化特性進行不確定性因素的概率建模,采用貝葉斯推理方法對不同情況發(fā)生的條件概率進行估計,再結(jié)合機器學(xué)習(xí)的預(yù)測方法對可變流程的發(fā)生時間和參數(shù)進行定位,最終選取合適的調(diào)度算法對當(dāng)前預(yù)測的場景進行決策形成預(yù)優(yōu)化方案。在方案執(zhí)行過程中,再引入在線再調(diào)度方法修改方案適應(yīng)場景的變化。

    (4)應(yīng)對強耦合挑戰(zhàn)的技術(shù)途徑 強耦合主要體現(xiàn)在不同類型問題直接的緊密耦合,因此,針對耦合性較強的問題最直觀的方法是將多個問題合并建模,進行多層次一體化調(diào)度決策。一體化決策帶來的問題又回歸到大規(guī)模問題的求解,因此,既可沿用分解子問題并行尋優(yōu)和歸并精優(yōu)的思想實現(xiàn)一體化快速決策,又可引入代理模型對一體化調(diào)度的目標(biāo)函數(shù)進行簡化,加速決策過程。此外,在建模方面,還可以充分運用李雅普諾夫優(yōu)化模型與馬爾科夫狀態(tài)模型對變量進行解耦,再通過約束轉(zhuǎn)化和約束消解方法對問題進行簡化;在一體化決策過程方面,還可引入多智能體強化學(xué)習(xí)算法,設(shè)計多個耦合問題的智能體決策策略,在動態(tài)場景下進行多智能體強化學(xué)習(xí)模型的線下組合訓(xùn)練后投入線上實現(xiàn)快速決策。

    (5)應(yīng)對多目標(biāo)的技術(shù)途徑 針對目標(biāo)函數(shù)大于3個的多目標(biāo)優(yōu)化問題,大多采用進化迭代流程延續(xù)優(yōu)化指標(biāo)(indicator)、分解的權(quán)重向量(decomposition-based weight)和帕累托(Pareto)前沿解集選擇策略的設(shè)計[140-143],為選擇多目標(biāo)平衡的優(yōu)秀前沿解集,可引入聚類方法選取較少的權(quán)重向量[144-146],依據(jù)權(quán)重向量選擇前沿解集,由此簡化迭代流程;也可結(jié)合簡化的超體積(hypervolume)或IGD(inverted generational distance)等指標(biāo)[147-151]結(jié)合多智能體強化學(xué)習(xí)方法[131]對解集進行快速排序。隨著一體化調(diào)度決策目標(biāo)函數(shù)數(shù)量的增大,也可采用基于機器學(xué)習(xí)或深度學(xué)習(xí)的方法[150,152]依據(jù)場景動態(tài)特性選取關(guān)鍵目標(biāo)函數(shù),對關(guān)鍵目標(biāo)函數(shù)進行并行迭代優(yōu)化,從而降低決策時間。

    除了上述技術(shù)途徑以外,還有許多聚焦設(shè)計人工智能算法與進化算法結(jié)合的方法,試圖挖掘工業(yè)互聯(lián)網(wǎng)智能多層次調(diào)度問題變量、約束和目標(biāo)的精確簡化表達,并實現(xiàn)調(diào)度解的快速尋優(yōu),在此不再贅述。

    5 結(jié)束語

    工業(yè)互聯(lián)網(wǎng)智能調(diào)度問題涉及云端、邊緣端和工業(yè)終端的計算任務(wù)、通信任務(wù)、制造任務(wù)和物流任務(wù)的多層次調(diào)度,是決定工業(yè)互聯(lián)網(wǎng)平臺運行效率的核心,具有大規(guī)模、高動態(tài)、不確定、強耦合、多目標(biāo)的特點。本文調(diào)研了Web of Science相關(guān)的100余篇研究論文,總結(jié)了圍繞工業(yè)互聯(lián)網(wǎng)平臺運行的7大類基本問題以及所涉及的云邊協(xié)同特性,討論了針對這些問題的6類主流建模方法和6類典型決策算法,以及這些方法的研究分布情況,并探討了各類方法的主要應(yīng)用范圍,最終針對工業(yè)互聯(lián)網(wǎng)環(huán)境下智能調(diào)度所面臨的的5大挑戰(zhàn)及其原因進行分析,給出了應(yīng)對不同挑戰(zhàn)的技術(shù)途徑,為未來工業(yè)互聯(lián)網(wǎng)智能調(diào)度問題的研究提供參考和新的思路。

    中亚洲国语对白在线视频| 国产精品野战在线观看| 精品国产超薄肉色丝袜足j| 村上凉子中文字幕在线| АⅤ资源中文在线天堂| 亚洲国产欧美人成| 亚洲人成电影免费在线| 欧美色欧美亚洲另类二区| 国产精品一区二区免费欧美| 精品国产亚洲在线| 精品乱码久久久久久99久播| 男人和女人高潮做爰伦理| 伦理电影免费视频| 两性午夜刺激爽爽歪歪视频在线观看| 午夜福利视频1000在线观看| 精品一区二区三区av网在线观看| 午夜福利在线观看免费完整高清在 | 在线观看免费午夜福利视频| 免费观看精品视频网站| 日韩免费av在线播放| 深夜精品福利| 黄片大片在线免费观看| 日韩欧美国产在线观看| 久久国产精品影院| 国产精品一及| 亚洲成av人片免费观看| 中文字幕久久专区| 亚洲中文字幕一区二区三区有码在线看 | 非洲黑人性xxxx精品又粗又长| 人妻丰满熟妇av一区二区三区| 夜夜看夜夜爽夜夜摸| 亚洲国产精品999在线| 国产精品自产拍在线观看55亚洲| 日本黄色片子视频| www日本在线高清视频| 国产三级在线视频| 嫩草影院精品99| 成年人黄色毛片网站| 午夜久久久久精精品| 黄色日韩在线| 久久久久久久久久黄片| 久9热在线精品视频| 精品一区二区三区av网在线观看| 午夜福利在线观看免费完整高清在 | 曰老女人黄片| 色综合亚洲欧美另类图片| cao死你这个sao货| 亚洲欧洲精品一区二区精品久久久| 白带黄色成豆腐渣| 欧美在线黄色| 18禁美女被吸乳视频| 久久这里只有精品19| 麻豆一二三区av精品| 成人av一区二区三区在线看| 国产一区二区在线av高清观看| 久久久色成人| 一区二区三区国产精品乱码| 久久人人精品亚洲av| 国产精品精品国产色婷婷| 久久这里只有精品19| 9191精品国产免费久久| 欧美av亚洲av综合av国产av| 免费搜索国产男女视频| 真实男女啪啪啪动态图| 欧美一区二区精品小视频在线| 天堂√8在线中文| 亚洲成av人片免费观看| 天堂av国产一区二区熟女人妻| 久久久久久九九精品二区国产| 亚洲精品美女久久av网站| 国产亚洲精品久久久com| 99久久精品一区二区三区| 欧美三级亚洲精品| АⅤ资源中文在线天堂| 中文字幕精品亚洲无线码一区| 99久久精品一区二区三区| 伊人久久大香线蕉亚洲五| 欧美一区二区国产精品久久精品| 免费在线观看亚洲国产| 国内精品一区二区在线观看| 国产精品香港三级国产av潘金莲| 欧美成人一区二区免费高清观看 | 亚洲国产欧洲综合997久久,| 青草久久国产| 国产1区2区3区精品| 一区二区三区高清视频在线| 久久久久久大精品| 色综合欧美亚洲国产小说| 国内精品一区二区在线观看| 美女黄网站色视频| 别揉我奶头~嗯~啊~动态视频| 久久久精品大字幕| 不卡一级毛片| 久久久久久国产a免费观看| 久9热在线精品视频| 真人做人爱边吃奶动态| 亚洲成人精品中文字幕电影| 亚洲aⅴ乱码一区二区在线播放| 国产精品 欧美亚洲| 三级男女做爰猛烈吃奶摸视频| 在线永久观看黄色视频| 在线观看日韩欧美| 在线观看舔阴道视频| 无遮挡黄片免费观看| 国产伦人伦偷精品视频| 黄色丝袜av网址大全| 精品不卡国产一区二区三区| 99精品欧美一区二区三区四区| 两性夫妻黄色片| 啦啦啦观看免费观看视频高清| 成人av一区二区三区在线看| 91在线精品国自产拍蜜月 | 国内精品一区二区在线观看| 日本精品一区二区三区蜜桃| 狂野欧美白嫩少妇大欣赏| 亚洲成av人片在线播放无| 2021天堂中文幕一二区在线观| 日本免费a在线| 欧美成人免费av一区二区三区| 黄色日韩在线| 成人特级av手机在线观看| av片东京热男人的天堂| 手机成人av网站| 欧美午夜高清在线| 性色avwww在线观看| 成年女人毛片免费观看观看9| 欧美激情久久久久久爽电影| 国产成年人精品一区二区| 别揉我奶头~嗯~啊~动态视频| 亚洲午夜理论影院| 久久精品国产亚洲av香蕉五月| 成年人黄色毛片网站| 99国产精品99久久久久| 男女下面进入的视频免费午夜| 中亚洲国语对白在线视频| 亚洲在线自拍视频| 在线视频色国产色| 国产成人影院久久av| 美女被艹到高潮喷水动态| 日本五十路高清| 亚洲欧美一区二区三区黑人| 亚洲人成网站高清观看| 午夜影院日韩av| 国产成人精品无人区| 国产aⅴ精品一区二区三区波| 午夜福利高清视频| 亚洲性夜色夜夜综合| 99久久综合精品五月天人人| 欧美日韩黄片免| 亚洲无线在线观看| 久久伊人香网站| 不卡一级毛片| 欧美zozozo另类| 国产高清videossex| 999精品在线视频| 精品久久久久久久毛片微露脸| 精品久久蜜臀av无| av在线蜜桃| 最近视频中文字幕2019在线8| 婷婷丁香在线五月| 国内精品美女久久久久久| 淫秽高清视频在线观看| 色尼玛亚洲综合影院| 欧美日韩黄片免| 久久中文字幕人妻熟女| 国产又黄又爽又无遮挡在线| 国产三级在线视频| 精品欧美国产一区二区三| 黑人操中国人逼视频| 国产一区在线观看成人免费| 国产真实乱freesex| 黑人操中国人逼视频| 热99在线观看视频| 国产成人一区二区三区免费视频网站| 亚洲欧美精品综合一区二区三区| 精品久久久久久久毛片微露脸| 亚洲男人的天堂狠狠| 精品一区二区三区视频在线观看免费| 久久中文字幕人妻熟女| 精品国产乱子伦一区二区三区| 最好的美女福利视频网| 国产亚洲av嫩草精品影院| 国产成人精品久久二区二区免费| 国产欧美日韩一区二区三| 成人性生交大片免费视频hd| 日本熟妇午夜| 免费高清视频大片| 国产69精品久久久久777片 | 免费在线观看成人毛片| 午夜两性在线视频| 亚洲欧美一区二区三区黑人| 精品久久久久久久人妻蜜臀av| 美女 人体艺术 gogo| 人人妻人人看人人澡| 日韩 欧美 亚洲 中文字幕| 青草久久国产| 欧美日韩精品网址| 久久久精品欧美日韩精品| 99热这里只有精品一区 | 母亲3免费完整高清在线观看| 日本一本二区三区精品| 婷婷精品国产亚洲av在线| 夜夜爽天天搞| 亚洲国产日韩欧美精品在线观看 | 免费观看的影片在线观看| 久久久久久久久中文| 国产高清激情床上av| 亚洲国产色片| 亚洲av五月六月丁香网| 成在线人永久免费视频| 午夜久久久久精精品| 国产av在哪里看| 一本久久中文字幕| 少妇熟女aⅴ在线视频| 中文字幕人妻丝袜一区二区| 少妇的丰满在线观看| 成人特级黄色片久久久久久久| 九九在线视频观看精品| 天天躁日日操中文字幕| 国产单亲对白刺激| 国产伦在线观看视频一区| 神马国产精品三级电影在线观看| 成年女人永久免费观看视频| 国产欧美日韩一区二区精品| 精品久久久久久久久久免费视频| 精品国产亚洲在线| АⅤ资源中文在线天堂| 国产真实乱freesex| 一区二区三区国产精品乱码| 男人舔奶头视频| 最近视频中文字幕2019在线8| 性欧美人与动物交配| 久久久久国产精品人妻aⅴ院| 精华霜和精华液先用哪个| 岛国视频午夜一区免费看| 国内毛片毛片毛片毛片毛片| 日本一二三区视频观看| 亚洲精品456在线播放app | 亚洲熟妇中文字幕五十中出| 亚洲国产精品合色在线| 国产精品久久久人人做人人爽| 狠狠狠狠99中文字幕| 久久久国产成人精品二区| 日韩欧美在线乱码| 日韩精品青青久久久久久| 成在线人永久免费视频| 国产亚洲欧美98| 少妇的逼水好多| 欧美+亚洲+日韩+国产| 亚洲av成人av| 欧美zozozo另类| 夜夜夜夜夜久久久久| 国产欧美日韩精品一区二区| 国产高潮美女av| 亚洲,欧美精品.| 精品国产美女av久久久久小说| 亚洲欧美一区二区三区黑人| 少妇的丰满在线观看| 成人永久免费在线观看视频| 最好的美女福利视频网| 一夜夜www| x7x7x7水蜜桃| 啦啦啦观看免费观看视频高清| 国产伦在线观看视频一区| 在线观看免费视频日本深夜| 日本免费一区二区三区高清不卡| 亚洲午夜精品一区,二区,三区| 欧美绝顶高潮抽搐喷水| 欧美精品啪啪一区二区三区| 亚洲国产日韩欧美精品在线观看 | 国产精品久久久久久精品电影| 国产精品av视频在线免费观看| 精品久久久久久久毛片微露脸| 欧美xxxx黑人xx丫x性爽| 成人鲁丝片一二三区免费| 99久久99久久久精品蜜桃| 国产三级中文精品| 色综合亚洲欧美另类图片| 国产一区二区激情短视频| 日韩有码中文字幕| 少妇的逼水好多| 在线视频色国产色| 午夜福利免费观看在线| 午夜免费激情av| 午夜成年电影在线免费观看| 国产高清三级在线| 亚洲一区二区三区不卡视频| 国产精品久久久久久久电影 | 日本在线视频免费播放| 午夜日韩欧美国产| 久久精品91蜜桃| 久久精品aⅴ一区二区三区四区| 日本 欧美在线| 国内久久婷婷六月综合欲色啪| 国产亚洲精品久久久久久毛片| 日韩 欧美 亚洲 中文字幕| 欧美xxxx黑人xx丫x性爽| svipshipincom国产片| 中文资源天堂在线| 国产精品综合久久久久久久免费| 成人三级黄色视频| 国产精品九九99| 男插女下体视频免费在线播放| 法律面前人人平等表现在哪些方面| 亚洲自偷自拍图片 自拍| 午夜免费成人在线视频| 日本a在线网址| 午夜激情欧美在线| 少妇的丰满在线观看| 国产1区2区3区精品| 女同久久另类99精品国产91| 曰老女人黄片| 此物有八面人人有两片| 男女床上黄色一级片免费看| 91在线精品国自产拍蜜月 | 成人无遮挡网站| 欧美中文日本在线观看视频| 国产伦精品一区二区三区四那| 麻豆久久精品国产亚洲av| 久久天堂一区二区三区四区| e午夜精品久久久久久久| 亚洲最大成人中文| 中文字幕人妻丝袜一区二区| 国产真实乱freesex| 99久久精品一区二区三区| 好男人电影高清在线观看| 男女之事视频高清在线观看| 天堂影院成人在线观看| 日本 av在线| 熟妇人妻久久中文字幕3abv| 亚洲人成伊人成综合网2020| 成人精品一区二区免费| www.999成人在线观看| 一个人看视频在线观看www免费 | 亚洲av成人精品一区久久| 久久久久国产精品人妻aⅴ院| 99久久久亚洲精品蜜臀av| 热99在线观看视频| 亚洲精华国产精华精| 欧美国产日韩亚洲一区| 老司机深夜福利视频在线观看| 国产成年人精品一区二区| 毛片女人毛片| 中文字幕av在线有码专区| av中文乱码字幕在线| 视频区欧美日本亚洲| 操出白浆在线播放| xxx96com| 精品电影一区二区在线| 午夜亚洲福利在线播放| 特大巨黑吊av在线直播| 又黄又爽又免费观看的视频| 1024香蕉在线观看| 18禁黄网站禁片午夜丰满| 真实男女啪啪啪动态图| 每晚都被弄得嗷嗷叫到高潮| 久久精品影院6| 久9热在线精品视频| 国产熟女xx| avwww免费| 亚洲七黄色美女视频| 免费在线观看成人毛片| h日本视频在线播放| 国产亚洲欧美在线一区二区| 国产美女午夜福利| 小蜜桃在线观看免费完整版高清| 波多野结衣高清无吗| 国产三级黄色录像| 级片在线观看| 日本与韩国留学比较| 一级a爱片免费观看的视频| 淫秽高清视频在线观看| 蜜桃久久精品国产亚洲av| 精品国产超薄肉色丝袜足j| 国产高清视频在线观看网站| 99热6这里只有精品| 亚洲国产日韩欧美精品在线观看 | 变态另类成人亚洲欧美熟女| 哪里可以看免费的av片| 亚洲欧美激情综合另类| 欧美日韩国产亚洲二区| 精品人妻1区二区| 国产精品自产拍在线观看55亚洲| 日本撒尿小便嘘嘘汇集6| 免费在线观看视频国产中文字幕亚洲| 在线视频色国产色| av视频在线观看入口| 欧洲精品卡2卡3卡4卡5卡区| 日韩精品中文字幕看吧| 少妇丰满av| 亚洲成av人片免费观看| 亚洲欧美日韩高清在线视频| 悠悠久久av| 中文字幕熟女人妻在线| 桃色一区二区三区在线观看| 无限看片的www在线观看| 亚洲成人中文字幕在线播放| 国产伦人伦偷精品视频| 国产av一区在线观看免费| 日本成人三级电影网站| 国产精品一区二区三区四区久久| 午夜激情欧美在线| 国语自产精品视频在线第100页| 美女高潮喷水抽搐中文字幕| 亚洲人与动物交配视频| 亚洲最大成人中文| 亚洲av成人av| 一卡2卡三卡四卡精品乱码亚洲| 国产99白浆流出| 精品国产乱码久久久久久男人| 美女扒开内裤让男人捅视频| 欧美日韩黄片免| 欧美日韩中文字幕国产精品一区二区三区| 免费在线观看成人毛片| 亚洲欧美精品综合一区二区三区| 久久久久久久午夜电影| 熟女少妇亚洲综合色aaa.| 老汉色∧v一级毛片| 国内毛片毛片毛片毛片毛片| 高清在线国产一区| 国产高潮美女av| 99国产精品一区二区蜜桃av| 国产综合懂色| 久久欧美精品欧美久久欧美| 欧美xxxx黑人xx丫x性爽| 亚洲国产日韩欧美精品在线观看 | 亚洲国产精品999在线| 十八禁网站免费在线| 国产亚洲欧美98| 一进一出抽搐gif免费好疼| 国产高清有码在线观看视频| 亚洲天堂国产精品一区在线| h日本视频在线播放| 女生性感内裤真人,穿戴方法视频| 欧美另类亚洲清纯唯美| 小蜜桃在线观看免费完整版高清| 色老头精品视频在线观看| 最近视频中文字幕2019在线8| 亚洲欧洲精品一区二区精品久久久| 男人舔女人的私密视频| 男女之事视频高清在线观看| 久久人妻av系列| 身体一侧抽搐| 欧美色视频一区免费| 国产视频一区二区在线看| 国产精品久久视频播放| 日日摸夜夜添夜夜添小说| 香蕉av资源在线| 日本三级黄在线观看| 在线视频色国产色| 三级毛片av免费| 国产高潮美女av| tocl精华| 中文亚洲av片在线观看爽| 麻豆av在线久日| 黄色日韩在线| 日韩欧美免费精品| 欧美日本视频| 国产精品自产拍在线观看55亚洲| 成人精品一区二区免费| 成人特级av手机在线观看| 天堂网av新在线| 亚洲18禁久久av| 午夜久久久久精精品| 精品国产美女av久久久久小说| 日韩欧美国产在线观看| 宅男免费午夜| 亚洲欧洲精品一区二区精品久久久| www日本黄色视频网| 很黄的视频免费| 欧美三级亚洲精品| 欧美在线一区亚洲| 小蜜桃在线观看免费完整版高清| 国产成人福利小说| 国产1区2区3区精品| 亚洲精品国产精品久久久不卡| 国产在线精品亚洲第一网站| 婷婷六月久久综合丁香| 最新在线观看一区二区三区| ponron亚洲| 成人性生交大片免费视频hd| 老汉色∧v一级毛片| 在线观看免费午夜福利视频| 国产三级中文精品| 18禁黄网站禁片午夜丰满| 国产精品久久久久久亚洲av鲁大| 别揉我奶头~嗯~啊~动态视频| 人妻夜夜爽99麻豆av| 俺也久久电影网| 国产一区二区三区视频了| 在线观看午夜福利视频| 国产亚洲av高清不卡| 免费看十八禁软件| 色老头精品视频在线观看| 亚洲欧美日韩卡通动漫| 欧美日韩国产亚洲二区| 亚洲av第一区精品v没综合| 久久久久免费精品人妻一区二区| 亚洲精品美女久久久久99蜜臀| 日韩欧美在线二视频| 久9热在线精品视频| 好男人在线观看高清免费视频| 亚洲av片天天在线观看| 美女高潮喷水抽搐中文字幕| 很黄的视频免费| 女同久久另类99精品国产91| 叶爱在线成人免费视频播放| 久久久久国产一级毛片高清牌| 不卡av一区二区三区| 午夜免费成人在线视频| 日日干狠狠操夜夜爽| 他把我摸到了高潮在线观看| 久久精品国产清高在天天线| 波多野结衣高清作品| 国产av不卡久久| 床上黄色一级片| 国产淫片久久久久久久久 | 国产蜜桃级精品一区二区三区| 精品免费久久久久久久清纯| 亚洲精品乱码久久久v下载方式 | 两个人看的免费小视频| 一进一出抽搐gif免费好疼| a级毛片a级免费在线| 99久国产av精品| 亚洲精品一卡2卡三卡4卡5卡| 99re在线观看精品视频| 一个人免费在线观看电影 | 国产伦在线观看视频一区| 亚洲成人中文字幕在线播放| 亚洲黑人精品在线| 亚洲av成人精品一区久久| 亚洲成人精品中文字幕电影| 夜夜爽天天搞| 高潮久久久久久久久久久不卡| 成年女人看的毛片在线观看| 国产午夜福利久久久久久| 久久久久久国产a免费观看| 99久久综合精品五月天人人| 一个人看的www免费观看视频| 黄色视频,在线免费观看| 精品久久久久久久久久久久久| 欧美又色又爽又黄视频| 成在线人永久免费视频| 特大巨黑吊av在线直播| 欧美日韩综合久久久久久 | 成人一区二区视频在线观看| 在线观看一区二区三区| 可以在线观看的亚洲视频| 麻豆成人av在线观看| 午夜福利免费观看在线| 国产成人啪精品午夜网站| 欧美日韩精品网址| 亚洲,欧美精品.| 热99re8久久精品国产| 久久久久久久久免费视频了| 国产精品99久久久久久久久| 日韩欧美精品v在线| 色精品久久人妻99蜜桃| 精品国内亚洲2022精品成人| 少妇丰满av| 日韩有码中文字幕| 国产精品1区2区在线观看.| 久久亚洲精品不卡| 精品欧美国产一区二区三| 99国产精品99久久久久| 99热这里只有是精品50| 黄色 视频免费看| 一个人免费在线观看的高清视频| 校园春色视频在线观看| 国语自产精品视频在线第100页| 搡老岳熟女国产| 久久久久国内视频| 99久久99久久久精品蜜桃| 欧美性猛交黑人性爽| 搡老熟女国产l中国老女人| 国产精品自产拍在线观看55亚洲| 香蕉久久夜色| 黄色视频,在线免费观看| 欧美日韩国产亚洲二区| 国产伦人伦偷精品视频| 国产毛片a区久久久久| cao死你这个sao货| 黄色日韩在线| 免费观看的影片在线观看| 亚洲中文字幕一区二区三区有码在线看 | 亚洲18禁久久av| 看片在线看免费视频| 叶爱在线成人免费视频播放| 亚洲最大成人中文| 国产精品久久久久久人妻精品电影| 日本熟妇午夜| 99riav亚洲国产免费| 久久国产乱子伦精品免费另类| 99热这里只有是精品50| cao死你这个sao货| 99国产极品粉嫩在线观看| 欧美一级a爱片免费观看看| 成人午夜高清在线视频| 日韩精品青青久久久久久| 亚洲人成网站高清观看| 日日干狠狠操夜夜爽| 男人舔奶头视频| 亚洲天堂国产精品一区在线| а√天堂www在线а√下载| 国产高潮美女av| 久久伊人香网站| 一个人免费在线观看电影 | 人妻久久中文字幕网| 久久香蕉国产精品| 国产精品亚洲一级av第二区| 久久久国产成人精品二区| 成年女人永久免费观看视频| 久久香蕉精品热| 亚洲第一欧美日韩一区二区三区| 变态另类丝袜制服|