• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于數(shù)據(jù)分析的網(wǎng)絡(luò)健康評估系統(tǒng)

    2021-04-17 11:57:42王瑞雪袁劉顧戎程宇
    信息通信技術(shù)與政策 2021年3期
    關(guān)鍵詞:物理系統(tǒng)

    王瑞雪 袁劉 顧戎 程宇

    (1.中國移動(dòng)通信研究院網(wǎng)絡(luò)技術(shù)研究所,北京 100053;2.中移(蘇州)軟件技術(shù)有限公司,蘇州 215000;3.中移動(dòng)信息技術(shù)有限公司,北京 100037)

    0 引言

    數(shù)據(jù)中心作為科技創(chuàng)新和技術(shù)應(yīng)用的實(shí)體,已成為信息化發(fā)展的關(guān)鍵基礎(chǔ)設(shè)施,為數(shù)字經(jīng)濟(jì)發(fā)展提供了有力支撐。區(qū)別于傳統(tǒng)數(shù)據(jù)中心,基于云計(jì)算架構(gòu)搭建的新型數(shù)據(jù)中心可實(shí)現(xiàn)資源池化、業(yè)務(wù)服務(wù)化和管理自動(dòng)化[1]。網(wǎng)絡(luò)作為云計(jì)算數(shù)據(jù)中心重要的基礎(chǔ)設(shè)施資源,經(jīng)歷了虛擬化和軟件定義的架構(gòu)轉(zhuǎn)型,可實(shí)現(xiàn)網(wǎng)絡(luò)資源的集中調(diào)度和網(wǎng)絡(luò)配置自動(dòng)化。

    隨著新型數(shù)據(jù)中心規(guī)模不斷攀升,業(yè)務(wù)批量上云,網(wǎng)絡(luò)作為云數(shù)據(jù)中心基礎(chǔ)設(shè)施資源的重要性與日俱增,云數(shù)據(jù)中心網(wǎng)絡(luò)的復(fù)雜度和規(guī)模性對網(wǎng)絡(luò)的運(yùn)維提出了挑戰(zhàn)。一方面,由于虛擬化技術(shù)的引入,網(wǎng)絡(luò)對象不局限于硬件物理設(shè)備,還包括基于物理設(shè)備實(shí)現(xiàn)的虛擬網(wǎng)元和軟件態(tài)網(wǎng)絡(luò)設(shè)備,網(wǎng)絡(luò)對象呈現(xiàn)多樣化;另一方面,云化數(shù)據(jù)中心具備網(wǎng)絡(luò)部署動(dòng)態(tài)化和實(shí)時(shí)性的特征,傳統(tǒng)靜態(tài)網(wǎng)絡(luò)資源收集機(jī)制存在盲區(qū),無法保證網(wǎng)絡(luò)信息的精確性。此外,數(shù)據(jù)中心規(guī)模增大后,網(wǎng)絡(luò)故障必然是一個(gè)大概率事件,如何降低網(wǎng)絡(luò)故障率或提前干預(yù)以最大程度降低網(wǎng)絡(luò)故障影響也必然成為云數(shù)據(jù)中心網(wǎng)絡(luò)運(yùn)維的重點(diǎn)。經(jīng)過實(shí)踐發(fā)現(xiàn),傳統(tǒng)的網(wǎng)絡(luò)運(yùn)維技術(shù)和工具運(yùn)維對象孤立單一、數(shù)據(jù)采集效率低、運(yùn)維場景有限,因此亟需研究新型云數(shù)據(jù)中心網(wǎng)絡(luò)運(yùn)維相關(guān)技術(shù)和工具,以實(shí)現(xiàn)網(wǎng)絡(luò)管理的高效率。

    網(wǎng)絡(luò)健康評估系統(tǒng)是結(jié)合云數(shù)據(jù)中心網(wǎng)絡(luò)特征進(jìn)行網(wǎng)絡(luò)建模,運(yùn)用動(dòng)態(tài)信息采集技術(shù),基于數(shù)據(jù)分析手段,對云數(shù)據(jù)中心網(wǎng)絡(luò)運(yùn)行情況進(jìn)行分析評估的網(wǎng)絡(luò)管理系統(tǒng),目的在于實(shí)現(xiàn)故障的快速發(fā)現(xiàn)、定位和閉環(huán)處理,提升網(wǎng)絡(luò)管理效率,保障網(wǎng)絡(luò)穩(wěn)定運(yùn)行[2-3]。網(wǎng)絡(luò)健康評估系統(tǒng)通過提煉關(guān)鍵網(wǎng)絡(luò)對象和對象關(guān)聯(lián)關(guān)系,實(shí)時(shí)獲取精確的網(wǎng)絡(luò)原始數(shù)據(jù),通過多維度分析網(wǎng)絡(luò)運(yùn)行狀態(tài)和關(guān)鍵事件,對網(wǎng)絡(luò)行為進(jìn)行預(yù)測和判斷,進(jìn)而形成對網(wǎng)絡(luò)系統(tǒng)健康狀況的綜合評判。

    1 數(shù)據(jù)中心網(wǎng)絡(luò)介紹

    云數(shù)據(jù)中心網(wǎng)絡(luò)包含網(wǎng)絡(luò)基礎(chǔ)設(shè)施和借助于虛擬化技術(shù)構(gòu)建的云網(wǎng)絡(luò)(見圖1)。網(wǎng)絡(luò)基礎(chǔ)設(shè)施包含物理交換設(shè)備、物理網(wǎng)絡(luò)增值服務(wù)設(shè)備以及設(shè)備之間的物理連接,目前數(shù)據(jù)中心組網(wǎng)一般按照葉脊型(Spine-Leaf)網(wǎng)絡(luò)架構(gòu),脊交換機(jī)與葉交換機(jī)全互聯(lián),實(shí)現(xiàn)數(shù)據(jù)中心東西向流量高效轉(zhuǎn)發(fā)。云網(wǎng)絡(luò)是利用虛擬化技術(shù)在網(wǎng)絡(luò)基礎(chǔ)設(shè)施之上疊加的邏輯網(wǎng)絡(luò)服務(wù),由一系列虛擬節(jié)點(diǎn)和虛擬鏈路構(gòu)成,實(shí)現(xiàn)物理網(wǎng)絡(luò)資源共享、邏輯網(wǎng)絡(luò)資源隔離,符合云的特征。為實(shí)現(xiàn)云網(wǎng)絡(luò)集中管理和自動(dòng)配置,云網(wǎng)絡(luò)會搭配管理控制層,實(shí)現(xiàn)業(yè)務(wù)網(wǎng)絡(luò)的編排、配置生成、配置下發(fā)和管理功能[4]。

    圖1 云數(shù)據(jù)中心網(wǎng)絡(luò)示意圖

    傳統(tǒng)網(wǎng)絡(luò)維護(hù)管理重點(diǎn)在基礎(chǔ)設(shè)施層面,能夠監(jiān)控物理設(shè)備和物理鏈路,監(jiān)控粒度一般為分鐘級且監(jiān)控對象較為離散,但虛擬云網(wǎng)絡(luò)當(dāng)前屬于監(jiān)控盲區(qū),尚未覆蓋。面向新型數(shù)據(jù)中心的網(wǎng)絡(luò)健康評估范圍應(yīng)能夠同時(shí)涵蓋云網(wǎng)絡(luò)和網(wǎng)絡(luò)基礎(chǔ)設(shè)施,并通過二者的映射關(guān)系實(shí)現(xiàn)監(jiān)控?cái)?shù)據(jù)的相互關(guān)聯(lián),全面真實(shí)有效地反映數(shù)據(jù)中心網(wǎng)絡(luò)情況。

    2 網(wǎng)絡(luò)健康評估系統(tǒng)關(guān)鍵技術(shù)

    2.1 系統(tǒng)介紹

    區(qū)別于傳統(tǒng)網(wǎng)絡(luò)運(yùn)營維護(hù)工具,面向新型數(shù)據(jù)中心的網(wǎng)絡(luò)健康評估系統(tǒng)能夠可視化網(wǎng)絡(luò)運(yùn)行狀態(tài),進(jìn)行網(wǎng)絡(luò)健康分析。為保證評估結(jié)果的真實(shí)性和全面性,網(wǎng)絡(luò)健康評估系統(tǒng)在網(wǎng)絡(luò)模型方面對網(wǎng)絡(luò)對象進(jìn)行擴(kuò)展和延伸,并通過提取對象間的關(guān)聯(lián)關(guān)系,形成網(wǎng)絡(luò)的數(shù)字世界。在數(shù)據(jù)采集階段,網(wǎng)絡(luò)健康評估系統(tǒng)通過引入新的采集機(jī)制優(yōu)化采集方法,提高采集精度,結(jié)合網(wǎng)絡(luò)模型定義采集內(nèi)容、完善采集數(shù)據(jù),充分反映設(shè)備運(yùn)行狀況和網(wǎng)絡(luò)環(huán)境變化;在數(shù)據(jù)分析階段,網(wǎng)絡(luò)健康評估系統(tǒng)結(jié)合典型網(wǎng)絡(luò)行為選擇異常檢測算法實(shí)現(xiàn)異常情況的動(dòng)態(tài)檢測;最后,網(wǎng)絡(luò)健康評估系統(tǒng)根據(jù)評估標(biāo)準(zhǔn)對數(shù)據(jù)中心網(wǎng)絡(luò)健康狀態(tài)進(jìn)行綜合評估。

    如圖2所示,網(wǎng)絡(luò)健康評估系統(tǒng)自下而上包含數(shù)據(jù)采集、網(wǎng)絡(luò)建模、數(shù)據(jù)分析和網(wǎng)絡(luò)評估四大模塊。數(shù)據(jù)采集模塊是網(wǎng)絡(luò)健康評估系統(tǒng)的前沿陣地,利用高精度的采集方式面向云數(shù)據(jù)中心網(wǎng)絡(luò)設(shè)備收集網(wǎng)絡(luò)數(shù)據(jù);數(shù)據(jù)采集技術(shù)應(yīng)充分考慮數(shù)據(jù)實(shí)時(shí)性、采集精度和設(shè)備壓力。網(wǎng)絡(luò)建模模塊是網(wǎng)絡(luò)健康評估系統(tǒng)的核心模塊,網(wǎng)絡(luò)模型的準(zhǔn)確度和全面性直接影響網(wǎng)絡(luò)健康評估結(jié)果的準(zhǔn)確度和全面性;網(wǎng)絡(luò)模型應(yīng)覆蓋所有網(wǎng)絡(luò)對象,真實(shí)展現(xiàn)網(wǎng)絡(luò)對象的關(guān)聯(lián)關(guān)系。數(shù)據(jù)分析模塊是網(wǎng)絡(luò)健康評估系統(tǒng)的中樞神經(jīng),利用數(shù)據(jù)分析技術(shù)識別網(wǎng)絡(luò)對象指標(biāo)在不同業(yè)務(wù)場景下的數(shù)據(jù)行為,同時(shí)篩選異常行為;數(shù)據(jù)分析模塊應(yīng)采用高效準(zhǔn)確的分析算法。網(wǎng)絡(luò)評估模塊是網(wǎng)絡(luò)健康評估系統(tǒng)的智能引擎,能夠綜合數(shù)據(jù)采集、分析結(jié)果和網(wǎng)絡(luò)建模,通過推理和演練,找尋網(wǎng)絡(luò)事件根因,并從全局性視角對網(wǎng)絡(luò)運(yùn)行狀態(tài)進(jìn)行分析評估,給出行為變化的風(fēng)險(xiǎn)預(yù)警。

    圖2 網(wǎng)絡(luò)健康評估系統(tǒng)示意圖

    2.2 關(guān)鍵技術(shù)

    2.2.1 數(shù)據(jù)采集

    云計(jì)算數(shù)據(jù)中心網(wǎng)絡(luò)健康狀況評估需要依賴于網(wǎng)絡(luò)事件和網(wǎng)絡(luò)對象的實(shí)時(shí)數(shù)據(jù)分析,而數(shù)據(jù)獲取依賴于網(wǎng)絡(luò)健康評估系統(tǒng)的數(shù)據(jù)采集模塊,高精度高效率的數(shù)據(jù)采集方式有利于提高網(wǎng)絡(luò)評估的實(shí)時(shí)性和準(zhǔn)確性?;诤唵尉W(wǎng)絡(luò)管理協(xié)議(Simple Network Management Protocol,SNMP)的數(shù)據(jù)采集技術(shù)采集周期長、采集范圍單一,數(shù)據(jù)廣度和精度無法滿足系統(tǒng)需要,而基于遙測(Telemetry)的數(shù)據(jù)采集機(jī)制,采集數(shù)據(jù)精度高、覆蓋網(wǎng)絡(luò)對象全面,能夠滿足新型數(shù)據(jù)中心網(wǎng)絡(luò)健康評估系統(tǒng)網(wǎng)絡(luò)數(shù)據(jù)收集的需求。遙測面向物理設(shè)備或虛擬設(shè)備提供實(shí)時(shí)高速的數(shù)據(jù)采集功能,引入訂閱機(jī)制代替查詢,訂閱后設(shè)備可持續(xù)上報(bào)數(shù)據(jù),減輕設(shè)備處理查詢請求的壓力。根據(jù)數(shù)據(jù)類型,網(wǎng)絡(luò)健康評估系統(tǒng)采用的數(shù)據(jù)采集訂閱機(jī)制包含周期上報(bào)、變更上報(bào)和增量上報(bào)3類,分別對應(yīng)周期性評估的數(shù)據(jù)、設(shè)備行為變化強(qiáng)相關(guān)的數(shù)據(jù)和存量基數(shù)較大的數(shù)據(jù)。

    (1)周期上報(bào)的訂閱機(jī)制用于采集需要周期性評估分析的數(shù)據(jù),訂閱方式為周期性數(shù)據(jù)訂閱上報(bào),通過訂閱采集周期實(shí)現(xiàn)數(shù)據(jù)的周期性采集。例如針對硬件設(shè)備CPU、內(nèi)存等資源利用率數(shù)據(jù)、端口的收發(fā)包數(shù)等網(wǎng)絡(luò)對象指標(biāo)數(shù)據(jù)采用周期上報(bào)的訂閱機(jī)制,采集周期一般設(shè)置為秒級別,對于部分實(shí)時(shí)性指標(biāo)采集周期可以調(diào)整至毫秒級別。

    (2)變更上報(bào)的訂閱機(jī)制用于采集設(shè)備行為變化強(qiáng)相關(guān)的數(shù)據(jù),當(dāng)設(shè)備行為變化達(dá)到一定條件時(shí)觸發(fā)上報(bào)機(jī)制,一般用于上報(bào)網(wǎng)絡(luò)事件發(fā)生,例如硬件設(shè)備交換芯片隊(duì)列出現(xiàn)擁塞造成報(bào)文丟棄,可通過變更上報(bào)發(fā)現(xiàn)隊(duì)列擁塞的網(wǎng)絡(luò)事件。

    (3)增量上報(bào)的訂閱機(jī)制用于數(shù)據(jù)存量基數(shù)較大的數(shù)據(jù)指標(biāo),首次上報(bào)全量數(shù)據(jù)后,后續(xù)變化的數(shù)據(jù)通過增量上報(bào)的方式實(shí)現(xiàn)數(shù)據(jù)采集。增量上報(bào)一般用于表項(xiàng)數(shù)據(jù)的采集,例如轉(zhuǎn)發(fā)面表項(xiàng)、路由表、ARP表等,采集周期一般為秒級。

    2.2.2 網(wǎng)絡(luò)建模

    網(wǎng)絡(luò)建模將網(wǎng)絡(luò)進(jìn)行抽象,通過抽取和提煉將網(wǎng)絡(luò)量化,實(shí)現(xiàn)網(wǎng)絡(luò)數(shù)字化。新型數(shù)據(jù)中心網(wǎng)絡(luò)既包含物理網(wǎng)絡(luò)又包含云網(wǎng)絡(luò),其中物理網(wǎng)絡(luò)包含物理設(shè)備、物理鏈路和網(wǎng)絡(luò)協(xié)議,云網(wǎng)絡(luò)包含虛擬節(jié)點(diǎn)、虛擬鏈路和網(wǎng)絡(luò)協(xié)議。因此,面向新型數(shù)據(jù)中心網(wǎng)絡(luò)模型應(yīng)通過對物理網(wǎng)絡(luò)和云網(wǎng)絡(luò)的逐層梳理,形成細(xì)粒度的網(wǎng)絡(luò)對象;通過分析網(wǎng)絡(luò)對象之間的關(guān)聯(lián)關(guān)系,歸納提取對象關(guān)系,;通過對象關(guān)聯(lián)關(guān)系的特征分析和整合形成新型數(shù)據(jù)中心網(wǎng)絡(luò)的數(shù)字模型表達(dá)。

    (1)網(wǎng)絡(luò)對象包含物理網(wǎng)絡(luò)對象和云網(wǎng)絡(luò)對象兩類,其中每一類又包含設(shè)備(點(diǎn))、鏈路(線)和協(xié)議(面)3個(gè)層級(見圖3)。物理網(wǎng)絡(luò)由物理設(shè)備、物理鏈路和協(xié)議構(gòu)成:物理設(shè)備指構(gòu)成數(shù)據(jù)中心網(wǎng)絡(luò)的基礎(chǔ)物理硬件資源,包括交換機(jī)、路由器、防火墻、負(fù)載均衡器等網(wǎng)絡(luò)設(shè)備,物理硬件設(shè)備根據(jù)構(gòu)成細(xì)分為單板(主控板、接口板、交換網(wǎng)板等)、電源、風(fēng)扇等網(wǎng)絡(luò)對象;物理鏈路指物理設(shè)備間互聯(lián)鏈路的物理資源,實(shí)現(xiàn)物理節(jié)點(diǎn)的連通,網(wǎng)絡(luò)對象包含端口、光模塊等;協(xié)議指用于指導(dǎo)多個(gè)物理節(jié)點(diǎn)之間數(shù)據(jù)包轉(zhuǎn)發(fā)的路由協(xié)議以及單節(jié)點(diǎn)、多節(jié)點(diǎn)之間的保護(hù)協(xié)議,共同構(gòu)成網(wǎng)絡(luò)的轉(zhuǎn)發(fā)平面和保護(hù)平面。云網(wǎng)絡(luò)設(shè)備由虛擬網(wǎng)絡(luò)節(jié)點(diǎn)、虛擬鏈路和協(xié)議構(gòu)成:云網(wǎng)絡(luò)一般采用隧道技術(shù)構(gòu)建,虛擬節(jié)點(diǎn)包含隧道接入點(diǎn),虛擬鏈路包含邏輯隧道,協(xié)議包含云網(wǎng)絡(luò)控制面和轉(zhuǎn)發(fā)面協(xié)議。

    圖3 網(wǎng)絡(luò)對象分類示意圖

    (2)網(wǎng)絡(luò)對象關(guān)系表征網(wǎng)絡(luò)對象之間的關(guān)聯(lián)關(guān)系,結(jié)合網(wǎng)絡(luò)架構(gòu)和對象屬性,其可以表征為從屬關(guān)系、關(guān)聯(lián)關(guān)系和連接關(guān)系3類:從屬關(guān)系指對象A在物理屬性或業(yè)務(wù)屬性上屬于B,關(guān)聯(lián)關(guān)系指對象A和對象B存在相同屬性,連接關(guān)系指對象A和對象B形成某種連接。如圖4所示,從屬關(guān)系一般表現(xiàn)在節(jié)點(diǎn)和協(xié)議內(nèi)的部分關(guān)系提取中,例如基于單節(jié)點(diǎn)的物理器件包含單板、單板又包含端口等,數(shù)據(jù)中心域內(nèi)協(xié)議和協(xié)議參數(shù)的包含關(guān)系;關(guān)聯(lián)關(guān)系一般表現(xiàn)在不同類型的對象之間存在同一個(gè)屬性,例如域內(nèi)協(xié)議鄰居和接口存在接口IP地址相同的屬性;連接關(guān)系一般表現(xiàn)在物理和邏輯鏈路上,例如兩臺設(shè)備的物理端口之間存在物理鏈路,兩臺虛擬節(jié)點(diǎn)之間存在邏輯鏈路。

    圖4 網(wǎng)絡(luò)對象關(guān)聯(lián)關(guān)系示意圖

    (3)如圖5所示,通過對網(wǎng)絡(luò)對象和對象關(guān)系的整合,建立網(wǎng)絡(luò)模型,可以數(shù)字模型的方式呈現(xiàn)新型數(shù)據(jù)中心網(wǎng)絡(luò)。

    圖5 交換機(jī)A-B啟用BGP協(xié)議網(wǎng)絡(luò)模型示意圖

    2.2.3 數(shù)據(jù)分析

    網(wǎng)絡(luò)健康評估系統(tǒng)數(shù)據(jù)分析模塊是通過構(gòu)建網(wǎng)絡(luò)對象特征值的異常檢測,便于及時(shí)發(fā)現(xiàn)運(yùn)行狀態(tài)、性能負(fù)荷和容量規(guī)格相關(guān)的網(wǎng)絡(luò)事件并做出響應(yīng)。數(shù)據(jù)分析技術(shù)包含網(wǎng)絡(luò)特征識別、選擇曲線擬合算法、構(gòu)建動(dòng)態(tài)基線和異常檢測4部分。

    (1)數(shù)據(jù)分析首先需要分析數(shù)據(jù)特征,網(wǎng)絡(luò)數(shù)據(jù)具備特殊性,例如同一個(gè)網(wǎng)絡(luò)對象指標(biāo)在不同的業(yè)務(wù)場景下存在不同的數(shù)據(jù)行為。因此,需要結(jié)合對象特征和行為特征進(jìn)行特征識別對網(wǎng)絡(luò)對象進(jìn)行分類。不同類別的網(wǎng)絡(luò)對象選擇不同的曲線擬合算法。

    (2)時(shí)間序列分解算法和高斯回歸算法是曲線擬合的經(jīng)典算法。時(shí)間序列分解算法是對按時(shí)間維度統(tǒng)計(jì)的數(shù)據(jù)指標(biāo)序列進(jìn)行分析,尋找序列中的周期性和趨勢性,進(jìn)而進(jìn)行時(shí)序預(yù)測和異常檢測;高斯回歸算法是使用高斯函數(shù)系對數(shù)據(jù)點(diǎn)集進(jìn)行函數(shù)逼近的擬合。通常數(shù)據(jù)特征包含周期型和離散型兩類,針對周期穩(wěn)定的網(wǎng)絡(luò)對象指標(biāo)一般采用時(shí)間序列分解算法,而針對取值穩(wěn)定的網(wǎng)絡(luò)對象指標(biāo),一般采用高斯回歸算法。

    (3)考慮云數(shù)據(jù)中心網(wǎng)絡(luò)對象具有實(shí)時(shí)變化的特征,基線應(yīng)動(dòng)態(tài)構(gòu)建。在真實(shí)網(wǎng)絡(luò)環(huán)境下,因網(wǎng)絡(luò)抖動(dòng)存在的偶發(fā)性異常行為不可避免,異常檢測算法需具備噪聲抑制能力,能夠通過調(diào)整基線敏感度例如增加變化量因子來降低干擾因素、提高對偶發(fā)性行為異常的容忍度。

    (4)異常檢測是通過比對真實(shí)數(shù)據(jù)和基線值,判斷網(wǎng)絡(luò)是否異常,對于異常數(shù)據(jù)給出風(fēng)險(xiǎn)提示。為容忍偶發(fā)性行為異常,異常檢測需要同步制定異常規(guī)則,例如連續(xù)多個(gè)周期越界才標(biāo)記為基線異常,此時(shí)將原始數(shù)據(jù)和擬合的數(shù)據(jù)基線逐點(diǎn)進(jìn)行比較,統(tǒng)計(jì)越界數(shù)據(jù)的連續(xù)周期數(shù),若滿足規(guī)則則進(jìn)行異常事件告警。

    2.2.4 網(wǎng)絡(luò)評估網(wǎng)絡(luò)健康評估系統(tǒng)的最終目的是通過網(wǎng)絡(luò)量化和數(shù)字化對網(wǎng)絡(luò)整體情況進(jìn)行全面、準(zhǔn)確和實(shí)時(shí)評估。網(wǎng)絡(luò)評估是通過網(wǎng)絡(luò)事件感知,從全局性視角進(jìn)行多設(shè)備、關(guān)聯(lián)性網(wǎng)絡(luò)運(yùn)行狀態(tài)分析,得出新型數(shù)據(jù)中心的網(wǎng)絡(luò)健康狀況,評估結(jié)果可用于網(wǎng)絡(luò)故障預(yù)警、定位、根因分析和網(wǎng)絡(luò)的優(yōu)化設(shè)計(jì)。

    按照事件特征,網(wǎng)絡(luò)事件分為運(yùn)行狀態(tài)、性能負(fù)荷和容量規(guī)格3類。運(yùn)行狀態(tài)類事件可以反映網(wǎng)絡(luò)對象是否正常運(yùn)行,例如物理部件運(yùn)行狀態(tài)和協(xié)議對象運(yùn)行狀態(tài);性能負(fù)荷類事件可以反映網(wǎng)絡(luò)對象性能類度量指標(biāo)是否超過閾值,運(yùn)行負(fù)荷是否存在風(fēng)險(xiǎn);容量規(guī)格事件用于反映網(wǎng)絡(luò)對象容量類度量指標(biāo)是否超過閾值并存在風(fēng)險(xiǎn)。網(wǎng)絡(luò)事件不是孤立的,同一時(shí)間范圍內(nèi)觸發(fā)的網(wǎng)絡(luò)事件相互聯(lián)系,例如空間相關(guān)性聯(lián)系和因果相關(guān)性聯(lián)系,為更準(zhǔn)確地進(jìn)行網(wǎng)絡(luò)評估,需要結(jié)合網(wǎng)絡(luò)依賴關(guān)系并通過推理和演練,從眾多網(wǎng)絡(luò)事件中找尋根因事件。在空間上存在關(guān)聯(lián)關(guān)系的網(wǎng)絡(luò)對象之間會產(chǎn)生相互影響,例如對象A異常時(shí),會關(guān)聯(lián)導(dǎo)致其他某個(gè)或多個(gè)對象同時(shí)出現(xiàn)異常,此時(shí)需進(jìn)行聚合分析,從眾多網(wǎng)絡(luò)對象事件中推導(dǎo)挖掘出根因事件對象A異常。對于存在因果依賴關(guān)系的網(wǎng)絡(luò)對象事件,通過分析其因果關(guān)系,能進(jìn)行網(wǎng)絡(luò)可能根因事件的推理?;诟蚴录陀筛蚴录l(fā)的網(wǎng)絡(luò)事件,可以對云計(jì)算數(shù)據(jù)中心網(wǎng)絡(luò)健康狀況進(jìn)行綜合評估。

    當(dāng)前云計(jì)算數(shù)據(jù)中心網(wǎng)絡(luò)健康評估系統(tǒng)從可靠性、網(wǎng)絡(luò)容量兩個(gè)維度對網(wǎng)絡(luò)進(jìn)行評估。可靠性包含整體網(wǎng)絡(luò)級別、設(shè)備級別、鏈路級別、協(xié)議級別,通過對網(wǎng)絡(luò)事件的分析,判斷事件是否對網(wǎng)絡(luò)可靠性產(chǎn)生影響,若產(chǎn)生影響則通過對象和對象關(guān)聯(lián)關(guān)系分析給出影響范圍,并進(jìn)行行為變化的風(fēng)險(xiǎn)預(yù)警。網(wǎng)絡(luò)容量也包含網(wǎng)絡(luò)級別、設(shè)備級別、鏈路級別和協(xié)議級別,通過對網(wǎng)絡(luò)事件的評估,判斷事件是否對網(wǎng)絡(luò)容量產(chǎn)生影響,若產(chǎn)生影響則給出容量影響程度,針對未來趨勢給出風(fēng)險(xiǎn)提示和擴(kuò)容提醒。

    3 系統(tǒng)試驗(yàn)

    3.1 環(huán)境介紹

    某運(yùn)營商私有云數(shù)據(jù)中心物理網(wǎng)絡(luò)按照標(biāo)準(zhǔn)組網(wǎng)模式葉脊型(Spine-Leaf)網(wǎng)絡(luò)架構(gòu)進(jìn)行建設(shè),目前其功能網(wǎng)元例如防火墻和負(fù)載均衡器為硬件形態(tài),業(yè)務(wù)接入交換機(jī)和出口交換機(jī)合并設(shè)置。云網(wǎng)絡(luò)借助于網(wǎng)絡(luò)虛擬化技術(shù)實(shí)現(xiàn),對于虛擬交換機(jī)的云網(wǎng)絡(luò)接入點(diǎn)為虛擬交換機(jī),對于裸金屬服務(wù)器的云網(wǎng)絡(luò)接入點(diǎn)為葉交換機(jī)。本文按照該拓?fù)浣Y(jié)構(gòu)搭建系統(tǒng)試驗(yàn)環(huán)境,具體參見圖6。

    圖6 某運(yùn)營商私有云組網(wǎng)架構(gòu)示意圖

    本文將網(wǎng)絡(luò)健康評估系統(tǒng)部署于上述試驗(yàn)環(huán)境內(nèi),前端面向脊交換機(jī)、葉交換機(jī)和業(yè)務(wù)接入交換機(jī)進(jìn)行數(shù)據(jù)采集,后端進(jìn)行數(shù)據(jù)分析和網(wǎng)絡(luò)評估。目前,已經(jīng)納入采集的信息包含交換機(jī)的配置信息、表項(xiàng)信息、日志信息和常規(guī)交換機(jī)維護(hù)指標(biāo)信息,其中常規(guī)交換機(jī)維護(hù)指標(biāo)信息進(jìn)行周期性采集(采集周期為10 s)。表項(xiàng)信息為本試驗(yàn)新增采集數(shù)據(jù),因表項(xiàng)數(shù)據(jù)存量基數(shù)較大,故采用增量方式進(jìn)行表項(xiàng)信息的訂閱。

    3.2 系統(tǒng)驗(yàn)證

    本試驗(yàn)采用故障觸發(fā)方式驗(yàn)證網(wǎng)絡(luò)健康評估系統(tǒng)的準(zhǔn)確度和完備性,因表項(xiàng)信息為本次新增采集數(shù)據(jù),故選用表項(xiàng)異常故障場景,通過模擬業(yè)務(wù)上線持續(xù)注入路由表項(xiàng),觀察系統(tǒng)運(yùn)行反應(yīng)。通過系統(tǒng)數(shù)據(jù)采集和數(shù)據(jù)分析,發(fā)現(xiàn)兩臺葉交換機(jī)內(nèi)存指標(biāo)出現(xiàn)異常,監(jiān)測指標(biāo)呈增長趨勢并持續(xù)超過基線預(yù)警值(70%)(見圖7),但全網(wǎng)交換機(jī)平均內(nèi)存利用率不高。與此同時(shí),兩臺葉交換機(jī)和業(yè)務(wù)接入交換機(jī)/出口交換機(jī)的轉(zhuǎn)發(fā)表(Forwarding Info Base, FIB)表項(xiàng)利用率出現(xiàn)快速增長的現(xiàn)象。

    圖7 網(wǎng)絡(luò)指標(biāo)異常檢測圖示

    筆者依據(jù)2.2.2節(jié)中所述網(wǎng)絡(luò)模型,分析葉交換機(jī)內(nèi)存指標(biāo)和路由條目異常的關(guān)聯(lián)關(guān)系以及葉交換機(jī)和業(yè)務(wù)接入交換機(jī)的關(guān)聯(lián)關(guān)系發(fā)現(xiàn):兩臺葉交換機(jī)內(nèi)存增長在空間相關(guān)性上與其路由條目的異常增長存在關(guān)聯(lián)關(guān)系;兩臺葉交換機(jī)路由條目在時(shí)間相關(guān)性以及業(yè)務(wù)因果關(guān)系上與出口交換機(jī)的路由條目異常增長存在關(guān)聯(lián)關(guān)系。

    鑒于此,筆者推導(dǎo)出根因業(yè)務(wù)接入交換機(jī)路由條目異常增長,后續(xù)又結(jié)合業(yè)務(wù)接入交換機(jī)的路由配置信息分析,發(fā)現(xiàn)該路由增長均集中于同一個(gè)租戶虛擬網(wǎng)絡(luò)內(nèi)部,且外部路由引入條目過多,大多為子網(wǎng)下的主機(jī)路由(見圖8)。因此,筆者給出將外部網(wǎng)絡(luò)的路由進(jìn)行聚合,將主機(jī)路由聚合為網(wǎng)段路由的優(yōu)化建議。上述場景為某運(yùn)營商私有云資源池真實(shí)場景,伴隨著云資源池規(guī)模增加業(yè)務(wù)批量上線,且盒式葉交換機(jī)路由表項(xiàng)規(guī)格有限,主機(jī)路由的過量注入會直接造成設(shè)備表項(xiàng)不足,造成現(xiàn)網(wǎng)隱患。依托于網(wǎng)絡(luò)健康評估系統(tǒng)的采集精度、廣度和效率,能夠及時(shí)發(fā)現(xiàn)交換機(jī)內(nèi)存利用率和路由表項(xiàng)數(shù)據(jù)的增長,為后續(xù)的判斷和分析爭取時(shí)間。網(wǎng)絡(luò)模型和關(guān)聯(lián)分析推理能力是提升系統(tǒng)整體效率的關(guān)鍵,單個(gè)故障會導(dǎo)致多個(gè)異常事件發(fā)生,系統(tǒng)在檢測出事件或異常后,需要快速關(guān)聯(lián)線索,給出根因判斷。需要說明的是,由于云計(jì)算數(shù)據(jù)中心網(wǎng)絡(luò)復(fù)雜、故障場景眾多,網(wǎng)絡(luò)健康評估系統(tǒng)目前尚未實(shí)現(xiàn)完全的自動(dòng)化,部分信息整合方式仍然采用半自動(dòng)化方式進(jìn)行,這有待后續(xù)進(jìn)一步完善。

    圖8 根因推導(dǎo)過程示意圖

    4 結(jié)束語

    數(shù)據(jù)分析技術(shù)可以大幅提升網(wǎng)絡(luò)健康評估的效率和準(zhǔn)確度,進(jìn)而提升網(wǎng)絡(luò)運(yùn)維效率,提高網(wǎng)絡(luò)運(yùn)營質(zhì)量。網(wǎng)絡(luò)健康評估系統(tǒng)通過網(wǎng)絡(luò)建模、數(shù)據(jù)采集和綜合評估分析等技術(shù)實(shí)現(xiàn)網(wǎng)絡(luò)運(yùn)行狀態(tài)量化和可視化,便于網(wǎng)絡(luò)整體質(zhì)量動(dòng)態(tài)掌握和故障快速處理,目標(biāo)實(shí)現(xiàn)網(wǎng)絡(luò)故障事后發(fā)現(xiàn)向事前預(yù)測的轉(zhuǎn)變。目前,該系統(tǒng)對于傳統(tǒng)物理網(wǎng)絡(luò)的網(wǎng)絡(luò)模型具備通用性和普適性;而云網(wǎng)絡(luò)由于強(qiáng)依賴于實(shí)現(xiàn)機(jī)制,具備個(gè)性化和定制化的特征,該系統(tǒng)對云網(wǎng)絡(luò)網(wǎng)絡(luò)模型的覆蓋程度和全備性還需要做進(jìn)一步擴(kuò)展和提升。網(wǎng)絡(luò)承載質(zhì)量分析離不開業(yè)務(wù)流量分析,后續(xù)網(wǎng)絡(luò)健康評估系統(tǒng)將從業(yè)務(wù)維度對流量進(jìn)行精確統(tǒng)計(jì)、網(wǎng)絡(luò)時(shí)延抖動(dòng)精準(zhǔn)測量,通過繪制流量拓?fù)浜蜆I(yè)務(wù)畫像等,實(shí)現(xiàn)業(yè)務(wù)和網(wǎng)絡(luò)聯(lián)動(dòng),基于業(yè)務(wù)進(jìn)行網(wǎng)絡(luò)保障,同時(shí)也為后續(xù)網(wǎng)絡(luò)能力開放提供無限可能。

    猜你喜歡
    物理系統(tǒng)
    只因是物理
    井岡教育(2022年2期)2022-10-14 03:11:44
    Smartflower POP 一體式光伏系統(tǒng)
    WJ-700無人機(jī)系統(tǒng)
    ZC系列無人機(jī)遙感系統(tǒng)
    北京測繪(2020年12期)2020-12-29 01:33:58
    如何打造高效物理復(fù)習(xí)課——以“壓強(qiáng)”復(fù)習(xí)課為例
    基于PowerPC+FPGA顯示系統(tǒng)
    處處留心皆物理
    半沸制皂系統(tǒng)(下)
    我心中的物理
    連通與提升系統(tǒng)的最后一塊拼圖 Audiolab 傲立 M-DAC mini
    男人和女人高潮做爰伦理| 91在线精品国自产拍蜜月| 一区二区三区激情视频| 老司机深夜福利视频在线观看| 亚洲无线在线观看| 日韩精品青青久久久久久| 欧美日韩综合久久久久久 | 一区二区三区四区激情视频 | avwww免费| 一进一出好大好爽视频| 亚洲精品日韩av片在线观看| 久久久久亚洲av毛片大全| 波多野结衣高清作品| 免费av不卡在线播放| 日本熟妇午夜| 国产精品电影一区二区三区| 成人永久免费在线观看视频| 一本综合久久免费| 好看av亚洲va欧美ⅴa在| 欧美高清成人免费视频www| 人妻丰满熟妇av一区二区三区| 国产淫片久久久久久久久 | 99热这里只有是精品在线观看 | 午夜福利在线观看免费完整高清在 | 精品乱码久久久久久99久播| 亚洲美女视频黄频| 精品人妻1区二区| 午夜免费成人在线视频| 波多野结衣高清无吗| 麻豆久久精品国产亚洲av| 全区人妻精品视频| 中文亚洲av片在线观看爽| 在线观看免费视频日本深夜| 好看av亚洲va欧美ⅴa在| 亚洲最大成人中文| 国产精品国产高清国产av| 白带黄色成豆腐渣| 网址你懂的国产日韩在线| 变态另类成人亚洲欧美熟女| 国产精品一区二区三区四区免费观看 | 999久久久精品免费观看国产| 激情在线观看视频在线高清| h日本视频在线播放| 午夜日韩欧美国产| 国内精品久久久久精免费| 日韩大尺度精品在线看网址| 亚洲三级黄色毛片| 欧美潮喷喷水| 赤兔流量卡办理| 一本综合久久免费| 黄色一级大片看看| 黄色日韩在线| 女同久久另类99精品国产91| 国产免费一级a男人的天堂| 国产一级毛片七仙女欲春2| 两个人的视频大全免费| 一进一出抽搐gif免费好疼| 久久国产乱子伦精品免费另类| 欧美日韩黄片免| 成年女人看的毛片在线观看| 身体一侧抽搐| 身体一侧抽搐| 村上凉子中文字幕在线| 久久国产乱子免费精品| 国产真实伦视频高清在线观看 | 人人妻人人澡欧美一区二区| 亚洲 国产 在线| 国产野战对白在线观看| 久久99热这里只有精品18| 男女床上黄色一级片免费看| 色哟哟·www| 一个人免费在线观看电影| 亚洲精品影视一区二区三区av| 在线观看午夜福利视频| 亚洲人成电影免费在线| 免费在线观看亚洲国产| 亚洲精品456在线播放app | 成年免费大片在线观看| 女人被狂操c到高潮| 日韩欧美国产在线观看| 精品国内亚洲2022精品成人| 国产精品亚洲美女久久久| 一个人看的www免费观看视频| 国语自产精品视频在线第100页| 亚洲欧美日韩东京热| 欧美不卡视频在线免费观看| 网址你懂的国产日韩在线| 身体一侧抽搐| 色在线成人网| 搡女人真爽免费视频火全软件 | 三级国产精品欧美在线观看| 欧美+日韩+精品| 在线播放无遮挡| 内射极品少妇av片p| 91狼人影院| 脱女人内裤的视频| 国产av麻豆久久久久久久| 亚洲美女搞黄在线观看 | 国产欧美日韩一区二区三| 日韩欧美一区二区三区在线观看| 久久国产精品人妻蜜桃| 日本一本二区三区精品| 天天一区二区日本电影三级| 在线天堂最新版资源| 人妻夜夜爽99麻豆av| 一a级毛片在线观看| or卡值多少钱| 国产亚洲av嫩草精品影院| 欧美中文日本在线观看视频| 亚洲在线观看片| 99国产精品一区二区三区| 欧美日韩综合久久久久久 | bbb黄色大片| 99热6这里只有精品| 又爽又黄a免费视频| 国产精品人妻久久久久久| 国产精品乱码一区二三区的特点| 一级黄色大片毛片| av在线观看视频网站免费| 国产不卡一卡二| 日本精品一区二区三区蜜桃| 亚洲内射少妇av| 一级毛片久久久久久久久女| 高清毛片免费观看视频网站| 国产人妻一区二区三区在| 成年女人毛片免费观看观看9| 亚洲一区高清亚洲精品| 亚洲avbb在线观看| 乱码一卡2卡4卡精品| 搡老熟女国产l中国老女人| 全区人妻精品视频| 精品人妻1区二区| 男女床上黄色一级片免费看| 乱人视频在线观看| 色精品久久人妻99蜜桃| 51国产日韩欧美| 欧美高清性xxxxhd video| 真人做人爱边吃奶动态| 欧美最新免费一区二区三区 | 精品乱码久久久久久99久播| 极品教师在线免费播放| 一本久久中文字幕| 成年免费大片在线观看| 最近最新中文字幕大全电影3| 日韩大尺度精品在线看网址| 伦理电影大哥的女人| 中文字幕av成人在线电影| 婷婷六月久久综合丁香| 欧美性猛交黑人性爽| 亚洲aⅴ乱码一区二区在线播放| 久久6这里有精品| 熟女人妻精品中文字幕| 99久久成人亚洲精品观看| 国产伦在线观看视频一区| 两个人的视频大全免费| 精品一区二区免费观看| 亚洲av电影在线进入| 男插女下体视频免费在线播放| 18禁在线播放成人免费| 精品国产三级普通话版| 成年女人永久免费观看视频| 亚洲精品影视一区二区三区av| 99精品久久久久人妻精品| 成年女人毛片免费观看观看9| 国产aⅴ精品一区二区三区波| a级一级毛片免费在线观看| 欧美最新免费一区二区三区 | 亚洲av免费在线观看| 俄罗斯特黄特色一大片| 日韩欧美精品免费久久 | 91午夜精品亚洲一区二区三区 | 国产高清激情床上av| 99在线人妻在线中文字幕| 亚洲av熟女| 男人和女人高潮做爰伦理| 欧美另类亚洲清纯唯美| 看片在线看免费视频| 国内精品一区二区在线观看| 午夜福利在线在线| 欧美黑人欧美精品刺激| 丝袜美腿在线中文| 99热这里只有是精品在线观看 | 国产男靠女视频免费网站| av欧美777| 99在线人妻在线中文字幕| 日韩av在线大香蕉| 欧美xxxx性猛交bbbb| 久久午夜亚洲精品久久| 美女 人体艺术 gogo| 淫妇啪啪啪对白视频| 色5月婷婷丁香| 久久久久久九九精品二区国产| 国产毛片a区久久久久| 亚洲国产高清在线一区二区三| 亚洲精品一区av在线观看| 国产高清视频在线观看网站| 97热精品久久久久久| 色av中文字幕| 怎么达到女性高潮| 三级男女做爰猛烈吃奶摸视频| 91字幕亚洲| www.色视频.com| 久久午夜福利片| 老司机午夜福利在线观看视频| 亚洲三级黄色毛片| 日本成人三级电影网站| 亚洲 国产 在线| 99精品在免费线老司机午夜| 日本成人三级电影网站| 亚洲综合色惰| 搡老妇女老女人老熟妇| 美女高潮的动态| 国产亚洲精品av在线| 999久久久精品免费观看国产| 少妇人妻一区二区三区视频| 久久精品影院6| 国产精品久久视频播放| 女人被狂操c到高潮| 日韩欧美在线乱码| 夜夜看夜夜爽夜夜摸| 久久精品久久久久久噜噜老黄 | 亚洲中文字幕一区二区三区有码在线看| 中文字幕av成人在线电影| 亚洲激情在线av| 天天躁日日操中文字幕| 国内精品久久久久久久电影| 亚洲在线观看片| 夜夜看夜夜爽夜夜摸| 国产精品,欧美在线| 精品久久久久久久末码| 成人鲁丝片一二三区免费| netflix在线观看网站| 成人av一区二区三区在线看| 亚洲av.av天堂| 亚洲黑人精品在线| 亚洲美女搞黄在线观看 | 国产精品女同一区二区软件 | av视频在线观看入口| 欧美黄色片欧美黄色片| 91狼人影院| 国产一区二区在线观看日韩| 中国美女看黄片| 一本精品99久久精品77| 久久精品91蜜桃| 久久精品国产自在天天线| 毛片一级片免费看久久久久 | 中文字幕熟女人妻在线| 中文字幕免费在线视频6| 国产免费一级a男人的天堂| 精品久久国产蜜桃| 一级av片app| 国产视频一区二区在线看| 国产91精品成人一区二区三区| 午夜老司机福利剧场| 亚洲人成网站在线播| 51国产日韩欧美| 露出奶头的视频| 给我免费播放毛片高清在线观看| 久久精品国产99精品国产亚洲性色| 国产在线男女| 国产精品综合久久久久久久免费| 国产不卡一卡二| 精品久久久久久久末码| av黄色大香蕉| 国产老妇女一区| 91麻豆精品激情在线观看国产| 国产伦人伦偷精品视频| 成人亚洲精品av一区二区| 黄色日韩在线| 五月玫瑰六月丁香| 日韩亚洲欧美综合| 日日摸夜夜添夜夜添小说| 日韩免费av在线播放| 欧美性感艳星| 国产久久久一区二区三区| 成人特级黄色片久久久久久久| 精品人妻视频免费看| 亚洲黑人精品在线| 女人十人毛片免费观看3o分钟| 长腿黑丝高跟| 老鸭窝网址在线观看| 亚洲第一电影网av| 看十八女毛片水多多多| 宅男免费午夜| 午夜亚洲福利在线播放| 精品无人区乱码1区二区| 国产亚洲精品av在线| 亚洲精品一区av在线观看| 免费观看人在逋| 久久久国产成人精品二区| 亚洲最大成人中文| 3wmmmm亚洲av在线观看| 两个人视频免费观看高清| 国产精品久久电影中文字幕| 一级黄色大片毛片| 久久中文看片网| 成人av在线播放网站| 波多野结衣巨乳人妻| 精品人妻视频免费看| 国产高清有码在线观看视频| 午夜影院日韩av| 香蕉av资源在线| 在线观看午夜福利视频| 真实男女啪啪啪动态图| 日韩精品青青久久久久久| 搡老妇女老女人老熟妇| 蜜桃久久精品国产亚洲av| 国产精品国产高清国产av| 午夜福利欧美成人| 久久天躁狠狠躁夜夜2o2o| 国产色爽女视频免费观看| 久久久久久九九精品二区国产| 香蕉av资源在线| 好男人在线观看高清免费视频| 精品久久久久久久久久免费视频| 国产精品98久久久久久宅男小说| 久久国产乱子伦精品免费另类| 午夜免费成人在线视频| 99国产精品一区二区蜜桃av| 午夜福利成人在线免费观看| 亚洲专区国产一区二区| 天堂动漫精品| 亚洲欧美日韩高清专用| 窝窝影院91人妻| 日本与韩国留学比较| av视频在线观看入口| 国产aⅴ精品一区二区三区波| 女同久久另类99精品国产91| 亚洲,欧美精品.| 亚洲欧美激情综合另类| 黄色配什么色好看| 男女做爰动态图高潮gif福利片| 桃红色精品国产亚洲av| 国产高清三级在线| 亚洲精品亚洲一区二区| 国产精品女同一区二区软件 | 3wmmmm亚洲av在线观看| 性色av乱码一区二区三区2| 色av中文字幕| 成年女人看的毛片在线观看| 欧美性感艳星| 日韩欧美国产在线观看| 精品人妻1区二区| 免费看美女性在线毛片视频| 国产精品伦人一区二区| 小蜜桃在线观看免费完整版高清| 日韩人妻高清精品专区| 亚洲性夜色夜夜综合| 亚洲精品456在线播放app | 在线观看66精品国产| 亚洲,欧美精品.| 日本黄色片子视频| 午夜两性在线视频| 国产精品三级大全| 亚洲久久久久久中文字幕| 1000部很黄的大片| 一个人免费在线观看电影| 人妻久久中文字幕网| 日本黄大片高清| 精品午夜福利在线看| 成年女人毛片免费观看观看9| 国产精品亚洲美女久久久| 欧美又色又爽又黄视频| 天美传媒精品一区二区| 欧美最黄视频在线播放免费| 婷婷色综合大香蕉| 能在线免费观看的黄片| 亚洲经典国产精华液单 | 怎么达到女性高潮| 婷婷色综合大香蕉| 能在线免费观看的黄片| 国内精品一区二区在线观看| 久久精品综合一区二区三区| 精品午夜福利视频在线观看一区| 少妇熟女aⅴ在线视频| 国产精品,欧美在线| 日本撒尿小便嘘嘘汇集6| 欧美不卡视频在线免费观看| 99在线人妻在线中文字幕| 极品教师在线视频| 成人av一区二区三区在线看| 一个人免费在线观看电影| 久久久精品大字幕| 午夜福利欧美成人| 久久久国产成人免费| 国产精品亚洲一级av第二区| 制服丝袜大香蕉在线| 丁香六月欧美| 午夜a级毛片| 中文字幕精品亚洲无线码一区| 脱女人内裤的视频| 一进一出好大好爽视频| 老司机午夜福利在线观看视频| 国产精品久久久久久久电影| 我要看日韩黄色一级片| 级片在线观看| 美女免费视频网站| 亚洲国产色片| 国产亚洲精品久久久久久毛片| www.999成人在线观看| 精品99又大又爽又粗少妇毛片 | 99久久九九国产精品国产免费| 免费av毛片视频| 亚洲成a人片在线一区二区| 一进一出抽搐gif免费好疼| 日韩高清综合在线| 少妇高潮的动态图| 欧美性猛交黑人性爽| 免费观看精品视频网站| 日韩欧美一区二区三区在线观看| 国产视频内射| 悠悠久久av| 日本 欧美在线| 国产探花在线观看一区二区| 久久精品国产亚洲av香蕉五月| 俺也久久电影网| 免费av不卡在线播放| 成年女人永久免费观看视频| 国产大屁股一区二区在线视频| 久久欧美精品欧美久久欧美| 亚洲欧美日韩卡通动漫| 亚洲av电影不卡..在线观看| 欧美又色又爽又黄视频| 精品欧美国产一区二区三| 校园春色视频在线观看| 又紧又爽又黄一区二区| 国产精品日韩av在线免费观看| 亚洲成a人片在线一区二区| 国产高潮美女av| 男人和女人高潮做爰伦理| 免费av不卡在线播放| 超碰av人人做人人爽久久| 免费人成在线观看视频色| 久久精品综合一区二区三区| 国模一区二区三区四区视频| 日日摸夜夜添夜夜添小说| 男人舔女人下体高潮全视频| 能在线免费观看的黄片| 成人特级黄色片久久久久久久| 如何舔出高潮| 99久久九九国产精品国产免费| 国产精品一区二区三区四区久久| 午夜福利成人在线免费观看| 无遮挡黄片免费观看| 久久久国产成人免费| 女同久久另类99精品国产91| 亚洲aⅴ乱码一区二区在线播放| 欧美潮喷喷水| 国产欧美日韩精品亚洲av| 精品久久久久久久久久久久久| 成人三级黄色视频| 69人妻影院| 韩国av一区二区三区四区| 深夜精品福利| 高清在线国产一区| 美女免费视频网站| 在线看三级毛片| 亚洲专区中文字幕在线| 桃红色精品国产亚洲av| 欧美xxxx性猛交bbbb| 91在线观看av| 国产精品,欧美在线| 级片在线观看| 九九久久精品国产亚洲av麻豆| 一本一本综合久久| 99久久九九国产精品国产免费| 99国产综合亚洲精品| 午夜日韩欧美国产| 久久这里只有精品中国| 性插视频无遮挡在线免费观看| 亚洲av成人精品一区久久| 高清日韩中文字幕在线| 国产av一区在线观看免费| 日韩欧美精品v在线| 色视频www国产| 91午夜精品亚洲一区二区三区 | 熟女人妻精品中文字幕| 国产一区二区三区视频了| 欧美xxxx黑人xx丫x性爽| 亚洲午夜理论影院| 露出奶头的视频| 精品国内亚洲2022精品成人| 五月伊人婷婷丁香| 51国产日韩欧美| av天堂中文字幕网| 久久久久久久午夜电影| 国产精品伦人一区二区| 日本免费一区二区三区高清不卡| 男女之事视频高清在线观看| 亚洲天堂国产精品一区在线| 午夜a级毛片| 精品日产1卡2卡| 神马国产精品三级电影在线观看| 国产精品爽爽va在线观看网站| 亚洲久久久久久中文字幕| 国产午夜精品久久久久久一区二区三区 | 少妇的逼水好多| 亚洲av成人av| 久久久久久久亚洲中文字幕 | 欧美乱妇无乱码| 在线十欧美十亚洲十日本专区| 午夜福利免费观看在线| 国产探花在线观看一区二区| 他把我摸到了高潮在线观看| 色综合欧美亚洲国产小说| 亚洲专区中文字幕在线| 精品熟女少妇八av免费久了| 久久国产精品影院| 听说在线观看完整版免费高清| av在线老鸭窝| 国产主播在线观看一区二区| 别揉我奶头~嗯~啊~动态视频| 两性午夜刺激爽爽歪歪视频在线观看| 亚洲熟妇熟女久久| 九色国产91popny在线| 久久婷婷人人爽人人干人人爱| 亚洲一区高清亚洲精品| 人人妻,人人澡人人爽秒播| 三级毛片av免费| 身体一侧抽搐| 男人的好看免费观看在线视频| 亚洲精品一卡2卡三卡4卡5卡| 亚洲七黄色美女视频| 99国产精品一区二区三区| 日日干狠狠操夜夜爽| 欧美日韩瑟瑟在线播放| 岛国在线免费视频观看| 亚洲色图av天堂| 色播亚洲综合网| 一个人看的www免费观看视频| 日本a在线网址| 亚洲一区二区三区不卡视频| 性色av乱码一区二区三区2| 欧美激情久久久久久爽电影| 亚洲av第一区精品v没综合| 日韩精品中文字幕看吧| 亚洲精品影视一区二区三区av| 亚洲色图av天堂| 一区二区三区免费毛片| 亚洲av五月六月丁香网| 国产精品女同一区二区软件 | 国产成人av教育| 久久香蕉精品热| 成人午夜高清在线视频| 搡老熟女国产l中国老女人| 丰满乱子伦码专区| 亚洲在线观看片| 亚洲精品成人久久久久久| 很黄的视频免费| 午夜福利18| 中文字幕免费在线视频6| 他把我摸到了高潮在线观看| 高潮久久久久久久久久久不卡| 日本精品一区二区三区蜜桃| 美女被艹到高潮喷水动态| 中文字幕熟女人妻在线| 国内精品一区二区在线观看| 最后的刺客免费高清国语| 国产精品1区2区在线观看.| 精品免费久久久久久久清纯| 亚洲最大成人中文| 久久久久国内视频| 不卡一级毛片| 国产精品美女特级片免费视频播放器| 日本一本二区三区精品| 我的女老师完整版在线观看| 日日夜夜操网爽| 舔av片在线| 中文字幕av在线有码专区| 国产一区二区三区在线臀色熟女| av福利片在线观看| 麻豆av噜噜一区二区三区| www.999成人在线观看| 久久久久国产精品人妻aⅴ院| 18禁裸乳无遮挡免费网站照片| 久久久久亚洲av毛片大全| 九色国产91popny在线| а√天堂www在线а√下载| 国产爱豆传媒在线观看| av黄色大香蕉| 天美传媒精品一区二区| 久久热精品热| 老师上课跳d突然被开到最大视频 久久午夜综合久久蜜桃 | 日韩欧美在线二视频| 亚洲狠狠婷婷综合久久图片| 亚洲精品在线美女| 久久精品国产99精品国产亚洲性色| 无人区码免费观看不卡| 亚洲精品亚洲一区二区| 精品久久久久久成人av| 国产一区二区三区在线臀色熟女| 麻豆成人av在线观看| 欧美3d第一页| 日本精品一区二区三区蜜桃| 白带黄色成豆腐渣| 夜夜夜夜夜久久久久| 国产欧美日韩精品亚洲av| 波野结衣二区三区在线| 欧美3d第一页| 国产一区二区激情短视频| 国产亚洲精品久久久久久毛片| 色视频www国产| 少妇的逼好多水| 精品不卡国产一区二区三区| 亚洲精品456在线播放app | 简卡轻食公司| 国产私拍福利视频在线观看| 人妻制服诱惑在线中文字幕| 99热6这里只有精品| www.999成人在线观看| 一个人看的www免费观看视频| x7x7x7水蜜桃| 国产欧美日韩精品亚洲av| .国产精品久久| 男人狂女人下面高潮的视频|