• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    大型IP網(wǎng)絡(luò)流量矩陣分析預(yù)測(cè)的探討研究

    2024-11-23 00:00:00韋烜劉志華李青何曉明黃君雅
    關(guān)鍵詞:網(wǎng)絡(luò)流量流向流量

    摘要: 高效、準(zhǔn)確的網(wǎng)際協(xié)議(internet protocol, IP)網(wǎng)絡(luò)流量流向分析預(yù)測(cè)是網(wǎng)絡(luò)規(guī)劃建設(shè)的基礎(chǔ)。通過部署流量采集分析系統(tǒng),運(yùn)營(yíng)商可輕松獲取網(wǎng)絡(luò)總流量、節(jié)點(diǎn)流量、節(jié)點(diǎn)分方向流量等較完備的歷史基礎(chǔ)數(shù)據(jù),為流量分析預(yù)測(cè)提供關(guān)鍵的輸入。IP網(wǎng)絡(luò)流量分析預(yù)測(cè)方法主要包括兩類:傳統(tǒng)統(tǒng)計(jì)模型和神經(jīng)網(wǎng)絡(luò)模型,近年提出的NeuralProphet模型因結(jié)合兩者優(yōu)點(diǎn)而得到廣泛關(guān)注和應(yīng)用。首次基于NeuralProphet模型對(duì)大型運(yùn)營(yíng)級(jí)IP網(wǎng)絡(luò)源節(jié)點(diǎn)到目的節(jié)點(diǎn)的流量流向進(jìn)行直接預(yù)測(cè),并采用改進(jìn)的損失函數(shù)優(yōu)化模型訓(xùn)練,預(yù)測(cè)結(jié)果表明NeuralProphet模型能夠更科學(xué)、準(zhǔn)確地預(yù)測(cè)IP網(wǎng)絡(luò)流量矩陣,整體預(yù)測(cè)精度提升了8.7%,同時(shí)模型擴(kuò)展性和魯棒性也具有更佳的表現(xiàn),可以更好地滿足IP網(wǎng)絡(luò)規(guī)劃建設(shè)和運(yùn)行維護(hù)的實(shí)際需求。

    關(guān)鍵詞: 流量矩陣; 源節(jié)點(diǎn)到目的節(jié)點(diǎn)流量流向; 節(jié)點(diǎn)流量; 預(yù)測(cè)模型; 自回歸

    中圖分類號(hào): TN 915

    文獻(xiàn)標(biāo)志碼: A

    DOI:10.12305/j.issn.1001-506X.2024.06.35

    Research on analysis and prediction of traffic matrix for large-scale IP network

    WEI Xuan1, LIU Zhihua1,*, LI Qing2, HE Xiaoming1, HUANG Junya1

    (1. Guangdong Research Institute of China Telecom Corporation Limited, Guangzhou 510630, China; 2. Research Institute of China Telecom Corporation Limited, Shanghai 200123, China)

    Abstract: Efficient and accurate analysis and prediction of traffic flow direction for Internet protocol (IP) network are the basis of network planning and construction. By deploying a traffic collection and analysis system, operators can easily obtain comprehensive historical data such as network total traffic, node traffic, and node directional traffic, which provides key inputs for traffic analysis and prediction. Methods of traffic analysis and prediction for IP network are generally divided into two categories: traditional statistical model and neural network model. The NeuralProphet model proposed in recent years has been widely applied due to its combination of the advantages of the above models. It is the first time to directly predict the origin-destination traffic flow of large-scale carrier-grade IP network based on the NeuralProphet model, and adopts the improved loss function to optimize model training. The prediction results show that the NeuralProphet model can predict traffic matrix of IP network more scientifically and accurately, and the overall prediction accuracy was improved by 8.7%. Meanwhile, the model has better scalability and robustness, which can better meet the actual needs of IP network planning and maintenance.

    Keywords: traffic matrix; origin-destination traffic flow; node traffic; prediction model; auto-regression

    0 引 言

    隨著大量互聯(lián)網(wǎng)業(yè)務(wù)應(yīng)用的風(fēng)起云涌、層出不窮,運(yùn)營(yíng)級(jí)網(wǎng)際協(xié)議(internet protocol, IP)承載網(wǎng)的業(yè)務(wù)流量也長(zhǎng)期持續(xù)暴漲,目前總體流量仍以約20%的年增長(zhǎng)率高速增長(zhǎng)。為了滿足上層應(yīng)用和業(yè)務(wù)快速發(fā)展的承載需求,運(yùn)營(yíng)商必須提前策劃和布局IP網(wǎng)絡(luò)的整體結(jié)構(gòu)、設(shè)備選型、鏈路帶寬設(shè)計(jì)等重要事項(xiàng),而高效、準(zhǔn)確的IP網(wǎng)絡(luò)流量流向分析預(yù)測(cè)則是以上網(wǎng)絡(luò)規(guī)劃、擴(kuò)容建設(shè)等決策工作的前提和依據(jù),同時(shí)也是及時(shí)發(fā)現(xiàn)網(wǎng)絡(luò)異常情況、處理突發(fā)故障、保障IP網(wǎng)絡(luò)長(zhǎng)期穩(wěn)定、可靠運(yùn)行的關(guān)鍵。

    流量數(shù)據(jù)是IP網(wǎng)絡(luò)運(yùn)營(yíng)管理的重要基礎(chǔ)數(shù)據(jù),通過采集和監(jiān)測(cè)流量數(shù)據(jù),運(yùn)營(yíng)商可以了解整個(gè)網(wǎng)絡(luò)的運(yùn)行態(tài)勢(shì)、網(wǎng)絡(luò)負(fù)載情況等,并為未來網(wǎng)絡(luò)的規(guī)劃和建設(shè)運(yùn)營(yíng)提供數(shù)據(jù)支持。目前,大型運(yùn)營(yíng)級(jí)IP網(wǎng)絡(luò)流量的常規(guī)監(jiān)測(cè)采集方式主要有兩種:一種基于簡(jiǎn)單網(wǎng)絡(luò)管理協(xié)議(simple network management protocol, SNMP)進(jìn)行流量采集[1-3,一種基于xFlow流技術(shù)進(jìn)行網(wǎng)絡(luò)流量流向的采集[4-6。作為一種最常用的網(wǎng)絡(luò)基本流量采集方法,SNMP通過采集網(wǎng)絡(luò)節(jié)點(diǎn)或者鏈路的SNMP信息來獲取網(wǎng)絡(luò)關(guān)鍵點(diǎn)的流量數(shù)據(jù)。SNMP是標(biāo)準(zhǔn)的傳輸控制協(xié)議/IP(transmission control protocol/IP, TCP/IP)網(wǎng)絡(luò)管理協(xié)議,能夠支持所有的網(wǎng)絡(luò)設(shè)備,部署相對(duì)靈活、簡(jiǎn)單,但缺點(diǎn)是功能單一、信息量少,缺少流量的來源和去向等關(guān)鍵信息,因而只適用于流量大小的采集而無法進(jìn)行流量流向的分析?;趚Flow流技術(shù)的數(shù)據(jù)采集是利用網(wǎng)絡(luò)設(shè)備中各類netFlow、sFlow等網(wǎng)絡(luò)流量采集分析方法,通過抽樣技術(shù)(按不同需求抽樣比從100到10 000不等)記錄設(shè)備端口或網(wǎng)絡(luò)鏈路中包含五元組、業(yè)務(wù)類型、地址池、自治系統(tǒng)(autonomous system, AS)號(hào)或路由信息在內(nèi)的流量大小,從而可為流向、流量及業(yè)務(wù)分布等分析提供詳細(xì)的數(shù)據(jù)素材,適用于各類網(wǎng)絡(luò)流量的監(jiān)測(cè)和分析。但xFlow流技術(shù)需要設(shè)備開啟xFlow功能,xFlow對(duì)設(shè)備CPU、存儲(chǔ)等資源的占用會(huì)造成轉(zhuǎn)發(fā)性能的部分損失,另外還需要同時(shí)部署較大規(guī)模的流量分析系統(tǒng)。因此,綜合考慮成本代價(jià)和運(yùn)營(yíng)管理目標(biāo)之間的平衡,相對(duì)于SNMP從一開始就進(jìn)行地毯式的廣泛部署,xFlow流技術(shù)近十年才開始主要在大型運(yùn)營(yíng)級(jí)IP網(wǎng)絡(luò)的網(wǎng)絡(luò)接入點(diǎn)、網(wǎng)絡(luò)出口點(diǎn)等關(guān)鍵節(jié)點(diǎn)進(jìn)行實(shí)施開啟。通過部署SNMP和xFlow技術(shù),運(yùn)營(yíng)商可以方便地獲取到網(wǎng)絡(luò)總流量、節(jié)點(diǎn)總流量、節(jié)點(diǎn)分方向流量等較完備的歷史基礎(chǔ)數(shù)據(jù),為后續(xù)的IP網(wǎng)絡(luò)規(guī)劃和運(yùn)營(yíng)提供了決策依據(jù)。

    IP互聯(lián)網(wǎng)本質(zhì)是應(yīng)用驅(qū)動(dòng)型的網(wǎng)絡(luò),在海量、瞬息萬變的短尾應(yīng)用與用戶行為日益復(fù)雜的環(huán)境下,捕捉和分析大量應(yīng)用的總體流量特征并準(zhǔn)確預(yù)測(cè)流量流向分布成為一個(gè)亟需攻克的難題。IP網(wǎng)絡(luò)流量所具有的自相似性、長(zhǎng)相關(guān)性、混沌性、突發(fā)性等新特點(diǎn)也導(dǎo)致傳統(tǒng)泊松流量模型無法再適用[7-8,因而需要在實(shí)踐中不斷研究探索以尋找更科學(xué)的理論模型和預(yù)測(cè)方法。迄今為止,應(yīng)用于IP網(wǎng)絡(luò)流量分析預(yù)測(cè)的模型大體分為兩類:傳統(tǒng)統(tǒng)計(jì)方法[9-13和神經(jīng)網(wǎng)絡(luò)模型方法14-20。傳統(tǒng)統(tǒng)計(jì)模型因難以描述流量的非線性而表現(xiàn)欠佳,而神經(jīng)網(wǎng)絡(luò)模型盡管能較好地捕捉非線性特性,但普遍存在“黑盒子”的弊端,且對(duì)數(shù)據(jù)量有較高要求,這對(duì)于具有較少歷史數(shù)據(jù)量(如按月、年采集)的長(zhǎng)期網(wǎng)絡(luò)流量預(yù)測(cè)是一個(gè)較大的挑戰(zhàn)。另外,目前這些方法大多只適用于網(wǎng)絡(luò)總流量、節(jié)點(diǎn)流量大小的預(yù)測(cè),而對(duì)于源節(jié)點(diǎn)到目的節(jié)點(diǎn)(origin-destination, OD)的流量矩陣或OD流量流向的預(yù)測(cè)尚處于起步階段。相對(duì)于網(wǎng)絡(luò)總流量、節(jié)點(diǎn)流量,流量矩陣的研究至關(guān)重要,因?yàn)樗辛髁康姆治鲱A(yù)測(cè)最終都需要轉(zhuǎn)化為明確的流量流向分布,才能在實(shí)際的帶寬規(guī)劃或工程運(yùn)營(yíng)中真正發(fā)揮作用。

    在xFlow技術(shù)大范圍部署之前,運(yùn)營(yíng)商只能直接獲取和分析網(wǎng)絡(luò)節(jié)點(diǎn)流量的大小,流量流向分布的獲取必須通過一些近似方法(如吸引系數(shù)法、矩陣估計(jì)法等[21-22)來構(gòu)造節(jié)點(diǎn)間的比例關(guān)系,然后再將節(jié)點(diǎn)流量按比例分配到比例矩陣中,從而得到整個(gè)運(yùn)營(yíng)級(jí)IP網(wǎng)絡(luò)的流量矩陣。這些方法通常比較粗糙,流量矩陣的預(yù)測(cè)主要基于節(jié)點(diǎn)流量來進(jìn)行,人為構(gòu)造的比例矩陣成為模型誤差的主要來源。而xFlow的部署為基于直接獲取的網(wǎng)絡(luò)流量流向分布來進(jìn)行探索研究創(chuàng)造了條件,運(yùn)營(yíng)級(jí)IP網(wǎng)絡(luò)流量矩陣的分析預(yù)測(cè)得以進(jìn)入到嶄新的發(fā)展階段。在此基礎(chǔ)上,本文首次基于NeuralProphet模型直接對(duì)中國(guó)電信大型運(yùn)營(yíng)級(jí)IP網(wǎng)絡(luò)的OD流量流向進(jìn)行預(yù)測(cè),并采用改進(jìn)的Huber函數(shù)作為損失函數(shù),從而加快和優(yōu)化了模型的訓(xùn)練過程。同時(shí),對(duì)比基于傳統(tǒng)時(shí)間序列分析的差分整合移動(dòng)平均自回歸(auto-regressive integrated moving average, ARIMA)模型和Prophet模型預(yù)測(cè)節(jié)點(diǎn)流量、進(jìn)而通過按比例分配得到預(yù)測(cè)流量矩陣的其他兩種方法,預(yù)測(cè)結(jié)果表明NeuralProphet模型兼具傳統(tǒng)統(tǒng)計(jì)模型的可解釋性和神經(jīng)網(wǎng)絡(luò)的強(qiáng)大擴(kuò)展性,能夠更科學(xué)地預(yù)測(cè)IP網(wǎng)絡(luò)流量矩陣并獲得準(zhǔn)確性、擴(kuò)展性和魯棒性更佳的結(jié)果。

    1 預(yù)測(cè)方法

    1.1 NeuralProphet模型

    NeuralProphet模型是一種結(jié)合了傳統(tǒng)統(tǒng)計(jì)模型和神經(jīng)網(wǎng)絡(luò)模型優(yōu)點(diǎn)的新型混合模型[23,繼承了其前身Prophet模型[24及其他時(shí)間序列模型的模塊化分解的核心思想,模型本質(zhì)上將一個(gè)時(shí)間序列分解為多個(gè)獨(dú)立的不同組成模塊,每個(gè)組成模塊都有各自的輸入和建模過程,為預(yù)測(cè)模型貢獻(xiàn)相應(yīng)的組成分量。NeuralProphet模型的各個(gè)模塊如下所示:

    ?(t)=T(t)+S(t)+E(t)+F(t)+A(t)+L(t)(1)

    式中:?(t)是所研究的目標(biāo)時(shí)間序列;T(t)是趨勢(shì)分量;S(t)是季節(jié)分量;E(t)是事件和節(jié)假日效應(yīng);F(t)是外生變量在未來時(shí)間t的回歸效應(yīng);A(t)是基于過去觀測(cè)的時(shí)間t的自回歸(auto-regressive, AR)效應(yīng);L(t)是t時(shí)刻外生變量滯后觀測(cè)的回歸效應(yīng)。

    對(duì)應(yīng)于本文所研究的大型IP網(wǎng)絡(luò)流量矩陣的分析預(yù)測(cè),由于流量采集的周期為月份數(shù)據(jù),且并未考慮其他外生變量的滯后回歸及未來影響的效應(yīng),因此此時(shí)NeuralProphet模型沒有節(jié)假日效應(yīng)E(t)、未來回歸項(xiàng)F(t)及滯后回歸項(xiàng)L(t),式(1)可以簡(jiǎn)化為

    ?(t)=T(t)+S(t)+A(t)(2)

    1.1.1 趨勢(shì)分量T(t)

    趨勢(shì)分量的經(jīng)典建模方法可以歸結(jié)為求解偏移量m和增長(zhǎng)率k的問題,NeuralProphet模型允許增長(zhǎng)率在多個(gè)位置上發(fā)生變化,這些位置稱之為變點(diǎn),此時(shí)趨勢(shì)分量被建模為連續(xù)分段線性函數(shù)系列。如果變點(diǎn)選擇得當(dāng)且數(shù)量充足,理論上任何非線性增長(zhǎng)都可以通過分段線性進(jìn)行擬合,這使得分段線性增長(zhǎng)趨勢(shì)可以適用于線性或非線性的任何場(chǎng)景,同時(shí)具有很好的解釋性。由于分段線性函數(shù)中的偏移量m和增長(zhǎng)率k其實(shí)是隨著時(shí)間而變化的,因此定義時(shí)間相關(guān)的增長(zhǎng)率δ(t)和偏移量ρ(t),此時(shí)基于分段線性函數(shù)的趨勢(shì)增長(zhǎng)模型如下所示:

    T(t)=δ(t)·t+ρ(t)=(δ0+Γ(t)Tδ)·t+(ρ0+Γ(t)Tρ)(3)

    式中:δ=(δ1,δ2,…,δnc),ρ=(ρ1,ρ2,…,ρnc),Γ(t)=(Γ1(t),Γ2(t),…,Γnc(t)),Γ(t)為二元向量:

    Γj(t)=1, t≥cj

    0, 其他

    變點(diǎn)集合C={c1,c2,…,cnc},nc為變點(diǎn)的數(shù)量,δ0和ρ0分別為初始增長(zhǎng)率和初始偏移量。

    1.1.2 季節(jié)性分量S(t)

    傅里葉級(jí)數(shù)是季節(jié)性建模的好工具,因?yàn)樗梢援a(chǎn)生易于解釋且穩(wěn)定的平滑函數(shù),非常適合應(yīng)用于各種不同周期季節(jié)性數(shù)據(jù)的仿真擬合。NeuralProphet中的季節(jié)性正是使用傅里葉級(jí)數(shù)來實(shí)現(xiàn)的,每一個(gè)具有周期性p的季節(jié)項(xiàng)Sp(t)可由傅里葉項(xiàng)來定義:

    Sp(t)=∑kj=1ajcos2πjtp+bjsin2πjtp (4)

    式中:p是時(shí)間序列的周期;k為具有周期性p的季節(jié)性傅里葉項(xiàng)的級(jí)數(shù);aj、bj分別是余弦函數(shù)、正弦函數(shù)的加權(quán)系數(shù);每一個(gè)具有周期性p的季節(jié)分量與 2k個(gè)系數(shù)相關(guān)聯(lián),此時(shí)季節(jié)分量的問題轉(zhuǎn)化為確定參數(shù)p、k并求解最優(yōu)系數(shù)β=(a1,b1,…ak,bkT的問題。在一個(gè)多周期季節(jié)性的場(chǎng)景中,可以為每個(gè)季節(jié)性定義不同的p值和k值,NeuralProphet模型則根據(jù)數(shù)據(jù)的采集頻率和數(shù)據(jù)長(zhǎng)度自動(dòng)激活每日、每周、每月或每年的周期季節(jié)性。

    1.1.3 AR分量A(t)

    對(duì)于一個(gè)經(jīng)典的AR時(shí)間序列模型而言,p階AR的建模過程可以認(rèn)為是若干個(gè)過去數(shù)據(jù)的線性組合:

    yt=c+∑pi=1wi.yt-it (5)

    式中:wi為每個(gè)過去值的權(quán)重系數(shù);c為截距;εt為噪聲。

    不同于經(jīng)典AR模型,NeuralProphet模型中引入了AR網(wǎng)絡(luò)(AR network, AR-Net),AR分量A(t)通過AR前饋神經(jīng)網(wǎng)絡(luò)AR-Net來實(shí)現(xiàn)。AR-Net不僅可以采用線性建模,也可以采用非線性的深度AR(deep-AR)建模,這使得NeuralProphet模型能夠適用于各種復(fù)雜多變的應(yīng)用場(chǎng)景。如圖1所示,圖1(a)是與經(jīng)典AR等效的線性AR建模的神經(jīng)網(wǎng)絡(luò)架構(gòu),AR模塊不包含隱藏層,而是一個(gè)有著p個(gè)輸入、h個(gè)輸出的單層神經(jīng)網(wǎng)絡(luò),此時(shí)將時(shí)間序列的最后p個(gè)觀測(cè)值yt-1,yt-2,…,yt-p作為輸入,相應(yīng)權(quán)重系數(shù)為w1,w2,…,wp;圖1(b)是受到機(jī)器學(xué)習(xí)模型啟發(fā),選擇了添加l個(gè)尺寸為d的隱藏層的AR-Net架構(gòu),AR-Net第一層模仿了經(jīng)典AR的表達(dá),時(shí)間序列的最后p個(gè)觀測(cè)值作為第一層的輸入,而中間每個(gè)隱藏層的輸出都通過一個(gè)激活函數(shù)模塊,這里為整流線性單元(rectified linear unit, ReLU),最后一層不經(jīng)過激活函數(shù)模塊,輸出h個(gè)序列。AR-Net添加隱藏層可以完成非線性動(dòng)力學(xué)的建模并實(shí)現(xiàn)更精準(zhǔn)的預(yù)測(cè),但代價(jià)是降低了模型的可解釋性。

    對(duì)于隱藏層尺寸為 d 的l個(gè)隱藏層,AR-Net模塊每層的輸出如下:

    第1層:a1=fa(W1x+b1),其中x=(yt-1,yt-2,…,yt-p);

    中間隱藏層:ai=fa(Wiai-1+bi),i∈[2,3,…,l];

    最后一層:y=Wl+1al。

    其中,fa(x)為激活函數(shù),且fa(x)=ReLU(x)=x,x≥0

    0,xlt;0,bi∈Rd為隱藏層i的偏移量,除第1層權(quán)重向量W1∈Rd×p及最后一層權(quán)重向量Wl+1∈Rh×d外,其余中間隱藏層的權(quán)重向量W∈Rd×d。

    1.2 NeuralProphet模型對(duì)Prophet模型的改進(jìn)

    NeuralProphet模型與其前身Prophet模型相比,相似的組成部分有趨勢(shì)分量、季節(jié)分量、節(jié)假日特殊事件分量、未來回歸分量等,不同之處在于增加了AR分量和外生滯后回歸分量。和許多“黑盒子”的神經(jīng)網(wǎng)絡(luò)不同,NeuralProphet保留了 Prophet 的所有優(yōu)勢(shì),而且通過引入AR-Net和超強(qiáng)的Pytorch后端這兩個(gè)變革式的改進(jìn),將神經(jīng)網(wǎng)絡(luò)的可擴(kuò)展性與傳統(tǒng)AR模型的可解釋性進(jìn)行了完美結(jié)合,推動(dòng)模型整體性能產(chǎn)生了質(zhì)的飛躍。重磅級(jí)全自動(dòng)AR-Net的出現(xiàn),使得AR模塊借助神經(jīng)網(wǎng)絡(luò)并貼合歷史數(shù)據(jù)的基本特征,更快捷精準(zhǔn)地?cái)M合客觀現(xiàn)實(shí),提高了模型準(zhǔn)確性和魯棒性。此外, 由于Pytorch的應(yīng)用,NeuralProphet模型不再局限于線性回歸,而可采用適應(yīng)性更強(qiáng)的ReLU非線性深度回歸并基于隨機(jī)梯度下降(stochastic gradient descent, SGD)進(jìn)行模型參數(shù)優(yōu)化,極大地加快了建模的速度和效率。

    2 流量流向分析與預(yù)測(cè)

    2.1 流量數(shù)據(jù)集

    2.1.1 數(shù)據(jù)來源

    通過在中國(guó)電信省際IP網(wǎng)絡(luò)的出口節(jié)點(diǎn)大規(guī)模部署xFlow流量采集設(shè)備及采集分析系統(tǒng),得到了大型運(yùn)營(yíng)級(jí)省際IP網(wǎng)絡(luò)的歷史流量流向矩陣報(bào)表數(shù)據(jù),報(bào)表輸出時(shí)間顆粒度為月度數(shù)據(jù),流量采集時(shí)間點(diǎn)為從2015年5月至2023年3月的共計(jì)95個(gè)時(shí)間點(diǎn)。每個(gè)月的流量矩陣報(bào)表共包含了16個(gè)省際節(jié)點(diǎn)之間的16×16(即256個(gè))OD流量流向,原始流量矩陣的數(shù)據(jù)格式如表1所示,表中第i行、第j列元素表示第i個(gè)節(jié)點(diǎn)流出到第j個(gè)節(jié)點(diǎn)的流量,第i行代表了第i個(gè)節(jié)點(diǎn)流出到其他各節(jié)點(diǎn)方向上的流量,第i行流量之和則代表了第i個(gè)節(jié)點(diǎn)的節(jié)點(diǎn)流量。表1中對(duì)角線上的元素表示節(jié)點(diǎn)內(nèi)部的流量,這是由于中國(guó)電信省際節(jié)點(diǎn)除了轉(zhuǎn)發(fā)省際流量外,同時(shí)還需要負(fù)責(zé)轉(zhuǎn)發(fā)省內(nèi)不同城域網(wǎng)之間的流量。

    2.1.2 數(shù)據(jù)格式轉(zhuǎn)換

    原始?xì)v史流量數(shù)據(jù)為95個(gè)如表1所示的16×16的原始矩陣報(bào)表格式,但這樣的數(shù)據(jù)格式不方便后續(xù)的時(shí)間序列分析和流量預(yù)測(cè),因此考慮先將所有的矩陣報(bào)表進(jìn)行格式轉(zhuǎn)換及數(shù)據(jù)合并,形成如表2所示的數(shù)據(jù)結(jié)構(gòu)。表2中,第1列是時(shí)間,剩余的每列代表了表1中每個(gè)OD對(duì)(即每個(gè)節(jié)點(diǎn)方向?qū)Γ┲g的歷史流量時(shí)間序列,例如表2第4列(“N1~N3”列)表示流向?yàn)楣?jié)點(diǎn)N1到節(jié)點(diǎn)N3的所有歷史采集時(shí)間下(2015年5月~2023年3月)的流量序列。此時(shí),95個(gè)形如表1的16×16的流量矩陣數(shù)據(jù)轉(zhuǎn)換為形如表2的95行(時(shí)間點(diǎn))256(16×16)列數(shù)據(jù)的流量流向時(shí)間序列。

    2.1.3 數(shù)據(jù)預(yù)處理

    通常而言,在正式進(jìn)行統(tǒng)計(jì)分析和預(yù)測(cè)前需要對(duì)數(shù)據(jù)集進(jìn)行適當(dāng)?shù)臄?shù)據(jù)清洗,即數(shù)據(jù)預(yù)處理工作,主要包括補(bǔ)充數(shù)據(jù)缺失值以及對(duì)異常值進(jìn)行識(shí)別及剔除。

    對(duì)于本文的數(shù)據(jù)集,缺失值主要有兩種情況,一種是某個(gè)時(shí)間點(diǎn)的所有流量數(shù)據(jù)的集體缺失,另一種是某個(gè)時(shí)間點(diǎn)的個(gè)別節(jié)點(diǎn)或個(gè)別節(jié)點(diǎn)個(gè)別方向的流量數(shù)據(jù)缺失。第一種情況比較罕見,一般是由采集分析系統(tǒng)的整體故障或工程變更而導(dǎo)致;第二種情況則比較常見,通常由采集系統(tǒng)局部或單點(diǎn)原因引起。無論哪種情況的數(shù)據(jù)缺失,目前主要采用傳統(tǒng)的插值法來補(bǔ)充所缺失的數(shù)據(jù)。圖2展示了用插值法對(duì)節(jié)點(diǎn)N2及節(jié)點(diǎn)N9在時(shí)間點(diǎn)38以及時(shí)間點(diǎn)82、83缺失值的填充。

    對(duì)于異常值的識(shí)別和剔除需要非常謹(jǐn)慎,因?yàn)殄e(cuò)誤的判斷可能會(huì)造成正常信息的損失。依據(jù)對(duì)自身網(wǎng)絡(luò)的了解和長(zhǎng)期數(shù)據(jù)統(tǒng)計(jì)的相關(guān)經(jīng)驗(yàn),目前仍建議采用最簡(jiǎn)單有效的拉伊達(dá)準(zhǔn)則(又稱3 s準(zhǔn)則)來進(jìn)行異常值的判斷,即當(dāng)數(shù)值超出標(biāo)準(zhǔn)差3倍時(shí)初步判定為異常值,同時(shí)最好能夠結(jié)合網(wǎng)絡(luò)實(shí)際情況及工程運(yùn)維經(jīng)驗(yàn)來進(jìn)行輔助判斷。可以看到,圖2中N9節(jié)點(diǎn)在65時(shí)間點(diǎn)流量有一個(gè)極大的躍升,但后續(xù)流量并未回落,而是以此為基點(diǎn)穩(wěn)步增長(zhǎng)。經(jīng)與當(dāng)?shù)剡\(yùn)維部門核實(shí),這是由于當(dāng)時(shí)網(wǎng)絡(luò)規(guī)模擴(kuò)容調(diào)整導(dǎo)致的真實(shí)流量的暴增,并不屬于異常情況。

    通常傳統(tǒng)時(shí)間序列模型(如ARIMA等)容易受歷史數(shù)據(jù)缺失或異常的干擾影響而導(dǎo)致預(yù)測(cè)性能下降,但NeuralProphet模型卻因AR模塊自帶糾偏能力而表現(xiàn)出極強(qiáng)的適應(yīng)性,特別適合這種存在異常波動(dòng)的IP流量數(shù)據(jù)的預(yù)測(cè)建模。

    2.2 流量特征分析

    2.2.1 節(jié)點(diǎn)流量分布

    將每月流量矩陣的每行之和作為每個(gè)節(jié)點(diǎn)的節(jié)點(diǎn)流量,將流量矩陣16行分別求和后得到所有16個(gè)節(jié)點(diǎn)的節(jié)點(diǎn)流量。將95個(gè)月份的流量矩陣做同樣的運(yùn)算,得到16個(gè)節(jié)點(diǎn)的95個(gè)月份的節(jié)點(diǎn)流量,以及每個(gè)節(jié)點(diǎn)的95個(gè)時(shí)間點(diǎn)的平均節(jié)點(diǎn)流量。按節(jié)點(diǎn)流量由大到小排序畫圖,如圖3所示。

    分析16個(gè)節(jié)點(diǎn)的節(jié)點(diǎn)流量,發(fā)現(xiàn)每個(gè)時(shí)間點(diǎn)的節(jié)點(diǎn)流量及平均節(jié)點(diǎn)流量有如下特點(diǎn):排名前3位的節(jié)點(diǎn)流量均超總流量的10%,且前3位的節(jié)點(diǎn)流量之和與總流量的占比高達(dá)49%,而其余13個(gè)節(jié)點(diǎn)的合計(jì)流量?jī)H占總流量的51%。由此可見,IP網(wǎng)絡(luò)的流量分布具有區(qū)域匯聚效應(yīng),少量大流量節(jié)點(diǎn)貢獻(xiàn)了全網(wǎng)50%的流量。因此,在進(jìn)行節(jié)點(diǎn)流量預(yù)測(cè)時(shí),應(yīng)盡量保證大流量節(jié)點(diǎn)的預(yù)測(cè)性能,模型超參數(shù)的選取在兼顧公平的同時(shí)適當(dāng)向大流量節(jié)點(diǎn)傾斜。

    2.2.2 OD流量流向分布

    計(jì)算95個(gè)時(shí)間點(diǎn)的歷史流量矩陣的平均流量矩陣,得到平均流量矩陣各個(gè)元素(即各個(gè)源-目的對(duì))之間的流量。進(jìn)一步計(jì)算每個(gè)元素占網(wǎng)絡(luò)總流量的比例,并按比例由高到低進(jìn)行排列畫圖,結(jié)果如圖4所示。圖4中,占比總流量大于3%的OD流個(gè)數(shù)為11,11個(gè)OD流合計(jì)流量占比高達(dá)45%,即約有4%(11/256)的OD流的流量占據(jù)全網(wǎng)流量的45%;流量占比大于1%的OD流個(gè)數(shù)為21,而合計(jì)流量占比為60%,即約有8%(21/256)的OD流的流量占據(jù)了全網(wǎng)60%的流量。這種現(xiàn)象表明,該IP網(wǎng)絡(luò)的流量分布是非均衡的,小部分局向間的流量占比較大,對(duì)全網(wǎng)流量起到關(guān)鍵的主導(dǎo)和引領(lǐng)作用。在網(wǎng)絡(luò)規(guī)劃階段及實(shí)際網(wǎng)絡(luò)運(yùn)維中應(yīng)當(dāng)對(duì)這些關(guān)鍵局向給予重點(diǎn)關(guān)注,在流量預(yù)測(cè)過程中應(yīng)優(yōu)先考慮這些局向預(yù)測(cè)的準(zhǔn)確性,并以此作為模型超參數(shù)優(yōu)化調(diào)整的關(guān)鍵依據(jù)。

    2.2.3 OD流量占節(jié)點(diǎn)流量的比例

    將原始流量矩陣的每行之和作為每個(gè)節(jié)點(diǎn)的節(jié)點(diǎn)流量,用每一行的每個(gè)流量矩陣元素除以該行之和(即該節(jié)點(diǎn)流量),得到該元素占該節(jié)點(diǎn)流量的比例。經(jīng)過類似計(jì)算,得到一個(gè)原始流量矩陣的16行的OD流相對(duì)節(jié)點(diǎn)流量的占比,以及95個(gè)時(shí)間點(diǎn)的原始流量矩陣的每個(gè)OD流相對(duì)節(jié)點(diǎn)流量的占比。對(duì)不同時(shí)間點(diǎn)的同一行的OD流量占比進(jìn)行分析對(duì)比,可以發(fā)現(xiàn)每個(gè)節(jié)點(diǎn)的16個(gè)OD流的流向流量比例在不同歷史時(shí)間點(diǎn)幾乎保持穩(wěn)定不變。圖5以節(jié)點(diǎn)3為例,顯示了節(jié)點(diǎn)3的16個(gè)OD流占節(jié)點(diǎn)流量的比例,圖中不同時(shí)間的比例曲線基本重疊在一起。而其他節(jié)點(diǎn)也存在相同的特性。利用這個(gè)特性,可以簡(jiǎn)化流量矩陣的預(yù)測(cè)過程:先通過恰當(dāng)?shù)姆椒A(yù)測(cè)所有節(jié)點(diǎn)的節(jié)點(diǎn)流量,再將節(jié)點(diǎn)流量按比例分配到各個(gè)源-目的局向中,即可得到預(yù)測(cè)流量矩陣。在下文對(duì)比實(shí)驗(yàn)中,ARIMA方法和Prophet模型均基于此特性對(duì)節(jié)點(diǎn)流量進(jìn)行預(yù)測(cè),在將節(jié)點(diǎn)流量進(jìn)行分配后,獲得最終的流量矩陣。

    2.3 分析預(yù)測(cè)過程

    2.3.1 總體流程

    首次嘗試?yán)肗euralProphet模型對(duì)大型運(yùn)營(yíng)級(jí)IP網(wǎng)絡(luò)流量矩陣進(jìn)行分析預(yù)測(cè)。此前,主要采用多元回歸趨勢(shì)外推法、ARIMA方法以及Prophet模型對(duì)節(jié)點(diǎn)流量進(jìn)行預(yù)測(cè),而本次與之前不同的是,基于NeuralProphet模型首次對(duì)流量矩陣(即每個(gè)OD流)進(jìn)行了單獨(dú)預(yù)測(cè)。幾種方法相應(yīng)的預(yù)測(cè)結(jié)果將在后文進(jìn)行展示和對(duì)比。流量分析預(yù)測(cè)的完整過程和具體流程如圖6所示。

    流量分析預(yù)測(cè)的完整過程和具體流程主要分為以下5個(gè)步驟。

    步驟 1 數(shù)據(jù)采集

    通過部署xFlow等采集分析系統(tǒng)采集IP網(wǎng)絡(luò)的流量數(shù)據(jù),目前共采集95個(gè)歷史流量矩陣的月數(shù)據(jù)。遵循8∶2原則,選取前77個(gè)時(shí)間點(diǎn)的數(shù)據(jù)集作為訓(xùn)練集,后18個(gè)時(shí)間點(diǎn)的數(shù)據(jù)作為預(yù)測(cè)集,即將經(jīng)過77個(gè)時(shí)間點(diǎn)的訓(xùn)練集訓(xùn)練后得到的模型用于預(yù)測(cè)后18個(gè)時(shí)間點(diǎn)的預(yù)測(cè)集,以預(yù)測(cè)集的預(yù)測(cè)結(jié)果進(jìn)行預(yù)測(cè)效果的評(píng)估和對(duì)比。

    步驟 2 數(shù)據(jù)預(yù)處理

    數(shù)據(jù)預(yù)處理主要包括前文提到過的缺失值補(bǔ)充、異常值去除等數(shù)據(jù)清洗工作,同時(shí)需對(duì)流量數(shù)據(jù)做一些數(shù)據(jù)格式轉(zhuǎn)換的處理,以及按行求和計(jì)算節(jié)點(diǎn)流量,計(jì)算OD流占節(jié)點(diǎn)流量比例等,為后續(xù)的流量預(yù)測(cè)過程做好相應(yīng)的準(zhǔn)備。

    步驟 3 流量預(yù)測(cè)

    重點(diǎn)基于NeuralProphet模型對(duì)流量矩陣的256個(gè)OD流進(jìn)行訓(xùn)練和預(yù)測(cè),通過NeuralProphet模型強(qiáng)大的AR能力更好地?cái)M合歷史流量并得到適用性更強(qiáng)、效果更好的模型。為了與之前使用的方法進(jìn)行對(duì)比,也給出了ARIMA和Prophet模型的預(yù)測(cè)結(jié)果。

    3種方法的相同之處在于,都需要經(jīng)歷模型反復(fù)訓(xùn)練、參數(shù)迭代優(yōu)化的過程才能得到最優(yōu)的模型。不同之處在于,ARIMA主要是對(duì)時(shí)間序列模型p、d、q參數(shù)的確定,Prophet模型主要是對(duì)變點(diǎn)數(shù)量、趨勢(shì)參數(shù)和季節(jié)參數(shù)的選取,而NeuralProphet模型除了Prophet模型的基本參數(shù)外,更多的是對(duì)AR模塊參數(shù)的訓(xùn)練以及神經(jīng)網(wǎng)絡(luò)超參數(shù)的確定。

    NeuralProphet模型允許使用者根據(jù)專業(yè)經(jīng)驗(yàn)和研究需要自行定義模型的損失函數(shù)和度量策略。本實(shí)驗(yàn)采用改進(jìn)的Huber函數(shù)[25作為NeuralProphet模型的損失函數(shù):

    Lδ(y,?)=12δ(y-?)2, |y-?|lt;δ

    |y-?|-δ2, |y-?|≥δ(6)

    損失函數(shù)中的超參數(shù)δ的最優(yōu)值可通過交叉驗(yàn)證法來選取。在默認(rèn)情況下,δ=1,對(duì)于本次研究的IP網(wǎng)絡(luò)流量流向,經(jīng)反復(fù)迭代仿真后確定δ=3時(shí)具有最優(yōu)的效果。圖7是損失函數(shù)隨迭代次數(shù)變化的曲線,可見δ=3時(shí)損失函數(shù)收斂較快,且收斂后損失值較δ=1及δ=2時(shí)小。

    需要指出的是,ARIMA和Prophet模型是基于節(jié)點(diǎn)流量進(jìn)行的,預(yù)測(cè)的工作量由256個(gè)時(shí)間序列縮減為16個(gè),得到節(jié)點(diǎn)預(yù)測(cè)流量后再將其按比例分配到OD流比例中,最終得到預(yù)測(cè)流量矩陣,這是目前實(shí)際工程實(shí)踐中常用的簡(jiǎn)化方法。

    步驟 4 結(jié)果分析

    將NeuralProphet模型的預(yù)測(cè)結(jié)果與ARIMA、Prophet模型的預(yù)測(cè)結(jié)果進(jìn)行分析對(duì)比,以確定該IP網(wǎng)絡(luò)流量矩陣預(yù)測(cè)的最優(yōu)方案。在預(yù)測(cè)精度滿足要求的前提下,可根據(jù)實(shí)際工程需要,綜合考慮運(yùn)算效率和模型復(fù)雜度而選擇效果次優(yōu)但更簡(jiǎn)單實(shí)用的模型。

    步驟 5 后評(píng)估

    運(yùn)營(yíng)級(jí)IP網(wǎng)絡(luò)的流量預(yù)測(cè)工作是一個(gè)長(zhǎng)期持續(xù)和不斷修正的過程,在新數(shù)據(jù)不斷采集擴(kuò)充的情況下,可以通過新數(shù)據(jù)的反饋和驗(yàn)證來優(yōu)化原有模型及參數(shù),形成閉環(huán)的預(yù)測(cè)后評(píng)估修正機(jī)制,從而提升IP網(wǎng)絡(luò)規(guī)劃和運(yùn)營(yíng)工作的質(zhì)量。

    2.3.2 性能指標(biāo)

    通??刹捎谜`差平方和(sum of square error, SSE)、均方根誤差(root mean square error, RMSE)、平均絕對(duì)誤差(mean absolute error, MAE)或平均絕對(duì)百分誤差(mean absolute percentage error, MAPE)等性能指標(biāo)來評(píng)價(jià)預(yù)測(cè)模型的效果。為了便于比較,本文主要采用MAPE作為誤差評(píng)價(jià)指標(biāo),MAPE包括節(jié)點(diǎn)流量預(yù)測(cè)誤差和流量矩陣預(yù)測(cè)誤差。t時(shí)刻節(jié)點(diǎn)流量預(yù)測(cè)誤差和流量矩陣預(yù)測(cè)誤差分別定義如下:

    MAPEnode=100%×1N×∑Ni=1|yi(t)-?i(t)|yi(t)(7)

    MAPETM=100%×1N2×∑Ni=1∑NJ=1|zij(t)-zˇij(t)|zij(t)(8)

    式中:N是流量矩陣的節(jié)點(diǎn)數(shù),本文中N=16;?i(t)是t時(shí)刻節(jié)點(diǎn)i的預(yù)測(cè)流量,yi(t)是t時(shí)刻節(jié)點(diǎn)i的實(shí)際流量;zˇij(t)是t時(shí)刻節(jié)點(diǎn)i到節(jié)點(diǎn)j的OD流的預(yù)測(cè)流量,zij(t)是t時(shí)刻節(jié)點(diǎn)i到節(jié)點(diǎn)j的OD流的實(shí)際流量;節(jié)點(diǎn)i、j∈[1,16]。眾所周知,MAPE越小,預(yù)測(cè)性能越好。

    3 結(jié)果分析

    基于改進(jìn)的損失函數(shù),利用NeuralProphet模型首次對(duì)中國(guó)電信大型運(yùn)營(yíng)級(jí)IP網(wǎng)絡(luò)流量流向進(jìn)行預(yù)測(cè)并取得了較滿意的效果。下面分別從以下幾個(gè)方面對(duì)比ARIMA、Prophet模型的預(yù)測(cè)結(jié)果:節(jié)點(diǎn)預(yù)測(cè)誤差、OD流量流向預(yù)測(cè)誤差、流量矩陣整體預(yù)測(cè)性能。

    3.1 節(jié)點(diǎn)流量預(yù)測(cè)誤差隨時(shí)間的變化

    圖8是節(jié)點(diǎn)流量預(yù)測(cè)誤差MAPE隨時(shí)間變化的曲線圖。

    由圖8可見,3種預(yù)測(cè)模型的MAPE隨預(yù)測(cè)時(shí)長(zhǎng)的增加而增大,但傳統(tǒng)ARIMA預(yù)測(cè)誤差的變化相對(duì)另外兩種模型的誤差變化要大得多,ARIMA的預(yù)測(cè)誤差從預(yù)測(cè)時(shí)長(zhǎng)為1個(gè)月的7%,增加為預(yù)測(cè)時(shí)長(zhǎng)為18個(gè)月的48%,而Prophet和NeuralProphet則分別從3%、1%增加到22%、15%。由此可見,NeuralProphet模型由于AR模塊的引入和神經(jīng)網(wǎng)絡(luò)的加持,可以較大地提升節(jié)點(diǎn)流量預(yù)測(cè)的準(zhǔn)確性。

    3.2 OD流量流向預(yù)測(cè)誤差隨時(shí)間的變化

    流量矩陣中OD流預(yù)測(cè)MAPE誤差隨預(yù)測(cè)時(shí)長(zhǎng)從1~18月的變化曲線如圖9所示。與節(jié)點(diǎn)流量誤差類似,3種方法的OD流預(yù)測(cè)誤差均隨時(shí)間的增大而增加,其中傳統(tǒng)ARIMA模型的誤差從8%增加到53%,而Prophet和NeuralProphet模型的預(yù)測(cè)誤差隨時(shí)間的變化更加平穩(wěn),分別從4%和2%增加到29%和21%??梢?,NeuralProphet模型的預(yù)測(cè)誤差較其他兩種模型更小,因此對(duì)于OD流量流向的預(yù)測(cè),NeuralProphet模型具有更好的預(yù)測(cè)效果。

    3.3 單個(gè)OD流量流向預(yù)測(cè)結(jié)果的對(duì)比

    以一個(gè)OD流量流向的預(yù)測(cè)結(jié)果作為示例,圖10展示了3種模型的預(yù)測(cè)結(jié)果與流量真實(shí)值的對(duì)比。

    由圖10可見,3種方法對(duì)于訓(xùn)練集數(shù)據(jù)的擬合效果差異不大,都能較好地貼合真實(shí)值,但訓(xùn)練模型在預(yù)測(cè)集的表現(xiàn)卻差異巨大,只有NeuralProphet模型能夠符合真實(shí)流量的趨勢(shì)走向并與真實(shí)值吻合較好;而Prophet模型雖然在訓(xùn)練集上可以通過分段線性進(jìn)行準(zhǔn)確地?cái)M合,但由于缺乏測(cè)試集的“拐點(diǎn)”信息,容易受到訓(xùn)練集最后一個(gè)變點(diǎn)的影響,導(dǎo)致預(yù)測(cè)集上擬合曲線不可避免地偏離真實(shí)曲線;ARIMA模型也存在類似的問題,由于訓(xùn)練集最后幾個(gè)數(shù)值的突降跳躍,導(dǎo)致預(yù)測(cè)集上的擬合曲線也一路向下,愈發(fā)遠(yuǎn)離真實(shí)曲線。通過對(duì)比發(fā)現(xiàn),由于全自動(dòng)AR-Net的引入,NeuralProphet模型對(duì)測(cè)試集的預(yù)測(cè)以歷史數(shù)據(jù)作為“基準(zhǔn)線”,較好地糾正了Prophet模型趨勢(shì)項(xiàng)的缺陷,因此模型對(duì)于流量的異?;蛲蛔?nèi)萑潭雀撸蒎e(cuò)性和泛化能力表現(xiàn)更為優(yōu)異,模型的魯棒性和穩(wěn)健性也得到進(jìn)一步提升。

    3.4 流量矩陣預(yù)測(cè)結(jié)果整體對(duì)比

    為了整體評(píng)估流量流向矩陣預(yù)測(cè)的性能和準(zhǔn)確性,畫出3種模型下預(yù)測(cè)時(shí)長(zhǎng)為18個(gè)月的預(yù)測(cè)結(jié)果與流量矩陣真實(shí)值的對(duì)比圖,如圖11所示。圖11(a)為ARIMA模型的結(jié)果,圖11(b)為Prophet模型的結(jié)果,圖11(c)為NeuralProphet模型的結(jié)果。不難看到,對(duì)于16×16的IP流量流向矩陣而言,NeuralProphet模型的預(yù)測(cè)性能優(yōu)于Prophet和ARIMA模型,NeuralProphet模型的256個(gè)OD流預(yù)測(cè)值與真實(shí)值的吻合程度遠(yuǎn)高于另外兩個(gè)模型。

    表3是3種預(yù)測(cè)模型在預(yù)測(cè)時(shí)長(zhǎng)為第18個(gè)月時(shí)的預(yù)測(cè)結(jié)果的評(píng)價(jià)指標(biāo)對(duì)比,NeuralProphet模型的各項(xiàng)性能指標(biāo)都比另兩種模型好,可見NeuralProphet模型更適用于這張大型運(yùn)營(yíng)級(jí)IP網(wǎng)絡(luò)流量流向的預(yù)測(cè)。

    4 結(jié)束語

    針對(duì)IP網(wǎng)絡(luò)流量快速增長(zhǎng)且隨機(jī)性、突發(fā)性強(qiáng)等特點(diǎn),本文基于NeuralProphet模型對(duì)中國(guó)電信大型運(yùn)營(yíng)級(jí)IP網(wǎng)絡(luò)的流量流向進(jìn)行了詳盡的分析和預(yù)測(cè),同時(shí)也對(duì)比了傳統(tǒng)ARIMA模型和早期的Prophet模型。實(shí)踐結(jié)果表明,NeuralProphet的模型兼具傳統(tǒng)時(shí)間序列分析方法的可解釋性和神經(jīng)網(wǎng)絡(luò)方法的強(qiáng)大高效性,能夠得到準(zhǔn)確性、擴(kuò)展性和魯棒性更佳的預(yù)測(cè)結(jié)果,可以更好地滿足IP網(wǎng)絡(luò)規(guī)劃建設(shè)和運(yùn)行維護(hù)的需求。不過,目前的方法基于單個(gè)OD流時(shí)間序列來進(jìn)行,對(duì)于超大規(guī)模的網(wǎng)絡(luò)存在的運(yùn)算量急劇擴(kuò)張的問題,如全國(guó)31個(gè)省的省際流量流向,需分析預(yù)測(cè)31×31(即961)個(gè)OD流序列,而對(duì)于由全國(guó)300多個(gè)城域網(wǎng)組成的城域網(wǎng)間流量,運(yùn)算量則擴(kuò)大到約10萬個(gè)OD流序列,這在對(duì)時(shí)限性要求較高的緊急運(yùn)維調(diào)度等場(chǎng)景中局限性較大,因此降低運(yùn)算量的節(jié)點(diǎn)流量預(yù)測(cè)仍具有實(shí)際工程應(yīng)用價(jià)值,而將流量流向矩陣進(jìn)行整體一次性預(yù)測(cè)、而非轉(zhuǎn)換為N2個(gè)OD流時(shí)間序列的分析預(yù)測(cè)方法也亟需研究,且意義深遠(yuǎn)。

    可以預(yù)見,隨著各種新型應(yīng)用的不斷涌現(xiàn),未來IP 網(wǎng)絡(luò)流量的增長(zhǎng)和分布仍具有極大的不確定性,今后的流量流向分析預(yù)測(cè)和網(wǎng)絡(luò)結(jié)構(gòu)優(yōu)化將面臨更大的挑戰(zhàn),結(jié)合深度學(xué)習(xí)等人工智能方法且方便現(xiàn)網(wǎng)高效使用的流量分析預(yù)測(cè)模型將成為未來的主流和重點(diǎn)研究方向[26-33,需要繼續(xù)深入研究和學(xué)習(xí)探索。

    參考文獻(xiàn)

    [1]SAFRIANTI E, SARI L O, SARI N A. Real-time network device monitoring system with simple network management protocol (SNMP) Model[C]∥Proc.of the 3rd International Confe-rence on Research and Academic Community Services, 2021: 122-127.

    [2]SHMELKIN I, SPRINGER T. On adapting SNMP as communication protocol in distributed control loops for self-adaptive systems[C]∥Proc.of the IEEE International Conference on Autonomic Computing and Self-organizing Systems, 2021: 61-70.

    [3]董興強(qiáng), 李曉冰. 電信運(yùn)營(yíng)商網(wǎng)絡(luò)流量采集模型研究及應(yīng)用[J]. 移動(dòng)通信, 2020, 44(3): 67-71.

    DONG X Q, LI X B. Research and application of telecommunication operator network traffic collection model[J]. Mobile Communications, 2020, 44(3): 67-71.

    [4]YANG B W, LIU D. Design of IP network traffic acquisition system based on xFlow[C]∥Proc.of the IEEE 8th Joint International Information Technology and Artificial Intelligence Conference, 2019: 1631-1634.

    [5]NIE L S, WANG H Z, JIANG X, et al. Traffic measurement optimization based on reinforcement learning in large-scale ITS-oriented backbone networks[J]. IEEE Access, 2020, 8: 36988-36996.

    [6]WANG M, LU Y Q, QIN J C. Source-based defense against DDoS attacks in SDN based on sFlow and SOM[J]. IEEE Access, 2021, 10: 2097-2116.

    [7]榮紅佳, 盛虎, 閆秋婷. 基于改進(jìn)R/S估計(jì)算法的網(wǎng)絡(luò)流量長(zhǎng)相關(guān)性分析[J]. 大連交通大學(xué)學(xué)報(bào), 2021, 42(2): 114-119.

    RONG H J, SHENG H, YAN Q T. Analysis of network traffic long correlation based on improved R/S estimation algorithm[J]. Journal of Dalian Jiaotong University, 2021, 42(2): 114-119.

    [8]ERRAMILLI A, ROUGHAN M, VEITCH D, et al. Self-similar traffic and network dynamics[J]. Proceedings of the IEEE, 2002, 90(5): 800-819.

    [9]OLGA V, FERNANDO R, LUIS J H, et al. New developments in time series and forecasting[J]. Engineering Proceedings, 2023, 39(1): 135-148.

    [10]王婧, 鮑貴. 貝葉斯統(tǒng)計(jì)與傳統(tǒng)統(tǒng)計(jì)方法的比較[J]. 統(tǒng)計(jì)與決策, 2021, 37(1): 24-29.

    WANG J, BAO G. Comparison between bayesian statistics and traditional statistical methods[J]. Statistics amp; Decision, 2021, 37(1): 24-29.

    [11]LIU H, ZHANG X Y, YANG Y X, et al. Hourly traffic flow forecasting using a new hybrid modelling method[J]. Journal of Central South University, 2022, 29(4): 1389-1402.

    [12]LIAO L C, HU Z Y, HSU C Y, et al. Fourier graph convolution network for time series prediction[J]. Mathematics, 2023, 11(7): 122-131.

    [13]XU G Q, XIA C S, QIAN J, et al. A network traffic prediction algorithm based on Prophet-EALSTM-GPR[J]. Journal on Internet of Things, 2023, 4(2): 173-182.

    [14]VACCARI I, CARLEVARO A, NARTENI S, et al. Xplainable and reliable against adversarial machine learning in data analytics[J]. IEEE Access, 2022, 10: 83949-83970.

    [15]史朝衛(wèi), 孟相如, 康巧燕, 等. 基于混合流量預(yù)測(cè)的虛擬網(wǎng)絡(luò)拓?fù)渲貥?gòu)方法[J]. 系統(tǒng)工程與電子技術(shù), 2021, 43(5): 1382-1388.

    SHI C W, MENG X R, KANG Q Y, et al. Virtual network topology reconfiguration approach based on hybrid traffic[J]. Systems Engineering and Electronics, 2021, 43(5): 1382-1388.

    [16]YAO E Z, ZHANG L J, LI X H, et al. Traffic forecasting of back servers based on ARIMA-LSTM-CF hybrid model[J]. International Journal of Computational Intelligence Systems, 2023, 16(1): 244-256.

    [17]王菁, 文曉東, 王春枝. 基于動(dòng)態(tài)擴(kuò)散卷積交互圖神經(jīng)網(wǎng)絡(luò)的網(wǎng)絡(luò)流量預(yù)測(cè)[J]. 計(jì)算機(jī)應(yīng)用研究, 2023, 40(1): 97-101.

    WANG J, WEN X D, WANG C Z. Network traffic prediction based on dynamic diffusion convolutional interaction graph neural network[J]. Application Research of Computers, 2023, 40(1): 97-101.

    [18]YANG Y G, GENG S P, ZHANG B C, et al. Long term 5G network traffic forecasting via modeling non-stationarity with deep learning[J]. Communications Engineering, 2023, 2(1): 135-142.

    [19]ETNGU R, TAN C S, CHEE T C, et al. AI-assisted traffic matrix prediction using GA-enabled deep ensemble learning for hybrid SDN[J]. Computer Communications, 2023, 203(2): 1124-1131.

    [20]RAU F, SOTO I, ZABALABLANCO D, et al. A novel traffic prediction method using machine learning for energy efficiency in service provider networks[J]. Sensors, 2023, 23(11): 155-167.

    [21]SWETHA K, PRABU U, ANGEL G, et al. A study on traffic matrix estimation techniques in software-defined networks[C]∥Proc.of the 6th International Conference on Electronics, Communication and Aerospace Technology, 2022: 604-611.

    [22]JIANG D D, HU G M. A novel approach to large-scale IP traffic matrix estimation based on RBF neural network[C]∥Proc.of the 4th International Conference on Wireless Communications, Networking and Mobile Computing, 2008.

    [23]TRIEBE O, HEWAMALAGE H, PILYUGINA P, et al. NeuralProphet: explainable forecasting at scale[EB/OL]. [2023-04-10]. https:∥arxiv.org/pdf/2111.15397.pdf.

    [24]TAYLOR S J, LETHAM B. Forecasting at scale[J]. The American Statistician, 2018, 72(1): 37-45.

    [25]孫慧慧, 劉強(qiáng). 基于改進(jìn)Huber損失的部分線性模型穩(wěn)健經(jīng)驗(yàn)似然推斷[J]. 系統(tǒng)科學(xué)與數(shù)學(xué), 2022, 42(5): 1330-1343.

    SUN H H, LIU Q. Robust empirical likelihood inference of partial linear models based on improved huber loss[J]. Systems Science and Mathematical Sciences, 2022, 42(5): 1330-1343.

    [26]WU X Y, FU S D, HE Z J. Research on short-term traffic flow combination prediction based on CEEMDAN and machine learning[J]. Applied Sciences, 2022, 13(1): 1121-1132.

    [27]JEBA N, RATHI S. Attention-based multiscale spatiotemporal network for traffic forecast with fusion of external factors[J]. ISPRS International Journal of Geo-Information, 2022, 11(12): 323-330.

    [28]LIN L, LI W Z, ZHU L. Data-driven graph filter-based graph convolutional neural network approach for network-level multi-step traffic prediction[J]. Sustainability, 2022, 14(24): 211-219.

    [29]DALAL A, IMTIAZ A, EBRAHIM A. Deep learning based network traffic matrix prediction[J]. International Journal of Intelligent Networks, 2021, 2(1): 135-142.

    [30]YANG W C, RUI H, ZHAO Q H. A sequence-to-sequence traffic predictor on software-defined networking[J]. International Journal of Web and Grid Services, 2021, 17(3): 1210-1221.

    [31]SAYED S A, YASSER H A, AHMED H H. Artificial intelligence-based traffic flow prediction: a comprehensive review[J]. Journal of Electrical Systems and Information Technology, 2023, 10(1): 144-153.

    [32]XIONG P P, CHEN S T, YAN S L. Time-delay nonlinear model based on interval grey number and its application[J]. Journal of Systems Engineering and Electronics, 2022, 33(2): 370-380.

    [33]LYU S T, LI X H, FAN T, et al. Deep learning for fast channel estimation in millimeter-wave MIMO systems[J]. Journal of Systems Engineering and Electronics, 2022, 33(6): 1088-1095.

    作者簡(jiǎn)介

    韋 烜(1974—),女,高級(jí)工程師,碩士,主要研究方向?yàn)镮P網(wǎng)絡(luò)規(guī)劃與運(yùn)營(yíng)技術(shù)、下一代互聯(lián)網(wǎng)。

    劉志華(1970—),男,高級(jí)工程師,碩士,主要研究方向?yàn)樵凭W(wǎng)融合技術(shù)、下一代互聯(lián)網(wǎng)、網(wǎng)絡(luò)安全。

    李 青(1973—),男,高級(jí)工程師,碩士,主要研究方向?yàn)楹诵木W(wǎng)與業(yè)務(wù)平臺(tái)技術(shù)、云計(jì)算/大數(shù)據(jù)運(yùn)營(yíng)技術(shù)。

    何曉明(1968—),男,高級(jí)工程師,博士,主要研究方向?yàn)镮P網(wǎng)絡(luò)技術(shù)、移動(dòng)互聯(lián)網(wǎng)技術(shù)。

    黃君雅(1993—),女,工程師,碩士,主要研究方向?yàn)橄乱淮ヂ?lián)網(wǎng)、網(wǎng)絡(luò)安全。

    猜你喜歡
    網(wǎng)絡(luò)流量流向流量
    基于多元高斯分布的網(wǎng)絡(luò)流量異常識(shí)別方法
    冰墩墩背后的流量密碼
    玩具世界(2022年2期)2022-06-15 07:35:36
    張曉明:流量決定勝負(fù)!三大流量高地裂變無限可能!
    基于神經(jīng)網(wǎng)絡(luò)的P2P流量識(shí)別方法
    小溪??!流向遠(yuǎn)方
    井岡教育(2020年6期)2020-12-14 03:04:42
    尋找書業(yè)新流量
    出版人(2020年4期)2020-11-14 08:34:26
    AVB網(wǎng)絡(luò)流量整形幀模型端到端延遲計(jì)算
    十大漲幅、換手、振副、資金流向
    流向逆轉(zhuǎn)的啟示
    五位一體流量平穩(wěn)控制系統(tǒng)
    黄片无遮挡物在线观看| 99久久九九国产精品国产免费| 久久国内精品自在自线图片| 狠狠狠狠99中文字幕| 精品午夜福利在线看| 欧美bdsm另类| 日本午夜av视频| 日韩av在线免费看完整版不卡| 国内精品美女久久久久久| 国产黄片美女视频| 久久精品国产亚洲av涩爱| 精品国内亚洲2022精品成人| 国产日韩欧美在线精品| 99久国产av精品| 三级毛片av免费| 人妻少妇偷人精品九色| 亚洲国产色片| 亚洲欧美清纯卡通| 一级毛片久久久久久久久女| 国产精品一及| 草草在线视频免费看| 中文在线观看免费www的网站| 久久人人爽人人片av| 热99re8久久精品国产| 成人二区视频| 久久精品国产亚洲av天美| 老司机福利观看| 久久精品国产亚洲av天美| 女人被狂操c到高潮| 青春草国产在线视频| 国产片特级美女逼逼视频| 日韩欧美精品免费久久| 97在线视频观看| 欧美一区二区国产精品久久精品| 久久婷婷人人爽人人干人人爱| 日本五十路高清| 久久精品人妻少妇| 纵有疾风起免费观看全集完整版 | 久久久久久大精品| 国产亚洲最大av| 久久久精品94久久精品| 国产精品人妻久久久影院| 99久久精品热视频| 欧美日韩精品成人综合77777| 亚洲自拍偷在线| 2022亚洲国产成人精品| 亚洲精品日韩在线中文字幕| 亚洲精品aⅴ在线观看| 久久热精品热| 精品熟女少妇av免费看| 欧美日韩综合久久久久久| 精品酒店卫生间| 99久久九九国产精品国产免费| 黄色日韩在线| 看十八女毛片水多多多| 成人高潮视频无遮挡免费网站| 天天一区二区日本电影三级| 亚洲精华国产精华液的使用体验| av专区在线播放| 亚洲精华国产精华液的使用体验| 看黄色毛片网站| 精品久久久久久久人妻蜜臀av| 啦啦啦韩国在线观看视频| 国产日韩欧美在线精品| 免费观看精品视频网站| 国产淫语在线视频| 国产探花在线观看一区二区| 亚洲精品乱码久久久v下载方式| 中文字幕免费在线视频6| 天堂影院成人在线观看| 观看免费一级毛片| 99热这里只有是精品50| 十八禁国产超污无遮挡网站| 男女那种视频在线观看| 黄色欧美视频在线观看| 亚洲精品乱码久久久v下载方式| 欧美丝袜亚洲另类| 日韩亚洲欧美综合| 日本欧美国产在线视频| 亚洲四区av| 中文乱码字字幕精品一区二区三区 | 国产精品久久久久久久久免| 老司机福利观看| 国产在线一区二区三区精 | 国产精品1区2区在线观看.| 亚洲无线观看免费| 久久久久免费精品人妻一区二区| 欧美激情国产日韩精品一区| 少妇熟女aⅴ在线视频| 老司机影院毛片| 夜夜看夜夜爽夜夜摸| 午夜福利在线观看免费完整高清在| 老司机影院毛片| 毛片一级片免费看久久久久| 亚洲av成人精品一二三区| 婷婷六月久久综合丁香| 精品久久久久久久久亚洲| eeuss影院久久| 精品久久久久久电影网 | 色视频www国产| 精品99又大又爽又粗少妇毛片| 99热这里只有精品一区| 国产在视频线在精品| 秋霞伦理黄片| 色5月婷婷丁香| 欧美激情国产日韩精品一区| 欧美最新免费一区二区三区| 午夜福利在线观看免费完整高清在| 波多野结衣高清无吗| 欧美日韩在线观看h| 我的女老师完整版在线观看| 丰满乱子伦码专区| 亚洲欧美成人精品一区二区| 中国美白少妇内射xxxbb| 网址你懂的国产日韩在线| 欧美日韩一区二区视频在线观看视频在线 | 可以在线观看毛片的网站| 99热精品在线国产| 特级一级黄色大片| 色网站视频免费| 精品一区二区三区人妻视频| 久久久久久九九精品二区国产| 日韩精品青青久久久久久| 波多野结衣高清无吗| 久久久久精品久久久久真实原创| 婷婷六月久久综合丁香| 99在线人妻在线中文字幕| 国产精品三级大全| 超碰av人人做人人爽久久| 丰满少妇做爰视频| 免费黄色在线免费观看| 婷婷色av中文字幕| 成人美女网站在线观看视频| 99久久精品一区二区三区| 99久久九九国产精品国产免费| 成人毛片60女人毛片免费| 国产精品无大码| 久久久久久久久久黄片| 美女xxoo啪啪120秒动态图| av卡一久久| 午夜激情福利司机影院| 亚洲久久久久久中文字幕| 欧美一级a爱片免费观看看| 精品少妇黑人巨大在线播放 | 综合色丁香网| 一边摸一边抽搐一进一小说| 免费看av在线观看网站| 精品久久久久久久久久久久久| 蜜桃久久精品国产亚洲av| av国产久精品久网站免费入址| 国产视频内射| 99热这里只有是精品在线观看| 少妇人妻精品综合一区二区| 亚洲激情五月婷婷啪啪| 人人妻人人澡人人爽人人夜夜 | 国产久久久一区二区三区| 亚洲av中文字字幕乱码综合| 国产毛片a区久久久久| 寂寞人妻少妇视频99o| 亚洲成人中文字幕在线播放| 国产高清视频在线观看网站| 综合色丁香网| 一个人观看的视频www高清免费观看| 性色avwww在线观看| 2021少妇久久久久久久久久久| 久久久久性生活片| 国产v大片淫在线免费观看| 国产成人精品一,二区| 色5月婷婷丁香| 永久免费av网站大全| 久久国产乱子免费精品| 国产精品一及| 国产精品精品国产色婷婷| 国产精品久久视频播放| 欧美激情在线99| 好男人视频免费观看在线| 18禁在线无遮挡免费观看视频| 久久久久九九精品影院| 日日啪夜夜撸| 波多野结衣巨乳人妻| 搞女人的毛片| 国产精品久久久久久久电影| 成人毛片a级毛片在线播放| 免费观看a级毛片全部| 在线免费观看的www视频| 综合色av麻豆| 国产精品久久久久久av不卡| 亚洲欧美一区二区三区国产| 老司机福利观看| 成人欧美大片| 亚洲成色77777| 亚洲欧美精品专区久久| 国产精品,欧美在线| 少妇裸体淫交视频免费看高清| 国产精品嫩草影院av在线观看| 蜜桃亚洲精品一区二区三区| 夜夜爽夜夜爽视频| 国产精品乱码一区二三区的特点| 精品国产一区二区三区久久久樱花 | 老司机影院成人| 亚洲欧美一区二区三区国产| 18禁动态无遮挡网站| 亚洲人成网站高清观看| 少妇熟女aⅴ在线视频| 午夜福利高清视频| 听说在线观看完整版免费高清| 超碰av人人做人人爽久久| 国内精品宾馆在线| 久久精品国产99精品国产亚洲性色| 亚洲在线自拍视频| 内射极品少妇av片p| 91午夜精品亚洲一区二区三区| 亚洲av.av天堂| 观看美女的网站| 午夜福利在线观看吧| 久久精品久久久久久久性| 啦啦啦观看免费观看视频高清| 日本熟妇午夜| 亚洲精品亚洲一区二区| 日韩大片免费观看网站 | 欧美又色又爽又黄视频| 亚洲av中文av极速乱| 亚洲一级一片aⅴ在线观看| 日韩成人av中文字幕在线观看| 中文乱码字字幕精品一区二区三区 | 99热网站在线观看| 成人漫画全彩无遮挡| 亚洲av免费高清在线观看| 亚洲精品乱码久久久v下载方式| 日韩,欧美,国产一区二区三区 | 免费搜索国产男女视频| 精品一区二区三区视频在线| 日韩欧美国产在线观看| 特级一级黄色大片| 欧美又色又爽又黄视频| 精品午夜福利在线看| 欧美成人a在线观看| 三级国产精品片| 青春草视频在线免费观看| 国产免费男女视频| 少妇熟女aⅴ在线视频| 国产极品天堂在线| 国产av不卡久久| 插阴视频在线观看视频| 欧美成人精品欧美一级黄| 国产午夜精品一二区理论片| 高清午夜精品一区二区三区| 日本色播在线视频| 久久久久久国产a免费观看| 一区二区三区乱码不卡18| 晚上一个人看的免费电影| 亚洲av中文字字幕乱码综合| 国产午夜福利久久久久久| 精品国产三级普通话版| 嫩草影院精品99| 亚洲国产色片| 欧美一级a爱片免费观看看| 亚洲国产高清在线一区二区三| 热99在线观看视频| 久久综合国产亚洲精品| 麻豆乱淫一区二区| 成人一区二区视频在线观看| 伦理电影大哥的女人| 人体艺术视频欧美日本| 国产一区二区在线观看日韩| 日日干狠狠操夜夜爽| 成人鲁丝片一二三区免费| 天堂av国产一区二区熟女人妻| av在线蜜桃| 国产精品一及| 18禁在线无遮挡免费观看视频| 亚洲图色成人| 日本熟妇午夜| 日韩欧美精品v在线| 99九九线精品视频在线观看视频| 亚洲成人久久爱视频| 亚洲三级黄色毛片| 波野结衣二区三区在线| 国产一区二区在线观看日韩| 国产黄色小视频在线观看| 亚洲精品456在线播放app| 国产免费男女视频| 日韩精品有码人妻一区| 青春草亚洲视频在线观看| 久久久久性生活片| a级一级毛片免费在线观看| 午夜福利网站1000一区二区三区| 美女黄网站色视频| 一级毛片我不卡| 在线播放国产精品三级| 欧美区成人在线视频| av免费在线看不卡| 性插视频无遮挡在线免费观看| 高清毛片免费看| h日本视频在线播放| 热99在线观看视频| 性插视频无遮挡在线免费观看| 如何舔出高潮| 国产成人freesex在线| 深夜a级毛片| 欧美性猛交╳xxx乱大交人| 午夜激情欧美在线| 精品久久久噜噜| 麻豆久久精品国产亚洲av| 97超视频在线观看视频| 男插女下体视频免费在线播放| 别揉我奶头 嗯啊视频| 欧美日韩综合久久久久久| 黑人高潮一二区| 一本一本综合久久| 久久久a久久爽久久v久久| 美女脱内裤让男人舔精品视频| 欧美bdsm另类| 免费看美女性在线毛片视频| 少妇人妻精品综合一区二区| 一级毛片aaaaaa免费看小| 午夜福利网站1000一区二区三区| 成人特级av手机在线观看| 成人av在线播放网站| 老女人水多毛片| 亚洲第一区二区三区不卡| 黄色欧美视频在线观看| h日本视频在线播放| 色噜噜av男人的天堂激情| 少妇猛男粗大的猛烈进出视频 | 91午夜精品亚洲一区二区三区| 国产精品女同一区二区软件| 麻豆乱淫一区二区| 日韩在线高清观看一区二区三区| 波多野结衣高清无吗| 综合色av麻豆| 青春草国产在线视频| 在线播放无遮挡| 欧美日韩在线观看h| 日韩av在线大香蕉| 九九爱精品视频在线观看| 欧美日韩综合久久久久久| 国产成人免费观看mmmm| 国产精品久久视频播放| 久久久久久久国产电影| 亚洲av二区三区四区| 色吧在线观看| 国产精品嫩草影院av在线观看| 免费观看精品视频网站| 麻豆久久精品国产亚洲av| 99在线人妻在线中文字幕| 久久精品久久久久久久性| av在线亚洲专区| 亚洲精品成人久久久久久| 免费搜索国产男女视频| 精品久久久久久久久久久久久| 午夜福利在线观看免费完整高清在| 一边亲一边摸免费视频| 久久久国产成人免费| 日韩在线高清观看一区二区三区| 中文欧美无线码| 少妇猛男粗大的猛烈进出视频 | 国产成人精品婷婷| 久久精品夜色国产| 欧美激情国产日韩精品一区| 亚洲伊人久久精品综合 | 成人美女网站在线观看视频| 天天躁夜夜躁狠狠久久av| 超碰av人人做人人爽久久| 国产精品久久电影中文字幕| 美女脱内裤让男人舔精品视频| 一级毛片电影观看 | 欧美激情国产日韩精品一区| 九九久久精品国产亚洲av麻豆| 性色avwww在线观看| 黄色欧美视频在线观看| 波多野结衣高清无吗| 国产成人a∨麻豆精品| 日韩视频在线欧美| 日韩精品青青久久久久久| 岛国在线免费视频观看| 又黄又爽又刺激的免费视频.| 久久久午夜欧美精品| 日韩av在线大香蕉| 啦啦啦韩国在线观看视频| 国产亚洲5aaaaa淫片| 亚洲高清免费不卡视频| 成人美女网站在线观看视频| 日本与韩国留学比较| 一个人观看的视频www高清免费观看| 国产在线一区二区三区精 | 99久久中文字幕三级久久日本| 亚洲四区av| 欧美高清成人免费视频www| 日韩中字成人| 性色avwww在线观看| 久久亚洲国产成人精品v| 国产伦精品一区二区三区视频9| 亚洲精品影视一区二区三区av| 非洲黑人性xxxx精品又粗又长| www.av在线官网国产| 菩萨蛮人人尽说江南好唐韦庄 | 日韩人妻高清精品专区| 亚洲av中文av极速乱| 嫩草影院新地址| 国产又黄又爽又无遮挡在线| 天天躁夜夜躁狠狠久久av| 日本爱情动作片www.在线观看| 天堂影院成人在线观看| 人人妻人人澡欧美一区二区| 久久韩国三级中文字幕| 一级爰片在线观看| 国产亚洲5aaaaa淫片| videossex国产| 成人午夜精彩视频在线观看| 婷婷色综合大香蕉| 一本一本综合久久| 国产成人freesex在线| av又黄又爽大尺度在线免费看 | 国产精品一二三区在线看| 美女脱内裤让男人舔精品视频| 日本猛色少妇xxxxx猛交久久| 干丝袜人妻中文字幕| www.av在线官网国产| 国产成人精品婷婷| 久久精品国产亚洲网站| 国产精品国产高清国产av| 亚洲18禁久久av| 韩国av在线不卡| 伦理电影大哥的女人| 亚州av有码| 国产乱来视频区| 精品不卡国产一区二区三区| 九九热线精品视视频播放| 免费黄网站久久成人精品| 精品人妻偷拍中文字幕| 久久午夜福利片| 国产精品不卡视频一区二区| 日韩大片免费观看网站 | 精品久久久久久久人妻蜜臀av| 国内揄拍国产精品人妻在线| 99在线视频只有这里精品首页| 内射极品少妇av片p| 变态另类丝袜制服| 高清毛片免费看| av播播在线观看一区| 大香蕉97超碰在线| 校园人妻丝袜中文字幕| 国产精品永久免费网站| 在线观看av片永久免费下载| 卡戴珊不雅视频在线播放| 99久久精品一区二区三区| 五月伊人婷婷丁香| 久久久国产成人免费| 欧美不卡视频在线免费观看| 色哟哟·www| 亚洲美女搞黄在线观看| 成人毛片60女人毛片免费| 在线观看美女被高潮喷水网站| 亚洲av成人精品一区久久| 国产 一区精品| 免费观看的影片在线观看| av在线亚洲专区| 亚洲自偷自拍三级| 国产91av在线免费观看| 亚洲精品乱码久久久久久按摩| 美女内射精品一级片tv| 内射极品少妇av片p| 中文精品一卡2卡3卡4更新| av黄色大香蕉| 久久久久精品久久久久真实原创| 国产人妻一区二区三区在| 亚洲av二区三区四区| 久久久精品欧美日韩精品| 午夜福利成人在线免费观看| 亚洲av中文av极速乱| 免费观看的影片在线观看| 国产精品一区二区三区四区免费观看| 国产精品国产三级国产av玫瑰| 婷婷色av中文字幕| 国产一级毛片七仙女欲春2| 欧美激情在线99| 熟妇人妻久久中文字幕3abv| 噜噜噜噜噜久久久久久91| 久久久精品大字幕| 精品国产三级普通话版| 国产中年淑女户外野战色| 亚洲电影在线观看av| 嫩草影院新地址| 天堂av国产一区二区熟女人妻| 97超视频在线观看视频| 亚洲欧美精品综合久久99| 男女啪啪激烈高潮av片| 亚洲综合精品二区| 久久精品国产亚洲av涩爱| 欧美性猛交黑人性爽| 天堂网av新在线| 日韩制服骚丝袜av| a级毛色黄片| 久久久久久九九精品二区国产| 一区二区三区免费毛片| 搞女人的毛片| 国国产精品蜜臀av免费| 国产精品麻豆人妻色哟哟久久 | 亚洲精品日韩av片在线观看| 99热全是精品| 午夜福利网站1000一区二区三区| 亚洲国产最新在线播放| 国产白丝娇喘喷水9色精品| 在线观看美女被高潮喷水网站| 亚洲成av人片在线播放无| 亚洲内射少妇av| 久久久久久久亚洲中文字幕| 亚洲精品成人久久久久久| 91精品国产九色| 国产精品国产三级专区第一集| 51国产日韩欧美| 国产乱人视频| 亚洲国产精品成人久久小说| 在线天堂最新版资源| 国产成人a∨麻豆精品| 欧美激情国产日韩精品一区| 国产亚洲最大av| 啦啦啦韩国在线观看视频| 免费不卡的大黄色大毛片视频在线观看 | 国产精品一区二区性色av| 中文字幕熟女人妻在线| 免费一级毛片在线播放高清视频| 色综合亚洲欧美另类图片| 国产精品伦人一区二区| 汤姆久久久久久久影院中文字幕 | 欧美性猛交╳xxx乱大交人| 亚洲av中文字字幕乱码综合| 亚洲自偷自拍三级| 中文字幕久久专区| 日韩三级伦理在线观看| 中文字幕人妻熟人妻熟丝袜美| 国产精品av视频在线免费观看| 干丝袜人妻中文字幕| 日产精品乱码卡一卡2卡三| 午夜激情福利司机影院| 国产极品天堂在线| 人妻系列 视频| 亚洲精品日韩在线中文字幕| 国产中年淑女户外野战色| 国产三级在线视频| 麻豆精品久久久久久蜜桃| 亚洲精品,欧美精品| 成人鲁丝片一二三区免费| 亚洲精品乱码久久久久久按摩| 国产精品久久久久久精品电影小说 | 一级毛片aaaaaa免费看小| 又粗又硬又长又爽又黄的视频| 国产亚洲av片在线观看秒播厂 | 国内少妇人妻偷人精品xxx网站| 日韩欧美精品免费久久| 一个人看的www免费观看视频| 天天躁日日操中文字幕| 国产精品一区二区三区四区免费观看| 91在线精品国自产拍蜜月| 伦理电影大哥的女人| 久久韩国三级中文字幕| av天堂中文字幕网| 久久午夜福利片| 欧美日韩一区二区视频在线观看视频在线 | 水蜜桃什么品种好| 中文天堂在线官网| 国产美女午夜福利| 日韩精品青青久久久久久| 久久久久性生活片| 国产精品福利在线免费观看| 欧美3d第一页| 精品久久久久久久久亚洲| 亚洲久久久久久中文字幕| 亚洲av成人精品一二三区| 精品人妻一区二区三区麻豆| 最近最新中文字幕免费大全7| 一级爰片在线观看| 高清av免费在线| 少妇的逼水好多| av在线天堂中文字幕| 久久鲁丝午夜福利片| 亚洲av熟女| 小说图片视频综合网站| 69av精品久久久久久| 免费av不卡在线播放| 久久久久九九精品影院| 国内精品美女久久久久久| 国产淫片久久久久久久久| 一区二区三区高清视频在线| 在现免费观看毛片| 午夜福利高清视频| 水蜜桃什么品种好| 国产亚洲5aaaaa淫片| 久热久热在线精品观看| 少妇丰满av| videos熟女内射| 精品午夜福利在线看| 欧美潮喷喷水| or卡值多少钱| 一个人看视频在线观看www免费| 成人午夜高清在线视频| 最新中文字幕久久久久| 天堂影院成人在线观看| 高清av免费在线| 国产在线男女| 18禁在线播放成人免费| 欧美激情久久久久久爽电影| 色播亚洲综合网| 国产老妇女一区| 好男人在线观看高清免费视频| 日韩av在线免费看完整版不卡| 日韩一区二区三区影片| 日韩中字成人| 欧美丝袜亚洲另类| 只有这里有精品99| 18禁动态无遮挡网站| 高清日韩中文字幕在线| 天堂网av新在线| 日韩强制内射视频|