• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于DPDK并行通信的動態(tài)監(jiān)控模型

    2020-04-09 14:48:24陳慶奎
    計算機應用 2020年2期
    關鍵詞:信息系統(tǒng)

    李 翠,陳慶奎

    (上海理工大學光電信息與計算機工程學院,上海200093)

    0 引言

    隨著物聯(lián)網、5G、大數據和人工智能等技術的飛速發(fā)展,云計算因其資源利用率不高、可靠性低、可用性差、網絡延遲大等不足逐漸滿足不了用戶業(yè)務的需求[1-3],邊緣計算作為云計算的擴展和延伸,迅速得到了人們的關注。邊緣計算就近邊緣提供智能服務,融合了網絡、計算、存儲、應用等核心技術[4-5]。無論是云計算還是邊緣計算都需要高可靠的虛擬化集群技術的支撐以應對海量數據帶來的壓力。

    隨著網絡技術的發(fā)展,網絡流量規(guī)模不斷增大,網絡傳輸速度逐步提高,接口帶寬也從千兆發(fā)展到萬兆甚至更高,但網絡帶寬的增長速度遠遠趕不上數據的增長速度。為了應對網絡中數據包的高速傳輸,Intel 設計了高性能的數據包處理框架DPDK(Data Plane Development Kit)[7]。DPDK 在Intel 架構的通用處理器上有效地執(zhí)行數據包處理,相比Linux 內核有10倍左右的性能提升[6-9]。

    為了更好地發(fā)揮系統(tǒng)性能,充分利用節(jié)點的資源,對節(jié)點各個性能指標進行實時監(jiān)控變得尤為重要。本文設計了基于DPDK 并行通信的動態(tài)網絡監(jiān)控模型,實現了對通信系統(tǒng)運行時的各個指標的實時監(jiān)控和監(jiān)控信息的收集,如中央處理器(Central Processing Unit,CPU)負載、CPU 利用率、內存利用率、網口信息、網絡流量、節(jié)點狀態(tài)等。若發(fā)現異常情況,能夠第一時間進行處理,在用戶還沒有察覺之前處理完故障和異常,將損失降到最低;還可以根據采集的監(jiān)控數據優(yōu)化系統(tǒng)配置,包括配置出最優(yōu)的路由路徑和負載均衡策略等。

    1 相關工作

    1.1 DPDK

    DPDK 是一套強大、高度優(yōu)化的用戶空間庫和驅動程序,可以幫助用戶將控制面和數據面平臺進行整合[10]。DPDK 繞過了Linux 內核協(xié)議棧,工作在用戶態(tài);利用線程的CPU 親和綁定方式避免了線程在不同核間頻繁切換;采用內存大頁技術降低旁路轉換緩沖(Translation Lookaside Buffer,TLB)miss,減少訪存的開銷[9];使用輪詢技術減少中斷處理開銷。DPDK允許開發(fā)者自由地修改源代碼,將其應用于其他場景,包括加速包處理軟件庫,性能調優(yōu),為網絡功能虛擬化(Network Function Virtualization,NFV)技術的發(fā)展提供平臺,為網絡監(jiān)控提供關鍵技術等。

    1.2 監(jiān)控系統(tǒng)

    計算機監(jiān)控領域有一些開源的軟件系統(tǒng),近年來,很多研究想通過有效監(jiān)控去提升集群性能。文獻[11]以Nagios為起點,介紹了一種專為云架構設計的監(jiān)控系統(tǒng)Rocmon,它以插件為導向,靈活性很強。文獻[12]研究了Nagios 用于監(jiān)視和解決Apache Web 服務器和Oracle 數據庫服務器中的問題,提出了Nagios 中的自我修復功能用于自動解決Linux 服務器問題。文獻[13]介紹了一個基于Nagios 的服務框架設計和實現,該框架能夠監(jiān)視物理和虛擬基礎架構的資源;但Nagios的缺點也不容忽視,它配置復雜,對性能、流量等的處理也不占優(yōu)勢。文獻[14]利用Zabbix 構建了分布式的網絡監(jiān)控系統(tǒng),實現對Windows 和Linux 平臺上關鍵應用服務的監(jiān)控。文獻[15]設計了一種基于Zabbix 的網絡監(jiān)控系統(tǒng),能夠有效監(jiān)控分布在不同網絡中的服務器和應用程序,具有較好的穩(wěn)定性和普適性;但Zabbix 缺少數據匯總功能,報警設置比較多,對于深層的監(jiān)控需要二次開發(fā)。

    現有監(jiān)控系統(tǒng)大多是基于Linux內核協(xié)議棧,采用應用層傳輸控制協(xié)議(Transmission Control Protocol,TCP)或者用戶數據報協(xié)議(User Datagram Protocol,UDP)或者簡單網絡管理協(xié)議(Simple Network Management Protocol,SNMP)作為傳輸協(xié)議,傳輸速度都相對比較慢,不適合高速率、大流量的并行通信系統(tǒng)。本文介紹的動態(tài)監(jiān)控采用的是基于DPDK 的數據包傳輸技術,繞開了復雜的內核架構,工作在用戶態(tài)空間,傳輸協(xié)議是基于二層通信協(xié)議DMPD(Dynamic Monitor Protocol based DPDK)的,很好地保證了監(jiān)控信息的實時性。

    1.3 并行設計

    本文基于DPDK 進行了二次開發(fā),針對局域網內多核多網口服務器節(jié)點之間的并行通信,提供了高效可靠的數據包傳輸、轉發(fā)及處理,主要用到了以下三種并行結構。

    1)多核并行處理任務。在數據包處理領域,多核架構的處理器已經廣泛應用。多核處理器內部集成了多個完整的內核,采用“橫向擴展”的方法提高了系統(tǒng)的性能。本文模型采用了8 核處理器,通過任務劃分的方式,讓不同的核負責專門的任務,從而提高工作效率。其中:主邏輯核負責控制線程,完成一些控制任務,包括自我監(jiān)控、配合協(xié)調者完成系統(tǒng)監(jiān)控信息同步、執(zhí)行系統(tǒng)任務、接受用戶配置等;其他邏輯核負責輪詢,及時將要發(fā)送的數據包選擇網卡發(fā)送或者將網卡收到的數據包過濾后分發(fā)到不同的應用管道中,以此來提高并行度。

    2)多網口并行收發(fā)數據包。單網卡單端口已經不足以應對網絡中高速的流量傳輸,由于網卡的價格相對服務器其他配件比較便宜,因此本文采用多網口技術增加帶寬,提高服務器吞吐量,使收發(fā)包速率盡可能接近線速。多網口技術還可以提高通信的可靠性,通過“一包多發(fā)”,在不采用丟包重傳的情況下,降低丟包率。多網口配合多核處理器,可動態(tài)調整各網口流量,降低網口負載壓力,從而保證服務器訪問的穩(wěn)定和流暢。

    3)多管道并行處理數據包。本文采用了多管道技術,將管道與軟件結合,每個應用綁定一對雙向管道;各應用之間保持相對獨立,結合多核多網口技術,并行處理各自的數據包。每對管道設有優(yōu)先級標志、流量閾值、緩存大小、管道狀態(tài)等控制字段,用戶應用可以根據自己的需求來對管道進行控制,包括設置更高的發(fā)送優(yōu)先級、申請更多的緩存空間、降低帶寬等,從而做到分而治之。還設計了系統(tǒng)反饋控制,根據系統(tǒng)的運行狀態(tài)和監(jiān)控信息動態(tài)調整共享區(qū)的資源申請上限。

    1.4 并行通信結構

    通信系統(tǒng)由多個node和一個master組成。node是一個通信和被監(jiān)控的節(jié)點,一般是服務器,用node_num 來唯一標識。node 上運行一段程序用來采集本地節(jié)點監(jiān)控數據,并提交給master,每個node 都可以作為master 的候選者。master 是一個特殊的通信和監(jiān)控節(jié)點,它是由所有node 選舉出來的一個node,作為通信系統(tǒng)的協(xié)調者,用來匯總和收集node提交的監(jiān)控數據。單個節(jié)點通信系統(tǒng)分為通信模塊和應用程序接口模塊。前者實現了局域網內服務器節(jié)點間的并行通信;后者為用戶應用程序提供了調用接口。通信模塊包含三部分:組網、監(jiān)控和通信。其中:組網部分將局域網內的服務器節(jié)點及節(jié)點信息進行初始化和組織管理,為節(jié)點間通信和監(jiān)控提供基礎保證;監(jiān)控部分對節(jié)點的硬件信息、系統(tǒng)運行狀態(tài)以及資源利用情況等進行監(jiān)控和處理;通信部分則主要提供局域網內節(jié)點之間的通信,同時也支持三層通信框架的擴展。通信系統(tǒng)結構如圖1所示。

    圖1 節(jié)點通信系統(tǒng)結構Fig.1 Structure of node communication system

    1.5 負載均衡分析

    負載均衡主要是根據某種算法將網絡的流量平均分配到不同的服務器、網絡設備和CPU 上,減輕單個設備壓力。DPDK 框架在負載均衡上采用了RSS(Receive Side Scaling)技術,RSS 技術[16]是依據包的類型匹配相應的關鍵字決定收包隊列。文獻[17]介紹了對稱RSS,將同一連接的數據包映射到同一個網卡隊列,減少了線程在不同核間切換的開銷;文獻[18]介紹的HNLB(Hybrid NIC-offloading Load Balancer)是基于Intel 提出的Flow Director 技術實現的,它根據包的字段精確匹配,將其分配到某個特定隊列。這兩種方法都只考慮了接收端的負載均衡。

    Linux內核的Bonding 模塊運用聚合的方法將多個物理網口綁定為一個虛擬網口,同時支持7 種模式來提供負載均衡和網絡冗余服務,從而實現高帶寬、高可用性等目標。其中前6種模式只能處理發(fā)送數據端的負載均衡,第7種模式能夠處理發(fā)送和接收數據端的負載均衡,但對于接收數據端的負載均衡只是利用地址解析協(xié)議(Address Resolution Protocol,ARP)協(xié)商機制實現,通過預先靜態(tài)分配網口來實現接收端流量的負載均衡。在實際的復雜網絡環(huán)境下,該模式容易出現過載現象。

    DPDK 的Link Bonding PMD 庫支持綁定相同速度和雙工的rte_eth_dev 端口組,允許將多個(從屬)網絡接口控制器(Network Interface Controller,NIC)聚合到服務器和交換機中的單個邏輯接口。然后,新的聚合的物理介質關聯(lián)層(Physical Media Dependent layer,PMD)將根據指定的操作模式處理這些接口,以支持冗余鏈路、容錯和負載均衡等功能。但PMD 的實現需要更改Linux 的網口驅動,使得網口不能做其他用途,并且提供的6 種模式都只做了發(fā)送端網口負載均衡,沒有考慮到接收端的網口壓力,這樣會導致接收端網口出現性能瓶頸。

    2 監(jiān)控模塊設計

    2.1 監(jiān)控模型

    單獨的控制節(jié)點只用來對系統(tǒng)進行監(jiān)視與控制,不參與處理任務的執(zhí)行,這樣的設置容易出現單點故障,使通信系統(tǒng)的可靠性很大程度上受到控制節(jié)點的影響。為了避免此類情況的發(fā)生,保證通信系統(tǒng)的可靠性和穩(wěn)定性,本文介紹的通信系統(tǒng)的每個節(jié)點在任務處理和自我監(jiān)控方面地位是對等的,控制節(jié)點只是用來收集和廣播監(jiān)控信息的一個載體,通信系統(tǒng)中每個節(jié)點都保存有整個系統(tǒng)的監(jiān)控信息,都可以作為控制節(jié)點的備份節(jié)點。

    動態(tài)監(jiān)控包括自我監(jiān)控和整體監(jiān)控。其中:自我監(jiān)控是指每個節(jié)點監(jiān)控本機節(jié)點并采集監(jiān)控對象數據,當本地節(jié)點出現問題時能夠主動脫離集體,避免不一致的產生。整體監(jiān)控由master 收集保存各節(jié)點狀態(tài)及資源信息,然后以心跳包DMPD 協(xié)議格式廣播給所有node,以便發(fā)生故障時,各節(jié)點能夠做出正確的決定并及時更新系統(tǒng)狀態(tài)。監(jiān)控模型結構如圖2所示。

    圖2 監(jiān)控模型結構Fig.2 Structure of monitoring model

    2.2 監(jiān)控工作原理

    通信系統(tǒng)中每個服務器節(jié)點都配置有多個網口,其中一個網口作為外網接口,其余的用來完成基于DPDK 的局域網通信。每個網口綁定一個或多個發(fā)送隊列和接收隊列,網口從網絡上捕獲監(jiān)控數據包后,將數據包映射到public_ring 環(huán)上,然后將public_ring 環(huán)交由邏輯核去處理。本文模型選用主邏輯核解析監(jiān)控數據包,并對系統(tǒng)監(jiān)控信息進行科學準確的分析、計算和整理,針對不同的異常,做出合適、及時的處理。通信系統(tǒng)用public_ring 環(huán),將監(jiān)控數據包與通信數據包進行分離,避免了控制數據包對常規(guī)通信數據包的干擾。

    master 先廣播一個時間同步包,各個node 收到后將采集的本機監(jiān)控數據信息整理并回復給master,延時一段時間后,master 將收集的所有節(jié)點的監(jiān)控數據信息整理打包并廣播,每一個node 都會獲得相關監(jiān)控信息并依據這些信息分析出系統(tǒng)網絡狀況。

    2.3 監(jiān)控對象

    通信系統(tǒng)中節(jié)點越多、資源越分散,系統(tǒng)管理就越困難。為了保證通信系統(tǒng)的正常運行,需要對系統(tǒng)各節(jié)點的運行狀況和資源狀況信息進行全面收集和統(tǒng)一管理。影響系統(tǒng)正常運行的因素有很多,包括節(jié)點的CPU、內存、網絡、網卡等多個組件的相關信息,Linux系統(tǒng)已經內置了很多監(jiān)控信息并且提供相應的接口,本文主要針對網卡端口和管道進行更細粒度的監(jiān)控,以更好地應對局域網內高速率流量傳輸。主要監(jiān)控內容如表1所示。

    表1 監(jiān)控對象Tab.1 Objects of monitoring

    網口流量Fport(t)(單位:b)計算公式如下:

    其中:n 表示網卡總的收發(fā)隊列,i 表示第i 個收發(fā)隊列,RX 表示收包環(huán)形隊列,TX表示發(fā)包環(huán)形隊列。

    其中:Trecv表示所有收到的包數量,Tsend表示一共發(fā)送的包數量。

    其中:Fport(t)表示當前的流量值,Fport(t-1)表示上次收集時的流量值,Δτ 表示兩次收集時間差;BW 表示網口帶寬,取值為1 Gb/s。

    2.4 監(jiān)控數據采集

    采集的數據主要來自監(jiān)控對象。通過在每個網口設置原子計數器,來記錄網口流量值、收發(fā)包數量、錯誤包數量、丟包數量以及隊列溢出次數,并且記錄了網口一段時間的歷史值;每個核設置原子計數器和空閑計數器,分別用來記錄核的收發(fā)包數量和空輪詢的次數;通過讀取配置文件可以獲取大頁大小、管道數目、節(jié)點網口數量等靜態(tài)信息;通過調用Linux系統(tǒng)函數可以獲取CPU負載、內存大小、內存利用率、CPU溫度、CPU核數目、工作電壓等系統(tǒng)信息。

    采集的信息采用DMPD 協(xié)議格式進行封裝,以提高信息的規(guī)范性,簡化信息的解析。封裝好的信息通過基于send/recv 模式的心跳機制在通信節(jié)點間進行消息交換。本文介紹的系統(tǒng)監(jiān)控的心跳機制是將傳統(tǒng)的心跳信息附加到監(jiān)控信息中一起發(fā)送,減少了額外的寬帶和流量消耗。

    心跳數據包的傳輸用到了額外的傳輸協(xié)議DMPD,它是基于DPDK 開發(fā)的二層傳輸協(xié)議,包括心跳包協(xié)議和響應心跳包協(xié)議。心跳數據包是master 通過廣播,將收集保存的node 信息發(fā)送到所有node 的每一個網卡;響應心跳數據包是node收到心跳數據包后回復給master的本地節(jié)點的監(jiān)控信息及對master的監(jiān)控信息。協(xié)議格式如圖3所示。其中:m前綴代表網口信息,p 前綴代表管道信息,n 前綴代表node 信息,SCORE 表示核數目,UCPU 表示CPU 利用率,LCPU 表示CPU負載,LIO 表示IO 負載,SMEM 表示內存大小,UMEM 表示內存利用率。

    圖3 DMPD協(xié)議示意圖Fig.3 Schematic diagram of DMPD protocol

    3 負載均衡

    3.1 多網口負載均衡模型

    本文針對DPDK 的Link Bonding PMD 庫存在的缺陷與不足,設計了一種基于DPDK 多網口的負載均衡結構,并實現了動態(tài)負載均衡算法。

    當收到數據包時,將定制的關鍵字元組,即五元組(Snode_num,Dnode_num,Spump,Dpump,Ptype)根據微軟托普利茲算法[19]計算散列值,并通過取模操作來選擇發(fā)送網口和接收網口,然后根據散列表中對應網口的負載,決定是否調用調整函數,選擇當前最優(yōu)網口進行發(fā)包或者收包,還采用心跳機制動態(tài)更新網口負載,保證網口選擇的可靠性。其中:Snode_num 表示源節(jié)點編號,Dnode_num 表示目的節(jié)點編號,Spump 表示源節(jié)點管道,Dpump 表示目的節(jié)點管道,Ptype 表示包類型。負載均衡框架如圖4所示。

    圖4 負載均衡框架Fig.4 Load balancing framework

    3.2 動態(tài)負載均衡算法

    本節(jié)給出了網口負載信息模型,設有n 個網口,每個網口有m 個影響網口負載的因素,每個因素占用的權重系數為λ,λ的取值范圍為[0,1],且權重系數滿足式(4):

    則第i(i=1,2,…,n)個網口t時刻的負載為式(5):

    本文選取的影響網口負載的因素分別為網口利用率、網口丟包率和隊列溢出率,通過反復實驗,選出效果比較好的權重系數分別為0.84、0.09 和0.07。由于距離、延遲或突發(fā)的網絡故障等原因,會讓采集到的監(jiān)控信息產生誤差,為了防止負載信息出現突變,提高負載信息準確性,本文選擇使用自動調節(jié)公式平滑過渡。設上次采集負載為Lport_i(t-1),當前采集負載值為Lport_i'(t),i 表示第i 個網口,則當前負載值為式(6):

    其中:γ表示調整因子,取值為0.8。

    為了對多網口的負載進行總體統(tǒng)籌,準確調用調整函數,本文采用了負載均衡度對各網口負載進行衡量。負載均衡度反映了多網口數據包收發(fā)處理的差異程度,它的值越小,表明各網口的數據包分配就越均勻。式(7)是網口t時刻的平均負載,式(8)為負載均衡度。

    其中:n 為網口的數量,Lport_i(t)表示在時刻t 第i(i=1,2,…,n)個網口的負載。這里的μ 值是期望負載,可以調整,在當前網口負載高于平均負載且負載均衡度的值大于1.86 時,就會調用調整函數選出當前最優(yōu)網卡,調整函數采用小根堆結構,經過一次堆調整找出當前負載最小的網口。動態(tài)負載均衡算法流程步驟描述如下:

    步驟1 收到將要發(fā)送的數據包后,解析包頭,得到關鍵字元組(Snode_num,Dnode_num,Spump,Dpump,Ptype)。

    步驟2 通過散列函數得到散列結果,在散列表中找到發(fā)送網口對應項。

    步驟3 查看發(fā)送網口狀態(tài)值,如果為不可用,則執(zhí)行步驟4,否則計算當前平均負載和負載均衡度;如果負載均衡度沒有超過閾值,則選擇該網口作為發(fā)送網口,填充源MAC(Media Access Control)地址,跳至步驟5,否則執(zhí)行步驟4。

    步驟4 當網口不可用或者網口過載時,通過調整函數找出當前可用發(fā)送網口中負載最小的作為發(fā)送網口,填充源MAC地址。

    步驟5 通過調整函數找出當前可用接收網口中負載最小的作為接收網口,填寫目的MAC地址。

    步驟6 發(fā)送數據包至發(fā)送網口的TX(Transport)隊列。

    動態(tài)負載均衡算法的偽代碼如下:

    Algorithm of load balancing

    while(pthread_quit!=0)

    Receive packets to be sent

    Parse the header of packets and get the key_touple

    Get the hash result

    Find the sending port by key

    if(port_state==0)

    Find the minimum load sending port from the available ports

    Fill source MAC address

    else

    Compute current Lport(t)and WL(t)

    if(WL(t)>threshold)

    Find the minimum load sending port from the available ports

    Fill source MAC address

    end if

    end if

    Find the minimum load receiving port from the available ports

    Fill destination MAC address

    Send packets to the TX

    end while

    4 實驗分析

    4.1 實驗環(huán)境

    在Linux 環(huán)境下實現了基于DPDK 的數據密集型并行通信系統(tǒng),它由20 000 行C 語言代碼組成,是基于DPDK18.02版本開發(fā)的,動態(tài)監(jiān)控是它的一個組成部分。為了驗證動態(tài)網絡監(jiān)控的有效性,搭建了千兆網絡的局域網通信系統(tǒng),由一臺二層交換機和10臺服務器組成,系統(tǒng)拓撲結構如圖5所示,服務器配置信息則如表2所示。

    圖5 系統(tǒng)拓撲結構Fig.5 System topology

    在測試中,使用DPDK 提供的流量發(fā)生器Pktgen[20]作為數據包生成工具來產生大小不同的數據包。局域網10 臺服務器的應用連接數目各不一樣,不同節(jié)點應用之間相互通信,接收端服務器收到這些報文后會進行過濾解析,將其分發(fā)到目的應用管道中。整個過程中,監(jiān)控模塊一直在動態(tài)地監(jiān)控通信系統(tǒng)的資源與節(jié)點的狀態(tài)信息,為節(jié)點通信提供可靠性保證。

    表2 服務器配置信息Tab.2 Configuration information of server

    4.2 實驗結果

    在上述的實驗環(huán)境中,不同節(jié)點之間相互通信,發(fā)送大小不同的數據包,其中:node1、node2發(fā)送64 B的數據包,node3、node4 發(fā)送128 B 的數據包,node9 發(fā)送256 B 的數據包,node5、node6 發(fā)送512 B 的數據包,node7、node8 發(fā)送1 024 B的數據包,master發(fā)送1 024 B大小以上的數據包。

    4.2.1 監(jiān)控性能測試

    master、node1、node3、node6、node7 配置8 個網口,其余節(jié)點配置4 個網口,每隔5 s 對系統(tǒng)資源及節(jié)點狀態(tài)進行采集,表3 是一段時間某一時刻系統(tǒng)的監(jiān)控信息統(tǒng)計結果,其中CPU 負載一列展示的是最近1 min、5 min、15 min 的負載值。表4 是網口監(jiān)控信息統(tǒng)計,其中:網口狀態(tài)一列每一位表示一個網口的狀態(tài),1 表示正常狀態(tài),0 表示不可用狀態(tài);網口數據流速率一列每個值表示一個網口單位時間的流量;網口利用率一列每個值表示一個網口收發(fā)包速率和帶寬的百分比。選取master、node1、node3、node6這4個節(jié)點30 s內的8個網口總的收包、丟包、數據包處理情況進行分析計算,結果分別如圖6~8所示。

    圖6 不同包大小的節(jié)點的數據流速率Fig.6 Data flow rate of nodes with different package size

    圖7 不同包大小的節(jié)點的丟包率Fig.7 Packet loss rate of nodes with different package size

    圖8 不同包大小的節(jié)點的數據包處理能力Fig.8 Packet handling capability of nodes with different package size

    表3 系統(tǒng)監(jiān)控對象數據Tab.3 Data of monitoring objects of system

    表4 網口監(jiān)控對象數據Tab.4 Data of monitoring objects of network port

    由圖6~8 可以看出,隨著數據包的增大,節(jié)點丟包率逐漸下降到0,收發(fā)包速率(節(jié)點數據流速率)逐漸向線速逼近,數據包處理能力逐漸增強至能夠及時處理所有收到的數據包。由表3、4 數據可看出,系統(tǒng)各個節(jié)點的各項指標相對一致,系統(tǒng)狀態(tài)與預期一致,由此可說明動態(tài)監(jiān)控模型能夠正確有效地監(jiān)控各個節(jié)點的各項指標,保證通信系統(tǒng)處在一個相對穩(wěn)定的狀態(tài)。

    4.2.2 負載均衡測試

    在上述測試的基礎上,流量限制為4 Gb/s,每隔5 s,對node4(4 網口,8 核心)和master(8 網口,8 核心)的監(jiān)控信息進行采集(5 s 內的平均值),計算各網口的利用率,采用負載均衡前后的節(jié)點網口利用率情況如圖9、10所示。

    圖9 node4網口利用率Fig.9 Network port utilization of node4

    由圖9和圖10可以看出,未采用負載均衡時,各網口利用率層次不齊,不同網口之間差距很大,采用負載均衡方法后,各網口利用率變得相對比較平均,各網口之間相互分擔負載,避免了瓶頸的發(fā)生,提高了服務器的性能。

    圖10 master網口利用率Fig.10 Network port utilization of master

    5 結語

    本文首先對DPDK、并行通信和動態(tài)監(jiān)控進行了研究分析,設計實現了基于DPDK 并行通信的動態(tài)監(jiān)控模型;然后對監(jiān)控對象進行了分析,針對不同對象設置了合適的探測點,通過DMPD 協(xié)議進行監(jiān)控數據采集,并且根據監(jiān)控信息設計了一種基于多網口的動態(tài)負載均衡算法;最后通過實驗驗證了動態(tài)網絡監(jiān)控及負載均衡算法的性能。接下來我們將對功耗控制、廣播包過濾功能做進一步的探討和研究。

    猜你喜歡
    信息系統(tǒng)
    Smartflower POP 一體式光伏系統(tǒng)
    WJ-700無人機系統(tǒng)
    ZC系列無人機遙感系統(tǒng)
    北京測繪(2020年12期)2020-12-29 01:33:58
    基于PowerPC+FPGA顯示系統(tǒng)
    半沸制皂系統(tǒng)(下)
    連通與提升系統(tǒng)的最后一塊拼圖 Audiolab 傲立 M-DAC mini
    訂閱信息
    中華手工(2017年2期)2017-06-06 23:00:31
    展會信息
    中外會展(2014年4期)2014-11-27 07:46:46
    信息
    健康信息
    祝您健康(1987年3期)1987-12-30 09:52:32
    www.999成人在线观看| 极品教师在线免费播放| 亚洲av一区综合| 午夜福利在线观看吧| 精品熟女少妇八av免费久了| 国产在线精品亚洲第一网站| 夜夜看夜夜爽夜夜摸| avwww免费| a级毛片a级免费在线| 久久午夜福利片| 久久99热6这里只有精品| 色尼玛亚洲综合影院| 亚洲欧美日韩东京热| av天堂在线播放| 床上黄色一级片| 国产精华一区二区三区| 蜜桃久久精品国产亚洲av| 国产免费男女视频| 色在线成人网| 69人妻影院| 一级黄片播放器| av专区在线播放| 国产精品久久久久久久电影| 亚洲综合色惰| 久久九九热精品免费| 乱码一卡2卡4卡精品| 看十八女毛片水多多多| 久久久成人免费电影| 啪啪无遮挡十八禁网站| 国内久久婷婷六月综合欲色啪| 成人高潮视频无遮挡免费网站| av在线观看视频网站免费| 色综合站精品国产| 欧美色欧美亚洲另类二区| 麻豆一二三区av精品| 免费在线观看影片大全网站| 99在线人妻在线中文字幕| 日韩欧美精品免费久久 | 麻豆久久精品国产亚洲av| 午夜a级毛片| 亚洲七黄色美女视频| 麻豆av噜噜一区二区三区| 国产成人a区在线观看| 熟女电影av网| 国产成年人精品一区二区| 亚洲av熟女| 老司机午夜福利在线观看视频| 国产探花极品一区二区| 亚洲片人在线观看| 美女cb高潮喷水在线观看| 中文在线观看免费www的网站| 国产精品亚洲一级av第二区| 日本精品一区二区三区蜜桃| 亚洲成人久久爱视频| 美女被艹到高潮喷水动态| 国产爱豆传媒在线观看| av在线天堂中文字幕| 午夜激情欧美在线| 内射极品少妇av片p| 村上凉子中文字幕在线| 久久6这里有精品| 校园春色视频在线观看| 啦啦啦观看免费观看视频高清| 一个人看视频在线观看www免费| 午夜影院日韩av| 欧美性感艳星| 99热这里只有精品一区| 国产精品国产高清国产av| 美女免费视频网站| 18美女黄网站色大片免费观看| 亚洲精品乱码久久久v下载方式| 99久久九九国产精品国产免费| eeuss影院久久| 国内毛片毛片毛片毛片毛片| 国内久久婷婷六月综合欲色啪| 小说图片视频综合网站| 亚洲激情在线av| 99riav亚洲国产免费| av黄色大香蕉| 好男人电影高清在线观看| 亚洲国产欧美人成| 婷婷丁香在线五月| 国产老妇女一区| 97超视频在线观看视频| 简卡轻食公司| 搞女人的毛片| 国产一区二区在线观看日韩| 久久天躁狠狠躁夜夜2o2o| 高清在线国产一区| 1000部很黄的大片| av在线天堂中文字幕| 一级av片app| 国产精品乱码一区二三区的特点| 黄色女人牲交| 最近在线观看免费完整版| 免费人成在线观看视频色| 国内少妇人妻偷人精品xxx网站| 亚洲国产欧美人成| 一级av片app| 免费无遮挡裸体视频| 国产精品av视频在线免费观看| 最近最新免费中文字幕在线| 国产激情偷乱视频一区二区| 18禁黄网站禁片免费观看直播| 岛国在线免费视频观看| 亚洲人成网站高清观看| 不卡一级毛片| 国产精品女同一区二区软件 | 亚洲无线观看免费| 精品国产三级普通话版| 久久九九热精品免费| 日日摸夜夜添夜夜添小说| 又粗又爽又猛毛片免费看| 午夜福利免费观看在线| 色av中文字幕| 亚洲中文字幕一区二区三区有码在线看| 免费高清视频大片| 成年免费大片在线观看| 又紧又爽又黄一区二区| 亚洲国产欧美人成| 亚洲不卡免费看| 国产精品亚洲一级av第二区| a级毛片a级免费在线| 国产成人欧美在线观看| 九九在线视频观看精品| 亚洲av成人av| 美女 人体艺术 gogo| 91狼人影院| 色噜噜av男人的天堂激情| 欧美xxxx黑人xx丫x性爽| www.熟女人妻精品国产| 精品不卡国产一区二区三区| 少妇丰满av| 精品久久久久久久末码| 极品教师在线视频| 婷婷亚洲欧美| 哪里可以看免费的av片| 婷婷丁香在线五月| 国产高清视频在线播放一区| а√天堂www在线а√下载| 国产成人啪精品午夜网站| 亚洲专区国产一区二区| 国产黄a三级三级三级人| 少妇人妻精品综合一区二区 | 久久久久久国产a免费观看| 99热这里只有是精品在线观看 | 国产亚洲av嫩草精品影院| 脱女人内裤的视频| 男女下面进入的视频免费午夜| 在线观看午夜福利视频| 国产欧美日韩精品一区二区| 日本 av在线| 亚洲五月婷婷丁香| 国产精品亚洲美女久久久| 久久精品夜夜夜夜夜久久蜜豆| 十八禁人妻一区二区| 欧美一级a爱片免费观看看| 老熟妇仑乱视频hdxx| 国产精品自产拍在线观看55亚洲| 国产在视频线在精品| 精品人妻偷拍中文字幕| 毛片一级片免费看久久久久 | 91狼人影院| 九九久久精品国产亚洲av麻豆| 最近在线观看免费完整版| 欧美乱色亚洲激情| 88av欧美| 中出人妻视频一区二区| 日本黄大片高清| 中文字幕熟女人妻在线| 精品日产1卡2卡| 亚洲成人免费电影在线观看| 免费大片18禁| 成人一区二区视频在线观看| 国内揄拍国产精品人妻在线| 国产美女午夜福利| 熟女电影av网| 露出奶头的视频| 99热这里只有精品一区| 又粗又爽又猛毛片免费看| 久久久久久久精品吃奶| 亚洲午夜理论影院| 欧美午夜高清在线| 日韩中文字幕欧美一区二区| 国产成年人精品一区二区| 夜夜夜夜夜久久久久| 人妻制服诱惑在线中文字幕| 国产国拍精品亚洲av在线观看| 亚洲精品456在线播放app | eeuss影院久久| 午夜精品在线福利| 亚洲国产精品合色在线| avwww免费| 国模一区二区三区四区视频| 日日摸夜夜添夜夜添av毛片 | 亚洲五月天丁香| 午夜免费男女啪啪视频观看 | 亚洲精品亚洲一区二区| www.www免费av| 免费人成在线观看视频色| 精华霜和精华液先用哪个| 日本一二三区视频观看| 在线十欧美十亚洲十日本专区| 香蕉av资源在线| 欧美色视频一区免费| 中文字幕av在线有码专区| 亚洲片人在线观看| 亚洲一区高清亚洲精品| 12—13女人毛片做爰片一| 国产伦人伦偷精品视频| 99久久精品一区二区三区| 精品久久久久久久久亚洲 | 男人狂女人下面高潮的视频| 不卡一级毛片| av视频在线观看入口| 国产aⅴ精品一区二区三区波| 国产乱人视频| 天天躁日日操中文字幕| 在线国产一区二区在线| 在线免费观看的www视频| 在线看三级毛片| 全区人妻精品视频| av在线天堂中文字幕| av在线老鸭窝| 久久精品久久久久久噜噜老黄 | 国产aⅴ精品一区二区三区波| 波多野结衣高清无吗| 亚洲五月天丁香| 欧美高清成人免费视频www| 我的女老师完整版在线观看| 特大巨黑吊av在线直播| 亚洲av成人不卡在线观看播放网| 亚洲欧美清纯卡通| 成人国产综合亚洲| 亚洲性夜色夜夜综合| 亚洲天堂国产精品一区在线| 午夜a级毛片| 热99re8久久精品国产| 亚洲精品一卡2卡三卡4卡5卡| 麻豆国产97在线/欧美| 色尼玛亚洲综合影院| 国产男靠女视频免费网站| 欧美成人一区二区免费高清观看| 99国产精品一区二区三区| 国产高清视频在线观看网站| 午夜久久久久精精品| 成人三级黄色视频| 一进一出抽搐动态| 欧美日韩黄片免| 91在线精品国自产拍蜜月| 国产激情偷乱视频一区二区| 亚洲av成人av| 十八禁国产超污无遮挡网站| 热99在线观看视频| 中文字幕精品亚洲无线码一区| 在线观看66精品国产| 超碰av人人做人人爽久久| 国产成人a区在线观看| 少妇被粗大猛烈的视频| 久久精品国产99精品国产亚洲性色| 永久网站在线| 日韩欧美精品免费久久 | 国产精华一区二区三区| 在线a可以看的网站| 国产精品自产拍在线观看55亚洲| 精品久久久久久久人妻蜜臀av| 高清日韩中文字幕在线| 亚洲久久久久久中文字幕| 男人舔奶头视频| 欧美乱妇无乱码| 成人国产综合亚洲| 两个人视频免费观看高清| 人人妻人人看人人澡| 97超视频在线观看视频| 欧美另类亚洲清纯唯美| 亚洲精品成人久久久久久| 熟女人妻精品中文字幕| 亚洲精品在线美女| 久久久久国内视频| 国语自产精品视频在线第100页| 国产精品爽爽va在线观看网站| 淫妇啪啪啪对白视频| 最新中文字幕久久久久| 成人亚洲精品av一区二区| 日韩欧美国产一区二区入口| 午夜精品久久久久久毛片777| 亚洲精品一卡2卡三卡4卡5卡| 天美传媒精品一区二区| 中文资源天堂在线| 亚洲av日韩精品久久久久久密| 99热这里只有是精品50| 欧美午夜高清在线| av黄色大香蕉| 免费av毛片视频| 色av中文字幕| 3wmmmm亚洲av在线观看| 国产成人欧美在线观看| 国产真实伦视频高清在线观看 | 在线国产一区二区在线| 成人特级av手机在线观看| 午夜精品一区二区三区免费看| 最新中文字幕久久久久| 蜜桃久久精品国产亚洲av| 精品人妻视频免费看| 亚洲人与动物交配视频| 日韩欧美 国产精品| 久久久久九九精品影院| 又紧又爽又黄一区二区| 成人无遮挡网站| 成人高潮视频无遮挡免费网站| 亚洲性夜色夜夜综合| a级一级毛片免费在线观看| 男女床上黄色一级片免费看| 亚洲av成人精品一区久久| 国产蜜桃级精品一区二区三区| 国产精品伦人一区二区| 久久人人精品亚洲av| 熟女人妻精品中文字幕| 在线观看av片永久免费下载| 国产真实乱freesex| 国产午夜福利久久久久久| 欧美成人一区二区免费高清观看| 麻豆成人av在线观看| 岛国在线免费视频观看| 少妇高潮的动态图| 性插视频无遮挡在线免费观看| 成人高潮视频无遮挡免费网站| 美女xxoo啪啪120秒动态图 | 十八禁人妻一区二区| 国产精品1区2区在线观看.| 久久6这里有精品| 欧美绝顶高潮抽搐喷水| 日日干狠狠操夜夜爽| 色5月婷婷丁香| 色综合站精品国产| 欧美高清成人免费视频www| 国产一区二区激情短视频| 精品一区二区三区av网在线观看| 97超视频在线观看视频| 天堂网av新在线| 亚洲av免费在线观看| 亚洲天堂国产精品一区在线| 亚洲av美国av| 亚洲在线自拍视频| 亚洲内射少妇av| 精品一区二区三区av网在线观看| 免费高清视频大片| 99久久精品一区二区三区| 少妇的逼好多水| 国产成人a区在线观看| 在线免费观看的www视频| 日韩欧美国产在线观看| 国产私拍福利视频在线观看| 老女人水多毛片| 宅男免费午夜| 国产高清三级在线| 哪里可以看免费的av片| 小蜜桃在线观看免费完整版高清| 国产精品自产拍在线观看55亚洲| 国产精品99久久久久久久久| 国产黄色小视频在线观看| 国产熟女xx| 亚洲无线在线观看| 9191精品国产免费久久| 欧美性感艳星| 757午夜福利合集在线观看| 69人妻影院| 成人高潮视频无遮挡免费网站| 91在线精品国自产拍蜜月| 久久精品国产自在天天线| 午夜激情欧美在线| 午夜福利18| 欧美中文日本在线观看视频| 少妇人妻一区二区三区视频| 亚洲欧美精品综合久久99| 精品人妻视频免费看| 老司机午夜福利在线观看视频| 国产野战对白在线观看| 久久精品国产99精品国产亚洲性色| 亚洲欧美日韩无卡精品| 亚洲欧美精品综合久久99| 美女大奶头视频| 国产日本99.免费观看| 精品一区二区三区人妻视频| 一个人观看的视频www高清免费观看| 成人欧美大片| АⅤ资源中文在线天堂| 日本撒尿小便嘘嘘汇集6| 精品不卡国产一区二区三区| 久久久色成人| 男人舔奶头视频| 国产日本99.免费观看| 午夜影院日韩av| 亚洲精品456在线播放app | 啪啪无遮挡十八禁网站| 亚洲成人免费电影在线观看| 99精品久久久久人妻精品| 两个人的视频大全免费| 18禁黄网站禁片午夜丰满| 久久久久亚洲av毛片大全| 国产亚洲欧美98| 美女大奶头视频| 亚洲人成网站在线播| 色综合亚洲欧美另类图片| 观看免费一级毛片| АⅤ资源中文在线天堂| 亚洲成av人片在线播放无| 国内毛片毛片毛片毛片毛片| 亚洲av五月六月丁香网| 天天躁日日操中文字幕| 永久网站在线| 午夜激情欧美在线| 美女免费视频网站| 久久久久精品国产欧美久久久| 亚洲综合色惰| 99精品在免费线老司机午夜| 国产精品精品国产色婷婷| 99国产精品一区二区三区| 啪啪无遮挡十八禁网站| 精品一区二区三区视频在线观看免费| 午夜精品久久久久久毛片777| 国产三级中文精品| 首页视频小说图片口味搜索| 国产不卡一卡二| 午夜福利成人在线免费观看| www.色视频.com| 国产又黄又爽又无遮挡在线| 亚洲国产欧美人成| 久久精品国产亚洲av涩爱 | 我的老师免费观看完整版| 别揉我奶头~嗯~啊~动态视频| 亚洲 国产 在线| 美女高潮的动态| 美女大奶头视频| 国产久久久一区二区三区| 国产欧美日韩一区二区三| av在线老鸭窝| 90打野战视频偷拍视频| 老司机深夜福利视频在线观看| 欧美成人性av电影在线观看| 亚洲中文字幕日韩| 可以在线观看的亚洲视频| av天堂在线播放| 特大巨黑吊av在线直播| 国产精品免费一区二区三区在线| 亚洲av中文字字幕乱码综合| 在线观看美女被高潮喷水网站 | 国产精品女同一区二区软件 | 国产欧美日韩一区二区三| 国产色婷婷99| 舔av片在线| 欧美激情久久久久久爽电影| 久久性视频一级片| av天堂在线播放| 色av中文字幕| 国产高清视频在线观看网站| 欧美日本视频| 国产精品久久久久久人妻精品电影| 在线a可以看的网站| 99在线人妻在线中文字幕| a级一级毛片免费在线观看| 超碰av人人做人人爽久久| 精品福利观看| 亚洲最大成人手机在线| 日韩免费av在线播放| 99久久精品国产亚洲精品| 久久精品国产自在天天线| 老女人水多毛片| 色综合站精品国产| 国产精品乱码一区二三区的特点| 午夜免费激情av| 又粗又爽又猛毛片免费看| 99久国产av精品| 精品一区二区免费观看| 国产色婷婷99| 性色av乱码一区二区三区2| 国语自产精品视频在线第100页| 给我免费播放毛片高清在线观看| 日本五十路高清| 亚洲av不卡在线观看| 在线免费观看的www视频| 小蜜桃在线观看免费完整版高清| 久久久久久久精品吃奶| 999久久久精品免费观看国产| 国产成人av教育| 午夜福利欧美成人| 国产aⅴ精品一区二区三区波| 丰满乱子伦码专区| 天天一区二区日本电影三级| 欧美乱妇无乱码| 自拍偷自拍亚洲精品老妇| 日本三级黄在线观看| 精品午夜福利在线看| 国产精品人妻久久久久久| 国产精品久久久久久人妻精品电影| 亚洲中文字幕一区二区三区有码在线看| aaaaa片日本免费| avwww免费| 免费在线观看日本一区| 99国产综合亚洲精品| 成年版毛片免费区| 在现免费观看毛片| 日韩欧美精品v在线| 高清在线国产一区| 亚洲av日韩精品久久久久久密| 国产精品国产高清国产av| 在现免费观看毛片| 国产真实伦视频高清在线观看 | 午夜福利在线观看免费完整高清在 | 午夜久久久久精精品| 丰满乱子伦码专区| 亚洲色图av天堂| 精品熟女少妇八av免费久了| 一a级毛片在线观看| 99热这里只有是精品50| 亚洲av一区综合| 日韩中文字幕欧美一区二区| 麻豆av噜噜一区二区三区| 久久久久久久久大av| 午夜日韩欧美国产| 夜夜爽天天搞| 国产精品综合久久久久久久免费| 欧美日韩亚洲国产一区二区在线观看| 亚洲熟妇熟女久久| 国产毛片a区久久久久| 亚洲av免费高清在线观看| 亚洲精品一区av在线观看| 色尼玛亚洲综合影院| 成人特级av手机在线观看| 一个人看的www免费观看视频| 国产淫片久久久久久久久 | 99久久精品国产亚洲精品| 国产欧美日韩一区二区三| 免费av观看视频| 欧美黑人巨大hd| 国产精品综合久久久久久久免费| 精品久久久久久成人av| 色综合站精品国产| 波野结衣二区三区在线| 一进一出抽搐动态| 国产蜜桃级精品一区二区三区| 午夜免费男女啪啪视频观看 | 两个人视频免费观看高清| 亚洲成人久久性| 中文字幕免费在线视频6| 国产三级黄色录像| 波野结衣二区三区在线| 国内精品久久久久久久电影| 91麻豆精品激情在线观看国产| 中文资源天堂在线| 给我免费播放毛片高清在线观看| 亚洲成人中文字幕在线播放| 高潮久久久久久久久久久不卡| 午夜亚洲福利在线播放| 两个人的视频大全免费| 免费黄网站久久成人精品 | 国产精品国产高清国产av| 欧美日韩福利视频一区二区| 国产伦精品一区二区三区视频9| 在线国产一区二区在线| 十八禁人妻一区二区| 精品久久久久久,| 老司机午夜十八禁免费视频| 高清日韩中文字幕在线| 亚洲,欧美,日韩| 麻豆国产av国片精品| 午夜a级毛片| 国产精品人妻久久久久久| a在线观看视频网站| 精品久久久久久,| 欧美最黄视频在线播放免费| 欧美激情在线99| 日韩精品青青久久久久久| 高清在线国产一区| 我要搜黄色片| 一区二区三区高清视频在线| 精品久久久久久成人av| 噜噜噜噜噜久久久久久91| 国产老妇女一区| 国产单亲对白刺激| 长腿黑丝高跟| 免费av不卡在线播放| 99热6这里只有精品| 他把我摸到了高潮在线观看| 欧美+日韩+精品| 别揉我奶头~嗯~啊~动态视频| 婷婷六月久久综合丁香| 欧美日韩国产亚洲二区| 麻豆成人午夜福利视频| 国内揄拍国产精品人妻在线| 91在线观看av| 亚洲欧美日韩高清专用| 男女做爰动态图高潮gif福利片| 色综合婷婷激情| 亚洲最大成人手机在线| 亚洲片人在线观看| 亚洲无线观看免费| av女优亚洲男人天堂| 色综合亚洲欧美另类图片| 熟妇人妻久久中文字幕3abv| 国产欧美日韩一区二区精品| 在线观看一区二区三区| 韩国av一区二区三区四区| 给我免费播放毛片高清在线观看| 色噜噜av男人的天堂激情| 亚洲成av人片在线播放无| 日韩亚洲欧美综合| 久久99热这里只有精品18| 国产免费男女视频| 亚洲人与动物交配视频| 亚洲av免费在线观看| 国产乱人伦免费视频| 欧美黄色淫秽网站| 久久久久久国产a免费观看| 一区二区三区激情视频|