• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    一種改進(jìn)的ELK日志采集與分析系統(tǒng)

    2019-10-15 02:21:53鮮征征葉嘉祥
    軟件導(dǎo)刊 2019年8期

    鮮征征 葉嘉祥

    摘 要:ELK架構(gòu)是解決日志分布式采集與分析問題中具有代表性的解決方案。但原生ELK架構(gòu)存在Logstash對CPU資源占用較大、無法動態(tài)更新日志相關(guān)配置和日志數(shù)據(jù)傳輸過程中數(shù)據(jù)易丟失等問題。為滿足現(xiàn)實中大型分布式服務(wù)的日志采集與分析需求,對原生ELK架構(gòu)作如下改進(jìn):在收集過程中增加限速器以減少CPU占用率;增加分布式注冊中心實現(xiàn)相關(guān)配置動態(tài)更新;增加消息隊列使得消息傳輸過程更健全。實驗結(jié)果表明,改進(jìn)后的ELK日志采集及分析系統(tǒng)與原生ELK相比,CPU占用率減少了近60%,日志速度提高了3倍,且消息丟失率為零。

    關(guān)鍵詞:日志采集;分布式架構(gòu);ELK;消息隊列

    DOI:10. 11907/rjdk. 191790 開放科學(xué)(資源服務(wù))標(biāo)識碼(OSID):

    中圖分類號:TP319文獻(xiàn)標(biāo)識碼:A 文章編號:1672-7800(2019)008-0105-06

    An Improved ELK Log Collection and Analysis System

    XIAN Zheng-zheng,YE Jia-xiang

    (Department of Internet Finance and Information Engineering, Guang Dong University of Finance, Guangzhou 510521,China)

    Abstract:ELK architecture is a representative solution to the problem of distributed log collection and analysis. However, the native ELK architecture has problems such as Logstash consuming large CPU resources, unable to dynamically update log related configuration, and has data loss during log data transmission. In order to satisfy the needs of log collection and analysis of large distributed services in reality, the paper improves the native ELK architecture as follows: speed limiter is added to reduce CPU occupancy in the collection process; distributed registry is added to update the configuration dynamically; and message queue is added to make the message transmission process more sounder. The experimental results show that compared with the original ELK, the CPU occupancy of the improved ELK log acquisition and analysis system is reduced by nearly 60%, the log speed is increased by three times, and the excellent effect of zero message loss rate is achieved.

    Key Words: log collection;distributed architecture;ELK;message queue

    基金項目:廣東省自然科學(xué)基金項目(2017A030313391);廣東省科技廳國際合作項目(2017A050501042)

    作者簡介:鮮征征(1977-),女,博士,廣東金融學(xué)院互聯(lián)網(wǎng)金融與信息工程學(xué)院講師,研究方向為數(shù)據(jù)挖掘、隱私保護(hù)、機器學(xué)習(xí)、軟件開發(fā)與測試;葉嘉祥(1996-),男,廣東金融學(xué)院互聯(lián)網(wǎng)金融與信息工程學(xué)院學(xué)生,研究方向為服務(wù)端開發(fā)。

    0 引言

    如今,互聯(lián)網(wǎng)在人們?nèi)粘I钪邪缪葜豢商娲慕巧?,?dāng)用戶在訪問、瀏覽或點擊電子商務(wù)、社交娛樂、金融保險等網(wǎng)站時,都會產(chǎn)生相應(yīng)的日志數(shù)據(jù)。這些日志數(shù)據(jù)是軟件系統(tǒng)、硬件設(shè)備和用戶行為的記錄工具,旨在及時發(fā)現(xiàn)用戶異常行為和軟硬件故障,以確保網(wǎng)站穩(wěn)定、安全運行,從而提升網(wǎng)站服務(wù)質(zhì)量[1]。對于海量小文件存儲隨服務(wù)訪問量上升的情況,大型網(wǎng)站通常在系統(tǒng)部署策略上采用分布式架構(gòu),但這會導(dǎo)致所產(chǎn)生的日志也分散在各臺服務(wù)器中,而傳統(tǒng)對多臺服務(wù)器進(jìn)行單機日志檢索的方法效率低下。由此,基于分布式架構(gòu)的日志采集與分析系統(tǒng)應(yīng)運而生,各大互聯(lián)網(wǎng)公司紛紛提出各種各樣的日志監(jiān)控平臺方案。目前主流的監(jiān)控平臺有:基于傳統(tǒng) Web 框架的監(jiān)控平臺,基于數(shù)據(jù)索引的監(jiān)控平臺和基于大數(shù)據(jù)處理框架的監(jiān)控平臺。其中,集Elasticsearch、Logstash和Kibana為一體的基于數(shù)據(jù)索引的ELK[2]開源框架,是實現(xiàn)企業(yè)通用輕量級大型日志監(jiān)控平臺的常用技術(shù)。ELK的分布式日志采集與分析系統(tǒng)可根據(jù)不同場景,結(jié)合不同的工具或中間件,靈活簡單地處理復(fù)雜日志問題,在分布式日志收集與分析領(lǐng)域得到了廣泛研究和應(yīng)用。

    關(guān)于日志采集與分析技術(shù),目前已取得一定研究成果。郝璇[3]基于Apache Flume設(shè)計并實現(xiàn)了一個適用于異構(gòu)網(wǎng)站平臺間的分布式日志收集系統(tǒng),該系統(tǒng)雖然可以將多個網(wǎng)站的日志集中存儲,但缺少過濾和分析功能;廖湘科等[4]從日志特征分析、基于日志的故障診斷和日志增強3個方面分析了日志研究現(xiàn)狀,然后通過對幾種常用大規(guī)模開源軟件的日志進(jìn)行調(diào)研,發(fā)現(xiàn)一些日志相關(guān)的特征和規(guī)律以及現(xiàn)有工具難以解決的問題;李祥池[5]針對ELK在日志傳輸過程中可能丟失的情況,進(jìn)行消息隊列優(yōu)化,利用Redis、Kafka、Rockmq等消息隊列作為日志傳輸通道,達(dá)到了防止數(shù)據(jù)丟失、減緩服務(wù)器壓力的效果;陳波[6]等針對ELK的ElasticSearch離線存儲功能的性能瓶頸,進(jìn)行存儲功能拓展,利用大數(shù)據(jù)工具如HBASE等分布式存儲系統(tǒng)提升日志的存儲能力;張彩云等[7]通過對ELK、Redis 進(jìn)行整合,結(jié)合全國綜合氣象信息共享系統(tǒng)內(nèi)蒙古氣象局實際場景設(shè)計了ELK 日志分析平臺;姚攀等[8]針對ELK的Logstash對CPU有較大壓力等問題,提出解析日志的規(guī)則和技巧,通過對Logstash作進(jìn)一步優(yōu)化,搭建能夠?qū)A咳罩具M(jìn)行實時采集和檢索的分析監(jiān)控系統(tǒng);湯網(wǎng)祥等[9]針對系統(tǒng)大規(guī)模部署下日志采集配置復(fù)雜、難以集中控制等問題,提出對各類源日志進(jìn)行整合,并通過本地采集、網(wǎng)絡(luò)匯集、集中管控、異步分級處理等方式加以實現(xiàn);王參參等[10]根據(jù)銀行業(yè)務(wù)發(fā)展需求,提出將全網(wǎng)范圍日志分析系統(tǒng)由總行的一級中心平臺和地級市的二級分行數(shù)據(jù)采集點組成,用以解決因日志規(guī)模過大造成的省級系統(tǒng)資源過載和網(wǎng)絡(luò)堵塞等問題,但由于日志源眾多,日志類型繁雜且未對收集的日志進(jìn)行過濾,最終對業(yè)務(wù)系統(tǒng)運行帶來一定影響;羅學(xué)貫[11]通過與互聯(lián)網(wǎng)行業(yè)流行的配置管理數(shù)據(jù)庫及監(jiān)控系統(tǒng)進(jìn)行關(guān)聯(lián),設(shè)計并實現(xiàn)了以ELK為基礎(chǔ)的日志分析系統(tǒng),利用logstash 豐富的插件解決日志分析和處理難題,形成實際工作中豐富的日志字段,為重點日志增加了標(biāo)識字段,為日志分析和故障診斷提供了便捷手段;袁華[12]提出ELK與大數(shù)據(jù)處理數(shù)據(jù)技術(shù)Spark相結(jié)合,用一種隨機 key 后綴方式優(yōu)化 Spark 集群性能,從而提高集群計算效率;嚴(yán)嘉維等[13]為提高可信計算平臺日志數(shù)據(jù)分析效率,提出了一種基于Hadoop的可信計算平臺日志分析模型,將實時日志與規(guī)則庫匹配,實現(xiàn)對用戶異常行為的檢測,日志分析結(jié)果為主動防御提供了決策支持;王夢蕾[14]從網(wǎng)絡(luò)安全角度設(shè)計與實現(xiàn)了一個基于 Spark Streaming 的實時日志分析與信息管理系統(tǒng),在發(fā)生 DDoS 攻擊時及時給予用戶警告;孫魯森[15]研究并使用Flume集群將Web應(yīng)用集群所產(chǎn)生的日志進(jìn)行匯總,搭建Hadoop集群并使用其內(nèi)部組件HDFS來持久化Flume集群所匯總的日志數(shù)據(jù),可以對網(wǎng)站的多維度Page View、訪客來源統(tǒng)計、用戶關(guān)鍵路徑轉(zhuǎn)化進(jìn)行多維度且詳細(xì)的數(shù)據(jù)分析。但該研究與文獻(xiàn)[13]都是基于Flume平臺,F(xiàn)lume自身比較繁瑣,與ELK相比,它主要側(cè)重于數(shù)據(jù)傳輸而非采集。隨著容器虛擬化技術(shù)的進(jìn)步與推廣,主流的服務(wù)部署均掛載在宿主機的虛擬容器里,如Docker[16],但是容器會根據(jù)不同的策略分布與漂移,這樣會導(dǎo)致日志過于分散。因此,基于如Kubernetes[17]容器編排管理的大型日志收集系統(tǒng)相關(guān)研究受到關(guān)注。

    針對現(xiàn)實中的復(fù)雜場景,以上方法都未從原生ELK架構(gòu)自身缺點出發(fā),原生ELK架構(gòu)存在服務(wù)器處理效率低下、Logstash對CPU資源占用過多、可擴(kuò)展性差、無法動態(tài)更新日志相關(guān)配置和日志數(shù)據(jù)傳輸過程中數(shù)據(jù)易丟失等問題。本文通過使用Etcd搭建配置中心集群,使用Gin框架與Nginx實現(xiàn)日志產(chǎn)生器,模擬分布式系統(tǒng)下產(chǎn)生日志,使用Vue.js搭建前端,提出對收集模塊和轉(zhuǎn)發(fā)模塊的改進(jìn)方案,即實時收集產(chǎn)生的日志,同時能限制日志收集頻率,從而替代ELK框架中的Logstash,達(dá)到減少CPU壓力的目的;還使用Kafka與Zookeeper搭建一個消息隊列集群,將收集到的日志發(fā)送至消息隊列中,達(dá)到削峰、保證消息健全的作用,并用go語言實現(xiàn)轉(zhuǎn)發(fā)模塊,從消息隊列中拉取日志;最后使用Elasticsearch與Kibana構(gòu)建日志存儲與展示模塊,向用戶提供強大的日志搜索與分析功能。本文基于ELK、Kafka與Etcd等技術(shù),通過對ELK的改進(jìn),彌補了原生ELK在大型分布式業(yè)務(wù)系統(tǒng)中不能直接使用的缺陷,設(shè)計并實現(xiàn)了一個日志健全、配置便捷、性能更高效的分布式日志采集與分析系統(tǒng)。

    1 系統(tǒng)設(shè)計

    1.1 系統(tǒng)業(yè)務(wù)架構(gòu)設(shè)計

    系統(tǒng)分為四大模塊,分別是系統(tǒng)入口模塊、日志收集模塊、日志轉(zhuǎn)發(fā)模塊和日志展示模塊,如圖1所示。

    圖1 系統(tǒng)業(yè)務(wù)架構(gòu)

    圖1中,其核心關(guān)注點在于日志收集模塊和日志轉(zhuǎn)發(fā)模塊的消息健全、高性能以及高可用設(shè)計。系統(tǒng)入口模塊直接對終端設(shè)備提供服務(wù),同時入口模塊通過調(diào)用http服務(wù)生成日志、配置文件等;日志收集模塊主要是獲取配置中心上的路徑配置,對特定日志進(jìn)行收集,并發(fā)送到消息隊列中;日志轉(zhuǎn)發(fā)模塊主要是獲取配置中心上的主題配置,對特定主題的日志進(jìn)行過濾接收,并發(fā)送至ElasticSearch;日志展示模塊主要對日志進(jìn)行搜索、分析和展示。

    1.2 系統(tǒng)執(zhí)行時序分析

    系統(tǒng)業(yè)務(wù)在執(zhí)行過程中是按照一定的時序進(jìn)行,圖2展示了本系統(tǒng)的業(yè)務(wù)執(zhí)行時序。

    圖2 系統(tǒng)執(zhí)行時序圖

    圖2中,Logweb服務(wù)是系統(tǒng)入口模塊,產(chǎn)生日志;Logagent是日志收集模塊,對產(chǎn)生的日志進(jìn)行收集,并將消息推送到kafka消息隊列;Logtransfer是日志轉(zhuǎn)發(fā)模塊,將從Kafka拉取的日志消息推送到ElasticSearch,并且通過Kibana進(jìn)行日志分析與展示。

    1.3 系統(tǒng)物理架構(gòu)設(shè)計

    原生的ELK架構(gòu)中沒有嵌入消息中間件、配置中心等內(nèi)容,因此,只適合日志量較少、業(yè)務(wù)簡單的系統(tǒng)。隨著業(yè)務(wù)逐漸復(fù)雜,ELK原生架構(gòu)已不能支撐龐大復(fù)雜的日志信息。因此,需要設(shè)計一個適合分布式系統(tǒng)的日志采集與分析系統(tǒng),并考慮消息隊列集群及應(yīng)用集群。本系統(tǒng)針對此種場景,從分布式系統(tǒng)、高可用集群方面入手,對原生ELK架構(gòu)進(jìn)行改進(jìn)。系統(tǒng)物理架構(gòu)如圖3所示。

    圖3 系統(tǒng)物理架構(gòu)

    圖3中,Web端的http請求首先會經(jīng)過Nginx負(fù)載均衡,轉(zhuǎn)發(fā)到服務(wù)器集群中1~3號服務(wù)器中的任意一臺;服務(wù)器集群中的日志收集器,會通過Etcd集群中的配置路徑,進(jìn)行日志收集,然后將日志推送到Kafka集群;而Kafka集群之間的聯(lián)系是靠Zookeeper集群進(jìn)行服務(wù)注冊與發(fā)現(xiàn);日志轉(zhuǎn)發(fā)器通過Etcd集群中的主題配置,從Kafka集群中選擇相關(guān)主題的日志,拉取到服務(wù)器集群中;最后日志將發(fā)送至ElasticSearch,通過Kibana連接ElasticSearch獲取日志,進(jìn)行日志展示與分析。

    其中,日志消息隊列Kafka的高可用與消息健全性尤為重要,其集群架構(gòu)如圖4所示。

    圖4 消息隊列集群架構(gòu)

    圖4中,product是生產(chǎn)者,它從Zookeeper注冊中心獲取到Kafka集群的地址,然后將產(chǎn)生的消息發(fā)送至Kafka集群,而Kafka集群事先需要將自己本身的地址注冊到Zookeeper集群,并且保持心跳檢測,才能被生產(chǎn)者、消費者發(fā)現(xiàn);consumer是消費者,同理,它也從Zookeeper注冊中心獲取到Kafka集群的地址,然后去Kafka集群拉取消息。本系統(tǒng)的生產(chǎn)者指日志收集器,它將收集的日志發(fā)送至Kafka中,消費者是指日志轉(zhuǎn)發(fā)器,將日志從Kafka中拉取下來。

    2 系統(tǒng)功能模塊

    2.1 系統(tǒng)入口模塊

    系統(tǒng)入口模塊主要作用是配置收集規(guī)則、產(chǎn)生日志,用Nginx與Gin框架搭建,對外開放http接口,網(wǎng)頁端可以通過調(diào)用相關(guān)接口,完成該功能。Nginx在本系統(tǒng)中的作用是作為業(yè)務(wù)應(yīng)用服務(wù)器集群的負(fù)載均衡器,應(yīng)用服務(wù)器集群架構(gòu)如圖5所示。圖5中,所有服務(wù)器都處理相同業(yè)務(wù),所有請求經(jīng)Nginx轉(zhuǎn)發(fā)到不同的服務(wù)器中。如果集群中的一個服務(wù)器發(fā)生故障,則Nginx能夠迅速將該系統(tǒng)的任務(wù)轉(zhuǎn)發(fā)到集群中其它正常工作的服務(wù)器上進(jìn)行處理。業(yè)務(wù)具體處理則是用Gin框架支撐,大致分為兩個步驟:①配置收集規(guī)則、收集路徑等,主要完成對日志文件位置、日志主題過濾等功能模塊配置;②模擬生產(chǎn)環(huán)境下的日志產(chǎn)生過程。

    圖5 應(yīng)用服務(wù)器集群架構(gòu)

    2.2 日志收集模塊

    該模塊中日志收集器根據(jù)規(guī)則收集日志,并將日志發(fā)送到消息隊列中,包括收集器、限速器和推送子模塊。收集器和限速器主要根據(jù)配置規(guī)則收集相關(guān)日志,并配置特定的發(fā)送頻率,達(dá)到限速目的,其UML設(shè)計如圖6所示。

    圖6 收集器與限速UMl設(shè)計

    圖6中,日志收集器模塊分別由TailManager類(用作管理收集日志)、CollectObj類(實現(xiàn)日志收集器)、LogConfig類(實現(xiàn)日志配置)、Limit類(解決日志限速)4個類構(gòu)成。

    推送子模塊負(fù)責(zé)將收集的日志推送到kafka消息隊列中,其UML圖設(shè)計如圖7所示。該模塊功能實現(xiàn)包括Message和Sender兩個類。前者定義日志消息,后者解決日志消息推送。

    圖11 日志轉(zhuǎn)發(fā)結(jié)果

    4.2.4 日志搜索和分析

    當(dāng)日志成功收集后,需對這些日志數(shù)據(jù)進(jìn)行搜索和分析,其結(jié)果如圖12所示。柱狀圖表示每秒鐘收集到的日志,其下是按時間先后順序排列的日志數(shù)據(jù),默認(rèn)情況下是全量顯示,若需要搜索特定規(guī)則的日志,可以通過搜索欄進(jìn)行搜索匹配。

    圖12 日志展示效果

    通過上述實驗,系統(tǒng)可以完成收集、轉(zhuǎn)發(fā)和展示分析等功能,體現(xiàn)了其強大的分布式日志采集與分析能力。

    4.3 對比實驗

    在同樣的實驗環(huán)境下,針對同一實驗對象,將改進(jìn)后的系統(tǒng)與原生ELK在性能方面作對比實驗。

    較原生ELK而言,改進(jìn)后的系統(tǒng)優(yōu)勢主要體現(xiàn)在日志收集時多項性能的提升。具體壓測方案設(shè)計如下:

    (1)壓測環(huán)境:Core i5-4200H處理器,8G內(nèi)存,1T硬盤。

    (2)Logstash / Logagent 讀取 500 000條日志,單行數(shù)據(jù) 500B。

    (3)壓測實驗一:正常收集日志數(shù)據(jù),統(tǒng)計CPU平均占用率、總耗時和收集速度,結(jié)果如表1所示。

    (4)壓測實驗二:在收集日志數(shù)據(jù)時,人工對網(wǎng)絡(luò)進(jìn)行實驗性阻斷,產(chǎn)生網(wǎng)絡(luò)抖動,統(tǒng)計消息丟失數(shù)和丟失率,結(jié)果如表2所示。

    表1 壓測實驗一結(jié)果

    表2 壓測實驗二結(jié)果

    從表1可看出,原生ELK系統(tǒng)中Logstash CPU占用率高達(dá)75.6%,而改進(jìn)后的收集器 CPU占用率降低到44.8%,且收集速度為原生ELK的3倍。從實驗結(jié)果來看,改進(jìn)后的系統(tǒng)解決了原生ELK中Logstash對CPU資源消耗問題,且提升了日志收集速度與系統(tǒng)的穩(wěn)定性。

    從表2可以看出,在產(chǎn)生網(wǎng)絡(luò)抖動時,原生ELK系統(tǒng)會丟失一些數(shù)據(jù),500 000條消息丟失了698條,消息丟失率達(dá)0.14%,改進(jìn)后的日志收集系統(tǒng),500 000條消息丟失0條,消息丟失率為0。從實驗結(jié)果來看,改進(jìn)后的系統(tǒng)解決了原生系統(tǒng)日志消息容易丟失的問題,顯著提高了日志收集過程中消息的健全性。

    5 結(jié)語

    隨著云計算、物聯(lián)網(wǎng)技術(shù)的迅速發(fā)展,數(shù)據(jù)已呈爆炸式增長,人們進(jìn)入大數(shù)據(jù)時代[19]。而對于Web日志數(shù)據(jù)量的增加,文件的分布式存儲和數(shù)據(jù)挖掘技術(shù)也成為Web日志挖掘研究領(lǐng)域的重點分支[20]。因此,日志的采集和分析將是其研究的重要支撐。

    本文系統(tǒng)主要著眼于日志系統(tǒng)的簡易實用性、高可用性與日志的健全性。簡易實用性的實現(xiàn)途徑主要是:可配置的Web管理后臺、簡易操作的搜索與分析Web頁面等;高可用性的實現(xiàn)途徑主要是:分布式、集群、負(fù)載均衡、限流等;日志的健全性實現(xiàn)途徑主要是:消息隊列、注冊中心等。

    下一步工作將關(guān)注兩個問題:一是將日志收集與分析系統(tǒng)整合到Docker容器,并且用Kubernetes進(jìn)行管理編排,這樣能極大方便開發(fā)者和運維者,后續(xù)迭代開發(fā)也具有敏捷性;二是改進(jìn)現(xiàn)有系統(tǒng),增加分布式鏈路追蹤系統(tǒng),以獲得服務(wù)之間調(diào)用的耗時、吞吐量、是否故障等信息,從而為運維和監(jiān)控提供更好的參考。

    參考文獻(xiàn):

    [1]? 應(yīng)毅,任凱,劉亞軍.? 基于大數(shù)據(jù)的網(wǎng)絡(luò)日志分析技術(shù)[J]. 計算機科學(xué), 2018, 45(11A): 353-355.

    [2]? 高凱. 大數(shù)據(jù)搜索與日志挖掘及可視化方案—ELK Stack:Elasticsearch、Logstash、Kibana[M]. 第2版. 北京:清華大學(xué)出版社,2016.

    [3]? 郝璇. 基于Apache Flume的分布式日志收集系統(tǒng)設(shè)計與實現(xiàn)[J].? 軟件導(dǎo)刊,2014,13(7):110-111.

    [4]? 廖湘科,李姍姍,董威,等. 大規(guī)模軟件系統(tǒng)日志研究綜述[J]. 軟件學(xué)報,2016,27(8):1934-1947.

    [5]? 李祥池. 基于ELK和Spark Streaming的日志分析系統(tǒng)設(shè)計與實現(xiàn)[J]. 電子科學(xué)技術(shù),2015,6(2) 674-678.

    [6]? 陳波. 基于 HBASE 分布式存儲的通用海量日志系統(tǒng)設(shè)計方法研究[J]. 信息通信, 2017(6): 7-9.

    [7]? 張彩云,牛永紅,趙迦琪.? ELK日志分析平臺在系統(tǒng)運維中的應(yīng)用[J]. 電子技術(shù)與軟件工程,2017(6): 182-183.

    [8]? 姚攀,馬玉鵬,徐春香,等. 基于ELK的日志分析系統(tǒng)研究及應(yīng)用 [J].? 計算機工程與設(shè)計, 2018, 39(7):2090-2095.

    [9]? 湯網(wǎng)祥,王金華,赫凌俊,等.? 大規(guī)模軟件系統(tǒng)日志匯集服務(wù)平臺設(shè)計與實現(xiàn) [J]. 計算機工程與設(shè)計, 2018, 35(11):173-178.

    [10] 王參參,姜青云,李彤.? 基于大數(shù)據(jù)的日志分析平臺在銀行中的研究與實現(xiàn) [J].? 網(wǎng)絡(luò)安全技術(shù)與應(yīng)用, 2018(5): 68-70.

    [11] 羅學(xué)貫.? 基于ELK的Web日志分析系統(tǒng)的設(shè)計與實現(xiàn)[D]. 廣州: 華南理工大學(xué), 2018.

    [12] 袁華.? 基于ELK和Spark的日志分析系統(tǒng)的研究與實現(xiàn)[D]. 南昌: 南昌大學(xué), 2018.

    [13] 嚴(yán)嘉維, 張琛. 基于Hadoop的可信計算平臺日志分析模型[J].? 軟件導(dǎo)刊,2018,7(8): 71-75.

    [14] 王夢蕾. 基于Spark Streaming的實時日志分析與信息管理系統(tǒng)的設(shè)計與實現(xiàn)[D].? 哈爾濱: 哈爾濱工業(yè)大學(xué), 2018.

    [15] 孫魯森.? 基于分布式Web應(yīng)用的大數(shù)據(jù)日志分析方法研究 [J].? 電腦知識與技術(shù), 2019, 15(3): 16-19.

    [16] BOETTIGER C. An introduction to docker for reproducible research [J].? ACM SIGOPS Operating Systems Review-Special Issue on Repeatability and Sharing of Experimental Artifacts,2015,49(1):71-79.

    [17] BERNSTEIN D.Containers and cloud: from LXC to docker to kubernetes[J].? IEEE Cloud Computing, 2014, 1(3): 81-84.

    [18] DIEGO ONGARO, JOHN OUSTERHOUT. In search of an understandable consensus algorithm[C]. In Proc ATC14, USENIX Annual Technical Conference,2014.

    [19] 孟小峰,慈祥.? 大數(shù)據(jù)管理:概念·技術(shù)與挑戰(zhàn) [J].? 計算機研究與發(fā)展, 2013,50(1): 146-169.

    [20] 班秋成. 基于Hadoop的Web日志存儲和分析系統(tǒng)的研究與實現(xiàn)[D]. 北京: 北京郵電大學(xué), 2018.

    (責(zé)任編輯:孫 娟)

    中文字幕av电影在线播放| 久久99精品国语久久久| 成年女人在线观看亚洲视频| 亚洲精品456在线播放app| 亚洲国产精品一区三区| 日韩精品有码人妻一区| 日韩av不卡免费在线播放| 香蕉丝袜av| 人妻一区二区av| 日韩电影二区| 久久精品国产a三级三级三级| 久久精品久久久久久久性| 亚洲综合精品二区| 久久 成人 亚洲| 欧美少妇被猛烈插入视频| 男女高潮啪啪啪动态图| 国产视频首页在线观看| 各种免费的搞黄视频| 女人精品久久久久毛片| 哪个播放器可以免费观看大片| 亚洲欧美一区二区三区黑人 | 中文字幕人妻丝袜制服| 欧美激情国产日韩精品一区| 两个人免费观看高清视频| 巨乳人妻的诱惑在线观看| 久久精品国产亚洲av天美| 如何舔出高潮| 妹子高潮喷水视频| 国产69精品久久久久777片| a 毛片基地| 97人妻天天添夜夜摸| 下体分泌物呈黄色| 色婷婷久久久亚洲欧美| 丰满少妇做爰视频| 毛片一级片免费看久久久久| 日本av手机在线免费观看| 亚洲国产精品一区三区| 国产精品女同一区二区软件| 亚洲情色 制服丝袜| 久久综合国产亚洲精品| 久久影院123| 欧美精品av麻豆av| 国产亚洲最大av| 欧美精品av麻豆av| 搡老乐熟女国产| 激情五月婷婷亚洲| 高清av免费在线| 日韩制服骚丝袜av| 色婷婷av一区二区三区视频| 最新中文字幕久久久久| 成人黄色视频免费在线看| 日韩一本色道免费dvd| 中文天堂在线官网| 久久久久久久久久久久大奶| 中文字幕另类日韩欧美亚洲嫩草| 国产成人午夜福利电影在线观看| 亚洲第一av免费看| 丝袜喷水一区| 国产一区有黄有色的免费视频| videos熟女内射| 在线观看人妻少妇| 精品亚洲成国产av| 女的被弄到高潮叫床怎么办| 在线免费观看不下载黄p国产| 国内精品宾馆在线| 亚洲婷婷狠狠爱综合网| 国产成人a∨麻豆精品| 国产精品一区二区在线不卡| 日本猛色少妇xxxxx猛交久久| 国产成人精品婷婷| 中国三级夫妇交换| 亚洲一级一片aⅴ在线观看| 18禁裸乳无遮挡动漫免费视频| 日日撸夜夜添| 亚洲美女黄色视频免费看| 久久99蜜桃精品久久| 91国产中文字幕| 成人手机av| 精品福利永久在线观看| 天天操日日干夜夜撸| 日韩欧美一区视频在线观看| 乱码一卡2卡4卡精品| 熟女人妻精品中文字幕| 日本欧美国产在线视频| 国产精品嫩草影院av在线观看| 国产在视频线精品| 99久久精品国产国产毛片| 日韩欧美精品免费久久| 免费观看无遮挡的男女| 人人妻人人添人人爽欧美一区卜| √禁漫天堂资源中文www| 久久人人爽人人爽人人片va| 国产男人的电影天堂91| 亚洲精品色激情综合| 18禁裸乳无遮挡动漫免费视频| 我的女老师完整版在线观看| 日韩制服骚丝袜av| 精品一区二区免费观看| 亚洲伊人久久精品综合| 成人黄色视频免费在线看| 婷婷色综合大香蕉| 26uuu在线亚洲综合色| 搡女人真爽免费视频火全软件| 亚洲欧洲国产日韩| 亚洲美女视频黄频| 国产成人91sexporn| 免费在线观看黄色视频的| 国产熟女午夜一区二区三区| 蜜臀久久99精品久久宅男| 精品人妻偷拍中文字幕| 视频在线观看一区二区三区| 一级片免费观看大全| 天天操日日干夜夜撸| 男女免费视频国产| 高清黄色对白视频在线免费看| xxxhd国产人妻xxx| 亚洲av福利一区| 久久99精品国语久久久| 男人操女人黄网站| 91aial.com中文字幕在线观看| 91国产中文字幕| 最新中文字幕久久久久| 少妇人妻久久综合中文| 亚洲精品色激情综合| 国产成人精品婷婷| 激情五月婷婷亚洲| 色视频在线一区二区三区| 男男h啪啪无遮挡| 久久精品国产综合久久久 | 美女国产高潮福利片在线看| av国产精品久久久久影院| 在线观看免费高清a一片| 人妻人人澡人人爽人人| 久久国内精品自在自线图片| 亚洲人与动物交配视频| 成人二区视频| 欧美成人午夜精品| 国产精品久久久久久精品古装| 午夜免费观看性视频| 一个人免费看片子| 久久国产精品男人的天堂亚洲 | 久久精品国产自在天天线| 色婷婷av一区二区三区视频| 啦啦啦在线观看免费高清www| 9色porny在线观看| 美女福利国产在线| 美女国产高潮福利片在线看| 亚洲av综合色区一区| 97在线人人人人妻| 考比视频在线观看| 国产在线免费精品| 日本-黄色视频高清免费观看| 亚洲av国产av综合av卡| 国产黄频视频在线观看| 国产一区二区在线观看av| 久久久国产一区二区| 亚洲国产精品一区三区| 亚洲综合色惰| 蜜臀久久99精品久久宅男| 免费观看a级毛片全部| 免费观看a级毛片全部| 色婷婷av一区二区三区视频| 伦理电影免费视频| 黄色毛片三级朝国网站| 女性被躁到高潮视频| 99热这里只有是精品在线观看| 久久久久久人人人人人| 伊人久久国产一区二区| 亚洲国产看品久久| 欧美人与善性xxx| 一级片免费观看大全| 日日撸夜夜添| 精品少妇久久久久久888优播| 国产精品久久久久久av不卡| 色婷婷久久久亚洲欧美| 另类精品久久| 18禁动态无遮挡网站| 日韩电影二区| 国产免费现黄频在线看| 91午夜精品亚洲一区二区三区| 精品人妻偷拍中文字幕| 看非洲黑人一级黄片| 少妇的丰满在线观看| 成人漫画全彩无遮挡| 丝袜美足系列| 狂野欧美激情性bbbbbb| 欧美成人精品欧美一级黄| 日本欧美视频一区| 国产成人一区二区在线| 男女免费视频国产| 久久99蜜桃精品久久| 一本—道久久a久久精品蜜桃钙片| 观看美女的网站| 老司机亚洲免费影院| 欧美 日韩 精品 国产| 80岁老熟妇乱子伦牲交| 精品国产露脸久久av麻豆| 亚洲av中文av极速乱| 26uuu在线亚洲综合色| 狂野欧美激情性xxxx在线观看| videossex国产| 秋霞在线观看毛片| 亚洲第一av免费看| 欧美日本中文国产一区发布| 天天操日日干夜夜撸| 菩萨蛮人人尽说江南好唐韦庄| 欧美另类一区| 久久国内精品自在自线图片| 久久久久久人人人人人| 秋霞伦理黄片| 香蕉丝袜av| 人人妻人人澡人人看| 综合色丁香网| 最近的中文字幕免费完整| 亚洲图色成人| 欧美老熟妇乱子伦牲交| 在线看a的网站| 成人国语在线视频| 天美传媒精品一区二区| 亚洲精品日本国产第一区| 午夜精品国产一区二区电影| a级片在线免费高清观看视频| 美女脱内裤让男人舔精品视频| 哪个播放器可以免费观看大片| 搡老乐熟女国产| 2021少妇久久久久久久久久久| 18禁动态无遮挡网站| 另类亚洲欧美激情| 亚洲国产精品一区二区三区在线| 久久久久精品久久久久真实原创| 9色porny在线观看| 人妻少妇偷人精品九色| 精品亚洲成国产av| 九草在线视频观看| 91aial.com中文字幕在线观看| 日韩av免费高清视频| 大片免费播放器 马上看| 免费看av在线观看网站| 国产不卡av网站在线观看| 人成视频在线观看免费观看| 美女国产视频在线观看| 日韩成人av中文字幕在线观看| 丝袜脚勾引网站| 一个人免费看片子| 人人妻人人澡人人爽人人夜夜| 99香蕉大伊视频| 天美传媒精品一区二区| 99热全是精品| 日韩精品免费视频一区二区三区 | 国产一区二区三区av在线| 在线观看三级黄色| 一本久久精品| 在线亚洲精品国产二区图片欧美| 国产成人午夜福利电影在线观看| 欧美日韩综合久久久久久| 国产精品国产三级专区第一集| 99热网站在线观看| 国产视频首页在线观看| 国产精品久久久久成人av| 久热久热在线精品观看| 亚洲三级黄色毛片| 亚洲中文av在线| 18在线观看网站| 久久久国产一区二区| 亚洲精品av麻豆狂野| 久久久久国产精品人妻一区二区| 精品一区二区三卡| 亚洲经典国产精华液单| 国产黄频视频在线观看| 亚洲欧洲日产国产| 一本久久精品| 亚洲伊人色综图| 国产在线免费精品| 欧美亚洲 丝袜 人妻 在线| 男女啪啪激烈高潮av片| 五月伊人婷婷丁香| 国国产精品蜜臀av免费| 国产精品嫩草影院av在线观看| av在线app专区| 成人免费观看视频高清| 亚洲精品自拍成人| 精品久久国产蜜桃| 久久国内精品自在自线图片| 亚洲精品一区蜜桃| 在线天堂中文资源库| 精品人妻偷拍中文字幕| 在线观看三级黄色| 美国免费a级毛片| 欧美日韩亚洲高清精品| 99re6热这里在线精品视频| 91aial.com中文字幕在线观看| 在线观看三级黄色| 黄色毛片三级朝国网站| 热re99久久精品国产66热6| h视频一区二区三区| 亚洲中文av在线| 免费观看a级毛片全部| 天美传媒精品一区二区| 亚洲欧美日韩另类电影网站| 少妇精品久久久久久久| 久久久久久久久久成人| 亚洲av国产av综合av卡| 欧美国产精品一级二级三级| 午夜福利视频精品| 成人漫画全彩无遮挡| 最新中文字幕久久久久| 亚洲经典国产精华液单| 亚洲精品一区蜜桃| 国产精品久久久久久av不卡| 咕卡用的链子| 国产精品久久久久久精品古装| 人人妻人人爽人人添夜夜欢视频| 在线观看免费日韩欧美大片| 男女国产视频网站| 国产黄色视频一区二区在线观看| 欧美97在线视频| 全区人妻精品视频| 亚洲伊人久久精品综合| 亚洲精品国产av成人精品| 日日啪夜夜爽| av.在线天堂| 日韩三级伦理在线观看| 国产精品熟女久久久久浪| 日本91视频免费播放| 插逼视频在线观看| 中国三级夫妇交换| 亚洲国产精品成人久久小说| 夜夜爽夜夜爽视频| 老司机影院毛片| 国产成人91sexporn| 午夜91福利影院| 97在线人人人人妻| 色网站视频免费| 99久久中文字幕三级久久日本| 久久国内精品自在自线图片| 夜夜爽夜夜爽视频| 精品福利永久在线观看| 高清av免费在线| 亚洲欧美日韩另类电影网站| 久久av网站| 一区在线观看完整版| 日本av手机在线免费观看| 国产精品久久久久久精品古装| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 香蕉精品网在线| 国产一区二区三区综合在线观看 | 欧美3d第一页| 久久久久精品人妻al黑| 国产极品粉嫩免费观看在线| 美女内射精品一级片tv| 丝袜喷水一区| 纵有疾风起免费观看全集完整版| 伦理电影免费视频| 人妻系列 视频| 久久久久精品人妻al黑| 国产麻豆69| 精品一区二区三区视频在线| 人妻一区二区av| 国产极品粉嫩免费观看在线| 精品久久久精品久久久| 国产色婷婷99| 美女大奶头黄色视频| 两个人看的免费小视频| 国产无遮挡羞羞视频在线观看| 伦理电影大哥的女人| 我的女老师完整版在线观看| 久久国内精品自在自线图片| 免费人成在线观看视频色| a级毛片在线看网站| 狂野欧美激情性xxxx在线观看| 国产一级毛片在线| 欧美日本中文国产一区发布| 亚洲国产精品专区欧美| 99九九在线精品视频| 天天影视国产精品| 精品福利永久在线观看| av一本久久久久| 午夜精品国产一区二区电影| 成人免费观看视频高清| 日本vs欧美在线观看视频| 亚洲综合精品二区| 午夜福利乱码中文字幕| 国产精品一国产av| 亚洲成人手机| 久久狼人影院| 蜜臀久久99精品久久宅男| 日本av手机在线免费观看| 高清在线视频一区二区三区| 1024视频免费在线观看| 亚洲精品av麻豆狂野| 丝袜喷水一区| 欧美精品人与动牲交sv欧美| 久久午夜综合久久蜜桃| 亚洲图色成人| 亚洲一码二码三码区别大吗| 国产成人av激情在线播放| 亚洲精品一区蜜桃| 亚洲精品自拍成人| 9191精品国产免费久久| 丁香六月天网| av在线观看视频网站免费| 99久久综合免费| 青春草视频在线免费观看| 久久99精品国语久久久| 国产免费一区二区三区四区乱码| 欧美日韩成人在线一区二区| 桃花免费在线播放| 久久久久久久精品精品| 亚洲伊人色综图| 日韩,欧美,国产一区二区三区| 日本av免费视频播放| 咕卡用的链子| 一区二区日韩欧美中文字幕 | 免费大片18禁| 亚洲国产成人一精品久久久| 欧美日韩综合久久久久久| 国产高清国产精品国产三级| 欧美 日韩 精品 国产| av.在线天堂| 观看美女的网站| 在线观看一区二区三区激情| 亚洲精品,欧美精品| 2021少妇久久久久久久久久久| 亚洲三级黄色毛片| av播播在线观看一区| 亚洲国产最新在线播放| 另类亚洲欧美激情| 亚洲av.av天堂| 欧美丝袜亚洲另类| 亚洲欧美精品自产自拍| xxxhd国产人妻xxx| 亚洲三级黄色毛片| 国产熟女午夜一区二区三区| 少妇猛男粗大的猛烈进出视频| 精品一品国产午夜福利视频| 欧美人与性动交α欧美精品济南到 | 亚洲第一av免费看| 如日韩欧美国产精品一区二区三区| 亚洲欧美清纯卡通| 欧美日本中文国产一区发布| 免费久久久久久久精品成人欧美视频 | 亚洲国产色片| 看十八女毛片水多多多| 91久久精品国产一区二区三区| 伊人久久国产一区二区| 日产精品乱码卡一卡2卡三| 99九九在线精品视频| 欧美变态另类bdsm刘玥| 亚洲av成人精品一二三区| 久久久久国产精品人妻一区二区| 九九在线视频观看精品| 天美传媒精品一区二区| 日本欧美视频一区| 中文欧美无线码| 国产成人a∨麻豆精品| 亚洲三级黄色毛片| 成人黄色视频免费在线看| 久久国产亚洲av麻豆专区| 亚洲第一av免费看| 欧美精品一区二区免费开放| 中文字幕av电影在线播放| 欧美97在线视频| 国产熟女午夜一区二区三区| 国产老妇伦熟女老妇高清| 成年人免费黄色播放视频| 亚洲国产欧美在线一区| 欧美日韩视频精品一区| 亚洲精品乱久久久久久| 丰满饥渴人妻一区二区三| 日本免费在线观看一区| 国产av国产精品国产| 少妇被粗大的猛进出69影院 | 美国免费a级毛片| 国产在线视频一区二区| 国产视频首页在线观看| 欧美精品高潮呻吟av久久| 中文字幕人妻熟女乱码| 侵犯人妻中文字幕一二三四区| 制服丝袜香蕉在线| 精品国产国语对白av| 国产在线视频一区二区| 激情五月婷婷亚洲| 亚洲欧美色中文字幕在线| 亚洲国产av影院在线观看| 蜜桃国产av成人99| 亚洲av国产av综合av卡| 老司机亚洲免费影院| 性高湖久久久久久久久免费观看| 亚洲av电影在线观看一区二区三区| 亚洲精品久久成人aⅴ小说| 十分钟在线观看高清视频www| 欧美日韩亚洲高清精品| 1024视频免费在线观看| 美女国产高潮福利片在线看| 大陆偷拍与自拍| 久久 成人 亚洲| 欧美激情国产日韩精品一区| 伦理电影免费视频| 国产色婷婷99| 菩萨蛮人人尽说江南好唐韦庄| 飞空精品影院首页| 国产极品天堂在线| a级毛片黄视频| 免费观看av网站的网址| 99久久综合免费| 亚洲成av片中文字幕在线观看 | 亚洲精品久久久久久婷婷小说| 日本欧美国产在线视频| 色网站视频免费| 少妇猛男粗大的猛烈进出视频| 99re6热这里在线精品视频| 激情五月婷婷亚洲| 一级爰片在线观看| 一级毛片 在线播放| 成年av动漫网址| 亚洲天堂av无毛| 国产亚洲一区二区精品| 午夜日本视频在线| 97人妻天天添夜夜摸| 日本黄大片高清| 高清欧美精品videossex| 全区人妻精品视频| 丰满少妇做爰视频| 国产免费现黄频在线看| 一区二区三区四区激情视频| 亚洲久久久国产精品| 亚洲情色 制服丝袜| 国产不卡av网站在线观看| 男女国产视频网站| 日韩一区二区视频免费看| 高清av免费在线| 国产免费又黄又爽又色| 亚洲综合色网址| 一级爰片在线观看| 日韩大片免费观看网站| 亚洲精品一区蜜桃| 精品国产一区二区久久| 亚洲图色成人| 最新中文字幕久久久久| 欧美日韩亚洲高清精品| 免费观看a级毛片全部| 亚洲精品中文字幕在线视频| av免费观看日本| 国产精品久久久久久精品古装| 黄片无遮挡物在线观看| 国产乱来视频区| 亚洲精品日韩在线中文字幕| 99热网站在线观看| 97在线人人人人妻| 亚洲国产av新网站| 久久久久久久国产电影| 欧美日韩视频精品一区| 欧美 日韩 精品 国产| 国产熟女午夜一区二区三区| 美女视频免费永久观看网站| 亚洲天堂av无毛| 午夜精品国产一区二区电影| 欧美bdsm另类| 亚洲精品国产av蜜桃| 国产精品秋霞免费鲁丝片| 日韩制服丝袜自拍偷拍| 日韩制服骚丝袜av| 国产日韩欧美亚洲二区| 色吧在线观看| 亚洲少妇的诱惑av| 亚洲国产精品专区欧美| 极品少妇高潮喷水抽搐| 爱豆传媒免费全集在线观看| 一级爰片在线观看| 国产成人精品婷婷| 一区二区日韩欧美中文字幕 | 曰老女人黄片| 22中文网久久字幕| 免费黄色在线免费观看| 免费高清在线观看视频在线观看| a级毛色黄片| 观看av在线不卡| 男人舔女人的私密视频| 搡女人真爽免费视频火全软件| av在线app专区| 精品午夜福利在线看| 久久这里有精品视频免费| 久久久久人妻精品一区果冻| 亚洲成av片中文字幕在线观看 | 99热网站在线观看| 免费黄频网站在线观看国产| 日韩大片免费观看网站| 国产xxxxx性猛交| 欧美国产精品一级二级三级| 国产精品国产av在线观看| 欧美性感艳星| 日韩,欧美,国产一区二区三区| 国产精品久久久久久av不卡| 亚洲经典国产精华液单| 一本久久精品| 午夜福利网站1000一区二区三区| 99热这里只有是精品在线观看| 国产一区二区三区av在线| 黄色 视频免费看| 久久精品久久久久久噜噜老黄| 国产爽快片一区二区三区| 成人国语在线视频| 免费人成在线观看视频色| 在线观看国产h片| 国产欧美亚洲国产| 王馨瑶露胸无遮挡在线观看| 高清黄色对白视频在线免费看| 少妇人妻精品综合一区二区| 亚洲天堂av无毛| 男女午夜视频在线观看 | videos熟女内射| 大片电影免费在线观看免费| kizo精华| 一二三四中文在线观看免费高清| 成人亚洲欧美一区二区av|