• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于特征選取與樹狀Parzen估計的入侵檢測

    2021-07-05 00:55:48金志剛
    關(guān)鍵詞:特征檢測模型

    金志剛, 吳 桐

    (天津大學(xué)電氣自動化與信息工程學(xué)院, 天津 300072)

    0 引 言

    近年來,網(wǎng)絡(luò)空間安全形勢日益復(fù)雜嚴峻,網(wǎng)絡(luò)攻擊手段日趨智能化、自動化。據(jù)Distil Networks發(fā)布的《2020惡意機器流量報告》[1],在2019年,全網(wǎng)流量中只有62.8%為人類流量,而在機器產(chǎn)生的流量中,惡意流量占全網(wǎng)流量的24.1%,其中高級別惡意機器流量(advanced persistent bots,APBs)通過混合使用如隨機IP地址、匿名代理等各種偽裝方法實現(xiàn)自動化攻擊,占惡意流量的73.7%。

    目前,采取數(shù)據(jù)加密、身份認證、訪問控制、防火墻等技術(shù)建立的傳統(tǒng)靜態(tài)安全模型逐漸暴露出其局限性,而入侵檢測技術(shù)可在計算機系統(tǒng)中或者若干網(wǎng)絡(luò)節(jié)點上收集網(wǎng)絡(luò)實時數(shù)據(jù)信息和主機數(shù)據(jù)信息,并采取主動干預(yù)的響應(yīng)手段,可在入侵行為發(fā)生或造成危害之前,及時識別攻擊者和入侵行為并采取響應(yīng)措施[2]。

    盡管入侵檢測技術(shù)目前已得到廣泛應(yīng)用,但其在事件分析和警報處理的過程中仍存在一定的缺陷[3]。入侵檢測規(guī)則一般由安全人員手動匹配設(shè)置,通常為了保證高捕獲率就會降低檢測規(guī)則匹配的門檻,這導(dǎo)致入侵檢測系統(tǒng)可能依據(jù)固定規(guī)則產(chǎn)生大量警報,入侵檢測系統(tǒng)的誤報率和漏報率因此增加,并且處理高誤報率的安全事件也需要耗費大量的時間精力,增加人力成本。與此同時,機器學(xué)習(xí)技術(shù)在近年來快速發(fā)展[4-5],在自然語言處理[6]、圖像分割[7]、目標(biāo)檢測[8]等領(lǐng)域都有相應(yīng)成果落地實踐,并取得良好的效果。因此,針對上述應(yīng)用場景,為提高入侵檢測中的檢測率和適應(yīng)性,目前網(wǎng)絡(luò)安全領(lǐng)域中學(xué)術(shù)界和工業(yè)界的重點研究趨勢便是將機器學(xué)習(xí)與入侵檢測技術(shù)相結(jié)合[9-10],以提高系統(tǒng)的可用性和對不同攻擊場景的靈活適應(yīng)能力,進一步保障網(wǎng)絡(luò)空間安全。

    李元兵[11]等人提出將神經(jīng)網(wǎng)絡(luò)應(yīng)用于異常入侵檢測系統(tǒng),通過對程序行為進行動態(tài)建模,并使用Apache服務(wù)器進行驗證。Kim[12]等人使用長短期記憶(long short term memory, LSTM)網(wǎng)絡(luò)模型并使用超參數(shù)調(diào)優(yōu)技術(shù),在KDD CUP 99數(shù)據(jù)集上得到的檢測率為98.88%,準(zhǔn)確率為96.93%,但同時誤報率達到了10.04%。Putchala[13]通過將門控循環(huán)單元(gated recurrent unit,GRU)模型應(yīng)用于物聯(lián)網(wǎng)領(lǐng)域的惡意流量檢測,準(zhǔn)確率高于99%,但僅在KDD CUP 99數(shù)據(jù)集上進行測試。高妮[14]等人提出將深度信念網(wǎng)絡(luò)應(yīng)用于入侵檢測系統(tǒng)中,基于NSL-KDD數(shù)據(jù)集的準(zhǔn)確率約為98%。Aygun[15]等人將隨機去噪自編碼器應(yīng)用于惡意流量檢測,得到的準(zhǔn)確率較低,為88.65%,無法滿足當(dāng)前形勢下對惡意流量的檢測需求。饒鮮[16]等人提出一種基于信息熵的入侵檢測特征選擇方法,可減少系統(tǒng)的內(nèi)存占用,但其使用的KDD CUP 99數(shù)據(jù)集過于陳舊,同時系統(tǒng)性能也有所下降。針對CIC-IDS-2018數(shù)據(jù)集,Hooge[17]等人對比了多種監(jiān)督學(xué)習(xí)算法,并在模型屬性的特征空間中使用了特征縮放技術(shù),最終使用基于決策樹的XGBoost模型作為分類器,準(zhǔn)確率高達99%,但同時召回率只有79%。Kim[18]等人使用卷積神經(jīng)網(wǎng)絡(luò)同時訓(xùn)練來自KDD CUP 99和CIC-IDS-2018數(shù)據(jù)集中的Dos數(shù)據(jù),取得了99.99%的精準(zhǔn)率,但準(zhǔn)確率和召回率較低,分別只達到81.75%和82.25%。Lin[19]等人將注意力機制與LSTM相結(jié)合,自動提取與目標(biāo)結(jié)果最相關(guān)的信息并賦予權(quán)重,同時引入了欠采樣和過采樣技術(shù),最終模型準(zhǔn)確率為96.2%,精準(zhǔn)率和召回率為96%。

    為解決目前入侵檢測技術(shù)中數(shù)據(jù)集維數(shù)過高、數(shù)據(jù)冗余度較高導(dǎo)致機器學(xué)習(xí)模型計算量大、入侵檢測系統(tǒng)效率下降等問題[20],本文提出了一種基于相關(guān)性分析的特征選取(feature selection based on correlation analysis, FSCA)和樹狀Parzen估計(tree Parzen estimator, TPE)優(yōu)化的隨機森林入侵檢測(簡稱為FSCA-TPE-RF)方法,主要分為3個階段:首先,通過皮爾遜相關(guān)系數(shù)(Pearson correlation coefficient, PCC)[21]計算特征數(shù)據(jù)相關(guān)性矩陣,對數(shù)據(jù)集特征關(guān)系進行深入分析,通過缺失值比率、低方差濾波和高相關(guān)濾波3種特征選取方法對數(shù)據(jù)集進行降維。同時,使用基于序列模型優(yōu)化(sequential model-based global optimization, SMBO)算法的TPE算法,優(yōu)化隨機森林算法的超參數(shù),并根據(jù)數(shù)據(jù)權(quán)重調(diào)整樣本數(shù)量。綜上,本文提出了一種FSCA-TPE-RF方法,并通過多組對比實驗對算法效果進行了驗證。

    1 數(shù)據(jù)集分析

    CIC-IDS-2018數(shù)據(jù)集[22-23]由Canadian Institute for Cybersecurity采集發(fā)布,其特點在于使用了亞馬遜計算平臺(Amazon web services, AWS)中常見的網(wǎng)絡(luò)拓撲:位于AWS上的服務(wù)器集群中共有5個子網(wǎng),共計420臺計算機和30臺服務(wù)器,涵蓋了大部分網(wǎng)絡(luò)設(shè)備及包括Windows和Ubuntu在內(nèi)的常見操作系統(tǒng)的不同版本。

    針對現(xiàn)有數(shù)據(jù)集暴露出來的各種缺陷和問題,Gharib[24]等人于2016年提出一個全面完整的入侵檢測數(shù)據(jù)集評估框架(intrusion detection dataset evaluation framework, IDDEF),而CIC-IDS-2018數(shù)據(jù)集與KDD CUP 99等其他入侵檢測數(shù)據(jù)集相比,滿足了所有11種指標(biāo),其數(shù)據(jù)更加接近真實世界的網(wǎng)絡(luò)流量。

    本文使用PCC計算特征對之間的相關(guān)程度。協(xié)方差定義為E{[X-E(X)][Y-E(Y)]},記作Cov(X,Y),即兩個變量X和Y與各自期望之差的乘積的期望,期望在離散型數(shù)據(jù)中通常為均值。再利用二者分別和E(X)與E(Y)的差求協(xié)方差。相關(guān)系數(shù)為Cov(X,Y)/[σ(X)σ(Y)],記作ρX,Y,其中σ(X)和σ(Y)分別表示X和Y的標(biāo)準(zhǔn)差,因此相關(guān)系數(shù)即為協(xié)方差與標(biāo)準(zhǔn)差的商值,值域為[-1,1]??傮w相關(guān)系數(shù)的計算公式為

    (1)

    接下來,計算數(shù)據(jù)集中每個特征同所有特征之間的協(xié)方差,得到協(xié)方差矩陣,矩陣中的每個元素都對應(yīng)特征間的協(xié)方差。協(xié)方差矩陣進一步計算后得到相關(guān)系數(shù)矩陣,如圖1所示,該數(shù)據(jù)集中體現(xiàn)多對特征對間擁有的高度相關(guān)性,這些特征即為冗余特征,在使用時不會增強模型訓(xùn)練效果,但可能會引入噪聲干擾。

    圖1 相關(guān)系數(shù)矩陣Fig.1 Correlation coefficient matrix

    2 算法模型

    本文所使用的算法模型流程圖如圖2所示。首先,對數(shù)據(jù)集進行數(shù)據(jù)清洗,篩選掉機器學(xué)習(xí)模型中無法使用的數(shù)據(jù);接下來,通過可視化分析結(jié)果,對數(shù)據(jù)集進行基于相關(guān)性分析的特征選取,包括缺失值比率、低方差濾波和高相關(guān)濾波3個過程,生成數(shù)據(jù)集的特征子集;最后,針對數(shù)據(jù)集特征子集,使用TPE算法優(yōu)化隨機森林參數(shù),并根據(jù)模型性能最佳時的參數(shù)組對性能指標(biāo)進行分析。

    圖2 算法流程圖Fig.2 Algorithm flow chart

    2.1 基于相關(guān)性分析的特征選取

    算法中的FSCA流程包括數(shù)據(jù)清洗和特征選取兩部分,數(shù)據(jù)清洗部分包括對空值、空行、無窮大值以及無用特征在內(nèi)的無用數(shù)據(jù)進行清洗,對非數(shù)值字符特征進行數(shù)值化替換等操作。特征選取部分依據(jù)數(shù)據(jù)集特征分析結(jié)果[25],共包含缺失值比率、低方差濾波和高相關(guān)濾波3個步驟。

    (1) 缺失值比率。數(shù)據(jù)集缺失是數(shù)據(jù)分析中常見問題之一。其中共有6列特征數(shù)據(jù)中含有缺失值,由于其中單一文件中包含的4列特征流ID、源IP、目的IP和源端口在其他文件中沒有出現(xiàn),無法用于整體模型的訓(xùn)練,因此刪除相關(guān)特征列。同時,流字節(jié)率和流數(shù)據(jù)包速率特征中包含無窮值,占總數(shù)據(jù)的比率分別為2.16%和5.74%,因此使用平均值填充的方法,根據(jù)該特征其他對象取值的平均值對該缺失特征值進行補齊填充。

    (2) 低方差濾波。低方差濾波假定變化非常小的特征列包含的信息量也相對較小,即當(dāng)特征的自方差很小或為0時,這些特征數(shù)據(jù)將不會對目標(biāo)變量的預(yù)測產(chǎn)生任何影響,對于模型訓(xùn)練來說沒有價值[26]。對數(shù)據(jù)集中所有特征的自方差進行計算,并過濾出8個自方差值為0的特征,分別為平均正向數(shù)據(jù)塊速率、平均反向數(shù)據(jù)塊速率、平均正向字節(jié)塊速率、平均反向字節(jié)塊速率、平均正向數(shù)據(jù)包數(shù)量、平均反向數(shù)據(jù)包數(shù)量、反向傳播數(shù)據(jù)包中PSH標(biāo)志次數(shù)和反向傳播數(shù)據(jù)包中URG標(biāo)志次數(shù)。由于自方差為0的特征不攜帶任何可用信息,因此將相關(guān)特征列從數(shù)據(jù)集中刪除。

    (3) 高相關(guān)濾波。若數(shù)據(jù)集中兩列特征之間高度相關(guān),即變化趨勢相似,這意味著其可能包含相似的信息,在訓(xùn)練中只需保留相似列中的一列即可滿足機器學(xué)習(xí)分類器的需要。為了解決這類問題,首先計算特征之間的相關(guān)性,并根據(jù)計算結(jié)果設(shè)置一個閾值,若相關(guān)性系數(shù)超過該閾值,則刪除其中一個特征。

    本文使用層次聚類樹狀圖[27]的方式,對特征對的距離進行可視化操作。層次聚類為聚類算法的一種,該方法的基本思想為:將n個數(shù)據(jù)分為一類,計算數(shù)據(jù)之間的距離和類間的距離,合并距離最近的兩類,并計算合并出的新類與其他類的距離;重復(fù)以上步驟,每次可減少一類,直至所有的樣品合并為一類,即通過計算每個特征對之間的距離創(chuàng)建一個有層次的嵌套樹。

    (2)

    將簇距離閾值設(shè)置為1,用于從特征簇中選取高相關(guān)特征對,并剝離冗余特征,最終數(shù)據(jù)集特征降至30維,重新繪制特征相關(guān)性系數(shù)矩陣圖,如圖3所示。其中橫軸和縱軸均為降維后數(shù)據(jù)集不同種類的特征,可以看出,移除冗余特征后,數(shù)據(jù)集特征對的相關(guān)性得到明顯下降。

    圖3 特征子集相關(guān)系數(shù)矩陣Fig.3 Feature subset correlation coefficient matrix

    2.2 TPE算法

    模型優(yōu)化是機器學(xué)習(xí)中最重要的環(huán)節(jié)之一,機器學(xué)習(xí)理論大部分分支都致力于對模型的優(yōu)化[28]。超參數(shù)是機器學(xué)習(xí)中模型訓(xùn)練前需要提前設(shè)置的參數(shù),與可通過訓(xùn)練得到的權(quán)重、偏差等模型參數(shù)不同,超參數(shù)定義的是機器學(xué)習(xí)模型的模型復(fù)雜性和學(xué)習(xí)能力等更高層次的概念。超參數(shù)優(yōu)化就是尋找機器學(xué)習(xí)模型在驗證數(shù)據(jù)集上性能最佳時超參數(shù)的過程,其過程對模型優(yōu)化有重要影響,超參數(shù)優(yōu)化的公式為

    (3)

    式中:F(x)代表機器學(xué)習(xí)的目標(biāo)函數(shù);x*是F(x)取得最好結(jié)果時的參數(shù)。

    常見的超參數(shù)優(yōu)化方法包括隨機搜索調(diào)參、手動調(diào)參、網(wǎng)格化尋優(yōu)調(diào)參以及自動超參數(shù)調(diào)優(yōu)。自動超參數(shù)調(diào)優(yōu)相比其他調(diào)參方法,可通過形成超參數(shù)值與模型性能之間關(guān)系的知識,并利用先驗知識對下一組超參數(shù)的選擇進行推斷,從而在尋找最佳超參數(shù)值的組合時,盡量減少試驗的次數(shù),提升實驗效率。

    目前大多數(shù)自動超參數(shù)調(diào)優(yōu)方法都基于SMBO算法[29]。SMBO算法主要有如下幾個步驟。

    步驟 1基于評估域H=(x1,F(x1),x2,F(x2),…,xn,F(xn)),確定超參數(shù)搜索空間,計算模型分布。

    步驟 2確定機器學(xué)習(xí)模型的目標(biāo)函數(shù)F(x),該目標(biāo)函數(shù)應(yīng)與超參數(shù)密切相關(guān),每個超參數(shù)組都會在模型的目標(biāo)函數(shù)中取得一個分值,超參數(shù)優(yōu)化的目的即將這個分值最大化或最小化。

    步驟 3建立目標(biāo)函數(shù)的替代函數(shù)。

    步驟 4建立替代函數(shù)的指標(biāo),通常情況下為選擇函數(shù)(expected improvement, EI)標(biāo)準(zhǔn),評估超參數(shù)組在替代函數(shù)上的得分F(x*),作為選擇超參數(shù)的標(biāo)準(zhǔn)。

    步驟 5將超參數(shù)組應(yīng)用到機器學(xué)習(xí)模型的訓(xùn)練中,并將(x*,F(x*))加入域H,更新模型分布;

    步驟 6重復(fù)步驟4和步驟5,不斷推介x*,直到達到預(yù)設(shè)最大迭代次數(shù)或最大時長?;赟MBO算法目前廣泛應(yīng)用于適應(yīng)度函數(shù)代價較大的場景中,例如適應(yīng)度函數(shù)F:χ→R的復(fù)雜度較高,而近似值F可通過最大化替代點x*計算,并可作為真實評估值時的可能取值。

    本文使用TPE算法[30]作為評估域H生成目標(biāo)函數(shù)f的建模過程。TPE將超參數(shù)空間轉(zhuǎn)換為非參數(shù)密度分布,對p(x|y)過程進行建模。轉(zhuǎn)換方式共有均勻分布轉(zhuǎn)換為截斷高斯混合分布、對數(shù)均勻分布轉(zhuǎn)換為指數(shù)截斷高斯混合分布和離散分布轉(zhuǎn)換為重加權(quán)離散分布3種。通過在非參數(shù)密度中使用不同的觀測值(x1,x2,…,xk)做替換處理,TPE的超參數(shù)組可以使用不同密度的學(xué)習(xí)算法。TPE使用兩種密度定義p(x|y),即

    (4)

    式中:l(x)由觀測值{xi}的目標(biāo)函數(shù)F(x)小于y*的部分組成;g(x)由觀測值{xi}的目標(biāo)函數(shù)F(x)大于等于y*的部分組成。TPE算法傾向于使用大于最佳觀測結(jié)果F(x)的y*,并使用y*作為觀測值y的分位點γ,使p(y

    (5)

    最后,將γ=p(y

    γl(x)+(1-γ)g(x)

    (6)

    (7)

    使用TPE算法對隨機森林進行超參數(shù)調(diào)優(yōu),將精準(zhǔn)率作為TPE算法的目標(biāo)函數(shù),并將迭代次數(shù)設(shè)置為100。本文選取的超參數(shù)、取值范圍和最終取值結(jié)果如表1所示。

    表1 超參數(shù)組取值范圍及結(jié)果

    其中,超參數(shù)nr_estimators為隨機森林模型中決策樹的最大數(shù)量,超參數(shù)criterion為隨機森林模型對特征的評價標(biāo)準(zhǔn),超參數(shù)max_depth為決策樹的最大深度,超參數(shù)min_samples_leaf為隨機森林模型中葉子最少樣本數(shù),超參數(shù)min_samples_split為內(nèi)部節(jié)點再劃分所需最小樣本數(shù),超參數(shù)max_features為隨機森林允許單個決策樹適用的最大特征數(shù)量。

    3 實驗仿真

    3.1 評估指標(biāo)

    本文采取入侵檢測算法中常用的混淆矩陣作為評估分類性能的指標(biāo)。混淆矩陣是一種評價分類模型的形象化展示工具。混淆矩陣的每一列表示模型預(yù)測的樣本類別,每一行表示樣本的真實類別,一共有4個元素:真正類(true positive, TP),正常流量的正常樣本數(shù)量;假負類(false negative, FN),惡意流量的惡意樣本數(shù)量;假正類(false positive, FP),惡意流量的正常樣本數(shù)量,即誤報;真負類(true negative, TN),正常流量的惡意樣本數(shù)量,即漏報。

    基于混淆矩陣中的元素,本文使用以下指標(biāo)對檢測進行評估,準(zhǔn)確率A、精準(zhǔn)率P、查全率R,F1值F1,所用公式為

    (8)

    (9)

    (10)

    (11)

    3.2 模型評估

    本文實驗所使用的軟硬件平臺配置為Intel i7-8700 3.20GHz處理器,32G內(nèi)存,操作系統(tǒng)為Windows 10 Pro。

    為驗證本文提出的FSCA-TPE-RF方法的可行性,本文第1個實驗首先通過scikit-learn機器學(xué)習(xí)庫中的Dummy Classifier函數(shù)構(gòu)建基線分類器,作為數(shù)據(jù)集分類器的性能基線,對比模型包括樸素貝葉斯、邏輯回歸、自適應(yīng)提升算法、RF等經(jīng)典機器學(xué)習(xí)算法,及文獻[17-19]中提出的入侵檢測模型,以準(zhǔn)確率(A)、精準(zhǔn)率(P)、查全率(R)和F1值作為模型性能的評價指標(biāo)。結(jié)果如表2所示。

    表2 算法實驗結(jié)果對比

    可以看出FSCA-TPE-RF方法相比經(jīng)典機器學(xué)習(xí)算法,在各項指標(biāo)上均有不同程度提升。其中A分別提升了16.87%、3.20%、2.11%和2.11%,P分別提升了8.89%、7.70%、4.26%和3.16%,R分別提升了16.87%、11.49%、4.30%和3.19%,F1分別提升了14.12%、8.99%、3.19%和2.11%。相比對比文獻中提出的機器學(xué)習(xí)模型,整體指標(biāo)更加均衡,實用性更強。這是由于特征選擇過程中剔除的是對RF分類器影響不大的冗余特征,保留了對RF分類器影響較大的關(guān)鍵特征,并在結(jié)合TPE優(yōu)化后,選取了最適合的超參數(shù)組合進一步提高模型性能。為驗證FSCA可縮短機器學(xué)習(xí)模型的訓(xùn)練時間和測試時間,提升模型的檢測效率,本文第2個實驗將FSCA-TPE-RF與其他經(jīng)典機器學(xué)習(xí)算法檢測效率進行對比,訓(xùn)練集與測試集的數(shù)據(jù)數(shù)量分布與表2相同,實驗結(jié)果如圖4所示,其中橫軸為不同的機器學(xué)習(xí)算法種類,縱軸為算法訓(xùn)練和測試所需的時間長度,由于對比文獻中所使用數(shù)據(jù)集數(shù)據(jù)比例不完全相同,無法直接橫向比較,因此不納入對比范圍。

    圖4 不同算法所需時間對比Fig.4 Comparison of the time reguired by different algorithm

    可以看出,FSCA-TPE-RF方法相比于傳統(tǒng)RF,可將訓(xùn)練時間和測試時間分別縮短39.46%和60%,模型的檢測效率大幅提升,訓(xùn)練時間和測試時間也大幅低于線性回歸算法、自適應(yīng)提升算法等機器學(xué)習(xí)算法。因此,該方法更適用于當(dāng)前大規(guī)模高并發(fā)網(wǎng)路拓撲下的近實時入侵檢測場景。需要注意的是,由于樸素貝葉斯算法默認數(shù)據(jù)集特征之間相互獨立,邏輯和算法都相對簡單穩(wěn)定,因此其訓(xùn)練時間和測試時間中都為最低。但如表2所示,樸素貝葉斯算法各項分類指標(biāo)均落后于FSCA-TPE-RF在內(nèi)的其他機器學(xué)習(xí)模型,尤其是精準(zhǔn)率只有0.83,與基線分類器相同,性能無法滿足真實的入侵檢測場景。

    為驗證所提出方法在不同訓(xùn)練數(shù)據(jù)比例下的魯棒性,本文第3個實驗設(shè)置了不同的訓(xùn)練集和驗證集比例進行對比,訓(xùn)練渠∶驗證渠分別為50%∶50%、10%∶90%、5%∶95%和2%∶98%。并將FSCA-TPE-RF與其他經(jīng)典機器學(xué)習(xí)算法性能進行對比,實驗結(jié)果如圖5所示。本文提出的FSCA-TPE-RF方法在不同的訓(xùn)練集和測試集比例下的模型性能相比其他機器學(xué)習(xí)算法更加穩(wěn)定,普適性較強,應(yīng)用于入侵檢測場景時,需要的標(biāo)注數(shù)據(jù)集數(shù)量相對更少,可以減輕研究人員標(biāo)注的壓力,提升入侵檢測系統(tǒng)的實用性。

    圖5 不同數(shù)據(jù)集比例實驗結(jié)果Fig.5 Experimental results of different data set proportions

    4 結(jié) 論

    本文以CIC-IDS-2018入侵檢測數(shù)據(jù)集為研究對象進行深入分析。針對該數(shù)據(jù)集的特征模式,本文提出一種基于FSCA與TPE優(yōu)化的入侵檢測檢測方法,主要包括以下幾點:分析CIC-IDS-2018數(shù)據(jù)集特征特性,根據(jù)數(shù)據(jù)集特征分布規(guī)律,針對性地使用了缺失值比率、低方差濾波和高相關(guān)濾波3種基于相關(guān)性分析的特征選取方法;結(jié)合離差平方和法計算數(shù)據(jù)集的層次聚類,將數(shù)據(jù)集從80維降到30維;通過基于TPE算法的超參數(shù)調(diào)優(yōu)技術(shù),對隨機森林進行參數(shù)優(yōu)化;并通過設(shè)計3個實驗,分別驗證了模型的有效性、效率和在不同的訓(xùn)練集和測試集比例下算法的魯棒性。通過以上實驗可以發(fā)現(xiàn),本文提出的FSCA-TPE-RF方法在提升模型效率的同時,在少樣本場景下也能保持其分類器的性能,各項性能指標(biāo)均取得良好結(jié)果。未來工作將注重優(yōu)化檢測方法在多分類場景下的分類檢測以及在其他入侵檢測數(shù)據(jù)集上的泛化能力。

    猜你喜歡
    特征檢測模型
    一半模型
    “不等式”檢測題
    “一元一次不等式”檢測題
    “一元一次不等式組”檢測題
    重要模型『一線三等角』
    重尾非線性自回歸模型自加權(quán)M-估計的漸近分布
    如何表達“特征”
    不忠誠的四個特征
    抓住特征巧觀察
    3D打印中的模型分割與打包
    久久久久久伊人网av| 午夜福利影视在线免费观看| 免费观看a级毛片全部| 国产福利在线免费观看视频| 午夜免费观看性视频| 精品亚洲成国产av| 一个人免费看片子| 国产极品天堂在线| 亚洲经典国产精华液单| 久久久亚洲精品成人影院| 超色免费av| av片东京热男人的天堂| 七月丁香在线播放| 色哟哟·www| 亚洲精品国产色婷婷电影| 又粗又硬又长又爽又黄的视频| 国产成人免费观看mmmm| 五月玫瑰六月丁香| 中文天堂在线官网| 性高湖久久久久久久久免费观看| 美女视频免费永久观看网站| 国产精品人妻久久久影院| kizo精华| 最近2019中文字幕mv第一页| 两个人看的免费小视频| 久久久久久久久久久久大奶| 亚洲第一区二区三区不卡| 人人妻人人澡人人爽人人夜夜| 97人妻天天添夜夜摸| 亚洲情色 制服丝袜| 大片电影免费在线观看免费| 久久久久精品久久久久真实原创| 国产精品成人在线| 成人免费观看视频高清| 少妇被粗大的猛进出69影院 | 日韩欧美精品免费久久| 自拍欧美九色日韩亚洲蝌蚪91| 爱豆传媒免费全集在线观看| 在线观看国产h片| 大片免费播放器 马上看| 美女国产高潮福利片在线看| 亚洲精品成人av观看孕妇| 一个人免费看片子| 国产精品一区二区在线观看99| 国产有黄有色有爽视频| 国产成人精品久久久久久| 日韩人妻精品一区2区三区| 99视频精品全部免费 在线| 九九在线视频观看精品| 国产极品天堂在线| 亚洲美女视频黄频| 一区在线观看完整版| 久久99精品国语久久久| 亚洲精品,欧美精品| 免费高清在线观看视频在线观看| 成人手机av| 制服丝袜香蕉在线| 欧美激情国产日韩精品一区| 亚洲成人av在线免费| 国产免费福利视频在线观看| 国产探花极品一区二区| tube8黄色片| 国产日韩欧美亚洲二区| 国产日韩欧美亚洲二区| 欧美97在线视频| 熟女av电影| 亚洲国产日韩一区二区| av.在线天堂| 国产精品成人在线| 国产一区亚洲一区在线观看| 色视频在线一区二区三区| 国语对白做爰xxxⅹ性视频网站| 毛片一级片免费看久久久久| 一边亲一边摸免费视频| 免费播放大片免费观看视频在线观看| 婷婷色麻豆天堂久久| 中国美白少妇内射xxxbb| 国产淫语在线视频| 亚洲成av片中文字幕在线观看 | 亚洲欧美色中文字幕在线| 免费在线观看完整版高清| 国产熟女欧美一区二区| 欧美日韩成人在线一区二区| 99久久中文字幕三级久久日本| 久久ye,这里只有精品| 欧美日韩国产mv在线观看视频| 韩国高清视频一区二区三区| 天天影视国产精品| 久久久久久久久久成人| 欧美精品一区二区大全| 精品国产乱码久久久久久小说| 在线观看三级黄色| 亚洲 欧美一区二区三区| 国产 精品1| 国产深夜福利视频在线观看| 人人妻人人爽人人添夜夜欢视频| 母亲3免费完整高清在线观看 | 美女脱内裤让男人舔精品视频| 亚洲av中文av极速乱| 哪个播放器可以免费观看大片| 欧美日韩成人在线一区二区| 免费播放大片免费观看视频在线观看| 男女边吃奶边做爰视频| av国产精品久久久久影院| 免费黄频网站在线观看国产| 9热在线视频观看99| 日韩av不卡免费在线播放| 国产av码专区亚洲av| 啦啦啦中文免费视频观看日本| 五月开心婷婷网| 久久久精品区二区三区| 亚洲国产精品专区欧美| 国产女主播在线喷水免费视频网站| 国产日韩欧美在线精品| 精品人妻一区二区三区麻豆| 99热这里只有是精品在线观看| av不卡在线播放| 久久人人爽av亚洲精品天堂| 99久久中文字幕三级久久日本| 看非洲黑人一级黄片| 久久99蜜桃精品久久| 国产熟女欧美一区二区| 久久av网站| 亚洲图色成人| 啦啦啦啦在线视频资源| 51国产日韩欧美| 高清欧美精品videossex| 国产成人a∨麻豆精品| 精品第一国产精品| av一本久久久久| 黑人高潮一二区| 人人妻人人澡人人看| 永久免费av网站大全| 国产白丝娇喘喷水9色精品| 五月开心婷婷网| 久久久久国产网址| 国产在线视频一区二区| av视频免费观看在线观看| 一个人免费看片子| 亚洲国产精品成人久久小说| 久久久久人妻精品一区果冻| 亚洲国产精品专区欧美| 亚洲精品色激情综合| 久久久亚洲精品成人影院| 亚洲国产精品999| 亚洲三级黄色毛片| 男女无遮挡免费网站观看| 国产成人精品一,二区| 99久久人妻综合| 女的被弄到高潮叫床怎么办| 在线免费观看不下载黄p国产| 校园人妻丝袜中文字幕| av天堂久久9| 欧美国产精品一级二级三级| 自拍欧美九色日韩亚洲蝌蚪91| av又黄又爽大尺度在线免费看| 日本vs欧美在线观看视频| 亚洲国产av影院在线观看| 日韩精品有码人妻一区| 69精品国产乱码久久久| 91国产中文字幕| av又黄又爽大尺度在线免费看| 国产欧美另类精品又又久久亚洲欧美| 日韩伦理黄色片| 日本午夜av视频| av免费观看日本| freevideosex欧美| 日韩av在线免费看完整版不卡| 边亲边吃奶的免费视频| 男女啪啪激烈高潮av片| 国产成人精品福利久久| 欧美日韩综合久久久久久| 亚洲,欧美,日韩| 国产精品久久久av美女十八| 高清毛片免费看| 欧美丝袜亚洲另类| 在线观看www视频免费| 免费看av在线观看网站| 欧美3d第一页| 热re99久久精品国产66热6| 亚洲精品中文字幕在线视频| 蜜桃国产av成人99| 国产精品一二三区在线看| 久久99热6这里只有精品| 欧美xxxx性猛交bbbb| 下体分泌物呈黄色| 麻豆精品久久久久久蜜桃| 麻豆精品久久久久久蜜桃| 亚洲精品第二区| 亚洲国产欧美日韩在线播放| 如何舔出高潮| 自线自在国产av| 晚上一个人看的免费电影| 国产乱人偷精品视频| 免费黄频网站在线观看国产| 国产高清三级在线| 巨乳人妻的诱惑在线观看| 久久久久久久亚洲中文字幕| 成年动漫av网址| 在线观看免费视频网站a站| 成年女人在线观看亚洲视频| 成年动漫av网址| 欧美变态另类bdsm刘玥| 18禁国产床啪视频网站| kizo精华| 国产不卡av网站在线观看| 久久精品aⅴ一区二区三区四区 | 欧美性感艳星| 九色成人免费人妻av| 久久久久人妻精品一区果冻| 91在线精品国自产拍蜜月| 精品国产国语对白av| 亚洲四区av| 韩国高清视频一区二区三区| 少妇熟女欧美另类| 中文字幕亚洲精品专区| av在线老鸭窝| 日韩一区二区视频免费看| 中国美白少妇内射xxxbb| 日韩,欧美,国产一区二区三区| 免费在线观看完整版高清| 免费大片黄手机在线观看| 国产免费现黄频在线看| 美女脱内裤让男人舔精品视频| 永久免费av网站大全| 免费人妻精品一区二区三区视频| 99香蕉大伊视频| 国产 一区精品| av片东京热男人的天堂| 99久久中文字幕三级久久日本| 大片电影免费在线观看免费| 欧美另类一区| 两个人看的免费小视频| 91精品国产国语对白视频| 一区二区三区乱码不卡18| av卡一久久| 最后的刺客免费高清国语| 日韩 亚洲 欧美在线| 少妇 在线观看| 欧美成人午夜免费资源| 亚洲伊人色综图| 国产亚洲精品第一综合不卡 | 亚洲精品aⅴ在线观看| 国产 一区精品| 国产男人的电影天堂91| 黄片播放在线免费| 王馨瑶露胸无遮挡在线观看| 国产成人aa在线观看| 国产亚洲一区二区精品| 国产精品蜜桃在线观看| 日本91视频免费播放| 国产午夜精品一二区理论片| 久久毛片免费看一区二区三区| 欧美激情国产日韩精品一区| 成人亚洲欧美一区二区av| 亚洲精品日韩在线中文字幕| 欧美日韩视频精品一区| 亚洲成国产人片在线观看| 国产精品欧美亚洲77777| 精品第一国产精品| 最后的刺客免费高清国语| 狂野欧美激情性bbbbbb| 欧美亚洲日本最大视频资源| 国产日韩欧美在线精品| 日韩视频在线欧美| 欧美日本中文国产一区发布| 国产精品久久久久久久电影| av在线观看视频网站免费| 人人妻人人澡人人看| 久久热在线av| videossex国产| 老司机影院成人| 成人综合一区亚洲| 男人添女人高潮全过程视频| 久久久久久久久久成人| 国产有黄有色有爽视频| 午夜av观看不卡| 亚洲内射少妇av| 91精品伊人久久大香线蕉| 国产精品久久久久久精品古装| 男女无遮挡免费网站观看| 久久国产精品大桥未久av| 男人操女人黄网站| 丰满乱子伦码专区| 亚洲成人手机| 欧美 日韩 精品 国产| 欧美老熟妇乱子伦牲交| 夫妻性生交免费视频一级片| 亚洲熟女精品中文字幕| av一本久久久久| 欧美日韩av久久| 久久精品国产鲁丝片午夜精品| 欧美变态另类bdsm刘玥| 99精国产麻豆久久婷婷| 亚洲精品自拍成人| av又黄又爽大尺度在线免费看| 综合色丁香网| 女性被躁到高潮视频| 亚洲伊人色综图| 深夜精品福利| av网站免费在线观看视频| 亚洲美女视频黄频| 久久ye,这里只有精品| 国内精品宾馆在线| 99久久人妻综合| 国产伦理片在线播放av一区| 亚洲第一区二区三区不卡| 如日韩欧美国产精品一区二区三区| 国产成人精品婷婷| 日日爽夜夜爽网站| 日韩 亚洲 欧美在线| 亚洲第一av免费看| 成人亚洲精品一区在线观看| 国产极品天堂在线| 亚洲成人一二三区av| 国产高清三级在线| 岛国毛片在线播放| 国产精品国产三级专区第一集| 成人国产麻豆网| 视频中文字幕在线观看| 国产黄色视频一区二区在线观看| 日本91视频免费播放| 免费少妇av软件| 最近最新中文字幕大全免费视频 | 免费高清在线观看日韩| 一区在线观看完整版| 精品久久国产蜜桃| 国产老妇伦熟女老妇高清| 丝袜喷水一区| 国产成人一区二区在线| 交换朋友夫妻互换小说| 免费播放大片免费观看视频在线观看| 国产片内射在线| 五月天丁香电影| 国产日韩欧美亚洲二区| 久久久久国产网址| 少妇被粗大猛烈的视频| 国产av国产精品国产| 欧美日韩亚洲高清精品| 高清视频免费观看一区二区| 纵有疾风起免费观看全集完整版| 又粗又硬又长又爽又黄的视频| 我要看黄色一级片免费的| 国产亚洲av片在线观看秒播厂| 高清视频免费观看一区二区| 超色免费av| 高清av免费在线| 99久久精品国产国产毛片| 久久久国产欧美日韩av| 国产成人一区二区在线| 2022亚洲国产成人精品| 一边亲一边摸免费视频| 亚洲av免费高清在线观看| 亚洲人与动物交配视频| 男人添女人高潮全过程视频| 午夜福利网站1000一区二区三区| 日韩大片免费观看网站| 一级毛片我不卡| 日韩制服丝袜自拍偷拍| 日韩,欧美,国产一区二区三区| 美女中出高潮动态图| 国产精品一区www在线观看| 美女中出高潮动态图| 欧美精品一区二区大全| 中文精品一卡2卡3卡4更新| 色婷婷久久久亚洲欧美| 国产午夜精品一二区理论片| 国产极品天堂在线| www.熟女人妻精品国产 | 欧美激情极品国产一区二区三区 | 一级黄片播放器| 久久婷婷青草| 亚洲精品自拍成人| 亚洲av电影在线观看一区二区三区| 国产乱来视频区| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 日本欧美视频一区| 欧美精品一区二区大全| 精品第一国产精品| 国产69精品久久久久777片| 免费在线观看完整版高清| 在线观看免费日韩欧美大片| 亚洲av电影在线观看一区二区三区| 热re99久久精品国产66热6| 99re6热这里在线精品视频| 欧美bdsm另类| 9191精品国产免费久久| 亚洲精品一区蜜桃| 狠狠婷婷综合久久久久久88av| 精品午夜福利在线看| 97精品久久久久久久久久精品| 18+在线观看网站| 国产极品天堂在线| 国产精品女同一区二区软件| 久久99热6这里只有精品| 97超碰精品成人国产| 蜜臀久久99精品久久宅男| 亚洲欧洲精品一区二区精品久久久 | 国产探花极品一区二区| 这个男人来自地球电影免费观看 | 久久精品国产亚洲av天美| 伦理电影大哥的女人| 国产一区二区三区av在线| 观看美女的网站| 亚洲伊人色综图| 久久久国产精品麻豆| 国产一区二区在线观看日韩| 18禁裸乳无遮挡动漫免费视频| 亚洲欧美中文字幕日韩二区| 日韩在线高清观看一区二区三区| 如日韩欧美国产精品一区二区三区| 国产成人av激情在线播放| 久久精品国产鲁丝片午夜精品| 男女免费视频国产| 大片电影免费在线观看免费| 亚洲精品第二区| 亚洲成av片中文字幕在线观看 | 久久久欧美国产精品| 欧美日韩视频精品一区| 王馨瑶露胸无遮挡在线观看| 国产又爽黄色视频| 超色免费av| 黄色毛片三级朝国网站| 国产亚洲av片在线观看秒播厂| 午夜福利网站1000一区二区三区| 在线观看国产h片| 欧美成人精品欧美一级黄| 久久久久久久久久人人人人人人| 亚洲av福利一区| 国产精品一二三区在线看| 国产一区二区激情短视频 | 亚洲三级黄色毛片| 亚洲精品,欧美精品| av国产久精品久网站免费入址| 在线观看免费视频网站a站| 如日韩欧美国产精品一区二区三区| 国产精品一区二区在线不卡| 亚洲成人一二三区av| 成人亚洲精品一区在线观看| 亚洲成av片中文字幕在线观看 | 日韩一区二区视频免费看| 亚洲精品aⅴ在线观看| 成人漫画全彩无遮挡| 亚洲国产成人一精品久久久| 久久久久久久久久人人人人人人| 自拍欧美九色日韩亚洲蝌蚪91| 人妻系列 视频| 亚洲经典国产精华液单| 少妇的逼好多水| 美女视频免费永久观看网站| 亚洲av日韩在线播放| 青青草视频在线视频观看| 男人舔女人的私密视频| 永久网站在线| 黄片播放在线免费| 国产一区有黄有色的免费视频| 汤姆久久久久久久影院中文字幕| 亚洲欧美日韩卡通动漫| 男女无遮挡免费网站观看| 国产黄频视频在线观看| 亚洲婷婷狠狠爱综合网| 欧美变态另类bdsm刘玥| 久久久久精品久久久久真实原创| 免费日韩欧美在线观看| 男女午夜视频在线观看 | 亚洲av电影在线观看一区二区三区| 久久久久久久国产电影| 久久99一区二区三区| 色视频在线一区二区三区| 国产精品麻豆人妻色哟哟久久| 18在线观看网站| 性色avwww在线观看| kizo精华| 七月丁香在线播放| 秋霞在线观看毛片| 大陆偷拍与自拍| 亚洲情色 制服丝袜| 涩涩av久久男人的天堂| 超色免费av| 久久国产亚洲av麻豆专区| h视频一区二区三区| 美女主播在线视频| 人妻人人澡人人爽人人| 日韩成人伦理影院| 国产精品人妻久久久影院| 久久久久久久大尺度免费视频| 亚洲av欧美aⅴ国产| 亚洲,一卡二卡三卡| 老女人水多毛片| 中文欧美无线码| 国产亚洲精品久久久com| 亚洲久久久国产精品| 久久久国产一区二区| 九九爱精品视频在线观看| 精品人妻偷拍中文字幕| 热re99久久国产66热| 免费看不卡的av| 色吧在线观看| 久久99热6这里只有精品| 狠狠婷婷综合久久久久久88av| 两个人看的免费小视频| 丝袜喷水一区| 免费观看a级毛片全部| 国产 精品1| 美女脱内裤让男人舔精品视频| 视频中文字幕在线观看| 在线观看免费视频网站a站| 亚洲一级一片aⅴ在线观看| 国产精品久久久久久精品古装| 大话2 男鬼变身卡| 高清不卡的av网站| 热99久久久久精品小说推荐| 99久久中文字幕三级久久日本| 久久99热6这里只有精品| 亚洲第一区二区三区不卡| 高清不卡的av网站| 宅男免费午夜| 大片电影免费在线观看免费| 久久精品国产亚洲av天美| 成人黄色视频免费在线看| 久久久久国产精品人妻一区二区| 熟女电影av网| 一二三四中文在线观看免费高清| 18+在线观看网站| 中文精品一卡2卡3卡4更新| 中文字幕免费在线视频6| 亚洲av国产av综合av卡| 五月天丁香电影| 国产精品久久久久久久电影| 日日爽夜夜爽网站| 伦精品一区二区三区| 国产精品欧美亚洲77777| 欧美97在线视频| 十分钟在线观看高清视频www| 自线自在国产av| 免费观看a级毛片全部| 亚洲精品第二区| 在线看a的网站| 午夜老司机福利剧场| 日韩熟女老妇一区二区性免费视频| 国产日韩一区二区三区精品不卡| 日本欧美视频一区| 日日撸夜夜添| 亚洲精品国产av蜜桃| 最新的欧美精品一区二区| 中文乱码字字幕精品一区二区三区| 免费高清在线观看日韩| 久久97久久精品| 免费在线观看完整版高清| av天堂久久9| 少妇被粗大的猛进出69影院 | 中文字幕最新亚洲高清| 国产xxxxx性猛交| 亚洲综合色惰| 熟妇人妻不卡中文字幕| av免费观看日本| 超碰97精品在线观看| 在线观看免费日韩欧美大片| 亚洲五月色婷婷综合| 伊人亚洲综合成人网| 国产精品嫩草影院av在线观看| 99国产综合亚洲精品| 卡戴珊不雅视频在线播放| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 伦理电影大哥的女人| 久久精品久久精品一区二区三区| 日韩在线高清观看一区二区三区| 多毛熟女@视频| 97在线人人人人妻| 人人妻人人澡人人看| 18禁动态无遮挡网站| 91国产中文字幕| 欧美亚洲日本最大视频资源| 天天躁夜夜躁狠狠久久av| 在线 av 中文字幕| 人体艺术视频欧美日本| 国产成人av激情在线播放| 成人午夜精彩视频在线观看| 亚洲av福利一区| 美女中出高潮动态图| 国产欧美另类精品又又久久亚洲欧美| videos熟女内射| 亚洲伊人久久精品综合| 免费黄网站久久成人精品| 日本午夜av视频| 丝袜在线中文字幕| 成人黄色视频免费在线看| 韩国高清视频一区二区三区| 只有这里有精品99| 侵犯人妻中文字幕一二三四区| 母亲3免费完整高清在线观看 | 中文字幕人妻熟女乱码| 18禁动态无遮挡网站| av免费观看日本| 亚洲精品中文字幕在线视频| 欧美人与性动交α欧美精品济南到 | 最近中文字幕2019免费版| 久久精品国产综合久久久 | 青青草视频在线视频观看| 99国产精品免费福利视频| 精品国产露脸久久av麻豆| 高清欧美精品videossex| 肉色欧美久久久久久久蜜桃| 99久久精品国产国产毛片| 日本免费在线观看一区| 亚洲精品国产av成人精品| 在线看a的网站| a级毛片黄视频| 欧美精品人与动牲交sv欧美| 国产成人aa在线观看| 久久久久久久久久久久大奶| 侵犯人妻中文字幕一二三四区| 日产精品乱码卡一卡2卡三| 国产精品99久久99久久久不卡 | 99久久精品国产国产毛片|