• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于D-S證據(jù)體的異構(gòu)日志文件融合方法

    2019-07-26 09:26:04胡若彤于樹松侯瑞春
    制造業(yè)自動化 2019年7期
    關(guān)鍵詞:畫像異構(gòu)日志

    胡若彤,于樹松,侯瑞春,陶 冶

    (1.中國海洋大學 信息科學與工程學院,青島 266000;2.青島科技大學,青島 266000)

    0 引言

    隨著大數(shù)據(jù)、云計算等技術(shù)的不斷發(fā)展,應(yīng)運而生的電子商務(wù)平臺也在不斷壯大,從起初的簡單網(wǎng)上購物、網(wǎng)上消費的升級為互聯(lián)網(wǎng)經(jīng)營,據(jù)CNNIC于2017年1月份公布統(tǒng)計調(diào)查報告顯示[1]:到2016年12月,我國網(wǎng)民人數(shù)達到了7.31億,達到53.2%的互聯(lián)網(wǎng)覆蓋率,2018年11月11日的淘寶雙十一交易額達到2132億元,同比上一年增長26%。

    越來越多的企業(yè)級應(yīng)用軟件和網(wǎng)站需要對客戶源信息進行分析形成可供企業(yè)應(yīng)用的用戶標簽信息,在龐大的互聯(lián)網(wǎng)環(huán)境下產(chǎn)生了大量的用戶行為,傳統(tǒng)的用戶畫像研究數(shù)據(jù)源主要是企業(yè)通過用戶的授權(quán)獲得的用戶數(shù)據(jù),是相對被動的數(shù)據(jù),而記錄軟件運行狀況的日志文件則記錄了各類角色在系統(tǒng)上的操作信息以及軟件的運行狀態(tài)信息。

    日志文件作為近幾年數(shù)據(jù)源關(guān)注的焦點,數(shù)據(jù)量龐大,信息多樣化是日志文件的基本特點,同時網(wǎng)絡(luò)日志在運行過程中會產(chǎn)生大量的系統(tǒng)日志、應(yīng)用日志、安全日志和網(wǎng)絡(luò)日志[2],這些日志文件記錄了系統(tǒng)以及設(shè)備的運行狀態(tài)信息、事務(wù)處理信息等系統(tǒng)信息,如何利用這些日志文件并將這些日志文件內(nèi)的信息聚合轉(zhuǎn)換成用戶想看到的信息是近幾年國內(nèi)外學者關(guān)注的焦點。

    每一個web網(wǎng)站以及軟件都擁有的日志文件是記錄著人們的一言一行的文件,對于一個web應(yīng)用,后臺生成的日志文件是海量的,每一種日志文件包含不同類型的數(shù)據(jù)信息,通過對日志進行分析,不但可以發(fā)現(xiàn)系統(tǒng)運行狀況同時也可以發(fā)現(xiàn)隱藏的各種系統(tǒng)角色的行為信息,例如當下所流行的軟件微服務(wù)架構(gòu)內(nèi)的每一個微服務(wù)所生成的日志文件也是各有不同,這些日志文件記錄了系統(tǒng)整體的運行狀態(tài)、客戶的操作狀態(tài)以及末端傳感器對數(shù)據(jù)的采集狀態(tài)信息而不同的日志文件類型以及不同的日志文件源構(gòu)成了日志文件異構(gòu)性的特點。

    本文基于storm實時流處理框架對異構(gòu)日志文件做整合和實時處理,在不同的服務(wù)器上配置Filebeat以及l(fā)ogstash對日志文件進行采集,利用日志中蘊含的用戶穩(wěn)定的行為信息分,抽取出用戶興趣性、行為性以及傾向性的三個維度的標簽,主要方法為經(jīng)過D-S證據(jù)體算法對采集的異構(gòu)數(shù)據(jù)文件進行融合生成了用戶畫像里興趣性、傾向性和行為性三個維度的標簽值,為融合日志文件獲取用戶的消費習慣、消費傾向以及消費興趣提供了解決方案。通過對技術(shù)和算法的探討,推動了多源日志的研究和探索。

    1 異構(gòu)日志特點

    日志文件以記錄內(nèi)容分類可以分為三種:訪問型日志文件(主要對服務(wù)器的請求和應(yīng)答信息進行記錄)、應(yīng)用日志文件(主要對軟件的業(yè)務(wù)流程信息進行記錄)、操作系統(tǒng)日志文件(主要對操作系統(tǒng)運行狀態(tài)信息進行記錄),事務(wù)型日志文件(主要用于保持數(shù)據(jù)的一致性,記錄數(shù)據(jù)的增刪改查操作,用于數(shù)據(jù)回滾操作以及防止數(shù)據(jù)沖突的發(fā)生)、消息型日志文件(主要對用戶間即時通訊信息進行記錄)。

    日志模塊作為操作系統(tǒng)、軟件框架以及程序中的重要的組成部分,它記錄著計算機系統(tǒng)的操作、運行狀態(tài)以及安全等信息,日志模塊內(nèi)的日志文件的數(shù)據(jù)特點主要是數(shù)據(jù)量大、內(nèi)容涵蓋廣泛且詳細,由于操作系統(tǒng)、軟件框架、程序甚至是設(shè)備的差異性而導致了日志的格式、類型、內(nèi)容不能夠完全統(tǒng)一,本文將異構(gòu)日志文件主要研究對象。

    雖然基于Syslog的日志文件通用格式被廣泛運用于網(wǎng)絡(luò)設(shè)備日志以及l(fā)inux系統(tǒng)日志中,但是由于不同的軟件框架中的日志文件系統(tǒng)都是由程序開發(fā)人員在系統(tǒng)要求下自行定義的,許多系統(tǒng)以及軟件框架的日志文件格式、內(nèi)容、類型并不統(tǒng)一,我們需要從這些文件中提取出有用的用戶信息則需要建立異構(gòu)日志收集系統(tǒng)。

    異構(gòu)日志文件采集步驟[3]:

    1)異構(gòu)數(shù)據(jù)獲取,不同服務(wù)器、系統(tǒng)的日志文件的存放位置以及日志文件類型不同,需要配置不同的Filebeat數(shù)據(jù)輸入文件。

    2)異構(gòu)數(shù)據(jù)預(yù)處理,原始的日志文件內(nèi)有一些信息對于日志分析是無用的,我們需要將這些信息過濾掉,減少下游系統(tǒng)的處理壓力。還有一部分信息比較隱私(比如用戶的訪問IP),不希望被他人獲取,可以將其匿名化處理。

    3)模式發(fā)現(xiàn),對獲取的數(shù)據(jù)進行數(shù)據(jù)挖掘處理,包括分類、統(tǒng)計、聚類等方法。

    4)模式分析,對發(fā)現(xiàn)的模式進行進一步的挖掘,根據(jù)系統(tǒng)需求對模式進行分析處理,例如發(fā)現(xiàn)用戶行為偏好,并將所發(fā)現(xiàn)的信息可視化,方便用戶更為直觀的觀察數(shù)據(jù),做出更正確的決策或者產(chǎn)生引導消費的功能。

    本文以異構(gòu)日志作為數(shù)據(jù)源,構(gòu)建基于Filebeat和Logstash的異構(gòu)日志收集系統(tǒng),收集的日志文件將通過以Storm為框架的日志數(shù)據(jù)融合系統(tǒng)完成異構(gòu)日志文件到用戶畫像的流程。

    2 用戶畫像

    隨著云計算、大數(shù)據(jù)、傳感器網(wǎng)絡(luò)和高速無線傳輸網(wǎng)絡(luò)等高科技快速發(fā)展和廣泛的應(yīng)用,用戶定制服務(wù)、服務(wù)內(nèi)容推送等個性化功能也應(yīng)運而生,用戶畫像是根據(jù)用戶屬性、生活習慣和消費行為等信息而抽象出的一個標簽化的用戶模型,web應(yīng)用生成的日志文件詳細記錄了用戶在web應(yīng)用內(nèi)所做的操作,而用戶對web應(yīng)用的訪問都是帶有目的性的[4]。

    用戶畫像是根據(jù)用戶社會屬性、生活習慣和消費行為等信息抽象出得而一個標簽化的用戶模型,構(gòu)建在線社交用戶畫像模型的過程中,通常會使用較為通俗且貼近現(xiàn)實生活的語義標簽去描述在線社交用戶的屬性特征、行為特征和偏好特征[5]。而標簽是人為的將數(shù)據(jù)內(nèi)的特征提取出來抽象數(shù)據(jù)的過程,是一種把數(shù)據(jù)形象化的方法,與屬性不同,標簽是對該屬性狀態(tài)給出的結(jié)論,可以將標簽理解為業(yè)務(wù)規(guī)則的標準組成部分[6]。

    對于一個用戶畫像來說場景的設(shè)定是必不可少的,本文設(shè)定D-S證據(jù)體的每一個識別框架作為用戶畫像的應(yīng)用場景,如圖1所示。

    依據(jù)文獻[7]中所述的用戶畫像構(gòu)建步驟,本文的用戶畫像的構(gòu)建步驟主要為:

    1)基礎(chǔ)數(shù)據(jù)采集,采用filebeat+logstash從不同的服務(wù)器內(nèi)收集異構(gòu)日志文件,通過storm實時流處理系統(tǒng)處理日志文件。

    2)行為建模,基于AHP層次權(quán)重賦值法和D-S證據(jù)體融合的方法進行行為建模,抽象出用戶標簽,本文以用戶對當前網(wǎng)站的興趣性、購物傾向性以及網(wǎng)站操作行為性三個維度的屬性構(gòu)造用戶標簽。

    3)數(shù)據(jù)可視化分析,此項步驟不在本文的討論范圍之內(nèi)。

    用戶畫像評價指標如圖1所示。

    圖1 用戶畫像評價指標體系圖

    其中Ai表示為識別框架。將用戶的興趣性、傾向性以及行為性設(shè)計成三個維度的評價指標,三個維度的語義表示為:興趣性是指用戶A對網(wǎng)站a的感興趣程度;傾向性是指用戶A可能在商品網(wǎng)站a購物的傾向程度;行為性是指用戶A可能在網(wǎng)站a上做與網(wǎng)站相關(guān)的行為程度。

    A1表示用戶X對子網(wǎng)站的興趣評估標準,A2表示用戶X在子網(wǎng)站(購物類型網(wǎng)站)的購物傾向評估標準,A3表示用戶X在子網(wǎng)站的行為評估標準。

    第三列的子模塊作為每一個評價標準的所需的元證據(jù),本文設(shè)定為當前評估標準的能力值。其中元證據(jù)主要包括:1)網(wǎng)站交易量:當前交易網(wǎng)站的全部交易成交量;2)用戶交易量:用戶在當前交易網(wǎng)站內(nèi)的成交量;3)網(wǎng)站瀏覽量:當前網(wǎng)站全部的瀏覽量;4)用戶瀏覽量:用戶在當前網(wǎng)站內(nèi)的瀏覽量。

    圖2 異構(gòu)日志文件采集流程圖

    3 異構(gòu)日志處理系統(tǒng)整體設(shè)計

    3.1 異構(gòu)日志收集系統(tǒng)的設(shè)計

    Filebeat是一個輕量級日志文件采集工具,屬于本地文件的日志數(shù)據(jù)采集器,用于監(jiān)聽和采集日志,日志采集若直接通過logstash獲取文件對于服務(wù)器太過沉重且資源消耗量大,加入Filebeat的設(shè)計可以輕松獲得日志文件推送到中心logstash。

    在所需獲取日志文件的服務(wù)器上安裝Filebeat,依次配置數(shù)據(jù)源的文件內(nèi)容,獨立出一臺服務(wù)器搭建logstash,本文取一臺服務(wù)器做數(shù)據(jù)源,此臺服務(wù)器的ip地址為:192.168.153.1,搭建logstash的服務(wù)器的ip地址為:192.168.153.255。

    配置Filebeat,由于服務(wù)器的差異,所有在每臺服務(wù)器安裝和配置Filebeat時需要特別修改一下配置文件,配置日志文件獲取方式以及日志文件路徑地址。

    更改服務(wù)器本地Filebeat的配置文件 fi lebeat.yml下日志文件目錄路徑:

    3.2 日志文件采集系統(tǒng)流程圖

    本文中的異構(gòu)日志文件類型為:交易日志、消息日志和訪問日志,從這三類日志文件內(nèi)提取出網(wǎng)站交易數(shù)據(jù),用戶瀏覽數(shù)據(jù)以及網(wǎng)站訪問量數(shù)據(jù)進行數(shù)據(jù)融合,數(shù)據(jù)分析統(tǒng)計。

    經(jīng)過上述討論,異構(gòu)日志文件采集系統(tǒng)流程設(shè)計如圖2所示。

    3.3 Storm異構(gòu)日志融合系統(tǒng)的設(shè)計

    Strom是區(qū)別于Hadoop的開源實時計算工具,它的框架處理模式與Hadoop非常相似,但隨著數(shù)據(jù)規(guī)模爆炸式的增長以及對實時數(shù)據(jù)處理功能的需求水漲船高,適用于海量數(shù)據(jù)處理的Hadoop對于實時數(shù)據(jù)的處理略顯吃力,然而針對實時數(shù)據(jù)處理Storm框架則可以滿足此類需求,其框架中提供的一系列基本概念是使其能夠進行海量日志實時計算的基礎(chǔ),而支撐其平穩(wěn)運行的是內(nèi)部處理模型。

    Storm與Hadoop最顯著的不同在于Hadoop是需要結(jié)束的,而Storm則不需要結(jié)束,在下一個新數(shù)據(jù)到來的時候作為一個新的開始,如同水流一樣由高到底源源不斷。

    Storm的主體數(shù)據(jù)結(jié)構(gòu)為Tuple(元組),也是Storm被處理的流數(shù)據(jù)(stream)的基礎(chǔ)組成單位,是消息傳遞的基本單元;storm的數(shù)據(jù)接受單元(spout)以及數(shù)據(jù)處理單元(bolt)是由用戶根據(jù)業(yè)務(wù)的復(fù)雜程度自行決定的。

    Spout主要負責向一個指定的頻道發(fā)送數(shù)據(jù),而每一個bolt需要在內(nèi)部邏輯結(jié)構(gòu)中對這個頻道訂閱數(shù)據(jù)。

    本文中Storm實時計算拓撲流程設(shè)計如圖3所示。

    DateCollectSpout是從redis中獲取日志文件,并以tuple的形式發(fā)送給FilterBolt的數(shù)據(jù)源,F(xiàn)ileterBolt是日志過濾模塊,由于日志文件內(nèi)的記錄分為多種,我們需要將用戶購物記錄、網(wǎng)站整體瀏覽記錄、網(wǎng)站交易記錄獲取并下分到各個Bolt,此處的Bolt涉及兩種判斷:

    判斷l(xiāng)og的完整程度,包括用戶名/網(wǎng)站地址、瀏覽量/交易量,當上述類別缺少則將其過濾掉。

    判斷產(chǎn)品狀態(tài)值是否為空,根據(jù)海爾COSMOPlat的日志定義,日志記錄產(chǎn)品為空無法交易的情況,則將其過濾掉。

    過濾出的t u p l e將通過批處理分別發(fā)送給WebPageViewInfoBol、DealInfoBolt、UserInterviewInfoBolt、UserPdInterViewBolt執(zhí)行頁面信息統(tǒng)計、交易信息統(tǒng)計、用戶瀏覽信息統(tǒng)計以及用戶產(chǎn)品頁面瀏覽信息統(tǒng)計的操作,生成的統(tǒng)計信息發(fā)送到WeightingBolt賦予內(nèi)外信息的權(quán)重并生成決策矩陣,DSEvidenceBolt則將決策矩陣作為識別框架融合生成DS證據(jù)體。

    本文的日志主要來源于海爾COSMOPlat平臺,其中有n個用戶和m個子網(wǎng)站,在子網(wǎng)站中有s個交易類型的網(wǎng)站。

    4 D-S證據(jù)體偽代碼設(shè)計實現(xiàn)

    D-S證據(jù)體是一種不確定性推理方法,指一項事物由與之相關(guān)的外項進行評定所得到的關(guān)于此項事物的不確定程度,1967年Shafer[8]該理論進行了擴充引入了信任函數(shù)表達概率的上、下界,形成了基于“證據(jù)”和“組合”來處理不確定性推理問題的數(shù)學方法,在此基礎(chǔ)上形成了“證據(jù)理論”。

    4.1 識別框架的設(shè)定

    識別框架為用戶畫像評價標準體系:根據(jù)圖1所示,其中傾向性、興趣性、行為性設(shè)置為一級證據(jù)層,其他下分為二級證據(jù)層。

    4.2 AHP權(quán)重的設(shè)置

    層次分析法又稱AHP構(gòu)權(quán)法(Analytic hierarchy process)是將復(fù)雜評價對象排列成為一個有序的遞階層次結(jié)構(gòu)的整體,再在各個評價項目之間進行兩兩的比較、判斷、計算各個評價項目相對重要性系數(shù)的方法,由Satty教授在20世紀70年代初期提出的一種定性和定量相結(jié)合的多準則決策方法,首先需要通過專家咨詢評定重要性比值,再經(jīng)過公式進行相應(yīng)的計算,本文用層次分析法構(gòu)造權(quán)重以及1~9標度法,對元證據(jù)賦予相關(guān)權(quán)重[9]。

    設(shè)置專家組對一級和二級證據(jù)層評分,由于元證據(jù)只有四種,所以我們需要給一級證據(jù)賦予相應(yīng)的權(quán)重以區(qū)分相同元證據(jù)在不同的語境下不同的重要性。

    表1 一級證據(jù)層決策判斷矩陣和權(quán)重

    表2 二級證據(jù)決策判斷矩陣和權(quán)重

    4.3 基礎(chǔ)概率函數(shù)的設(shè)置

    在D-S證據(jù)體中,需要設(shè)定BPA(Basic Probability Assignment)基本概率函數(shù),本文中的元證據(jù)的基本概率函數(shù)是以支持度的形式出現(xiàn)的,支持度代表的是個體占總體的比列,例如整個web網(wǎng)站的總瀏覽量為S,子網(wǎng)站a的瀏覽量為Sa,則子網(wǎng)站a的支持度為Sa/S;用戶A對子網(wǎng)站a的瀏覽量為S(A),對子網(wǎng)站a的支持度為S(A)/Sa。

    以βij表示支持度,i表示第i個一級證據(jù)評價指標,j表示第j個二級證據(jù)評價指標(下同)。則用戶A對子網(wǎng)站a的支持βij=S(A)/Sa;而子網(wǎng)站a的全局支持度為βi=Sa/S。

    設(shè)識別框架θi=Aij,其中θi的數(shù)據(jù)結(jié)構(gòu)是矩陣,用戶畫像指定了特定的用戶,所以在一級證據(jù)處設(shè)K=(1,2,…,k,…,m)表示子網(wǎng)站編號,一級證據(jù)的語義設(shè)定為用戶X對子網(wǎng)站K的屬性,二級證據(jù)處設(shè)置q為二級證據(jù)的個數(shù)。系統(tǒng)獲取了n個用戶和m個網(wǎng)站的數(shù)據(jù),則以n×m的矩陣形式展示出所采集的數(shù)據(jù),每一行代表一個用戶的數(shù)據(jù)向量,每一列代表一個網(wǎng)站的數(shù)據(jù)向量。

    根據(jù)每個元證據(jù)的權(quán)重指數(shù)及其支持率構(gòu)成D-S證據(jù)理論的基本概率分配函數(shù)(即mass函數(shù)):

    式中m(Aij)表示Aij的支持度,而m(Θi)表示Aij所表示的元證據(jù)不確定性的支持度。

    4.4 信任函數(shù)

    D-S證據(jù)理論中信任函數(shù)Bel(θ)是指θ的可信程度[10],即本文定義的對一級證據(jù)評價標準的支持程度。而似然函數(shù)PL(θ)則是對θ的可能性的不懷疑程度,本文將其定義為一級證據(jù)不確定性的支持度。

    信任函數(shù)與似然函數(shù)構(gòu)成對一級證據(jù)體的支持度區(qū)間。

    4.5 D-S證據(jù)體算法偽代碼

    D-S證據(jù)體代碼核心為將兩個元證據(jù)向量內(nèi)的核心證據(jù)值進行融合形成統(tǒng)一指標的過程。

    5 實驗與結(jié)果

    5.1 基礎(chǔ)數(shù)據(jù)采集

    本文的log數(shù)據(jù)來自海爾COSMOPlat平臺,以其中的訪問日志和交易日志為例,所采集的日志文件格式如下所示:

    1)訪問日志:

    Time:[2018 十一月 22 16:03:29(125985 ms)] Type:(INFO):com.nsneo.pub.moduleAC.MoudleAccessControlManImp:用戶[admin]登錄系統(tǒng),初始化第一個訪問界面[index.html]

    Time:[2018 十二月 21 11:31:13 (460042 ms)] Type:(INFO):com.nsneo.pub.moduleAC.ModuleAccessControlManImp:用戶訪問系統(tǒng),切換系統(tǒng)模塊,ModuleId[datasb2b. fi rstPage.yhhinfo]

    Time:[2018 十一月 22 16:03:29(125940 ms)]Type:(INFO):addons.haier.pub.HaierUserAccessRecord SimpleFactory : 海爾登記用戶訪問系統(tǒng)...

    T i m e:[2 0 1 8 十二月 2 1 1 1:3 4:3 6(662495 ms)] Type:(INFO):addons.haier.pub.SysUserManFactoryforHaier:加密用戶信息字段,字段名為[CosmoStoreUser.loginPwd],字段值為[haier1234]

    [2018 十二月 21 11:34:36 (662495 ms)] INFO:addons.haier.pub.SysUserManFactoryforHaier:加密用戶信息字段,字段名為[CosmoStoreUser.loginName],字段值為[胡懶懶]

    2)交易日志:

    [2018 九月 15 15:48:34 (527272 ms)] INFO :addons.haier.pub.HaierDataRule:產(chǎn)品[257],產(chǎn)品網(wǎng)站[],[大蒜]商戶[吉林農(nóng)嫂]用戶[USERNAME]

    [2018 九月 15 15:45:49 (361971 ms)] INFO:addons.haier.pub.HaierDataRule:產(chǎn)品[910],產(chǎn)品網(wǎng)站[],[]狀態(tài)為空,不能交易

    5.2 行為建模

    基于D-S證據(jù)體識別框架的三個維度的屬性,建立當前用戶的語境,根據(jù)識別框架內(nèi)的給出的支持度區(qū)間建立用戶畫像的標簽[11]戶X的用戶畫像如表3所示。

    表3 用戶X的基本數(shù)據(jù)

    根據(jù)式(1)計算其mass函數(shù),得到的mij如表4~表6所示。

    表4 一級證據(jù)體mij的mass函數(shù)

    表5 一級證據(jù)體m2j的mass函數(shù)

    表6 一級證據(jù)體m3j的mass函數(shù)

    經(jīng)過D-S證據(jù)體融合后,如表7所示。

    表7 用戶X的D-S證據(jù)體融合數(shù)據(jù)

    根據(jù)以上的基礎(chǔ)數(shù)據(jù),用戶X的用戶畫像為:目標產(chǎn)品為金鄉(xiāng)大蒜,網(wǎng)站可以根據(jù)此項行為性的標簽值推薦相同產(chǎn)品的不同商戶給用戶,或者將用戶作為大蒜商家的目標用戶推薦給商家,對于海南金芒用戶的興趣性和傾向性都為0,卻存在輕微的行為性在海南金芒這個產(chǎn)品里,所以我們可以將海南金芒作為用戶的潛在產(chǎn)品購買傾向里。

    5.3 數(shù)據(jù)可視化

    系統(tǒng)根據(jù)上述數(shù)據(jù)描述利用可視化工具在前端直觀的展示出用戶X的用戶畫像,使得營銷和運維人員更加直觀的挖掘客戶行為性的指向,具體的可視化工具并不在本文的討論范圍之內(nèi)。

    6 結(jié)束語

    隨著大數(shù)據(jù)等科學技術(shù)的不斷向前發(fā)展,各個軟件業(yè)務(wù)的拓展不僅僅限于傳統(tǒng)的業(yè)務(wù)模式,它們需要通過新興技術(shù)將自己的業(yè)務(wù)模式改善到更加廣闊的領(lǐng)域,獲得更好的用戶粘度以及用戶特性。

    本文以異構(gòu)數(shù)據(jù)文件作為出發(fā)點,通過提取異構(gòu)日志文件內(nèi)具有特殊含義的字句,提取分析融合生成特定的用戶畫像。

    使用storm實時流處理大數(shù)據(jù)框架以及Filebeat、logstash和redis等技術(shù),設(shè)計了異構(gòu)日志處理系統(tǒng),storm與hadoop最大的差異是其能夠完成實時處理的任務(wù),在當時當刻給出大數(shù)據(jù)處理結(jié)果,滿足用戶畫像的實時性,采用redis消息隊列存儲模式可以使得數(shù)據(jù)存儲轉(zhuǎn)換更加便捷。

    傳統(tǒng)的用戶畫像數(shù)據(jù)源為用戶授權(quán)的數(shù)據(jù)或者企業(yè)采集的用戶數(shù)據(jù),來源復(fù)雜且不易獲得,企業(yè)因此對數(shù)據(jù)帶有很強的被動性,日志文件是系統(tǒng)本身記錄運行狀態(tài)的文件,是屬于企業(yè)的,本文提出的數(shù)據(jù)源為日志文件,使得企業(yè)在獲取數(shù)據(jù)上更占主動性。

    用戶畫像的屬性值劃分往往是復(fù)雜的,本文將屬性值劃分為三個維度建立了評價指標,應(yīng)用AHP權(quán)重法和D-S證據(jù)體將獲得的數(shù)據(jù)融合成三個維度的屬性值,在此理論基礎(chǔ)上可以延伸到未來更加廣泛的評價標準維度計算,更加有利于企業(yè)通過應(yīng)用以及網(wǎng)站系統(tǒng)獲得詳細精確的用戶信息,不再被動的獲得用戶信息,推動企業(yè)走向更完整規(guī)范的道路。

    猜你喜歡
    畫像異構(gòu)日志
    威猛的畫像
    試論同課異構(gòu)之“同”與“異”
    一名老黨員的工作日志
    華人時刊(2021年13期)2021-11-27 09:19:02
    “00后”畫像
    畫像
    扶貧日志
    心聲歌刊(2020年4期)2020-09-07 06:37:14
    游學日志
    overlay SDN實現(xiàn)異構(gòu)兼容的關(guān)鍵技術(shù)
    電信科學(2016年11期)2016-11-23 05:07:56
    LTE異構(gòu)網(wǎng)技術(shù)與組網(wǎng)研究
    在新興異構(gòu)SoCs上集成多種系統(tǒng)
    国产精品嫩草影院av在线观看| 永久网站在线| 成人亚洲精品一区在线观看| 国产成人aa在线观看| 亚洲av男天堂| 午夜福利视频在线观看免费| 老司机影院成人| 黑人欧美特级aaaaaa片| 久久久亚洲精品成人影院| 亚洲欧美一区二区三区久久| 日韩不卡一区二区三区视频在线| 亚洲成国产人片在线观看| 色哟哟·www| 咕卡用的链子| 狠狠精品人妻久久久久久综合| 亚洲伊人色综图| 亚洲精品日本国产第一区| 69精品国产乱码久久久| 在线观看一区二区三区激情| 久久精品国产鲁丝片午夜精品| 9191精品国产免费久久| av片东京热男人的天堂| 国产成人精品无人区| 免费大片黄手机在线观看| 日韩av不卡免费在线播放| 国产一区二区在线观看av| 国产 一区精品| 丝瓜视频免费看黄片| 9热在线视频观看99| 日韩不卡一区二区三区视频在线| 欧美激情 高清一区二区三区| 精品少妇一区二区三区视频日本电影 | 一级片免费观看大全| 青春草国产在线视频| 国产一级毛片在线| 国产精品嫩草影院av在线观看| 欧美精品国产亚洲| 日韩三级伦理在线观看| 日日摸夜夜添夜夜爱| 国产精品久久久久久久久免| 91精品国产国语对白视频| 又大又黄又爽视频免费| 一个人免费看片子| 卡戴珊不雅视频在线播放| 黑人猛操日本美女一级片| 国产成人精品在线电影| 午夜福利一区二区在线看| 2018国产大陆天天弄谢| 免费观看a级毛片全部| 有码 亚洲区| 亚洲欧洲日产国产| 高清视频免费观看一区二区| 91午夜精品亚洲一区二区三区| 丝袜喷水一区| 国精品久久久久久国模美| 久久久久久久久久人人人人人人| 亚洲av免费高清在线观看| 一区二区三区精品91| 激情视频va一区二区三区| 日韩不卡一区二区三区视频在线| 免费大片黄手机在线观看| 亚洲五月色婷婷综合| 日韩中字成人| 1024香蕉在线观看| 欧美国产精品一级二级三级| 国产一区二区三区av在线| 18禁观看日本| 亚洲欧美一区二区三区久久| 国产精品久久久久久av不卡| 婷婷色综合大香蕉| 日本-黄色视频高清免费观看| 午夜福利,免费看| 亚洲三区欧美一区| 99久久精品国产国产毛片| 男女高潮啪啪啪动态图| 黑丝袜美女国产一区| 久久国产精品大桥未久av| 人人妻人人澡人人爽人人夜夜| 女人久久www免费人成看片| 国产精品久久久久久精品古装| 亚洲av综合色区一区| 天堂俺去俺来也www色官网| 欧美亚洲日本最大视频资源| 久久人人爽人人片av| 欧美精品一区二区大全| 18+在线观看网站| 十八禁网站网址无遮挡| 国产无遮挡羞羞视频在线观看| 久久久久久免费高清国产稀缺| 2021少妇久久久久久久久久久| 美女国产高潮福利片在线看| av国产精品久久久久影院| 欧美精品av麻豆av| 成人影院久久| 中文字幕人妻熟女乱码| 午夜福利网站1000一区二区三区| 18禁国产床啪视频网站| 国产精品久久久av美女十八| 亚洲视频免费观看视频| 成人亚洲精品一区在线观看| 欧美亚洲 丝袜 人妻 在线| av福利片在线| 夫妻午夜视频| 亚洲婷婷狠狠爱综合网| 性色av一级| 亚洲少妇的诱惑av| 国产男女内射视频| 叶爱在线成人免费视频播放| 精品人妻偷拍中文字幕| 亚洲国产av影院在线观看| 国产日韩一区二区三区精品不卡| 不卡av一区二区三区| 亚洲精品av麻豆狂野| 老司机亚洲免费影院| 少妇熟女欧美另类| 日韩制服丝袜自拍偷拍| 乱人伦中国视频| 国产一区二区三区综合在线观看| 成人免费观看视频高清| 在线看a的网站| 日韩中字成人| 综合色丁香网| 热re99久久国产66热| 亚洲欧美清纯卡通| 精品国产国语对白av| 久久久久国产精品人妻一区二区| 国产爽快片一区二区三区| 波多野结衣av一区二区av| 人妻一区二区av| 久久久久久久国产电影| 午夜福利视频在线观看免费| 日韩视频在线欧美| 99精国产麻豆久久婷婷| 街头女战士在线观看网站| 国产成人精品婷婷| 男男h啪啪无遮挡| 欧美成人午夜精品| 蜜桃在线观看..| av视频免费观看在线观看| 亚洲第一区二区三区不卡| 哪个播放器可以免费观看大片| 免费不卡的大黄色大毛片视频在线观看| 爱豆传媒免费全集在线观看| 日韩伦理黄色片| 中文字幕人妻熟女乱码| 精品一区二区免费观看| 国产极品天堂在线| 超色免费av| 欧美人与性动交α欧美精品济南到 | 91久久精品国产一区二区三区| 极品人妻少妇av视频| 亚洲av国产av综合av卡| 超色免费av| 99热网站在线观看| 久久久久国产一级毛片高清牌| 99热国产这里只有精品6| 两性夫妻黄色片| 国产精品偷伦视频观看了| 成人影院久久| 婷婷色综合www| 丁香六月天网| 成人毛片60女人毛片免费| 亚洲国产av影院在线观看| 亚洲综合精品二区| 国产 精品1| 国产精品国产av在线观看| 久久久久久久久久久久大奶| 国产一区二区三区av在线| 中文字幕最新亚洲高清| 国产男人的电影天堂91| 久久ye,这里只有精品| 国语对白做爰xxxⅹ性视频网站| 精品少妇一区二区三区视频日本电影 | 国产成人精品久久久久久| 欧美日韩成人在线一区二区| 亚洲成国产人片在线观看| 在线观看国产h片| 亚洲国产最新在线播放| 成年人午夜在线观看视频| 大片免费播放器 马上看| 亚洲精品第二区| 999精品在线视频| 欧美 日韩 精品 国产| 80岁老熟妇乱子伦牲交| 亚洲国产精品一区二区三区在线| av.在线天堂| 一区二区三区乱码不卡18| 午夜91福利影院| 国产1区2区3区精品| 一级a爱视频在线免费观看| 日本欧美视频一区| 亚洲精品久久成人aⅴ小说| 亚洲精品久久久久久婷婷小说| 黄片播放在线免费| 日韩视频在线欧美| 国产精品无大码| 中文字幕精品免费在线观看视频| av视频免费观看在线观看| 亚洲欧洲国产日韩| 亚洲欧美一区二区三区国产| 在线天堂最新版资源| xxx大片免费视频| 999精品在线视频| 久久久国产精品麻豆| 777米奇影视久久| 侵犯人妻中文字幕一二三四区| 国产精品二区激情视频| 啦啦啦在线观看免费高清www| 男女高潮啪啪啪动态图| 极品少妇高潮喷水抽搐| 欧美人与善性xxx| 精品久久久久久电影网| 久久人人爽人人片av| 国产男女超爽视频在线观看| 91久久精品国产一区二区三区| 乱人伦中国视频| 成人毛片60女人毛片免费| 亚洲,一卡二卡三卡| 欧美日韩亚洲高清精品| 伦理电影大哥的女人| 国产亚洲欧美精品永久| 久久久久久久国产电影| 一级片免费观看大全| 人人澡人人妻人| 天天躁狠狠躁夜夜躁狠狠躁| 如日韩欧美国产精品一区二区三区| 精品少妇内射三级| 久热这里只有精品99| 国产精品国产三级专区第一集| 免费观看性生交大片5| 久久久久久久国产电影| 男女啪啪激烈高潮av片| 亚洲 欧美一区二区三区| 日日啪夜夜爽| 如日韩欧美国产精品一区二区三区| 天堂8中文在线网| 亚洲少妇的诱惑av| 久久久亚洲精品成人影院| 国产成人av激情在线播放| 丰满饥渴人妻一区二区三| 午夜福利在线免费观看网站| 黄片播放在线免费| 91成人精品电影| 亚洲精品,欧美精品| 久久午夜福利片| 丁香六月天网| 91aial.com中文字幕在线观看| 亚洲欧美一区二区三区久久| 国产毛片在线视频| 成人手机av| 亚洲,一卡二卡三卡| 两个人免费观看高清视频| av福利片在线| 欧美亚洲日本最大视频资源| 日本-黄色视频高清免费观看| 人人妻人人添人人爽欧美一区卜| 亚洲三级黄色毛片| 桃花免费在线播放| 黄色 视频免费看| 一级片免费观看大全| 啦啦啦视频在线资源免费观看| 一区福利在线观看| 波多野结衣一区麻豆| 亚洲精品国产av成人精品| 看免费成人av毛片| 黑人猛操日本美女一级片| 一级黄片播放器| 国产不卡av网站在线观看| 午夜福利在线观看免费完整高清在| 国产成人免费观看mmmm| 精品第一国产精品| 一区二区三区激情视频| 中文字幕人妻丝袜一区二区 | 久久久精品区二区三区| 国产一区有黄有色的免费视频| 日本黄色日本黄色录像| 国产 一区精品| 观看av在线不卡| 多毛熟女@视频| 最近中文字幕高清免费大全6| 日韩欧美精品免费久久| xxxhd国产人妻xxx| 亚洲精品国产一区二区精华液| 国产高清国产精品国产三级| 亚洲色图综合在线观看| 搡老乐熟女国产| 午夜日韩欧美国产| 啦啦啦在线免费观看视频4| 在线观看免费高清a一片| 水蜜桃什么品种好| 中文字幕制服av| 男人添女人高潮全过程视频| 欧美日本中文国产一区发布| 蜜桃在线观看..| 啦啦啦在线免费观看视频4| 麻豆乱淫一区二区| 久久久a久久爽久久v久久| 国产日韩欧美视频二区| 免费黄网站久久成人精品| 18禁国产床啪视频网站| 看免费成人av毛片| 爱豆传媒免费全集在线观看| 久久久久久久大尺度免费视频| 精品人妻熟女毛片av久久网站| 国产 一区精品| 丰满少妇做爰视频| 伊人久久大香线蕉亚洲五| 一级毛片黄色毛片免费观看视频| 一级毛片 在线播放| 秋霞在线观看毛片| 国产人伦9x9x在线观看 | 亚洲精品第二区| 成人亚洲精品一区在线观看| 久久午夜综合久久蜜桃| 男女午夜视频在线观看| 久久女婷五月综合色啪小说| 国产av码专区亚洲av| 午夜久久久在线观看| 亚洲国产毛片av蜜桃av| 亚洲伊人久久精品综合| 18禁观看日本| 国产高清不卡午夜福利| 男女高潮啪啪啪动态图| 韩国精品一区二区三区| 亚洲精品,欧美精品| www日本在线高清视频| 久久国产精品男人的天堂亚洲| 欧美日韩精品成人综合77777| 国产片特级美女逼逼视频| 精品人妻在线不人妻| 国产精品偷伦视频观看了| 亚洲国产欧美网| 久久亚洲国产成人精品v| 亚洲综合色惰| 国产日韩欧美视频二区| 夫妻性生交免费视频一级片| 黑人欧美特级aaaaaa片| 国产精品久久久av美女十八| 国产极品粉嫩免费观看在线| 色婷婷久久久亚洲欧美| 捣出白浆h1v1| 777米奇影视久久| 久久精品国产鲁丝片午夜精品| 日韩av在线免费看完整版不卡| 卡戴珊不雅视频在线播放| 亚洲精品一二三| 日韩中文字幕视频在线看片| 如何舔出高潮| 91国产中文字幕| 超碰成人久久| 五月开心婷婷网| 欧美精品国产亚洲| 18禁观看日本| 国产黄频视频在线观看| 欧美国产精品va在线观看不卡| 亚洲精品美女久久久久99蜜臀 | 国产综合精华液| 欧美成人精品欧美一级黄| 丝袜美腿诱惑在线| av一本久久久久| 久久精品熟女亚洲av麻豆精品| 婷婷色综合大香蕉| 亚洲欧美中文字幕日韩二区| 日韩,欧美,国产一区二区三区| 国产精品 欧美亚洲| 久久精品国产a三级三级三级| 久久精品亚洲av国产电影网| 欧美 亚洲 国产 日韩一| 色网站视频免费| 在线观看美女被高潮喷水网站| 亚洲视频免费观看视频| 男女高潮啪啪啪动态图| 免费在线观看完整版高清| 成人18禁高潮啪啪吃奶动态图| 久久精品aⅴ一区二区三区四区 | 欧美成人午夜免费资源| 69精品国产乱码久久久| 伊人久久大香线蕉亚洲五| a级毛片在线看网站| 中文字幕精品免费在线观看视频| 黄频高清免费视频| 午夜福利影视在线免费观看| 99国产综合亚洲精品| 国产成人a∨麻豆精品| 欧美激情极品国产一区二区三区| av国产精品久久久久影院| 看免费成人av毛片| 中文字幕av电影在线播放| 亚洲国产日韩一区二区| 日本av手机在线免费观看| 久久久久精品人妻al黑| 亚洲精品久久午夜乱码| 黄色配什么色好看| 熟女少妇亚洲综合色aaa.| 国产又爽黄色视频| 菩萨蛮人人尽说江南好唐韦庄| 久久精品国产a三级三级三级| 欧美亚洲 丝袜 人妻 在线| 激情视频va一区二区三区| 欧美xxⅹ黑人| 免费日韩欧美在线观看| 成人毛片a级毛片在线播放| 久久精品国产综合久久久| 精品国产露脸久久av麻豆| 午夜日韩欧美国产| 欧美激情高清一区二区三区 | 欧美日韩av久久| 制服丝袜香蕉在线| 久久久久国产精品人妻一区二区| 麻豆av在线久日| 人妻系列 视频| 成人毛片60女人毛片免费| 国产成人aa在线观看| 午夜福利在线观看免费完整高清在| www日本在线高清视频| 日本-黄色视频高清免费观看| 国产老妇伦熟女老妇高清| 国产精品一区二区在线观看99| 日日爽夜夜爽网站| 国产精品.久久久| 少妇猛男粗大的猛烈进出视频| 亚洲精品一二三| 成人18禁高潮啪啪吃奶动态图| 精品少妇黑人巨大在线播放| 久久人人爽av亚洲精品天堂| 国产不卡av网站在线观看| 两个人看的免费小视频| 青春草视频在线免费观看| 精品一区在线观看国产| 秋霞伦理黄片| 制服人妻中文乱码| 深夜精品福利| 色视频在线一区二区三区| 国产欧美亚洲国产| 高清不卡的av网站| 精品国产乱码久久久久久男人| 王馨瑶露胸无遮挡在线观看| 中文字幕人妻丝袜制服| 午夜日韩欧美国产| 男女下面插进去视频免费观看| www日本在线高清视频| 亚洲av欧美aⅴ国产| 观看美女的网站| 国产免费现黄频在线看| 观看美女的网站| 在线天堂中文资源库| 午夜91福利影院| 最近2019中文字幕mv第一页| 亚洲欧美成人精品一区二区| av国产精品久久久久影院| 看十八女毛片水多多多| 一二三四中文在线观看免费高清| 丝袜美腿诱惑在线| 黄色毛片三级朝国网站| 亚洲欧美一区二区三区黑人 | 满18在线观看网站| 亚洲,一卡二卡三卡| 国产高清不卡午夜福利| 一区二区三区乱码不卡18| 成人亚洲欧美一区二区av| av卡一久久| 国产成人精品在线电影| 亚洲欧美清纯卡通| 男女免费视频国产| 亚洲精品第二区| 中文字幕人妻丝袜制服| 久久久久国产精品人妻一区二区| 91aial.com中文字幕在线观看| videossex国产| 久久人妻熟女aⅴ| 精品一区二区免费观看| 在线观看国产h片| 妹子高潮喷水视频| 国产男女超爽视频在线观看| 欧美精品亚洲一区二区| 日本色播在线视频| 中文字幕亚洲精品专区| 亚洲成国产人片在线观看| 少妇精品久久久久久久| 国产精品三级大全| 亚洲国产最新在线播放| 久久久亚洲精品成人影院| 美女视频免费永久观看网站| 18禁裸乳无遮挡动漫免费视频| 精品一品国产午夜福利视频| 在线观看国产h片| 国产白丝娇喘喷水9色精品| 精品久久久精品久久久| 亚洲国产精品一区二区三区在线| 欧美人与性动交α欧美软件| 黑丝袜美女国产一区| 亚洲国产最新在线播放| www.av在线官网国产| 日韩成人av中文字幕在线观看| 美女中出高潮动态图| 国产国语露脸激情在线看| 水蜜桃什么品种好| 成人亚洲欧美一区二区av| 亚洲精品av麻豆狂野| a级片在线免费高清观看视频| 中文字幕色久视频| 中文字幕制服av| 超色免费av| 亚洲精品成人av观看孕妇| 一级毛片黄色毛片免费观看视频| 国精品久久久久久国模美| 亚洲欧美成人精品一区二区| 性少妇av在线| 天天躁夜夜躁狠狠躁躁| 久久99精品国语久久久| 韩国高清视频一区二区三区| 桃花免费在线播放| 成年动漫av网址| 日韩成人av中文字幕在线观看| 国产免费现黄频在线看| 亚洲欧美一区二区三区国产| 看非洲黑人一级黄片| 在线观看人妻少妇| 制服人妻中文乱码| 伦理电影大哥的女人| 欧美日韩av久久| 欧美激情高清一区二区三区 | 欧美日韩亚洲高清精品| 自拍欧美九色日韩亚洲蝌蚪91| 国产亚洲精品第一综合不卡| 亚洲av电影在线观看一区二区三区| 久久久久久久久久久免费av| 夜夜骑夜夜射夜夜干| 在线观看免费日韩欧美大片| 国产欧美日韩一区二区三区在线| 国产男人的电影天堂91| 欧美人与善性xxx| 9191精品国产免费久久| 天天操日日干夜夜撸| 啦啦啦啦在线视频资源| av福利片在线| 亚洲第一av免费看| 久久ye,这里只有精品| 精品一品国产午夜福利视频| 免费观看性生交大片5| 色网站视频免费| 亚洲一区中文字幕在线| 亚洲av国产av综合av卡| 晚上一个人看的免费电影| 精品午夜福利在线看| 久久精品aⅴ一区二区三区四区 | 一级黄片播放器| 成人国产麻豆网| 久久精品aⅴ一区二区三区四区 | 久久精品熟女亚洲av麻豆精品| 中国国产av一级| 欧美激情高清一区二区三区 | 日本欧美国产在线视频| 在线观看免费日韩欧美大片| 欧美成人午夜免费资源| 国产极品粉嫩免费观看在线| 欧美97在线视频| 久久99热这里只频精品6学生| 捣出白浆h1v1| 在线 av 中文字幕| 日韩伦理黄色片| 另类精品久久| 精品一区二区免费观看| 黄片小视频在线播放| 亚洲国产欧美网| 久久99精品国语久久久| 国产成人精品一,二区| 国产日韩一区二区三区精品不卡| av有码第一页| 夜夜骑夜夜射夜夜干| 免费人妻精品一区二区三区视频| 精品国产国语对白av| 久久精品国产亚洲av高清一级| 999精品在线视频| 亚洲av福利一区| 亚洲国产日韩一区二区| 97人妻天天添夜夜摸| 69精品国产乱码久久久| 久久久精品免费免费高清| 国产综合精华液| 亚洲精品aⅴ在线观看| 18禁观看日本| av天堂久久9| 欧美日韩综合久久久久久| 免费看av在线观看网站| 日韩av免费高清视频| 免费高清在线观看日韩| 热re99久久精品国产66热6| 精品久久蜜臀av无| 伦精品一区二区三区| 亚洲国产精品成人久久小说| 日韩制服骚丝袜av| 国产毛片在线视频| av不卡在线播放| 欧美精品一区二区免费开放| 日韩视频在线欧美| 超碰97精品在线观看| 亚洲三级黄色毛片| 青青草视频在线视频观看| 亚洲精品aⅴ在线观看| 亚洲内射少妇av| 黑丝袜美女国产一区| 久久久久久免费高清国产稀缺| 午夜日本视频在线| 女人被躁到高潮嗷嗷叫费观| av一本久久久久| 精品国产乱码久久久久久男人| 最近的中文字幕免费完整| 亚洲一级一片aⅴ在线观看| 亚洲伊人色综图| 综合色丁香网| 精品人妻偷拍中文字幕| 自线自在国产av| 精品第一国产精品| 黄频高清免费视频|