網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成技術(shù)

褚龍現(xiàn) 陳婉冰

（平頂山學(xué)院計(jì)算機(jī)學(xué)院 河南省平頂山市 467000）

由于移動(dòng)互聯(lián)網(wǎng)和移動(dòng)終端融合發(fā)展速度越來越快，網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)作為一種數(shù)據(jù)集成平臺(tái)能夠?qū)Ａ繑?shù)據(jù)進(jìn)行統(tǒng)一的存儲(chǔ)、管理[1]。網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成技術(shù)是網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面設(shè)計(jì)中主要的應(yīng)用技術(shù)，也是網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)設(shè)計(jì)中十分重要的一環(huán)。在網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成過程中，所涉及到的代碼量十分巨大，這就意味著網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成需要花費(fèi)很長的時(shí)間，存在效率低的問題。數(shù)據(jù)庫技術(shù)作為對(duì)數(shù)據(jù)進(jìn)行存儲(chǔ)以及管理的倉庫，主要包括三層架構(gòu)，分別為：物理數(shù)據(jù)層、概念數(shù)據(jù)層以及用戶數(shù)據(jù)層。數(shù)據(jù)庫技術(shù)通過數(shù)據(jù)處理系統(tǒng)，能夠?qū)崿F(xiàn)對(duì)數(shù)據(jù)的共享。通過將數(shù)據(jù)庫技術(shù)引進(jìn)到網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成中，致力于從根本上提高網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成速率。

1 大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成技術(shù)

網(wǎng)絡(luò)大數(shù)據(jù)處理技術(shù)的核心是對(duì)“大數(shù)據(jù)”的采集、分類、整理與存儲(chǔ)，并根據(jù)其特征建立特征索引，以方便數(shù)據(jù)的利用?；诖死砟?，在動(dòng)態(tài)頁面數(shù)據(jù)生成中，需要首先構(gòu)建網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫，建立數(shù)據(jù)處理的源頭信息；其次根據(jù)數(shù)據(jù)庫中存儲(chǔ)的數(shù)據(jù)的特征，設(shè)計(jì)動(dòng)態(tài)頁面數(shù)據(jù)字典；第三步，在數(shù)據(jù)字典的支撐下，生成網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)，實(shí)現(xiàn)動(dòng)態(tài)頁面數(shù)據(jù)的顯示與利用。

1.1 構(gòu)建網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫

數(shù)據(jù)庫技術(shù)作為人工智能技術(shù)中的核心技術(shù)，運(yùn)用數(shù)據(jù)庫技術(shù)構(gòu)建網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫。網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫作為提高數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成速度中最重要的一項(xiàng)內(nèi)容，基于人工智能應(yīng)用建立的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫打破傳統(tǒng)對(duì)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)只進(jìn)行簡(jiǎn)單羅列的模式，對(duì)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)進(jìn)行智慧化的集成與存儲(chǔ)，將大量類型相同的智慧化網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)挖掘聚類構(gòu)成網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫庫?；谌斯ぶ悄軕?yīng)用建立的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫是一個(gè)具有層次關(guān)聯(lián)結(jié)構(gòu)的知識(shí)體系，通過數(shù)據(jù)知識(shí)單元的抽取、關(guān)聯(lián)、組織以及存儲(chǔ)確保網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫安全高效的運(yùn)行。通過網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫對(duì)大數(shù)據(jù)進(jìn)行對(duì)應(yīng)的數(shù)據(jù)存儲(chǔ)及管理，基于人工智能應(yīng)用中的存儲(chǔ)虛擬化技術(shù)將所有經(jīng)過整理后的數(shù)據(jù)直接存儲(chǔ)至網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫中，這樣一來，便可以直接通過歷史數(shù)據(jù)對(duì)大數(shù)據(jù)進(jìn)行有針對(duì)性的存儲(chǔ)及管理。與此同時(shí)，用數(shù)據(jù)處理技術(shù)對(duì)數(shù)據(jù)進(jìn)行信息分類以及聚類，從而得到結(jié)構(gòu)化的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)，平臺(tái)還可以通過數(shù)據(jù)挖掘和數(shù)據(jù)分析技術(shù)對(duì)結(jié)構(gòu)化的數(shù)據(jù)與平臺(tái)中的語義詞庫、數(shù)據(jù)分類表等進(jìn)行連接匹配。再通過信息聚類的方法得出網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成所需的關(guān)鍵詞，進(jìn)而將這些關(guān)鍵詞用于目錄網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成工具。本文基于人工智能應(yīng)用構(gòu)建的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)庫，能夠?qū)崿F(xiàn)30 萬點(diǎn)的實(shí)時(shí)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成，通過人工智能應(yīng)用中的云中心以及數(shù)據(jù)處理能力，最大程度上保證了數(shù)據(jù)的多樣性以及完整性，為后續(xù)針對(duì)數(shù)據(jù)的共享與應(yīng)用奠定了扎實(shí)的基礎(chǔ)，解決了網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成的后顧之憂。

圖1：網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面圖

圖2：生成數(shù)據(jù)量對(duì)比結(jié)果圖

表1：網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)字典

1.2 設(shè)計(jì)動(dòng)態(tài)頁面數(shù)據(jù)字典

在網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成中，底層數(shù)據(jù)必須具備最基礎(chǔ)的管理功能[2]。本文基于數(shù)據(jù)庫技術(shù)中的數(shù)據(jù)字典，將底層數(shù)據(jù)中每一個(gè)需要調(diào)用的類配置成一個(gè)表的形式，進(jìn)而確保網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面中的底層數(shù)據(jù)能夠合成一個(gè)最基本的組件?；跀?shù)據(jù)庫設(shè)計(jì)的動(dòng)態(tài)頁面數(shù)據(jù)字典，如表1所示。

結(jié)合表1所示，通過基于數(shù)據(jù)庫設(shè)計(jì)動(dòng)態(tài)頁面數(shù)據(jù)字典，將底層數(shù)據(jù)合成為一個(gè)最基本的組件，能夠有效減少網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)的冗余度[3]。在此過程中，需要注意的是一個(gè)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)字典只能配置一個(gè)主健，避免由于存在其他主健導(dǎo)致網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面底層數(shù)據(jù)編碼混亂。與此同時(shí)，必須設(shè)置好數(shù)據(jù)長度以及數(shù)據(jù)配置類型。

1.3 生成網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)

在設(shè)計(jì)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)字典的基礎(chǔ)上，生成網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)[4]。利用數(shù)據(jù)庫中的數(shù)據(jù)處理層為網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)字典進(jìn)行JDBC 編碼。通過調(diào)用的API 請(qǐng)求，將網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)轉(zhuǎn)化為具體的代碼，實(shí)現(xiàn)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)sQL 查找、解析、執(zhí)行等功能。將自動(dòng)生成的JDBC 代碼提供給網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)的API 接口，利用generatoConfig．xml 對(duì)數(shù)據(jù)進(jìn)行配置，實(shí)現(xiàn)對(duì)于網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)（類）的調(diào)用。通過將調(diào)用的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)（類）通過DarkNet 與數(shù)據(jù)庫連接，并設(shè)置好賬號(hào)密碼，得到自動(dòng)生成的JDBC 代碼，實(shí)現(xiàn)了基于數(shù)據(jù)庫的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成。網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面圖，如圖1所示。

結(jié)合圖1所示，需要注意的是，所有網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)最終都是通過generatoConfig．xml 配置后，才能夠自動(dòng)生成的，無須人為對(duì)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)進(jìn)行任何修改、添加或是刪除等操作[5]。至此，完成基于數(shù)據(jù)庫的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成技術(shù)設(shè)計(jì)。

2 實(shí)例分析

2.1 實(shí)驗(yàn)準(zhǔn)備

本文通過設(shè)計(jì)實(shí)例分析的方式，選取2 個(gè)真實(shí)數(shù)據(jù)集作為實(shí)驗(yàn)對(duì)象，分別為：Tyhusge 數(shù)據(jù)集以及Cfisnja 數(shù)據(jù)集，使用Ecldevgsdefsw Luna-SR3 作為網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成代碼實(shí)現(xiàn)的開發(fā)IDE。首先，使用本文設(shè)計(jì)的數(shù)據(jù)生成技術(shù)進(jìn)行網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成操作，將實(shí)驗(yàn)限定時(shí)間設(shè)置為80s，以每10s 為一個(gè)時(shí)間節(jié)點(diǎn)進(jìn)行測(cè)試，并記錄數(shù)據(jù)生成的數(shù)量，將其設(shè)為實(shí)驗(yàn)組；再使用傳統(tǒng)數(shù)據(jù)生成技術(shù)對(duì)數(shù)據(jù)集在網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面中進(jìn)行生成，同樣記錄數(shù)據(jù)生成的數(shù)量，將其設(shè)為對(duì)照組。由此可見，本次實(shí)驗(yàn)主要內(nèi)容為測(cè)試兩種數(shù)據(jù)生成技術(shù)在限定時(shí)間內(nèi)的生成數(shù)據(jù)量。通過8 次對(duì)比實(shí)驗(yàn)，得出實(shí)驗(yàn)結(jié)果。

2.2 實(shí)驗(yàn)結(jié)果分析與結(jié)論

將兩種數(shù)據(jù)生成技術(shù)下的生成數(shù)據(jù)量進(jìn)行對(duì)比，生成數(shù)據(jù)量對(duì)比結(jié)果，如圖2所示。

根據(jù)圖2 可知，通過基于數(shù)據(jù)庫設(shè)計(jì)的數(shù)據(jù)生成技術(shù)在相同限定時(shí)間內(nèi)生成的數(shù)據(jù)量高于對(duì)照組兩倍以上，設(shè)計(jì)的數(shù)據(jù)生成技術(shù)在數(shù)據(jù)生成效率方面相比傳統(tǒng)數(shù)據(jù)生成技術(shù)具有明顯的優(yōu)勢(shì)。綜上所述，設(shè)計(jì)的數(shù)據(jù)生成技術(shù)對(duì)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)的生成效率更高，有理由直接投入現(xiàn)實(shí)應(yīng)用。

3 結(jié)束語

文章針對(duì)基于數(shù)據(jù)庫的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成技術(shù)展開研究，通過以上研究可以表明，利用本文設(shè)計(jì)的數(shù)據(jù)生成技術(shù)能夠在保證數(shù)據(jù)獨(dú)立性的前提下，解決網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成效率低的問題。由此可見，未來網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成方面的發(fā)展可以以數(shù)據(jù)庫為核心技術(shù)，為網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成領(lǐng)域的研究提供學(xué)術(shù)意義。盡管本文進(jìn)行的研究已趨于完善，但現(xiàn)如今針對(duì)網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)的建設(shè)仍需進(jìn)一步完善，未來將建立完整的數(shù)據(jù)庫實(shí)現(xiàn)高效、精準(zhǔn)的網(wǎng)絡(luò)大數(shù)據(jù)平臺(tái)動(dòng)態(tài)頁面數(shù)據(jù)生成。