基于云計(jì)算的大數(shù)據(jù)網(wǎng)絡(luò)信息檢索技術(shù)及擴(kuò)展

孟穎

摘? 要：隨處可見(jiàn)的云儲(chǔ)存和計(jì)算功能，加快了大數(shù)據(jù)的產(chǎn)生速度，因此，在進(jìn)行網(wǎng)絡(luò)管理的過(guò)程中，需要做好大數(shù)據(jù)信息內(nèi)容的收集，幫助人們便利地進(jìn)行數(shù)據(jù)信息檢索，結(jié)合實(shí)際調(diào)查結(jié)果顯示，大數(shù)據(jù)中超過(guò)半數(shù)都是非結(jié)構(gòu)化數(shù)據(jù)內(nèi)容，大多數(shù)非結(jié)構(gòu)化的數(shù)據(jù)形式是以文件進(jìn)行儲(chǔ)存。大數(shù)據(jù)整體被分割成不同的內(nèi)容，分別儲(chǔ)存在不同的服務(wù)器中，在主服務(wù)器上也會(huì)產(chǎn)生相應(yīng)的儲(chǔ)存元數(shù)據(jù)，該文主要探討了基于云計(jì)算的大數(shù)據(jù)信息檢索技術(shù)，對(duì)其未來(lái)發(fā)展進(jìn)行了整體預(yù)測(cè)，希望能夠促進(jìn)我國(guó)科學(xué)技術(shù)的發(fā)展。

關(guān)鍵詞：云計(jì)算? 大數(shù)據(jù)網(wǎng)絡(luò)? 信息檢索技術(shù)

中圖分類號(hào)：TP18 ? ?文獻(xiàn)標(biāo)識(shí)碼：A 文章編號(hào)：1672-3791（2019）09（c）-0011-02

隨著信息技術(shù)的不斷發(fā)展，云計(jì)算得到了廣泛應(yīng)用，我們正處于信息爆炸時(shí)代下，云服務(wù)在各個(gè)領(lǐng)域的不斷應(yīng)用，越來(lái)越多的個(gè)人和企業(yè)將辦公業(yè)務(wù)遷移到了網(wǎng)絡(luò)平臺(tái)上，這些網(wǎng)絡(luò)平臺(tái)無(wú)疑不產(chǎn)出大量的數(shù)據(jù)內(nèi)容。除此之外，自動(dòng)傳感系統(tǒng)、移動(dòng)設(shè)備應(yīng)用以及科學(xué)儀器使用，都會(huì)源源不斷地提供數(shù)據(jù)內(nèi)容，增長(zhǎng)速度最為明顯的就是社交網(wǎng)絡(luò)和電子商務(wù)數(shù)據(jù)，數(shù)據(jù)內(nèi)容主要是通過(guò)音頻、視頻、圖片、文字等多種形式進(jìn)行傳播，要想對(duì)這些數(shù)據(jù)內(nèi)容進(jìn)行描述，就需要采用GB、PB甚至ZB，因此我們需要做好云計(jì)算中大數(shù)據(jù)的信息檢索工作。

1? 大數(shù)據(jù)網(wǎng)絡(luò)信息檢索技術(shù)

（1）大數(shù)據(jù)網(wǎng)絡(luò)信息儲(chǔ)存。我國(guó)在進(jìn)行網(wǎng)絡(luò)信息資源儲(chǔ)存過(guò)程中，存在著數(shù)據(jù)分散的問(wèn)題，網(wǎng)絡(luò)用戶要想通過(guò)信息系統(tǒng)進(jìn)行教學(xué)資源的查詢，就需要分別輸入不同的檢索條件，這種信息查詢形式降低了查詢效率。通過(guò)混合云計(jì)算模式的有效應(yīng)用，能夠改變傳統(tǒng)的分布式數(shù)據(jù)庫(kù)儲(chǔ)存格局，將網(wǎng)絡(luò)用戶所進(jìn)行的檢索與數(shù)據(jù)庫(kù)進(jìn)行結(jié)合，全面提高查詢過(guò)程的整體性。網(wǎng)絡(luò)用戶在進(jìn)行數(shù)據(jù)信息查詢的過(guò)程中，可以直接通過(guò)云端進(jìn)行檢索，云客戶端能夠直接將檢索條件發(fā)送到系統(tǒng)服務(wù)器中，經(jīng)過(guò)短暫的分析為市場(chǎng)提供合理的信息資源，滿足網(wǎng)絡(luò)用戶的信息查詢要求?；旌显朴?jì)算模式的有效應(yīng)用，能夠減少信息基礎(chǔ)設(shè)施建設(shè)的資金投入，借助大數(shù)據(jù)技術(shù)建立私有云，負(fù)責(zé)儲(chǔ)存重要信息和資源，從而結(jié)合網(wǎng)絡(luò)的發(fā)展情況，對(duì)云數(shù)據(jù)進(jìn)行統(tǒng)一管理，為用戶提供更好的信息化服務(wù)。

（2）元數(shù)據(jù)的應(yīng)用。大數(shù)據(jù)的產(chǎn)生本身就是隨著云計(jì)算的超級(jí)計(jì)算發(fā)展而形成的，大數(shù)據(jù)主要指的是通過(guò)結(jié)構(gòu)化和半結(jié)構(gòu)化的數(shù)據(jù)分析模式，進(jìn)行數(shù)據(jù)的儲(chǔ)存和收集，結(jié)合其數(shù)據(jù)量，大數(shù)據(jù)具有種類多、價(jià)值高、處理速度快等應(yīng)用優(yōu)勢(shì)，能夠更好地進(jìn)行數(shù)據(jù)內(nèi)容的檢索，如果我們依然采用傳統(tǒng)的關(guān)系數(shù)據(jù)庫(kù)進(jìn)行數(shù)據(jù)儲(chǔ)存，不僅耗費(fèi)儲(chǔ)存時(shí)間，還需要大量的資金投入，在進(jìn)行數(shù)據(jù)查詢時(shí)也具有一定的困難性。大多數(shù)的數(shù)據(jù)內(nèi)容都是以文件形式進(jìn)行儲(chǔ)存的，因此云計(jì)算的集群文件系統(tǒng)，逐漸成為大數(shù)據(jù)數(shù)據(jù)傳輸?shù)闹攸c(diǎn)內(nèi)容，集群文件系統(tǒng)主要指的是將一個(gè)大數(shù)據(jù)文件劃分為不同模塊，分別儲(chǔ)存在服務(wù)器中，每個(gè)模塊都帶有元數(shù)據(jù)，元數(shù)據(jù)被儲(chǔ)存到主服務(wù)器中。主服務(wù)器儲(chǔ)存的內(nèi)容主要有文件和塊的命名，空間塊的映射文件以及數(shù)據(jù)備份的主要位置，我們?cè)谶M(jìn)行數(shù)據(jù)查詢的過(guò)程中，可以直接通過(guò)命名空間查詢指定文件，找出文件所處的目錄和基本路徑，原數(shù)據(jù)所記錄的內(nèi)容有文件儲(chǔ)存的具體位置，通過(guò)信息查詢就能夠了解數(shù)據(jù)的位置移動(dòng)情況，實(shí)現(xiàn)動(dòng)態(tài)化檢索。

2? 網(wǎng)絡(luò)信息的收集與檢索

信息儲(chǔ)存量與信息的價(jià)值成反比，隨著信息技術(shù)的不斷發(fā)展，用戶在進(jìn)行網(wǎng)頁(yè)瀏覽的過(guò)程中，會(huì)從成千上億個(gè)網(wǎng)頁(yè)中結(jié)合自己的需求，查詢相關(guān)數(shù)據(jù)內(nèi)容，例如：在觀看1h左右的視頻后獲得的有用信息只有幾秒鐘，同理，云計(jì)算之所以成為信息技術(shù)發(fā)展的基礎(chǔ)，就是因?yàn)樵朴?jì)算具有超強(qiáng)的信息計(jì)算能力，能夠通過(guò)云數(shù)據(jù)，在短時(shí)間內(nèi)獲得信息處理結(jié)果。云計(jì)算的有效應(yīng)用能夠快速地挖掘數(shù)據(jù)所蘊(yùn)含的價(jià)值，是解決查詢問(wèn)題的重要手段，在進(jìn)行信息檢索的過(guò)程中，中國(guó)常用的百度、美國(guó)常用的谷歌都是檢索行業(yè)的領(lǐng)先企業(yè)，我們正處在云計(jì)算的大數(shù)據(jù)發(fā)展時(shí)代，其發(fā)展的核心思想借鑒了搜索引擎所帶有的便利形式，讓用戶在進(jìn)行大數(shù)據(jù)信息檢索的過(guò)程中，將信息檢索過(guò)程分為網(wǎng)頁(yè)收錄和檢索兩部分。

（1）網(wǎng)頁(yè)收錄。在進(jìn)行數(shù)據(jù)檢索的過(guò)程中，主要是檢索云中的數(shù)據(jù)服務(wù)器，分別對(duì)不同節(jié)點(diǎn)上的服務(wù)器數(shù)據(jù)信息進(jìn)行排序和分析，通過(guò)分布式檢索的方式，將檢索到的結(jié)果直接收錄到Index Repository中，通過(guò)網(wǎng)頁(yè)將搜索引擎中的內(nèi)容收錄在案，制定出搜索索引。用戶在結(jié)合自身的發(fā)展需求提出搜索請(qǐng)求時(shí)，實(shí)際上是在Index Repository中進(jìn)行搜索，通過(guò)運(yùn)用云計(jì)算的計(jì)算方式，通過(guò)倒敘索引列表的制訂，將其儲(chǔ)存到儲(chǔ)存器中，設(shè)計(jì)好頁(yè)面的主要標(biāo)題和連接內(nèi)容，為數(shù)據(jù)制作索引，并且將網(wǎng)頁(yè)的主要內(nèi)容另存為其他索引中。用戶在進(jìn)行數(shù)據(jù)內(nèi)容查詢的過(guò)程中，所得到的數(shù)據(jù)結(jié)果大多數(shù)都經(jīng)歷了較長(zhǎng)時(shí)間的完善和記錄，并且在搜索引擎的緩存區(qū)排序，整個(gè)過(guò)程搜索引擎并不會(huì)提前預(yù)知用戶查詢的主要關(guān)鍵詞，但是要想全面提高搜索的整體效率，就需要建立關(guān)鍵詞詞庫(kù)，在用戶提出查詢請(qǐng)求時(shí)，自動(dòng)匹配關(guān)鍵詞。

（2）數(shù)據(jù)檢索。當(dāng)用戶結(jié)合自身需求提出查詢請(qǐng)求時(shí)，需要像檢索程序提供關(guān)鍵詞，借助索引儲(chǔ)存器將實(shí)際內(nèi)容進(jìn)行排序，直接通過(guò)用戶檢索界面兒呈現(xiàn)在用戶面前，全面提高了信息檢索能力，加快檢索的速度。對(duì)于中文用戶講，在完成用戶請(qǐng)求時(shí)，主要是通過(guò)中文分詞實(shí)現(xiàn)的。中文分詞主要是通過(guò)字符串匹配、理解分詞、統(tǒng)計(jì)分詞這3種形式進(jìn)行的，在收到搜索請(qǐng)求時(shí)，需要仔細(xì)地分析關(guān)鍵詞所蘊(yùn)含的實(shí)際內(nèi)容，要想保證匹配內(nèi)容呈現(xiàn)的有序性，就是要通過(guò)搜索引擎按照相關(guān)的匹配程度進(jìn)行排序，將分詞信息和文件中的連接內(nèi)容相結(jié)合，滿足排序的客觀性暴漲，檢索出的結(jié)果與實(shí)際用戶需求相一致，如果同一網(wǎng)頁(yè)被其他網(wǎng)頁(yè)多次指向，說(shuō)明網(wǎng)頁(yè)的含金量較高，判斷網(wǎng)頁(yè)自身所處的質(zhì)量級(jí)別，分析網(wǎng)絡(luò)連接的權(quán)重，

3? 云計(jì)算在大數(shù)據(jù)網(wǎng)絡(luò)信息檢索技術(shù)中的應(yīng)用

通過(guò)云計(jì)算技術(shù)的有效應(yīng)用，能夠更好地實(shí)現(xiàn)資源共享，直接將已經(jīng)儲(chǔ)存的資源內(nèi)容與軟硬件設(shè)備相結(jié)合，提高計(jì)算機(jī)數(shù)據(jù)處理的便利性，云計(jì)算技術(shù)的應(yīng)用不僅能夠?yàn)橛脩籼峁┌踩木W(wǎng)絡(luò)環(huán)境，還能夠建立高效的數(shù)據(jù)儲(chǔ)存體系，解決傳統(tǒng)計(jì)算機(jī)使用過(guò)程中數(shù)據(jù)處理傳輸問(wèn)題，云計(jì)算技術(shù)應(yīng)用能夠讓人們的網(wǎng)絡(luò)資源收集，打破時(shí)間、空間的限制。要想做好計(jì)算機(jī)數(shù)據(jù)處理工作，就需要以云計(jì)算技術(shù)為核心，助力信息技術(shù)在我國(guó)社會(huì)發(fā)展過(guò)程中的有效應(yīng)用，通過(guò)云計(jì)算技術(shù)，能夠加快服務(wù)器的研發(fā)速度，建立優(yōu)秀的操作系統(tǒng)，讓人們能夠在最短的時(shí)間內(nèi)收集到想要的數(shù)據(jù)內(nèi)容，云計(jì)算技術(shù)的應(yīng)用還為數(shù)據(jù)的儲(chǔ)存、分享提供安全保障，減少數(shù)據(jù)流失所帶來(lái)的經(jīng)濟(jì)影響。

（1）網(wǎng)絡(luò)環(huán)境中的云計(jì)算。在進(jìn)行信息化環(huán)境的構(gòu)建過(guò)程中，需要以云計(jì)算為主要依據(jù)，為當(dāng)前信息系統(tǒng)中的網(wǎng)絡(luò)用戶，實(shí)現(xiàn)網(wǎng)絡(luò)資源的動(dòng)態(tài)化分配，分配的主要內(nèi)容有硬件、服務(wù)器、軟件等。通過(guò)云計(jì)算定期地對(duì)網(wǎng)站上的資源進(jìn)行更新和維護(hù)，同時(shí)在網(wǎng)絡(luò)建設(shè)的過(guò)程中，可以讓網(wǎng)絡(luò)用戶通過(guò)服務(wù)的動(dòng)態(tài)化申請(qǐng)，爭(zhēng)取得到網(wǎng)絡(luò)硬件和信息資源的使用權(quán)和訪問(wèn)權(quán)。網(wǎng)絡(luò)中所采用的云計(jì)算，大多數(shù)都是私有云計(jì)算，針對(duì)于當(dāng)前的內(nèi)部用戶信息開(kāi)展服務(wù)，不為群眾提供網(wǎng)絡(luò)服務(wù)。在當(dāng)前我國(guó)的網(wǎng)絡(luò)建設(shè)開(kāi)展的過(guò)程中，大多數(shù)都會(huì)采用私有云技術(shù)，探討網(wǎng)中所存在的信息資源和數(shù)據(jù)所具有的集中性特點(diǎn)，結(jié)合當(dāng)前的網(wǎng)絡(luò)硬軟件資源構(gòu)建私有云，從而全面降低服務(wù)的成本。私有云計(jì)算的廣泛應(yīng)用，能夠?yàn)橛脩籼峁┝己玫姆?wù)，私有云計(jì)算的網(wǎng)絡(luò)服務(wù)器要搭建在單位網(wǎng)絡(luò)中，通過(guò)防火墻進(jìn)行隔離和保護(hù)，讓內(nèi)部用戶能夠享有穩(wěn)定的數(shù)據(jù)信息。要想全面實(shí)現(xiàn)信息化管理，就需要建立屬于自身的云，在當(dāng)前的網(wǎng)絡(luò)中心，建立數(shù)據(jù)儲(chǔ)存云端，相關(guān)人員能夠通過(guò)云計(jì)算進(jìn)行數(shù)據(jù)查驗(yàn)請(qǐng)求，實(shí)現(xiàn)數(shù)據(jù)應(yīng)答，從而全面提高管理制度，減少資源管理的成本。

（2）私有云的有效應(yīng)用。在進(jìn)行信息化建設(shè)的過(guò)程中，通過(guò)私有云技術(shù)的有效應(yīng)用，能夠更好地實(shí)現(xiàn)網(wǎng)絡(luò)數(shù)據(jù)的儲(chǔ)存和整理，同時(shí)大數(shù)據(jù)技術(shù)的應(yīng)用還能夠?qū)Ξ?dāng)前所采用的信息、硬件和軟件提供及時(shí)的升級(jí)服務(wù)，在網(wǎng)絡(luò)終端使用的過(guò)程中，網(wǎng)絡(luò)用戶們并不需要對(duì)數(shù)據(jù)進(jìn)行保護(hù)，只要結(jié)合自身的信息需求向云空間提出相應(yīng)的申請(qǐng)。私有云技術(shù)的有效應(yīng)用，能夠減少網(wǎng)絡(luò)資源的投入成本，避免出現(xiàn)資源浪費(fèi)，結(jié)合時(shí)代的發(fā)展步伐，網(wǎng)絡(luò)所涵蓋的范圍也在不斷擴(kuò)大，為網(wǎng)絡(luò)用戶便利地訪問(wèn)網(wǎng)絡(luò)提供支持，網(wǎng)絡(luò)的很多數(shù)據(jù)在進(jìn)行處理過(guò)程中都通過(guò)私有云技術(shù)實(shí)現(xiàn)，用戶客戶端也可以減少應(yīng)用軟件的安裝，只需要有一定的系統(tǒng)作為支撐。整個(gè)服務(wù)過(guò)程都是通過(guò)所具有的云端服務(wù)器進(jìn)行承擔(dān)的，用戶只要通過(guò)簡(jiǎn)單的網(wǎng)絡(luò)終端登錄就可以直接連接到的服務(wù)網(wǎng)點(diǎn)，對(duì)服務(wù)器中所含有的海量數(shù)據(jù)進(jìn)行訪問(wèn)，云計(jì)算的應(yīng)用優(yōu)勢(shì)就在于能夠在網(wǎng)絡(luò)的內(nèi)部進(jìn)行設(shè)立，做好相關(guān)部門的維護(hù)和管理工作，保障數(shù)據(jù)庫(kù)內(nèi)部資源不會(huì)出現(xiàn)丟失和遭到破壞。同時(shí)，云計(jì)算技術(shù)在網(wǎng)絡(luò)機(jī)房中的應(yīng)用，還能夠全面降低相關(guān)用戶的查詢強(qiáng)度，優(yōu)化當(dāng)前的計(jì)算機(jī)終端環(huán)境，在保證網(wǎng)絡(luò)機(jī)房正常運(yùn)轉(zhuǎn)的情況下，對(duì)計(jì)算機(jī)進(jìn)行定期的維護(hù)和管理，云端服務(wù)器還可以通過(guò)網(wǎng)絡(luò)服務(wù)中心對(duì)各部門的工作進(jìn)行管理，借助網(wǎng)絡(luò)中的服務(wù)端口，網(wǎng)絡(luò)用戶們能夠?qū)Ω信d趣的資源內(nèi)容進(jìn)行查詢。為了滿足網(wǎng)絡(luò)用戶們的閱覽需求，還可以成立以云計(jì)算為基礎(chǔ)的數(shù)字化圖書(shū)館，將海量圖書(shū)資源直接儲(chǔ)存到云端服務(wù)器中，實(shí)現(xiàn)資源共享。

4? 結(jié)語(yǔ)

要想從眾多信息內(nèi)容中提取日常生活中必要的有力數(shù)據(jù)，促進(jìn)人類社會(huì)的發(fā)展，就需要充分發(fā)揮出大數(shù)據(jù)所具有的信息檢索價(jià)值，以云計(jì)算為基礎(chǔ)所開(kāi)展的大數(shù)據(jù)檢索技術(shù)，仍然面臨著許多困難和挑戰(zhàn)需要解決。例如，多媒體類型的圖形、視頻、聲音等大數(shù)據(jù)文件，這些文件的檢索十分困難，隨著智能終端的普及，需要將多媒體類型文件與智能終端進(jìn)行有機(jī)結(jié)合，從而通過(guò)智能終端的應(yīng)用進(jìn)行文件搜索，獲取相關(guān)信息，工作人員需要以此為基礎(chǔ)，充分利用大數(shù)據(jù)檢索技術(shù)，找出有價(jià)值的信息，通過(guò)不同的收集與檢索方式，促進(jìn)我國(guó)社會(huì)產(chǎn)業(yè)變革。

參考文獻(xiàn)

[1] 劉亞雄.基于云計(jì)算的大數(shù)據(jù)網(wǎng)絡(luò)信息檢索技術(shù)及擴(kuò)展[J].電子世界，2019（10）：201.

[2] 劉昺侯.基于安全云的私有信息檢索關(guān)鍵技術(shù)研究與實(shí)現(xiàn)[D].電子科技大學(xué)，2014.

[3] 劉月.探究云計(jì)算下大數(shù)據(jù)的信息檢索技術(shù)應(yīng)用[J].數(shù)字技術(shù)與應(yīng)用，2015（7）：95.