基于主題爬蟲算法的養(yǎng)殖投入品質(zhì)量信息監(jiān)管系統(tǒng)

李輝++張標(biāo)++吳文良

摘要：為了解決養(yǎng)殖投入品的質(zhì)量信息匱乏、監(jiān)管效率低下等問題，結(jié)合網(wǎng)絡(luò)輿情信息發(fā)布與獲取的特點，引入了信息抽取和行政監(jiān)管并存的理念，構(gòu)建了基于B/S架構(gòu)的養(yǎng)殖投入品質(zhì)量的信息發(fā)布與輿情監(jiān)管系統(tǒng)。采用主題爬蟲算法作為抓取網(wǎng)絡(luò)輿情的信息關(guān)鍵步驟，避免下載大量與主題不相關(guān)的網(wǎng)頁，提高了信息抓取的效率和準(zhǔn)確率。并利用向量空間模型對主題爬蟲算法中的內(nèi)容相似度進行計算與評價，提高了該算法爬行的準(zhǔn)確性，并在實際系統(tǒng)中得到了驗證。同時該系統(tǒng)還提供了用戶信息管理、質(zhì)量安全信息管理、養(yǎng)殖投入品供求信息管理等功能。系統(tǒng)測試和應(yīng)用結(jié)果表明，該系統(tǒng)具有功能豐富、運行穩(wěn)定、信息抓取準(zhǔn)確、可擴展性強等優(yōu)點，能較好地滿足不同角色對養(yǎng)殖投入品質(zhì)量信息的需求。

關(guān)鍵詞：養(yǎng)殖投入品；主題爬蟲；質(zhì)量信息；輿情監(jiān)管；向量空間模型；B/S

中圖分類號： S126文獻標(biāo)志碼： A文章編號：1002-1302（2017）08-0210-05

目前，針對當(dāng)前養(yǎng)殖投入品市場上制假售假行為仍有不同程度存在，哄抬物價、坑農(nóng)害農(nóng)時有發(fā)生，養(yǎng)殖投入品經(jīng)營監(jiān)管網(wǎng)絡(luò)力量薄弱，導(dǎo)致嚴(yán)重影響農(nóng)產(chǎn)品質(zhì)量和社會穩(wěn)定[1-4]。同時我國養(yǎng)殖投入品質(zhì)量的信息存在需求不足、供給乏力、信息失真、分布不均衡等問題，這些問題給生產(chǎn)者、消費者和管理者都帶來信息不對稱，造成各種逆向選擇和道德風(fēng)險。雖然我國對養(yǎng)殖投入品質(zhì)量的安全尤為重視，并提出了采用電子監(jiān)管來保障該投入品的安全要求，但是現(xiàn)實中仍然存在許多養(yǎng)殖投入品質(zhì)量的安全問題，比如養(yǎng)殖投入品制假造假行為、不法分子銷售劣質(zhì)養(yǎng)殖投入品欺騙農(nóng)戶、農(nóng)戶對養(yǎng)殖投入品質(zhì)量的安全信息掌握不足、政府執(zhí)法監(jiān)督效率低下、網(wǎng)民問政信息不通暢等現(xiàn)象[5-7]。信息科技高速發(fā)展的今天，我們應(yīng)該充分利用網(wǎng)絡(luò)技術(shù)優(yōu)勢，把互聯(lián)網(wǎng)技術(shù)應(yīng)用到養(yǎng)殖投入品質(zhì)量的安全與監(jiān)管中去，為農(nóng)業(yè)信息化增添活力，為農(nóng)產(chǎn)品質(zhì)量的安全保駕護航[8-11]。

因此，通過構(gòu)建養(yǎng)殖投入品質(zhì)量的信息發(fā)布與輿情監(jiān)管系統(tǒng)，從根本上保護農(nóng)戶利益，并為合格養(yǎng)殖投入品的企業(yè)提供供求平臺，保障養(yǎng)殖產(chǎn)品質(zhì)量安全、廣大人民群眾的身體健康和生命安全，提升我國養(yǎng)殖產(chǎn)品質(zhì)量安全水平，增強我國養(yǎng)殖業(yè)整體實力和養(yǎng)殖產(chǎn)品國際競爭力。

1系統(tǒng)需求分析

養(yǎng)殖投入品質(zhì)量的信息網(wǎng)絡(luò)發(fā)布與執(zhí)法監(jiān)管力量在網(wǎng)絡(luò)執(zhí)行，充分運用信息技術(shù)并將其融入食品安全信息化監(jiān)控當(dāng)中。以供求平臺為中心，信息共享為基礎(chǔ)，執(zhí)法力量常駐為政治支持，網(wǎng)絡(luò)輿情信息為信息后盾，就是養(yǎng)殖投入品質(zhì)量的信息發(fā)布與監(jiān)管系統(tǒng)最大的目標(biāo)需求。

1.1用戶分析及角色定義

養(yǎng)殖投入品質(zhì)量的信息發(fā)布與輿情監(jiān)管系統(tǒng)的用戶有系統(tǒng)管理員，養(yǎng)殖農(nóng)戶，養(yǎng)殖投入品商戶，質(zhì)檢、工商、衛(wèi)生等國家相關(guān)部門工作人員，共4種用戶。

系統(tǒng)管理員要求計算機專業(yè)技術(shù)過硬，需要具備本系統(tǒng)故障維護能力。養(yǎng)殖戶和養(yǎng)殖投入品商戶以及國家相關(guān)部門工作人員需要通過實名認證才可以使用本系統(tǒng)對應(yīng)功能模塊。同時要求他們熟悉本系統(tǒng)提供的信息處理操作。具體角色分析定義如下。

1.1.1養(yǎng)殖戶養(yǎng)殖戶是指在這個監(jiān)管系統(tǒng)中通過客戶端提交申請信息并通過合格驗證的養(yǎng)殖戶，這個角色主要使用本系統(tǒng)提供的養(yǎng)殖投入品供求平臺購買滿意產(chǎn)品，并通過反饋意見和打分來繼續(xù)鞏固維護質(zhì)量信息監(jiān)管體系。

1.1.2養(yǎng)殖投入品供貨商養(yǎng)殖投入品供貨商是指在這個監(jiān)管系統(tǒng)中通過客戶端提交申請信息并通過合格驗證的商戶，這個角色主要使用本系統(tǒng)提供的養(yǎng)殖投入品供求平臺出售合格養(yǎng)殖投入品，并通過監(jiān)管平臺相關(guān)的網(wǎng)絡(luò)輿情分析，主動自我產(chǎn)品監(jiān)督與完善，共同維護養(yǎng)殖投入品市場的公平與誠信。

1.1.3執(zhí)法人員質(zhì)監(jiān)、工商、衛(wèi)生等國家相關(guān)部門的工作人員向系統(tǒng)管理員提出申請，得到認證許可后，可以在相應(yīng)模塊發(fā)布與養(yǎng)殖投入品質(zhì)量信息相關(guān)的新聞公告，審核產(chǎn)品。利用系統(tǒng)的用戶意見反饋、舉報信息，整治規(guī)范養(yǎng)殖投入品市場。

1.1.4管理員管理員是指在這個監(jiān)管系統(tǒng)中權(quán)限最高的角色，它主要參與系統(tǒng)故障維護，具有審核其他任何類型用戶申請資料權(quán)限，同時負責(zé)質(zhì)量安全信息發(fā)布。

1.2系統(tǒng)功能需求分析

根據(jù)上述功能需求分析，系統(tǒng)按功能劃分為以下八大模塊（圖1）。包括用戶管理、供應(yīng)產(chǎn)品信息管理、求購產(chǎn)品信息管理、執(zhí)法公告管理、信息抓取管理、評論信息管理、注冊登錄管理、個人信息管理。

1.2.1用戶管理功能系統(tǒng)管理員權(quán)限。管理員可以在系統(tǒng)中根據(jù)情況添加、刪除用戶，并為用戶分配權(quán)限和添加角色。

1.2.2供應(yīng)產(chǎn)品信息管理功能養(yǎng)殖投入品供貨商權(quán)限。提供對供應(yīng)產(chǎn)品基本信息添加、修改、刪除的功能。企業(yè)商戶可在系統(tǒng)中錄入供應(yīng)的養(yǎng)殖投入品的基本信息，提交到系統(tǒng)數(shù)據(jù)庫等待執(zhí)法管理員審核。

1.2.3求購信息管理功能養(yǎng)殖農(nóng)戶權(quán)限。提供對求購產(chǎn)品基本信息添加、修改、刪除的功能。養(yǎng)殖農(nóng)戶可在系統(tǒng)中錄入求購養(yǎng)殖投入品的基本信息，提交到系統(tǒng)數(shù)據(jù)庫等待執(zhí)法管理員審核。

1.2.4執(zhí)法公告管理執(zhí)法人員權(quán)限。提供對養(yǎng)殖投入品市場整頓信息、相關(guān)政策法規(guī)等信息的錄入、刪除、修改功能。

1.2.5信息抓取管理系統(tǒng)管理員的權(quán)限，系統(tǒng)管理員可以手工添加網(wǎng)絡(luò)輿情信息，也可以借助第3方爬蟲或搜索引擎接口智能獲取相關(guān)網(wǎng)頁URL地址，供用戶瀏覽。

1.2.6評論管理功能提供對供求平臺信息評論打分功能，以及相關(guān)管理員對用戶所評論打分信息管理的功能。用戶登錄后可以對供求平臺對應(yīng)感興趣的信息發(fā)表評論并打分，同時相關(guān)管理員可以管理、利用評論信息，標(biāo)志近期熱門供求信息，對供求信息進行調(diào)整管理。

1.2.7注冊登錄功能用戶注冊審核通過后，才可以使用后臺信息管理平臺。

1.2.8個人信息管理功能主要提供用戶自主修改基本信息的功能，如常用的密碼修改功能。

1.3系統(tǒng)業(yè)務(wù)流程

系統(tǒng)從養(yǎng)殖投入品供貨商錄入供應(yīng)產(chǎn)品信息開始，由執(zhí)法員審核通過后發(fā)布供應(yīng)信息，完成監(jiān)管平臺的第一次質(zhì)檢監(jiān)督。然后養(yǎng)殖農(nóng)戶在供求平臺查找符合自己需求的養(yǎng)殖投入品：如果沒有符合條件的，則錄入自己需要的養(yǎng)殖投入品信息，系統(tǒng)管理員審核通過后發(fā)布求購信息，完成監(jiān)管平臺的第2次監(jiān)管。如果有符合條件的供給產(chǎn)品，則與供貨商站內(nèi)聯(lián)系，同時可以對產(chǎn)品進行評論打分。隨后系統(tǒng)管理員、執(zhí)法員根據(jù)評論信息對供求平臺信息進行整理，標(biāo)志熱門信息，同時發(fā)布網(wǎng)絡(luò)輿情信息、執(zhí)法公告，完成監(jiān)管平臺的第3次質(zhì)檢監(jiān)督。具體流程見圖2。

2系統(tǒng)設(shè)計

2.1系統(tǒng)框架設(shè)計

由于系統(tǒng)面向的群體主要為廣大養(yǎng)殖農(nóng)戶和各地方的養(yǎng)殖投入品供貨商，系統(tǒng)采用B/S體系結(jié)構(gòu)、C2C模式、基于Web的方式進行設(shè)計開發(fā)。這樣不僅可以方便系統(tǒng)用戶在不同地方進行投入品質(zhì)量安全信息查詢，為相關(guān)政府部門提供與網(wǎng)民互動平臺，而且方便各地養(yǎng)殖農(nóng)戶與供貨商利用本系統(tǒng)提供的供求平臺，發(fā)布養(yǎng)殖投入品的供求信息。

系統(tǒng)利用數(shù)據(jù)庫技術(shù)、網(wǎng)絡(luò)技術(shù)，通過構(gòu)建統(tǒng)一的供求平臺和質(zhì)量信息監(jiān)管體系結(jié)構(gòu)，充分發(fā)揮政府相關(guān)職能部門的公信力與職責(zé)，協(xié)調(diào)整頓養(yǎng)殖投入品互聯(lián)網(wǎng)市場，保障養(yǎng)殖農(nóng)戶的利益，為養(yǎng)殖投入品的供貨商提供供應(yīng)信息的發(fā)布平臺。監(jiān)管平臺擁有執(zhí)法人員入駐的優(yōu)勢，以及網(wǎng)絡(luò)輿情信息的提供，大大提高了本系統(tǒng)供求平臺的公信力，而且改進了關(guān)于互聯(lián)網(wǎng)質(zhì)量信息監(jiān)督管理模式，推進了政府產(chǎn)品質(zhì)量安全工作的展開。一旦網(wǎng)絡(luò)輿情發(fā)現(xiàn)相關(guān)產(chǎn)品質(zhì)量出現(xiàn)問題，通過監(jiān)管體系，可立即在系統(tǒng)發(fā)布并提醒系統(tǒng)用戶。綜上所述，建立系統(tǒng)基本框架見圖3。

2.2系統(tǒng)功能架構(gòu)設(shè)計

本系統(tǒng)采用模塊化設(shè)計，一方面保證每個模塊的完整性和獨立性，另一方面便于對系統(tǒng)靈活地擴展和維護。在功能需求方面實現(xiàn)養(yǎng)殖投入品質(zhì)量信息采集、信息分析、用戶信息反饋提取、行政執(zhí)法監(jiān)管。系統(tǒng)由用戶信息管理子系統(tǒng)、質(zhì)量安全信息管理子系統(tǒng)、養(yǎng)殖投入品供求信息管理子系統(tǒng)、網(wǎng)絡(luò)輿情信息抽取子系統(tǒng)，共4個子系統(tǒng)組成，系統(tǒng)功能構(gòu)架見圖4。

用戶信息管理子系統(tǒng)主要提供系統(tǒng)各類用戶管理個人基本信息的功能，尤其是系統(tǒng)管理員利用該子系統(tǒng)進行用戶信息審核及授權(quán)管理的功能。質(zhì)量安全信息管理子系統(tǒng)為行政執(zhí)法員提供相關(guān)政策法規(guī)、市場規(guī)范整頓信息發(fā)布和管理的功能，同時網(wǎng)絡(luò)輿情信息發(fā)布也需要該子系統(tǒng)提供支持。養(yǎng)殖投入品供求信息管理子系統(tǒng)主要是為養(yǎng)殖農(nóng)戶和供貨商提供交易信息平臺，同時該子系統(tǒng)的監(jiān)督管理權(quán)限由行政執(zhí)法員支配。網(wǎng)絡(luò)輿情信息抽取子系統(tǒng)主要實現(xiàn)從互聯(lián)網(wǎng)抽取相關(guān)信息，并進行篩選后存入質(zhì)量安全信息系統(tǒng)。

3網(wǎng)絡(luò)輿情抓取的關(guān)鍵算法

3.1網(wǎng)絡(luò)輿情的抓取

網(wǎng)絡(luò)已經(jīng)成為公眾輿情表達最為重要的傳播平臺，其影響已遠遠超出傳統(tǒng)主流媒體的影響。網(wǎng)絡(luò)輿情是民眾情緒、意見、態(tài)度、意愿等的綜合，而開放的信息發(fā)布平臺，使網(wǎng)絡(luò)輿情可以通過不同的途徑表現(xiàn)出來，如網(wǎng)絡(luò)新聞、新聞跟帖、社交空間、博客微信等，其傳播影響深遠。網(wǎng)絡(luò)輿情的抓取，是指借助成熟的搜索引擎或普通網(wǎng)絡(luò)爬蟲程序定點定時在互聯(lián)網(wǎng)中抽取目標(biāo)信息。所以，本監(jiān)管平臺將憑借網(wǎng)絡(luò)爬蟲的信息抽取能力，主動獲取養(yǎng)殖投入品質(zhì)量信息，擴大監(jiān)管信息庫，完善信息發(fā)布平臺功能。

網(wǎng)絡(luò)爬蟲分為通用爬蟲和主題爬蟲2種。通用爬蟲都是基于傳統(tǒng)的圖算法作為工作原理，從種子鏈接開始，利用廣度或深度優(yōu)先算法抓取互聯(lián)網(wǎng)信息，這種爬蟲的目標(biāo)是覆蓋整個Web網(wǎng)絡(luò)，不考慮網(wǎng)頁與主題的相關(guān)度。而主題爬蟲的目標(biāo)就是要盡可能多地采集與主題相關(guān)的頁面，盡可能少地采集無關(guān)頁面，這是主題搜索引擎的關(guān)鍵性問題。由于主題爬蟲只下載少量的主題相關(guān)的網(wǎng)頁，不會花費大量的時間遍歷整個Web網(wǎng)絡(luò)海洋，提高了爬行效率和抓取的準(zhǔn)確率。通過分析通用爬蟲和主題爬蟲的技術(shù)特性，同時結(jié)合養(yǎng)殖投入品的質(zhì)量信息特點，該平臺將選擇主題爬蟲算法作為網(wǎng)絡(luò)輿情抓取的關(guān)鍵算法。

3.2基于主題爬蟲算法的網(wǎng)絡(luò)輿情信息抓取流程

網(wǎng)絡(luò)輿情信息抓取的核心就是主題爬蟲算法，執(zhí)行主題爬蟲算法抓取養(yǎng)殖投入品質(zhì)量輿情信息的流程見圖5。首先將種子URL初始化，根據(jù)一定的網(wǎng)頁分析算法過濾與主題無關(guān)的鏈接，抓取與預(yù)先設(shè)定的主題相關(guān)性較高的Web頁面，同時將抓取到的頁面鏈接保存到待抓取的URL隊列中。然后提取相應(yīng)的URL到處理隊列中，之后提取所要處理的網(wǎng)頁文本信息，方便下一步計算。通過特定模型，計算網(wǎng)頁內(nèi)容、子鏈接、錨文本等與主題的相關(guān)性。從而確保主題網(wǎng)頁抓取系統(tǒng)在程序執(zhí)行時盡可能多地抓取、采集與特定主題相關(guān)度較高的網(wǎng)頁，同時最大限度地過濾掉與主題無關(guān)的網(wǎng)頁[12-15]。重復(fù)上述過程，直到系統(tǒng)的停止條件得到滿足時才停止對主題網(wǎng)頁的抓取。所有被爬蟲抓取的網(wǎng)頁將會被系統(tǒng)存起來，進行一定的分析、過濾，并建立索引，以方便之后的查詢和檢索[16]。

在主題爬蟲算法的網(wǎng)絡(luò)輿情信息抓取過程中，頁面分析及相似度計算是信息抓取的關(guān)鍵與核心步驟，該步驟通過特定的爬蟲算法判定抓取的網(wǎng)頁是否與給定的主題相關(guān)，直接決定了主題爬蟲抓取頁面的準(zhǔn)確率[17]。

3.3基于向量空間模型的內(nèi)容相似度計算評價

針對頁面內(nèi)容質(zhì)量，一般是以內(nèi)容相似度作為評價標(biāo)準(zhǔn)，若內(nèi)容與主題內(nèi)容相似度大于某個閾值，就將該頁面保存起來，若內(nèi)容與主題內(nèi)容相似度小于該閾值，將其視為不相關(guān)頁面并丟棄。對于內(nèi)容相似度計算與評價較為常用的是向量空間模型，該模型計算簡單、正確率較高，從而得到廣泛應(yīng)用。向量空間模型基于這樣一個關(guān)鍵假設(shè)，即組成文章的詞條所出現(xiàn)的順序是無關(guān)緊要的，它們對于文章的主題所起的作用是相互獨立的，因此，可以把文檔看作一系列無序詞條的集合。該算法的基本思想就是用2個向量之間的某種距離來表示它們之間的相似度，頁面內(nèi)容相似度可以用夾角余弦值進行計算[18-21]：

4系統(tǒng)實現(xiàn)與應(yīng)用

根據(jù)系統(tǒng)設(shè)計，利用PHP語言完成系統(tǒng)開發(fā)、MySQL數(shù)據(jù)庫完成后臺數(shù)據(jù)管理和Apache作為系統(tǒng)存放平臺部署在浪潮服務(wù)器上運行。登錄系統(tǒng)可以進入系統(tǒng)首頁（圖6），通過不同角色登錄系統(tǒng)，進行相關(guān)模塊驗證，經(jīng)過測試運行，表明該系統(tǒng)已實現(xiàn)前臺展示、登錄注冊控制、用戶信息管理、公告信息管理、信息抓取管理、供求平臺管理、評論模塊管理七大模塊。

重點對輿情信息抓取模塊進行測試驗證，抓取信息列表展示見圖7，在抓取信息時已經(jīng)去除推廣鏈接，滿足系統(tǒng)用戶搜索自己感興趣的信息主題。信息抓取模塊的功能實現(xiàn)，解

決了信息資源不足、網(wǎng)絡(luò)輿情收集難等問題。

在測試后，該系統(tǒng)進行了實際運行應(yīng)用，各項功能都得到了有效實際驗證，且運行穩(wěn)定，使養(yǎng)殖戶和養(yǎng)殖投入品供應(yīng)商能夠方便有效地獲取養(yǎng)殖投入品的質(zhì)量信息，為執(zhí)法人員提供了靈活有效的監(jiān)管手段。

5結(jié)論

本研究結(jié)合養(yǎng)殖投入品質(zhì)量信息的特點，基于B/S的3層體系結(jié)構(gòu)系統(tǒng)架構(gòu)，采用模塊化設(shè)計方法，設(shè)計開發(fā)了基于主題爬蟲算法的養(yǎng)殖投入品質(zhì)量的信息發(fā)布與監(jiān)管系統(tǒng)。系統(tǒng)由用戶信息管理子系統(tǒng)、質(zhì)量安全信息管理子系統(tǒng)、養(yǎng)殖投入品供求信息管理子系統(tǒng)和網(wǎng)絡(luò)輿情信息抽取子系統(tǒng)4部分組成，設(shè)計中各部分相對獨立，具有較高的可擴展性、可維護性和應(yīng)用性。

采用主題爬蟲算法作為抓取網(wǎng)絡(luò)輿情的信息關(guān)鍵步驟，該算法執(zhí)行時只下載少量與主題高度相關(guān)的網(wǎng)頁，提高了爬行效率和抓取的準(zhǔn)確率。同時引入向量空間模型對主題爬蟲算法中的內(nèi)容相似度進行計算與評價，該模型計算簡單、正確率較高，并在實際系統(tǒng)中得到了驗證。

該系統(tǒng)為養(yǎng)殖戶、企業(yè)商家提供了豐富的網(wǎng)絡(luò)在線功能，實現(xiàn)了網(wǎng)絡(luò)輿情共享、輿情主動獲取、網(wǎng)絡(luò)執(zhí)政、網(wǎng)絡(luò)問政的有效整合和質(zhì)量信息過程控制，解決了養(yǎng)殖投入品質(zhì)量的信息資源不足、數(shù)據(jù)分散、信息共享率低下等問題。

參考文獻：

[1]唐承明，陳文，黎書長，等. 廣西養(yǎng)殖投入品與畜產(chǎn)品的質(zhì)量現(xiàn)狀分析[J]. 南方農(nóng)業(yè)學(xué)報，2014，45（11）：2093-2097.

[2]李隆春. 臨澤縣畜牧業(yè)養(yǎng)殖投入品使用現(xiàn)狀調(diào)查[J]. 畜牧獸醫(yī)雜志，2015，34（2）：90-91.

[3]羅承金. 確保養(yǎng)殖投入品質(zhì)量安全的對策[J]. 四川畜牧獸醫(yī)，2011（12）：12-13.

[4]張祥國. 加強對養(yǎng)殖投入品的監(jiān)管確保水產(chǎn)品質(zhì)量安全[J]. 今日科苑，2014（5）：114.

[5]隆瑞賢. 武鳴縣動物養(yǎng)殖投入品經(jīng)營和使用環(huán)節(jié)安全監(jiān)管存在的問題及建議[J]. 廣西畜牧獸醫(yī)，2014，30（6）：320-321.

[6]季坤嶺，陳新華，董燕萍，等. 健康的養(yǎng)殖業(yè)來源于健康的環(huán)境與投入品[J]. 中國動物保健，2007（7）：31-33.

[7]柏凡. 加強投入品管理保障無公害畜產(chǎn)品質(zhì)量[J]. 中國畜牧業(yè)，2014（18）：29-31.

[8]馬明遠，秦向陽，李瑾. 農(nóng)產(chǎn)品質(zhì)量安全信息化技術(shù)進展及應(yīng)用前景[J]. 中國農(nóng)學(xué)通報，2009，25（2）：258-262.

[9]成維莉，徐冬寅，程濤. 基于追溯的農(nóng)產(chǎn)品質(zhì)量安全監(jiān)管平臺設(shè)計與實現(xiàn)[J]. 農(nóng)機化研究，2015（5）：113-117.

[10]楊斌，陳平，董朝. 動態(tài)信息發(fā)布平臺的設(shè)計和實現(xiàn)[J]. 計算機工程，2005，31（6）：225-227.

[11]龔建疆，楊沙，范堯. 產(chǎn)品質(zhì)量監(jiān)管平臺的設(shè)計[J]. 現(xiàn)代企業(yè)文化，2010（27）：121-122.

[12]謝治軍. 垂直搜索引擎的主題網(wǎng)頁抓取策略研究[D]. 重慶：重慶理工大學(xué)，2012：17-18.

[13]李勇，韓亮. 主題搜索引擎中網(wǎng)絡(luò)爬蟲的搜索策略研究[J]. 計算機工程與科學(xué)，2008，30（3）：4-6.

[14]Dong H，Hussain F K. Self-Adaptive semantic focused crawler for mining services information discovery[J]. IEEE Transactions on Industrial Informatics，2014，10（2）：1616-1626.

[15]Ahmadi-Abkenari F，Selamat A. An architecture for a focused trend parallel Web crawler with the application of clickstrearn analysis[J]. Information Sciences，2012，184（1）：266-281.

[16]王魯榮. 基于主題網(wǎng)絡(luò)爬蟲的高校網(wǎng)絡(luò)信息動態(tài)搜索策略研究[J]. 四川師范大學(xué)學(xué)報（自然科學(xué)版），2011，34（6）：919-921.

[17]張環(huán). 垂直搜索引擎中主題網(wǎng)絡(luò)爬蟲算法研究[D]. 濟南：山東師范大學(xué)，2015：12-13.

[18]史寶明，賀元香，吳崇正. 主題搜索引擎中爬蟲搜索策略的研究[J]. 計算機工程與應(yīng)用，2014，50（2）：116-119.

[19]徐明子，呂立，李喜旺. 改進空間向量模型主題網(wǎng)絡(luò)爬蟲系統(tǒng)[J]. 計算機系統(tǒng)應(yīng)用，2013，22（7）：36-39.

[20]Du Y，Liu W，Lv X，et al. An improved focused crawler based on semantic similarity vector space model[J]. Applied Soft Computing，2015，36：392-407.

[21]Kim D. Group-theoretical vector space model[J]. International Journal of Computer Mathematics，2015，92（8）：1536-1550.

[22]賀晟. 搜索引擎中主題網(wǎng)絡(luò)爬蟲的研究與設(shè)計[D]. 合肥：安徽大學(xué)，2010：15-16.

[23]李連，朱愛紅，蘇濤. 一種改進的基于向量空間文本相似度算法的研究與實現(xiàn)[J]. 計算機應(yīng)用與軟件，2012，29（2）：282-284.

[24]Hong T P，Lin C W，Yang K T，et al. Using TF-IDF to hide sensitive item sets[J]. Applied Intelligence，2013，38（4）：502-510.

[25]魏晶晶，楊定達，廖祥文. 基于網(wǎng)頁內(nèi)容相似度改進算法的主題網(wǎng)絡(luò)爬蟲[J]. 計算機與現(xiàn)代化，2011（9）：1-4.