城市規(guī)劃和國土資源管理專業(yè)檔案數(shù)據(jù)庫整合研究

摘要：在對北京市城市規(guī)劃和國土資源管理專業(yè)檔案管理現(xiàn)狀和數(shù)據(jù)庫管理系統(tǒng)進行詳細分析的基礎上，論文選擇Elasticsearch搜索引擎技術建立檢索平臺來實現(xiàn)這兩種專業(yè)檔案異構數(shù)據(jù)庫的整合，使專業(yè)檔案數(shù)據(jù)能夠被統(tǒng)一檢索和集中展現(xiàn)，從而為用戶提供一站式集成的檔案信息服務。

關鍵詞：專業(yè)檔案 異構數(shù)據(jù)庫 檢索

城市規(guī)劃和國土資源管理專業(yè)檔案是城市規(guī)劃部門、國土資源管理部門在各項業(yè)務活動中形成的，作為歷史記錄保存起來以備查考的資料。近年來，該類檔案的管理隨著檔案標準建設、檔案信息化建設的發(fā)展取得了一定的成就，但也存在一些問題。例如，在很長一段時間內(nèi)，國內(nèi)大部分地區(qū)城市規(guī)劃和國土資源管理專業(yè)檔案的管理隸屬不同的機構，制度建設和信息化建設缺乏統(tǒng)一規(guī)劃，專業(yè)檔案信息資源共享利用困難。新一輪機構改革后，城市規(guī)劃和國土資源管理機構進行合并，并將相關的業(yè)務和資源進行整合，而現(xiàn)有的專業(yè)檔案管理方式顯然不能滿足城市規(guī)劃和國土資源管理工作對專業(yè)檔案數(shù)據(jù)利用的更高要求。為了使專業(yè)檔案數(shù)據(jù)信息資源增值并提高服務效率，對已有的城市規(guī)劃和國土資源管理專業(yè)檔案數(shù)據(jù)進行整合是十分必要的。

下面將以機構改革后的北京市規(guī)劃和自然資源委員會城市規(guī)劃和國土資源管理專業(yè)檔案數(shù)據(jù)庫整合為例，探索專業(yè)檔案數(shù)據(jù)資源整合的方法和技術，以期為新形勢下城市規(guī)劃和國土資源管理專業(yè)檔案管理提供借鑒。

一、北京市城市規(guī)劃和國土資源管理專業(yè)檔案數(shù)據(jù)管理現(xiàn)狀

北京市規(guī)劃和自然資源委員會機構整合后，原城市規(guī)劃和國土資源管理專業(yè)檔案的管理職責統(tǒng)一由北京市城市建設檔案館（以下簡稱“北京市城建檔案館”）承擔。目前，北京市規(guī)劃和自然資源委員會主要業(yè)務檔案體系中并行存在著兩個專業(yè)檔案體系，即原北京市規(guī)劃委員會所屬的城市規(guī)劃管理專業(yè)檔案體系和原北京市國土局所屬的國土資源管理專業(yè)檔案體系。在本文中，城市規(guī)劃管理專業(yè)檔案主要包括建設用地規(guī)劃許可、建設工程規(guī)劃許可、規(guī)劃審批過程材料、建設工程規(guī)劃核驗意見和資質(zhì)審批、招投標審批管理等類別的檔案；國土資源管理專業(yè)檔案主要包括土地利用規(guī)劃、建設用地、土地市場、土地監(jiān)察、礦業(yè)權、耕地保護、資源調(diào)查等類別的檔案。

對于城市規(guī)劃管理專業(yè)檔案，目前采用市區(qū)兩級管理方式，即北京市城建檔案館接收、管理委機關和部分委屬單位產(chǎn)生的檔案，各區(qū)分局城建檔案機構接收、管理各區(qū)分局產(chǎn)生的檔案，且北京市城建檔案館和各區(qū)分局城建檔案機構負責對各自接收的專業(yè)檔案進行整理編目和數(shù)字化加工處理等工作。城市規(guī)劃管理專業(yè)檔案數(shù)據(jù)資源通過北京市城建檔案管理信息系統(tǒng)進行管理。該系統(tǒng)分為市館版和區(qū)級版，兩版采用的數(shù)據(jù)標準和系統(tǒng)架構完全一致，分別被部署在北京市城建檔案館和各區(qū)分局檔案機構的內(nèi)部局域網(wǎng)機房，同互聯(lián)網(wǎng)物理隔離。國土資源管理專業(yè)檔案市區(qū)兩級的管理方式同前所述。國土數(shù)字檔案館系統(tǒng)對所有相關數(shù)據(jù)資源進行統(tǒng)一管理，包括數(shù)字化加工、存儲及網(wǎng)絡化利用。該系統(tǒng)于2014年建成，被部署在北京市政務外網(wǎng)上。北京市城建檔案管理信息系統(tǒng)使用的操作系統(tǒng)為Win？ dows Server 2012 Standard，數(shù)據(jù)庫管理軟件為SQL Server 2012；國土數(shù)字檔案館系統(tǒng)使用的操作系統(tǒng)為Windows Server 2008/2012 Standard，數(shù)據(jù)庫管理軟件為SQL Server 2008。

綜上，北京市城市規(guī)劃和國土資源管理專業(yè)檔案分別采用不同的數(shù)據(jù)庫系統(tǒng)和應用平臺進行管理。其中，兩個應用平臺由不同的軟件開發(fā)商開發(fā)，采用不同的專業(yè)檔案數(shù)據(jù)標準規(guī)范和技術管理體系。用戶利用這兩類專業(yè)檔案時需登錄各自所屬的系統(tǒng)，因此查詢同一事項關聯(lián)的城市規(guī)劃和國土資源管理專業(yè)檔案時，相關結果不能集中展現(xiàn)，利用專業(yè)檔案費時費力。此外，因管理城市規(guī)劃專業(yè)檔案數(shù)據(jù)的市區(qū)兩級北京市城建檔案管理信息系統(tǒng)都被部署在各自的局域網(wǎng)環(huán)境中，與政務外網(wǎng)上的業(yè)務系統(tǒng)物理隔離，所以各系統(tǒng)之間的數(shù)據(jù)共享存在障礙，數(shù)據(jù)交互只能通過線下人工方式進行；管理國土資源管理專業(yè)檔案數(shù)據(jù)的國土數(shù)字檔案館系統(tǒng)則因建設時間較早，系統(tǒng)兼容性差，專業(yè)檔案數(shù)據(jù)查詢利用量大時存在使用瓶頸，影響用戶體驗。

二、北京市城市規(guī)劃和國土資源管理專業(yè)檔案數(shù)據(jù)庫整合研究

“數(shù)字檔案資源整合是對現(xiàn)有檔案數(shù)字資源進行重組，依據(jù)一定的需要，對各個相對獨立的信息系統(tǒng)中的檔案數(shù)字資源、功能結構及其互動關系進行融合、類聚和重組，重新結合為一個新的有機整體，形成一個效能更好、效率更高的新的資源系統(tǒng)”。[1]檔案數(shù)據(jù)庫整合強調(diào)在充分利用現(xiàn)有資源配置的條件下，對分散的、不統(tǒng)一的檔案數(shù)字資源庫基于一定的機制進行優(yōu)化和多資源的無縫鏈接，最終實現(xiàn)檔案數(shù)字資源的合理管理、高效服務及檔案本身價值的增值。[2]

基于此，如何實現(xiàn)前面提到的兩個異構專業(yè)檔案數(shù)據(jù)庫的整合，從而為用戶提供一步到位的城市規(guī)劃和國土資源管理專業(yè)檔案信息服務是本文需要研究的關鍵。

通過研究發(fā)現(xiàn)，對不同數(shù)據(jù)庫進行檢索并提供統(tǒng)一的操作界面是異構數(shù)據(jù)庫整合研究的一個重要方向。檢索包括兩個核心過程，首先按檢索關鍵詞查找并生成結果集，其次對查找結果進行進一步選擇處理，生成檢索結果。

元搜索引擎技術是一項高效的檢索技術，具有全局控制機制的特點。被應用于數(shù)據(jù)庫整合時，它并不對數(shù)據(jù)庫中的信息進行搜索，而是對控制范圍內(nèi)的搜索引擎進行集成，是在子搜索引擎基礎上發(fā)展起來的、為用戶提供統(tǒng)一檢索入口的異構數(shù)據(jù)庫整合方式。相對于傳統(tǒng)的檔案搜索引擎，元搜索引擎能夠提供跨庫檢索功能，進而實現(xiàn)對各種檔案異構數(shù)據(jù)庫資源的互操作，用戶無須逐個登錄檔案數(shù)據(jù)庫檢索界面進行訪問。[3]

對不同數(shù)據(jù)庫進行檢索還有一個關鍵，即要保證檔案數(shù)據(jù)資源和數(shù)據(jù)庫功能在不受破壞的基礎上實現(xiàn)數(shù)據(jù)的集成管理。網(wǎng)格技術具有此功能，可以將地理位置上分散的、異構的信息資源集成在一起，是一種集計算、存儲和服務為一體的異構數(shù)據(jù)庫整合技術，能實現(xiàn)對異構數(shù)據(jù)庫信息資源的透明訪問。網(wǎng)格將散落在各地的檔案異構數(shù)據(jù)庫信息資源整合進數(shù)據(jù)庫網(wǎng)格，然后將數(shù)據(jù)庫網(wǎng)格中存放的檔案數(shù)據(jù)庫檢索界面進行整合，將各個檔案異構數(shù)據(jù)庫中的檔案管理業(yè)務流程進行集成，并使其在不同的應用網(wǎng)格上運行，從而為用戶提供一體化的檔案信息服務平臺。[4]

Elasticsearch搜索引擎技術集成了元搜索引擎技術、網(wǎng)格技術等異構檔案數(shù)據(jù)庫整合技術的優(yōu)點，[5]能夠達到穩(wěn)定、可靠、快速的實時搜索和呈現(xiàn)。首先，Elasticsearch搜索引擎技術支持分布式存儲，其搜索功能建立在海量數(shù)據(jù)之上，本身可以作為海量數(shù)據(jù)的存儲工具。在本研究中，可將城市規(guī)劃和國土資源管理專業(yè)檔案等異構數(shù)據(jù)同步到Elasticsearch里存儲。其次，使用該技術搜索時采取倒排方式，異構數(shù)據(jù)庫中的每個字段都可以被用于搜索，然后根據(jù)字段出現(xiàn)的頻次信息對檔案信息進行排序，使相關性越高的搜索結果排序越靠前。另外，該技術還提供了包括模糊查詢、前綴查詢、通配符查詢等在內(nèi)的多種查詢手段，幫助用戶快速高效地進行檢索。與此同時，該技術還提供大數(shù)據(jù)量分析能力，支持在海量數(shù)據(jù)的基礎上進行數(shù)據(jù)的分析和處理，為用戶提供最相關、最可靠的檢索結果。

三、基于Elasticsearch搜索引擎技術的專業(yè)檔案數(shù)據(jù)庫整合實現(xiàn)

通過對北京市城市規(guī)劃和國土資源管理專業(yè)檔案數(shù)據(jù)管理現(xiàn)狀與專業(yè)檔案數(shù)據(jù)庫整合方法進行分析，本文提出了以下整合方案，并采用Elasticsearch搜索引擎技術建立統(tǒng)一的檢索平臺，以實現(xiàn)城市規(guī)劃和國土資源管理專業(yè)檔案數(shù)據(jù)庫的整合。

（一）城市規(guī)劃和國土資源管理專業(yè)檔案數(shù)據(jù)庫整合方案

根據(jù)前期調(diào)研的北京市規(guī)劃和自然資源委員會業(yè)務整合現(xiàn)狀、城市規(guī)劃和國土資源管理專業(yè)檔案市區(qū)兩級管理現(xiàn)狀，為最大限度地利用已有的專業(yè)檔案數(shù)據(jù)資源和軟硬件設備，并提供最便捷的專業(yè)檔案信息服務，本文確定了物理整合和邏輯整合相結合的專業(yè)檔案數(shù)據(jù)庫整合方案。

1.將市區(qū)兩級城市規(guī)劃和國土資源管理專業(yè)檔案資源進行集成管理和分布式存儲。首先使用統(tǒng)一的數(shù)據(jù)標準建庫和補全專業(yè)檔案數(shù)據(jù)。對于城市規(guī)劃專業(yè)檔案，由北京市城建檔案館建立委機關專業(yè)檔案數(shù)據(jù)庫，各區(qū)分局建立自己的專業(yè)檔案數(shù)據(jù)庫；對于國土資源管理專業(yè)檔案，則按照傳統(tǒng)采用統(tǒng)一的數(shù)據(jù)庫進行管理。建立專業(yè)檔案數(shù)據(jù)庫并補全專業(yè)檔案數(shù)據(jù)后，所有的專業(yè)檔案數(shù)據(jù)庫被移植到政務外網(wǎng)。

2.建立專業(yè)檔案統(tǒng)一檢索平臺，提供唯一的信息檢索頁面，完成城市規(guī)劃和國土資源管理專業(yè)檔案數(shù)據(jù)庫的最終整合。在檢索平臺上，通過Elastic？ search搜索引擎技術，使城市規(guī)劃和國土資源管理異構專業(yè)檔案數(shù)據(jù)庫的海量信息能夠快速被統(tǒng)一檢索和集中呈現(xiàn)，為專業(yè)檔案用戶提供一站式集成的檔案信息服務。

（二）基于Elasticsearch搜索引擎技術的專業(yè)檔案統(tǒng)一檢索的實現(xiàn)

用Elasticsearch搜索引擎技術實現(xiàn)統(tǒng)一檢索的關鍵包括數(shù)據(jù)層的管理、定時任務數(shù)據(jù)同步的調(diào)度和搜索引擎的設置。

1.使用Elasticsearch搜索引擎技術進行檢索時，數(shù)據(jù)層使用雙數(shù)據(jù)源模式（即以SQL Server作為數(shù)據(jù)庫管理系統(tǒng)和Elasticsearch作為搜索引擎兼數(shù)據(jù)容器），將城市規(guī)劃和國土資源管理專業(yè)檔案數(shù)據(jù)存放在Elasticsearch中，以便其底層的搜索引擎采用倒排索引技術進行搜索。

2.通過配置定時任務的方式實現(xiàn)數(shù)據(jù)同步。對于定時任務數(shù)據(jù)同步采用Quartz調(diào)度，使搜索數(shù)據(jù)資源時專業(yè)檔案數(shù)據(jù)能被同步至Elasticsearch，并對有問題的數(shù)據(jù)進行標記。

3.搜索引擎使用倒排方式，使城市規(guī)劃和國土資源管理異構專業(yè)檔案數(shù)據(jù)庫中的每個字段都可以被用于搜索，最終將城市規(guī)劃和國土資源管理專業(yè)檔案中具有相關性的數(shù)據(jù)全部檢索出來。

在專業(yè)檔案統(tǒng)一檢索實現(xiàn)的基礎上搭建城市規(guī)劃和國土資源管理專業(yè)檔案統(tǒng)一檢索平臺后，市區(qū)兩級專業(yè)檔案用戶可以登錄平臺的統(tǒng)一檢索界面，檢索城市規(guī)劃和國土資源管理專業(yè)檔案的所有數(shù)據(jù)資源。平臺能同時調(diào)閱多個分布式存儲的專業(yè)檔案數(shù)據(jù)庫，根據(jù)統(tǒng)一權限控制用戶訪問不同的專業(yè)檔案數(shù)據(jù)庫和數(shù)據(jù)資源，并提供多種專業(yè)檔案信息的瀏覽、下載、打印等功能。

四、結語

城市規(guī)劃和國土資源管理專業(yè)檔案在城市規(guī)劃建設管理中具有重要的地位，是現(xiàn)在和未來城市規(guī)劃建設管理的參考依據(jù)。本文通過專業(yè)檔案數(shù)據(jù)庫的整合實現(xiàn)了大體量、多類別的城市規(guī)劃和國土資源管理檔案數(shù)據(jù)“云服務”利用，更好地發(fā)揮了此類檔案在北京市城市規(guī)劃建設管理工作中的輔助決策作用。如何進一步將云計算、大數(shù)據(jù)等技術運用于專業(yè)檔案數(shù)據(jù)整合工作中，通過海量信息提取與分析，實現(xiàn)檔案結構化與非結構化數(shù)據(jù)編研分析及產(chǎn)品定制，為城市規(guī)劃建設管理用戶提供更精準的、更高質(zhì)量的專業(yè)檔案信息服務是下一步研究的方向。

*本文系北京市檔案局科研項目“北京市規(guī)劃和自然資源系統(tǒng)專業(yè)檔案數(shù)據(jù)庫整合研究”（項目編號：2020-13）的研究成果之一。

注釋及參考文獻：

[1]安小米，宋懿，張斌.國家數(shù)字檔案資源整合與服務：概念、路徑和機制[J].檔案學研究，2018（3）：81-88.

[2]張占武.高校檔案信息資源整合探究[J].北京檔案，2021（6）：25-26.

[3]王海鷗.檔案信息資源整合與利用探討[J].蘭臺內(nèi)外，2020（7）：42-43.

[4]王雪萍.淺談檔案異構數(shù)據(jù)庫整合與服務集成的技術實現(xiàn)[C]//中國檔案學會.檔案與文化建設：2012年全國檔案工作者年會論文集（上），2012：421-429.

[5]裘紫陽.面向Elasticsearch的監(jiān)控管理平臺的設計與實現(xiàn)[D].武漢：華中科技大學，2019.

作者單位：北京市城市建設檔案館