信息系統(tǒng)中的數(shù)據(jù)集成方法研究與應(yīng)用分析

黃 盼,王冬冬,王露露（西安文理學院,西安 710065）

信息系統(tǒng)中的數(shù)據(jù)集成方法研究與應(yīng)用分析

黃 盼,王冬冬,王露露
（西安文理學院,西安 710065）

摘 要：為有效解決信息系統(tǒng)中存在的數(shù)據(jù)集成問題，本文基于當前數(shù)據(jù)的集成方法，與Excel軟件特點相結(jié)合，提出了適用于中小型企業(yè)的一種異構(gòu)數(shù)據(jù)轉(zhuǎn)換體系，并對這一集成方法的思路以及具體應(yīng)用展開了全面分析。

關(guān)鍵詞：信息系統(tǒng)；數(shù)據(jù)集成；數(shù)據(jù)轉(zhuǎn)換

0 引言

隨著時代的進步與發(fā)展，計算機網(wǎng)絡(luò)技術(shù)被廣泛應(yīng)用在了眾多行業(yè)、機構(gòu)內(nèi)部的業(yè)務(wù)與信息處理工作中。如何通過集成這些分散的數(shù)據(jù)，實現(xiàn)企業(yè)信息數(shù)據(jù)的貢獻，已成為當前社會的研究熱點之一?，F(xiàn)階段，數(shù)據(jù)轉(zhuǎn)換或數(shù)據(jù)交換為數(shù)據(jù)集成常采用的手段。考慮到以往常用的將XML作為中間數(shù)據(jù)源的數(shù)據(jù)交換技術(shù)存在轉(zhuǎn)換效率低下，實現(xiàn)起來困難等不足之處，因而許多中小型企業(yè)紛紛采用Excel的形式將自動化辦公過程中產(chǎn)生的數(shù)據(jù)保存下來。

1 數(shù)據(jù)集成體系的結(jié)構(gòu)

基于上述討論，筆者提出了一種適用中小型企業(yè)的，以Excel為中間數(shù)據(jù)格式的數(shù)據(jù)集成體系結(jié)構(gòu)。這一體系結(jié)構(gòu)的設(shè)計模式主要為三層架構(gòu)，將用戶從目標數(shù)據(jù)中抽離出來，使用戶、代理及網(wǎng)頁等客戶端無需關(guān)心其它異構(gòu)數(shù)據(jù)源的結(jié)構(gòu)與格式，直接對數(shù)據(jù)展開操作即可。此外，由于中間數(shù)據(jù)采用了Excel格式，簡單化了源數(shù)據(jù)向目標數(shù)據(jù)的轉(zhuǎn)換步驟，有效實現(xiàn)了轉(zhuǎn)換效率高、代價小的目的[1]。

2 異構(gòu)數(shù)據(jù)的集成方法

異構(gòu)數(shù)據(jù)庫為實現(xiàn)數(shù)據(jù)共享的目標，應(yīng)對數(shù)據(jù)轉(zhuǎn)換及數(shù)據(jù)透明訪問的實現(xiàn)抱以高度重視。在轉(zhuǎn)換數(shù)據(jù)過程中，不可廢棄原先的數(shù)據(jù)，應(yīng)通過相應(yīng)的方式將這些數(shù)據(jù)轉(zhuǎn)換至新的系統(tǒng)中，實現(xiàn)資源的再次利用。但是，由于數(shù)據(jù)具有多樣化的存儲模式及表示形式，因而在實際轉(zhuǎn)換方面存在一定的難度與復(fù)雜性?，F(xiàn)階段，數(shù)據(jù)轉(zhuǎn)換主要具備下列幾種方法：

其一，以數(shù)據(jù)庫管理系統(tǒng)為基礎(chǔ)。通常情況下，數(shù)據(jù)庫管理系統(tǒng)能夠提供數(shù)據(jù)裝入工具，達到將外部數(shù)據(jù)轉(zhuǎn)移至本數(shù)據(jù)庫的目的。例如SBCP等工具能夠?qū)⒍喾N類型的數(shù)據(jù)轉(zhuǎn)換為能被SQL Server關(guān)系型數(shù)據(jù)庫進行有效處理的數(shù)據(jù)。但是，此種轉(zhuǎn)換具有專用、特定的程序，多數(shù)條件下要求采用手工轉(zhuǎn)換的方式，且目的數(shù)據(jù)庫必須與轉(zhuǎn)換的工具相應(yīng)對，此外，在更新數(shù)據(jù)時，也會導(dǎo)致不同步問題的出現(xiàn)。

其二，以中間數(shù)據(jù)庫為基礎(chǔ)。將數(shù)據(jù)在兩個具體數(shù)據(jù)庫間進行轉(zhuǎn)換時，需要將關(guān)系定義作為依據(jù)，先將數(shù)據(jù)從數(shù)據(jù)庫中提取出來，轉(zhuǎn)換成為中間數(shù)據(jù)的格式后，再在數(shù)據(jù)庫中寫入這些中中間數(shù)據(jù)。此種數(shù)據(jù)轉(zhuǎn)換方法具有擴展性強、使用的轉(zhuǎn)換模塊少等優(yōu)勢，但同時也存在轉(zhuǎn)換空間大、實現(xiàn)過程復(fù)雜等不足之處。

其三，借助專業(yè)的轉(zhuǎn)換工具。目前，隨著XML的廣泛應(yīng)用，其已逐步成為數(shù)據(jù)交換的標準，而且已開發(fā)出來的一些數(shù)據(jù)轉(zhuǎn)換工具均是執(zhí)行此種類型的轉(zhuǎn)換[2]。例如，XML Junction便能夠允許集成一百多種的遺留數(shù)據(jù)系統(tǒng)，同時也支持文本文件、SQL Server、Word、Excel、RTF等眾多格式的數(shù)據(jù)進行轉(zhuǎn)換。

3 信息系統(tǒng)中數(shù)據(jù)的轉(zhuǎn)換

現(xiàn)階段，世界范圍內(nèi)普遍關(guān)注的熱點就包括飲水安全，基于此，筆者就飲水安全信息系統(tǒng)為例對數(shù)據(jù)轉(zhuǎn)換展開分析。我國目前一些飲水安全項目的管理主要為手工方式，并以Excel的形式將其數(shù)據(jù)保存下來。由于數(shù)據(jù)具備多樣化的格式，給其管理工作帶來了一定的難度。為高效集成這些數(shù)據(jù)，運用機構(gòu)數(shù)據(jù)的集成體系，并將Excel作為中間數(shù)據(jù)源尤為重要。

3.1 轉(zhuǎn)換系統(tǒng)的數(shù)據(jù)轉(zhuǎn)換方法

為促進數(shù)據(jù)轉(zhuǎn)換效率的提升，可選擇轉(zhuǎn)換的方法。當無法直接轉(zhuǎn)換源數(shù)據(jù)與目標數(shù)據(jù)時，就需要根據(jù)一定的映射規(guī)則，先把源數(shù)據(jù)轉(zhuǎn)換成Excel形式的文件，再將其轉(zhuǎn)換成所需的數(shù)據(jù)。另外，如果數(shù)據(jù)轉(zhuǎn)換接口存在于兩個數(shù)據(jù)可之間時，就可通過目標數(shù)據(jù)庫中的函數(shù)，將存在于源數(shù)據(jù)庫中數(shù)據(jù)與結(jié)果集直接轉(zhuǎn)換成目標數(shù)據(jù)。

3.2 數(shù)據(jù)的轉(zhuǎn)換流程

由于Excel文件為本系統(tǒng)的轉(zhuǎn)換對象，因而將其作為數(shù)據(jù)源。首先，系統(tǒng)從Excel數(shù)據(jù)源中得到原始的文件，并以標準數(shù)據(jù)格式為依據(jù)來檢查這些文件，文件只有通過檢查后方能被導(dǎo)入進目標數(shù)據(jù)庫，并且還可借助構(gòu)造函數(shù)將這些文件成批地導(dǎo)入到臨時表格當中，其次再規(guī)范化處理這些導(dǎo)入的數(shù)據(jù)，為系統(tǒng)的后期使用提供便利。最后，在目標數(shù)據(jù)庫中保存所有處理完畢以后的數(shù)據(jù)。

3.3 實現(xiàn)數(shù)據(jù)轉(zhuǎn)換的技術(shù)

SQL Server為本系統(tǒng)目標數(shù)據(jù)庫。到目前為止，我國飲水安全項目依然存在許多不規(guī)范的數(shù)據(jù)文件，且具有較為復(fù)雜的結(jié)構(gòu)。考慮到后期規(guī)劃與投資的重要依據(jù)便是這些數(shù)據(jù)，因而規(guī)范化這些數(shù)據(jù)，再將其向SQL Server數(shù)據(jù)庫中進行導(dǎo)入，從而為廣大用戶的使用提供便利尤為關(guān)鍵。在經(jīng)過一系列的研究操作后，我們將以下技術(shù)應(yīng)用在了本系統(tǒng)中，有效實現(xiàn)了數(shù)據(jù)的轉(zhuǎn)換。

其一，數(shù)據(jù)直接轉(zhuǎn)換的實現(xiàn)。以SQL Server提供的DTS創(chuàng)建包為基礎(chǔ)，在SQL Server中導(dǎo)入其他數(shù)據(jù)庫中的數(shù)據(jù)，然后借助Transact SQL來規(guī)范化處理導(dǎo)入其中的數(shù)據(jù)。

其二，中間數(shù)據(jù)的轉(zhuǎn)換。當數(shù)據(jù)源間缺乏直接的轉(zhuǎn)換接口時，目標數(shù)據(jù)便是源數(shù)據(jù)中的表格中的幾個字段、記錄值，或者是多份表格的關(guān)聯(lián)查詢結(jié)果等等，此時便難以對數(shù)據(jù)展開直接轉(zhuǎn)換。我們可以定義好的映射規(guī)則作為依據(jù)，在Excel文件中有順序地存放數(shù)據(jù)，并確保中間數(shù)據(jù)媒介得到數(shù)據(jù)雙方的理解。對于目的數(shù)據(jù)庫，則通過結(jié)合OpenRowSet函數(shù)與Excel編程模型，以unicode將數(shù)據(jù)文件成批導(dǎo)入SQL Server中，再借助Transact SQL來規(guī)范處理關(guān)系型數(shù)據(jù)庫中的導(dǎo)入數(shù)據(jù)。

4 結(jié)語

文中所提出的飲水安全信息系統(tǒng)已經(jīng)投入了實際運行中，充分滿足了用戶的需求。此種系統(tǒng)不但將之前不規(guī)范的、復(fù)雜的數(shù)據(jù)有效轉(zhuǎn)換為了規(guī)范簡單的數(shù)據(jù)，對于已經(jīng)轉(zhuǎn)換的數(shù)據(jù)，其提供了在線分析、統(tǒng)計、匯總，并生成Excel文件格式的總報表，從而為做出正確的飲水安全決策提供了科學的參考依據(jù)。

參考文獻：

[1]邱樹偉.網(wǎng)格環(huán)境下分布式信息系統(tǒng)數(shù)據(jù)集成方法研究[J].廣州大學學報(自然科學版),2012,11(02):70-72.

[2]周海鵬,李軍懷.信息系統(tǒng)中的數(shù)據(jù)集成方法研究與應(yīng)用[J].微電子學與計算機,2012,25(05):66-68.

作者簡介：黃盼（1990-），男，陜西洛南人，大四學生，研究方向：集成電子設(shè)備和信息系統(tǒng)研究。