淺談數(shù)據(jù)整合技術(shù)在水利設(shè)計(jì)中的運(yùn)用

周勇

（廣西恒廣建筑工程有限公司，廣西 南寧 532200）

對(duì)于決策開(kāi)展的分析工作所需的信息均是一些統(tǒng)計(jì)性的內(nèi)容，不過(guò)在目前的信息體系之下很是繁瑣。具體原因：第一，開(kāi)展一個(gè)決定一般要查詢很多信息體系以及外在的體系，而且要開(kāi)展分析工作，活動(dòng)量很多，信息的李永興較低，同時(shí)還會(huì)發(fā)生一些差錯(cuò)現(xiàn)象。第二，目前的體系平臺(tái)和開(kāi)發(fā)設(shè)備并不是兼容的，要想直接的獲取此類信息的話很是繁瑣。第三，所有的體系不具有綜合化的接口，也不具有相關(guān)的信息標(biāo)準(zhǔn)和規(guī)定等，所有的數(shù)據(jù)庫(kù)是不能夠有效的集成發(fā)展的。第四，開(kāi)展的統(tǒng)計(jì)分析活動(dòng)要靠著非常多的歷史內(nèi)容，不過(guò)這些內(nèi)容不是很綜合。

1 關(guān)于數(shù)據(jù)資源的探索

1.1 綜合辦公管理數(shù)據(jù)集是實(shí)現(xiàn)人員基礎(chǔ)信息統(tǒng)一管理的基礎(chǔ)數(shù)據(jù)集。主要包括：a.個(gè)人基本信息：包括個(gè)人信息庫(kù)等。b.單位基本信息：包括單位基本信息庫(kù)、單位所屬分支機(jī)構(gòu)信息庫(kù)等。c.參數(shù)信息庫(kù)：包括代碼庫(kù)、圖表分析生成庫(kù)等。

1.2 計(jì)劃經(jīng)營(yíng)管理數(shù)據(jù)集主要包括：a.市場(chǎng)信息：包括顧客信息資源庫(kù)、市場(chǎng)動(dòng)態(tài)信息庫(kù)、競(jìng)爭(zhēng)對(duì)手信息庫(kù)等。b.招投標(biāo)管理信息：包括招標(biāo)信息庫(kù)、投標(biāo)信息庫(kù)、專家信息庫(kù)等。c.合同信息：包括合同信息庫(kù)、收付款項(xiàng)信息庫(kù)、產(chǎn)品交付管理庫(kù)等。d.資質(zhì)管理信息：包括資質(zhì)信息庫(kù)、資質(zhì)審核庫(kù)、資質(zhì)借用管理庫(kù)等。

1.3 項(xiàng)目設(shè)計(jì)流程管理數(shù)據(jù)集主要包括：a.項(xiàng)目信息：包括項(xiàng)目立項(xiàng)信息庫(kù)、任務(wù)下達(dá)信息庫(kù)、項(xiàng)目組人員任命庫(kù)等。b.項(xiàng)目任務(wù)分解：包括項(xiàng)目任務(wù)分解資源信息庫(kù)、關(guān)鍵路徑控制等。c.網(wǎng)絡(luò)虛擬辦公室：包括項(xiàng)目動(dòng)態(tài)信息庫(kù)、中間成果管理庫(kù)、動(dòng)態(tài)分析庫(kù)等。d.產(chǎn)品管理信息：包括產(chǎn)品校審信息庫(kù)、成果交付信息庫(kù)等。

1.4 圖檔管理數(shù)據(jù)集主要包括：a.歸檔管理信息：包括資料預(yù)歸檔管理庫(kù)、資料歸檔管理庫(kù)等。b.整編信息：包括檔案整編信息庫(kù)等。c.借閱信息：包括人員信息庫(kù)、檔案借閱信息庫(kù)等。d.電子檔案信息：包括電子檔案授權(quán)庫(kù)、電子檔案借閱管理庫(kù)等。e.銷檔信息：包括銷毀檔案信息庫(kù)、銷毀人員信息庫(kù)等。

2 關(guān)于整合的獲取措施

2.1 數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)。利用數(shù)據(jù)庫(kù)開(kāi)發(fā)技術(shù)的數(shù)據(jù)整合主要指利用數(shù)據(jù)庫(kù)本身的功能，如觸發(fā)器、PL/SQL存儲(chǔ)過(guò)程、DBLINK等功能完成，完成對(duì)各個(gè)信息系統(tǒng)所需要數(shù)據(jù)的抽取、查詢和關(guān)聯(lián)等。

所有的整合工藝都具有一些優(yōu)點(diǎn)。第一，能夠適合相同數(shù)據(jù)庫(kù)間的信息綜合。第二，花費(fèi)的費(fèi)用不多，通常均是借助于開(kāi)發(fā)工作者的編程來(lái)實(shí)現(xiàn)的，只是要借助于開(kāi)發(fā)資金。不過(guò)它的獲取也存在一定的干擾。第三，不具有較高的擴(kuò)展能力。因?yàn)榫峭ㄟ^(guò)人工的模式來(lái)開(kāi)展的編程，它的后續(xù)時(shí)間段的費(fèi)用非常多，尤其是出現(xiàn)變動(dòng)問(wèn)題的時(shí)候，要靠著開(kāi)發(fā)工作者對(duì)于代碼進(jìn)行修整。第四，關(guān)于效率。因?yàn)槠渚怯砷_(kāi)發(fā)商來(lái)設(shè)置的，在體系不斷變大的狀態(tài)之中，在面對(duì)繁瑣的信息整合事項(xiàng)的時(shí)候，功效無(wú)法確保。

2.2 ETL技術(shù)。通過(guò)ETL技術(shù)及專業(yè)ETL軟件，即數(shù)據(jù)抽取（Extract）、轉(zhuǎn)換（Transform）、裝載（Load）能將數(shù)據(jù)從原系統(tǒng)數(shù)據(jù)庫(kù)經(jīng)過(guò)抽取，進(jìn)行轉(zhuǎn)換，最后加載到目標(biāo)數(shù)據(jù)庫(kù)，實(shí)現(xiàn)系統(tǒng)數(shù)據(jù)之間的整合。

此技術(shù)有很多的優(yōu)點(diǎn)。第一，效率非常高。ETL軟件相關(guān)的信息抽調(diào)以及加載等的效率十分高，尤其是對(duì)那些較大的信息量的分析。第二，完善了數(shù)據(jù)的品質(zhì)。可以結(jié)合多種狀態(tài)來(lái)分析信息的品質(zhì)，同時(shí)對(duì)于垃圾內(nèi)容清理。第三，擴(kuò)展管控功效?？梢越?jīng)由管控頁(yè)面等對(duì)數(shù)據(jù)抽取策略執(zhí)行制定時(shí)間觸發(fā)方式，對(duì)抽取結(jié)果進(jìn)行分析等。第四，多平臺(tái)、多數(shù)據(jù)源支持。支持各種平臺(tái)、各種數(shù)據(jù)庫(kù)系統(tǒng)（如ORACLE、SQLServer等）以及不同版本數(shù)據(jù)庫(kù)之間的數(shù)據(jù)抽取。最后，有很多的轉(zhuǎn)換控件，可以開(kāi)展多種繁瑣的轉(zhuǎn)換活動(dòng)。不過(guò)它也面對(duì)很多的不利現(xiàn)象。比如費(fèi)用很多，落實(shí)時(shí)間比較久。

3 關(guān)于整合的落實(shí)

3.1 首要時(shí)期對(duì)于信息體系的初始內(nèi)容分析。為了可以更為綜合的分析數(shù)據(jù)內(nèi)容的定義，獲取有關(guān)的文檔內(nèi)容，要對(duì)體系的初始內(nèi)容開(kāi)展分析。此時(shí)期涵蓋了解需要采集的數(shù)據(jù)結(jié)構(gòu)定義和數(shù)據(jù)表之間的設(shè)計(jì)聯(lián)系。例如：我們對(duì)包括非電子數(shù)據(jù)、excel格式數(shù)據(jù)及其各種不同數(shù)據(jù)庫(kù)格式數(shù)據(jù)進(jìn)行分析。

3.2 其次是設(shè)計(jì)的落實(shí)時(shí)期。為了不干擾初始信息模式的變化和使用，并確保其穩(wěn)定性，此時(shí)期關(guān)鍵是論述數(shù)據(jù)整合信息和方法等的落實(shí)。

3.3 然后是數(shù)據(jù)校驗(yàn)時(shí)期。為了確保不會(huì)出現(xiàn)不綜合的或是不正確的內(nèi)容，所以在其運(yùn)作以前的時(shí)候，要設(shè)置綜合化的校驗(yàn)體系，以此來(lái)確保生產(chǎn)以及整合信息相同。比如，對(duì)于導(dǎo)入的內(nèi)容積極的校對(duì)，關(guān)鍵的標(biāo)準(zhǔn)是設(shè)計(jì)方的標(biāo)準(zhǔn)，而且對(duì)于得到的信息不斷的分析，關(guān)鍵是經(jīng)由人工法來(lái)分析。

3.4 最后是體系上線時(shí)期。把計(jì)算好的整合步驟公開(kāi)，而且要明確落實(shí)步驟，體系的管控工作者可以經(jīng)由監(jiān)控模式，開(kāi)展任務(wù)的監(jiān)管工作。結(jié)合規(guī)定，管控工作者還可以將規(guī)劃變更，積極地排列轉(zhuǎn)換要素，進(jìn)而能夠在設(shè)定好的時(shí)間之中開(kāi)展好全部的活動(dòng)。

結(jié)語(yǔ)

該項(xiàng)整合活動(dòng)會(huì)將過(guò)去的那種以機(jī)構(gòu)和項(xiàng)目為關(guān)鍵點(diǎn)的信息孤島形勢(shì)變革，進(jìn)而確保所有的設(shè)計(jì)機(jī)構(gòu)的信息可以整合。之前的部分級(jí)別等的一些運(yùn)作體系，會(huì)導(dǎo)致所有的項(xiàng)目的技術(shù)不完全的一樣，同樣也會(huì)使得其進(jìn)展速率靠著開(kāi)發(fā)工作者的編碼功效，進(jìn)而導(dǎo)致設(shè)計(jì)機(jī)構(gòu)的功效不是很高。開(kāi)展了整合工作之后，就可以在設(shè)計(jì)方的自身統(tǒng)一技術(shù)規(guī)定之內(nèi)，積極的體現(xiàn)出團(tuán)隊(duì)的活動(dòng)性。經(jīng)由從整合而開(kāi)展的信息移值等，會(huì)使得設(shè)計(jì)機(jī)構(gòu)的整合費(fèi)用變低。

[1]蔣東興，劉啟新.數(shù)字校園信息整合之我見(jiàn)[M].北京:清華大學(xué)計(jì)算機(jī)與信息管理中心，2003.

[2]周志達(dá)，徐先傳.數(shù)據(jù)倉(cāng)庫(kù)中數(shù)據(jù)抽取、轉(zhuǎn)換及加載工具研究[J].北京理工大學(xué)學(xué)報(bào)，2003，23（6）:720-723.