調(diào)水工程大數(shù)據(jù)技術(shù)應(yīng)用

彭 玲，王 丹，陶富嶺

(1.新疆額爾齊斯河流域開發(fā)工程建設(shè)管理局，新疆 烏魯木齊 830000；2.黃河勘測(cè)規(guī)劃設(shè)計(jì)研究院有限公司，河南 鄭州 450003)

我國水資源分布呈現(xiàn)出南多北少的時(shí)空分布規(guī)律，水資源短缺已成為缺水地區(qū)經(jīng)濟(jì)發(fā)展的掣肘點(diǎn)，習(xí)總書記提出了“節(jié)水優(yōu)先，空間均衡，系統(tǒng)治理，兩手發(fā)力”的新時(shí)代治水方針。通過調(diào)水工程可有效解決水資源空間分布不均勻的問題，助力經(jīng)濟(jì)社會(huì)的可持續(xù)發(fā)展。在調(diào)水過程中，通常面臨輸送距離遠(yuǎn)，工程范圍廣、規(guī)模大，涉及建筑物復(fù)雜等系列問題，此外復(fù)雜的自然環(huán)境和地質(zhì)條件也增加了調(diào)水工程的難度。

調(diào)水工程除承擔(dān)供水任務(wù)外，還兼具防洪、發(fā)電、灌溉、生態(tài)、航運(yùn)等多重任務(wù)。因此在調(diào)水工程運(yùn)行時(shí)，需進(jìn)行水資源的優(yōu)化調(diào)度，水閘泵站的精準(zhǔn)控制，水質(zhì)、水情的實(shí)時(shí)監(jiān)測(cè)預(yù)警，此外還需保證調(diào)水工程的安全問題，實(shí)現(xiàn)高效、智能的工程管理。為補(bǔ)足水利行業(yè)在信息化方面的短板，迫切需要從傳統(tǒng)的管理理念和方法向?qū)I(yè)化、精準(zhǔn)化、智能化的新時(shí)代水利工程管理要求轉(zhuǎn)變。

大數(shù)據(jù)作為一種嶄新的研究和工作方法，在洞察海量數(shù)據(jù)間的內(nèi)置規(guī)律、內(nèi)在關(guān)聯(lián)、新價(jià)值方面具有顯著優(yōu)勢(shì)，可進(jìn)行精準(zhǔn)決策、業(yè)務(wù)優(yōu)化，在經(jīng)濟(jì)社會(huì)中具有極大的應(yīng)用潛力。關(guān)于大數(shù)據(jù)在信息時(shí)代的應(yīng)用，各研究機(jī)構(gòu)給出了不同的觀點(diǎn)，其中Gartner認(rèn)為，大數(shù)據(jù)要具有更強(qiáng)的決策力、洞察力和流程優(yōu)化能力，才能夠適應(yīng)未來信息資產(chǎn)的海量化、多樣化以及高增長的特性，更新大數(shù)據(jù)的處理模式是必經(jīng)之路；麥肯錫認(rèn)為，目前尚且無法通過傳統(tǒng)數(shù)據(jù)庫軟件對(duì)大數(shù)據(jù)進(jìn)行處理分析[1- 2]。國內(nèi)外在水利工程大數(shù)據(jù)理論研究和工程應(yīng)用方面都進(jìn)行了一些嘗試，但從總體上看，目前的研究成果尚不能滿足市場(chǎng)對(duì)大數(shù)據(jù)技術(shù)的應(yīng)用需求。筆者針對(duì)調(diào)水工程大數(shù)據(jù)，從數(shù)據(jù)生成到應(yīng)用，提出了總體架構(gòu)并分析了七大應(yīng)用場(chǎng)景，為調(diào)水工程大數(shù)據(jù)應(yīng)用發(fā)展提供了理論方法基礎(chǔ)。

1 調(diào)水工程大數(shù)據(jù)特點(diǎn)

遙感、物聯(lián)網(wǎng)、射頻等新一代信息技術(shù)的飛速發(fā)展，大幅度提升了調(diào)水工程的數(shù)據(jù)采集能力，隨之而來的問題是，數(shù)據(jù)空間尺度和要素類型變得愈加復(fù)雜。來源范圍廣泛類型眾多的數(shù)據(jù)，開始呈現(xiàn)出多源異構(gòu)、分布廣泛和動(dòng)態(tài)增長的特點(diǎn)。

從數(shù)據(jù)類別看，既有來自物聯(lián)網(wǎng)設(shè)備的水文、氣象、水質(zhì)、旱情、工程安全、引供水、水生態(tài)、閘泵工況等大量的實(shí)測(cè)信息，還有大量與工程相關(guān)的調(diào)水區(qū)、受水區(qū)、沿線區(qū)域各類輔助信息，如社會(huì)經(jīng)濟(jì)數(shù)據(jù)、自然地理數(shù)據(jù)、人文信息、地質(zhì)災(zāi)害數(shù)據(jù)、交叉工程外部信息、生態(tài)環(huán)境數(shù)據(jù)、土地利用、水土保持、工程視頻和互聯(lián)網(wǎng)數(shù)據(jù)等。雖然上述數(shù)據(jù)類別不一，但其并不完全獨(dú)立，相反地，各類數(shù)據(jù)之間存在復(fù)雜的業(yè)務(wù)和邏輯關(guān)系。如氣候類型的轉(zhuǎn)變會(huì)引起水資源量空間分布規(guī)律的改變，進(jìn)而對(duì)調(diào)水工程、水生態(tài)環(huán)境、洪旱災(zāi)害、水資源分配等一系列數(shù)據(jù)產(chǎn)生間接影響。從數(shù)據(jù)結(jié)構(gòu)看，大數(shù)據(jù)兼具結(jié)構(gòu)化數(shù)據(jù)以及非結(jié)構(gòu)化數(shù)據(jù)特征，然而目前的技術(shù)架構(gòu)尚無法滿足高效處理大數(shù)據(jù)的需求。

從價(jià)值密度看，新技術(shù)帶來了巨大的信息量，但同時(shí)也導(dǎo)致信息的價(jià)值密度降低，因此需要通過模型算法快速地從海量數(shù)據(jù)中提取有用的信息。從時(shí)效性看，某些實(shí)時(shí)性數(shù)據(jù)，比如洪災(zāi)預(yù)警、工程安全、水質(zhì)變化、設(shè)備故障征兆等，需要及時(shí)高效的信息處理和反饋，常規(guī)的數(shù)據(jù)分析方法難以在合理時(shí)間內(nèi)獲取和處理，為此需要借助大數(shù)據(jù)技術(shù)，以實(shí)現(xiàn)調(diào)水工程管理的科學(xué)決策。

在長期運(yùn)行管理中，調(diào)水工程的業(yè)務(wù)數(shù)據(jù)已逐漸向多源化、多態(tài)化、以及多維度的方向演變，具體表現(xiàn)為以下五項(xiàng)顯著特征。

(1)數(shù)據(jù)量規(guī)模龐大：隨著時(shí)間的累積，調(diào)水工程各類數(shù)據(jù)量增長迅速，數(shù)據(jù)量級(jí)通常在數(shù)百TB甚至PB以上。

(2)數(shù)據(jù)多源異構(gòu)：調(diào)水工程數(shù)據(jù)不僅包含運(yùn)行管理數(shù)據(jù)，還涵蓋了勘測(cè)規(guī)劃設(shè)計(jì)等多種來源的海量數(shù)據(jù)，多源數(shù)據(jù)伴生的問題是復(fù)雜的數(shù)據(jù)結(jié)構(gòu)。

(3)數(shù)據(jù)增速迅猛：信息化技術(shù)的提升提高了運(yùn)行管理水平，監(jiān)測(cè)密度大幅提升，各環(huán)節(jié)的數(shù)據(jù)指標(biāo)也顯著增多，相比傳統(tǒng)技術(shù)手段數(shù)據(jù)增速呈幾何增長態(tài)勢(shì)。

(4)數(shù)據(jù)信息價(jià)值高昂：運(yùn)行管理單位以及水行政主管部門，愈加依賴于工程運(yùn)行數(shù)據(jù)來進(jìn)行業(yè)務(wù)處置，在工程安全和經(jīng)濟(jì)運(yùn)行、資源優(yōu)化配置等方面數(shù)據(jù)信息的高昂價(jià)值愈加凸顯。

(5)實(shí)時(shí)要求：通過對(duì)部分工程數(shù)據(jù)(如工程安全數(shù)據(jù))的實(shí)時(shí)監(jiān)測(cè)，可以快速高效的判別險(xiǎn)情，并及時(shí)做出相應(yīng)應(yīng)急決策，因此需具備實(shí)時(shí)處理的特性。

2 調(diào)水工程大數(shù)據(jù)總體架構(gòu)

數(shù)據(jù)架構(gòu)描述數(shù)據(jù)全命周期管理的流程、參與流程的功能構(gòu)件以及它們之間的相互關(guān)系。數(shù)據(jù)架構(gòu)圍繞調(diào)水工程業(yè)務(wù)應(yīng)用數(shù)據(jù)和大數(shù)據(jù)兩類，分?jǐn)?shù)據(jù)匯聚、數(shù)據(jù)整理、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)服務(wù)、數(shù)據(jù)應(yīng)用逐級(jí)流轉(zhuǎn)。調(diào)水工程大數(shù)據(jù)通過數(shù)據(jù)資源池的全域數(shù)據(jù)采集、標(biāo)準(zhǔn)規(guī)范數(shù)據(jù)架構(gòu)、深度萃取數(shù)據(jù)價(jià)值、統(tǒng)一數(shù)據(jù)資產(chǎn)管理和統(tǒng)一主題式服務(wù)，形成對(duì)調(diào)水工程業(yè)務(wù)應(yīng)用和管理決策過程的支持[3]。

在服務(wù)于調(diào)水工程大數(shù)據(jù)的存儲(chǔ)與應(yīng)用需求時(shí)，受制于數(shù)據(jù)處理分析等技術(shù)特性限制，傳統(tǒng)架構(gòu)稍顯乏力。為滿足豐富的業(yè)務(wù)需求，在智慧水利數(shù)據(jù)架構(gòu)的基礎(chǔ)上，結(jié)合調(diào)水工程的特點(diǎn)，構(gòu)建調(diào)水工程大數(shù)據(jù)總體框架[4]。針對(duì)不同的數(shù)據(jù)類型，選用最優(yōu)的技術(shù)手段進(jìn)行分析處理，如采用關(guān)系型數(shù)據(jù)庫對(duì)結(jié)構(gòu)化數(shù)據(jù)進(jìn)行組織和管理；利用空間數(shù)據(jù)引擎進(jìn)行地理空間數(shù)據(jù)的高效管理；以關(guān)系型數(shù)據(jù)庫管理目錄加文件存儲(chǔ)方式對(duì)半結(jié)構(gòu)化或結(jié)構(gòu)化數(shù)據(jù)進(jìn)行組織管理。通過多種數(shù)據(jù)組織與管理方式結(jié)合，共同支撐工程大數(shù)據(jù)的存儲(chǔ)和管理。此外，上述數(shù)據(jù)管理方式并非獨(dú)立存在，可通過數(shù)據(jù)抽取及裝載工具進(jìn)行數(shù)據(jù)間的轉(zhuǎn)換及補(bǔ)充[4- 5]。

基于大數(shù)據(jù)的調(diào)水工程數(shù)據(jù)應(yīng)用架構(gòu)具體可劃分為五個(gè)層次，分別為數(shù)據(jù)匯集、整理、存儲(chǔ)、服務(wù)、應(yīng)用[6]，其架構(gòu)如圖1所示。其中，調(diào)水工程大數(shù)據(jù)匯集和整理是其存儲(chǔ)和應(yīng)用的基礎(chǔ)；調(diào)水工程大數(shù)據(jù)存儲(chǔ)和共享研究通過數(shù)據(jù)資源化和調(diào)水工程大數(shù)據(jù)中心的構(gòu)建，實(shí)現(xiàn)安全可靠的數(shù)據(jù)存儲(chǔ)和互聯(lián)互通；根據(jù)調(diào)水部門的業(yè)務(wù)需求，利用調(diào)水工程大數(shù)據(jù)實(shí)現(xiàn)調(diào)水業(yè)務(wù)管理和決策。

2.1 數(shù)據(jù)匯集

數(shù)據(jù)匯集是調(diào)水工程數(shù)據(jù)流程的起點(diǎn)，同時(shí)也是主體化匯聚核心能力的體現(xiàn)[7]。要構(gòu)建調(diào)水工程大數(shù)據(jù)，首先需要對(duì)不同來源的異構(gòu)數(shù)據(jù)進(jìn)行采集和匯總。異構(gòu)數(shù)據(jù)來源主要分為三類，上報(bào)采集數(shù)據(jù)、其他系統(tǒng)數(shù)據(jù)、其他部門交換數(shù)據(jù)。在數(shù)據(jù)匯集的過程中，對(duì)現(xiàn)有業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫，并不需要整庫進(jìn)行遷移，可按業(yè)務(wù)需求對(duì)需要匯集的數(shù)據(jù)項(xiàng)進(jìn)行梳理，以聯(lián)合建模的方式對(duì)部門數(shù)據(jù)共享，這樣也可避免行業(yè)壁壘所帶來的數(shù)據(jù)共享難題。

2.2 數(shù)據(jù)整理

數(shù)據(jù)整理是對(duì)數(shù)據(jù)匯聚后的多源及多元數(shù)據(jù)進(jìn)行統(tǒng)一整理，主要包括梳理數(shù)據(jù)間的邏輯關(guān)系，提升數(shù)據(jù)的規(guī)范性，避免數(shù)據(jù)冗余，提升數(shù)據(jù)一致性。具體包括坐標(biāo)、編碼等方面的統(tǒng)一，以及對(duì)海量數(shù)據(jù)進(jìn)行抽取等。

針對(duì)規(guī)則化調(diào)度數(shù)據(jù)，主要是基于業(yè)務(wù)邏輯和處理規(guī)則，建立對(duì)象實(shí)體關(guān)系，將不同對(duì)象數(shù)據(jù)進(jìn)行關(guān)聯(lián)。針對(duì)復(fù)雜多變的大數(shù)據(jù)，通過抽取、清洗等，連接不同來源的數(shù)據(jù)，以對(duì)數(shù)據(jù)進(jìn)行有效利用。

2.3 數(shù)據(jù)存儲(chǔ)

數(shù)據(jù)存儲(chǔ)是通過結(jié)構(gòu)化數(shù)據(jù)環(huán)境，承擔(dān)時(shí)空一體化水利數(shù)據(jù)的存儲(chǔ)和管理任務(wù)。為解決傳統(tǒng)調(diào)水工程數(shù)據(jù)存儲(chǔ)分散、信息孤島、利用率不高等問題，建設(shè)調(diào)水工程數(shù)據(jù)中心，實(shí)現(xiàn)工程數(shù)據(jù)的統(tǒng)一管理及應(yīng)用。在建設(shè)調(diào)水工程數(shù)據(jù)中心之前應(yīng)制定統(tǒng)一的數(shù)據(jù)存儲(chǔ)和共享標(biāo)準(zhǔn)，包括統(tǒng)一的數(shù)據(jù)編碼體系。并通過統(tǒng)一的技術(shù)架構(gòu)和集成方法，有效降低數(shù)據(jù)交換和共享的復(fù)雜度，提高數(shù)據(jù)使用效率。

圖1 調(diào)水工程大數(shù)據(jù)總體框架

建立調(diào)水工程數(shù)據(jù)中心，可從5個(gè)方面進(jìn)行：①對(duì)當(dāng)前信息系統(tǒng)已存儲(chǔ)的原始數(shù)據(jù)進(jìn)行梳理，獲悉各類數(shù)據(jù)以及數(shù)據(jù)結(jié)構(gòu)之間的邏輯關(guān)聯(lián)；②根據(jù)業(yè)務(wù)需求制定科學(xué)合理的工程數(shù)據(jù)資源目錄，實(shí)現(xiàn)數(shù)據(jù)接口、元數(shù)據(jù)格式、數(shù)據(jù)編碼的統(tǒng)一定義；③確定數(shù)據(jù)整合規(guī)則及策略，以此為基礎(chǔ)建立嚴(yán)格的數(shù)據(jù)校驗(yàn)機(jī)制；④通過中間件技術(shù)實(shí)現(xiàn)數(shù)據(jù)資源的統(tǒng)一訪問和調(diào)用降低整合成本，實(shí)現(xiàn)數(shù)據(jù)整合；⑤開發(fā)分布式數(shù)據(jù)存儲(chǔ)云平臺(tái)，實(shí)現(xiàn)基于云的數(shù)據(jù)統(tǒng)一存儲(chǔ)和共享。

2.4 數(shù)據(jù)服務(wù)

數(shù)據(jù)服務(wù)是從存儲(chǔ)層抽象出來的標(biāo)準(zhǔn)化、可共享的服務(wù)[6]。目前信息化呈現(xiàn)出橫向拓寬、縱向加深的發(fā)展趨勢(shì)，大量的多種類低價(jià)值數(shù)據(jù)源源不斷的涌入數(shù)據(jù)庫，要實(shí)現(xiàn)對(duì)數(shù)據(jù)的高效利用，需滿足前置條件即快速準(zhǔn)確的從海量數(shù)據(jù)中獲取有價(jià)值的信息。通過Map和Reduce可以有效的對(duì)數(shù)據(jù)進(jìn)行歸類、關(guān)聯(lián)、分析、重組，滿足數(shù)據(jù)分析處理的業(yè)務(wù)需求。調(diào)水工程大數(shù)據(jù)分析的著力點(diǎn)在于根據(jù)業(yè)務(wù)應(yīng)用的需求，實(shí)現(xiàn)對(duì)數(shù)據(jù)的處理、挖掘和可視化操作，主要的技術(shù)手段為依托于云計(jì)算的數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)等。

2.5 數(shù)據(jù)應(yīng)用

依托大數(shù)據(jù)技術(shù)可以充分挖掘數(shù)據(jù)的應(yīng)用和決策價(jià)值。通過耦合分析實(shí)時(shí)、歷史數(shù)據(jù)，對(duì)調(diào)水工程數(shù)據(jù)進(jìn)行實(shí)時(shí)監(jiān)控、動(dòng)態(tài)分析、預(yù)警預(yù)報(bào)、決策生成，實(shí)現(xiàn)跨區(qū)域、跨部門的信息資源一體化，使大數(shù)據(jù)具備知識(shí)服務(wù)功能，對(duì)不斷變化的數(shù)據(jù)進(jìn)行態(tài)勢(shì)評(píng)估與可視化表現(xiàn)，從而提升調(diào)水工程管理決策水平。

依托Hadoop等大數(shù)據(jù)處理平臺(tái)可實(shí)現(xiàn)調(diào)水工程大數(shù)據(jù)的具體應(yīng)用。Hadoop具備強(qiáng)大的批量數(shù)據(jù)處理和分析能力，在調(diào)水工程數(shù)據(jù)架構(gòu)中，可采用該系統(tǒng)存儲(chǔ)非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)，結(jié)合MapReduce批量處理歷史監(jiān)測(cè)數(shù)據(jù)，為監(jiān)測(cè)數(shù)據(jù)的分析挖掘和模型計(jì)算賦能。在調(diào)水業(yè)務(wù)應(yīng)用中，一些關(guān)鍵數(shù)據(jù)指標(biāo)如雨情、水情、工情等大量實(shí)時(shí)數(shù)據(jù)需要進(jìn)行高效、實(shí)時(shí)的處理操作，在數(shù)據(jù)應(yīng)用架構(gòu)中加入Storm實(shí)時(shí)計(jì)算框架，可大幅提升實(shí)時(shí)數(shù)據(jù)信息的決策處理能力。

3 調(diào)水工程大數(shù)據(jù)應(yīng)用研究

結(jié)合調(diào)水工程調(diào)度管理與運(yùn)行維護(hù)實(shí)際需求，大數(shù)據(jù)在調(diào)水工程中主要有以下典型應(yīng)用場(chǎng)景。

(1)水量優(yōu)化配置。如何進(jìn)行科學(xué)合理的水量分配是調(diào)水工程需要著重解決的核心問題。借助大數(shù)據(jù)技術(shù)預(yù)測(cè)受水區(qū)需水變化規(guī)律、水源區(qū)來水變化過程，對(duì)水量實(shí)時(shí)調(diào)度信息、用水戶基本信息等多維數(shù)據(jù)進(jìn)行綜合分析，為優(yōu)化水量分配原則、合理制定水源地水量調(diào)度方案及供水方案，提供智能化的決策依據(jù)，達(dá)到提高用水保證率的目的。

(2)工程安全管理。調(diào)水工程具有線路長、范圍廣的特性，保證工程的安全性是調(diào)水工程運(yùn)行的先決條件。大數(shù)據(jù)可以通過對(duì)地形地質(zhì)、氣象水文、交叉建筑物信息、以及社會(huì)經(jīng)濟(jì)等數(shù)據(jù)進(jìn)行融合分析，構(gòu)建針對(duì)調(diào)水工程安全管理的多維大數(shù)據(jù)庫，實(shí)現(xiàn)數(shù)據(jù)重組、整合和分析，進(jìn)而實(shí)現(xiàn)工程安全監(jiān)測(cè)、實(shí)時(shí)診斷、以及預(yù)警發(fā)布等功能。

(3)供水成本優(yōu)化。供水成本核算涉及輸水損失、工程運(yùn)行維護(hù)、工程管理等參數(shù)和指標(biāo)，數(shù)據(jù)的信息量較大。通過開發(fā)合理的供水成本模型優(yōu)化算法，并結(jié)合大數(shù)據(jù)分析技術(shù)，針對(duì)水量分配方案等相關(guān)方案信息，實(shí)現(xiàn)供水成本費(fèi)用測(cè)算和成本費(fèi)用優(yōu)化，為工程運(yùn)行精細(xì)化管理提供技術(shù)支撐[7]。

(4)工程機(jī)電機(jī)組故障診斷和預(yù)警。將機(jī)組振擺、壓力脈動(dòng)、發(fā)電機(jī)局放、變壓器油色譜等在線監(jiān)測(cè)數(shù)據(jù)及監(jiān)控系統(tǒng)數(shù)據(jù)進(jìn)行綜合分析處理，通過數(shù)學(xué)運(yùn)算提取信號(hào)特征值，利用大數(shù)據(jù)技術(shù)分析設(shè)備運(yùn)行規(guī)律，提取長周期趨勢(shì)分析結(jié)果，評(píng)估機(jī)電機(jī)組設(shè)備的健康狀態(tài)，為狀態(tài)檢修和維護(hù)提供科學(xué)依據(jù)[7]。

(5)水環(huán)境監(jiān)測(cè)和水資源保護(hù)。在水環(huán)境監(jiān)測(cè)方面，個(gè)人在移動(dòng)社交平臺(tái)上發(fā)布的突發(fā)水污染事件成為重要信息源。通過對(duì)此類數(shù)據(jù)進(jìn)行數(shù)據(jù)提取、關(guān)聯(lián)分析和挖掘利用，為水環(huán)境監(jiān)測(cè)和預(yù)警提供依據(jù)。在水資源保護(hù)方面，將重點(diǎn)行業(yè)的用水?dāng)?shù)據(jù)納入到調(diào)水工程大數(shù)據(jù)關(guān)鍵分析體系之中，逐步完善水資源監(jiān)管體系，從根源上提高用水效率，提升行業(yè)效益。

(6)洪災(zāi)預(yù)警管理。傳統(tǒng)洪澇災(zāi)害預(yù)測(cè)通常是通過在目標(biāo)區(qū)域內(nèi)設(shè)置雨量監(jiān)測(cè)站，通過實(shí)時(shí)和預(yù)測(cè)降雨情況，利用水文模型進(jìn)行洪水預(yù)測(cè)。這種方式存在洪水預(yù)見期短、預(yù)報(bào)精度不高的問題。采用大數(shù)據(jù)進(jìn)行暴雨洪水相似性分析，結(jié)合歷史洪澇災(zāi)害數(shù)據(jù)，則可有效彌補(bǔ)水文模型預(yù)測(cè)洪水的技術(shù)短板。

(7)旱災(zāi)預(yù)警管理。通過對(duì)衛(wèi)星遙感、地形地貌條件、歷時(shí)降雨、江河水位和歷史災(zāi)情等海量數(shù)據(jù)進(jìn)行整合，在此基礎(chǔ)上建立旱災(zāi)預(yù)測(cè)模型，能夠有效預(yù)測(cè)旱情，提前優(yōu)化水庫蓄水，降低旱災(zāi)發(fā)生的可能性，減少旱災(zāi)損失，使調(diào)水工程的水源供給得到保證。

4 結(jié)語

傳統(tǒng)水利數(shù)據(jù)分析方法為我國水利信息化發(fā)展做出了有力貢獻(xiàn)，但隨著信息技術(shù)的飛速發(fā)展，以及水利業(yè)務(wù)數(shù)據(jù)分析處理需求的不斷增長，迫切需要新的數(shù)據(jù)分析處理方法。調(diào)水工程大數(shù)據(jù)研究方法技術(shù)優(yōu)勢(shì)明顯，相較傳統(tǒng)方法具有本質(zhì)區(qū)別，主要表現(xiàn)為：

(1)分析處理數(shù)據(jù)體量迥異。傳統(tǒng)的數(shù)據(jù)分析方法是基于少量的抽樣數(shù)據(jù)因此不能確保分析結(jié)果的全面性以及可靠性，而大數(shù)據(jù)分析方法則是依托于多源異構(gòu)的海量數(shù)據(jù)，相較于傳統(tǒng)方法雖然增大了數(shù)據(jù)處理技術(shù)難度，但分析結(jié)果更加精準(zhǔn)、智能。

(2)數(shù)據(jù)分析維度、角度差異性較大。傳統(tǒng)水利數(shù)據(jù)分析方法僅針對(duì)于某一專業(yè)或某一部門，而大數(shù)據(jù)分析則立足于多維度、多角度，跨越了專業(yè)、部門甚至于領(lǐng)域的限制，從數(shù)據(jù)間復(fù)雜的邏輯規(guī)律尋根溯源，更加深入了分析數(shù)據(jù)背后所蘊(yùn)含的內(nèi)在機(jī)理。

大數(shù)據(jù)技術(shù)為調(diào)水工程管理決策提供了新思維和新手段。本文介紹了調(diào)水工程大數(shù)據(jù)特點(diǎn)、大數(shù)據(jù)技術(shù)架構(gòu)、大數(shù)據(jù)應(yīng)用方法以及應(yīng)用場(chǎng)景，但在調(diào)水工程大數(shù)據(jù)集成、調(diào)水工程大數(shù)據(jù)分析挖掘算法、調(diào)水工程大數(shù)據(jù)數(shù)據(jù)安全等方面尚未完整論述。大數(shù)據(jù)在調(diào)水工程中的應(yīng)用呈現(xiàn)良好的發(fā)展態(tài)勢(shì)，需不斷進(jìn)行研究和應(yīng)用，以逐步形成調(diào)水工程大數(shù)據(jù)的理論方法體系。