阮伶杰
摘 要:近些年來,隨著社會發(fā)展對電力需求的不斷增加,我國電網(wǎng)工程的建設規(guī)模也在不斷擴大,電力系統(tǒng)數(shù)據(jù)量也在持續(xù)增長。在這一背景下,傳統(tǒng)的智能配電網(wǎng)運行數(shù)據(jù)監(jiān)控平臺已經無法滿足當前電力用戶的現(xiàn)實需求,且無法對數(shù)據(jù)進行更加高效的整合?;诖?,本文章主要針對大數(shù)據(jù)背景下智能配電網(wǎng)運行監(jiān)控平臺關鍵技術的應用展開了深入的分析與探究。
關鍵詞:大數(shù)據(jù);智能配電網(wǎng);監(jiān)控平臺;關鍵技術;應用分析
在大數(shù)據(jù)時代背景下,多數(shù)電力企業(yè)都在使用網(wǎng)絡系統(tǒng)來存儲自身的運行管理信息,因此在日常工作中就需要對大量數(shù)據(jù)實施綜合的處理分析。在這種情況下,電力企業(yè)就需要采用各種先進的技術,結合自身情況來構建一個完善的監(jiān)控管理平臺,充分發(fā)揮監(jiān)控管理平臺在智能電網(wǎng)運行過程中的中心樞紐作用,以便工作人員對各項數(shù)據(jù)實施存儲、處理與分析工作進而確保智能配電網(wǎng)的高效、穩(wěn)定與安全運行。
1 關系數(shù)據(jù)與分布式存儲同步技術
從本質上來講,關系數(shù)據(jù)庫與分布式存儲同步技術,二者之間的數(shù)據(jù)是可以相互調取的,可以對數(shù)據(jù)進行更加準確與高效的分析處理。在具體實踐中,工作人員還可以對關系數(shù)據(jù)庫中的數(shù)據(jù)實施分布存儲,并將數(shù)據(jù)調取到關系數(shù)據(jù)庫當中。
在一般情況下,大數(shù)據(jù)主要是憑借分布式存儲技術來完成數(shù)據(jù)存儲任務的。其中,多數(shù)數(shù)據(jù)均來源于企業(yè)的數(shù)據(jù)倉庫與關系數(shù)據(jù)庫。在數(shù)據(jù)傳輸?shù)倪^程中,工作人員要注意數(shù)據(jù)在分布式存儲與關系型數(shù)據(jù)庫之間的無縫傳輸,并且要高度重視數(shù)據(jù)傳輸?shù)乃俣扰c質量,盡可能不影響到正常的工作。與此同時,由于傳統(tǒng)的數(shù)據(jù)傳輸工具只可以做到同存儲數(shù)據(jù)機制間的同步,無法實現(xiàn)兩種不同存儲機制間數(shù)據(jù)的同步,例如關系數(shù)據(jù)庫與分布式存儲,因此就十分有必要發(fā)揮與應用關系數(shù)據(jù)庫與分布式存儲同步技術的作用與優(yōu)勢。
2 文件采集與處理技術
在當前背景下,數(shù)據(jù)平臺中的數(shù)據(jù)來源途徑較為多樣化,一方面,數(shù)據(jù)來源于數(shù)據(jù)倉庫、數(shù)據(jù)中心;另一方面,數(shù)據(jù)來源于舊平臺中沒有經過處理的各類文件當中,這些數(shù)據(jù)、文件的結構均較為混亂,且有價值的信息較少。針對于這種情況,就要利用大數(shù)據(jù)監(jiān)控平臺中分布式存儲這種方法來進行存儲,將數(shù)據(jù)肢解成辦結構化與結構化[1],以此來將數(shù)據(jù)更加完整的存儲到大數(shù)據(jù)平臺當中,以此來大大提升數(shù)據(jù)存儲的經濟性。
在智能配電網(wǎng)運行監(jiān)控平臺當中,數(shù)據(jù)處理技術主要是指對存儲系統(tǒng)中相關數(shù)據(jù)的處理,具體涵蓋了數(shù)據(jù)分類與分表等。其中,數(shù)據(jù)分庫處理就是指根據(jù)系統(tǒng)中已經設定好的處理規(guī)定,對有價值的數(shù)據(jù)完整的傳輸與存儲到各個不同的數(shù)據(jù)庫當中。這不僅可以實現(xiàn)數(shù)據(jù)的分門別類存儲,同時也能夠充分利用各類數(shù)據(jù)。數(shù)據(jù)分區(qū)處理作為一種有效的數(shù)據(jù)處理技術,具體來講就是把通表數(shù)據(jù)有目的性的賦予到相關文件當中,以此來減輕大型表的壓力,明顯改善數(shù)據(jù)訪問功能,對系統(tǒng)運行實施優(yōu)化。數(shù)據(jù)分表處理技術就是依據(jù)系統(tǒng)已設定好的規(guī)則來有序構建各類數(shù)據(jù)表,有效緩解單表壓力。除此之外,電力企業(yè)也可以建造縱列式與并行式的數(shù)據(jù)庫,以此來大大提升數(shù)據(jù)的加載速率與查詢效率。
3 數(shù)據(jù)分析關鍵技術
在對大數(shù)據(jù)進行分析時,首先要將信號轉化成數(shù)據(jù),再對數(shù)據(jù)展開相應的處理與分析,形成有效的信息。其次,工作人員要對上述信息進行總結,并從中獲取相應的知識,以便為電力企業(yè)的日常管理工作與運行決策提供有價值的借鑒與參考。在大數(shù)據(jù)背景下,數(shù)據(jù)分析關鍵技術多運用于大型信息數(shù)據(jù)庫當中,可以幫助工作人員從龐大的信息數(shù)據(jù)中挖掘出隱藏的規(guī)律與形態(tài),進而對電力企業(yè)的日常運行狀況進行客觀的總結,并協(xié)助管理人員制定出更加具有針對性的決策,促進電力企業(yè)的健康發(fā)展。
4 分布式文件系統(tǒng)
分布式文件系統(tǒng)主要是指文件系統(tǒng)中的物理資源在服務器模式下,是可以不直接連接在本地節(jié)點上的,而是可以連接在更加先進的互聯(lián)網(wǎng)網(wǎng)絡與節(jié)點上。在實際應用中,分布式文件系統(tǒng)可以將相關文件數(shù)據(jù)存儲在分散存儲介質上,這不僅可以在一定程度上降低存儲成本,為文件訪問提供統(tǒng)一的訪問接口,同時也能夠大大提升其容錯性[2]。目前,隨著分布式文件系統(tǒng)的廣泛普及與應用,不僅有效解決數(shù)量龐大數(shù)據(jù)的存儲難這一難題,同時也可以憑借其自身所具備的全分布式架構、在線擴容減容、數(shù)據(jù)塊粒度切分以及復制備份等多項關鍵技術,穩(wěn)定支撐規(guī)模在PB級以上的數(shù)據(jù)在線存儲,以此來進一步增強大數(shù)據(jù)存儲的安全性、經濟性,實現(xiàn)存儲的可任意擴容性。
5 平臺架構內容
在業(yè)務系統(tǒng)大數(shù)據(jù)應用的管理、開發(fā)與處理等各個環(huán)節(jié)當中,大數(shù)據(jù)監(jiān)控平臺可以為其提供基礎的框架,框架內容主要涵蓋了數(shù)據(jù)整合、數(shù)據(jù)存儲、數(shù)據(jù)計算、數(shù)據(jù)分析、配置管理以及安全管理等若多個方面的,并且也能夠為業(yè)務應用提供多種形式的服務支撐。
數(shù)據(jù)整合:工作人員可以采用調取數(shù)據(jù)、實時采集數(shù)據(jù),對數(shù)據(jù)庫進行實時復制等一系列技術來從外部數(shù)據(jù)源中系統(tǒng)的采集與抽取結構化、半結構化以及非結構化數(shù)據(jù),同時也可以對數(shù)據(jù)進行實時與非實時的采集。
數(shù)據(jù)存儲:主要是負責大數(shù)據(jù)的存儲工作。簡單來講就是根據(jù)全數(shù)據(jù)類型與多樣化計算的要求,以快速查詢、讀取以及海量規(guī)模存儲為特征,將外部數(shù)據(jù)源中的數(shù)據(jù)完整的存儲起來,以此來為數(shù)據(jù)處理層的高級應用提供強大的數(shù)據(jù)支撐。
數(shù)據(jù)計算:不僅可以為各類大數(shù)據(jù)提供多種計算功能,例如流計算、查詢計算與內存計算等,同時也能夠實現(xiàn)分布式存儲數(shù)據(jù)與文件數(shù)據(jù)的計算與查詢。其中,流計算技術可以為工作人員提供實時分析處理的計算能力,進而有效實現(xiàn)實時預警與決策等。
數(shù)據(jù)分析:通過對各類數(shù)據(jù)的分析、加工與處理,可以將其轉換為有效的信息,從中挖開出新的業(yè)務價值,并為電力企業(yè)日后的業(yè)務指明方向,提供科學的決策依據(jù)。
平臺服務:主要是指對底層數(shù)據(jù)分析工具與組件等工作實施封裝后,充分發(fā)揮其在業(yè)務系統(tǒng)大數(shù)據(jù)應用期間的支撐作用,并提供相應的數(shù)據(jù)存儲、數(shù)據(jù)計算、數(shù)據(jù)分析與數(shù)據(jù)處理服務。
安全管理:在大數(shù)據(jù)環(huán)境下,安全管理就是指在數(shù)據(jù)采集、存儲與應用等多個環(huán)節(jié)中,需要進行身份驗證、授權以及輸入驗證答案等一系列安全問題。目前,由于數(shù)據(jù)包含著大量的信息,因此在對數(shù)據(jù)實施分析與處理時,就極易可能會涉及到一些與企業(yè)機密相關的數(shù)據(jù),為此,電力企業(yè)要想避免發(fā)生數(shù)據(jù)泄露與失竊等情況的發(fā)生,就要合理設置訪問權限等多種安全防護程度,以此來確保大數(shù)據(jù)存儲與處理的安全性[3]。
管理配置:主要是用來監(jiān)控大數(shù)據(jù)處理期間的各項性能指標,例如資源利用率、接口使用情況與整體運行狀態(tài)等,并可以及時排除關鍵系統(tǒng)險情,快速拓展應用功能,對大數(shù)據(jù)中的存儲資料與計算資源進行合理的配置與高效的管理。
結束語:
總而言之,電力企業(yè)要想在大數(shù)據(jù)背景下實現(xiàn)更好更快的發(fā)展,就要高度重視電力系統(tǒng)中文件數(shù)據(jù)的處理工作,從根本上保障數(shù)據(jù)存儲與處理的高效性與準確性。與此同時,電力企業(yè)也要積極構建系統(tǒng)的電力數(shù)據(jù)監(jiān)控平臺,熟練掌握其中的關鍵技術,以此來大大提升電力企業(yè)的數(shù)據(jù)存儲能力與分析能力,幫助企業(yè)更好的優(yōu)化系統(tǒng)結構,為企業(yè)管理決策提供更加有價值的參考與借鑒,進而進一步提升電力企業(yè)的經濟效益。
參考文獻:
[1]王興念,李宏偉,施振華,等.基于大數(shù)據(jù)的智能配電網(wǎng)運行監(jiān)控平臺關鍵技術研究與應用[J].電工技術,2017,(2):9-12.
[2]雷漢樟.解析大數(shù)據(jù)的智能配電網(wǎng)運行監(jiān)控平臺關鍵技術[J].通訊世界,2018,(8):116-117.
(國網(wǎng)重慶市電力公司璧山供電分公司,重慶 萬州 404100)