智能電網(wǎng)大數(shù)據(jù)處理技術(shù)現(xiàn)狀與挑戰(zhàn)

劉義德　梁堅(jiān)

摘 要：經(jīng)濟(jì)的飛速發(fā)展及科學(xué)技術(shù)的不斷進(jìn)步，在給人們帶來利益的同時(shí)也使得全球能源問題日益嚴(yán)重。在這樣的一個(gè)時(shí)代大背景下，世界上各個(gè)國家都開展了智能電網(wǎng)的研究工作。經(jīng)過長(zhǎng)時(shí)間的發(fā)展，智能電網(wǎng)技術(shù)已經(jīng)得到了前所未有的提高，并向著更高的目標(biāo)邁進(jìn)，努力使智能電網(wǎng)覆蓋整個(gè)電力系統(tǒng)，主要包括發(fā)電、輸電及變電等。但是這并不意味著現(xiàn)如今我們?cè)谥悄茈娋W(wǎng)的應(yīng)用中沒有任何的障礙，可以說在智能電網(wǎng)的使用方面我們還存在著一定的不足和很大的發(fā)展空間，特別是智能電網(wǎng)的大數(shù)據(jù)處理技術(shù)，眾所周知，智能電網(wǎng)需要全景的狀態(tài)數(shù)據(jù)。智能電網(wǎng)在運(yùn)行的過程中或者是在檢修的狀態(tài)下會(huì)產(chǎn)生大數(shù)據(jù)，如何能夠高效的、快速的進(jìn)行處理、存儲(chǔ)和訪問也是一直以來困擾我們的問題，單單從這一角度來講，智能電網(wǎng)的發(fā)展在現(xiàn)階段存在著太多的機(jī)遇與挑戰(zhàn)，而要在這樣的現(xiàn)狀下迎難而上創(chuàng)造更多的利潤首先我們應(yīng)當(dāng)做到的就是正確認(rèn)識(shí)現(xiàn)如今智能電網(wǎng)發(fā)展的現(xiàn)狀和存在的挑戰(zhàn)。

關(guān)鍵詞：智能電網(wǎng)；大數(shù)據(jù)處理技術(shù)；現(xiàn)狀；挑戰(zhàn)

目前，大數(shù)據(jù)已經(jīng)成為了人們討論的重要的話題，這主要是因?yàn)樵朴?jì)算的廣泛應(yīng)用，云計(jì)算的廣泛應(yīng)用會(huì)產(chǎn)生大量的，豐富的異構(gòu)數(shù)據(jù)。而為了更好的、更加高效的處理這些數(shù)據(jù)，各界都提出了相關(guān)的方法，并進(jìn)行了進(jìn)一步深入地研究同時(shí)在相關(guān)層面投入了大量的資金，就拿谷歌這一家公司來說，僅僅2009年這一年的時(shí)間內(nèi)在大數(shù)據(jù)業(yè)務(wù)方面對(duì)美國的經(jīng)濟(jì)投入就已經(jīng)達(dá)到了540億USD，而這僅僅是其在大數(shù)據(jù)層面投入的一部分而已。谷歌也絕不是唯一在相關(guān)方面投入如此巨大的企業(yè)，類似的還有淘寶、百度等，很多的大企業(yè)在相關(guān)方面都投入了巨資，而使他們投入巨大資金的原因就在于，在智能電網(wǎng)中大數(shù)據(jù)產(chǎn)生于各個(gè)環(huán)節(jié)，更好的利用智能電網(wǎng)就要求我們更好的處理和應(yīng)用這些大數(shù)據(jù)，隨著近幾年的發(fā)展，從全球角度來看，我們的智能電網(wǎng)大數(shù)據(jù)處理技術(shù)已經(jīng)得到了很大程度上的提升，一些技術(shù)已經(jīng)走向了成熟期，但是不可否認(rèn)的是，我們還有很大的發(fā)展空間，如何促進(jìn)相關(guān)技術(shù)的進(jìn)一步的成熟，首先我們應(yīng)當(dāng)做到的是了解智能電網(wǎng)大數(shù)據(jù)處理技術(shù)的現(xiàn)狀和我們面臨的一系列的挑戰(zhàn)。

1 智能電網(wǎng)大數(shù)據(jù)能處理技術(shù)現(xiàn)狀

1.1 智能電網(wǎng)中的大數(shù)據(jù)

智能電網(wǎng)中存在或產(chǎn)生的大數(shù)據(jù)主要是以下的三個(gè)部分，第一是電網(wǎng)運(yùn)行和設(shè)備檢測(cè)數(shù)據(jù)，這在整個(gè)智能電網(wǎng)數(shù)據(jù)處理的內(nèi)容中是十分重要的且內(nèi)容和程序方面都較為復(fù)雜；第二是電力企業(yè)營銷數(shù)據(jù)，這也是最為關(guān)鍵的一個(gè)部分，很多企業(yè)都在相關(guān)的層面進(jìn)行了大量的投資；第三是電力企業(yè)管理數(shù)據(jù)。這三個(gè)方面相互連接并組成一個(gè)整體同時(shí)不容分割，但是很多專家以及相關(guān)技術(shù)人員不愿意采取這樣的劃分的方法，他們更加傾向于根據(jù)數(shù)據(jù)的內(nèi)在的結(jié)構(gòu)進(jìn)行一個(gè)新的劃分，通過這樣的劃分方法就可以清楚的劃分為兩個(gè)部分，第一部分是結(jié)構(gòu)化的數(shù)據(jù)，這一部分的數(shù)據(jù)主要的部分是關(guān)系數(shù)據(jù)庫中的數(shù)據(jù)，這也是現(xiàn)如今的電力系統(tǒng)中的主要數(shù)據(jù)形式：第二部分是非結(jié)構(gòu)化的數(shù)據(jù)，非結(jié)構(gòu)化數(shù)據(jù)顧名思義是指不方便用數(shù)據(jù)庫二維邏輯來進(jìn)行展示的數(shù)據(jù)。從智能電網(wǎng)的使用過程來看，非結(jié)構(gòu)化的數(shù)據(jù)往往會(huì)占有更大的比重，這也是人們?cè)絹碓街匾晫?duì)非結(jié)構(gòu)化數(shù)據(jù)的處理的一個(gè)重要原因。

1.2 大數(shù)據(jù)處理技術(shù)的復(fù)雜性

作為社會(huì)上各行各業(yè)所密切關(guān)注的重要問題，可以說智能電網(wǎng)大數(shù)據(jù)處理技術(shù)不僅僅是科學(xué)技術(shù)界所密切關(guān)注和研討的問題，更加重要的是，它與經(jīng)濟(jì)發(fā)展越來越密切相關(guān)，例如谷歌、百度以及淘寶等商家都紛紛投入了大量的資金進(jìn)行相關(guān)發(fā)面的改進(jìn)和發(fā)展，可以說智能電網(wǎng)大數(shù)據(jù)處理技術(shù)的提高能夠在很大程度上促進(jìn)經(jīng)濟(jì)的發(fā)展，但是我們不能只是一味的追尋目標(biāo)，而是應(yīng)當(dāng)更多地關(guān)注智能電網(wǎng)大數(shù)據(jù)處理技術(shù)其自身的復(fù)雜性，可以說，現(xiàn)如今我們所使用和研發(fā)的智能電網(wǎng)大數(shù)據(jù)處理技術(shù)處于一個(gè)喜憂參半的發(fā)展?fàn)顩r，可喜之處是隨著近幾年來各行各界關(guān)注的增加以及資金投入量的不斷增加和相關(guān)技術(shù)的進(jìn)一步發(fā)展，在智能聯(lián)網(wǎng)大數(shù)據(jù)處理方面我們得到了前所未有的提升和改善，但是其復(fù)雜性又決定了我們?cè)谙嚓P(guān)方面的發(fā)展還是遠(yuǎn)遠(yuǎn)不夠的，根據(jù)最新的調(diào)查顯示和一系列的數(shù)據(jù)以及推論來看，目前全球數(shù)據(jù)的處理能力已經(jīng)很難滿足數(shù)據(jù)大幅度的增長(zhǎng)，在這里我們以淘寶為例，淘寶的每天平均的交易數(shù)額為10TB；eBay，而分析平臺(tái)每日處理的數(shù)據(jù)則高達(dá)100PB，這一數(shù)據(jù)是十分巨大的，為了更好的處理這些數(shù)據(jù)，淘寶在相關(guān)的方面也進(jìn)行了巨大的投資，雖然淘寶在相關(guān)方面進(jìn)行了大量的投入，但更為重要的是，他們也因此獲得了巨額的回報(bào)。與大數(shù)據(jù)在商業(yè)界使用的現(xiàn)狀相比，大數(shù)據(jù)在智能電網(wǎng)方面的應(yīng)用則更加具有復(fù)雜性，雖然云計(jì)算平臺(tái)具有成本低、儲(chǔ)存量大的優(yōu)勢(shì)，但是在實(shí)時(shí)性方面卻很難得到進(jìn)一步保證，同時(shí)，在數(shù)據(jù)規(guī)模不斷擴(kuò)大的今天，數(shù)據(jù)的多樣性也在進(jìn)一步加強(qiáng)，這也使得智能電網(wǎng)大數(shù)據(jù)處理技術(shù)的現(xiàn)狀更為復(fù)雜。

2 智能電網(wǎng)大數(shù)據(jù)處理技術(shù)面臨的機(jī)遇和挑戰(zhàn)

智能電網(wǎng)大數(shù)據(jù)處理技術(shù)面臨的機(jī)遇和挑戰(zhàn)主要是以下的幾個(gè)方面：第一，大數(shù)據(jù)的傳輸和處理技術(shù)，這也是最為重要的一個(gè)部分，隨著智能電網(wǎng)技術(shù)的進(jìn)一步提升和發(fā)展，在整個(gè)的系統(tǒng)中，大量數(shù)據(jù)和存儲(chǔ)技術(shù)已經(jīng)受到了更多的關(guān)注，而為了解決這一問題，我們往往會(huì)采取對(duì)數(shù)據(jù)進(jìn)行壓縮的方式，而如何進(jìn)行高效的、完整的壓縮，提高壓縮的技術(shù)是我們面臨的挑戰(zhàn)之一。第二，實(shí)時(shí)數(shù)據(jù)處理技術(shù)，處理速度一直是相關(guān)人員所密切關(guān)注的問題之一，高效、快速的處理速度可以使整個(gè)過程的效率大大提升，而提升處理速度我們就不得不提到一個(gè)有效的并被廣泛應(yīng)用的方法，那就是內(nèi)存數(shù)據(jù)庫，正確的使用內(nèi)存數(shù)據(jù)庫能夠更好的提升整個(gè)處理系統(tǒng)的實(shí)效性，但相關(guān)的使用方面以及內(nèi)存數(shù)據(jù)庫自身還有著較大的發(fā)展和提升的空間，如果內(nèi)存數(shù)據(jù)庫能夠得到進(jìn)一步的完善，將會(huì)大大提升數(shù)據(jù)處理的實(shí)效性。第三就是異構(gòu)多數(shù)據(jù)源處理技術(shù)，隨著智能電網(wǎng)的進(jìn)一步的發(fā)展，我們對(duì)于智能電網(wǎng)的要求也越來越高，不僅僅滿足于現(xiàn)階段的發(fā)展，而是要求其能夠貫穿發(fā)電、變電、輸電等多個(gè)環(huán)節(jié)，而要做到這一點(diǎn)我們首先應(yīng)當(dāng)做到的是實(shí)現(xiàn)大規(guī)模的、多元結(jié)構(gòu)的一個(gè)數(shù)據(jù)的整合，可以說在相關(guān)的技術(shù)層面我們做的還遠(yuǎn)遠(yuǎn)不夠，要進(jìn)一步提升相關(guān)技術(shù)還需要不斷的研究和發(fā)展。

3 結(jié)束語

從現(xiàn)如今的發(fā)展?fàn)顩r我們可以進(jìn)行一個(gè)大膽的推測(cè)，未來的智能電網(wǎng)一定是依托大數(shù)據(jù)處理技術(shù)的全景實(shí)時(shí)電網(wǎng)，在相關(guān)方面，各行各界已經(jīng)做出了巨大的努力和投入，可以說隨著近幾年的發(fā)展，我們?cè)谙嚓P(guān)的領(lǐng)域已經(jīng)有了很大的提升，但是不可否認(rèn)的是我們還存在著一些不足，而要推動(dòng)其進(jìn)一步的發(fā)展就要求我們能夠在認(rèn)清現(xiàn)狀的情況下抓住機(jī)遇迎接挑戰(zhàn)，從而促進(jìn)相關(guān)技術(shù)的進(jìn)一步的提高。

參考文獻(xiàn)

[1]宋亞奇，周國亮，朱永利.智能電網(wǎng)大數(shù)據(jù)處理技術(shù)現(xiàn)狀與挑戰(zhàn)[J].電網(wǎng)技術(shù)，2013，4：927-935.

[2]孫峰，錢嘯，曾建梁，等.基于大數(shù)據(jù)理念的地市供電公司智能電網(wǎng)規(guī)劃數(shù)據(jù)融合研究[A].中國電力企業(yè)聯(lián)合會(huì)科技開發(fā)服務(wù)中心.電力行業(yè)信息化優(yōu)秀論文集2014-2014年全國電力行業(yè)兩化融合推進(jìn)會(huì)暨全國電力企業(yè)信息化大會(huì)獲獎(jiǎng)?wù)撐腫C].中國電力企業(yè)聯(lián)合會(huì)科技開發(fā)服務(wù)中心，2014：6.