邵 斌 劉建濤
(廊坊職業(yè)技術(shù)學(xué)院 河北 廊坊 065000)
(一)大數(shù)據(jù)采集技術(shù)。大數(shù)據(jù)技術(shù)的核心在于以衛(wèi)星遙感技術(shù)、傳感技術(shù)、射頻技術(shù)、物聯(lián)網(wǎng)技術(shù)以及移動平臺等多種技術(shù)手段,對所需的數(shù)據(jù)信息加以采集。在科學(xué)技術(shù)水平不斷提升,信息化技術(shù)全面發(fā)展的今天,生態(tài)環(huán)境的數(shù)據(jù)信息獲取方式也逐漸朝著多元化的方向發(fā)發(fā)展。采集的數(shù)據(jù)包含了地面數(shù)據(jù)、衛(wèi)星數(shù)據(jù)、地理信息數(shù)據(jù)、統(tǒng)計數(shù)據(jù)以及其他數(shù)據(jù)信息等諸多方面的內(nèi)容。而在數(shù)據(jù)采集技術(shù)的應(yīng)用之中,遙感技術(shù)往往會使空間信息技術(shù)的應(yīng)用提供更加全面的保障。從實際情況來看,能夠覆蓋到全球的生態(tài)環(huán)境檢測體系包含了衛(wèi)星遙感和地面監(jiān)測兩個類別,而在這之中,地面檢測網(wǎng)絡(luò)體系包含了氣象站檢測和全球環(huán)境監(jiān)督管理體系等諸多方面。地面氣象站監(jiān)測包含了100多種數(shù)據(jù)信息的來源,涉及到35000個氣象站點,云集了多個國家和地區(qū)的實時天氣數(shù)據(jù),能夠獲取云量、氣壓、風(fēng)速、風(fēng)向、溫度以及降水等多種數(shù)據(jù)信息。全球環(huán)境監(jiān)測網(wǎng)絡(luò)體系往往涵蓋了生態(tài)系統(tǒng)檢測、環(huán)境污染檢測等諸多方面內(nèi)容,能夠?qū)λ?、陸地的生態(tài)進(jìn)行監(jiān)督管理,并對環(huán)境的污染情況和環(huán)境質(zhì)量加以控制,對生態(tài)環(huán)境的要素和時空變化的情況有著更加合理的認(rèn)識。另一法方面,全世界也構(gòu)建了多個公民數(shù)據(jù)采集平臺,利用所有民眾的力量去收集環(huán)境數(shù)據(jù),從而達(dá)到完善生態(tài)環(huán)境監(jiān)測體系,提升數(shù)據(jù)完善性的作用。美國在BudBurst項目之中,就通過全美人民對植物生命周期的數(shù)據(jù)收集對綠色植物與環(huán)境變化之間的關(guān)系進(jìn)行了研究和分析,而我國生態(tài)環(huán)境保護(hù)部門也啟動了生態(tài)環(huán)境遙感大數(shù)據(jù)體系的建設(shè)活動,主要目的在于通過遙感大數(shù)據(jù)系統(tǒng)的建立推動生態(tài)環(huán)境保護(hù)效力的全面提升,目前已經(jīng)建立起具備2D和3D環(huán)境數(shù)據(jù)信息采集的,能夠覆蓋全國的生態(tài)環(huán)境監(jiān)督管理體系[1]。
(二)大數(shù)據(jù)處理技術(shù)。大數(shù)據(jù)的數(shù)據(jù)信息來源較為廣泛,數(shù)據(jù)的類型和處理方式也存在著較大的差異性,不同專家學(xué)者對于大數(shù)據(jù)技術(shù)的處理流程也進(jìn)行了全面的劃分。有些專家將其劃分成為了獲取、集成和分析三個階段,而有些專家則認(rèn)為其流程應(yīng)該包含了解釋說明和可視化等諸多階段。而在這個過程之中,數(shù)據(jù)存儲管理體系是升天環(huán)境大數(shù)據(jù)處理的關(guān)鍵所在,其應(yīng)該具備更強的兼容性和拓展性,同時要具有較強的先進(jìn)性與穩(wěn)定性,要能夠在多種復(fù)雜的條件之下加以應(yīng)用,進(jìn)而滿足不同數(shù)據(jù)體系的處理要求。目前主要的大數(shù)據(jù)文件處理系統(tǒng)包含了HDFS、GFS、CEPH以及Tachyon,相應(yīng)的數(shù)據(jù)庫體系則包含了Big Table、PNUTS以及Dynamo等,這些數(shù)據(jù)的來源結(jié)構(gòu)較為復(fù)雜,類型較多,數(shù)據(jù)預(yù)處理系統(tǒng)往往是采用了DataStage、Data Flux等方式對數(shù)據(jù)進(jìn)行處理,使其能夠得到初步的轉(zhuǎn)化,從而為后續(xù)的大數(shù)據(jù)全面處理奠定更加堅實的基礎(chǔ)。在后續(xù)的深入處理之中,包含了機(jī)器學(xué)習(xí)和智能化算法等諸多方面的內(nèi)容,而統(tǒng)計分析也包含了描述、相關(guān)性分析、回歸分析與劇烈分析等諸多分析方法,能夠為生態(tài)環(huán)境的監(jiān)督和控制提供有效的數(shù)據(jù)支持。這里要注意的是,生態(tài)環(huán)境數(shù)據(jù)本身就具有一定的獨特性和復(fù)雜性,涉及到的分析方法較多,需要全面應(yīng)用多種先進(jìn)的數(shù)據(jù)處理技術(shù)和地理信息處理軟件,而通過Meta分析技術(shù)和大數(shù)據(jù)信息挖掘技術(shù),也能夠使生態(tài)環(huán)境大數(shù)據(jù)得到全面的整合,進(jìn)而為生態(tài)環(huán)境管理決策的制定提供必要的依托。
大數(shù)據(jù)平臺是數(shù)據(jù)處理和分析的基礎(chǔ)所在,其平臺本身是以信息化管理體系為依據(jù),能夠?qū)Χ鄠€領(lǐng)域和系統(tǒng)之間的數(shù)據(jù)信息加以整合,迅速提取出更具價值的信息,進(jìn)而使生態(tài)環(huán)境的重大風(fēng)險預(yù)警能力與決策的科學(xué)性得到不斷提升,為生態(tài)環(huán)境的保護(hù)提供需求的數(shù)據(jù)。我國在生態(tài)環(huán)境大數(shù)據(jù)建設(shè)的規(guī)劃之中也提出了設(shè)置大數(shù)據(jù)環(huán)保云、大數(shù)據(jù)管理以及大數(shù)據(jù)應(yīng)用等諸多平臺的要求,以能源、經(jīng)濟(jì)和環(huán)境為核心,構(gòu)建了多種信息資源有機(jī)融合的數(shù)據(jù)管理體系。云計算作為當(dāng)前最新的大數(shù)據(jù)分析處理技術(shù),主要是以MapReduce和Hadoop為代表的數(shù)據(jù)分析基礎(chǔ)平臺,而我國江蘇省也通過物聯(lián)網(wǎng)技術(shù)與云計算技術(shù)的有機(jī)融合,實現(xiàn)了省內(nèi)生態(tài)數(shù)據(jù)信息的全面監(jiān)督與控制,為環(huán)境質(zhì)量監(jiān)督管理體系的構(gòu)建奠定了更加堅實的基礎(chǔ)。
(一)提升檢測的有效性。大數(shù)據(jù)技術(shù)能夠全面提升檢測的有效性,確保整個大區(qū)之內(nèi)的環(huán)境污染數(shù)據(jù)滿足互聯(lián)互通的要求,提升分析數(shù)據(jù)的優(yōu)化性,確保環(huán)境網(wǎng)格化監(jiān)控以及數(shù)據(jù)高效處理分析機(jī)制得到保障,對環(huán)境質(zhì)量評價指數(shù)加以實時顯示。舉例而言,我國相應(yīng)的專家與學(xué)者就提出了e-Science的大氣數(shù)據(jù)分析平臺,并在數(shù)據(jù)處理算法和結(jié)構(gòu)分析的基礎(chǔ)上,對數(shù)據(jù)系統(tǒng)開展了在線分析和計算,達(dá)到節(jié)省網(wǎng)絡(luò)帶寬的作用。而在自主學(xué)習(xí)的神經(jīng)網(wǎng)絡(luò)算法應(yīng)用之下,也能夠使大氣網(wǎng)格化監(jiān)控有效性得到不斷提升。通過Server-Client技術(shù)的應(yīng)用,能夠使多種遠(yuǎn)程的數(shù)據(jù)信息滿足可視化的要求,提升數(shù)據(jù)信息抽取和可視化診斷的質(zhì)量,同時也能夠在中國氣象信息綜合分析處理系統(tǒng)之中獲取多種問題的解決對策,使土壤相關(guān)數(shù)據(jù)信息監(jiān)測更具準(zhǔn)確性[2]。
(二)優(yōu)化數(shù)據(jù)分析評價。大數(shù)據(jù)技術(shù)能夠?qū)Χ喾N污染數(shù)據(jù)信息加以整合,通過對應(yīng)的軟件對數(shù)據(jù)監(jiān)督管理的方式加以分析。通過大數(shù)據(jù)技術(shù),能夠符合數(shù)字化信號處理、噪聲數(shù)據(jù)信息獲取以及監(jiān)測預(yù)警的基本要求,同時,在數(shù)據(jù)的批量處理之下,也能夠使多種問題得到實時性控制。我們也可以通過對水利系統(tǒng)、土壤數(shù)據(jù)庫系統(tǒng)的建立,以土壤流失方程和水利普查流程來開發(fā)水土流失的評價機(jī)制,進(jìn)而使大數(shù)據(jù)技術(shù)的應(yīng)用效力得到有效提升。而在我國提出“互聯(lián)網(wǎng)+”技術(shù)應(yīng)用理念之后,也對多種土壤環(huán)境數(shù)據(jù)信息進(jìn)行了提取和補充,在數(shù)據(jù)不斷對比和更新優(yōu)化之下,提升了土壤生態(tài)環(huán)境數(shù)字化評價的效力。在大數(shù)據(jù)技術(shù)之下,也能夠結(jié)合生態(tài)環(huán)境特征,對生態(tài)環(huán)境質(zhì)量和影響因素加以有效監(jiān)督管理,同時也可以根據(jù)多種生態(tài)環(huán)境體系,對區(qū)域土壤變化情況加以分析,結(jié)合多種大數(shù)據(jù)平臺提供的數(shù)據(jù)內(nèi)容,對不同地區(qū)的生態(tài)環(huán)境變化機(jī)制進(jìn)行峰分析,從而為后續(xù)管理有效性的提升提供必要的保障。
大數(shù)據(jù)技術(shù)的應(yīng)用雖然能夠全面提升數(shù)據(jù)監(jiān)測信息的有效性和便利性,能夠使監(jiān)測數(shù)據(jù)的分析評價效率得到保障,然而隨著人們對生態(tài)環(huán)境保護(hù)要求的不斷提升,數(shù)據(jù)的類型和量級也隨之提升,再加上大數(shù)據(jù)技術(shù)涉及到的領(lǐng)域眾多,導(dǎo)致很多數(shù)據(jù)信息缺乏有效的整合和應(yīng)用,同時其他領(lǐng)域的關(guān)聯(lián)性數(shù)據(jù)信息也沒有得到合理應(yīng)用,不同的生態(tài)環(huán)境要素有著更加動態(tài)化的特征,而環(huán)境污染的形式與原因也較為復(fù)雜,在構(gòu)建指標(biāo)評價體系時往往會受到人為因素的影響,導(dǎo)致指標(biāo)評價體系受到人為因素的影響,難以達(dá)到預(yù)期的功能和作用。因此,在未來,大數(shù)據(jù)技術(shù)在生態(tài)環(huán)境領(lǐng)域中的應(yīng)用將以提升與其他數(shù)據(jù)庫的協(xié)調(diào)性和兼容性違法發(fā)展發(fā)方向,不斷提升獲取數(shù)據(jù)信息的應(yīng)用質(zhì)量和應(yīng)用效率,考慮到多種生態(tài)環(huán)境要素的變化特點以及污染物的數(shù)據(jù)特征,通過必要的方式對其他相關(guān)體系的數(shù)據(jù)加以獲取,進(jìn)而使管理目標(biāo)和管理范圍的確定更能符合實際需求,提升評價法方法和評價模型構(gòu)建的合理性,使大數(shù)據(jù)的應(yīng)用價值和作用能夠得到充分發(fā)揮。
隨著時代的發(fā)展,科技的進(jìn)步,越來越多的先進(jìn)技術(shù)被應(yīng)用到生態(tài)環(huán)境領(lǐng)域之中,為我國生態(tài)環(huán)境保護(hù)工作的順利開展提供了必要的依托。而大數(shù)據(jù)技術(shù)的引入,能夠?qū)ι鷳B(tài)環(huán)境監(jiān)督管理之中獲取的海量數(shù)據(jù)信息加以挖掘和整合,確保多種有價值的信息得到合理利用,為我國生態(tài)環(huán)境決策管理的科學(xué)性和有效性提供了必要的保障。而這也就要求了我們能夠?qū)Υ髷?shù)據(jù)技術(shù)在生態(tài)環(huán)境領(lǐng)域的應(yīng)用進(jìn)行全面分析,明確大數(shù)據(jù)采集技術(shù)和大數(shù)據(jù)處理技術(shù)應(yīng)用的重點和要點,并明確大數(shù)據(jù)技術(shù)在生態(tài)環(huán)境領(lǐng)域中應(yīng)用的主要趨勢,從而推動大數(shù)據(jù)技術(shù)在我國生態(tài)環(huán)境保護(hù)領(lǐng)域的全面應(yīng)用。