張明
(新疆石河子烏蘭烏蘇農(nóng)業(yè)氣象試驗(yàn)站,新疆 石河子832000)
關(guān)于歷史氣象資料存儲(chǔ)備份工作的幾點(diǎn)思考*
張明
(新疆石河子烏蘭烏蘇農(nóng)業(yè)氣象試驗(yàn)站,新疆 石河子832000)
本文介紹了縣級(jí)臺(tái)站氣象歷史備份資料整編工作的相關(guān)情況,并結(jié)合工作實(shí)踐,就如何做好氣象歷史資料備份工作,從資料的完備和準(zhǔn)確性、存儲(chǔ)方式、管理機(jī)制等方面進(jìn)行了探討,為氣象歷史資料備份工作的開展提供參考。
臺(tái)站;歷史氣象資料;存儲(chǔ)備份
氣象歷史資料是開展相關(guān)預(yù)報(bào)預(yù)測業(yè)務(wù)的重要基礎(chǔ),對(duì)于氣候變化、防災(zāi)減災(zāi)、國民經(jīng)濟(jì)等有著重要的作用,因此為了規(guī)范氣象歷史資料的存儲(chǔ)和備份,更好的為用戶提供氣象服務(wù),作者對(duì)國家級(jí)地面觀測自動(dòng)站數(shù)據(jù)資料、區(qū)域氣象自動(dòng)站數(shù)據(jù)資料、農(nóng)業(yè)氣象觀測資料等8類歷史備份資料進(jìn)行了全面的清理和整編。
在氣象歷史備份資料的整編工作過程中,作者遇到了不少問題,也正是在發(fā)現(xiàn)問題、分析問題、解決問題的過程中,不僅對(duì)資料的備份結(jié)構(gòu)、存儲(chǔ)方式、管理機(jī)制等有了更深入的了解,也總結(jié)出了一些經(jīng)驗(yàn)教訓(xùn)。本文結(jié)合自己的工作實(shí)際,就歷史資料備份工作的開展談幾點(diǎn)體會(huì),為氣象站歷史資料備份整編工作提供參考。
此次氣象歷史備份資料范圍涵蓋了最早從1980年起的6類氣象資料,涉及到的資料容量總計(jì)約3 t,具體整編資料清單如表1所示:
表1 整編資料清單
(1)國家級(jí)地面觀測自動(dòng)站資料包含了地面氣象觀測數(shù)據(jù)A文件、分鐘觀測數(shù)據(jù)J文件、地面氣象年報(bào)數(shù)據(jù)Y文件,20時(shí)對(duì)比觀測資料、新老站對(duì)比觀測資料、人工氣象觀測站與自動(dòng)氣象觀測站對(duì)比觀測資料等;(2)作物觀測資料包含了棉花、玉米、小麥等作物生長量觀測和生長狀況觀測資料。
氣象歷史資料的備份,不僅需要完整的收集整理相關(guān)資料,同時(shí)還需對(duì)資料源的準(zhǔn)確性進(jìn)行必要的甄別,在資料備份的工作中,可以通過注意以下問題,保證為資料的應(yīng)用提供完整準(zhǔn)確的數(shù)據(jù)源。
表2 常用存儲(chǔ)方式優(yōu)缺點(diǎn)對(duì)比
2.1 注意數(shù)據(jù)格式差異
由于觀測采集器及觀測軟件應(yīng)用程序的更替,存在文件命名方式及內(nèi)容等的差異,需要在備份整理的過程中加以重視[1-3]。(1)文件名是A051358.U99,該文件名是1980—1999年的命名方式。其中A0表示文件類型,51358表示臺(tái)站號(hào),U表示月份,99表示年份。(2)文件名是A5135801.004,該文件名是2000—2004年的命名方式。其中A表示文件類型,51358表示臺(tái)站號(hào),01表示月份,004表示年份;(3)圖右的文件命名方式是A51358-200501.TXT,該文件名是2005年—至今的命名方式。其中A表示文件類型,51358表示臺(tái)站號(hào),2005表示年份,01表示月份。
2.2 數(shù)據(jù)資料集中存儲(chǔ)
整編前的歷史備份資料雖然存放在專用的服務(wù)器磁盤上,但是存放比較分散和凌亂,同一種資料可能會(huì)分布在多個(gè)服務(wù)器中,且毫無規(guī)律性,如2005年的地面觀測歷史資料,需要從3個(gè)存儲(chǔ)服務(wù)器中進(jìn)行資料的收集和整理,給資料管理工作造成諸多的不便,因此,建議能夠根據(jù)資料的分類,對(duì)資料進(jìn)行相對(duì)集中的存儲(chǔ),并建立索引,提升工作的效率。
2.3 確保數(shù)據(jù)資料源的唯一性
在備份資料整編過程中,存在著資料重復(fù)存放的情況,即所需整編的資料,以同樣的格式和存儲(chǔ)結(jié)構(gòu)存放在不同的存儲(chǔ)介質(zhì)中,且對(duì)重復(fù)的資料沒有相關(guān)的說明,在經(jīng)過詢問相關(guān)經(jīng)手人員并對(duì)資料進(jìn)行甄別后,才確定了整編資料的來源。
因此,在資料存儲(chǔ)或備份時(shí),如果沒有明確的歸檔記錄或說明,需要保持備份資料的唯一性,以消除重復(fù)資料的二義性對(duì)資料備份工作造成的不便。
通過對(duì)備份資料的整編,也了解了一些數(shù)據(jù)存儲(chǔ)方式及介質(zhì),每種方式都有其優(yōu)缺點(diǎn),通過表2將常用存儲(chǔ)方式進(jìn)行對(duì)比,為選擇合適的存儲(chǔ)方式以科學(xué)高效的管理備份數(shù)據(jù)、延長存儲(chǔ)有效期提供參考。
目前資料備份工作在工作流程、業(yè)務(wù)人員、存儲(chǔ)環(huán)境、維護(hù)管理等方面還不是很完善,因此,建立有效的資料備份管理機(jī)制能夠?yàn)橘Y料備份工作的順利開展提供指導(dǎo)和依據(jù)。(1)明確歷史資料的備份的種類,明確資料格式,規(guī)范資料存儲(chǔ)結(jié)構(gòu),使歷史資料收集匯總工作更加統(tǒng)一規(guī)范,減少因?yàn)橘Y料分散、存在格式差異對(duì)工作效率的影響。(2)明確歷史資料備份的工作流程以及相關(guān)科室(人員)的職責(zé),確保歷史資料能夠順利的流轉(zhuǎn)和匯總。(3)明確歷史資料備份的臺(tái)帳管理辦法,建立相關(guān)的電子臺(tái)帳系統(tǒng),對(duì)每次再要備份的內(nèi)容、方式、時(shí)間等信息進(jìn)行登記備案,能夠?qū)浞葙Y料的狀態(tài)進(jìn)行監(jiān)控和追溯。(4)明確資料存儲(chǔ)的方式,對(duì)不同類型、不同存儲(chǔ)要求的資料,選擇合適的存儲(chǔ)方式及介質(zhì),對(duì)存儲(chǔ)的環(huán)境制定標(biāo)準(zhǔn)。同時(shí),制定資料超期存儲(chǔ)的閾值,定期對(duì)資料的存儲(chǔ)狀態(tài)進(jìn)行檢查,并進(jìn)行必要的重新備份。(5)加強(qiáng)對(duì)業(yè)務(wù)人員的培訓(xùn)工作,定期學(xué)習(xí)相關(guān)文件規(guī)范,對(duì)備份的對(duì)象進(jìn)行更新,確保歷史資料的備份工作能夠按照相關(guān)規(guī)范要求順利開展。
氣象歷史資料備份工作是一項(xiàng)長期開展的重要工作,在開展相關(guān)工作時(shí),不僅需要業(yè)務(wù)人員對(duì)資料情況有較深的了解,更需要認(rèn)真細(xì)致的工作態(tài)度,才能保證資料備份的完備、準(zhǔn)確;同時(shí)通過選擇合理的存儲(chǔ)方式,實(shí)施科學(xué)的管理機(jī)制,才能保證氣象歷史資料備份工作長期、規(guī)范的開展下去。
[1]龔靜,郭三剛.青海省氣象歷史資料網(wǎng)絡(luò)共享的安全管理[J].青??萍迹?010(05):72-74.
[2]封秀燕,何志軍,吳書成.面氣象觀測資料電子檔案的安全性[J].氣象科技,2013(02):282-285.
[3]大武,胡德奎,劉中策,等.自動(dòng)站數(shù)據(jù)資料實(shí)現(xiàn)硬盤、光盤備份[J].果洛科技,2006(01):25-28.
2016—04—19
*本文由中國氣象局烏蘭烏蘇綠洲農(nóng)田生態(tài)站資助。