淺談SAP系統(tǒng)數(shù)據(jù)歸檔

文/成龍 樊榮

淺談SAP系統(tǒng)數(shù)據(jù)歸檔

文/成龍 樊榮

本文對(duì)SAP系統(tǒng)數(shù)據(jù)歸檔的必要性進(jìn)行分析，探討了對(duì)SAP系統(tǒng)數(shù)據(jù)進(jìn)行數(shù)據(jù)歸檔的對(duì)策措施，對(duì)數(shù)據(jù)歸檔效益進(jìn)行了分析，為公司業(yè)務(wù)拓展提供了借鑒。

SAP系統(tǒng)數(shù)據(jù)；數(shù)據(jù)備份時(shí)間；數(shù)據(jù)步驟

一、為什么要對(duì)SAP系統(tǒng)進(jìn)行數(shù)據(jù)歸檔

隨著企業(yè)業(yè)務(wù)的快速發(fā)展以及對(duì)SAP系統(tǒng)應(yīng)用的深度挖掘，SAP系統(tǒng)數(shù)據(jù)庫(kù)的增長(zhǎng)速度不斷提高，數(shù)據(jù)規(guī)模不斷擴(kuò)大，逐漸就出現(xiàn)了如下問(wèn)題：

1.系統(tǒng)性能下降。用戶會(huì)發(fā)現(xiàn)系統(tǒng)部分重要業(yè)務(wù)的運(yùn)行時(shí)間平均增加了2～3倍，少數(shù)程序運(yùn)行時(shí)間增加達(dá)到5倍以上，已經(jīng)影響了用戶的業(yè)務(wù)處理。如錄入的業(yè)務(wù)數(shù)據(jù)涉及物料憑證（如表MSEG），運(yùn)行時(shí)間由原先的幾秒，增加到十幾甚至幾十秒，頓滯感覺(jué)明顯；每月財(cái)務(wù)部門運(yùn)行涉及會(huì)計(jì)科目（如表BSIS）的程序，運(yùn)行時(shí)間由初始的十幾分鐘延長(zhǎng)到3至5個(gè)小時(shí)；個(gè)別綜合類的報(bào)表，運(yùn)行時(shí)間由原先的2～3小時(shí)，變?yōu)楝F(xiàn)在的8～10小時(shí)，甚至于運(yùn)行30小時(shí)以上，信息嚴(yán)重滯后。作為系統(tǒng)的運(yùn)維團(tuán)隊(duì)，往往會(huì)針對(duì)用戶的抱怨協(xié)調(diào)內(nèi)外部資源，采取了調(diào)整系統(tǒng)參數(shù)、優(yōu)化程序等措施，但卻無(wú)法取得明顯效果。

2.數(shù)據(jù)備份時(shí)間增加。隨著數(shù)據(jù)庫(kù)數(shù)據(jù)量的增長(zhǎng)，SAP系統(tǒng)數(shù)據(jù)備份時(shí)間會(huì)不斷延長(zhǎng)，會(huì)占用更多的備份資源，會(huì)影響其他系統(tǒng)的備份操作。如很多企業(yè)采用每日在線備份策略，隨著備份時(shí)間的延長(zhǎng)，必須不斷調(diào)整SAP系統(tǒng)備份起始時(shí)間，當(dāng)備份時(shí)間增長(zhǎng)到一定范圍（如果超過(guò)10個(gè)小時(shí)）時(shí)，就可能完全擠占其他系統(tǒng)的備份時(shí)間，危及系統(tǒng)安全。同時(shí)，備份時(shí)間的延長(zhǎng)，也影響備份期間進(jìn)行的業(yè)務(wù)處理及后臺(tái)數(shù)據(jù)操作，影響了業(yè)務(wù)處理和信息的及時(shí)性。

3.存儲(chǔ)空間需求增加。為保證系統(tǒng)可靠運(yùn)行，企業(yè)的SAP系統(tǒng)采用三系統(tǒng)架構(gòu)，即開(kāi)發(fā)系統(tǒng)——測(cè)試系統(tǒng)——生產(chǎn)系統(tǒng)架構(gòu)；為滿足用戶培訓(xùn)及特殊測(cè)試需要，還部署了培訓(xùn)系統(tǒng)。測(cè)試系統(tǒng)、培訓(xùn)系統(tǒng)通常都是由生產(chǎn)系統(tǒng)COPY生成。為保證系統(tǒng)運(yùn)行，會(huì)分配給SAP系統(tǒng)各運(yùn)行環(huán)境一定存儲(chǔ)空間。當(dāng)生產(chǎn)系統(tǒng)數(shù)據(jù)量增長(zhǎng)時(shí)，就有可能造成系統(tǒng)存儲(chǔ)空間使用量成倍增長(zhǎng)，若不采取數(shù)據(jù)清理措施，則必須為系統(tǒng)分配新的存儲(chǔ)空間。

為解決上述問(wèn)題，保證SAP系統(tǒng)安全穩(wěn)定運(yùn)行，保障企業(yè)各項(xiàng)業(yè)務(wù)正常處理，企業(yè)需要采取有效措施，降低系統(tǒng)數(shù)據(jù)庫(kù)數(shù)據(jù)量，控制數(shù)據(jù)增長(zhǎng)，從而提高系統(tǒng)性能，提高數(shù)據(jù)備份效率，控制存儲(chǔ)空間增長(zhǎng)需求，減少后續(xù)備份設(shè)備和存儲(chǔ)設(shè)備投資。

通過(guò)實(shí)施SAP系統(tǒng)數(shù)據(jù)歸檔，可以將使用頻率低的歷史數(shù)據(jù)遷移到外部存儲(chǔ)，同時(shí)清理系統(tǒng)中的無(wú)效數(shù)據(jù)，是實(shí)現(xiàn)上述目的的一種成熟、可靠的技術(shù)方式。

二、如何對(duì)SAP系統(tǒng)數(shù)據(jù)進(jìn)行歸檔

1.數(shù)據(jù)的分類

這幾年，大數(shù)據(jù)這個(gè)詞頻繁被大家運(yùn)用。而筆者認(rèn)為所謂的大數(shù)據(jù)是在一定時(shí)間范圍內(nèi)、一定的穩(wěn)定環(huán)境下，通過(guò)收集、整理微觀的數(shù)據(jù)，來(lái)達(dá)到揭示宏觀發(fā)展趨勢(shì)的有效數(shù)據(jù)。因此，并不是說(shuō)歷史數(shù)據(jù)期間越長(zhǎng)越利于統(tǒng)計(jì)，越利于預(yù)測(cè)企業(yè)未來(lái)的發(fā)展需要。只有在穩(wěn)定的外部環(huán)境下，一定期間的數(shù)據(jù)才對(duì)企業(yè)的發(fā)展具有使用的價(jià)值。

筆者認(rèn)為，SAP系統(tǒng)的數(shù)據(jù)根據(jù)使用的頻率大致可以分為活躍數(shù)據(jù)、留存數(shù)據(jù)和死亡數(shù)據(jù)。

活躍數(shù)據(jù)是指在系統(tǒng)中經(jīng)常使用的數(shù)據(jù)，這部分?jǐn)?shù)據(jù)經(jīng)常用于查詢或者統(tǒng)計(jì)報(bào)表使用等活動(dòng)中。這類數(shù)據(jù)一般多用于日常查詢、月度的同比和環(huán)比以及年度的同比和環(huán)比，因此數(shù)據(jù)的活躍期大約在2年左右。

留存數(shù)據(jù)是指在系統(tǒng)中會(huì)偶然使用，大多數(shù)處于沉淀狀態(tài)，這部分?jǐn)?shù)據(jù)多用于數(shù)據(jù)統(tǒng)計(jì)和備查狀態(tài)，大約是指3～5年的數(shù)據(jù)。

死亡數(shù)據(jù)是指在系統(tǒng)中徹底沉淀，幾乎甚至完全不在使用的數(shù)據(jù)，而這部分?jǐn)?shù)據(jù)作為企業(yè)的寶貴財(cái)富又不能輕易刪除的數(shù)據(jù)。同時(shí)，這部分?jǐn)?shù)據(jù)可能會(huì)因?yàn)槠髽I(yè)的發(fā)展，流程的再造、重組和優(yōu)化后，與現(xiàn)有的業(yè)務(wù)略有不同。如果繼續(xù)作為決策依據(jù)，就可能對(duì)企業(yè)使用產(chǎn)生誤導(dǎo)，從而處于靜止或者死亡的狀態(tài)。這部分通常是指保存時(shí)間在5年以上的數(shù)據(jù)。

通過(guò)如上的分析，可以得出結(jié)論：數(shù)據(jù)并不是越多越好，并不是保存期間越長(zhǎng)的數(shù)據(jù)越有用?？梢酝ㄟ^(guò)一定的技術(shù)手段，把這部分進(jìn)行整理和遷移，釋放出所占有的空間，保證活躍數(shù)據(jù)和留存數(shù)據(jù)的使用效率。

2.數(shù)據(jù)的處理方法

目前，數(shù)據(jù)的處理方式主要可以分為如下四種：

（1）數(shù)據(jù)避免（Data Prevention）：將業(yè)務(wù)處理過(guò)程中不再需保存的數(shù)據(jù)，通過(guò)系統(tǒng)配置實(shí)現(xiàn)這類數(shù)據(jù)不再寫(xiě)入數(shù)據(jù)庫(kù)中，避免數(shù)據(jù)生成的手段。

（2）數(shù)據(jù)歸總（Data Summarization）：對(duì)于系統(tǒng)中過(guò)于明細(xì)的數(shù)據(jù)，在使用中完全不需要的數(shù)據(jù)，可以通過(guò)修改配置直接產(chǎn)生匯總后的數(shù)據(jù)。

（3）數(shù)據(jù)刪除（Data Deletion）：數(shù)據(jù)庫(kù)中完全沒(méi)有使用價(jià)值的冗余數(shù)據(jù)、垃圾數(shù)據(jù)及無(wú)效數(shù)據(jù)，可以在系統(tǒng)中直接刪除。

（4）數(shù)據(jù)歸檔（Data Archiving）：對(duì)于業(yè)務(wù)上已經(jīng)不再經(jīng)常使用的死亡數(shù)據(jù)，但是因?yàn)榉煞ㄒ?guī)、審計(jì)等的其他要求，或者不能直接完全刪除的數(shù)據(jù)，則可以通過(guò)數(shù)據(jù)歸檔的方式，將數(shù)據(jù)從數(shù)據(jù)庫(kù)中選取出來(lái)，進(jìn)行壓縮等必要處理后，遷移到外部存儲(chǔ)設(shè)備，以備查和長(zhǎng)期保存。

數(shù)據(jù)分析、策略和處理效果分析如下圖：

根據(jù)了解，四種數(shù)據(jù)處理的方式中，數(shù)據(jù)避免、匯總和刪除主要是針對(duì)局部數(shù)據(jù)，效果不是太明顯。而數(shù)據(jù)歸檔則是針對(duì)整個(gè)數(shù)據(jù)庫(kù)層面，將數(shù)據(jù)從數(shù)據(jù)庫(kù)中遷移處理，同時(shí)還可以按照既定的歸檔對(duì)象和歸檔條件，建立長(zhǎng)期穩(wěn)定的歸檔運(yùn)行計(jì)劃（AOP～Archiving Operation Plan），定期移出歸檔數(shù)據(jù)，即可保證數(shù)據(jù)量維持在一定的范圍。根據(jù)經(jīng)驗(yàn)一般數(shù)據(jù)歸檔后，可降低30%～50%數(shù)據(jù)空間，并保持?jǐn)?shù)據(jù)空間維持在一定范圍內(nèi)。

3.數(shù)據(jù)歸檔

（1）數(shù)據(jù)歸檔總體架構(gòu)

數(shù)據(jù)歸檔的目的是將SAP系統(tǒng)中訪問(wèn)頻率低的歷史數(shù)據(jù)遷移至外部存儲(chǔ)，以文檔的形式保存，同時(shí)建立系統(tǒng)訪問(wèn)歸檔數(shù)據(jù)的路徑。系統(tǒng)總體如下圖。

（2）數(shù)據(jù)的步驟：

1）選擇合適的歸檔對(duì)象。

通常情況下，可以通過(guò)配置SAP Solution Manager，得出分析報(bào)告，找出數(shù)據(jù)量較大或者增長(zhǎng)速度最快的表（Tables），得到數(shù)據(jù)處理的相關(guān)建議。從這些表里面分析得出需要?dú)w檔的對(duì)象（Object，例如，EKKO 是一個(gè)大的表屬于對(duì)象MM_EKKO = 采購(gòu)憑證），再與業(yè)務(wù)部門、相關(guān)職能部門一起確定數(shù)據(jù)歸檔項(xiàng)目的范圍。下圖舉例說(shuō)明歸檔對(duì)象的確定和處理方法：

2）歸檔數(shù)據(jù)處理及查詢。

歸檔數(shù)據(jù)處理及查詢就是利用SAP提供的數(shù)據(jù)歸檔開(kāi)發(fā)工具（ADK～Archive Development Kit），對(duì)已經(jīng)確定數(shù)據(jù)歸檔范圍內(nèi)的記錄，進(jìn)行選取、創(chuàng)建、刪除、遷移和讀取等相關(guān)操作。具體如下圖：

第一步選?。⊿election）：根據(jù)已確定的數(shù)據(jù)歸檔范圍，從歸檔對(duì)象所對(duì)應(yīng)的表中，找到符合條件的憑證，做選取標(biāo)識(shí)。

第二步創(chuàng)建（Creation）：將有標(biāo)識(shí)的數(shù)據(jù)讀取出來(lái)，壓縮處理后，寫(xiě)入歸檔文件，該文件以操作系統(tǒng)文件的形式存儲(chǔ)。

第三步刪除（Deletion）：從數(shù)據(jù)庫(kù)中刪除有標(biāo)識(shí)的記錄。

第四步遷移（Migration）：將歸檔文件遷移到外部存儲(chǔ)介質(zhì)中（如磁帶、光盤(pán)等）。

第五步讀?。≧etrieval）：通過(guò)SAP標(biāo)準(zhǔn)的T～code，或者SAP ADK將歸檔文件中的數(shù)據(jù)重新讀回到SAP中，進(jìn)行查詢。

后續(xù)再通過(guò)數(shù)據(jù)重組等操作，釋放出數(shù)據(jù)庫(kù)中磁盤(pán)空間，達(dá)到減少數(shù)據(jù)庫(kù)規(guī)模，提供系統(tǒng)使用效率的目的。

三、數(shù)據(jù)歸檔效益分析

通過(guò)對(duì)SAP系統(tǒng)數(shù)據(jù)庫(kù)數(shù)據(jù)的歸檔，可以更好地保證SAP系統(tǒng)穩(wěn)定運(yùn)行的需要，主要表現(xiàn)在：

1.提升系統(tǒng)性能，改善用戶體驗(yàn)

SAP系統(tǒng)歸檔后，部分歷史數(shù)據(jù)從數(shù)據(jù)庫(kù)中遷移出來(lái)，從而達(dá)到減少數(shù)據(jù)庫(kù)數(shù)據(jù)量的目的。實(shí)施數(shù)據(jù)歸檔后，系統(tǒng)整體性能提升預(yù)計(jì)在30%～40%之間，可以明顯改進(jìn)用戶體驗(yàn)，降低用戶業(yè)務(wù)處理時(shí)間，提高工作效率。

2.降低硬件投資

歸檔項(xiàng)目實(shí)施后，可節(jié)省30%～50%的磁盤(pán)空間，通過(guò)數(shù)據(jù)周期性歸檔，可以控制系統(tǒng)數(shù)據(jù)增長(zhǎng)，在目前的系統(tǒng)使用環(huán)境下，可以保證企業(yè)不再為SAP系統(tǒng)增加新的存儲(chǔ)投資。

3.降低系統(tǒng)運(yùn)行風(fēng)險(xiǎn)

數(shù)據(jù)歸檔后，預(yù)計(jì)可縮短40%～50%的備份時(shí)間，為進(jìn)一步完善數(shù)據(jù)備份機(jī)制提供了空間，可以有效防止備份失敗情況的發(fā)生，從而提高系統(tǒng)安全性，降低系統(tǒng)運(yùn)行風(fēng)險(xiǎn)。

（作者單位：中國(guó)航空油料集團(tuán)公司/解放軍后勤工程學(xué)院）

從1994年正式進(jìn)入中國(guó)30年來(lái)，SAP在中國(guó)已有300多家用戶?？导?、中國(guó)石化、紅塔集團(tuán)、中遠(yuǎn)集團(tuán)、海爾集團(tuán)、聯(lián)想集團(tuán)、長(zhǎng)虹集團(tuán)、一汽大眾、上海通用、李寧集團(tuán)、三菱電梯、上海浦發(fā)行這樣一大批行業(yè)領(lǐng)頭羊在深深意識(shí)到ERP重要性的同時(shí)，從與SAP的信息投入中獲得了巨大的經(jīng)濟(jì)回報(bào)。