馬妍
國網滄州供電公司
ERP系統(tǒng)歷史數據歸檔方案研究
馬妍
國網滄州供電公司
本文介紹了某省公司ERP系統(tǒng)現(xiàn)狀,開展ERP系統(tǒng)歷史數據歸檔工作,制立完善標準,形成常態(tài)機制,降低生產系統(tǒng)數據量,提升系統(tǒng)整體性能,確保系統(tǒng)安全穩(wěn)定運行。
ERP系統(tǒng);數據歸檔
某省公司ERP系統(tǒng)上線以來,數據日益遞增,歷史數據積壓過多,造成系統(tǒng)性能下降,數據庫備份恢復時間過長,存儲資源浪費。ERP系統(tǒng)數據歸檔就是以上幾個方面的平衡點,開展ERP系統(tǒng)歷史數據歸檔工作并實現(xiàn)常態(tài)化,已成為提高系統(tǒng)運行可靠性的必然要求。
ERP系統(tǒng)包括人資模塊、財務模塊、物資模塊、項目模塊與設備模塊五個業(yè)務模塊,以及BC模塊(系統(tǒng)管理)?;谀呈」綞RP系統(tǒng)現(xiàn)狀,物資模塊與BC模塊數據量最大,其次是財務模塊,人資模塊數據量較小,項目模塊與設備模塊數據量最小,且在數據查詢及變更方面無統(tǒng)一標準,因此項目模塊與設備模塊不建議歸檔。
2.1歸檔技術選型
ERP系統(tǒng)歸檔采用SAP原廠提供的SAP Data Archiving。
SAP Data Archiving的核心技術是ArchiveLink和Archive Development Kit(ADK)。ArchiveLink是SAP系統(tǒng)歸檔的重要組成部件,主要功能是對SAP系統(tǒng)數據進行存儲以及獲取系統(tǒng)外部的數據并為文檔提供接口,是集成在SAP應用服務器中的用于關聯(lián)業(yè)務對象數據和相關存儲在外部存儲介質中的歸檔文件的接口。ArchiveLink包括一系列數據接口和SAP數據庫中的引用表,這個引用表描述了業(yè)務對象和與之相關聯(lián)的歸檔文件的關系,并指向歸檔文件的存儲位置等信息。
ADK是SAP歸檔開發(fā)功能包,是數據歸檔解決方案的重要工具集合,負責控制和管理歸檔會話以及保證數據長久有效的保存,SAP系統(tǒng)通過ADK接口提供結構化數據的歸檔功能。ADK接口對用戶開放,為用戶定制結構化歸檔數據報告和自定義表和程序提供了歸檔解決方案。
SAP ArchiveLink用于監(jiān)視和控制ADK在內部存儲中創(chuàng)建歸檔文件。雖然ADK和ArchiveLink都可以在文件系統(tǒng)中存放和讀取歸檔數據,但對于ArchiveLink來說,ADK是一個把結構化數據轉化為外部文件的應用程序,對于ADK來說,ArchiveLink是用來最終存儲ADK歸檔文件的手段。
2.2數據存儲選擇
歸檔數據的存儲介質可以是磁帶、磁盤、光盤,存儲介質的選擇和項目的實施目標以及業(yè)務部門的實際需求相關,可以選擇其中一種做為存儲介質,也可以通過存儲系統(tǒng)將多種介質組合使用。
2.3數據歸檔策略
在業(yè)務和技術方面建立整體的歸檔概念,在此基礎上建立一個周期性的歸檔計劃和執(zhí)行策略。歸檔計劃實施前要充分調研,明確用戶對查詢功能的需求,對標準程序和自開發(fā)程序要提前確定增強方案和歸檔文件的訪問方案;同時要計算并評估出歸檔數據的存儲空間大小。
2.4接口及報表調整
2.4.1程序分析:(1)按模塊導出所有程序清單。(2)關鍵用戶從清單中將選擇需要使用的程序。(3)業(yè)務顧問配合關鍵用戶根據業(yè)務分析程序是否需要讀取歸檔數據。(4)代碼層面上分析程序是否會讀取歸檔數據。(5)測試并最后確定受影響的程序。
2.4.2程序修改
(1)非歸檔數據查詢
僅用于非歸檔數據查詢的報表,采用原報表程序生成,無需進行程序修改。
(2)歸檔數據查詢
對于涉及歸檔數據查詢的報表,建議對原報表程序進行修改,在程序內增加條件判斷:①如查詢條件不在歸檔范圍內,則沿用原報表程序生成報表;②如查詢條件涉及部分歸檔數據,則分別對生產環(huán)境和歸檔文件進行查詢:對歸檔范圍內的數據依據查詢條件從歸檔文件中讀取至歸檔數據表(內表),并將SQL FROM語句改為從內表中讀??;對未歸檔的數據采用原報表程序直接查詢。最后將兩部分數據合并后生成報表。
歸檔數據讀取具體修改辦法有如下三種:①從歸檔索引表讀取。在程序中取數邏輯部分,當選擇條件字段和獲取數據的字段均能從歸檔對象對應的索引表獲取時,可以改為從歸檔索引表中獲取已歸檔的數據,未歸檔數據按照原邏輯選取。②根據索引表從歸檔文件中讀取數據。在程序中取數邏輯部分,當選擇條件字段和獲取數據的字段不完全能從歸檔對象對應的索引表中獲取時,此時需要從歸檔文件中獲取已歸檔的數據,而未歸檔數據按照原邏輯選取。③直接從歸檔文件中讀取數據至內表。歸檔后,修改程序取數邏輯部分時,首先調用相關函數讀取出歸檔對象文件的所有記錄存放于內表中,然后跟原報表要求的邏輯對內表中的數據進行處理。
2.4.3接口調整
目前ERP系統(tǒng)大部分對外接口僅提供實時數據,并不涉及歷史數據。小部分對外接口,暫定義為XX系統(tǒng)接口等,需要抽取ERP系統(tǒng)目標數據表全量數據的,建議對該業(yè)務數據不做歸檔。如對有歷史數據抽取需求的數據表進行了歷史數據歸檔,可能導致接口無法取到已歸檔部分的數據信息。
2.4.4歸檔數據篩選與修改
被歸檔的數據需確認屬于一個完成的流程或業(yè)務模塊,如歸檔對象部分數據仍被當前的流程所需(未完結數據),就需要將該部分數據篩選取出。
操作風險。ERP系統(tǒng)歷史數據歸檔操作過程中,存在由于誤操作造成數據丟失、數據庫服務異常等風險,應采取操作前檢查備份、操作中監(jiān)督監(jiān)控、操作后一一驗證的方式,降低人為操作風險。
應急預案。應編制相應的應急處置方案,明確應急處置流程,并成立應急處置專項小組,落實相關組織領導及技術人員,保證風險情況發(fā)生時,能夠快速響應,開展應急搶修,最大程度降低風險影響范圍、縮短故障恢復時間。
通過分析某省公司ERP系統(tǒng)現(xiàn)狀,充分利用現(xiàn)有資源,考慮業(yè)務管理需求、數據庫性能、存儲空間大小、數據增長速度等因素,采用先進的技術和工具,制定符合業(yè)務需求的歷史數據歸檔方案,確保現(xiàn)有系統(tǒng)業(yè)務數據的完整性、準確性、延續(xù)性。
[1]丁勇.數據歸檔在ERP系統(tǒng)中的應用[J].網管員世界,2010(10)
[2]云霄.基于ERP系統(tǒng)結構化數據歸檔技術方案研究[J].北京檔案科技信息,2014(7)