淺論災(zāi)備系統(tǒng)在現(xiàn)代企業(yè)IT管理中的應(yīng)用

張操

（國(guó)家電投集團(tuán)貴州金元股份有限公司，貴州 貴陽(yáng) 551800）

1 引言

現(xiàn)代企業(yè)基本都以集中部署分級(jí)應(yīng)用的方式展開(kāi)信息化應(yīng)用，當(dāng)ERP系統(tǒng)成為企業(yè)生產(chǎn)經(jīng)營(yíng)管理重要支撐時(shí)，信息系統(tǒng)和數(shù)據(jù)就成為企業(yè)核心資產(chǎn)，對(duì)數(shù)據(jù)實(shí)施連續(xù)性安全保護(hù)是必要的、迫切的，它是企業(yè)連續(xù)運(yùn)作、規(guī)避風(fēng)險(xiǎn)、健康發(fā)展的要求，是企業(yè)進(jìn)行全球化戰(zhàn)略布局、成為世界級(jí)企業(yè)的要求，也是行業(yè)、法規(guī)遵從性的要求。通過(guò)一系列災(zāi)備系統(tǒng)的建設(shè)和計(jì)劃行為，實(shí)現(xiàn)當(dāng)關(guān)鍵系統(tǒng)發(fā)生災(zāi)難時(shí)能夠快速恢復(fù)，實(shí)現(xiàn)無(wú)數(shù)據(jù)丟失的災(zāi)難保護(hù)，實(shí)現(xiàn)業(yè)務(wù)連續(xù)性目標(biāo)。災(zāi)備系統(tǒng)涉及眾多計(jì)算機(jī)技術(shù)及眾多廠商的各類解決方案，所以容災(zāi)是一種科技含量較高的特殊IT運(yùn)維管理，項(xiàng)目實(shí)施的關(guān)鍵，在于建立災(zāi)備系統(tǒng)有關(guān)的常態(tài)管理流程，建立配套應(yīng)急管理預(yù)案，建立科學(xué)的人員、資源組織管理流程。

2 關(guān)鍵業(yè)務(wù)信息系統(tǒng)現(xiàn)狀

企業(yè)ERP系統(tǒng)的應(yīng)用、數(shù)據(jù)服務(wù)集中部署，建大集中應(yīng)用承載數(shù)據(jù)中心，建基礎(chǔ)網(wǎng)絡(luò)，包括辦公局域網(wǎng)、數(shù)據(jù)中心局域網(wǎng)、企業(yè)廣域網(wǎng)，ERP系統(tǒng)部署于企業(yè)數(shù)據(jù)中心，公司本部、所屬單位廣域網(wǎng)互聯(lián)互通，本部通過(guò)辦公網(wǎng)使用ERP，所屬單位通過(guò)廣域網(wǎng)使用ERP。ERP系統(tǒng)應(yīng)用現(xiàn)狀參見(jiàn)圖1。

ERP硬件系統(tǒng)主要是后端存儲(chǔ)、前端服務(wù)器及用戶網(wǎng)絡(luò)，包括存儲(chǔ)陣列、8Gbps FC存儲(chǔ)網(wǎng)絡(luò)、10Gbit/s以太網(wǎng)絡(luò)，具體配置如下。

（1）數(shù)據(jù)庫(kù)服務(wù)器由2臺(tái)高配小機(jī)組成，2臺(tái)分別作為Oracle RAC的2個(gè)運(yùn)算節(jié)點(diǎn)，運(yùn)行Oracle 10g RAC，通過(guò)8Gbps FC存儲(chǔ)網(wǎng)訪問(wèn)共享存儲(chǔ)陣列。（2）WEB應(yīng)用服務(wù)器由2臺(tái)高配x86 PC服務(wù)器組成。（3）采用Oracle腳本邏輯導(dǎo)出的方式，每天備份ERP系統(tǒng)數(shù)據(jù)，同時(shí)存儲(chǔ)在備份磁盤陣列及備份磁帶庫(kù)。

3 關(guān)鍵系統(tǒng)數(shù)據(jù)安全風(fēng)險(xiǎn)

（1）通過(guò)Oracle腳本進(jìn)行數(shù)據(jù)備份，人工操作效率低，備份文件管理效率低，易發(fā)生備份文件錯(cuò)亂，無(wú)法保證數(shù)據(jù)恢復(fù)的準(zhǔn)確性和高效率。（2）ERP系統(tǒng)承載了企業(yè)生產(chǎn)經(jīng)營(yíng)財(cái)務(wù)等核心業(yè)務(wù)，災(zāi)難發(fā)生時(shí)Oracle腳本恢復(fù)數(shù)據(jù)需數(shù)小時(shí)，不能滿足業(yè)務(wù)連續(xù)性要求。（3）由于腳本備份僅實(shí)現(xiàn)了數(shù)據(jù)備份，缺少裸系統(tǒng)和數(shù)據(jù)平臺(tái)備份，災(zāi)難發(fā)生時(shí)需重建系統(tǒng)和數(shù)據(jù)平臺(tái)，不能實(shí)現(xiàn)快速恢復(fù)。（4）存儲(chǔ)存在單點(diǎn)故障，主存儲(chǔ)發(fā)生故障會(huì)導(dǎo)致系統(tǒng)崩潰、數(shù)據(jù)丟失、服務(wù)停止，對(duì)企業(yè)生產(chǎn)經(jīng)營(yíng)造成極大的損失。沒(méi)有災(zāi)難備用資源，不能短時(shí)間恢復(fù)系統(tǒng)運(yùn)行。

4 關(guān)鍵系統(tǒng)數(shù)據(jù)災(zāi)難備份解決思路

針對(duì)以上關(guān)鍵系統(tǒng)存在的安全隱患和風(fēng)險(xiǎn)，分階段體系化建設(shè)災(zāi)備系統(tǒng)，逐步提高并不斷強(qiáng)化對(duì)關(guān)鍵系統(tǒng)的數(shù)據(jù)保護(hù)。

第一階段：關(guān)鍵系統(tǒng)應(yīng)用初期，業(yè)務(wù)量、數(shù)據(jù)量、訪問(wèn)量都不大，結(jié)合企業(yè)IT資源現(xiàn)狀，確定一期災(zāi)備系統(tǒng)指標(biāo)RPO≤2小時(shí)，RTO≤8小時(shí)。

第二階段：隨著應(yīng)用深度和范圍不斷擴(kuò)大，業(yè)務(wù)量、數(shù)據(jù)量、訪問(wèn)量持續(xù)增加，信息系統(tǒng)逐漸成為企業(yè)生產(chǎn)經(jīng)營(yíng)的重要支撐，災(zāi)備系統(tǒng)的重要性凸顯，在一期的基礎(chǔ)上，二期災(zāi)備系統(tǒng)指標(biāo)RPO=0，數(shù)據(jù)任意點(diǎn)時(shí)間恢復(fù)。

4.1 一期災(zāi)備系統(tǒng)建設(shè)

（1）建立自動(dòng)化集中備份管理機(jī)制，采用專業(yè)備份管理軟件，對(duì)關(guān)鍵系統(tǒng)的數(shù)據(jù)和環(huán)境，實(shí)現(xiàn)自動(dòng)化、專業(yè)化備份，并同時(shí)保存在備份陣列和磁帶庫(kù)，還實(shí)現(xiàn)了對(duì)非關(guān)鍵系統(tǒng)的備份。（2）建立裸系統(tǒng)快速恢復(fù)環(huán)境，當(dāng)ERP服務(wù)器發(fā)生系統(tǒng)錯(cuò)誤崩潰不能啟動(dòng)時(shí)，可快速恢復(fù)系統(tǒng)備份映像。（3）建立災(zāi)難備用環(huán)境和恢復(fù)測(cè)試環(huán)境，當(dāng)關(guān)鍵系統(tǒng)發(fā)生故障而短時(shí)間無(wú)法修復(fù)，備用環(huán)境可臨時(shí)替代生產(chǎn)環(huán)境，恢復(fù)關(guān)鍵系統(tǒng)應(yīng)用，備用環(huán)境也可作為備份恢復(fù)數(shù)據(jù)驗(yàn)證和災(zāi)難恢復(fù)演練使用。（4）選擇美國(guó)賽門鐵克（Symantec）公司的NetBackup作為一期關(guān)鍵產(chǎn)品，新增一臺(tái)小機(jī)作為災(zāi)難備用硬件，同時(shí)作為AIX、Linux等異構(gòu)系統(tǒng)的裸機(jī)恢復(fù)環(huán)境，一期拓?fù)湟?jiàn)圖2。

圖2 企業(yè)核心業(yè)務(wù)ERP系統(tǒng)一期容滅項(xiàng)目建成

4.2 二期災(zāi)備系統(tǒng)建設(shè)

在一期災(zāi)備系統(tǒng)基礎(chǔ)上，為達(dá)到更高級(jí)別的數(shù)據(jù)保護(hù)，更高的業(yè)務(wù)連續(xù)性，引入業(yè)界CDP技術(shù)的產(chǎn)品和系統(tǒng)實(shí)現(xiàn)，具有連續(xù)數(shù)據(jù)保護(hù)CDP功能的解決方案有：（1）磁盤陣列復(fù)制技術(shù)。（2）主機(jī)層復(fù)制技術(shù)。（3）數(shù)據(jù)庫(kù)復(fù)制技術(shù)。（4）應(yīng)用層復(fù)制技術(shù)。（5）第三方存儲(chǔ)復(fù)制，系統(tǒng)通過(guò)同構(gòu)或異構(gòu)磁盤陣列來(lái)實(shí)現(xiàn)數(shù)據(jù)復(fù)制，同時(shí)提供數(shù)據(jù)復(fù)制管理功能。

采用解決方案4選型EMC RecoverPoint作為二期關(guān)鍵產(chǎn)品，并對(duì)一期系統(tǒng)進(jìn)行運(yùn)行調(diào)優(yōu)，保持關(guān)鍵系統(tǒng)裸機(jī)恢復(fù)環(huán)境，保持非關(guān)鍵系統(tǒng)數(shù)據(jù)和操作系統(tǒng)災(zāi)備環(huán)境，并通過(guò)新系統(tǒng)同步復(fù)制+快照+快照管理功能保證生產(chǎn)端和災(zāi)備端的數(shù)據(jù)一致性。

（1）部署兩套EMC VNX磁盤陣列，一對(duì)EMC RecoverPoint設(shè)備，新建EMC 8Gbps FC存儲(chǔ)網(wǎng)，設(shè)備系統(tǒng)實(shí)現(xiàn)互聯(lián)互通，實(shí)現(xiàn)關(guān)鍵數(shù)據(jù)的任意時(shí)間點(diǎn)無(wú)丟失，實(shí)現(xiàn)快速保存及可靠恢復(fù)。（2）ERP系統(tǒng)小機(jī)和應(yīng)用服務(wù)器，一期備份服務(wù)器，一期數(shù)據(jù)備份存儲(chǔ)和一期備份磁帶庫(kù)，接入新建存儲(chǔ)網(wǎng)。（3）通過(guò)虛擬平臺(tái)新建關(guān)鍵系統(tǒng)的臨時(shí)生產(chǎn)環(huán)境，小機(jī)系統(tǒng)和OracaleRAC平臺(tái)升級(jí)調(diào)優(yōu)，EMC-ERP、EMC-CDP陣列和EMC RecoverPoint CDP統(tǒng)一接入EMC 8Gbps FC-SAN，一期項(xiàng)目中備份小機(jī)、備份服務(wù)器、備份陣列和備份磁帶庫(kù)統(tǒng)一遷移至新建存儲(chǔ)網(wǎng)，新磁盤陣列導(dǎo)入歷史數(shù)據(jù)，進(jìn)行二期災(zāi)備系統(tǒng)的關(guān)鍵數(shù)據(jù)備份與恢復(fù)測(cè)試，二期拓?fù)湟?jiàn)圖3。

圖3 企業(yè)關(guān)鍵業(yè)務(wù)ERP一期二期容滅系統(tǒng)建成

5 災(zāi)備系統(tǒng)實(shí)施

5.1 項(xiàng)目啟動(dòng)階段

項(xiàng)目啟動(dòng)前充分做好組織和人員安排，同時(shí)充分做好項(xiàng)目涉及的技術(shù)準(zhǔn)備工作，分解工作任務(wù)責(zé)任到人，并做到職責(zé)明確。一期和二期容災(zāi)系統(tǒng)建設(shè)都按以下原則進(jìn)行項(xiàng)目實(shí)施的組織管理。

5.1.1 成立項(xiàng)目實(shí)施小組

負(fù)責(zé)項(xiàng)目實(shí)施風(fēng)險(xiǎn)和質(zhì)量控制、方案審批決策和項(xiàng)目人員及資源組織管理。

5.1.2 項(xiàng)目實(shí)施方案審定

項(xiàng)目總體實(shí)施方案是整個(gè)項(xiàng)目實(shí)施的指導(dǎo)性、規(guī)范性、操作性文件，主要包括以下幾點(diǎn)。

（1）實(shí)施總體任務(wù)目標(biāo)（項(xiàng)目驗(yàn)收標(biāo)準(zhǔn)）。（2）實(shí)施進(jìn)度計(jì)劃（階段驗(yàn)收標(biāo)準(zhǔn)）。（3）實(shí)施準(zhǔn)備（軟硬件環(huán)境）。（4）實(shí)施詳細(xì)計(jì)劃（項(xiàng)目進(jìn)度計(jì)劃細(xì)化）。①解決項(xiàng)目實(shí)施中存在的風(fēng)險(xiǎn)，如何防范和降低對(duì)業(yè)務(wù)系統(tǒng)產(chǎn)生的影響；②主要的實(shí)施操作步驟，細(xì)化到每一步的技術(shù)要求和操作說(shuō)明；模塊化測(cè)試和總體測(cè)試，明確方法和標(biāo)準(zhǔn)。

5.2 項(xiàng)目實(shí)施階段

實(shí)施階段按項(xiàng)目總體實(shí)施方案中的工作任務(wù)和工作計(jì)劃執(zhí)行，過(guò)程中履行工作日志、周工作總結(jié)制度，記錄調(diào)試操作配置，監(jiān)督項(xiàng)目進(jìn)度，項(xiàng)目驗(yàn)收支撐材料積累。

項(xiàng)目總體實(shí)施方案對(duì)工作任務(wù)進(jìn)行了系統(tǒng)、科學(xué)、合理的分解和安排，明確了工作職責(zé)，將工作任務(wù)分解為關(guān)鍵任務(wù)和非關(guān)鍵任務(wù)，采取分模塊獨(dú)立實(shí)施，最后進(jìn)行聯(lián)合調(diào)試的策略，極大程度地減少和降低了實(shí)施安全風(fēng)險(xiǎn)和突發(fā)事件的發(fā)生幾率。盡管項(xiàng)目總體實(shí)施方案中管理和技術(shù)內(nèi)容具體詳細(xì)，但實(shí)施過(guò)程中難免會(huì)與實(shí)際情況產(chǎn)生技術(shù)上的偏差或差異，比如集成商對(duì)實(shí)施產(chǎn)品的技術(shù)理解不夠全面、準(zhǔn)確甚至錯(cuò)誤，或?qū)T實(shí)施環(huán)境調(diào)研不細(xì)，導(dǎo)致發(fā)生技術(shù)突發(fā)事件，如果影響方案中關(guān)鍵工作任務(wù)的執(zhí)行，需立即終止項(xiàng)目實(shí)施，方案上會(huì)論證修訂后再重啟實(shí)施。如果僅影響非關(guān)鍵任務(wù)的執(zhí)行，及時(shí)靈活進(jìn)行調(diào)整變通即可。

表1

表2

表3

人為的突發(fā)事件情況比較復(fù)雜，主要分為人員變更、需求變更、IT環(huán)境變更等，項(xiàng)目實(shí)施責(zé)任主體方人員變更，向項(xiàng)目組提交書面申請(qǐng)，審批后才能進(jìn)行人員變更，須避免因人員變更時(shí)發(fā)生項(xiàng)目實(shí)施安全風(fēng)險(xiǎn)或突發(fā)事件；需求發(fā)生變更時(shí)立即對(duì)項(xiàng)目總體實(shí)施方案進(jìn)行修改調(diào)整并上會(huì)審定；IT環(huán)境變更導(dǎo)致不能按既定方案開(kāi)展工作時(shí)，立即對(duì)項(xiàng)目總體實(shí)施方案進(jìn)行調(diào)整，經(jīng)實(shí)施小組上會(huì)審定后再重啟實(shí)施工作。

我們?cè)谝黄诙陧?xiàng)目實(shí)施過(guò)程中，按上述管理和實(shí)施策略進(jìn)行了具體實(shí)踐，項(xiàng)目實(shí)施全過(guò)程規(guī)范化、標(biāo)準(zhǔn)化、制度化，保障了項(xiàng)目實(shí)施進(jìn)度、質(zhì)量，編制了總體測(cè)試方案并細(xì)化測(cè)試項(xiàng)目操作步驟，按項(xiàng)測(cè)試并詳細(xì)記錄，按標(biāo)準(zhǔn)流程進(jìn)行了數(shù)據(jù)和系統(tǒng)裸機(jī)備份恢復(fù)測(cè)試，達(dá)到了項(xiàng)目預(yù)期。

二期項(xiàng)目實(shí)施中，在關(guān)鍵系統(tǒng)生產(chǎn)環(huán)境臨時(shí)切換到虛擬平臺(tái)時(shí)，數(shù)據(jù)庫(kù)虛擬機(jī)產(chǎn)生性能瓶頸，虛擬機(jī)CPU負(fù)荷超90%并居高不下，無(wú)法正常支撐ERP系統(tǒng)應(yīng)用，針對(duì)該突發(fā)事件，立即安排系統(tǒng)計(jì)劃性停機(jī)，協(xié)調(diào)4U ERP應(yīng)用物理服務(wù)器安裝數(shù)據(jù)平臺(tái)并導(dǎo)入業(yè)務(wù)數(shù)據(jù)，性能問(wèn)題及時(shí)有效的解決，將突發(fā)情況對(duì)項(xiàng)目實(shí)施的影響降到了最小。

5.3 項(xiàng)目驗(yàn)收、竣工階段

本階段重點(diǎn)是項(xiàng)目培訓(xùn)，項(xiàng)目技術(shù)資料移交，協(xié)助編寫項(xiàng)目運(yùn)維管理制度。管理人員可進(jìn)行原廠培訓(xùn)取證上崗。

通常需移交技術(shù)資料如下：（1）產(chǎn)品到貨清單，安裝調(diào)試清單。（2）項(xiàng)目實(shí)施方案。（3）項(xiàng)目過(guò)程資料，主要包括工作日志、工作周報(bào)。（4）項(xiàng)目驗(yàn)收?qǐng)?bào)告?？⒐べY料還應(yīng)包括項(xiàng)目合同，項(xiàng)目安裝實(shí)施報(bào)告，項(xiàng)目測(cè)試方案，日常運(yùn)維手冊(cè)，產(chǎn)品手冊(cè)相關(guān)資料，項(xiàng)目實(shí)施技術(shù)總結(jié)報(bào)告，及支持系統(tǒng)安全可靠運(yùn)行的管理制度。

6 實(shí)施數(shù)據(jù)保護(hù)前后效果

（1）未實(shí)施數(shù)據(jù)保護(hù)存在風(fēng)險(xiǎn)（表1）。

（2）實(shí)施數(shù)據(jù)保護(hù)后風(fēng)險(xiǎn)（表2）。

（3）實(shí)施連續(xù)性數(shù)據(jù)保護(hù)后風(fēng)險(xiǎn)（表3）。

7 企業(yè)災(zāi)備系統(tǒng)建設(shè)的展望

一期二期災(zāi)難恢復(fù)系統(tǒng)建設(shè)實(shí)施，結(jié)合長(zhǎng)期管理運(yùn)維實(shí)踐，驗(yàn)證了我們所引入的技術(shù)、產(chǎn)品和系統(tǒng)，可靠性高、靈活性大，兼容性強(qiáng)、適應(yīng)性好，在國(guó)內(nèi)外中大型企業(yè)中都正在應(yīng)用且具有成功經(jīng)驗(yàn)。企業(yè)對(duì)災(zāi)難恢復(fù)系統(tǒng)是可管理的、可運(yùn)維的。

參考文獻(xiàn)：

[1]GB /T 20988 2007． 信息安全技術(shù) 信息系統(tǒng)災(zāi)難恢復(fù)規(guī)范 [S]．北京: 中國(guó)標(biāo)準(zhǔn)出版社, 2007．

[2]張冬．次世代數(shù)據(jù)存儲(chǔ)思維與技術(shù)[M]．北京：清華大學(xué)出版社，2017 ISBN 978-7-302-46492-1．

[3]楊義先，姚文斌等．信息系統(tǒng)災(zāi)備技術(shù)綜論[J]．北京郵電大學(xué)學(xué)報(bào)，2010(2)．

[4]施躍躍，徐景良．金融行業(yè)災(zāi)備架構(gòu)高指標(biāo)RTO的實(shí)現(xiàn)方式[J]．計(jì)算機(jī)應(yīng)用與軟件，2012(2)．