2014年春節(jié)大年初一、初二、初三連續(xù)三天，當(dāng)大多數(shù)人正在享受闔家團(tuán)圓的天倫之樂時(shí),華為IT管理部容災(zāi)團(tuán)隊(duì)的兄弟們?nèi)匀粖^斗在工作崗位上。在此期間，他們實(shí)施了異地?cái)?shù)據(jù)中心帶業(yè)務(wù)容災(zāi)演練，通過數(shù)據(jù)中心管理系統(tǒng)將500多個(gè)IT系統(tǒng)從深圳總部數(shù)據(jù)中心整體切換到1300多公里外的南京異地容災(zāi)中心，在正常提供全球業(yè)務(wù)服務(wù)一天后，又回切至深圳總部數(shù)據(jù)中心，取得了演練的圓滿成功。

　　羅馬不是一天建成的

　　“看似一次簡單的容災(zāi)演練，卻蘊(yùn)含著華為人十幾年的心血。”華為企業(yè)業(yè)務(wù)BG規(guī)劃咨詢部部長傅依林向記者娓娓道來。

　　作為一名1996年進(jìn)入華為的老員工，在流程IT部門一干就是17年，傅依林對于911、512、日本海嘯等天災(zāi)人禍對于企業(yè)業(yè)務(wù)的影響有著深刻的理解。“考慮到公司目前的規(guī)模和信息化程度，從公司內(nèi)部業(yè)務(wù)的運(yùn)作和發(fā)展來說，華為對于數(shù)據(jù)中心災(zāi)備也有著相當(dāng)高的需求;另一方面，華為的許多大客戶對于業(yè)務(wù)連續(xù)性有著苛刻的要求，所以華為也要證明自身在容災(zāi)備份上的能力。“這是華為一直以來在數(shù)據(jù)中心容災(zāi)方面的內(nèi)外因。”

　　傅依林將華為數(shù)據(jù)中心與災(zāi)難恢復(fù)的能力分為三個(gè)階段，摸索階段、一主一備階段以及未來的兩地三中心階段。

　　“2001年在北京建立關(guān)鍵系統(tǒng)的鏡像系統(tǒng)，2005年建成了同城同步容災(zāi)，2008年實(shí)現(xiàn)了國內(nèi)外研發(fā)中心的數(shù)據(jù)異地容災(zāi)。”這時(shí)候的華為尚處于摸索階段。 傅依林特別強(qiáng)調(diào)了華為目前所處的一主一備階段：“2009年華為結(jié)合了業(yè)界最佳實(shí)踐發(fā)布了完整的容災(zāi)管理體系，隨后啟用了南京容災(zāi)中心，建立了專業(yè)的容災(zāi)組織，每年進(jìn)行容災(zāi)演練。”2011年華為實(shí)現(xiàn)了產(chǎn)品數(shù)據(jù)管理系統(tǒng)的單系統(tǒng)業(yè)務(wù)容災(zāi)演練;2012年，LTC流程相關(guān)系統(tǒng)的端到端容災(zāi)演練;2013年實(shí)現(xiàn)了數(shù)據(jù)中心的集成功能演練。

　　伴隨著一次次的階段性成功，進(jìn)行數(shù)據(jù)中心異地帶業(yè)務(wù)容災(zāi)演練似乎就成為了順理成章的事情。但橫在華為IT管理部容災(zāi)團(tuán)隊(duì)面前的是：深圳與南京之間1300多公里的距離;500多個(gè)系統(tǒng)之間復(fù)雜的集成關(guān)系。“數(shù)據(jù)量大、距離遠(yuǎn)、環(huán)境負(fù)載，要在規(guī)定的時(shí)間內(nèi)完成目標(biāo)仍然是一個(gè)困難的問題。”

　　在演練實(shí)施前，IT容災(zāi)團(tuán)隊(duì)根據(jù)公司內(nèi)部的業(yè)務(wù)連續(xù)性管理計(jì)劃，既IT災(zāi)難恢復(fù)計(jì)劃來設(shè)定相應(yīng)組織和流程以及實(shí)施步驟：包括演練準(zhǔn)備、切換、驗(yàn)證及容災(zāi)端的運(yùn)行、回切、運(yùn)行及問題處理緩沖等多個(gè)階段。

　　“之所以選擇在春節(jié)期間進(jìn)行，是因?yàn)檠菥毶婕皹I(yè)務(wù)量巨大并且需要停機(jī)。雖然如此，但春節(jié)期間的全球業(yè)務(wù)并未中斷，仍然在正常運(yùn)行，ERP系統(tǒng)在演練過程中的并發(fā)用戶就有2500以上。”傅依林如是說。

　　業(yè)務(wù)所規(guī)定的4小時(shí)停機(jī)時(shí)間在IT容災(zāi)團(tuán)隊(duì)看來雖然緊迫，但并不是關(guān)鍵所在。據(jù)專家介紹，“異地容災(zāi)演練最大的技術(shù)難點(diǎn)是什么？廣域網(wǎng)延時(shí)。”據(jù)了解，華為IT系統(tǒng)的集成度非常高，SOA、EIP等技術(shù)應(yīng)用非常廣泛，沒有一個(gè)系統(tǒng)是孤立存在的，各系統(tǒng)之間互相調(diào)用。比如ERP系統(tǒng)的集成關(guān)系就有著2000多條。 “一些在局域網(wǎng)中跑得很好的系統(tǒng)，到了廣域網(wǎng)上就會(huì)因延時(shí)沒法運(yùn)行。因此，單個(gè)系統(tǒng)的帶業(yè)務(wù)演練無法實(shí)施，必須做集成演練，進(jìn)行多系統(tǒng)的整體切換。只要有一個(gè)系統(tǒng)沒有同步，切換過去就意味著數(shù)據(jù)丟失，這是必須避免的。”

　　“只有把容災(zāi)環(huán)境當(dāng)成生產(chǎn)環(huán)境來運(yùn)行，才能保證數(shù)據(jù)中心的數(shù)據(jù)同步。”正如傅依林所言，這次演練之所以成功的關(guān)鍵也在于華為數(shù)據(jù)中心日常運(yùn)行中的“好習(xí)慣”。“IT系統(tǒng)每天都在變，每個(gè)禮拜有上百處變更，這意味著所有的改變必須同步到容災(zāi)中心去。”華為IT服務(wù)體系一直以來都很重視學(xué)習(xí)、引進(jìn)國際先進(jìn)管理標(biāo)準(zhǔn)與實(shí)踐， 2005年通過BS 15000認(rèn)證并引進(jìn)ITILV2、2006年通過ISO 20000認(rèn)證，2008年引進(jìn)ITIL V3。

　　自信地邁入下一階段

　　“牛頓力學(xué)早被論證可以發(fā)射衛(wèi)星，但是距離衛(wèi)星飛上近地軌道還是經(jīng)歷了一個(gè)很漫長的過程，這是一個(gè)復(fù)雜的工程。”對于本次演練的重大意義，傅依林笑言道：“華為自身就是一個(gè)信息化建設(shè)的樣品板。”其與時(shí)俱進(jìn)的全球化運(yùn)作，本次異地?cái)?shù)據(jù)中心帶業(yè)務(wù)容災(zāi)演練中所展現(xiàn)出的能力：從規(guī)劃、設(shè)計(jì)、建設(shè)到運(yùn)營。正如傅依林所言：“實(shí)戰(zhàn)和落地的能力是華為最大的優(yōu)勢。”

談?wù)撘粋€(gè)端到端的容災(zāi)中心，必然不能繞過數(shù)