1、華為數(shù)據(jù)保護(hù)一體機(jī)技術(shù)白皮書HUAWEI目錄TOC o 1-5 h z HYPERLINK l bookmark0 1技術(shù)背景1 HYPERLINK l bookmark6 1.1概述1 HYPERLINK l bookmark8 1.2產(chǎn)品價(jià)值1 HYPERLINK l bookmark2 2系統(tǒng)架構(gòu)32.1邏輯架構(gòu)32.2部署方式42.3集群特性5 HYPERLINK l bookmark4 3標(biāo)準(zhǔn)備份6 HYPERLINK l bookmark16 3.1簡(jiǎn)介6 HYPERLINK l bookmark18 3.2原理63.2.1備份類型73.2.2重復(fù)數(shù)據(jù)刪除8 HYPERLINK l

2、 bookmark20 3.2.2.1特性介紹8 HYPERLINK l bookmark22 3.2.2.1技術(shù)原理93.2.3副本復(fù)制11 HYPERLINK l bookmark28 3.3應(yīng)用場(chǎng)景123.3.1數(shù)據(jù)庫(kù)備份恢復(fù)12 HYPERLINK l bookmark30 Oracle備份恢復(fù)13 HYPERLINK l bookmark34 SQLServer備份恢復(fù)14MySQL備份恢復(fù)15DB2備份恢復(fù)15 HYPERLINK l bookmark42 Hadoop備份恢復(fù)16 HYPERLINK l bookmark44 GBase備份恢復(fù)173.3.2虛擬化平臺(tái)備份恢復(fù)20

3、VMware備份恢復(fù)203.322FusionCompute備份恢復(fù)23HCS備份恢復(fù)27CAS備份恢復(fù)28OpenStack備份恢復(fù)293.3.2.6XenServer備份恢復(fù)目錄32文件系統(tǒng)備份恢復(fù)33操作系統(tǒng)備份恢復(fù).343.341Windows操作系統(tǒng)備份恢復(fù)34Linux操作系統(tǒng)備份恢復(fù)353939高級(jí)備份簡(jiǎn)介原理39數(shù)據(jù)捕獲39原生格式數(shù)據(jù)捕獲39永久增量備份40應(yīng)用數(shù)據(jù)一致性保障414.2.2副本數(shù)據(jù)存儲(chǔ)與管理42副本數(shù)據(jù)使用42即時(shí)掛載Mount42自服務(wù)式副本訪問(wèn)43數(shù)據(jù)脫敏43應(yīng)用場(chǎng)景43Oracle高級(jí)備份原理43Oracle數(shù)據(jù)捕獲43Oracle即時(shí)掛載44Oracl

4、e數(shù)據(jù)回遷45Oracle瀏覽恢復(fù)45VMware高級(jí)備份原理46VMware數(shù)據(jù)捕獲464.322VMware即時(shí)掛載47SQLServer高級(jí)備份原理47SQLServer數(shù)據(jù)捕獲47SQLServer即時(shí)掛載48Windows文件系統(tǒng)高級(jí)備份原理49Windows文件系統(tǒng)數(shù)據(jù)捕獲49Windows文件系統(tǒng)即時(shí)掛載4951持續(xù)保護(hù)簡(jiǎn)介51原理51持續(xù)備份51容災(zāi)演練52持續(xù)復(fù)制（卷級(jí)）54持續(xù)復(fù)制（日志級(jí)）55Oracle持續(xù)復(fù)制簡(jiǎn)介55Oracle持續(xù)復(fù)制功能特性56系統(tǒng)運(yùn)維管理58安全的用戶角色權(quán)限體系58完善的日志審計(jì)機(jī)制59靈活的告警通知6111技術(shù)背景1.1概述1.2產(chǎn)品價(jià)值1.

5、1概述隨著IT的不斷發(fā)展，數(shù)據(jù)資產(chǎn)已經(jīng)成為企業(yè)生存的根本，企業(yè)的生產(chǎn)、經(jīng)營(yíng)、戰(zhàn)略，都離不開數(shù)據(jù)的支撐。數(shù)據(jù)保護(hù)，也漸漸的從純粹的保護(hù)數(shù)據(jù)，演變成備份數(shù)據(jù)的再利用，讓備份數(shù)據(jù)有更多的價(jià)值。作為企業(yè)級(jí)融合數(shù)據(jù)管理產(chǎn)品，華為數(shù)據(jù)保護(hù)一體機(jī)可為各種復(fù)雜的Windows，Linux，Unix環(huán)境提供更高效的數(shù)據(jù)保護(hù)，幫助用戶實(shí)現(xiàn)更高的SLA要求。華為數(shù)據(jù)保護(hù)一體機(jī)，提供單機(jī)版和分布式版兩種形態(tài)，具備三大關(guān)鍵能力：高級(jí)備份、持續(xù)保護(hù)和標(biāo)準(zhǔn)備份，集云、虛擬和物理環(huán)境保護(hù)能力于一體，實(shí)現(xiàn)高效、彈性可擴(kuò)展的數(shù)據(jù)保護(hù)，提供智能的災(zāi)備運(yùn)維，簡(jiǎn)化管理復(fù)雜度。同時(shí)，借助華為數(shù)據(jù)保護(hù)一體機(jī)的副本數(shù)據(jù)管理功能，可克隆出多個(gè)

6、虛擬副本，幫助用戶實(shí)現(xiàn)副本數(shù)據(jù)的開發(fā)測(cè)試和查詢分析，充分發(fā)揮災(zāi)備數(shù)據(jù)的價(jià)值。1.2產(chǎn)品價(jià)值華為數(shù)據(jù)保護(hù)一體機(jī)的亮點(diǎn)與優(yōu)勢(shì)如下：華為數(shù)據(jù)保護(hù)一體機(jī)是一款集備份軟件、備份服務(wù)器、備份存儲(chǔ)為一體的數(shù)據(jù)保護(hù)與數(shù)據(jù)管理產(chǎn)品?；诜植际郊軜?gòu)設(shè)計(jì)，性能與容量線性增長(zhǎng)，一套設(shè)備即可滿足保護(hù)、構(gòu)建、管理用戶數(shù)據(jù)和應(yīng)用，幫助用戶提升數(shù)據(jù)保護(hù)效率、節(jié)省數(shù)據(jù)保護(hù)投資、簡(jiǎn)化數(shù)據(jù)管理流程，廣泛適用于政府、金融、運(yùn)營(yíng)商、醫(yī)療、制造等行業(yè)。高效數(shù)據(jù)保護(hù)高頻率：支持實(shí)時(shí)監(jiān)控并備份應(yīng)用10,保護(hù)粒度小于1秒，實(shí)現(xiàn)高頻率備份，比傳統(tǒng)備份頻率提升300倍，幫助用戶實(shí)現(xiàn)更高效的數(shù)據(jù)保護(hù)。高擴(kuò)展：基于分布式架構(gòu)設(shè)計(jì)，數(shù)據(jù)保護(hù)性能與容量線

7、性擴(kuò)展，滿足用戶業(yè)務(wù)增長(zhǎng)所需。更低數(shù)據(jù)TCO省成本：數(shù)據(jù)保護(hù)計(jì)算與存儲(chǔ)融合，購(gòu)置成本節(jié)省43%，機(jī)柜空間節(jié)省63%。障分鐘級(jí)RTO。省空間：備份、容災(zāi)、開發(fā)測(cè)試、分析共用數(shù)據(jù)副本，減少數(shù)據(jù)副本數(shù)量存放，為用戶節(jié)省60%以上的存儲(chǔ)空間。靈活數(shù)據(jù)利用靈活使用：災(zāi)備數(shù)據(jù)直接用于開發(fā)測(cè)試，開發(fā)測(cè)試數(shù)據(jù)準(zhǔn)備時(shí)間從“天”減少為“小時(shí)”，加速產(chǎn)品上線。靈活恢復(fù)：副本數(shù)據(jù)即時(shí)用，可實(shí)現(xiàn)核心業(yè)務(wù)快速恢復(fù)，降低業(yè)務(wù)恢復(fù)時(shí)間，保21邏輯架構(gòu)2.2部署方式2.3集群特性邏輯架構(gòu)數(shù)據(jù)保護(hù)一體機(jī)分為單機(jī)版和分布式版，單機(jī)版采用華為Taishan服務(wù)器本地硬盤作為備份存儲(chǔ)空間，并集成CDM軟件，主要針對(duì)中小型企業(yè)市場(chǎng)提供本

8、地備份解決方案。分布式版采用華為FusionStorage分布式塊存儲(chǔ)，集成CDM軟件的集群架構(gòu)，保障備份業(yè)務(wù)高可用，同時(shí)支持用戶按需部署、在線擴(kuò)展。數(shù)據(jù)保護(hù)一體機(jī)的邏輯架構(gòu)包含四大板塊。1）硬件層：提供存儲(chǔ)硬件資源。2）存儲(chǔ)服務(wù)層：提供可用存儲(chǔ)池，包含單機(jī)版和分布式存儲(chǔ)池。3）災(zāi)備服務(wù)層：CDM軟件提供標(biāo)準(zhǔn)備份、高級(jí)備份、持續(xù)備份三大功能體系。4）應(yīng)用層：客戶側(cè)需要做數(shù)據(jù)保護(hù)的應(yīng)用，安裝相應(yīng)的數(shù)據(jù)保護(hù)客戶端后。數(shù)據(jù)保護(hù)一體機(jī)提供圖形化的管理系統(tǒng)，用戶可以輕松地對(duì)備份系統(tǒng)的軟硬件設(shè)備進(jìn)行統(tǒng)一管理和維護(hù)。畔應(yīng)口JCUM哉L、TLSorvord*!豪尿冶加話船時(shí)更圖2-1數(shù)據(jù)保護(hù)一體機(jī)邏輯架構(gòu)圖2

9、.2部署方式3節(jié)點(diǎn)分布式部署模式,數(shù)據(jù)保護(hù)一體機(jī)單機(jī)版采用單節(jié)點(diǎn)部署模式，分布式版采用后續(xù)根據(jù)業(yè)務(wù)規(guī)模，可隨時(shí)在線擴(kuò)容。單機(jī)版部署：CDM軟件在一個(gè)服務(wù)器上部署，業(yè)務(wù)規(guī)模不大的情況下，一個(gè)節(jié)點(diǎn)即可滿足，此時(shí)只需要部署一個(gè)節(jié)點(diǎn)即可，系統(tǒng)所有功能都可正常使用，包含標(biāo)準(zhǔn)備份、高級(jí)備份、持續(xù)備份。生產(chǎn)/容災(zāi)/開發(fā)測(cè)試壬機(jī)客戶揣Windows/Linux/-.-物理眼務(wù)器/虛擬機(jī)服箔器端廠%肘tuiefuslEulerOSTaishan2280/5280V2Fi-WBJbFusionStorageBlock二節(jié)圖2-2數(shù)據(jù)保護(hù)一體機(jī)單機(jī)版部署分布式版部署：3節(jié)點(diǎn)起配，CDM軟件分別部署在華為存儲(chǔ)|CKh

10、點(diǎn)上，CDM軟件部署成集群架構(gòu)，系統(tǒng)所有功能都可正常使用，備份業(yè)務(wù)負(fù)載均衡,同時(shí)為CDM軟件后端提供了分布式存儲(chǔ)共享資源。圖2-3數(shù)據(jù)保護(hù)一體機(jī)分布式版部署2.3集群特性1、高可用架構(gòu)數(shù)據(jù)保護(hù)一體機(jī)支持集群架構(gòu)，當(dāng)集群VIP所在的節(jié)點(diǎn)故障，VIP自動(dòng)漂移到某一個(gè)正常的節(jié)點(diǎn)上，所有業(yè)務(wù)經(jīng)過(guò)入之后被負(fù)載到不同的且正常的節(jié)點(diǎn)上，保證所有業(yè)務(wù)還能繼續(xù)訪問(wèn)。2、負(fù)載均衡備份客戶端與備份一體機(jī)節(jié)點(diǎn)之間的數(shù)據(jù)傳遞采用備份任務(wù)的負(fù)載均衡技術(shù)，能夠?qū)浞輸?shù)據(jù)同時(shí)寫入一臺(tái)或多臺(tái)備份一體機(jī)。3、動(dòng)態(tài)在線擴(kuò)展數(shù)據(jù)保護(hù)一體機(jī)采用Scale-out架構(gòu)，支持根據(jù)業(yè)務(wù)擴(kuò)展規(guī)模，動(dòng)態(tài)接入新的備份節(jié)點(diǎn)到集群系統(tǒng)，滿足按需擴(kuò)展的

11、需求。節(jié)點(diǎn)擴(kuò)展無(wú)需中止備份業(yè)務(wù)，直接在線接入新增節(jié)點(diǎn)，加入到已有集群架構(gòu)中。ServerlServerServer3Server4JCDM軟件稱入節(jié)黑計(jì)聲網(wǎng)洛(1OGE)WW-44FusionServers圖2-4數(shù)據(jù)保護(hù)一體機(jī)分布式版擴(kuò)容示意圖31簡(jiǎn)介3.2原理3.3應(yīng)用場(chǎng)景3.1簡(jiǎn)介標(biāo)準(zhǔn)備份是一種定時(shí)數(shù)據(jù)保護(hù)機(jī)制，根據(jù)備份策略和計(jì)劃，在指定時(shí)間自動(dòng)發(fā)起備份任務(wù)，讀取需保護(hù)的數(shù)據(jù)，并寫入備份介質(zhì)。3.2原理標(biāo)準(zhǔn)備份的整個(gè)過(guò)程可以簡(jiǎn)單的理解為3步:生嚴(yán)壞境圖3-1標(biāo)準(zhǔn)備份流程BackupClient申為數(shù)據(jù)探護(hù)一體機(jī)十通過(guò)BackupClient（代理客戶端）讀取需保護(hù)的數(shù)據(jù)，按應(yīng)用不同，代理

12、客戶端有兩種部署方式，一種是部署在生產(chǎn)服務(wù)器上（稱為有代理備份），一種無(wú)需部署在生產(chǎn)服務(wù)器上（使用華為數(shù)據(jù)保護(hù)一體機(jī)內(nèi)置的代理客戶端，稱為無(wú)代理備份）；通過(guò)網(wǎng)絡(luò)（TCP）傳輸讀取生產(chǎn)環(huán)境的數(shù)據(jù)到數(shù)據(jù)保護(hù)一體機(jī)；數(shù)據(jù)保護(hù)一體機(jī)接收數(shù)據(jù)，保存要備份存儲(chǔ)上。其中讀數(shù)據(jù)有不同的方式，即備份類型：完全備份，增量備份，永久增量備份，差異備份；數(shù)據(jù)傳輸也有不同的方式：傳輸所有數(shù)據(jù)，通過(guò)重復(fù)數(shù)據(jù)刪除技術(shù)只傳輸不同的數(shù)據(jù)。永久增審任勢(shì)首次無(wú)份永久増?jiān)缛蝿?shì)再次崔份如果有異地災(zāi)備的需求，可以通過(guò)副本復(fù)制功能，將備份的數(shù)據(jù)直接復(fù)制到異地，來(lái)滿足異地災(zāi)備的需求。321備份類型不同的應(yīng)用類型，其支持的備份類型也各有差異常

13、見的備份類型包括如下表所示：表3-1常見備份類型說(shuō)明備份類型描述特點(diǎn)完全備份將所有選定的數(shù)據(jù)源備份到指定目的地中。最常見的備份類型。備份完整數(shù)據(jù)，恢復(fù)方便。備份耗時(shí)久，且反復(fù)備份，占用存儲(chǔ)空間較多。增量備份只備份自上一次備份（完全備份或增量備份）后新增或變化的數(shù)據(jù)。備份數(shù)據(jù)量小，備份速度快。相對(duì)而言，所需恢復(fù)時(shí)間比完全備份或差異備份所需時(shí)間長(zhǎng)。差異備份執(zhí)行差異備份時(shí)，僅備份自上次完全備份后新增或變化的數(shù)據(jù)。備份數(shù)據(jù)量小，備份速度比完全備份快。相對(duì)而言，恢復(fù)數(shù)據(jù)所耗費(fèi)的時(shí)間比完全備份時(shí)間長(zhǎng)。如果大量數(shù)據(jù)發(fā)生變化，差異備份所耗費(fèi)的時(shí)間比增量備份時(shí)間長(zhǎng)。事務(wù)日志備份備份數(shù)據(jù)庫(kù)中的事務(wù)日志。事務(wù)日志是

14、數(shù)據(jù)庫(kù)中已發(fā)生的所有修改和執(zhí)行每次修改的事務(wù)的一連串記錄。使用事務(wù)日志備份，可將數(shù)據(jù)恢復(fù)到精確的故障點(diǎn)。華為數(shù)據(jù)保護(hù)一體機(jī)支持上述的所有的備份類型，針對(duì)不同的應(yīng)用支持的備份類型不完全一樣。除此之外華為數(shù)據(jù)保護(hù)一體機(jī)還提供“永久增量備份”類型。華為數(shù)據(jù)保護(hù)一體機(jī)采用永久增量備份技術(shù)，初次備份對(duì)所有數(shù)據(jù)進(jìn)行完全備份，之后只對(duì)新增加或改動(dòng)過(guò)的數(shù)據(jù)做增量備份。此方案的增量備份數(shù)據(jù)是持續(xù)的，而且每個(gè)增量備份的數(shù)據(jù)副本將自動(dòng)合成為完全副本，方便恢復(fù)。因而永久增量備份能夠大幅度減少備份時(shí)間，節(jié)省備份數(shù)據(jù)所需的存儲(chǔ)空間，且提升了恢復(fù)效率。永久增量備份適用于單個(gè)應(yīng)用數(shù)據(jù)量大，執(zhí)行一次完全備份比較費(fèi)時(shí)費(fèi)力的應(yīng)用場(chǎng)

15、景。若用戶備份數(shù)據(jù)量小，也可使用周期性的完備和增備方案。永久增量備份工作原理如下：1.永久增量任務(wù)首次備份時(shí)備份所有數(shù)據(jù)，且為每個(gè)數(shù)據(jù)塊建立索引連接。2.第二次及以后的備份，只對(duì)新增的數(shù)據(jù)進(jìn)行備份，將增量數(shù)據(jù)索引與上一個(gè)副本的索引進(jìn)行合成，生成新的完整副本，恢復(fù)時(shí)，指定時(shí)間點(diǎn)，即可直接恢復(fù)合成的完整副本。圖3-2永久增量備份原理圖32.2重復(fù)數(shù)據(jù)刪除企業(yè)數(shù)字化轉(zhuǎn)型加劇了業(yè)務(wù)數(shù)據(jù)的爆炸式增長(zhǎng)，企業(yè)內(nèi)需保護(hù)的備份數(shù)據(jù)總量增長(zhǎng)迅猛，且通過(guò)備份、歸檔等方式產(chǎn)生的重復(fù)數(shù)據(jù)也與來(lái)愈多。龐大的冗余數(shù)據(jù)不僅消耗浪費(fèi)了大量存儲(chǔ)空間、網(wǎng)絡(luò)帶寬等資源，也給數(shù)據(jù)備份造成壓力，超大的備份窗口，甚至?xí)绊憳I(yè)務(wù)系統(tǒng)的正常運(yùn)

16、行。華為數(shù)據(jù)保護(hù)一體機(jī)支持源端重復(fù)數(shù)據(jù)刪除、并行重刪方案，在備份數(shù)據(jù)傳輸?shù)酱鎯?chǔ)介質(zhì)之前執(zhí)行重刪操作，大幅度提升備份性能。3.2.2.1特性介紹華為數(shù)據(jù)保護(hù)一體機(jī)重刪技術(shù)的主要特性包括：并行重刪：可適用于更大數(shù)據(jù)量的備份場(chǎng)景，重刪比例更高，備份窗更小。多重刪節(jié)點(diǎn)：指紋庫(kù)由多個(gè)重刪節(jié)點(diǎn)組成，線性提升了單個(gè)指紋庫(kù)的重刪容量。重刪節(jié)點(diǎn)的分配遵循負(fù)載均衡原則，平均分配節(jié)點(diǎn)資源，避免出現(xiàn)超負(fù)荷、或資源閑置的現(xiàn)象。橫向擴(kuò)展：重刪池最大可擴(kuò)展至32個(gè)一體機(jī)節(jié)點(diǎn)，以滿足海量數(shù)據(jù)保護(hù)的需求。指紋庫(kù)靈活選擇機(jī)制：多個(gè)相同應(yīng)用類型的備份任務(wù)可共用一個(gè)指紋庫(kù)，這些任務(wù)重刪后的數(shù)據(jù)及指紋是共享的，可用于不同任務(wù)的恢復(fù)，大

17、幅度提升重刪率，減少需存儲(chǔ)的備份數(shù)據(jù)。對(duì)于不同應(yīng)用類型的備份任務(wù)，提供不同的指紋庫(kù)，不同應(yīng)用類型的備份任務(wù)各自使用獨(dú)立的指紋庫(kù)，從而減少指紋比對(duì)時(shí)間，加速指紋查詢效率，降低內(nèi)存占用，并將整個(gè)數(shù)據(jù)中心的重刪性能、重刪比率及所需資源均衡至一個(gè)最佳值，達(dá)到最優(yōu)效果。冗余數(shù)據(jù)自動(dòng)清理：基于副本數(shù)據(jù)保護(hù)策略，歷史副本逐漸會(huì)被淘汰成為冗余數(shù)據(jù)。當(dāng)冗余數(shù)據(jù)達(dá)到一定規(guī)模時(shí)，系統(tǒng)將自動(dòng)清理存儲(chǔ)中的冗余數(shù)據(jù)，并整理有效數(shù)據(jù)，回收空間，提升空間利用率。提升備份效率：備份時(shí)傳輸?shù)臄?shù)據(jù)為已完成源端重刪的數(shù)據(jù)，能夠極大地降低對(duì)業(yè)務(wù)帶寬的占用，提升備份效率，縮短備份窗口。降低存儲(chǔ)成本：重刪率最高可達(dá)99%，從而大幅度減少備

18、份數(shù)據(jù)總量，降低備份數(shù)據(jù)所占用的存儲(chǔ)空間，提升存儲(chǔ)設(shè)備的利用率，提高每GB存儲(chǔ)的利用價(jià)值。不爭(zhēng)用業(yè)務(wù)系統(tǒng)資源：源端重刪所占用的客戶端資源較少，因而對(duì)業(yè)務(wù)系統(tǒng)影響幾乎無(wú)影響。3.2.2.1技術(shù)原理1.源端重復(fù)數(shù)據(jù)刪除將數(shù)據(jù)或文件使用智能的基于內(nèi)容的重刪算法進(jìn)行切片后，數(shù)據(jù)塊通過(guò)哈希算法進(jìn)行唯一標(biāo)記，即指紋(Fingerprint)，并在指紋庫(kù)中尋找相同的指紋。如果存在相同指紋，則表示已保存了相同的數(shù)據(jù)塊，一體機(jī)則不再保存此數(shù)據(jù)塊，而是引用已存在的數(shù)據(jù)塊，從而節(jié)省更多的備份空間，同時(shí)有效的節(jié)約傳輸時(shí)所需的大量帶寬,1肘雋汀莊詼啟/亍啟加畫禽討i1也回占耶古豈實(shí)現(xiàn)數(shù)據(jù)傳輸和存儲(chǔ)的最大精簡(jiǎn)。脫1SS二

19、7-:二訕二屯杭巧眩幫盂em加快圖3-3源端重刪原理圖護(hù)世機(jī)說(shuō)明:1、通過(guò)哈希算法計(jì)算出數(shù)據(jù)塊的唯一值，即指紋;2、在一體機(jī)中的指紋庫(kù)服務(wù)器查詢此指紋是否已經(jīng)存在，如果存在，說(shuō)明此數(shù)據(jù)塊重復(fù)，不需要發(fā)送到一體機(jī)，如果不存在，則需要將數(shù)據(jù)塊發(fā)送到一體機(jī)，寫入備份存儲(chǔ)池，然后在重刪指紋庫(kù)中記錄數(shù)據(jù)塊的指紋。2并行重刪傳統(tǒng)重刪模式大多基于單個(gè)節(jié)點(diǎn)進(jìn)行，此方案在大數(shù)據(jù)時(shí)代，容易面臨數(shù)據(jù)訪問(wèn)、處理性能不足，存儲(chǔ)空間資源緊張等挑戰(zhàn)。華為數(shù)據(jù)保護(hù)一體機(jī)采用并行重刪技術(shù)，通過(guò)在多個(gè)不同的節(jié)點(diǎn)上構(gòu)建重刪指紋庫(kù)并將指紋并行分布于多個(gè)節(jié)點(diǎn)，有效解決單點(diǎn)性能和存儲(chǔ)空間壓力問(wèn)題。比亍列f!槪砸IF10J.Du人mrAA

20、nn.uJiaj-nrawp.10.2.0.,3IP107.04IP10J0.5敖竭扮Q侏機(jī)圖3-4并行重刪指紋庫(kù)分布說(shuō)明：先創(chuàng)建重刪的指紋池，將重刪使用的存儲(chǔ)資源、計(jì)算資源池化，最多支持將32個(gè)體機(jī)節(jié)點(diǎn)組成一個(gè)指紋池。然后在指紋池中構(gòu)建指紋庫(kù)，每個(gè)指紋庫(kù)，都能同時(shí)使用組成指紋池的各節(jié)點(diǎn)上的重刪資源。幷亍去石ata二：cdal*A1mo曲4flnAerpooifmAerpooirgerpocJtftgeTOOi圖3-5并行重刪工作流程323副本復(fù)制說(shuō)明:數(shù)據(jù)塊計(jì)算出指紋后，使用分組算法，定位到某個(gè)服務(wù)器節(jié)點(diǎn)，不同的指紋就均衡的分布在不同的節(jié)點(diǎn)上，這樣，不同的指紋，定位到不同的服務(wù)器節(jié)點(diǎn)上查詢指

21、紋是否存在，達(dá)到并行重刪的效果。通過(guò)指紋庫(kù)策略，可以將重復(fù)利用的數(shù)據(jù)按順序、連續(xù)地保存在同一個(gè)空間內(nèi)。如此，即可實(shí)現(xiàn)：一，可以減少全局重刪時(shí)每次都要查找全部指紋的時(shí)間損耗；可以最大限度利用存儲(chǔ)的讀緩存機(jī)制，盡量減少因隨機(jī)讀磁盤引起的頻繁磁盤尋道的切換，提升恢復(fù)效率。為避免因自然災(zāi)害等意外情況而導(dǎo)致的本地?cái)?shù)據(jù)丟失情況，異地?cái)?shù)據(jù)容災(zāi)也是企業(yè)數(shù)據(jù)保護(hù)的一大常見命題。數(shù)據(jù)保護(hù)一體機(jī)支持通過(guò)副本復(fù)制技術(shù)，將本地?cái)?shù)據(jù)同步到異地，實(shí)現(xiàn)異地?cái)?shù)據(jù)保護(hù)。此異地?cái)?shù)據(jù)容災(zāi)方案也稱為“D2D2R（DisktoDisktoRemote）副本復(fù)制的數(shù)據(jù)同步工作流程主要包含兩大部分：本地?cái)?shù)據(jù)中心：基于標(biāo)準(zhǔn)備份任務(wù)，將生產(chǎn)數(shù)據(jù)

22、備份到本地的備份介質(zhì)中。在本地和異地?cái)?shù)據(jù)中心之間創(chuàng)建副本復(fù)制鏈路。基于副本復(fù)制任務(wù)，將本地介質(zhì)中的備份數(shù)據(jù)同步到異地?cái)?shù)據(jù)保護(hù)一體機(jī)備份介質(zhì)中，從而為生產(chǎn)數(shù)據(jù)提供雙重保護(hù)。當(dāng)本地生產(chǎn)數(shù)據(jù)、或備份數(shù)據(jù)丟失、損壞時(shí)，數(shù)據(jù)保護(hù)一體機(jī)副本復(fù)制提供兩種恢復(fù)方案：反向復(fù)制（源端操作）：在源端控制臺(tái)，支持用戶將同步到異地的數(shù)據(jù)直接恢復(fù)到本地的體機(jī)中，此過(guò)程也稱“反向同步”。數(shù)據(jù)恢復(fù)（源端、目的端操作）：源端控制臺(tái)正常運(yùn)行，只需恢復(fù)少量生產(chǎn)機(jī)的備份數(shù)據(jù)：基于源端管理控制臺(tái)，將同步到異地的數(shù)據(jù)恢復(fù)到源端的客戶端中。源端控制臺(tái)異常、或希望在異地驗(yàn)證少量同步數(shù)據(jù)：目的端獲取源端操作員授權(quán)后，即可將同步數(shù)據(jù)恢復(fù)到目的端

23、的客戶端中，實(shí)現(xiàn)數(shù)據(jù)應(yīng)急恢復(fù)。車阪島中心不址暫至中心fi圖3-6標(biāo)準(zhǔn)備份遠(yuǎn)程復(fù)制示意圖副本復(fù)制功能特性如下:支持四種遠(yuǎn)程復(fù)制模式，即：一對(duì)一，一對(duì)多，多對(duì)一，級(jí)聯(lián)復(fù)制。副本復(fù)制粒度：標(biāo)準(zhǔn)備份任務(wù)。支持內(nèi)外網(wǎng)同步，可以通過(guò)VPN或IP地址映射網(wǎng)絡(luò)環(huán)境進(jìn)行遠(yuǎn)程復(fù)制。可自行定義數(shù)據(jù)同步后保留的副本策略，控制同步數(shù)據(jù)保存總量。支持全局重刪，且任意數(shù)據(jù)源均支持重刪，盡可能少傳輸冗余數(shù)據(jù)，提升數(shù)據(jù)同步效率。支持集群與集群之間的遠(yuǎn)程復(fù)制，同步到目的端的數(shù)據(jù)，反向同步到源端介質(zhì)時(shí)，不與原任務(wù)空間綁定，以新的空間儲(chǔ)存，如下圖所示:SpacedClusterC圖3-7集群間的遠(yuǎn)程復(fù)制集群間的副本復(fù)制永久增量備份產(chǎn)

24、生的合成副本，在副本復(fù)制過(guò)程中，仍可進(jìn)行永久增量備份。傳輸過(guò)程中只對(duì)增量數(shù)據(jù)進(jìn)行傳輸，當(dāng)數(shù)據(jù)到達(dá)目的地后進(jìn)行數(shù)據(jù)合成，如下圖所示：正向貝制1亠ty_:永罠増凰合成5眩ClusterA匚lusterB正向賀制永傀増雖ClusterC圖3-8遠(yuǎn)程復(fù)制的永久增量3.3應(yīng)用場(chǎng)景3.3.1數(shù)據(jù)庫(kù)備份恢復(fù)數(shù)據(jù)庫(kù)作為企業(yè)生產(chǎn)系統(tǒng)中重要的業(yè)務(wù)應(yīng)用，其重要性不言而喻。雖然數(shù)據(jù)庫(kù)自帶備份功能，但由于其備份恢復(fù)功能大多依賴于手動(dòng)執(zhí)行腳本，操作難度較大。此外，由于企業(yè)中需要保護(hù)的數(shù)據(jù)庫(kù)類型較多，且可能所處平臺(tái)也存在差異，因而對(duì)于備份產(chǎn)品的兼容性要求較高。數(shù)據(jù)保護(hù)一體機(jī)采用圖形化向?qū)Х绞?，無(wú)需用戶手動(dòng)執(zhí)行備份和恢復(fù)腳本

25、，簡(jiǎn)化備份恢復(fù)的難度。數(shù)據(jù)庫(kù)備份的基本流程如下：在需要保護(hù)的生產(chǎn)服務(wù)器上安裝備份客戶端代理，并連接管理控制臺(tái)。備份客戶端代理將識(shí)別生產(chǎn)服務(wù)器中的數(shù)據(jù)庫(kù)數(shù)據(jù)，并通過(guò)備份API讀取生產(chǎn)服務(wù)器中的文件數(shù)據(jù)，然后將其傳輸至數(shù)據(jù)保護(hù)一體機(jī)的存儲(chǔ)介質(zhì)中，完成備份。數(shù)據(jù)保護(hù)一體機(jī)的管理控制臺(tái)是整個(gè)備份系統(tǒng)的紐帶，負(fù)責(zé)向客戶端軟件和一體機(jī)服務(wù)端發(fā)送控制信息，管理整個(gè)備份任務(wù)的運(yùn)行。3.3.1.10racle備份恢復(fù)Oracle備份與恢復(fù)采用Oracle內(nèi)置的RMAN技術(shù)，實(shí)現(xiàn)Oracle數(shù)據(jù)庫(kù)的熱備份和恢復(fù)。管理員發(fā)起數(shù)據(jù)備份任務(wù)，管理控制臺(tái)向生產(chǎn)服務(wù)器上的備份客戶端代理發(fā)送備份命令，備份客戶端代理利用RMA

26、N調(diào)用數(shù)據(jù)庫(kù)的備份API，讀取數(shù)據(jù)庫(kù)中的數(shù)據(jù)，并處理用戶的重刪或加密請(qǐng)求，最后再將數(shù)據(jù)發(fā)送到數(shù)據(jù)保護(hù)一體機(jī)完成存儲(chǔ)。發(fā)起數(shù)據(jù)恢復(fù)任務(wù)，管理控制臺(tái)向生產(chǎn)服務(wù)器上的備份客戶端代理發(fā)送恢復(fù)命令，備份客戶端代理利用RMAN調(diào)用數(shù)據(jù)庫(kù)的恢復(fù)API，從備份服務(wù)器中讀取數(shù)據(jù)，最后再將數(shù)據(jù)發(fā)送到恢復(fù)API完成恢復(fù)。RMANAllsAei%er2秋任舊護(hù)II單勺財(cái)：*RACtft圖3-9oracle備份恢復(fù)原理圖.；1屮技術(shù)特點(diǎn)如下:支持的備份類型:完全備份、增量備份和事務(wù)日志備份。支持的備份粒度:實(shí)例。支持BCT選項(xiàng)：增量備份可通過(guò)BCT直接定位變化的數(shù)據(jù)塊，加速增量備份速度。數(shù)據(jù)重刪：與源端重復(fù)數(shù)據(jù)刪除技術(shù)

27、結(jié)合，支持塊級(jí)重刪，在傳輸帶寬和存儲(chǔ)空間方面優(yōu)勢(shì)明顯。數(shù)據(jù)壓縮：用。支持?jǐn)?shù)據(jù)庫(kù)自帶高級(jí)壓縮，及備份軟件附帶的數(shù)據(jù)壓縮，有效減少備份數(shù)據(jù)的空間占支持的恢復(fù)粒度：實(shí)例、控制文件、參數(shù)文件、日志文件。支持的恢復(fù)位置：支持恢復(fù)實(shí)例至原機(jī)原位置、原機(jī)異位置、異機(jī)原位置、異機(jī)異位置。支持多通道：支持多通道備份和恢復(fù)。歸檔日志刪除策略：基于備份成功次數(shù)，支持自動(dòng)刪除指定時(shí)間段內(nèi)已備份的Oracle歸檔日志，避免因歸檔日志過(guò)滿影響數(shù)據(jù)庫(kù)運(yùn)行。RMAN參數(shù)配置：支持用戶根據(jù)實(shí)際情況，靈活進(jìn)行RMAN參數(shù)配置。3312SQLServer備份恢復(fù)SQLServer備份與恢復(fù)采用其內(nèi)置的VDI接實(shí)現(xiàn)SQLServer

28、數(shù)據(jù)庫(kù)的熱備份和恢復(fù)。管理員發(fā)起數(shù)據(jù)備份任務(wù)，管理控制臺(tái)向生產(chǎn)服務(wù)器上的備份客戶端代理發(fā)送備份命令，備份客戶端代理調(diào)用數(shù)據(jù)庫(kù)的備份API,發(fā)起備份恢復(fù)任務(wù)，數(shù)據(jù)庫(kù)根據(jù)備份恢復(fù)命令通過(guò)VDI接發(fā)送或者接收數(shù)據(jù)。備份時(shí)備份客戶端代理讀取數(shù)據(jù)庫(kù)中的數(shù)據(jù)，并處理用戶的重刪或加密請(qǐng)求，最后再將數(shù)據(jù)發(fā)送到數(shù)據(jù)保護(hù)一體機(jī)完成存儲(chǔ)。發(fā)起數(shù)據(jù)恢復(fù)任務(wù)時(shí)，管理控制臺(tái)向生產(chǎn)服務(wù)器上的備份客戶端代理發(fā)送恢復(fù)命令，備份客戶端代理調(diào)用數(shù)據(jù)庫(kù)的恢復(fù)API,從備份服務(wù)器中讀取數(shù)據(jù)，最后再將數(shù)據(jù)發(fā)送到恢復(fù)VDI接中，傳遞給數(shù)據(jù)庫(kù)完成恢復(fù)。ServerlServer?pH1口ciSQLServer環(huán)境數(shù)揭保護(hù)體機(jī)備怕客戶錦代理圖

29、3-10SQLServer備份恢復(fù)原理圖技術(shù)特點(diǎn)如下:支持的備份類型：完全備份，增量備份、事務(wù)日志備份。備份對(duì)象：SQLServer數(shù)據(jù)庫(kù)或?qū)嵗?。?shù)據(jù)重刪：支持?jǐn)?shù)據(jù)庫(kù)備份數(shù)據(jù)的源端重刪，具有很大的存儲(chǔ)空間和傳輸帶寬優(yōu)勢(shì)。數(shù)據(jù)壓縮：支持?jǐn)?shù)據(jù)庫(kù)自帶高級(jí)壓縮（SQLServer2008以上版本支持），及備份軟件附帶的數(shù)據(jù)壓縮，有效減少備份數(shù)據(jù)的空間占用。身份驗(yàn)證模式：支持Windows認(rèn)證模式（Windows身份驗(yàn)證）和混合模式（Windows身份驗(yàn)證和SQLServer身份驗(yàn)證）兩種身份驗(yàn)證模式。指定時(shí)間點(diǎn)恢復(fù)：根據(jù)事務(wù)日志備份時(shí)間點(diǎn)，選擇將SQLServer數(shù)據(jù)庫(kù)恢復(fù)到最新狀態(tài)，或者恢復(fù)到指定的

30、時(shí)間點(diǎn)?；謴?fù)位置：支持恢復(fù)實(shí)例/數(shù)據(jù)庫(kù)至原機(jī)原位置、原機(jī)異位置、異機(jī)原位置。指定數(shù)據(jù)庫(kù)名恢復(fù)：支持恢復(fù)到異名數(shù)據(jù)庫(kù)。3313MySQL備份恢復(fù)MySQL備份與恢復(fù)采用邏輯備份方式實(shí)現(xiàn)MySQL數(shù)據(jù)庫(kù)的熱備份和恢復(fù)。數(shù)據(jù)保護(hù)體機(jī)基于MySQL數(shù)據(jù)庫(kù)的管理接實(shí)現(xiàn)了一套備份恢復(fù)插件。管理員發(fā)起數(shù)據(jù)備份任務(wù)，管理控制臺(tái)向生產(chǎn)服務(wù)器上的備份客戶端代理發(fā)送備份命令，備份客戶端代理調(diào)用數(shù)據(jù)庫(kù)的備份插件，獲取MySQL數(shù)據(jù)，并處理用戶的重刪或加密請(qǐng)求，最后再將數(shù)據(jù)發(fā)送到數(shù)據(jù)保護(hù)一體機(jī)完成存儲(chǔ)。發(fā)起數(shù)據(jù)恢復(fù)任務(wù)時(shí)，管理控制臺(tái)向生產(chǎn)服務(wù)器上的備份客戶端代理發(fā)送恢復(fù)命令，備份客戶端代理調(diào)用數(shù)據(jù)庫(kù)的恢復(fù)插件，從備份服

31、務(wù)器中讀取數(shù)據(jù)，最后再將數(shù)據(jù)寫入數(shù)據(jù)庫(kù)中完成恢復(fù)。MySQLmvI散風(fēng)呆護(hù)休機(jī)IM嚴(yán)QL環(huán)境備悄喜戶制弋理圖3-11MySQL備份恢復(fù)原理圖技術(shù)特點(diǎn)如下:支持的備份類型：完全備份，增量備份。備份對(duì)象：數(shù)據(jù)庫(kù)或?qū)嵗?shù)據(jù)重刪：支持?jǐn)?shù)據(jù)庫(kù)備份數(shù)據(jù)的源端重刪，具有很大的存儲(chǔ)空間和傳輸帶寬優(yōu)勢(shì)。數(shù)據(jù)壓縮：支持備份軟件附帶的數(shù)據(jù)壓縮，有效減少備份數(shù)據(jù)的空間占用?；謴?fù)位置：支持恢復(fù)實(shí)例/數(shù)據(jù)庫(kù)至原機(jī)原位置、異機(jī)原位置。3314DB2備份恢復(fù)DB2備份與恢復(fù)采用其內(nèi)置的API接實(shí)現(xiàn)DB2數(shù)據(jù)庫(kù)的熱備份和恢復(fù)。管理員發(fā)起數(shù)據(jù)備份任務(wù)，管理控制臺(tái)向生產(chǎn)服務(wù)器上的備份客戶端代理發(fā)送備份命令，備份客戶端代理調(diào)用數(shù)據(jù)

32、庫(kù)的備份API,發(fā)起備份恢復(fù)任務(wù)，數(shù)據(jù)庫(kù)根據(jù)備份恢復(fù)命令通過(guò)vendor接發(fā)送或者接收數(shù)據(jù)。備份時(shí)備份客戶端代理通過(guò)vender讀取數(shù)據(jù)庫(kù)中的數(shù)據(jù)，并處理用戶的重刪或加密請(qǐng)求，最后再將數(shù)據(jù)發(fā)送到備份服務(wù)器完成存儲(chǔ)。發(fā)起數(shù)據(jù)恢復(fù)任務(wù)時(shí)，管理控制臺(tái)向生產(chǎn)服務(wù)器上的備份客戶端代理發(fā)送恢復(fù)命令，備份客戶端代理調(diào)用數(shù)據(jù)庫(kù)的恢復(fù)API,從備份服務(wù)器中讀取數(shù)據(jù)，最后再將數(shù)據(jù)發(fā)送到恢復(fù)vendor接中，傳遞給數(shù)據(jù)庫(kù)完成恢復(fù)。DIPVendorIiiIIIIIISArwrlm?環(huán)境ServerL1一一玷mst早護(hù)體機(jī)圖3-12DB2備份恢復(fù)原理圖技術(shù)特點(diǎn)如下：支持的備份類型：完全備份，增量備份、差異備份。備份對(duì)

33、象：數(shù)據(jù)庫(kù)或?qū)嵗?shù)據(jù)重刪：支持?jǐn)?shù)據(jù)庫(kù)備份數(shù)據(jù)的源端重刪，具有很大的存儲(chǔ)空間和傳輸帶寬優(yōu)勢(shì)。數(shù)據(jù)壓縮：支持備份軟件附帶的數(shù)據(jù)壓縮，有效減少備份數(shù)據(jù)的空間占用。身份驗(yàn)證模式：支持基于用戶名密碼的身份驗(yàn)證模式。日志刪除：支持歸檔日志刪除策略，可設(shè)置自動(dòng)刪除幾天前的歸檔日志，減少人工操作負(fù)擔(dān)。指定時(shí)間點(diǎn)恢復(fù)：支持指定備份時(shí)間點(diǎn)瀏覽恢復(fù)，可將數(shù)據(jù)庫(kù)恢復(fù)到最新狀態(tài)或回到指定時(shí)間點(diǎn)的狀態(tài)?；謴?fù)粒度：數(shù)據(jù)庫(kù)、實(shí)例、表空間?；謴?fù)位置：支持恢復(fù)實(shí)例/數(shù)據(jù)庫(kù)至原機(jī)原位置、原機(jī)異位置、異機(jī)原位置。指定數(shù)據(jù)庫(kù)名恢復(fù)：支持恢復(fù)到異名數(shù)據(jù)庫(kù)。3.3.1.5Hadoop備份恢復(fù)Hadoop備份與恢復(fù)采用Hadoop標(biāo)準(zhǔn)的H

34、DFS接來(lái)實(shí)現(xiàn)Hadoop的熱備份和恢復(fù)。管理員發(fā)起數(shù)據(jù)備份恢復(fù)，管理控制臺(tái)向Hadoop服務(wù)器上的備份客戶端發(fā)送備份恢復(fù)命令，客戶端調(diào)用HDFS接，對(duì)Hadoop數(shù)據(jù)進(jìn)行備份恢復(fù)。Hadoop的定時(shí)備份與恢復(fù)特點(diǎn)如下：支持的備份類型：完全備份、增量備份、差異備份。支持的備份粒度、恢復(fù)粒度：文件。無(wú)代理備份：無(wú)需在Hadoop集群中安裝客戶端，避免系統(tǒng)資源爭(zhēng)用，節(jié)省部署見，簡(jiǎn)化了管理復(fù)重刪：支持源端重復(fù)數(shù)據(jù)刪除，提升備份效率，節(jié)省存儲(chǔ)空間。永久增量：支持永久增量備份，提升備份效率，節(jié)省存儲(chǔ)空間。支持的恢復(fù)位置：支持恢復(fù)到原始的HDFS,或其他HDFS,或者其他文件系統(tǒng)，女口Windows、Linux。多節(jié)點(diǎn)并發(fā)備份：支持同時(shí)備份Hadoop集群中的多個(gè)節(jié)點(diǎn)，大幅度提升備份性能，滿足PB級(jí)數(shù)據(jù)備份效率需求。3316GBase備份恢復(fù)GBase備份與恢復(fù)采用其內(nèi)置的API接實(shí)現(xiàn)GBase數(shù)據(jù)庫(kù)的熱備份和恢復(fù)。管理員