統(tǒng)一數(shù)據(jù)管理

美國慷孚系統(tǒng)公司資深工程師孫春杰CommVault簡介專業(yè)數(shù)據(jù)管理軟件廠商總部:美國新澤西州,Oceanport1996年從AT&T分立出來1998年完成產品架構的設計2000年推出第一個產品2006年9月在NASDAQ上市福布斯2007年全球增長最快的高科技企業(yè)位列第17位倡導“一體化信息管理”理念單一產品實現(xiàn)對數(shù)據(jù)保護,歸檔及復制的一體化管理在業(yè)界處領導者地位AbilitytoExecute執(zhí)行力CompletenessofVision前瞻性NichePlayers觀望者Visionaries觀望者Challengers挑戰(zhàn)者Leaders領導者Figure1.MagicQuadrantforEnterprisesBackup/RecoverySoftware,July2004andJuly2005.MovementindicateschangefromJuly2004toJuly2005.EnterpriseBackup/RecoverySoftwareGartnerMagicQuadrant2004-20052006年業(yè)界最受肯定的企業(yè)2008年蟬聯(lián)業(yè)界最受肯定的企業(yè)超過8,000用戶地區(qū)行業(yè)軟件業(yè)零售制造業(yè)交通能源亞太區(qū)服務業(yè)InterpublicGroup金融政府電信娛樂高科技歐洲法律北美GovernmentOfCanada中國典型客戶電信遼寧移動浙江聯(lián)通貴州聯(lián)通金融中國建設銀行民生人壽總部渣打銀行杭州商行企業(yè)上汽集團桑塔納銷售總公司蘇州佳能南京鹽業(yè)集團新東方學校吉林煙草廣西煙草一汽大眾H3CMaersk船務公司政府商務部文化部國土資源部上海海關內蒙公安杭州市交警廣東省人大浙江省檔案館上海市及各區(qū)的城建檔案館電力大唐發(fā)電吉林電力浙江省能源集團互聯(lián)網騰訊（QQ）易趣網第九城市百度企業(yè)數(shù)據(jù)現(xiàn)狀數(shù)據(jù)量急速增長100TINFORMIXFILEExchangeSAP……一、數(shù)據(jù)類型和總量呈現(xiàn)高速雙增長，昂貴的存儲系統(tǒng)充斥著大量不必要的重復數(shù)據(jù)二、數(shù)據(jù)由簡單的兩層(原始數(shù)據(jù)/應用數(shù)據(jù))向多層數(shù)據(jù)發(fā)展，數(shù)據(jù)分布趨向復雜，存儲由一級走向分級存儲原始數(shù)據(jù)應用數(shù)據(jù)原始數(shù)據(jù)VTL盤陣拷貝(快照)拷貝復制(異地)帶庫主機衍生數(shù)據(jù)傳輸網管話務網管原始話單……..系統(tǒng)備份遷移快照管理者復制規(guī)劃優(yōu)化投資策略歸檔報告報告報告報告三、數(shù)據(jù)保護停留在管理員層面，人工干預較多；管理員操作企業(yè)最關鍵的資產－數(shù)據(jù)，權責不對等；管理層不能及時直觀的對數(shù)據(jù)進行管理NORMALDATABASE

SECONDARYDATABASE

DBDBDBDBIMPORTANTDATABASE

DB

DBBACKUPSNAPSHOT

四、沒有數(shù)據(jù)分級標準，數(shù)據(jù)保護缺乏統(tǒng)一的策略統(tǒng)一數(shù)據(jù)管理策略管理資產管理審計管理配置管理故障知識管理通知管理數(shù)據(jù)分析統(tǒng)一數(shù)據(jù)管理SIM

SIM－統(tǒng)一數(shù)據(jù)管理功能身份管理統(tǒng)一數(shù)據(jù)管理的各個組成部分用戶的問題資產管理現(xiàn)在的數(shù)據(jù)占用了多少存儲，成本如何？哪些部門或者用戶占用了多少存儲，成本如何？不同類型的數(shù)據(jù)占用了多少存儲，成本如何？哪些數(shù)據(jù)是不經常使用的，或者是無用的，這些數(shù)據(jù)占用了多少存儲，成本如何？哪些數(shù)據(jù)操作占用了多少存儲，成本如何？針對應用或者業(yè)務，不同類型數(shù)據(jù)占用的存儲空間和相應的成本？針對不同的數(shù)據(jù)存儲，如何規(guī)劃我的數(shù)據(jù)存放？CommVault的資產管理只針對數(shù)據(jù)和存儲而言：全局的存儲資產管理方案資產管理能夠按照不同的應用，部門或者用戶，收集信息能夠按照不同的數(shù)據(jù)類型，介質或者設備，收集信息能夠按照不同的數(shù)據(jù)存放性質，收集信息（在線，近線，離線）能夠按照以上的分類，賦予不同類型的數(shù)據(jù)，介質，設備不同的成本能夠按照用戶的需求，給出各種資產管理的分析報表CommVault能做到的事：常用報表資產管理報表舉例-按照部門分類不同記帳部門的成本每個記帳部門的詳細成本常用報表資產管理報表舉例-按照數(shù)據(jù)分類次級存儲的存儲數(shù)據(jù)，可以關聯(lián)相應的成本預算規(guī)劃資產管理報表舉例-預算規(guī)劃CommVault的狀態(tài)監(jiān)控CommVault的狀態(tài)顯示你可以查看整個數(shù)據(jù)管理系統(tǒng)的狀態(tài)你可以選擇查看該系統(tǒng)的摘要信息或其它信息CommVault的狀態(tài)監(jiān)控CommVault的狀態(tài)顯示你可以去查看該系統(tǒng)中某個管理節(jié)點的信息你也可以清晰的看到某個管理節(jié)點的狀態(tài)信息你也可以看到該管理節(jié)點的內容信息CommVault的狀態(tài)監(jiān)控CommVault的狀態(tài)顯示你可以查看某個設備的狀態(tài)你可以查看該設備是如何使用的數(shù)據(jù)遷移-釋放空間，提高效率，降低成本釋放在線存儲的大小，改進應用、備份和恢復的性能遷移數(shù)據(jù)可用來達到保存的目的（文件歸檔）解決容量配額問題

End-users&AppsTransparentin-placeaccessOutlookSearch&Browse數(shù)據(jù)遷移集1,000Gb之前Staticdata按周進行94數(shù)據(jù)保護集700Gb300Gb釋放

300Gb之后66空間利用率增加30%備份減少30%自動回調遷移策略Itemsover365daysoldandbiggerthan10K解決大量數(shù)據(jù)占用存儲空間的方法事實上有多少數(shù)據(jù)屬于生產存儲層？4.15%在生產層上有85%的數(shù)據(jù)不曾使用或者很少使用。只有5-15%的數(shù)據(jù)才是日常生產必須的。CommVault如何來做遷移資產數(shù)據(jù)保護方案－備份DBDataSPData網絡備份SAN備份異地備份ServerFree備份數(shù)據(jù)資產安全的最后一道防線CommVault的策略管理方案策略管理CommVault系統(tǒng)中策略的含義：在傳統(tǒng)的數(shù)據(jù)管理系統(tǒng)中，最重要的管理策略是2類：1類是計劃策略的管理，說明了哪些數(shù)據(jù)在什么時間作哪種類型的數(shù)據(jù)操作；另外1類是管理數(shù)據(jù)保留方式的管理，說明了哪些數(shù)據(jù)在什么時間存放在哪種介質上（數(shù)據(jù)保留方式管理），這個定義了數(shù)據(jù)生命周期的管理方式。CommVault提供了針對這2種類型的策略管理，提供的是計劃策略管理存儲策略管理CommVault計劃策略管理特點策略管理CommVault系統(tǒng)中計劃策略管理方式的特點：CommVault提供了1個單一全局視圖，用戶可以在1個界面上設置，查看，修改包括：管理計劃，保護計劃，恢復計劃，其它輔助計劃等各種計劃策略。CommVault也可以提供計劃策略模板，關聯(lián)多個管理單元，從而降低計劃管理的復雜度。用戶也可以制定觸發(fā)器，來觸發(fā)某一個動作，實現(xiàn)非計劃或者事件觸發(fā)的操作。CommVault存儲策略管理特點策略管理CommVault系統(tǒng)中存儲策略管理方式的特點：CommVault的存儲策略管理，完成了數(shù)據(jù)保留方式的管理。CommVault的存儲策略管理，提供了N級別的存儲管理方式，從而能夠真正實現(xiàn)數(shù)據(jù)生命周期管理。CommVault的存儲策略管理，跨越了多個應用層次，能夠把備份，歸檔結合在一起，實現(xiàn)全局的近線，離線數(shù)據(jù)的存放管理。備份歸檔存儲策略原理示意圖每個數(shù)據(jù)副本可以指向不同的設備每個數(shù)據(jù)副本可以設置不同的保留時間以實現(xiàn)ILM存儲策略中含有多個數(shù)據(jù)副本計劃策略管理說明策略管理可以以日歷的方式管理計劃策略CommVault的身份管理特點身份管理CommVault的身份管理包括2個方面：區(qū)域管理：說明該用戶對哪些區(qū)域或者部門的服務器有管理權限角色管理：說明該用戶有哪些操作權限1個用戶的權限是上面2個內容的交集為了方便用戶的權限管理，CommVault采用了類式WINDOWSAD的管理模式，利用安全組的方式來設置管理；同時，還能將AD的權限引入CommVault系統(tǒng)，并且和CommVault系統(tǒng)的權限關聯(lián)，從而實現(xiàn)SSO功能。CommVault權限管理的結構圖身份管理(MSDS)NovellDirectoryService(NDS)(OpenLDAP)LightweightDirectoryAccessProtocol(LDDAP)操作區(qū)域對象ActiveDirectory用戶組CommCell用戶組CommCell擴展域組CommCell用戶功能權限CommVault介質預防故障功能特點故障處理說明CommVault數(shù)據(jù)預防-校驗功能特點故障處理說明CommVault的通知和報警通知和報警CommVault的通知和報警管理是通過3個功能來具體實現(xiàn)的。一個是報警功能，另外一個是報表功能，還有狀態(tài)顯示功能。通過這3個功能，利用GUI，WEB，文件，郵件，SNMP，事件查看器，電子傳呼機等方式，將已經發(fā)生或者將要發(fā)生的事件或者錯誤傳送給管理人員，從而避免，減少，分析，預防操作錯誤。CommVault報警功能特點報警管理你可以為該報警采用各種通知方式你也可以修改報警的內容你還可以添加報警的標簽定義CommVault報表功能特點報表管理用戶可以制定報表的呈現(xiàn)方式你可以通過郵件發(fā)送給管理人員你也可以把它保存到文件或者WEB服務器上，供管理人員查詢CommVault審計管理的內容審計管理針對突發(fā)事件的審計能夠查詢和尋找針對系統(tǒng)某個事件的內容，例如：設備故障，人員操作等等。針對人員的審計能夠針對操作人員做的任何操作，記錄并且查詢。例如：登陸，退出，修改配置等等。針對數(shù)據(jù)操作的審計能夠針對某個應用數(shù)據(jù)作的任何操作，進行記錄并且查詢。例如：某個應用是否在需要的時間進行了備份，備份是否成功，具體情況如何。針對事件的審計管理審計管理CommVault將系統(tǒng)運行期間所有發(fā)生的事件都存放在數(shù)據(jù)庫中，你可以通過事件瀏覽器查看，也可以通過報表工具查看。數(shù)據(jù)分析能夠降低成本，提高效率數(shù)據(jù)分析ESI存儲數(shù)據(jù)增加迅速效率下降成本上升主存成本增高應用效率下降備份時間增長備份成本增高數(shù)據(jù)分析1年以上的文檔沒有訪問有些文檔的用戶并不重要某類文檔不重要如MP3,AVI等采用分級存儲的技術手段控制主存成本不影響效率減少備份成本減少備份時間數(shù)據(jù)分析能夠控制預算數(shù)據(jù)分析存儲數(shù)據(jù)增加應用類型增加企業(yè)業(yè)務增長無法精確預測數(shù)據(jù)的發(fā)展預算不可控預算過少滿足不了需求預算過多造成資源浪費成本上升數(shù)據(jù)分析知道不同應用的數(shù)據(jù)發(fā)展趨勢知道不同性質的數(shù)據(jù)發(fā)展趨勢知道不同設備的數(shù)據(jù)發(fā)展趨勢精確預測數(shù)據(jù)的發(fā)展精確計劃未來的預算數(shù)據(jù)分析使用舉例－分級存儲數(shù)據(jù)分析按訪問時間的數(shù)據(jù)分析按文檔類型的數(shù)據(jù)分析按文檔擁有者的數(shù)據(jù)分析歸檔操作設置界面歸檔操作后的結果可以得到歸檔后的成本核算數(shù)據(jù)分析使用舉例－法規(guī)查詢需求數(shù)據(jù)分析技術特點體系結構上的優(yōu)勢CSEnterpriseCommCellAiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDa6258個客戶端:AIX,Solaris,Windows827MediaAgent–SANDisk&Tape每周2000TB的增量備份CommVault–更靈活、更容易擴展競爭對手–只能增加管理域統(tǒng)一的邏輯目錄，分布式架構–-整個管理域只有一個視圖優(yōu)化的索引引擎具有極大的靈活性、數(shù)據(jù)完整性和性能分布式架構為跨區(qū)域集中管理打下了堅實基礎合成全備份IncrementalsFull123456789103536352412345678910273383610IncrementalsSynthFull12345678910SynthFullForExchange,LotusDomino,AllFileSystems，ImageLevelSIS是怎樣工作的:WeeklyFullBackupABCDAEFGAHIJAWeeklyFullBackupAB’’C’D’AE’FG’AH’IJ’’AArchiveADEFI同樣的文件跨越不同的客戶端，如：Windows文件系統(tǒng)和應用IncrBackupB’C’G’相同的文件不需要再次重復寫入IncrBackupB’’H’J’Da