數(shù)據(jù)歸檔方案大綱

什么是數(shù)據(jù)歸檔1、數(shù)據(jù)歸檔定義數(shù)據(jù)存檔（dataarchiving）是將不再經(jīng)常使用的數(shù)據(jù)移到一個(gè)單獨(dú)的存儲(chǔ)設(shè)備來(lái)進(jìn)行長(zhǎng)期保存的過(guò)程。數(shù)據(jù)存檔由舊的數(shù)據(jù)組成，但它是以后參考所必需且很重要的數(shù)據(jù)，其數(shù)據(jù)必須遵從規(guī)則來(lái)保存。數(shù)據(jù)存檔具有索引和搜索功能，這樣文件可以很容易地找到。為什么要進(jìn)行數(shù)據(jù)歸檔1、數(shù)據(jù)歸檔的好處IT部門通常愿意將歸檔作為應(yīng)用相關(guān)加強(qiáng)的理由。具體說(shuō)來(lái)，其帶來(lái)的好處包含如下的幾個(gè)方面：節(jié)約成本：數(shù)據(jù)歸檔很大程度上都與降低成本的話題密不可分。并且作為每GB存儲(chǔ)所耗費(fèi)的成本相關(guān)。許多廠商會(huì)提供整體擁有成本這樣的分析。所有的諸如此類的分析都將產(chǎn)生一個(gè)正面的結(jié)果，其前提是同意有關(guān)數(shù)據(jù)輸入及對(duì)該模型的假設(shè)?？s短備份窗口：即便是備份到磁盤上使用了數(shù)據(jù)壓縮和重復(fù)數(shù)據(jù)刪除技術(shù)，備份管理員往往會(huì)遇到備份窗口相關(guān)的壓力，原因是數(shù)據(jù)增長(zhǎng)實(shí)在是太快了，年增長(zhǎng)率通常達(dá)到約50%甚至更多。因此備份完全沒(méi)有改動(dòng)的數(shù)據(jù)是沒(méi)有必要的。歸檔可以從備份任務(wù)中剝離數(shù)十TB的數(shù)據(jù)甚至更多。由于早期的歸檔技術(shù)僅限于向離線備份磁帶遷移，企業(yè)或許會(huì)將新的歸檔應(yīng)用看成一塊“新的綠地”。在絕大多數(shù)情況下，傳統(tǒng)磁帶仍需要保存在庫(kù)中，只是有不同的保留和過(guò)期策略。存儲(chǔ)經(jīng)理人需要確保備份策略不會(huì)和歸檔策略產(chǎn)生沖突。過(guò)早銷毀數(shù)據(jù)可能會(huì)使企業(yè)陷于法規(guī)要求時(shí)無(wú)法滿足合規(guī)規(guī)范的危險(xiǎn)境地。而另一方面，將數(shù)據(jù)多保留一些有助于電子發(fā)現(xiàn)工作，即便這并非強(qiáng)制性的要求。不管怎樣，其結(jié)果對(duì)成本的影響都會(huì)讓企業(yè)在各自利弊之前權(quán)衡兩難。數(shù)據(jù)歸檔的標(biāo)準(zhǔn)和規(guī)范1、現(xiàn)代歸檔的總體特征最新技術(shù)的發(fā)展會(huì)對(duì)歸檔方式的效率產(chǎn)生巨大的積極影響，以下幾點(diǎn)特征需要牢記：低成本存儲(chǔ)：節(jié)約成本仍然是尋求主存儲(chǔ)替代方案的主要?jiǎng)訖C(jī)。數(shù)據(jù)耐用性：歸檔數(shù)據(jù)必須得到很好的保護(hù)，對(duì)耐用性的需求包括站點(diǎn)災(zāi)難以及存儲(chǔ)組件故障。歸檔就是要保留數(shù)據(jù)，而不是轉(zhuǎn)移數(shù)據(jù)或丟失數(shù)據(jù)。方便存取數(shù)據(jù)：歸檔數(shù)據(jù)必須能夠輕松存取——如果不行，那又何必歸檔呢？無(wú)線可擴(kuò)展性：當(dāng)今的架構(gòu)需要輕松擴(kuò)展，從而節(jié)約成本。非破壞性的技術(shù)遷移：解決方案必須能夠無(wú)中斷地遷移到新的組件技術(shù)，從而提供長(zhǎng)期利益，并從當(dāng)前投資中實(shí)現(xiàn)成本節(jié)約。2、歸檔存儲(chǔ)的新技術(shù)特性市面上出現(xiàn)了一些新的熱門技術(shù)選項(xiàng)，實(shí)時(shí)歸檔策略時(shí)必須加以考慮：擦除基于代碼的對(duì)象存儲(chǔ)：磁盤歸檔食物鏈中有史以來(lái)最偉大的事就是糾刪碼技術(shù)的出現(xiàn)，它有效地創(chuàng)建了數(shù)據(jù)開(kāi)銷，以便在組件故障時(shí)保護(hù)數(shù)據(jù)，這類似于“RAID技術(shù)添加奇偶作為開(kāi)銷”的方式。然而，糾刪碼與RAID不同，糾刪碼技術(shù)以數(shù)據(jù)分散的形式增加了開(kāi)銷，而RAID技術(shù)則在一組固定的硬件組件上運(yùn)行。糾刪碼的分散算法將單獨(dú)文件或?qū)ο筠D(zhuǎn)化為許多數(shù)據(jù)元素，每個(gè)數(shù)據(jù)元素都攜帶少量冗余，這樣用戶只需要取回?cái)?shù)據(jù)元素的一部分來(lái)檢索完整對(duì)象。當(dāng)擦除基于代碼的對(duì)象存儲(chǔ)被部署時(shí)，無(wú)需復(fù)制，數(shù)據(jù)自然就能得到保護(hù)，以防止硬件組件故障。此外，當(dāng)對(duì)象存儲(chǔ)分散在多個(gè)站點(diǎn)時(shí)（稱為“地理分布”），數(shù)據(jù)會(huì)得到進(jìn)一步保護(hù)，防止站點(diǎn)級(jí)災(zāi)難，同樣也不要復(fù)制。由于不需要數(shù)據(jù)復(fù)制，更不必說(shuō)硬件是用來(lái)存儲(chǔ)和保護(hù)數(shù)據(jù)的。這就是為何從根本上來(lái)說(shuō)，充分利用糾刪碼技術(shù)的數(shù)據(jù)存儲(chǔ)能夠大大降低硬件成本。同時(shí)，由于只管理較少的數(shù)據(jù)，軟件成本也有可能下降。最后，由于糾刪碼可在組件層面或驅(qū)動(dòng)器層面處理硬件故障，而不是像RAID方式那樣只能在機(jī)柜或機(jī)箱層面處理故障，我們很容易就會(huì)發(fā)現(xiàn)，在糾刪碼環(huán)境中將組件升級(jí)到新技術(shù)并不需要破壞性的叉車升級(jí)方式。LTFS和NAS磁帶：關(guān)于LTFS（線性磁帶文件系統(tǒng)），已經(jīng)有很多傳言了。該技術(shù)于2010年推出，并能夠?qū)崿F(xiàn)全線的磁帶使用模式。LTFS技術(shù)在磁帶盒上提供了一個(gè)完整的自我描述文件系統(tǒng)，這使用戶像是在自己的文件系統(tǒng)中將數(shù)據(jù)讀取和寫入到磁帶上，用戶可以逐字地將文件拖動(dòng)到磁帶上，甚至永遠(yuǎn)不用再擔(dān)心“必須使用專屬備份應(yīng)用程序而在磁帶上讀寫數(shù)據(jù)”的問(wèn)題。當(dāng)今市面上有一些解決方案，能夠讓大型磁帶庫(kù)像NAS共享一樣被訪問(wèn)，讀取磁帶上的數(shù)據(jù)會(huì)變得多么輕松？越來(lái)越多的軟件解決方案現(xiàn)在就支持LTFS格式，由于LTFS是作為SNIA組織的開(kāi)放式標(biāo)準(zhǔn)而被推動(dòng)的，LTFS磁帶非常適合長(zhǎng)期歸檔應(yīng)用程序，這是因?yàn)殚_(kāi)放式標(biāo)準(zhǔn)更有可能針對(duì)未來(lái)系統(tǒng)做好準(zhǔn)備。LTFS軟件能夠?qū)⒋艓蠑?shù)據(jù)的讀取和可移植性提升至全新的水平。數(shù)據(jù)和磁帶完整性檢查：在磁帶領(lǐng)域，數(shù)據(jù)耐用性的革命性特點(diǎn)就是數(shù)據(jù)完整性檢查。一些產(chǎn)品讓用戶能夠制定策略，確定磁帶盒旋轉(zhuǎn)到驅(qū)動(dòng)器里的頻率是多少，以測(cè)試磁帶和磁帶上數(shù)據(jù)的完整性。這就像旋轉(zhuǎn)酒瓶進(jìn)行長(zhǎng)期保存一樣。然而，與旋轉(zhuǎn)酒瓶不同，用戶能夠?qū)梢傻拇艓Р扇⌒袆?dòng)，防止數(shù)據(jù)丟失。3、選擇歸檔解決方案要素必要項(xiàng)：數(shù)據(jù)歸檔數(shù)據(jù)遷移數(shù)據(jù)索引查找工具最好具有項(xiàng)：數(shù)據(jù)消除重復(fù)刪除壓縮單一實(shí)例存儲(chǔ)完整性檢查硬件特性：可擴(kuò)展性成本效益可靠性可變性（根據(jù)要求）完整性檢查最后一點(diǎn)需要強(qiáng)調(diào)的是，歸檔軟件需要有自動(dòng)完成功能。沒(méi)人希望歸檔都是手工操作的。一款設(shè)計(jì)良好的歸檔軟件需要能很好的適應(yīng)企業(yè)的歸檔策略。自動(dòng)化的歸檔進(jìn)程往往能幫助我們自動(dòng)執(zhí)行好企業(yè)的歸檔策略并且保證不落下任何東西。與此同時(shí)，軟件也需要為歸檔進(jìn)程創(chuàng)建詳細(xì)的日志說(shuō)明。四、我們的歸檔方案數(shù)據(jù)歸檔的好處IT部門通常愿意將歸檔作為應(yīng)用相關(guān)加強(qiáng)的理由。具體說(shuō)來(lái)，其帶來(lái)的好處包含如下的幾個(gè)方面：節(jié)約成本：數(shù)據(jù)歸檔很大程度上都與降低成本的話題密不可分。并且作為每GB存儲(chǔ)所耗費(fèi)的成本相關(guān)。許多廠商會(huì)提供整體擁有成本這樣的分析。所有的諸如此類的分析都將產(chǎn)生一個(gè)正面的結(jié)果，其前提是同意有關(guān)數(shù)據(jù)輸入及對(duì)該模型的假設(shè)。縮短備份窗口：即便是備份到磁盤上使用了數(shù)據(jù)壓縮和重復(fù)數(shù)據(jù)刪除技術(shù)，備份管理員往往會(huì)遇到備份窗口相關(guān)的壓力，原因是數(shù)據(jù)增長(zhǎng)實(shí)在是太快了，年增長(zhǎng)率通常達(dá)到約50%甚至更多。因此備份完全沒(méi)有改動(dòng)的數(shù)據(jù)是沒(méi)有必要的。歸檔可以從備份任務(wù)中剝離數(shù)十TB的數(shù)據(jù)甚至更多。法規(guī)遵從：正如前文提到的那樣，政府要求以及法律規(guī)定是履行數(shù)據(jù)歸檔策略的重要因素之一。即要滿足這樣的要求，同時(shí)又要降低