為什么需要LTFS歸檔Spectrum

Archive(LTFS)總介紹LTFS

EE

概述定位和應(yīng)用案例Source:

IBM

and

Industry

Estimates數(shù)據(jù)內(nèi)容快速增長而難以管理:數(shù)據(jù)增長:60%CAGR主要的數(shù)據(jù):頻率低數(shù)據(jù)保護(hù):需要長期保存介質(zhì)必須:自我解釋能耗消耗:低每TB成本x

保存的年數(shù)IT快速增長的需求Global

Name

SpaceElastic

Storage解決方案:分層網(wǎng)絡(luò)—最后一層

在歸檔單一的文件瀏覽C:\user

definednamespace快速和高可用RAID保護(hù),快照，GPFSLTFSL

LTF

LTFS高使用頻率數(shù)據(jù)數(shù)據(jù)庫，

,

etc靜態(tài)數(shù)據(jù),

豐富的

,非結(jié)構(gòu)化，歸檔Migration

&

Recall低成本，高擴(kuò)展性GPFSLTFS

EEIBMSpectrum

Archive–經(jīng)濟(jì)高效的歸檔解決方案概述網(wǎng)絡(luò)連接非結(jié)構(gòu)數(shù)據(jù)

，支持原生的磁帶使用線性文件系統(tǒng)LTFS，提供了最佳的性能和低成本的主要特性無縫虛擬化

層基于策略的數(shù)據(jù)存放為所有數(shù)據(jù)提供單一名字空間安全和保護(hù)資產(chǎn)開放，非私有的，跨平臺的交換I與IBM

Spectrum

Scale集成收益像使用磁盤那樣方便使用低成本磁帶從成本和性能優(yōu)化數(shù)據(jù)存放允許數(shù)據(jù)共享，不需要專屬在任何地方，位置，時間及任何格式

數(shù)據(jù)可擴(kuò)展，低成本5應(yīng)用案例

--

經(jīng)濟(jì)高效的證明6能夠被部署在非常低歸檔

上，用于數(shù)據(jù)歸檔和

備份低于每月每GB

1￠，

不會取代總體成本低于Amazon

Glacier

備份云服務(wù)，并有更好的服務(wù)水平利用

Spectrum

Archive

(或者說LTSFS)，磁帶作為策略驅(qū)動的

層是關(guān)鍵不改變用戶和應(yīng)用

數(shù)據(jù)的方式DiskSpectrumScaleT5

year

cost,

2

petabytes*Amazon

Glacier:

$1.2M

(1￠

per

GB/month)Archive

using

LTFS:

$300K

(?￠

per

GB/month)*IBM

calculation

of

2PB

Glacier

and

IBM

T librarybasedarchive

amortized

to

monthly

cost

including

power

and

admincosts.

Amazon

and

client

bandwidth

costs

would

be

extra

forGlacierIronMountainOtherserviceprovidersPrivate

CloudDeployed

on-prem……oroncloudSpectrum

ScaleLTFS

企業(yè)版的客戶價值允許IBM磁帶庫作為

tier

2/3，提供IBM

LTFS

EE低TCO全自動全透明近線集中

管理磁帶上數(shù)據(jù)可擴(kuò)展為什么磁帶使用歸檔磁帶具有TCO上超級優(yōu)勢:3–10

倍更好的成本，在5–10

年磁帶有很長的生命周期:~每一代10

年磁帶可靠性:With

read-after-write

and

2-dimensional

ECC磁帶效率高:With高級壓縮功能磁帶安全:With加密和一次寫，多次讀(WORM)磁帶有高擴(kuò)展?jié)摿?位密度能夠更擴(kuò)大磁帶是標(biāo)準(zhǔn)化:LTO

and

LTFSAgenda為什么需要LTFS歸檔Spectrum

Archive

(LTFS)總體介紹LTFS

EE

概述定位和應(yīng)用案例LTFS–讓磁帶和數(shù)據(jù)更靠近適應(yīng)許多平臺的文件系統(tǒng)允許通過簡單拷貝來備份數(shù)據(jù)標(biāo)準(zhǔn)和帶自描述磁帶格式容易數(shù)據(jù)交互充分利用磁帶的價值低成本和高性能提供了簡單的基于磁帶的方案備份，歸檔和

分層LTFS

received

2011

EMMY

engineering

awardLTFS

SoftwareT

LibraryLTFS

SystemLinux

ServerBackup,

Archive,ILM磁帶上的文件系統(tǒng)磁帶分為索引和數(shù)據(jù)部分LTFS格式規(guī)格描述了索引和標(biāo)準(zhǔn)LTFS

基于LTFS格式顯示了文件系統(tǒng)管理磁帶BOTEOTIndex/Metadata

Index

PartitionGuardWrapsFile

File

File

FileData

PartitionLTFS標(biāo)準(zhǔn)版單一驅(qū)動版(SDE)每盒磁帶一個LTFS文件系統(tǒng)Freedownload

availablefor

Linux

(RHEL,SLES),

Mac

OS

X

10.9,Windows7,

8.1,2008R2,

2012Open

sourcesoftware(not

Windows)磁帶庫版(LE)多盒磁帶一個LTFSLTFSLE

管理磁帶庫，磁帶驅(qū)動器和磁帶Available

forLinux(RHEL,

SLES)

andWindows(2008R2,

2012

R2)Can

bepurchased

fromIBM

and

BPLTFS-2

filesystemLTFS

Ts

in

LibraryLTFS-1

filesystemSingle

LTFS

TLTFS

標(biāo)準(zhǔn)版應(yīng)用案例LTFS

標(biāo)準(zhǔn)版提供備份和歸檔文件的簡單方案僅僅需要拖動文件到LTFS文件系統(tǒng)LTFS

方案提供了數(shù)據(jù)存放在磁帶上的低成本數(shù)據(jù)和其他LTFS系統(tǒng)交換利用磁帶流數(shù)據(jù)的高速性能級的磁帶管理功能（包括緩存，標(biāo)準(zhǔn)版LTFS不包磁帶選擇，回收）可以考慮LTFS

Enterprise

EditionLinux

ServerLTFS

LE

SoftwareT

LibraryLTFS

SystemBackup,

Archive,ILMLTFS

SDE

SoftwareAgenda為什么需要LTFS歸檔Spectrum

Archive

(LTFS)

總介紹LTFS

EE

概述定位和應(yīng)用案例彈性

的信息生命周期管理GPFSstorageSpectrum

Sacle

(GPFS)

支持信息生命周期管理

ILMILM

表示在數(shù)據(jù)的整個生命周期里將它存放到最合適的地方關(guān)鍵的技術(shù)來管理

的成本組合初始存放文件到最合適的介質(zhì)在生命周期里，根據(jù)文件的時間，大小等，基于策略移動數(shù)據(jù).在初始的名字空間里面，透明

文件ILM

提供了高效低成本方案，特別適應(yīng)長期的數(shù)據(jù)保存GPFS

server

clusterStorage

NetworkTManaged

by

LTFS

EELTFS

EE–架構(gòu)GPFS

為用戶數(shù)據(jù)提供了全局

名空間LTFS

EE

和一個或多個GPFS節(jié)點集成每個

LTFS

EE

實例有磁帶的驅(qū)動在相同的磁帶分區(qū)文件從磁盤移動到磁帶基于策略或文件列表能夠創(chuàng)建不同磁帶上的多個拷貝文件根據(jù)命令被調(diào)用支持大量的調(diào)用磁帶可以被導(dǎo)入和導(dǎo)出工作負(fù)載被分布在

LTFS

EE

節(jié)點上GPSingle

file

systemviewLTFS

TUsers

and

applicationPolicy

based

migrationodeLTFS

EEFile

protocolsLTFS

EE

功能概述GPode

1GPode

2Global

name

spaceLTFS

MetadataUser

filesystemUsers

and

ApplicationsUser

dataLTFS

EELTFS

EEPool1Pool

2Migration

withoptional

copy

toother

tRecall

withoption

for

bulkrecallT

management:

reclamation

(free

space)

and

reconcilation

(synchronize)Export

withoption

to

keepstub

in

GPFSImport(only

createsstubs

in

GPFS)Rebuild

filesystemLTFS

EE特性包含磁帶庫版特別版

Library

Edition

(LE+)S支持TS1140,

LTO5,6

t drives

in

TS3500,TS4500

or

TS3310library對所有LTFS

EE節(jié)點提供磁帶詳細(xì)與GPFS集成，和TSM

HSM相同支持文件級別的移植和調(diào)用創(chuàng)新的精簡數(shù)據(jù)庫元數(shù)據(jù)橫向擴(kuò)展結(jié)構(gòu)支持多LTFS

EE

節(jié)點，共享相同磁帶庫在多個LTFS

EE節(jié)點和磁帶驅(qū)動器中能加載平衡磁帶池和磁帶池允許將一盒磁帶數(shù)據(jù)作為一個組合文件的多份拷貝能夠移植到不同的磁帶池支持從GPFS中保存或移動文件原數(shù)據(jù)而將磁帶導(dǎo)出支持通過預(yù)填充方式將磁帶導(dǎo)入，而不需要讀文件數(shù)據(jù)支持磁帶回收和調(diào)解LTFS

EE

主要價值在連續(xù) 名空間無縫的 文件磁盤階段區(qū)域進(jìn)行文件級別的讀寫緩存基于策略的從磁盤移動到磁帶加載平衡及在多節(jié)點集群的高可用通過導(dǎo)入和導(dǎo)出功能在LTFS磁帶

換數(shù)據(jù)快速從LTFS磁帶中導(dǎo)入命名空間而不需要度數(shù)據(jù)通過在磁帶上多拷貝和重建功能，做數(shù)據(jù)保護(hù)支持磁帶的回收和調(diào)配容易掌控和管理Agenda動力Spectrum

Arhive

(LTFS)總介紹

LTFS

EE

概述定位和應(yīng)用案例LTFS

EE定位用于在磁帶上

頻率低的大文件卷文件大小不能太小以便發(fā)揮磁帶的流讀寫性能小塊磁盤分層屬于階段性的空間，用于將用戶和應(yīng)用從磁帶脫離利用磁帶的低總體成本在分層的

系統(tǒng)的磁帶中，容易

文件通過GPFS

文件層透明文件利用GPFS策略，自動從磁盤中移植到磁帶在LTFS磁帶

換數(shù)據(jù)利用LTFS磁帶拷貝，導(dǎo)出和導(dǎo)入功能LTFS

EE不能讓磁帶更快速，但是讓它能夠在許多行業(yè)和分支機(jī)構(gòu)中非常容易使用LTFSEE

使用情形概括備份備份數(shù)據(jù)到LTFS

EE

文件系統(tǒng)可以立即移植到磁帶上容易 和恢復(fù)利用簡便性和磁帶歸檔歸檔大卷的數(shù)據(jù)/文件使用基于策略的移植到磁帶保存數(shù)據(jù)相當(dāng)長時間使用了簡便性的，磁帶TCO和標(biāo)準(zhǔn)格式分層基于策略的存放和移植使用磁帶用于非經(jīng)常

的文件利用了簡便性和磁帶TCO客戶案例:LTFS

EE

歸檔科學(xué)數(shù)據(jù)TS3500GPFS

/

LTFS

EE

nodeLTFS

EEPolicy

based

migrationClient

reference

profileGPFSclientResearch

institute

archives

research

data

for

long

periods

of

timeCost-efficient

archiving

ont for

~

800TBTransparent

access

for

user

and

applicationsData

exchange

considered

later

onSolution

Configuration:

LTFS

EE,

TS3500,

TS1140ApplicationsPortalprovidesentry

to

archiveDatastored

inGPFSTS3500TSM

backup

prior

to

migrationBackup

to

TSMbecause

LTFSEEdoes

not

yessupportsecond

t

library客戶案例:LTFS

EE

歸檔數(shù)據(jù)Leading

pharmaceutical

company

archives

data

for

long

periods

oftimeCost-efficient

archiving

ont for

over

1

PBTransparent

access

for

user

and

applicationsDisaster

protection

with

two

sitesSolution

Configuration

per

site:

single

node

LTFS

EE,

TS3500

with

3

xLTO-6TS3500PrimaryLTFS

EEPolicy

based

migrationApplicationsNFSPrimary

instancereceives

data

andcopies

ittoother

site(useof

policy)Application

archivesgenomefilesand

log

filesTS3500SecondaryLTFS

EEPolicy

based

migrationcopy

prior

to

migrationSecondary

sitereceives

copies

andmigrates

to

tNFSreadonly客戶案例:

LTFS

EE

用于歸檔

數(shù)據(jù)IT

service

provider

archives

seismic

data

for

long

period

of

timesCost-efficient

archiving

ont for

over

1

PB

of

dataTransparent

access

for

user

and

applicationsDisaster

protection

with

two

sitesSolution

Configuration:

two

LTFS

EE

system

with

4

and

6tdrivesLTFS

EE

with6

x

TS1140300TB10

GBit

EthernetLTFS

EE

with4

x

TS1140SecondaryGPFS

cluster

MigrationMigration

Primary

GPFS

cluster800TBApplicationsRsync

copy客戶案例:LTFS

EE

和彈性服務(wù)器Research

institute

provides

super

computingand

applications

and

servicesMust

archive

old

data

for

long

timesFour

GSS

systems

provide

global

name

spaceTotal

capacity

~

500

TBFour

LTFS

EE

nodes

migrate

data

to

t8

x

TS1140

drives

in

TS3500

library

+5

PB

on

tClient

values:Automated

migration

based

on

policiesTwo

copies

on

tTransparent

access

to

data

in

global

namespaceCost

optimization

with

tElastic

Storage(4

x

GSS-26

)HPC

EnvironmentInfinibandTS3500

TLibrary4

xLTFS

EEPolicy

based

migration備份的目的是能夠無論如何都能恢復(fù)文件