4.1認識“云存儲”4.2云存儲技術4.3云存儲的應用及面臨的問題1《云計算與大數(shù)據(jù)》第二版課件重點

云存儲技術難點

云存儲應用云存儲是在云計算概念上延伸和發(fā)展出來的一個新的概念，是指通過集群應用、網(wǎng)格技術或分布式文件系統(tǒng)等功能，將網(wǎng)絡中大量各種不同類型的存儲設備通過應用軟件集合起來協(xié)同工作，共同對外提供數(shù)據(jù)存儲和業(yè)務訪問功能的一個系統(tǒng)。4.1

認識云存儲《云計算與大數(shù)據(jù)》第二版課件當云計算系統(tǒng)運算和處理的核心是大量數(shù)據(jù)的存儲和管理時，云計算系統(tǒng)中就需要配置大量的存儲設備，

那么云計算系統(tǒng)就轉(zhuǎn)變成為一個云存儲系統(tǒng)，所以云存儲是一個以數(shù)據(jù)存儲和管理為核心的云計算系統(tǒng)。《云計算與大數(shù)據(jù)》第二版課件ExternalIPNetwork存儲節(jié)點存儲節(jié)點

存儲節(jié)點控制節(jié)點InternalIPNetwork《云計算與大數(shù)據(jù)》第二版課件ParaScaleMgmtConsoleHTTP客戶端WindowsWebDav客戶端NFS客戶端FTP客戶端HTTP

客戶端與傳統(tǒng)的存儲設備相比，云存儲是一個網(wǎng)絡設備、存儲設備、服務器、應用軟件、公用訪問接口、應用軟件、公用訪問接口、接入網(wǎng)和客戶端程序等多個部分組成的復雜系統(tǒng)。各部分以存儲設備為核心，通過應用軟件來對外提供數(shù)據(jù)存儲和業(yè)務訪問服務?！对朴嬎闩c大數(shù)據(jù)》第二版課件1.存儲層存儲層是云存儲最基礎的部分。存儲設備可以是FC光纖通道存儲設備，可以是NAS

和iSCSI等IP存儲設備，也可以是SCSI或SAS等DAS存儲設備。云存儲中的存儲設備往往數(shù)量龐大且分布多不同地域，彼此之間通過廣域網(wǎng)、互聯(lián)網(wǎng)或者FC光纖通道網(wǎng)絡連接在一起。4.2.1云存儲結(jié)構(gòu)4.2

云存儲技術《云計算與大數(shù)據(jù)》第二版課件2.基礎管理基礎管理層是云存儲最核心的部分，也是云存儲中最難以實現(xiàn)的部分?；A管理層通過集群、分布式文件

系統(tǒng)和網(wǎng)格計算等技術，實現(xiàn)云存儲中多個存儲設備之間的協(xié)同工作，使多個的存儲設備可以對外提供同一種服務，并提供更大更強更好的數(shù)據(jù)訪問性能?！对朴嬎闩c大數(shù)據(jù)》第二版課件3.應用接口應用接口層是云存儲最靈活多變的部分。不同的云存儲運營單位可以根據(jù)實際業(yè)務類型，開發(fā)不同的應用服務接口，提供不同的應用服務。比如視頻監(jiān)控應用平臺、IPTV和視頻點播應用平臺、網(wǎng)絡硬盤引用平臺，遠程數(shù)據(jù)備份應用平臺等?！对朴嬎闩c大數(shù)據(jù)》第二版課件4.訪問層任何一個授權用戶都可以通過標準的公用應用接口來登錄云存儲系統(tǒng)，享受云存儲服務。云存儲運營單位不同，云存儲提供的訪問類型和訪問手段也不同?！对朴嬎闩c大數(shù)據(jù)》第二版課件HW

SW模式

模式服務

模式104.2.2云存儲技術的兩種架構(gòu)緊耦合對稱架構(gòu)→松弛耦合非對稱架構(gòu)11《云計算與大數(shù)據(jù)》第二版課件云存儲可分成兩類：塊存儲與文件存儲。1.塊存儲塊存儲會把單筆的數(shù)據(jù)寫到不同的硬盤，借以得到較大的單筆讀寫帶寬，適合用在數(shù)據(jù)庫或是需要單筆數(shù)據(jù)快速讀寫的應用。它的優(yōu)點是對單筆數(shù)據(jù)讀寫很快，缺點是成本較高，并且無法解決真正海量文件的儲存。12《云計算與大數(shù)據(jù)》第二版課件4.2.3云存儲的種類1.文件存儲文件存儲是基于文件級別的存儲，它是把一個文件放在一個硬盤上，即使文件太大拆分時，也放在同一個硬盤上。它的缺點是對單一文件的讀寫會受到單一硬盤效能的限制，優(yōu)點是對一個多文件、多人使用的系統(tǒng)，總帶寬可以隨著存儲節(jié)點的增加而擴展，它的架構(gòu)可以無限制的擴容，并且成本低廉。13《云計算與大數(shù)據(jù)》第二版課件當應用存在文件需并發(fā)讀取、文件及文件系統(tǒng)本身較大、文件使用期較長和對成本控制要求較高等情況下，采用文件存儲是一個較好的選擇，如以下應用場合。網(wǎng)站或IPTV應用。監(jiān)控應用。文件備份。14《云計算與大數(shù)據(jù)》第二版課件201

備份

23

分配

4歸檔共享協(xié)作4.3.1云存儲的應用領域4.3云存儲的應用《云計算與大數(shù)據(jù)》第二版課件15服務器服務器服務器存儲網(wǎng)絡本機硬盤本機硬盤本機硬盤X86

PC集

群磁盤陣列4.3.2云存儲對大數(shù)據(jù)存儲的支持1.數(shù)據(jù)的海量化和快增長是大數(shù)據(jù)對存儲技術提出的首要挑戰(zhàn)。如：IBM、EMC

等的NAS、SAN

等系統(tǒng)

如：谷歌的GFS和HadoopHDFS圖4-3大數(shù)據(jù)存儲架構(gòu)的變化16《云計算與大數(shù)據(jù)》第二版課件2.

大數(shù)據(jù)對存儲技術提出的另一個挑戰(zhàn)是多種數(shù)據(jù)格式的適應能力格式多樣化是大數(shù)據(jù)的主要特征之一，這就要求大數(shù)據(jù)存儲管理系統(tǒng)能夠適應對各種非結(jié)構(gòu)化數(shù)據(jù)進行高效管理的需求。17《云計算與大數(shù)據(jù)》第二版