華為云大數(shù)據(jù)解決方案華為云大數(shù)據(jù)解決方案1.大數(shù)據(jù)背景與用戶需求

1.1大數(shù)據(jù)背景介紹根據(jù)IDC的報(bào)告，未來十年全球大數(shù)據(jù)將增加50倍。管理數(shù)據(jù)倉庫的服務(wù)器的數(shù)量將增加10倍以便迎合50倍的大數(shù)據(jù)增長。毫無疑問，大數(shù)據(jù)將挑戰(zhàn)企業(yè)的存儲架構(gòu)及數(shù)據(jù)中心基礎(chǔ)設(shè)施等，也會引發(fā)云計(jì)算、數(shù)據(jù)倉庫、數(shù)據(jù)挖掘、商業(yè)智能等應(yīng)用的連鎖反應(yīng)。2013年企業(yè)會將更多TB級(1TB=1000GB)數(shù)據(jù)用于商務(wù)智能和商務(wù)分析；到2020年，全球數(shù)據(jù)使用量預(yù)計(jì)暴增44倍，達(dá)到35.2ZB(1ZB=10億TB)。1.大數(shù)據(jù)背景與用戶需求

1.1大數(shù)據(jù)背景介紹21.2企業(yè)應(yīng)用大數(shù)據(jù)的需求大數(shù)據(jù)有著4“V”特性：Volume、Variety、Velocity、Value。要把握大數(shù)據(jù)，挖據(jù)出大數(shù)據(jù)中的價(jià)值，從技術(shù)的角度來說，兩個(gè)問題需要解決：數(shù)據(jù)的存儲，數(shù)據(jù)的分析。大數(shù)據(jù)的Volume屬性——“海量數(shù)據(jù)”一詞從七十年代延展至今，正在發(fā)生從量變到質(zhì)變的飛躍。所謂質(zhì)變是說，從來沒有一個(gè)時(shí)期要如此依賴數(shù)據(jù)。同時(shí)，傳統(tǒng)的數(shù)據(jù)處理和數(shù)據(jù)管理技術(shù)正在受到當(dāng)今“海量數(shù)據(jù)”的直接挑戰(zhàn)。（一）ZB級的數(shù)據(jù)管理和數(shù)據(jù)分析，不是傳統(tǒng)的IT服務(wù)器、磁帶、縱向擴(kuò)展設(shè)備能夠承載的，數(shù)量級和復(fù)雜程度到達(dá)一個(gè)層級，引導(dǎo)企業(yè)進(jìn)行信息化技術(shù)和企業(yè)業(yè)務(wù)的革新。（二）世界經(jīng)濟(jì)形勢趨緊，高額的IT預(yù)算，究竟應(yīng)該在哪里投入。據(jù)調(diào)查企業(yè)目前73％的預(yù)算都用在基本業(yè)務(wù)運(yùn)轉(zhuǎn)上，剩下的才對商業(yè)運(yùn)營有支撐作用。CIO的苦痛在于IT設(shè)施不斷的膨脹，僅僅是因?yàn)闃I(yè)務(wù)的數(shù)量漲了，沒有給企業(yè)經(jīng)營帶來真正的增值。（三）據(jù)統(tǒng)計(jì)，ZB級的數(shù)據(jù)中，80%以上是半結(jié)構(gòu)化，非結(jié)構(gòu)化數(shù)據(jù)。為了應(yīng)對“大數(shù)據(jù)”浪潮，很多企業(yè)在具備一定結(jié)構(gòu)化處理能力的基礎(chǔ)上，將非結(jié)構(gòu)化數(shù)據(jù)依托給了Hadoop。但當(dāng)深入探索之后，有投資人給出了這樣的感受——使用Hadoop構(gòu)建分析性查詢，會變成類似用錘子來建造房屋的活動：特定的數(shù)據(jù)模式分析任務(wù)中性能低的可怕；高昂的后期開發(fā)和維護(hù)任務(wù)成本；以及企業(yè)信息孤島、數(shù)據(jù)單點(diǎn)故障。1.2企業(yè)應(yīng)用大數(shù)據(jù)的需求3企業(yè)應(yīng)用大數(shù)據(jù)，無法按開放架構(gòu)重建所有設(shè)施，互聯(lián)網(wǎng)與傳統(tǒng)行業(yè)面臨著如下問題，如何整合雙方優(yōu)勢是企業(yè)應(yīng)用大數(shù)據(jù)關(guān)鍵。企業(yè)應(yīng)用大數(shù)據(jù)，無法按開放架構(gòu)重建所有設(shè)施，互聯(lián)網(wǎng)與傳統(tǒng)行業(yè)42華為云海量數(shù)據(jù)分析解決方案2.1大數(shù)據(jù)整體架構(gòu)及應(yīng)用領(lǐng)域2華為云海量數(shù)據(jù)分析解決方案2.1大數(shù)據(jù)整體架構(gòu)及應(yīng)用領(lǐng)52.2彈性計(jì)算云實(shí)現(xiàn)大數(shù)據(jù)計(jì)算分析多種配置靈活應(yīng)對大數(shù)據(jù)計(jì)算高并發(fā)、高內(nèi)存的需求快速部署彈性伸縮應(yīng)對突發(fā)的波峰波谷2.2彈性計(jì)算云實(shí)現(xiàn)大數(shù)據(jù)計(jì)算分析6華為彈性計(jì)算云整合了計(jì)算、存儲與網(wǎng)絡(luò)資源，按需使用、按需付費(fèi)的一站式IT計(jì)算資源租用服務(wù)，以幫助開發(fā)者和IT管理員在不需要一次性投資的情況下，快速部署和管理大規(guī)?？蓴U(kuò)展的IT基礎(chǔ)設(shè)施資源。企業(yè)可以通過基于瀏覽器的、圖形化界面的云計(jì)算管理平臺，足不出戶實(shí)現(xiàn)按需、自助開通、部署、控制和管理大規(guī)模的IT基礎(chǔ)設(shè)施，并擁有對這些基礎(chǔ)設(shè)施的完全控制權(quán)限。華為彈性計(jì)算云整合了計(jì)算、存儲與網(wǎng)絡(luò)資源，按需使用、按需付費(fèi)72.3云存儲滿足海量數(shù)據(jù)的存儲按需使用的海量存儲空間成本更低多元化的API接口、用戶鑒權(quán)和安全控制保證數(shù)據(jù)的安全2.3云存儲滿足海量數(shù)據(jù)的存儲8華為云存儲通過融合的方案、分析、備份和歸檔，提供海量低廉按需的存儲服務(wù)，解決了信息孤島，也解決了隨著業(yè)務(wù)的發(fā)展，對量和性能不斷拔高的需求；同時(shí)，又能根據(jù)需求的變化對容量和性能進(jìn)行擴(kuò)容,保持低廉的TCO?；趯ο蟮脑拼鎯Ψ?wù)，為客戶提供海量、安全、高可靠、低成本的數(shù)據(jù)存儲能力。客戶可以通過REST接口或者基于web瀏覽器的云管理平臺界面對數(shù)據(jù)進(jìn)行管理和使用。同時(shí)，我們提供了多種語言（java、php、c、Python）的SDK來簡化編程。華為云存儲通過融合的方案、分析、備份和歸檔，提供海量低廉按需93方案特性1.定制化鏡像，彈性供應(yīng)、快速部署免去了服務(wù)器上架的煩惱，彈性計(jì)算云可以在十分鐘內(nèi)部署您所需要的操作系統(tǒng)以及軟件部署并且完成服務(wù)上線，隨時(shí)增加和縮減IT基礎(chǔ)設(shè)施規(guī)模，實(shí)時(shí)滿足業(yè)務(wù)發(fā)展的需要。2.彈性計(jì)算產(chǎn)品與物理設(shè)備的組網(wǎng)架構(gòu)彈性計(jì)算云和傳統(tǒng)服務(wù)器托管在同一個(gè)VLAN基于華為云數(shù)據(jù)中心中，實(shí)現(xiàn)彈性計(jì)算云于傳統(tǒng)服務(wù)器托管在同一個(gè)VLAN中。這種架構(gòu)非常的靈活，既滿足了資源的快速擴(kuò)展同時(shí)也保證了性能。3.華為云與企業(yè)內(nèi)網(wǎng)的安全通道，遠(yuǎn)程管理和維護(hù)可以通過在線客戶可視化的Web界面，允許客戶在線自助申請、開通、配置、監(jiān)控、管理等對一次開通多臺彈性計(jì)算產(chǎn)品并分配不同的用途，進(jìn)行自助多層次組網(wǎng)并進(jìn)行架構(gòu)部署，以便快速對客戶提供服務(wù)。同時(shí)，選擇華為云即可享受免費(fèi)的7*24免費(fèi)技術(shù)支持服務(wù)，客戶可以通過電話、郵件等方式第一時(shí)間得到支持。4.按需使用節(jié)省成本、安全可靠采用彈性計(jì)算云，可以縮短新應(yīng)用上線的時(shí)間，大幅降低用戶的CAPEX，節(jié)省大量帶寬以及綜合運(yùn)維成本。華為彈性計(jì)算云提供了很多機(jī)制充分保障您的計(jì)算資源的安全性，多數(shù)據(jù)中心集群架構(gòu)設(shè)計(jì)，從網(wǎng)絡(luò)接入到管理配備7層安全防護(hù),采用SAS磁盤、RAID技術(shù)、系統(tǒng)卷快照備份、動態(tài)遷移能力、相互隔離的計(jì)算資源和網(wǎng)絡(luò)環(huán)境等，確保主機(jī)99.95%的穩(wěn)定性和數(shù)據(jù)安全性。3方案特性1.定制化鏡像，彈性供應(yīng)、快速部署104案例客戶4.1用戶簡介：上海某汽車數(shù)據(jù)分析公司專注于后裝車聯(lián)網(wǎng)服務(wù)解決方案及實(shí)時(shí)交通信息的采集、處理和運(yùn)營。與行業(yè)巨頭渠道合作，免費(fèi)發(fā)放終端，低成本，規(guī)模化，精確采集交通數(shù)據(jù)源。憑借海量的自有數(shù)據(jù)源，開拓中國每年10億人民幣的交通數(shù)據(jù)市場。4案例客戶4.1用戶簡介：114.2面臨問題保險(xiǎn)公司為了推動安全駕駛，降低賠付率，提供免費(fèi)后裝車聯(lián)網(wǎng)服務(wù)換取交通數(shù)據(jù)，包括：面向互聯(lián)網(wǎng)地圖商、車廠、移動應(yīng)用開發(fā)者、導(dǎo)航儀廠商、交通廣播臺、智能交通管理者等數(shù)據(jù)用戶的眾包交通數(shù)據(jù)庫。面向保險(xiǎn)行業(yè)和個(gè)人用戶的駕駛行為數(shù)據(jù)庫，為保險(xiǎn)公司進(jìn)行按駕駛付費(fèi)（PAYD）模式的一車一價(jià)核保數(shù)據(jù)依據(jù)，為個(gè)人提供駕駛行為糾正服務(wù)。面向廣告主和個(gè)人用戶的彈性社交數(shù)據(jù)庫，為基于位置和BI分析的精準(zhǔn)廣告以及車主間的彈性社交提供數(shù)據(jù)基礎(chǔ)。對這些數(shù)據(jù)的深入挖掘和分析將會產(chǎn)生巨大的價(jià)值，但通過傳統(tǒng)采購服務(wù)器來部署計(jì)算、存儲資源的方式將會造成流程漫長復(fù)雜，無法在短期完成任務(wù)；同時(shí)，由于無法準(zhǔn)確預(yù)估訪問量，無法準(zhǔn)確部署業(yè)務(wù)規(guī)模。部署不足則服務(wù)器無法支撐業(yè)務(wù)；部署超出則導(dǎo)致物理設(shè)備資源浪費(fèi)，增加一次性IT基礎(chǔ)設(shè)施投入成本。無法滿足大數(shù)據(jù)分析企業(yè)對IT物理設(shè)備快速靈活部署和彈性伸縮的運(yùn)營需求。4.2面臨問題124.3華為云解決方案語境汽車旨在打造中國智能交通數(shù)據(jù)的未來，為避免傳統(tǒng)服務(wù)器上架的煩惱，道客快分享選擇將交通大數(shù)據(jù)的計(jì)算和分析業(yè)務(wù)部署在華為云上面。華為云整合了高性能的計(jì)算和存儲能力，為大數(shù)據(jù)的挖掘和分析提供專業(yè)穩(wěn)定的IT基礎(chǔ)設(shè)施平臺。以滿足對大數(shù)據(jù)應(yīng)用的具體需求。4.3華為云解決方案134.4客戶感言“華為云快速部署、按使用量付費(fèi)的模式，使得IT資源不再成為大數(shù)據(jù)分析的業(yè)務(wù)瓶頸。我們不需要再不斷的預(yù)測自己的IT資源使用需求。當(dāng)IT需求突然增加時(shí)，能通過租用華為云提供商的資源實(shí)現(xiàn)快速響應(yīng)，IT需求下降后也能立刻釋放多余的資源?！?.4客戶感言14Thankyou/Copyright?2016HuaweiTechnologiesCo.,Ltd.AllRightsReserved.Theinformationcontainedinthisdocumentisforreferencepurposeonly,andissubjecttochangeorwithdrawalaccordingtospecificcustomerrequirementsandconditions.Thankyouhttp://www.huaweiclou華為云大數(shù)據(jù)解決方案華為云大數(shù)據(jù)解決方案1.大數(shù)據(jù)背景與用戶需求

1.1大數(shù)據(jù)背景介紹根據(jù)IDC的報(bào)告，未來十年全球大數(shù)據(jù)將增加50倍。管理數(shù)據(jù)倉庫的服務(wù)器的數(shù)量將增加10倍以便迎合50倍的大數(shù)據(jù)增長。毫無疑問，大數(shù)據(jù)將挑戰(zhàn)企業(yè)的存儲架構(gòu)及數(shù)據(jù)中心基礎(chǔ)設(shè)施等，也會引發(fā)云計(jì)算、數(shù)據(jù)倉庫、數(shù)據(jù)挖掘、商業(yè)智能等應(yīng)用的連鎖反應(yīng)。2013年企業(yè)會將更多TB級(1TB=1000GB)數(shù)據(jù)用于商務(wù)智能和商務(wù)分析；到2020年，全球數(shù)據(jù)使用量預(yù)計(jì)暴增44倍，達(dá)到35.2ZB(1ZB=10億TB)。1.大數(shù)據(jù)背景與用戶需求

1.1大數(shù)據(jù)背景介紹171.2企業(yè)應(yīng)用大數(shù)據(jù)的需求大數(shù)據(jù)有著4“V”特性：Volume、Variety、Velocity、Value。要把握大數(shù)據(jù)，挖據(jù)出大數(shù)據(jù)中的價(jià)值，從技術(shù)的角度來說，兩個(gè)問題需要解決：數(shù)據(jù)的存儲，數(shù)據(jù)的分析。大數(shù)據(jù)的Volume屬性——“海量數(shù)據(jù)”一詞從七十年代延展至今，正在發(fā)生從量變到質(zhì)變的飛躍。所謂質(zhì)變是說，從來沒有一個(gè)時(shí)期要如此依賴數(shù)據(jù)。同時(shí)，傳統(tǒng)的數(shù)據(jù)處理和數(shù)據(jù)管理技術(shù)正在受到當(dāng)今“海量數(shù)據(jù)”的直接挑戰(zhàn)。（一）ZB級的數(shù)據(jù)管理和數(shù)據(jù)分析，不是傳統(tǒng)的IT服務(wù)器、磁帶、縱向擴(kuò)展設(shè)備能夠承載的，數(shù)量級和復(fù)雜程度到達(dá)一個(gè)層級，引導(dǎo)企業(yè)進(jìn)行信息化技術(shù)和企業(yè)業(yè)務(wù)的革新。（二）世界經(jīng)濟(jì)形勢趨緊，高額的IT預(yù)算，究竟應(yīng)該在哪里投入。據(jù)調(diào)查企業(yè)目前73％的預(yù)算都用在基本業(yè)務(wù)運(yùn)轉(zhuǎn)上，剩下的才對商業(yè)運(yùn)營有支撐作用。CIO的苦痛在于IT設(shè)施不斷的膨脹，僅僅是因?yàn)闃I(yè)務(wù)的數(shù)量漲了，沒有給企業(yè)經(jīng)營帶來真正的增值。（三）據(jù)統(tǒng)計(jì)，ZB級的數(shù)據(jù)中，80%以上是半結(jié)構(gòu)化，非結(jié)構(gòu)化數(shù)據(jù)。為了應(yīng)對“大數(shù)據(jù)”浪潮，很多企業(yè)在具備一定結(jié)構(gòu)化處理能力的基礎(chǔ)上，將非結(jié)構(gòu)化數(shù)據(jù)依托給了Hadoop。但當(dāng)深入探索之后，有投資人給出了這樣的感受——使用Hadoop構(gòu)建分析性查詢，會變成類似用錘子來建造房屋的活動：特定的數(shù)據(jù)模式分析任務(wù)中性能低的可怕；高昂的后期開發(fā)和維護(hù)任務(wù)成本；以及企業(yè)信息孤島、數(shù)據(jù)單點(diǎn)故障。1.2企業(yè)應(yīng)用大數(shù)據(jù)的需求18企業(yè)應(yīng)用大數(shù)據(jù)，無法按開放架構(gòu)重建所有設(shè)施，互聯(lián)網(wǎng)與傳統(tǒng)行業(yè)面臨著如下問題，如何整合雙方優(yōu)勢是企業(yè)應(yīng)用大數(shù)據(jù)關(guān)鍵。企業(yè)應(yīng)用大數(shù)據(jù)，無法按開放架構(gòu)重建所有設(shè)施，互聯(lián)網(wǎng)與傳統(tǒng)行業(yè)192華為云海量數(shù)據(jù)分析解決方案2.1大數(shù)據(jù)整體架構(gòu)及應(yīng)用領(lǐng)域2華為云海量數(shù)據(jù)分析解決方案2.1大數(shù)據(jù)整體架構(gòu)及應(yīng)用領(lǐng)202.2彈性計(jì)算云實(shí)現(xiàn)大數(shù)據(jù)計(jì)算分析多種配置靈活應(yīng)對大數(shù)據(jù)計(jì)算高并發(fā)、高內(nèi)存的需求快速部署彈性伸縮應(yīng)對突發(fā)的波峰波谷2.2彈性計(jì)算云實(shí)現(xiàn)大數(shù)據(jù)計(jì)算分析21華為彈性計(jì)算云整合了計(jì)算、存儲與網(wǎng)絡(luò)資源，按需使用、按需付費(fèi)的一站式IT計(jì)算資源租用服務(wù)，以幫助開發(fā)者和IT管理員在不需要一次性投資的情況下，快速部署和管理大規(guī)模可擴(kuò)展的IT基礎(chǔ)設(shè)施資源。企業(yè)可以通過基于瀏覽器的、圖形化界面的云計(jì)算管理平臺，足不出戶實(shí)現(xiàn)按需、自助開通、部署、控制和管理大規(guī)模的IT基礎(chǔ)設(shè)施，并擁有對這些基礎(chǔ)設(shè)施的完全控制權(quán)限。華為彈性計(jì)算云整合了計(jì)算、存儲與網(wǎng)絡(luò)資源，按需使用、按需付費(fèi)222.3云存儲滿足海量數(shù)據(jù)的存儲按需使用的海量存儲空間成本更低多元化的API接口、用戶鑒權(quán)和安全控制保證數(shù)據(jù)的安全2.3云存儲滿足海量數(shù)據(jù)的存儲23華為云存儲通過融合的方案、分析、備份和歸檔，提供海量低廉按需的存儲服務(wù)，解決了信息孤島，也解決了隨著業(yè)務(wù)的發(fā)展，對量和性能不斷拔高的需求；同時(shí)，又能根據(jù)需求的變化對容量和性能進(jìn)行擴(kuò)容,保持低廉的TCO?；趯ο蟮脑拼鎯Ψ?wù)，為客戶提供海量、安全、高可靠、低成本的數(shù)據(jù)存儲能力?？蛻艨梢酝ㄟ^REST接口或者基于web瀏覽器的云管理平臺界面對數(shù)據(jù)進(jìn)行管理和使用。同時(shí)，我們提供了多種語言（java、php、c、Python）的SDK來簡化編程。華為云存儲通過融合的方案、分析、備份和歸檔，提供海量低廉按需243方案特性1.定制化鏡像，彈性供應(yīng)、快速部署免去了服務(wù)器上架的煩惱，彈性計(jì)算云可以在十分鐘內(nèi)部署您所需要的操作系統(tǒng)以及軟件部署并且完成服務(wù)上線，隨時(shí)增加和縮減IT基礎(chǔ)設(shè)施規(guī)模，實(shí)時(shí)滿足業(yè)務(wù)發(fā)展的需要。2.彈性計(jì)算產(chǎn)品與物理設(shè)備的組網(wǎng)架構(gòu)彈性計(jì)算云和傳統(tǒng)服務(wù)器托管在同一個(gè)VLAN基于華為云數(shù)據(jù)中心中，實(shí)現(xiàn)彈性計(jì)算云于傳統(tǒng)服務(wù)器托管在同一個(gè)VLAN中。這種架構(gòu)非常的靈活，既滿足了資源的快速擴(kuò)展同時(shí)也保證了性能。3.華為云與企業(yè)內(nèi)網(wǎng)的安全通道，遠(yuǎn)程管理和維護(hù)可以通過在線客戶可視化的Web界面，允許客戶在線自助申請、開通、配置、監(jiān)控、管理等對一次開通多臺彈性計(jì)算產(chǎn)品并分配不同的用途，進(jìn)行自助多層次組網(wǎng)并進(jìn)行架構(gòu)部署，以便快速對客戶提供服務(wù)。同時(shí)，選擇華為云即可享受免費(fèi)的7*24免費(fèi)技術(shù)支持服務(wù)，客戶可以通過電話、郵件等方式第一時(shí)間得到支持。4.按需使用節(jié)省成本、安全可靠采用彈性計(jì)算云，可以縮短新應(yīng)用上線的時(shí)間，大幅降低用戶的CAPEX，節(jié)省大量帶寬以及綜合運(yùn)維成本。華為彈性計(jì)算云提供了很多機(jī)制充分保障您的計(jì)算資源的安全性，多數(shù)據(jù)中心集群架構(gòu)設(shè)計(jì)，從網(wǎng)絡(luò)接入到管理配備7層安全防護(hù),采用SAS磁盤、RAID技術(shù)、系統(tǒng)卷快照備份、動態(tài)遷移能力、相互隔離的計(jì)算資源和網(wǎng)絡(luò)環(huán)境等，確保主機(jī)99.95%的穩(wěn)定性和數(shù)據(jù)安全性。3方案特性1.定制化鏡像，彈性供應(yīng)、快速部署254案例客戶4.1用戶簡介：上海某汽車數(shù)據(jù)分析公司專注于后裝車聯(lián)網(wǎng)服務(wù)解決方案及實(shí)時(shí)交通信息的采集、處理和運(yùn)營。與行業(yè)巨頭渠道合作，免費(fèi)發(fā)放終端，低成本，規(guī)?；?，精確采集交通數(shù)據(jù)源。憑借海量的自有數(shù)據(jù)源，開拓中國每年10億人民幣的交通數(shù)據(jù)市場。4案例客戶4.1用戶簡介：264.2面臨問題保險(xiǎn)公司為了推動安全駕駛，降低賠付率，提供免費(fèi)后裝車聯(lián)網(wǎng)服務(wù)換取交通數(shù)據(jù)，包括：面向互聯(lián)網(wǎng)地圖商、車廠、移動應(yīng)用開發(fā)者、導(dǎo)航儀廠商、交通廣播臺、智能交通管理者等數(shù)據(jù)用戶的眾包交通數(shù)據(jù)庫。面向保險(xiǎn)行業(yè)和個(gè)人用戶的駕駛行為數(shù)據(jù)庫，為保險(xiǎn)公司進(jìn)行按駕駛付費(fèi)（PAYD）模式的一車一價(jià)核保數(shù)據(jù)依據(jù)，為個(gè)人提供駕駛行為糾正服務(wù)。面向廣告主和個(gè)人用戶的彈性社交數(shù)據(jù)庫，為基于位置和BI分析的精準(zhǔn)廣告以及車主間的彈性社交提供數(shù)據(jù)基礎(chǔ)。對這些數(shù)據(jù)的深入挖掘和分析將會產(chǎn)生巨大的價(jià)值，但通過傳統(tǒng)采購服務(wù)器來部署計(jì)算、存儲資源的方式將會造成流程漫長復(fù)雜，無法在短期完成任務(wù)；