大數(shù)據(jù)與云計(jì)算和物聯(lián)網(wǎng)的關(guān)系

大數(shù)據(jù)時(shí)代的到來，是全球知名咨詢公司麥肯錫最早提出的，麥肯錫稱：“數(shù)據(jù)，已經(jīng)滲透到當(dāng)今每一個(gè)行

業(yè)和業(yè)務(wù)職能領(lǐng)域，成為重要的生產(chǎn)因素。人們對(duì)于海量數(shù)據(jù)的挖掘和運(yùn)用，預(yù)示著新一波生產(chǎn)率增長(zhǎng)和消

費(fèi)者盈余浪潮的到來.”

《互聯(lián)網(wǎng)進(jìn)化論》一書中提出“互聯(lián)網(wǎng)的未來功能和結(jié)構(gòu)將于人類大腦高度相

似，也將具備互聯(lián)網(wǎng)虛擬感覺，虛擬運(yùn)動(dòng)，虛擬中樞，虛擬記憶神經(jīng)系統(tǒng)",并繪

制了一幅互聯(lián)網(wǎng)虛擬大腦結(jié)構(gòu)圖。

物聯(lián)網(wǎng)

大數(shù)據(jù)

傳

統(tǒng)

互

聯(lián)

網(wǎng)

根據(jù)這一觀點(diǎn)，我們嘗試分析目前互聯(lián)網(wǎng)最流行的四個(gè)概念----------大數(shù)據(jù),

云計(jì)算，物聯(lián)網(wǎng)和移動(dòng)互聯(lián)網(wǎng)與傳統(tǒng)互聯(lián)網(wǎng)之間的關(guān)系。

從這幅圖中我們可以看出：

物聯(lián)網(wǎng)對(duì)應(yīng)了互聯(lián)網(wǎng)的感覺和運(yùn)動(dòng)神經(jīng)系統(tǒng)。

云計(jì)算是互聯(lián)網(wǎng)的核心硬件層和核心軟件層的集合，也是互聯(lián)網(wǎng)中樞神經(jīng)系統(tǒng)

萌芽。

大數(shù)據(jù)代表了互聯(lián)網(wǎng)的信息層（數(shù)據(jù)海洋），是互聯(lián)網(wǎng)智慧和意識(shí)產(chǎn)生的基礎(chǔ)。

包括物聯(lián)網(wǎng)，傳統(tǒng)互聯(lián)網(wǎng)，移動(dòng)互聯(lián)網(wǎng)在源源不斷的向互聯(lián)網(wǎng)大數(shù)據(jù)層匯聚數(shù)

據(jù)和接受數(shù)據(jù)。

大數(shù)據(jù)時(shí)代的到來，是全球知名咨詢公司麥肯錫最早提出的，麥肯錫稱：“數(shù)

據(jù)，已經(jīng)滲透到當(dāng)今每一個(gè)行業(yè)和業(yè)務(wù)職能領(lǐng)域，成為重要的生產(chǎn)因素。人們對(duì)于

海量數(shù)據(jù)的挖掘和運(yùn)用，預(yù)示著新一波生產(chǎn)率增長(zhǎng)和消費(fèi)者盈余浪潮的到來?！苯?/p>

幾年大數(shù)據(jù)一詞的持續(xù)升溫也帶來了大數(shù)據(jù)泡沫的疑慮，大數(shù)據(jù)的前景與目前云計(jì)

算、物聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)等是分不開的，下面就來了解一下大數(shù)據(jù)與這些熱點(diǎn)的關(guān)

系。

大數(shù)據(jù)市場(chǎng)格局

從嚴(yán)格意義上來說，早在20世紀(jì)90年代“數(shù)據(jù)倉(cāng)庫(kù)之父”的BiIIInmon便

提出了“大數(shù)據(jù)”的概念。大數(shù)據(jù)之所以在最近走紅，主要?dú)w結(jié)于互聯(lián)網(wǎng)、移動(dòng)設(shè)

備、物聯(lián)網(wǎng)和云計(jì)算等快速崛起，仝球數(shù)據(jù)量大大提升.可以說，移動(dòng)互聯(lián)網(wǎng)、物

聯(lián)網(wǎng)以及云計(jì)算等熱點(diǎn)崛起在很大程度上是大數(shù)據(jù)產(chǎn)生的原因.

我們可以通過這樣一張圖片，形象的知道大數(shù)據(jù)與移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)以及傳

統(tǒng)互聯(lián)網(wǎng)的關(guān)系。物聯(lián)網(wǎng)，移動(dòng)互聯(lián)網(wǎng)再加上傳統(tǒng)互聯(lián)網(wǎng)，每天都在產(chǎn)生海量數(shù)據(jù)，

而大數(shù)據(jù)又通過云計(jì)算的形式，將這些數(shù)據(jù)篩選處理分析，提前出有用的信息，這

就是大數(shù)據(jù)分析。

大數(shù)據(jù)與移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)以及傳統(tǒng)互聯(lián)網(wǎng)

作為數(shù)據(jù)存儲(chǔ)巨頭，EMC的大數(shù)據(jù)理念是，首先從“大”入手，“大”肯定是

指大型數(shù)據(jù)集，一般在10TB規(guī)模左右。很多用戶把多個(gè)數(shù)據(jù)集放在一起，形成PB

級(jí)的數(shù)據(jù)量。同時(shí)從數(shù)據(jù)源來談，大數(shù)據(jù)是指這些數(shù)據(jù)來自多種數(shù)據(jù)源，以實(shí)時(shí)、

迭代的方式來實(shí)現(xiàn)。

大數(shù)據(jù)來源

我們看到，各種行業(yè)都出現(xiàn)了大數(shù)據(jù)趨勢(shì)，有些可能是零售業(yè)商戶，要對(duì)零售

業(yè)數(shù)據(jù)進(jìn)行分析，或者是一些有關(guān)全球天氣預(yù)報(bào)模型的數(shù)據(jù)，還有油氣行業(yè)一些地

理信息數(shù)據(jù)，比如基因?qū)W分析，醫(yī)學(xué)中也有成像類的大數(shù)據(jù)，甚至電影、娛樂行業(yè)

還有用于渲染的大型數(shù)據(jù)存在。

大數(shù)據(jù)與現(xiàn)實(shí)生活

大數(shù)據(jù)能帶來什么變化呢？里克?斯莫蘭的“大數(shù)據(jù)人類面孔”項(xiàng)目講述了許

多故事：海象通過頭頂?shù)挠|角探索海洋；借助衛(wèi)星擊準(zhǔn)蚊子；加納用短信系統(tǒng)防止

假藥銷售；智能手機(jī)可以預(yù)測(cè)誰(shuí)正在變抑郁；信用卡在使用者離婚前兩年就能預(yù)測(cè)

離婚；藥片直接將信息從人的身體傳給醫(yī)生。

通過對(duì)衛(wèi)星以及全球數(shù)億傳感器、RFID標(biāo)簽、帶GPS的相機(jī)和智能手機(jī)實(shí)時(shí)

收集的數(shù)據(jù)做可視化處理，人類就可以感知、測(cè)量、理解和影響人類的生存方式，

實(shí)現(xiàn)先輩們遙不可及的夢(mèng)想.

2012年3月，里克?斯莫蘭和JenniferErwitt發(fā)動(dòng)全球各地100多位攝影師、

編輯和作家來探索大數(shù)據(jù)的世界，以驗(yàn)證它是否象許多業(yè)界人士所說：代表了一種

從未出現(xiàn)過的工具，可以幫助人類面對(duì)最大的挑戰(zhàn)。

大數(shù)據(jù)人類面孔一通過計(jì)步器記錄數(shù)據(jù)分析身體狀況

2012年9月25日到10月2日，邀請(qǐng)全球各地參與者通過“大數(shù)據(jù)人類面孔"

這一應(yīng)用（五種語(yǔ)言的iOS和安卓版本免費(fèi)下載）來“測(cè)量我們的世界”。這一應(yīng)用

可以讓人們用手機(jī)作為傳感器參與一系列活動(dòng)，他們同時(shí)可以比較全球其它參與者

對(duì)一些值得深思的問題給出了什么答案。參與者可以繪制出自己每天的路徑，分享

那些帶給他們好運(yùn)的物品和儀式，了解其他人想要在一生中經(jīng)歷的特別體驗(yàn)，發(fā)現(xiàn)

自己身邊以前沒有意識(shí)到的秘密。參與者還能夠得出自己的“數(shù)字身影”。

2012年10月2日，邀請(qǐng)媒體出席在紐約、倫敦和新加坡舉行的“指揮控制中

心”大型活動(dòng)，所有參與者的數(shù)據(jù)將在活動(dòng)中加以分析、視覺化處理和詮釋.大數(shù)

據(jù)領(lǐng)域的專家們和創(chuàng)新者們將通過互動(dòng)的“大數(shù)據(jù)實(shí)驗(yàn)室”分享他們的工作成果.

全球各地的觀眾可以實(shí)時(shí)在線觀看活動(dòng)直播.

爰肯錫全球研究機(jī)構(gòu)在發(fā)布的《大數(shù)據(jù)：創(chuàng)新、競(jìng)爭(zhēng)和生產(chǎn)力的下一個(gè)前沿領(lǐng)

域》中表示，充分利用大數(shù)據(jù)可幫助全球個(gè)人定位服務(wù)提供商增加1000億美元收

入、幫助歐洲公共部門的管理每年提升2500億美元產(chǎn)值、幫助美國(guó)醫(yī)療保健行業(yè)

每年提升3000億美元產(chǎn)值，并可幫助美國(guó)零售業(yè)獲得60%以上的凈利潤(rùn)增長(zhǎng)……

如果感覺此數(shù)據(jù)太過空泛，那么我們可以通過安防監(jiān)控在大數(shù)據(jù)方面的應(yīng)用來

進(jìn)行詳細(xì)的了解。很多讀者應(yīng)該都看過電影《全民公敵》，威爾史密斯飾演的律師

出現(xiàn)在各地任意位置的攝像頭都會(huì)在第一時(shí)間被發(fā)現(xiàn)，這便是大數(shù)據(jù)的作用。從技

術(shù)角度來看，從傳統(tǒng)的海量存儲(chǔ)監(jiān)控，到實(shí)現(xiàn)聯(lián)網(wǎng)智能化監(jiān)控便是大數(shù)據(jù)很好的應(yīng)

用.在國(guó)際大都市中，每年行駛的車輛數(shù)據(jù)可能會(huì)達(dá)到百億級(jí)，從這些海量信息提

取車牌、車身顏色，就可以很快查出軌跡、違章等，而接下來的關(guān)聯(lián)分析就是基于

大數(shù)據(jù)的基礎(chǔ)展開。

再比如大家經(jīng)常使用的淘寶為例。天貓副總裁王文彬曾表示“我們可以得到買

家的訪問量、固定頻率、偏好商品等淺層分析。未來將有更多，不僅能看到商家銷

量的高低，甚至還可以看出其原因.”商家還可以通過對(duì)點(diǎn)擊量、跨店鋪點(diǎn)擊，訂單

流轉(zhuǎn)量甚至旺旺聊天信息等消費(fèi)者購(gòu)買行為的分析，進(jìn)而有針對(duì)性的進(jìn)行提高，達(dá)

到提高銷量的目的.

從人類文明出現(xiàn)到2003年，人類總共才產(chǎn)生了5EB(ExaBytes)的數(shù)據(jù)，但是

當(dāng)前的人類兩天內(nèi)就創(chuàng)造出了相同的數(shù)據(jù)量，全球90%的數(shù)據(jù)都是在過去兩年中

生成的，到2020年全球數(shù)據(jù)使用量將大概需要376億個(gè)1TB的硬盤進(jìn)行存儲(chǔ)。

大數(shù)據(jù)

當(dāng)然，大數(shù)據(jù)并不等同于目前的海量數(shù)據(jù).目前全球均比較認(rèn)可IDC對(duì)“大數(shù)

據(jù)”的定義：為了更經(jīng)濟(jì)地從高頻率獲取的、大容量的、不同結(jié)構(gòu)和類型的數(shù)據(jù)中

獲取價(jià)值，而設(shè)計(jì)的新一代架構(gòu)和技術(shù)。此定義也可以概括為四個(gè)特點(diǎn)，即高容量

(volume)、多樣性(variety),速度(velocity),以及價(jià)值(value)四個(gè)V,包括

基礎(chǔ)架構(gòu)、數(shù)據(jù)管理、分析挖掘和決策支持四個(gè)層面.當(dāng)然，也有其他不同的觀

點(diǎn)，IBM對(duì)于大數(shù)據(jù)的定義便是規(guī)模性(Volume)、多樣性(Variety)、高速性

(Velocity)和真實(shí)性(Veracity)的“4V理論“，NetApp大中華區(qū)總經(jīng)理陳文所

理解的大數(shù)據(jù)包括A、B、C三個(gè)要素：大分析(Analytic),高帶寬(Bandwidth)

和大內(nèi)容(Content).

大數(shù)據(jù)與云計(jì)算

物聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)等是大數(shù)據(jù)的來源，而大數(shù)據(jù)分析則是為物聯(lián)網(wǎng)和移動(dòng)互

聯(lián)網(wǎng)提供有用的分析，獲取價(jià)值。云計(jì)算又與大數(shù)據(jù)有什么關(guān)系呢？這個(gè)問題其實(shí)

早在2011年，就有人分析，例如EMCWorld2011的大會(huì)主題就是“當(dāng)云計(jì)算遇見

大數(shù)據(jù)”。

云計(jì)算與大數(shù)據(jù)兩者之間有很多的交集，業(yè)界主要做云的公司有谷歌、亞馬遜

等都擁有大量大數(shù)據(jù).EMC總裁基辛格強(qiáng)調(diào)大數(shù)據(jù)應(yīng)用必須在云設(shè)施上跑，這就是兩

者的關(guān)系--大數(shù)據(jù)離不開云。同時(shí)，支撐大數(shù)據(jù)以及云計(jì)算的底層原則是一樣的，

即規(guī)?；⒆詣?dòng)化、資源配置、自愈性，這些都是底層的技術(shù)原則。因此基辛格認(rèn)

為大數(shù)據(jù)和云之間存在很多合力的地方。

另一方面，隨著互聯(lián)網(wǎng)信息量的激增，用戶單個(gè)數(shù)據(jù)集達(dá)到數(shù)以TB計(jì)，有的

客戶甚至已達(dá)