******經(jīng)濟(jì)管理學(xué)院

《大數(shù)據(jù)技術(shù)與應(yīng)用》大作業(yè)

大作業(yè)題目：

基于大數(shù)據(jù)技術(shù)河北農(nóng)業(yè)發(fā)展分析

班級：******學(xué)號.******姓名.******

題號—二總分

得分

1.選題創(chuàng)新性和實(shí)用價(jià)值（10分）

一題2.子問題是否夠3個(gè)：是J否共個(gè)（15分）

評分

3.大數(shù)據(jù)分析步驟內(nèi)容正確性，正文內(nèi)容結(jié)構(gòu)完整，語言

標(biāo)準(zhǔn)

流暢性（35分）

4.結(jié)果展示清楚易懂、展示方式超出兩種以上110分）

5.結(jié)論撰寫正確，邏輯正確（10分）

1.對大數(shù)據(jù)定義認(rèn)知（5分）

二題

評分2.大數(shù)據(jù)應(yīng)用描述清楚、內(nèi)容正確（10分）

標(biāo)準(zhǔn)

3.其余（5分）

教師評語：（依照題目評分細(xì)則給分項(xiàng)，同時(shí)考慮學(xué)生學(xué)

習(xí)表現(xiàn)，給出大作業(yè)內(nèi)容、質(zhì)量等方面寫出評語。）

教師

評語

一、緒論

1.1選題背景

大數(shù)據(jù)這一術(shù)語正是產(chǎn)生在全球數(shù)據(jù)爆炸增加背景下,用來形容龐大數(shù)據(jù)集

合。與傳統(tǒng)數(shù)據(jù)集合相比，大數(shù)據(jù)通常包含大量非結(jié)構(gòu)化數(shù)據(jù)，且大數(shù)據(jù)需要更多

實(shí)時(shí)分析。另外，大數(shù)據(jù)還為挖掘隱臧價(jià)值帶來了新機(jī)遇，同時(shí)給我們帶來了新挑

戰(zhàn)，政府機(jī)構(gòu)最近也宣告了一項(xiàng)加緊大數(shù)據(jù)進(jìn)程重大計(jì)劃，各行各業(yè)也都在主動(dòng)討

論大數(shù)據(jù)吸引力。

大數(shù)據(jù)作為“互聯(lián)網(wǎng)+”行動(dòng)計(jì)劃主要內(nèi)容,其主要性得到了廣泛重視。農(nóng)業(yè)是

大數(shù)據(jù)主要應(yīng)用領(lǐng)域，大數(shù)據(jù)技術(shù)為農(nóng)業(yè)信息服務(wù)工作帶來了新發(fā)展機(jī)遇。將大

數(shù)據(jù)應(yīng)用在農(nóng)業(yè)中,不但能使農(nóng)業(yè)信息服務(wù)技術(shù)發(fā)展變得愈加緊捷，還能對農(nóng)'業(yè)信

息數(shù)據(jù)進(jìn)行有效整合和共享，為農(nóng)業(yè)發(fā)展做出貢獻(xiàn),促進(jìn)農(nóng)業(yè)整體進(jìn)步。接卜.來我

將用學(xué)院配置.大數(shù)據(jù)分析平臺對河北農(nóng)業(yè)數(shù)據(jù)進(jìn)行分析。

關(guān)鍵詞：農(nóng)業(yè);信息服務(wù);大數(shù)據(jù);技術(shù);創(chuàng)新；

二、需求分析

2.1確定問題

伴隨我國農(nóng)業(yè)領(lǐng)域各項(xiàng)事業(yè)不停發(fā)展，農(nóng)業(yè)大數(shù)據(jù)技術(shù)所包括范圍也越來越

廣，尤其是現(xiàn)在農(nóng)業(yè)活動(dòng)各個(gè)步驟不停增多，其產(chǎn)生數(shù)據(jù)數(shù)量也越來越多，所以，

關(guān)于農(nóng)業(yè)數(shù)據(jù)分析相關(guān)需求也越來越多。農(nóng)業(yè)大數(shù)據(jù)技術(shù)是指在農(nóng)業(yè)數(shù)據(jù)研究中

結(jié)合了地域性、季節(jié)性、多樣性、周期性、以及農(nóng)作物本身特征數(shù)據(jù)集合，其數(shù)

據(jù)起源廣泛、類型多樣、結(jié)構(gòu)復(fù)雜、有潛在價(jià)值也極難利用，即使我國農(nóng)業(yè)大數(shù)

據(jù)技術(shù)還不是很成熟，不過我們必須對農(nóng)業(yè)大數(shù)據(jù)技術(shù)發(fā)展情況進(jìn)行及時(shí)分析，

建立完善農(nóng)業(yè)大數(shù)據(jù)技術(shù)體系，深入促進(jìn)我國農(nóng)業(yè)大數(shù)據(jù)技街發(fā)展。只有農(nóng)業(yè)大

數(shù)據(jù)技術(shù)得到了發(fā)展，才鎮(zhèn)夠愈加好應(yīng)用到我國農(nóng)業(yè)經(jīng)濟(jì)領(lǐng)域中，才能夠促進(jìn)我

國農(nóng)業(yè)整體發(fā)展，深入促進(jìn)我國其余相關(guān)領(lǐng)域經(jīng)濟(jì)發(fā)展。這篇論文是對大數(shù)據(jù)在

農(nóng)業(yè)初步應(yīng)用，是次試驗(yàn)。

2.2分解問題

（1）總體分析河北農(nóng)業(yè)發(fā)展現(xiàn)實(shí)狀況；

（2）詳細(xì)分析河北農(nóng)業(yè)發(fā)展中受災(zāi)情況和災(zāi)害預(yù)防和應(yīng)對情況；

（3）詳細(xì)分析河北農(nóng)業(yè)中主要農(nóng)產(chǎn)品產(chǎn)量改變情況;

圖21997.河北省農(nóng)業(yè)機(jī)械化進(jìn)程分析圖

；：：/名券

■期都吟

199200200200衣0“200-200200200200200201201201n*±x?tu

■有武萼泣

圖31997-河北省土地利用情況分析圖

2730

910,

三尸■名春?

199199199200200200“200200200200200200200201201201-201201■'201

圖41997?河北省受災(zāi)成災(zāi)對比分析圖

圖51997.河北省災(zāi)害受災(zāi)類型對比分析圖

圖61997-河北省災(zāi)害成災(zāi)類型對比分析圖

經(jīng)上圖分析河北農(nóng)業(yè)發(fā)展仍面臨挑戰(zhàn)

1）農(nóng)業(yè)資源約束依然偏緊

本省人均耕地136畝,中低產(chǎn)田占耕地面積2/3,伴隨人口增加與城鎮(zhèn)化進(jìn)程

加緊，未來5-10年耕地降低不可逗免，人地矛盾將愈加突出。全省現(xiàn)在人均水資

源量307立方米，僅為全國平均l/7o伴隨農(nóng)業(yè)生產(chǎn)結(jié)構(gòu)調(diào)整,蔬菜、果樹、畜牧

養(yǎng)殖規(guī)模越來越大，按現(xiàn)在生產(chǎn)規(guī)模每年缺水70億方。后備資源不足制約了木

省農(nóng)業(yè)發(fā)展。

2）基礎(chǔ)設(shè)施依然微弱

本省農(nóng)田水利工程標(biāo)準(zhǔn)低,田間工程配套率不足20%,現(xiàn)在仍有1600多萬畝

耕地沒有灌概條件,澆灌確保率低，農(nóng)民未從根本上擺脫靠天吃飯局面。農(nóng)村公路

等級低，增加了農(nóng)民運(yùn)輸成本，制約了農(nóng)產(chǎn)品向外地及時(shí)輸送和供給。農(nóng)業(yè)機(jī)械

化水平亟待深入提升，玉米機(jī)收水平僅為25%左右。畜產(chǎn)品生產(chǎn)標(biāo)準(zhǔn)化設(shè)施利

用率低，直接影響了言牧業(yè)生產(chǎn)水平。農(nóng)業(yè)抗災(zāi)防災(zāi)設(shè)施和能力較低，不能有效防

范和應(yīng)對重大自然災(zāi)害。

3）生態(tài)環(huán)境依然脆弱.

本省農(nóng)業(yè)發(fā)展方式粗放，水土流失和荒漠化嚴(yán)重，草原生態(tài)局部改進(jìn)，總體惡

化情況沒有根本扭轉(zhuǎn)，現(xiàn)在仍有水土流失面積6.3萬平方公里。掠奪性使用耕地,

土壤肥力逐年減退，土堞中有毒有害物質(zhì)逐年增加。農(nóng)村垃圾處理利污染治理不

足,水資源麼乏造成部分.地域污水澆灌農(nóng)田，增加了農(nóng)產(chǎn)品質(zhì)量安全隱患,影響了

農(nóng)田生態(tài)環(huán)境。農(nóng)業(yè)物種資源保護(hù)不夠，氣候改變影響加劇，白然災(zāi)害頻發(fā)，制約

了本省農(nóng)業(yè)和農(nóng)村經(jīng)濟(jì)可連續(xù)發(fā)展。

4）質(zhì)量安全任務(wù)依然艱巨

落后生產(chǎn)方式與國際農(nóng)產(chǎn)品標(biāo)準(zhǔn)矛盾集中表現(xiàn)。農(nóng)產(chǎn)品標(biāo)準(zhǔn)體系、檢驗(yàn)檢

測體系和產(chǎn)地認(rèn)證體系亟待完善。高質(zhì)量無公害農(nóng)產(chǎn)品、綠色有機(jī)食品市場價(jià)格

未得到表現(xiàn)，涉農(nóng)企業(yè)和農(nóng)民農(nóng)產(chǎn)品安全生產(chǎn)觀念還有待提升。農(nóng)產(chǎn)品和農(nóng)業(yè)投

入品監(jiān)管面廣、線長、量大,任務(wù)十分艱巨，保障農(nóng)產(chǎn)品質(zhì)量安全壓力增大。

5）要素支撐依然不強(qiáng)

農(nóng)民文化素質(zhì)低,創(chuàng)業(yè)意識不強(qiáng)，自主發(fā)展能力弱，一家一戶生產(chǎn)經(jīng)營方式使

農(nóng)戶在產(chǎn)業(yè)鏈中仍處于高風(fēng)險(xiǎn)、低收益弱勢地位，深入增收智力支撐有待提升。

現(xiàn)有應(yīng)用技術(shù)主要集中在栽培和生產(chǎn)階段高產(chǎn)上，生產(chǎn)安全、生態(tài)安全、環(huán)境安

全技術(shù)亟待研發(fā)?；鶎愚r(nóng)技推廣體系微弱，先進(jìn)適用新技術(shù)極難及時(shí)有效傳遞到

生產(chǎn)一線。農(nóng)村產(chǎn)權(quán)制度改革相對滯后，土地、勞動(dòng)力等要素尚不具各城鎮(zhèn)對接

條件,支農(nóng)金融產(chǎn)品不足、涉農(nóng)貸款難度未減，制約了農(nóng)業(yè)結(jié)構(gòu)調(diào)整與產(chǎn)業(yè)升級。

二、各項(xiàng)數(shù)值對比分析

圖71997-河北省受災(zāi)面積改變情況分析圖

圖81997-河北省成災(zāi)面積改變情況分析圖

自然災(zāi)害對人類社會(huì)具備重大危害性，而且伴伴隨社會(huì)經(jīng)濟(jì)發(fā)展所造成損失

正展現(xiàn)逐年加劇加重態(tài)勢。河北省作為全國自然災(zāi)害損失比較嚴(yán)重地域之一，其

災(zāi)害類型多樣，如旱澇，土壤鹽堿化，沙塵暴，寒潮，暴雨以及地質(zhì)災(zāi)害等屢見

不鮮。經(jīng)過對這些災(zāi)害發(fā)芻規(guī)律及其所造成影響進(jìn)行分析和研究，得出河北省自

然災(zāi)害基本特征，從而在對應(yīng)減災(zāi)防災(zāi)方法上加以改進(jìn)，為河北省災(zāi)害管理提供

一定借鑒，實(shí)現(xiàn)區(qū)域社會(huì)、經(jīng)濟(jì)、資源環(huán)境良性發(fā)展。

自然災(zāi)害就是在一定自然環(huán)境背景下產(chǎn)生、超出人類社會(huì)控制承受能力，對

人類社會(huì)造成危害損失事件，是自然與社會(huì)綜合作用產(chǎn)物。包含洪澇、干旱、臺

風(fēng)、風(fēng)直、雪災(zāi)、沙塵暴等氣象災(zāi)害，火山、地震災(zāi)害、山體崩塌、滑坡、泥石

流等地質(zhì)災(zāi)害，風(fēng)暴潮、海嘯等海洋災(zāi)害，森林草原災(zāi)害和重大生物災(zāi)害等。自

然災(zāi)害破壞人類賴以生存和發(fā)展資源與環(huán)境，對人類影響是巨大。其不但破壞了

人們正常生活，造成人口死亡、傷病、失蹤以及缺糧、斷水等危害，而且還會(huì)給

人們心靈帶來創(chuàng)傷，造成心理陰影。與此同時(shí)，災(zāi)害還會(huì)損壞人類勞動(dòng)創(chuàng)造物質(zhì)

財(cái)富，破壞農(nóng)業(yè)生產(chǎn)、工業(yè)生產(chǎn)、交通運(yùn)輸、通信網(wǎng)絡(luò)以及其余產(chǎn)業(yè)活動(dòng)，影響

社會(huì)功效和社會(huì)經(jīng)濟(jì)正常發(fā)展秩序。

在二十世紀(jì)60年代以前，人類對災(zāi)害研究主要局限于災(zāi)害機(jī)理和預(yù)測，重

點(diǎn)調(diào)查分析某種災(zāi)害形成條件與活動(dòng)過程。70年代以后，伴隨自然災(zāi)害造成損

失與日俱增，使得防災(zāi)減災(zāi)工作成為又一研究重點(diǎn)，而且越來越得到人們重視。

與此同時(shí)，一些發(fā)達(dá)國家首先拓寬了災(zāi)害研究領(lǐng)域，在繼續(xù)深入研究災(zāi)害機(jī)理問

時(shí)，開始了災(zāi)害評定工作，以此來降低災(zāi)害給人類帶來損失。

我國對這方面研究起步較晚，不過發(fā)展快速，并在各個(gè)方面取得了一定結(jié)果。

對于河北省而言，自改革開放以來，河北省社會(huì)經(jīng)濟(jì)經(jīng)濟(jì)蓬勃發(fā)展，河北人生活

質(zhì)量達(dá)成了全國較高水平，較多學(xué)者也開始用一些地理方法對河北地質(zhì)災(zāi)害進(jìn)行

系統(tǒng)地研究，而且有了較大突破。經(jīng)過多年來對災(zāi)害統(tǒng)計(jì)和分析，河北省在防災(zāi)

減災(zāi)上工作力度不停加大，其防災(zāi)減災(zāi)體系也逐步得以完善?，F(xiàn)階段河北省關(guān)于

災(zāi)害方面研究還在進(jìn)行，其結(jié)果對河北省經(jīng)濟(jì)和社會(huì)發(fā)展所帶來價(jià)值一樣是不可

估量。

41-

1997'-2000'2<XH2002'2003'2004200s'2006'20072008’2009M0201]2<H320141201s一痂,:￥的匕夕S.

圖91997-河北省油料產(chǎn)量改變分析圖

油料作物是植物油脂和蛋白質(zhì)最主要起源，伴隨人民生活水平提升和膳食結(jié)

構(gòu)改變，油脂和蛋白質(zhì)消費(fèi)量逐年增加,而河北省油料作生產(chǎn)卻出現(xiàn)了種植面積萎

縮、產(chǎn)量徘徊不前現(xiàn)象。河北省是全國油料作物生產(chǎn)大省,面對食用油價(jià)格不停

攀升、供需矛盾H益突出嚴(yán)形勢，科學(xué)制訂油料作物產(chǎn)業(yè)發(fā)展對策成為當(dāng)前緊迫

而艱巨任務(wù)。

圖101997.河北省小麥、玉米產(chǎn)量改變分析圖

小麥和玉米作為我國兩大主要糧食作物，其生產(chǎn)水平對保障我國糧食安全和

種植業(yè)結(jié)構(gòu)調(diào)整影響巨大°河北省小麥、玉米播種面積和總產(chǎn)量在全國均居第三

位，是國家糧食主產(chǎn)省。同時(shí)，河北省還是我國主要農(nóng)區(qū)畜牧業(yè)生產(chǎn)基地，禽蛋、

奶、肉類產(chǎn)量分居全國第一、第二、第四位。然而。河北省小麥、玉米產(chǎn)業(yè)發(fā)展

相比國內(nèi)外先進(jìn)區(qū)域還有較大差距。

1997199S'199920002001'20022003'2004'20052006'2007'20082009'2010*20112012'2013'

圖111997.河北省蔬菜產(chǎn)量改變分析圖

在蔬菜種植面積穩(wěn)定增加同時(shí).，全省各地深入加大了科技投入和品種改良力

度，擴(kuò)大設(shè)施蔬菜種植面積，提升了對自然災(zāi)害抵抗能力，蔬菜單產(chǎn)和總產(chǎn)量深

入提升。，全省蔬菜單產(chǎn)達(dá)成4377.5千克/畝，比上年增產(chǎn)60.6千克/畝，增加

1.4%；蔬菜總產(chǎn)量達(dá)成8125.7萬噸，增加2.8%,僅次于山東省，在全國繼續(xù)保

持第二位置。從設(shè)區(qū)市情況看，蔬菜產(chǎn)量比上年都有不一樣程度增加，其中，唐

山、石家莊和邯鄲居前三位，總產(chǎn)量分別達(dá)成1432.5萬噸、1214.8萬噸和855.8

萬噸，占全省蔬菜總產(chǎn)量比重分別達(dá)成176%、15.0%利10.5%。

圖121997.河北省農(nóng)業(yè)總產(chǎn)值改變分析圖

河北省是全國糧油集中產(chǎn)區(qū)之一，可耕地面積達(dá)600多萬公頃，居全國第四

位.因?yàn)榈赜驐l件氣候差異，農(nóng)作物種類較多。河北省農(nóng)作物中，糧食主要有小

麥、玉米、谷子、水稻、高粱、豆類等。河北省是全國三大小麥集中產(chǎn)區(qū)之一，

大部分地域適宜小麥生長。高產(chǎn)穩(wěn)產(chǎn)集中產(chǎn)區(qū)在太行山東麓平原。全省常年種小

麥三四千畝，總產(chǎn)量通常占到全省糧食產(chǎn)量1/3以上。經(jīng)濟(jì)作物主要有棉花、花

生、糖用甜菜和麻類等。河北省早就是全國主要產(chǎn)棉區(qū)之一，曾被譽(yù)為“中國產(chǎn)

棉第一省份”，最高種植生份到1720多萬畝。在全省11個(gè)省轄市中，有七個(gè)市

大面積種植棉花，石家莊市以南最為集中，素有南棉海之稱。

河北省果樹資源品種很多，分布廣、產(chǎn)量大，栽培和野生果樹共有100多個(gè)。

河北省有許多著名果品，如昌黎縣蘋果、宣化牛奶葡荷、深州蜜桃、趙縣雪花梨、

京東遷西一帶板栗（乂稱天津甘栗）、產(chǎn)于泊頭、肅寧、辛集、晉州等地鴨梨（在

國際市場上稱“天津鴨梨”）、滄州金絲小棗和阜平、贊皇大棗等。

新中國成立以前，河北經(jīng)濟(jì)以農(nóng)業(yè)為主，農(nóng)業(yè)以小農(nóng)經(jīng)濟(jì)為主，耕作技術(shù)落

后，經(jīng)營粗放，農(nóng)作物產(chǎn)量很底。1949年全省農(nóng)業(yè)產(chǎn)值僅為20.74億元，但卻占

了工農(nóng)業(yè)總產(chǎn)值77.1%,糧食總產(chǎn)量為400多萬噸。近兒十年米，堅(jiān)持科技興農(nóng)，

普及科學(xué)技術(shù)知識，改進(jìn)水利條件，發(fā)展農(nóng)用物資，發(fā)展高效農(nóng)業(yè)，靠政策調(diào)動(dòng)

農(nóng)民主動(dòng)性，使農(nóng)業(yè)生產(chǎn)發(fā)生巨大改變。，全省糧食總產(chǎn)3365.0萬噸，創(chuàng)歷史

最高水平。肉蛋禽奶蘋果也都有大幅度增加。

四、結(jié)論

結(jié)合上述分析及分析過程中碰到問題，總結(jié)出以下幾點(diǎn)農(nóng)業(yè)大數(shù)據(jù)分析方

案:

1農(nóng)業(yè)大數(shù)據(jù)建設(shè)思緒

按照高起點(diǎn)設(shè)計(jì)、主體先行思緒，農(nóng)業(yè)大數(shù)據(jù)建設(shè)策略分為三步：搭建農(nóng)業(yè)

大數(shù)據(jù)云平臺，農(nóng)業(yè)大數(shù)據(jù)整合，農(nóng)業(yè)應(yīng)用聚合創(chuàng)新。

規(guī)范農(nóng)業(yè)大數(shù)據(jù)標(biāo)準(zhǔn)和規(guī)范體系，搭建農(nóng)業(yè)大數(shù)據(jù)云平臺，構(gòu)建云數(shù)據(jù)服務(wù)模

型框架，逐步豐富資源服務(wù)功效，有效整合農(nóng)業(yè)內(nèi)外資源，提升農(nóng)業(yè)信息化深度應(yīng)

用、高端應(yīng)用、合成應(yīng)用能力和水平，不改變原有農(nóng)業(yè)應(yīng)用系統(tǒng)進(jìn)行聚合創(chuàng)新。

2農(nóng)業(yè)大數(shù)據(jù)建設(shè)要求

一是多元與整體考慮并存，滿足農(nóng)業(yè)多部門和業(yè)務(wù)寬幅需求，隨時(shí)了解不一樣

業(yè)務(wù)需求改變，集中規(guī)范化、標(biāo)準(zhǔn)化處理，確保農(nóng)業(yè)大數(shù)據(jù)云平臺長久服務(wù)能力。

二是前瞻性與階段性用結(jié)合，需要具備適當(dāng)前瞻性，充分考慮到未來技術(shù)發(fā)展

方向和需求改變方向。

三是標(biāo)準(zhǔn)化與可擴(kuò)展性相結(jié)合，充分考慮未來農(nóng)業(yè)業(yè)務(wù)服務(wù)內(nèi)容拓展,使系統(tǒng)

在較長時(shí)期內(nèi)能適應(yīng)農(nóng)業(yè)業(yè)務(wù)發(fā)展需要四是先進(jìn)性與安全性相結(jié)合，農(nóng)業(yè)大數(shù)據(jù)

承載著多樣數(shù)據(jù)信息，采取先進(jìn)技術(shù)同時(shí)，也要確保系統(tǒng)運(yùn)行穩(wěn)定與安全。

3農(nóng)業(yè)大數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范建設(shè)

農(nóng)業(yè)數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范體系建設(shè)，是對農(nóng)業(yè)信息活動(dòng)各個(gè)步驟實(shí)施標(biāo)準(zhǔn)化管理，將

信息獲取、傳遞、存放、分析和利用等步驟有效銜接，從而切實(shí)有效開發(fā)和利用

農(nóng)業(yè)信息資源，提升資源使用效率，擴(kuò)大資源共享范圍。

農(nóng)業(yè)數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范體系建設(shè)是農(nóng)業(yè)信息資源開發(fā)利用關(guān)鍵原因。伴隨農(nóng)業(yè)數(shù)

據(jù)大規(guī)模增加，農(nóng)業(yè)大數(shù)據(jù)迫切需要出臺相關(guān)標(biāo)準(zhǔn)規(guī)范體系支撐，按照頂層設(shè)計(jì)、

統(tǒng)一規(guī)劃、統(tǒng)一標(biāo)準(zhǔn)標(biāo)準(zhǔn)，重點(diǎn)從采集、處理、傳輸和利用進(jìn)行全方面規(guī)劃標(biāo)準(zhǔn)

技術(shù)規(guī)范體系框架。這些標(biāo)準(zhǔn)包含數(shù)據(jù)元素標(biāo)準(zhǔn)、信息分類編碼標(biāo)準(zhǔn)、數(shù)據(jù)交換

標(biāo)準(zhǔn)等。這些標(biāo)準(zhǔn)建立，將貫通信息需求分析、數(shù)據(jù)建模和后續(xù)應(yīng)用開發(fā)全過程。

五、淺談大數(shù)據(jù)技術(shù)及應(yīng)用

引言

大數(shù)據(jù)這一術(shù)語正是產(chǎn)生在全球數(shù)據(jù)爆炸增加背景下,用來形容龐大數(shù)據(jù)集

合。與傳統(tǒng)數(shù)據(jù)集合相比，人數(shù)據(jù)通常包含人量非結(jié)構(gòu)化數(shù)據(jù),±L人數(shù)據(jù)需要更多

實(shí)時(shí)分析。另外，大數(shù)據(jù)還為挖掘隱藏價(jià)值帶來了新機(jī)遇，同時(shí)給我們帶來了新挑

戰(zhàn)，政府機(jī)構(gòu)最近也宣告了一項(xiàng)加緊大數(shù)據(jù)進(jìn)程重大計(jì)劃，各行各業(yè)也都在主動(dòng)討

論大數(shù)據(jù)吸引力。

大數(shù)據(jù)時(shí)代到來，是全球著名咨詢企業(yè)麥肯錫最早提出，麥肯錫稱：”數(shù)據(jù),

已經(jīng)滲透到當(dāng)今每一個(gè)行業(yè)和業(yè)務(wù)職能領(lǐng)域，成為主要生產(chǎn)原因。人們對于海量

數(shù)據(jù)挖掘和利用，預(yù)示著新一波生產(chǎn)率增加和消費(fèi)者盈余浪潮到來。”近幾年大

數(shù)據(jù)一詞連續(xù)升溫也帶來了大數(shù)據(jù)泡沫疑慮，大數(shù)據(jù)代表了互聯(lián)網(wǎng)信息層（數(shù)據(jù)

海洋），是互聯(lián)網(wǎng)智慧和意識產(chǎn)生基礎(chǔ)。包含物聯(lián)網(wǎng)，傳統(tǒng)互聯(lián)網(wǎng)，移動(dòng)互聯(lián)網(wǎng)

在源源不停向互聯(lián)網(wǎng)大數(shù)據(jù)層匯聚數(shù)據(jù)和接收數(shù)據(jù)。

大數(shù)據(jù)定義

通常意義上，大數(shù)據(jù)是指無法在有限時(shí)間內(nèi)用傳統(tǒng)IT技術(shù)和軟硬件工具對

其進(jìn)行感知、獲取、管理、處理和服務(wù)數(shù)據(jù)集合。大數(shù)據(jù)技術(shù)描述了新一代技術(shù)

和架構(gòu)體系，經(jīng)過高速采集、發(fā)覺或分析,提取各種各樣大量數(shù)據(jù)經(jīng)濟(jì)價(jià)值。大數(shù)據(jù)

特點(diǎn)能夠總結(jié)為4個(gè)V,即volume（體量浩大）、variety（模態(tài)繁多）、velocity（生成快

速）和value（價(jià)值巨大但密度很低）。大數(shù)據(jù)價(jià)值鏈可分為4個(gè)階段:數(shù)據(jù)生成、

數(shù)據(jù)采集、數(shù)據(jù)儲(chǔ)存以及數(shù)據(jù)分析。數(shù)據(jù)分析是大數(shù)據(jù)價(jià)值鏈最終也是最主要階

段，是大數(shù)據(jù)價(jià)值實(shí)現(xiàn)，是大數(shù)據(jù)應(yīng)用基礎(chǔ)，其目標(biāo)在于提取有用值,提供論斷提議

或支持決議，經(jīng)過對不一樣領(lǐng)域數(shù)據(jù)集分析可能會(huì)產(chǎn)生不一樣級別潛在價(jià)值。

大數(shù)據(jù)應(yīng)用

大數(shù)據(jù)應(yīng)用，是利用大數(shù)據(jù)分析結(jié)果,為用戶提供輔助決議，發(fā)掘潛在價(jià)值過

程。

大數(shù)據(jù)分析關(guān)鍵領(lǐng)域

1）結(jié)構(gòu)化數(shù)據(jù)

一直是傳統(tǒng)數(shù)據(jù)分析主要研究對象，現(xiàn)在主流結(jié)構(gòu)化數(shù)據(jù)管理工具，如關(guān)系型

數(shù)據(jù)庫等，都提供了數(shù)據(jù)分析功效。

分析商業(yè)和科研領(lǐng)域會(huì)產(chǎn)生大量結(jié)構(gòu)化數(shù)據(jù)，而這些結(jié)構(gòu)化數(shù)據(jù)管理和分析

依賴于數(shù)據(jù)庫、數(shù)據(jù)倉庫、OLAP和業(yè)務(wù)流程管理成熟商業(yè)化技術(shù)。得益于關(guān)系型

數(shù)據(jù)庫技術(shù)發(fā)展，結(jié)構(gòu)化數(shù)據(jù)分析方法較為成熟，大部分都以數(shù)據(jù)挖掘和統(tǒng)計(jì)分析

為基礎(chǔ)。

2）文本

文本是慣用存放文字、傳遞信息方式,也是最常見非結(jié)構(gòu)化數(shù)據(jù)。

存放信息最常見形式就是文本，比如電子郵件通信、企'也文件到網(wǎng)站頁面、社

交媒體內(nèi)容等。所以,文本分析被認(rèn)為比結(jié)構(gòu)化數(shù)據(jù)挖掘更具備商業(yè)化潛力。通

常情況下，文本分析，也稱為文本挖掘,指是從非結(jié)構(gòu)化文本中提取有用信息和知

識過程。文本挖掘是一個(gè)跨學(xué)科領(lǐng)域，包括到信息檢索、機(jī)器學(xué)習(xí)、統(tǒng)計(jì)、計(jì)算語言

學(xué)尤其是數(shù)據(jù)挖掘。

3）Web數(shù)據(jù)

Web技術(shù)發(fā)展，極大地豐富了獲取和交換數(shù)據(jù)方式,Web數(shù)據(jù)高速增加，使其

成為大數(shù)據(jù)主要起源。

在過去中，我們見證互聯(lián)網(wǎng)信息爆炸式增加，同時(shí)Web分析作為一個(gè)活躍研

究領(lǐng)域也已經(jīng)出現(xiàn)。Web分析意在從Web文檔和服務(wù)中自動(dòng)檢索、提取和評定

信息用以發(fā)覺知識。Web分析建立在幾個(gè)研究領(lǐng)域之上，包含數(shù)據(jù)庫、信息檢索、

自然語言處理和文本挖掘等。

Web內(nèi)容包括多個(gè)類型數(shù)據(jù)，比如文本、圖像、音頻、視頻、代號、元數(shù)據(jù)以及

超鏈接等。

4）多媒體數(shù)據(jù)

伴隨通訊技術(shù)發(fā)展，圖片、音頻、視頻等體積較大數(shù)據(jù)，也能夠被快速地傳輸，因?yàn)?/p>

缺乏文字信息，其分析方法與其余數(shù)據(jù)相比，具備顯著特點(diǎn)。最近，多媒體數(shù)據(jù)（主

要包含圖像、音?頻和視頻）正以驚人速度增加，幾乎無處不在。因?yàn)槎嗝襟w數(shù)據(jù)多

個(gè)多樣而且大多數(shù)都比單一簡單結(jié)構(gòu)化數(shù)據(jù)和文本數(shù)據(jù)包含更豐富信息,提取信

息這一任務(wù)正面臨多媒體數(shù)據(jù)語義差距巨大挑戰(zhàn)。

5）物聯(lián)網(wǎng)大數(shù)據(jù)應(yīng)用

物聯(lián)網(wǎng)不不過大數(shù)據(jù)主要起源,還是大數(shù)據(jù)應(yīng)用主要市場。在物聯(lián)網(wǎng)中，現(xiàn)實(shí)

世界中每個(gè)物體都能夠是數(shù)據(jù)生產(chǎn)者和消費(fèi)者，因?yàn)槲矬w種類繁多，物聯(lián)網(wǎng)應(yīng)用也

層出不窮。

在物聯(lián)網(wǎng)大數(shù)據(jù)應(yīng)用上，物流企業(yè)應(yīng)該有深刻體會(huì)。UPS快遞為了使總部能在車

輛出現(xiàn)晚點(diǎn)時(shí)候跟蹤到車輛位置和預(yù)防引擎故障，它貨車上裝有傳感器、無線適