基于MapReduce的云計(jì)算調(diào)度算法引言《紐約時報(bào)》租用亞馬遜的云計(jì)算服務(wù)，使用基于云計(jì)算的開源軟件Hadoop，將其自1851年以來的1100萬份報(bào)道轉(zhuǎn)變成可搜索的數(shù)字化文檔，耗時僅一天。如果用傳統(tǒng)方法，這項(xiàng)工作可能要數(shù)月才能完成。最近興起的云計(jì)算甚至可以讓你體驗(yàn)每秒10萬億次的運(yùn)算能力，擁有這么強(qiáng)大的計(jì)算能力可以模擬核爆炸、預(yù)測氣候變化和市場發(fā)展趨勢。什么是云計(jì)算云計(jì)算的基本原理云計(jì)算層次云計(jì)算的利用價(jià)值云的案例云有什么問題？云在中國的發(fā)展趨勢目錄云計(jì)算——方便您的生活數(shù)據(jù)中心（多終端同步-透明）PC/筆記本客戶端瀏覽器PDA/手機(jī)/相機(jī)電子相冊電視運(yùn)算中心拍出的相片立即編輯修改在線編寫文檔、報(bào)告隨時隨地寫日志隨時隨地的身體健康狀況監(jiān)控云什么是云計(jì)算云計(jì)算是一種商業(yè)計(jì)算模型，它將計(jì)算任務(wù)分布在大量計(jì)算結(jié)構(gòu)構(gòu)成的資源池上，使用戶能夠按需獲取計(jì)算力、存儲空間和信息服務(wù)。云計(jì)算的核心概念是資源池，這種資源池稱為“云”?！霸啤笔且恍┛梢宰晕揖S護(hù)和管理的虛擬計(jì)算資源，通常是一些大型服務(wù)器集群，包括計(jì)算服務(wù)器、存儲服務(wù)器和寬帶資源等。什么是云計(jì)算就像用電不需要家家裝備發(fā)電機(jī)，只需直接從電力公司購買一樣?！霸朴?jì)算”帶來的就是這樣一種變革。由谷歌、IBM這樣的專業(yè)網(wǎng)絡(luò)公司來搭建計(jì)算機(jī)存儲、運(yùn)算中心，用戶通過一根網(wǎng)線借助瀏覽器就可以很方便的訪問，把“云”做為資料存儲以及應(yīng)用服務(wù)的中心。云計(jì)算目前已經(jīng)發(fā)展出了云安全和云存儲兩大領(lǐng)域。如國內(nèi)的瑞星和趨勢科技就已開始提供云安全的產(chǎn)品；而微軟、谷歌等國際巨頭更多的是涉足云存儲領(lǐng)域。云安全：通過網(wǎng)狀的大量客戶端對網(wǎng)絡(luò)中軟件行為的異常監(jiān)測，獲取互聯(lián)網(wǎng)中木馬、惡意程序的最新信息，推送到服務(wù)端進(jìn)行自動分析和處理，再把病毒和木馬的解決方案分發(fā)到每一個客戶端。這樣一來，整個互聯(lián)網(wǎng)就變成了一個超級大的殺毒軟件。云計(jì)算的其他理解：云計(jì)算也是一種基礎(chǔ)架構(gòu)管理的方法論，大量的計(jì)算資源組成IT資源池，用于動態(tài)創(chuàng)建高度虛擬化的資源提供給用戶使用。在云計(jì)算環(huán)境下，所有的計(jì)算資源，比如說服務(wù)器，能夠動態(tài)地從硬件基礎(chǔ)架構(gòu)上產(chǎn)生出來，加以修改來適應(yīng)工作任務(wù)的需求。云計(jì)算可以支持網(wǎng)格計(jì)算，也可以支持非網(wǎng)格計(jì)算，網(wǎng)格技術(shù)是云計(jì)算的一個組成部分?！霸啤敝械馁Y源在使用者看來是可以無限擴(kuò)展的，并且可以隨時獲取，按需使用，隨時擴(kuò)展，按使用付費(fèi)。這種特性經(jīng)常被稱為像水電一樣使用IT基礎(chǔ)設(shè)施。什么是云計(jì)算云計(jì)算通過將物理資源轉(zhuǎn)換成可伸縮的虛擬共享資源，使得企業(yè)能夠?qū)①Y源分配到到需要資源的應(yīng)用上，即根據(jù)需求來訪問資源（計(jì)算機(jī)處理器和存儲系統(tǒng)等）。通過云計(jì)算，用戶可以訪問大量的計(jì)算和存儲資源，并且不必關(guān)心它們的位置和它們是如何配置的。云計(jì)算是分布式處理、并行處理和網(wǎng)格計(jì)算的發(fā)展，或者說是這些計(jì)算機(jī)科學(xué)概念的商業(yè)實(shí)現(xiàn)。之所以稱為“云”，是因?yàn)樗谀承┓矫婢哂性频奶卣鳎涸埔话愣驾^大；云的規(guī)?？梢詣討B(tài)伸縮，它的邊界是模糊的；云在空中飄忽不定，你無法也無需確定它的具體位置，但它確實(shí)存在于某處。之所以稱為“云”，還因?yàn)樵朴?jì)算的鼻祖之一亞瑪遜公司將曾經(jīng)大家稱作為網(wǎng)格計(jì)算的東西，取了一個新名稱“彈性計(jì)算云”(EC2)，并取得了商業(yè)上的成功。云計(jì)算的基本原理云計(jì)算原理示意傳統(tǒng)計(jì)算云計(jì)算云計(jì)算層次云計(jì)算并不是一個單獨(dú)的服務(wù)，而是一個服務(wù)集合。云計(jì)算的產(chǎn)業(yè)分為三層：云軟件、云平臺、云設(shè)備。這些層定義了提供的服務(wù)的級別。上層分級：云軟件SoftwareasaService(SaaS)中層分級：云平臺PlatformasaService(PaaS)下層分級：云設(shè)備InfrastructureasaService(IaaS)打破以往大廠壟斷的局面，所有人都可以在上面自由揮灑創(chuàng)意，提供各式各樣的軟件服務(wù)。參與者：世界各地的軟件開發(fā)者；打造程序開發(fā)平臺與操作系統(tǒng)平臺，讓開發(fā)人員可以通過網(wǎng)絡(luò)撰寫程序與服務(wù)，一般消費(fèi)者也可以在上面運(yùn)行程序。

參與者：Google、微軟、蘋果、Yahoo；將基礎(chǔ)設(shè)備（如IT系統(tǒng)、數(shù)據(jù)庫等）集成起來，像旅館一樣，分隔成不同的房間供企業(yè)租用。參與者：英業(yè)達(dá)、IBM、戴爾、

升陽、惠普、亞馬遜。云的價(jià)值：資源利用率最大化云計(jì)算的本質(zhì)就是通過整合、共享和動態(tài)的提供資源來實(shí)現(xiàn)IT投資利用率的最大化，它包括了新投資的資源和已投資的資源。因此，實(shí)施云計(jì)算不需要舍棄原有的IT基礎(chǔ)設(shè)施資源。云計(jì)算的實(shí)施不僅可以利用已有的IT基礎(chǔ)設(shè)施資源，而且云計(jì)算可以高效地監(jiān)控管理IT基礎(chǔ)設(shè)施資源。因此，實(shí)施云計(jì)算將使資源更容易被充分利用。云的案例

GoogleApps（企業(yè)應(yīng)用套件） GoogleDocs：將文檔存儲在Google的服務(wù)器上，而不是自己的電腦上。GoogleGmail：當(dāng)用戶需求激增，Google的云計(jì)算系統(tǒng)會自動為Gmail增加容量和處理器的數(shù)量，而無需人工干預(yù)。依賴云計(jì)算，谷歌能以幾乎可以忽略不計(jì)的成本增加新的服務(wù)。如果新增的服務(wù)失敗了，那沒關(guān)系，關(guān)掉并且忘掉它就可以；如果成功了，系統(tǒng)會自動為它增加空間和處理能力。云的案例

Amazon“彈性計(jì)算云”服務(wù)

2006年，Amazon推出彈性計(jì)算云(EC2)服務(wù)，讓中小型企業(yè)能夠按照自己的需要購買亞馬遜數(shù)據(jù)中心的計(jì)算能力，云計(jì)算模式就此誕生。例如：美國的房地產(chǎn)網(wǎng)站Goosipy希望建立一個數(shù)據(jù)庫，計(jì)算67萬個家庭在12年間購入賣出房產(chǎn)的數(shù)據(jù)，以便為消費(fèi)者提供更好的建議。如果他們自己動手，初步預(yù)計(jì)，需要花費(fèi)6個月的時間和數(shù)以百萬計(jì)的美元。而最后，他們租賃了Amazon所提供的“彈性計(jì)算機(jī)云”服務(wù)，通過使用Amazon強(qiáng)大數(shù)據(jù)分析能力，這個項(xiàng)目的完成僅用了3個星期，費(fèi)用不到5萬美元。云計(jì)算的妙處之一，即是按需分配的計(jì)算方式能夠充分發(fā)揮大型計(jì)算機(jī)群的性能。如果你只需使用5%的資源，就只需要付出5%的價(jià)格，而不必像以前那樣，為100%的設(shè)備買單。云的案例Windowslive面對Google的挑戰(zhàn)，微軟試圖以WindowsLive為基礎(chǔ)，聯(lián)結(jié)起數(shù)以億計(jì)的Windows用戶，并向他們提供云計(jì)算，在線存儲是微軟邁出的關(guān)鍵一步，比爾·蓋茨在2007年夏天說：“當(dāng)你想到存儲，就會想到WindowsLive。”IBM合資與Google建立數(shù)據(jù)中心，支持向卡耐基-梅隆大學(xué)、麻省理工大學(xué)、斯坦福大學(xué)、加州大學(xué)伯克萊分校、馬里蘭州大學(xué)和華盛頓大學(xué)等6所大學(xué)的計(jì)算機(jī)科學(xué)研究者提供資金與設(shè)備，推動云計(jì)算的研究。IBM有著得天獨(dú)厚的優(yōu)勢：應(yīng)用服務(wù)器、存儲、管理軟件，樣樣具備。IBM通過向客戶出售云計(jì)算方案與終端，協(xié)助企業(yè)建立屬于自己的云計(jì)算模型的數(shù)據(jù)中心。云有什么問題？特權(quán)用戶訪問。若使用云計(jì)算，你的機(jī)密數(shù)據(jù)將由貴公司外面的人員來處理，所以可想而知：不是貴公司的員工完全可以訪問這些數(shù)據(jù)。數(shù)據(jù)位置。若使用云計(jì)算，你不知道自己的數(shù)據(jù)到底存放在什么地方。服務(wù)器可能建在馬來西亞、加拿大或者美國的新澤西州，說不定同時建在上述三個地方。云有什么問題？數(shù)據(jù)隔離。是當(dāng)然的，云計(jì)算提供商會使用SSL來保護(hù)傳輸中的數(shù)據(jù)，但當(dāng)貴公司的數(shù)據(jù)位于存儲設(shè)備中時，可能與其他公司的數(shù)據(jù)共用一只“虛擬保管箱”。貴公司的數(shù)據(jù)與別人的數(shù)據(jù)經(jīng)過適當(dāng)隔離嗎？提供商可能會夸耀自己的加密技術(shù)如何強(qiáng)大、安全。你會聽到密鑰長度有多長、采用哪種深奧的加密算法。不過，如果你的數(shù)據(jù)能夠被提供商讀取，那么可以這么認(rèn)為：數(shù)據(jù)也會被別人讀取。云有什么問題？可用性。從理論上來說，如果你使用云計(jì)算服務(wù)提供商，沒有必要擔(dān)心自己的數(shù)據(jù)會消失――這些提供商很容易采用冗余機(jī)制把你的數(shù)據(jù)復(fù)制到眾多地方，這樣萬一系統(tǒng)崩潰，仍可以高枕無憂。但你的員工能不能隨時訪問完成工作所需的數(shù)據(jù)呢？比方說，要是虛擬管道受到堵塞會怎樣？要是提供商自身出現(xiàn)的某種內(nèi)部故障導(dǎo)致你無法訪問自己的關(guān)鍵數(shù)據(jù)，又會怎樣？忠告：“公司應(yīng)當(dāng)為任何重要的IT工作負(fù)載確定服務(wù)級別方面的要求，并且需要提供商簽訂服務(wù)級別協(xié)議，從而確保合同里面寫明懲罰條款，以防出現(xiàn)服務(wù)級別協(xié)議未得到遵守的情況。”云有什么問題？災(zāi)難恢復(fù)。重要問題：你的提供商有能力進(jìn)行全面恢復(fù)嗎？需要多少時間才能完成全面恢復(fù)？因?yàn)樗恢粸槟阋患曳?wù)。調(diào)查支持開展內(nèi)部的法律調(diào)查向來就不是容易的事，因?yàn)檫@需要清查可能散布在實(shí)體位置和虛擬位置的大批文檔。如果你使用云計(jì)算服務(wù)提供商，那么開展這種調(diào)查更是困難重重：許多客戶的數(shù)據(jù)也許散布在地點(diǎn)不斷變化的一系列數(shù)據(jù)中心。云有什么問題？存活能力問題。你的提供商會被收購嗎？或者更糟糕的是，會破產(chǎn)嗎？如果是這樣，對方需要多久才能把數(shù)據(jù)交還給你、而且采用的格式讓你可以導(dǎo)入到另一家提供商的基礎(chǔ)設(shè)施上？降低風(fēng)險(xiǎn)方面的支持。你的員工開始使用外部提供商時，會經(jīng)歷一個學(xué)習(xí)過程。這家提供商提供的界面用起來多容易？提供商是否幫助你的管理人員設(shè)置監(jiān)控政策？又采取了哪些措施來防范惡意軟件和網(wǎng)絡(luò)釣魚？一組數(shù)據(jù)——2012年，全球財(cái)富1000強(qiáng)企業(yè)中將有80%的使用云計(jì)算服務(wù)；到2015年，使用云計(jì)算的企業(yè)的比率有望提高到95%?！?013年，全球云計(jì)算