1、云計(jì)算實(shí)際案例outline 案例一：Amazon Web Service 案例二： Yahoo! 案例三： eBay 案例四： Baidu 案例五： IBM 案例六： GoogleAmazon Web Service AWS核心服務(wù) 計(jì)算服務(wù) 存儲(chǔ)服務(wù) 數(shù)據(jù)庫(kù)服務(wù) 消息傳送服務(wù)AWS-計(jì)算服務(wù) Amazon Elastic Computing Cloud (EC2) 要通過(guò)虛擬化技術(shù)向用戶提供計(jì)算資源 用戶可以根據(jù)自己的需求動(dòng)態(tài)地申請(qǐng)或停止資源的使用 Amazon Elastic MapReduce 通過(guò)在Amazon EC2和Amazon S3上構(gòu)建Hadoop框架而實(shí)現(xiàn)AWS-存儲(chǔ)服務(wù)

2、Amazon Simple Storage Service（S3） 存儲(chǔ)容量是可以動(dòng)態(tài)擴(kuò)展 在AWS云上的其他服務(wù)也可以直接訪問(wèn)S3上的數(shù)據(jù)AWS-數(shù)據(jù)庫(kù)服務(wù) Amazon SimpleDB 是基于S3和EC2向用戶提供輕量級(jí)的數(shù)據(jù)存儲(chǔ)和查詢服務(wù) Amazon Relational Database Service(RDS) 用戶通過(guò)RDS可以使用MySQL所具有的功能 還支持Oracle 11g的功能AWS-消息傳送服務(wù) Amazon Simple Queue Service(SQS) 提供計(jì)算機(jī)之間傳遞和存儲(chǔ)消息服務(wù) Amazon Simple Notification Service(S

3、NS) 在云中建立、操作和發(fā)送通知的Web服務(wù) Amazon Simple Email Service(SES) 提供高擴(kuò)展的大量事務(wù)性郵件發(fā)送服務(wù)Amazon Web Service AWS客戶廣泛，其中包括著名的互聯(lián)網(wǎng)公司和創(chuàng)業(yè)型公司 2010年，AWS部門的收入已達(dá)5億美元，已經(jīng)成為Amazon收入的重要組成部分Yahoo！ Yahoo!云計(jì)算平臺(tái)上主要有三大利器 Hadoop Sherpa MObStorHadoop Yahoo!將Hadoop應(yīng)用于自己的各項(xiàng)業(yè)務(wù)和產(chǎn)品中 數(shù)據(jù)分析、內(nèi)容優(yōu)化、反垃圾郵件系統(tǒng)、廣告的優(yōu)化選擇、大數(shù)據(jù)處理、用戶興趣預(yù)測(cè)、搜索排名、廣告定位等 如：實(shí)時(shí)服務(wù)系

4、統(tǒng)從數(shù)據(jù)庫(kù)中讀取用戶到興趣的映射，Hadoop集群則基于最新數(shù)據(jù)重新排列內(nèi)容并更新頁(yè)面。Sherpa Sherpa Yahoo!的分布式數(shù)據(jù)存儲(chǔ)和服務(wù)平臺(tái) 主要針對(duì)的是結(jié)構(gòu)化的記錄型數(shù)據(jù)。 Sherpa平臺(tái)上最關(guān)鍵的是PNUTS PNUTS 大規(guī)模并行處理的分布式數(shù)據(jù)庫(kù)系統(tǒng) 放棄了傳統(tǒng)關(guān)系型數(shù)據(jù)庫(kù)強(qiáng)一致性的要求 由Storage Units、Router、Tablet Controller和Message Broker四部分組成MObStore MObStor 主要用來(lái)存儲(chǔ)非結(jié)構(gòu)化的二進(jìn)制大文件 對(duì)數(shù)據(jù)提供可靠、安全存儲(chǔ)的同時(shí)還能向用戶提供快速的響應(yīng) 體系結(jié)構(gòu)分為三層，分別為 對(duì)象存儲(chǔ)層（Ob

5、ject Store Layer） 本地對(duì)象管理層（Local Object Management Layer） 全局對(duì)象儲(chǔ)存層（Global Object Management Layer）Yahoo！ Yahoo!一直推動(dòng)著Hadoop的發(fā)展 Hadoop中國(guó)云計(jì)算大會(huì)也受到許多人的關(guān)注eBay 基于開(kāi)源云計(jì)算框架Hadoop建立了自己的集群Athena 開(kāi)源云平臺(tái)項(xiàng)目TurmericAthena 核心層 包括Hadoop運(yùn)行時(shí)環(huán)境、通用工具和HDFS MapReduce層 為開(kāi)發(fā)和執(zhí)行任務(wù)提供API和控件 數(shù)據(jù)獲取層 數(shù)據(jù)獲取層的主要框架是HBase、Pig和Hive 工具、加載庫(kù)層 主

6、要的加載庫(kù)有：統(tǒng)計(jì)庫(kù)（R）、機(jī)器學(xué)習(xí)庫(kù)（Mahout）、數(shù)學(xué)相關(guān)庫(kù)（Hama）和eBay自己開(kāi)發(fā)的解析網(wǎng)絡(luò)日志的庫(kù)（Mobius） 監(jiān)視和警告層 Ganglia是分布式集群的監(jiān)視系統(tǒng)，Nagios則用來(lái)警告關(guān)鍵事件如服務(wù)器不可達(dá)、硬盤已滿等。Turmeric 面向服務(wù)構(gòu)架的綜合平臺(tái)，用戶可以在上面開(kāi)發(fā)、部署、管理和監(jiān)控服務(wù) 核心運(yùn)行庫(kù) 基于流水線架構(gòu)，主要用來(lái)運(yùn)行服務(wù)和客戶端 開(kāi)發(fā)工具 提供Eclipse插件來(lái)幫助創(chuàng)建服務(wù)和客戶端 監(jiān)控器 該監(jiān)控器包含多個(gè)組件：收集客戶端和服務(wù)端信息的運(yùn)行收集組件、數(shù)據(jù)配置組件、監(jiān)控節(jié)點(diǎn)信息的服務(wù)監(jiān)控組件以及方便用戶查看的控制臺(tái)組件Turmeric 安全服務(wù)

7、提供平臺(tái)上的安全服務(wù)（如驗(yàn)證、授權(quán)、組服務(wù)等）與策略服務(wù)交互，其中策略遵從XACML（可擴(kuò)展的訪問(wèn)控制標(biāo)記語(yǔ)言）結(jié)構(gòu)和語(yǔ)法。 策略管理控制臺(tái) 管理策略的定制 倉(cāng)庫(kù)服務(wù) 這是端到端平臺(tái)上服務(wù)注冊(cè)、附件管理功能的抽象，具體的功能依賴于下層的倉(cāng)庫(kù)產(chǎn)品 WSDL聲明服務(wù) 通過(guò)這項(xiàng)功能用戶可以定義服務(wù)的WSDL接口eBay eBay使用云計(jì)算通過(guò)構(gòu)建自己的集群系統(tǒng)來(lái)處理大規(guī)模的商品數(shù)據(jù)和用戶需求， 面對(duì)數(shù)據(jù)的增長(zhǎng)，云計(jì)算成為互聯(lián)網(wǎng)公司的首選百度 Hadoop的應(yīng)用 框計(jì)算Hadoop在百度的應(yīng)用 在百度，Hadoop主要應(yīng)用于以下幾個(gè)方面： 日志的存儲(chǔ)和統(tǒng)計(jì) 網(wǎng)頁(yè)數(shù)據(jù)的分析和挖掘 商業(yè)分析，如用戶的行為

8、、廣告關(guān)注度 在線數(shù)據(jù)的反饋，及時(shí)得到在線廣告的點(diǎn)擊情況 用戶網(wǎng)頁(yè)的聚類，分析用戶的推薦度及用戶之間的關(guān)聯(lián)度框計(jì)算需求分析 基于互聯(lián)網(wǎng)的一站式服務(wù)服務(wù)集成百度 框計(jì)算確定用戶需求后會(huì)選擇哪個(gè)服務(wù)提供者為用戶提供服務(wù) 百度的選擇甚至影響一些服務(wù)提供商的發(fā)展 云計(jì)算帶來(lái)的影響不僅限于技術(shù)，任何互聯(lián)網(wǎng)公司都不能置身事外。IBM 云計(jì)算解決方案 云計(jì)算產(chǎn)品云計(jì)算解決方案 “藍(lán)色洞察力”決策分析云系統(tǒng) 處理全球小型交易等業(yè)務(wù) LotusLIve 使得公司內(nèi)員工及合作伙伴協(xié)作高效化 桌面的集中虛擬化 提高了控制管理的安全性及維護(hù)的方便性云計(jì)算解決方案 存儲(chǔ)云 實(shí)現(xiàn)虛擬化儲(chǔ)存，將數(shù)據(jù)儲(chǔ)存在一起，有效地節(jié)約了

9、空間 數(shù)據(jù)中心整合 里面的應(yīng)用程序也隨之部署在云計(jì)算上，實(shí)現(xiàn)資源整合 生產(chǎn)研發(fā) 如在芯片設(shè)計(jì)時(shí)需要昂貴的軟件和巨大的計(jì)算存儲(chǔ)資源，采用設(shè)計(jì)制造云后既減少了設(shè)計(jì)成本提高資源利用，同時(shí)也保證了知識(shí)產(chǎn)權(quán)的安全。云計(jì)算產(chǎn)品 IBM在虛擬化和云計(jì)算方面擁有眾多產(chǎn)品，設(shè)計(jì)基礎(chǔ)設(shè)施層、平臺(tái)層和應(yīng)用層 IBM Ensembles 將計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)等物理資源虛擬成基礎(chǔ)設(shè)施資源池，隱藏了內(nèi)部實(shí)現(xiàn)細(xì)節(jié)向上層提供資源訪問(wèn)和管理的接口 IBM TSAM 提供應(yīng)用服務(wù)的管理平臺(tái)，包括服務(wù)的設(shè)計(jì)、部署和運(yùn)行管理整個(gè)階段，實(shí)現(xiàn)了硬件到操作系統(tǒng)、中間件的整體管理自動(dòng)化 IBM SmartCloud 用于數(shù)據(jù)中心的云服務(wù)軟件，

10、在向公司用戶提供云存儲(chǔ)的同時(shí)也提供數(shù)據(jù)分析、銷售管理、測(cè)試工具等服務(wù)IBM IBM使用云計(jì)算整合自身的全球資源提供優(yōu)質(zhì)服務(wù) 基于對(duì)云計(jì)算的認(rèn)識(shí)，IBM提供公有云、私有云和混合云多個(gè)選項(xiàng)，減少用戶對(duì)隱私、安全的顧慮來(lái)吸引用戶Google 云計(jì)算技術(shù) 云計(jì)算產(chǎn)品Google云計(jì)算技術(shù)Google在云計(jì)算擁有著名的GFS、Bigtable、MapReduce三大技術(shù)GFS 針對(duì)數(shù)據(jù)密集型應(yīng)用的分布式文件系統(tǒng) 運(yùn)行在廉價(jià)硬件環(huán)境上并擁有較高的容錯(cuò)性Bigtable 管理海量結(jié)構(gòu)化數(shù)據(jù)的分布式存儲(chǔ)系統(tǒng) 提供簡(jiǎn)單的數(shù)據(jù)模式動(dòng)態(tài)地控制數(shù)據(jù)部署 通過(guò)維護(hù)稀疏的多維排序映射表來(lái)檢索數(shù)據(jù)MapReduce編程模型

11、 利用輸入鍵/值 對(duì)集輸出新的鍵/值對(duì)集 將并行計(jì)算細(xì)節(jié)隱藏 用戶只需實(shí)現(xiàn)map函數(shù)和reduce函數(shù)即可Google云計(jì)算產(chǎn)品Googl e AppEngine 一種架構(gòu)Web應(yīng)用程序的平臺(tái) 用戶可以利用提供的SDK開(kāi)發(fā)Web應(yīng)用程序，并將其上傳到平臺(tái)上 Google負(fù)責(zé)應(yīng)用的管理和維護(hù) 平臺(tái)還提供網(wǎng)頁(yè)抓取、圖像操作、郵件等多種服務(wù)云端應(yīng)用程序 Google Docs 基于Web的文檔處理程序 支持在線編輯和多人協(xié)作 Google Cloud Connect 可以直接將本地Microsoft office和云端的Google Docs連結(jié)起來(lái) 文檔在本地保存的同時(shí)也保存在云中 并通過(guò)鏈接向別人分享自己的文檔Google Go