Platform云計(jì)算技術(shù)和產(chǎn)品介紹Dr.FuboZhangCTOofA/P2024/3/132Agenda關(guān)于PlatformCluster,Grid，CloudPlatformISF介紹用戶案例2024/3/133關(guān)于PlatformComputingPlatformComputingIndustrialMfgOil&Gas2,000全球用戶年的利潤增長員工分布在15個(gè)地方175001在HPC和網(wǎng)格處于領(lǐng)先地位5,000,000處理器管理?PlatformComputingInc.2003-Proprietary&Confidential4關(guān)于云計(jì)算的定義ReuvenCohen：云計(jì)算最簡單的解釋就是將其描述為“以互聯(lián)網(wǎng)為中心的軟件”。DouglasGourlay：云計(jì)算指的是一個(gè)大的宏圖，根本上說，就是讓用戶透過Internet訪問技術(shù)效勞，現(xiàn)在，我每次登陸Facebook或搜索航班，事實(shí)上都是在使用云計(jì)算。DamonEdwards：云計(jì)算還有很多令人費(fèi)解的東西，然而不必如此復(fù)雜，只有三種效勞是基于“云”的，SaaS，PaaS和云計(jì)算平臺(tái)。KevinHartig(SUN):云是一個(gè)龐大的資源池，你按需購置；云是虛擬化的；云可以象自來水，電，煤氣那樣計(jì)費(fèi)JanPritzker:云計(jì)算是用戶友好的網(wǎng)格計(jì)算。AaronRicadela:當(dāng)我們向不懂計(jì)算機(jī)技術(shù)的人提供虛擬技術(shù)的時(shí)候，我們希望虛擬或隱藏的是其復(fù)雜性。絕大多數(shù)人希望同應(yīng)用或效勞，而不是軟件打交道。對(duì)于云計(jì)算，我們希望軟件本身被虛擬或躲藏在系統(tǒng)或?qū)I(yè)人員的背后，或者說“云”的背后IrvingWladawskyBerger:在我看來，云計(jì)算就是將以前那些需要大量軟硬件投資以及專業(yè)技術(shù)能力的應(yīng)用，以基于Web效勞的方式提供給用戶。?PlatformComputingInc.2003-Proprietary&Confidential5IT開展的最終目標(biāo)我們需要的是一種管道資源

--UtilityComputing

我們需要儀表和賬單

–Ondemand需要傳遞手段

–Service需要一種實(shí)現(xiàn)機(jī)制--Private/Public Cloud?PlatformComputingInc.2003-Proprietary&Confidential620%IT資源無序管理的利用率低下IT為企業(yè)出效益更明顯80%20%投資/效能硬件利用率時(shí)間部門A部門B部門C工作站CAD軟件硬件利用率<35%軟件利用率<17%工作站/效勞器CAE軟件工作站/效勞器其他軟件軟件利用率工程師工作效率?PlatformComputingInc.2003-Proprietary&Confidential7電力模式IT的運(yùn)維將是個(gè)三贏的局面降低生產(chǎn)廠商進(jìn)入市場的門檻催生了運(yùn)營商的市場最終用戶是最大的受益者IT的運(yùn)行模式需要改變生產(chǎn)商運(yùn)營商用戶云計(jì)算平臺(tái)?PlatformComputingInc.2003-Proprietary&Confidential8企業(yè)將IT資源置于集中調(diào)度管理企業(yè)購置計(jì)算中心用戶私有云〔privateCloud)企業(yè)可以統(tǒng)一購置，或?qū)⒎植假Y源邏輯上集中計(jì)算中心通過效勞將資源提供給用戶用戶通過登陸系統(tǒng)，獲取資源。IT為企業(yè)出效益更明顯80%20%20%投資/效能投資效能時(shí)間2024/3/139云計(jì)算實(shí)現(xiàn)的3條路徑TimeScopeofsharing200320152009Client/ServerSilosWorkgroup/LOBVMCluster同構(gòu)服務(wù)器的整合有限的應(yīng)用基于VM的管理功能網(wǎng)格靜態(tài)資源、動(dòng)態(tài)調(diào)度基于策略的調(diào)度EnterprisePublic&PrivateCloud910WhatdoIbelieve?–MSonPCwillbegoneESXVirtualMachineVirtualMachineVirtualMachineVirtualMachineVirtualMachineVirtualMachine物理機(jī)PCcloudUser

移動(dòng)上網(wǎng)–3G上網(wǎng)機(jī)Internet接入上網(wǎng)WorkstationVIP接入10虛擬機(jī)UserUser11WhatdoIbelieve?–BiggestOpp.11PCcloude上網(wǎng)筆記本等終端設(shè)備臺(tái)式電腦、筆記本將會(huì)被淘汰虛擬PC效勞運(yùn)營商將會(huì)替代MS和googleDataBank解決數(shù)據(jù)、信息平安的最終解決方案衍生許多種數(shù)據(jù)效勞，比方醫(yī)療健康，個(gè)人企業(yè)信用征詢，個(gè)人數(shù)據(jù)銀行ManySPsPCSPStorageSPGameSPManySAASSPsManyotherSPs123個(gè)層次的云計(jì)算效勞2024/3/1312Eachlevelprovidesahigherlevelofserviceabstraction&mayuselowerlevel(s)服務(wù)器，網(wǎng)絡(luò)，存儲(chǔ)按需分配e.g.,AmazonEC2,S3IaaS(InfrastructureasaService，基礎(chǔ)架構(gòu)即服務(wù))APIsfordevelopingnewCloudappse.g.,GoogleAppWebPaaS(PlatformasaService，平臺(tái)即服務(wù))應(yīng)用軟件對(duì)最終用戶按需分配e.g.,SSaaS(SoftwareasaService，軟件即服務(wù))2024/3/1313數(shù)據(jù)中心體系很復(fù)雜，系統(tǒng)的維護(hù)和管理難度大IT本錢高，資源占用多，配置峰值資源需求

=浪費(fèi)資源系統(tǒng)穩(wěn)定性、可靠性低。人工效勞為主，高本錢、低滿意度IT傳統(tǒng)模式不能適應(yīng)業(yè)務(wù)部署速度的需求〔至少2個(gè)月〕地理上分布的用戶根據(jù)應(yīng)用靜態(tài)分配IT資源SupplyandDemandNotAlignedWebeCommerceIntranetERPCRMBIDev/QAEmail今天IDC數(shù)據(jù)中心的挑戰(zhàn)2024/3/1314云計(jì)算〔虛擬化〕帶來的好處資源虛擬化，從而實(shí)現(xiàn)全局共享

節(jié)省投資SOA框架使得IT能對(duì)業(yè)務(wù)需求提供快速部署，時(shí)間從原來的幾個(gè)月縮短到半天

提高了業(yè)務(wù)支撐能力一體化管理打破了原來IT煙囪式業(yè)務(wù)系統(tǒng)管理，使得系統(tǒng)維護(hù)人員的效率大大提高運(yùn)維效率提高消除單點(diǎn)故障造成的穩(wěn)定、可靠性問題提高系統(tǒng)穩(wěn)定性和可靠性幫助IT投資風(fēng)險(xiǎn)和決策SmartIT節(jié)能減排綠色I(xiàn)T2024/3/1315實(shí)現(xiàn)云計(jì)算〔虛擬化〕的困難沒有成熟的產(chǎn)品和方案讓運(yùn)營商有直觀的理解。各個(gè)廠商都在推、強(qiáng)調(diào)自己的云計(jì)算概念和產(chǎn)品，像盲人摸象，無法讓用戶有個(gè)全局的認(rèn)識(shí)?，F(xiàn)有IT系統(tǒng)的改動(dòng)本錢和風(fēng)險(xiǎn)傳統(tǒng)業(yè)務(wù)系統(tǒng)虛擬化改造少有成功案例可以借鑒組織管理和人們的認(rèn)識(shí)需要提高2024/3/1316Platform在實(shí)現(xiàn)云計(jì)算方面的優(yōu)勢Platform已經(jīng)有了自己的云計(jì)算產(chǎn)品ISF--IAASPlatform的云計(jì)算產(chǎn)品是建立在許多用戶的需求上的，如JPMorgen,CityBank,Amazon,Alatum我們幫助用戶實(shí)現(xiàn)小步快跑的策略，降低IT系統(tǒng)的改動(dòng)本錢和風(fēng)險(xiǎn)我們本地有近200名研發(fā)團(tuán)隊(duì)來協(xié)助用戶的業(yè)務(wù)系統(tǒng)虛擬化改造Platform已有幾個(gè)云計(jì)算成功案例Platform可提供業(yè)務(wù)培訓(xùn)和成功用戶案例考察2024/3/13172024/3/1317PlatformComputing的產(chǎn)品ClustersGridsCloudsPlatformComputingPlatformClusterManagerPlatformMPIPlatformLSFPlatformSymphonyPlatformISF2024/3/1318PlatformISF–產(chǎn)品商業(yè)模式內(nèi)部業(yè)務(wù)部門,

第三方服務(wù)提供商(SP),

ApplicationOwnerInternalAppUser云計(jì)算應(yīng)用應(yīng)用研發(fā)人員Request&useresourcesServiceManager

(ITIL)Firewall共享根底設(shè)施效勞效勞內(nèi)容Webserver,Oracle,Grid…UserCloudAdminBusinessManagerSaaSInfrastructureOperationsExternalAppUserContractsign-

up&resourceplanning共享資源池ISFIaaS&PaaS2024/3/13192024/3/1319ResourceIntegrationIaaS云計(jì)算的內(nèi)容ApplicationWorkloadsAllocationEngineServiceDeliveryServersStorageNetwork生成一個(gè)共享的物理資源池資源的提供和消費(fèi)間的匹配效勞的生成訪問,獲取,記賬VMManagersProvisioningTools應(yīng)用和負(fù)載的集成PlatformISF2024/3/1320在不同的應(yīng)用部門共享物理資源

HPCClustersLSF,Symphony,3rdPartyTest&DevJ2EE/AnalyticsDEMANDSUPPLYDynamicallymatchsupply

&demandPrioritizeworkloadFlexibleinfrastructureSiloSiloSiloPlatformISFResource-awareWorkload-aware21云計(jì)算的動(dòng)態(tài)調(diào)度策略CitrixXenServerClusterVMwareClusterBVMwareClusterAWebLogicClusterSymphonyClusterGridServerClusterVMwareOfferingAVMwareOfferingBCitrixOfferingWebLogicOfferingSymphonyOfferingGridServerOffering共享效勞器池22PlatformISF產(chǎn)品瀏覽—資源整合Manual資源分配引擎資源預(yù)約和按需分配的調(diào)度策略基于資源使用情況的分配策略資源使用規(guī)劃效勞的交付提供效勞效勞合同管理自助的效勞門戶和開發(fā)接口(API)統(tǒng)計(jì)分析報(bào)表計(jì)費(fèi)系統(tǒng)PlatformISF資源整合虛擬化系統(tǒng)管理插件物理機(jī)部署工具的插件系統(tǒng)管理插件不同類型的應(yīng)用程序集成HPCJ2EEothersTest/Dev整合物理機(jī)和虛擬機(jī)計(jì)算環(huán)境，創(chuàng)立一個(gè)共享的計(jì)算架構(gòu)。根據(jù)系統(tǒng)當(dāng)前負(fù)載、系統(tǒng)資源的使用情況，有序地運(yùn)行應(yīng)用程序。23效勞器資源清單列出所有物理機(jī)、不同類型的虛擬機(jī)24應(yīng)用程序系統(tǒng)映像清單支持對(duì)應(yīng)用軟件和其運(yùn)行操作系統(tǒng)建立映像，由此建立標(biāo)準(zhǔn)的運(yùn)行模板提升現(xiàn)有的映像管理25集中管理監(jiān)控日志管理、事件管理26PlatformISF產(chǎn)品瀏覽—資源分配引擎Manual資源分配引擎資源預(yù)約和按需分配的調(diào)度策略基于資源使用情況的分配策略資源使用規(guī)劃效勞的交付提供效勞效勞合同管理自助的效勞門戶和開發(fā)接口(API)統(tǒng)計(jì)分析報(bào)表計(jì)費(fèi)系統(tǒng)PlatformISF資源整合虛擬化系統(tǒng)管理插件物理機(jī)部署工具的插件系統(tǒng)管理插件不同類型的應(yīng)用程序集成HPCJ2EEothersTest/Dev整合物理機(jī)和虛擬機(jī)計(jì)算環(huán)境，創(chuàng)立一個(gè)共享的計(jì)算架構(gòu)。根據(jù)系統(tǒng)當(dāng)前負(fù)載、系統(tǒng)資源的使用情況，有序地運(yùn)行應(yīng)用程序。272024/3/1327預(yù)約和按需方式的資源分配按需分配按時(shí)間順序響應(yīng)用戶請(qǐng)求針對(duì)非關(guān)鍵業(yè)務(wù)的請(qǐng)求，可以按每次使用付費(fèi)的模式分配資源預(yù)約針對(duì)關(guān)鍵業(yè)務(wù)的請(qǐng)求，可以將所需的資源預(yù)約，防止被其他請(qǐng)求占用既減少服務(wù)器的投資，又保證關(guān)鍵業(yè)務(wù)所需的計(jì)算能力MonthsMonths28基于資源可用狀態(tài)〔Resource-Aware〕的分配策略Packing（填滿）應(yīng)用程序在盡量少的物理服務(wù)器上運(yùn)行每個(gè)被使用的服務(wù)器利用率最大化，減少資源碎片，減少能源消耗。Striping（分散）應(yīng)用程序分散在盡可能多的物理服務(wù)器上運(yùn)行減少機(jī)器故障帶來的影響，提高應(yīng)用程序的運(yùn)行效率Load-Aware（基于負(fù)載）新的應(yīng)用程序總是運(yùn)行在負(fù)載最輕的物理服務(wù)器上獲得更高的應(yīng)用程序運(yùn)行效率HA-Aware（基于高可靠性配置）將支持高可靠性（HA）的服務(wù)器資源分配給關(guān)鍵業(yè)務(wù)提供更高的資源可用性Energy-Aware（節(jié)能）根據(jù)節(jié)能指數(shù)和數(shù)據(jù)中心熱點(diǎn)運(yùn)行應(yīng)用程序減少能源消耗Affinity-Aware（基于關(guān)聯(lián)程度）將任務(wù)分配到與關(guān)鍵資源關(guān)聯(lián)度最高的服務(wù)器上，例如將任務(wù)分配到與存儲(chǔ)系統(tǒng)直連的服務(wù)器上保證應(yīng)用程序運(yùn)行效率ServerModel-Aware（基于服務(wù)器類型）根據(jù)服務(wù)器類型分配資源盡可能利用性能好的、昂貴的資源，是投資回報(bào)最大化Topology-Aware（基于網(wǎng)絡(luò)拓?fù)洌┍M量使用連接到同一個(gè)交換機(jī)、背板、刀片中心的服務(wù)器運(yùn)行用戶任務(wù)提高應(yīng)用程序運(yùn)行效率1234444ContractAContractBHAServers$0.15/hour$2/

hour$1/

hour29Packing〔填滿〕資源分配策略AppAVMAppAVMAppAVMAppBVMAppBVMAppBVMAppCVMAppCVMAppBVMAppAVMAppDVMAppDVMAppDVMAppEVMAppAVMAppAVMAppCVM1234444BottomLeftBottomLeft每個(gè)被使用的效勞器利用率最大化，減少資源碎片節(jié)能–根據(jù)需求動(dòng)態(tài)啟動(dòng)和關(guān)閉效勞器Bottom-LeftDecreasingBin-PackingHeuristic30Striping〔分散〕資源分配策略AppBVMAppBVMAppCVMAppCVMAppAVMAppAVMAppEVMAppCVMAppAVM將應(yīng)用程序或虛擬機(jī)啟動(dòng)在使用最少的物理效勞器上。每臺(tái)物理效勞器運(yùn)行的應(yīng)用程序或虛擬機(jī)最小化降低物理效勞器故障的影響提高應(yīng)用程序、虛擬機(jī)運(yùn)行效率31TopologyAware(基于網(wǎng)絡(luò)拓?fù)洹车姆峙洳呗詸C(jī)架二機(jī)架一刀片中心一刀片中心二刀片中心三刀片中心四可用的節(jié)點(diǎn)被占用的節(jié)點(diǎn)盡量保證為應(yīng)用程序分配的效勞器資源之間的網(wǎng)絡(luò)路徑最小僅在萬不得已的情況下才跨刀片中心、機(jī)架、交換機(jī)分配效勞器資源提高應(yīng)用程序運(yùn)行效率32TopologyAware(基于網(wǎng)絡(luò)拓?fù)洹车姆峙洳呗詸C(jī)架二機(jī)架一刀片中心一刀片中心二刀片中心三刀片中心四可用的節(jié)點(diǎn)被占用的節(jié)點(diǎn)應(yīng)用A32CPUs

應(yīng)用B96CPUs盡量保證為應(yīng)用程序分配的效勞器資源之間的網(wǎng)絡(luò)路徑最小僅在萬不得已的情況下才跨刀片中心、機(jī)架、交換機(jī)分配效勞器資源提高應(yīng)用程序運(yùn)行效率33Affinity-based(基于關(guān)聯(lián)程度)分配策略將任務(wù)分配到與關(guān)鍵資源關(guān)聯(lián)度最高的效勞器上，例如將任務(wù)分配到與存儲(chǔ)系統(tǒng)直連的效勞器上保證應(yīng)用程序運(yùn)行效率應(yīng)用A應(yīng)用B342024/3/1334節(jié)能優(yōu)化分配策略實(shí)現(xiàn)“綠色”策略:計(jì)算機(jī)設(shè)備傳感器任務(wù)分發(fā)EngineUPS需求,合同,資源供給…–R“….sort[EEindex]…”

=>通過上述