Platform-云計算技術(shù)和產(chǎn)品(IDC)

Platform云計算技術(shù)和產(chǎn)品介紹Dr.FuboZhangCTOofA/P2024/3/132Agenda關(guān)于PlatformCluster,Grid，CloudPlatformISF介紹用戶案例2024/3/133關(guān)于PlatformComputingPlatformComputingIndustrialMfgOil&Gas2,000全球用戶年的利潤增長員工分布在15個地方175001在HPC和網(wǎng)格處于領(lǐng)先地位5,000,000處理器管理?PlatformComputingInc.2003-Proprietary&Confidential4關(guān)于云計算的定義ReuvenCohen：云計算最簡單的解釋就是將其描述為“以互聯(lián)網(wǎng)為中心的軟件”。DouglasGourlay：云計算指的是一個大的宏圖，根本上說，就是讓用戶透過Internet訪問技術(shù)效勞，現(xiàn)在，我每次登陸Facebook或搜索航班，事實上都是在使用云計算。DamonEdwards：云計算還有很多令人費(fèi)解的東西，然而不必如此復(fù)雜，只有三種效勞是基于“云”的，SaaS，PaaS和云計算平臺。KevinHartig(SUN):云是一個龐大的資源池，你按需購置；云是虛擬化的；云可以象自來水，電，煤氣那樣計費(fèi)JanPritzker:云計算是用戶友好的網(wǎng)格計算。AaronRicadela:當(dāng)我們向不懂計算機(jī)技術(shù)的人提供虛擬技術(shù)的時候，我們希望虛擬或隱藏的是其復(fù)雜性。絕大多數(shù)人希望同應(yīng)用或效勞，而不是軟件打交道。對于云計算，我們希望軟件本身被虛擬或躲藏在系統(tǒng)或?qū)I(yè)人員的背后，或者說“云”的背后IrvingWladawskyBerger:在我看來，云計算就是將以前那些需要大量軟硬件投資以及專業(yè)技術(shù)能力的應(yīng)用，以基于Web效勞的方式提供給用戶。?PlatformComputingInc.2003-Proprietary&Confidential5IT開展的最終目標(biāo)我們需要的是一種管道資源

--UtilityComputing

我們需要儀表和賬單

–Ondemand需要傳遞手段

–Service需要一種實現(xiàn)機(jī)制--Private/Public Cloud?PlatformComputingInc.2003-Proprietary&Confidential620%IT資源無序管理的利用率低下IT為企業(yè)出效益更明顯80%20%投資/效能硬件利用率時間部門A部門B部門C工作站CAD軟件硬件利用率<35%軟件利用率<17%工作站/效勞器CAE軟件工作站/效勞器其他軟件軟件利用率工程師工作效率?PlatformComputingInc.2003-Proprietary&Confidential7電力模式IT的運(yùn)維將是個三贏的局面降低生產(chǎn)廠商進(jìn)入市場的門檻催生了運(yùn)營商的市場最終用戶是最大的受益者IT的運(yùn)行模式需要改變生產(chǎn)商運(yùn)營商用戶云計算平臺?PlatformComputingInc.2003-Proprietary&Confidential8企業(yè)將IT資源置于集中調(diào)度管理企業(yè)購置計算中心用戶私有云〔privateCloud)企業(yè)可以統(tǒng)一購置，或?qū)⒎植假Y源邏輯上集中計算中心通過效勞將資源提供給用戶用戶通過登陸系統(tǒng)，獲取資源。IT為企業(yè)出效益更明顯80%20%20%投資/效能投資效能時間2024/3/139云計算實現(xiàn)的3條路徑TimeScopeofsharing200320152009Client/ServerSilosWorkgroup/LOBVMCluster同構(gòu)服務(wù)器的整合有限的應(yīng)用基于VM的管理功能網(wǎng)格靜態(tài)資源、動態(tài)調(diào)度基于策略的調(diào)度EnterprisePublic&PrivateCloud910WhatdoIbelieve?–MSonPCwillbegoneESXVirtualMachineVirtualMachineVirtualMachineVirtualMachineVirtualMachineVirtualMachine物理機(jī)PCcloudUser

移動上網(wǎng)–3G上網(wǎng)機(jī)Internet接入上網(wǎng)WorkstationVIP接入10虛擬機(jī)UserUser11WhatdoIbelieve?–BiggestOpp.11PCcloude上網(wǎng)筆記本等終端設(shè)備臺式電腦、筆記本將會被淘汰虛擬PC效勞運(yùn)營商將會替代MS和googleDataBank解決數(shù)據(jù)、信息平安的最終解決方案衍生許多種數(shù)據(jù)效勞，比方醫(yī)療健康，個人企業(yè)信用征詢，個人數(shù)據(jù)銀行ManySPsPCSPStorageSPGameSPManySAASSPsManyotherSPs123個層次的云計算效勞2024/3/1312Eachlevelprovidesahigherlevelofserviceabstraction&mayuselowerlevel(s)服務(wù)器，網(wǎng)絡(luò)，存儲按需分配e.g.,AmazonEC2,S3IaaS(InfrastructureasaService，基礎(chǔ)架構(gòu)即服務(wù))APIsfordevelopingnewCloudappse.g.,GoogleAppWebPaaS(PlatformasaService，平臺即服務(wù))應(yīng)用軟件對最終用戶按需分配e.g.,SSaaS(SoftwareasaService，軟件即服務(wù))2024/3/1313數(shù)據(jù)中心體系很復(fù)雜，系統(tǒng)的維護(hù)和管理難度大IT本錢高，資源占用多，配置峰值資源需求

=浪費(fèi)資源系統(tǒng)穩(wěn)定性、可靠性低。人工效勞為主，高本錢、低滿意度IT傳統(tǒng)模式不能適應(yīng)業(yè)務(wù)部署速度的需求〔至少2個月〕地理上分布的用戶根據(jù)應(yīng)用靜態(tài)分配IT資源SupplyandDemandNotAlignedWebeCommerceIntranetERPCRMBIDev/QAEmail今天IDC數(shù)據(jù)中心的挑戰(zhàn)2024/3/1314云計算〔虛擬化〕帶來的好處資源虛擬化，從而實現(xiàn)全局共享

節(jié)省投資SOA框架使得IT能對業(yè)務(wù)需求提供快速部署，時間從原來的幾個月縮短到半天

提高了業(yè)務(wù)支撐能力一體化管理打破了原來IT煙囪式業(yè)務(wù)系統(tǒng)管理，使得系統(tǒng)維護(hù)人員的效率大大提高運(yùn)維效率提高消除單點(diǎn)故障造成的穩(wěn)定、可靠性問題提高系統(tǒng)穩(wěn)定性和可靠性幫助IT投資風(fēng)險和決策SmartIT節(jié)能減排綠色I(xiàn)T2024/3/1315實現(xiàn)云計算〔虛擬化〕的困難沒有成熟的產(chǎn)品和方案讓運(yùn)營商有直觀的理解。各個廠商都在推、強(qiáng)調(diào)自己的云計算概念和產(chǎn)品，像盲人摸象，無法讓用戶有個全局的認(rèn)識?，F(xiàn)有IT系統(tǒng)的改動本錢和風(fēng)險傳統(tǒng)業(yè)務(wù)系統(tǒng)虛擬化改造少有成功案例可以借鑒組織管理和人們的認(rèn)識需要提高2024/3/1316Platform在實現(xiàn)云計算方面的優(yōu)勢Platform已經(jīng)有了自己的云計算產(chǎn)品ISF--IAASPlatform的云計算產(chǎn)品是建立在許多用戶的需求上的，如JPMorgen,CityBank,Amazon,Alatum我們幫助用戶實現(xiàn)小步快跑的策略，降低IT系統(tǒng)的改動本錢和風(fēng)險我們本地有近200名研發(fā)團(tuán)隊來協(xié)助用戶的業(yè)務(wù)系統(tǒng)虛擬化改造Platform已有幾個云計算成功案例Platform可提供業(yè)務(wù)培訓(xùn)和成功用戶案例考察2024/3/13172024/3/1317PlatformComputing的產(chǎn)品ClustersGridsCloudsPlatformComputingPlatformClusterManagerPlatformMPIPlatformLSFPlatformSymphonyPlatformISF2024/3/1318PlatformISF–產(chǎn)品商業(yè)模式內(nèi)部業(yè)務(wù)部門,

第三方服務(wù)提供商(SP),

ApplicationOwnerInternalAppUser云計算應(yīng)用應(yīng)用研發(fā)人員Request&useresourcesServiceManager

(ITIL)Firewall共享根底設(shè)施效勞效勞內(nèi)容Webserver,Oracle,Grid…UserCloudAdminBusinessManagerSaaSInfrastructureOperationsExternalAppUserContractsign-

up&resourceplanning共享資源池ISFIaaS&PaaS2024/3/13192024/3/1319ResourceIntegrationIaaS云計算的內(nèi)容ApplicationWorkloadsAllocationEngineServiceDeliveryServersStorageNetwork生成一個共享的物理資源池資源的提供和消費(fèi)間的匹配效勞的生成訪問,獲取,記賬VMManagersProvisioningTools應(yīng)用和負(fù)載的集成PlatformISF2024/3/1320在不同的應(yīng)用部門共享物理資源

HPCClustersLSF,Symphony,3rdPartyTest&DevJ2EE/AnalyticsDEMANDSUPPLYDynamicallymatchsupply

&demandPrioritizeworkloadFlexibleinfrastructureSiloSiloSiloPlatformISFResource-awareWorkload-aware21云計算的動態(tài)調(diào)度策略CitrixXenServerClusterVMwareClusterBVMwareClusterAWebLogicClusterSymphonyClusterGridServerClusterVMwareOfferingAVMwareOfferingBCitrixOfferingWebLogicOfferingSymphonyOfferingGridServerOffering共享效勞器池22PlatformISF產(chǎn)品瀏覽—資源整合Manual資源分配引擎資源預(yù)約和按需分配的調(diào)度策略基于資源使用情況的分配策略資源使用規(guī)劃效勞的交付提供效勞效勞合同管理自助的效勞門戶和開發(fā)接口(API)統(tǒng)計分析報表計費(fèi)系統(tǒng)PlatformISF資源整合虛擬化系統(tǒng)管理插件物理機(jī)部署工具的插件系統(tǒng)管理插件不同類型的應(yīng)用程序集成HPCJ2EEothersTest/Dev整合物理機(jī)和虛擬機(jī)計算環(huán)境，創(chuàng)立一個共享的計算架構(gòu)。根據(jù)系統(tǒng)當(dāng)前負(fù)載、系統(tǒng)資源的使用情況，有序地運(yùn)行應(yīng)用程序。23效勞器資源清單列出所有物理機(jī)、不同類型的虛擬機(jī)24應(yīng)用程序系統(tǒng)映像清單支持對應(yīng)用軟件和其運(yùn)行操作系統(tǒng)建立映像，由此建立標(biāo)準(zhǔn)的運(yùn)行模板提升現(xiàn)有的映像管理25集中管理監(jiān)控日志管理、事件管理26PlatformISF產(chǎn)品瀏覽—資源分配引擎Manual資源分配引擎資源預(yù)約和按需分配的調(diào)度策略基于資源使用情況的分配策略資源使用規(guī)劃效勞的交付提供效勞效勞合同管理自助的效勞門戶和開發(fā)接口(API)統(tǒng)計分析報表計費(fèi)系統(tǒng)PlatformISF資源整合虛擬化系統(tǒng)管理插件物理機(jī)部署工具的插件系統(tǒng)管理插件不同類型的應(yīng)用程序集成HPCJ2EEothersTest/Dev整合物理機(jī)和虛擬機(jī)計算環(huán)境，創(chuàng)立一個共享的計算架構(gòu)。根據(jù)系統(tǒng)當(dāng)前負(fù)載、系統(tǒng)資源的使用情況，有序地運(yùn)行應(yīng)用程序。272024/3/1327預(yù)約和按需方式的資源分配按需分配按時間順序響應(yīng)用戶請求針對非關(guān)鍵業(yè)務(wù)的請求，可以按每次使用付費(fèi)的模式分配資源預(yù)約針對關(guān)鍵業(yè)務(wù)的請求，可以將所需的資源預(yù)約，防止被其他請求占用既減少服務(wù)器的投資，又保證關(guān)鍵業(yè)務(wù)所需的計算能力MonthsMonths28基于資源可用狀態(tài)〔Resource-Aware〕的分配策略Packing（填滿）應(yīng)用程序在盡量少的物理服務(wù)器上運(yùn)行每個被使用的服務(wù)器利用率最大化，減少資源碎片，減少能源消耗。Striping（分散）應(yīng)用程序分散在盡可能多的物理服務(wù)器上運(yùn)行減少機(jī)器故障帶來的影響，提高應(yīng)用程序的運(yùn)行效率Load-Aware（基于負(fù)載）新的應(yīng)用程序總是運(yùn)行在負(fù)載最輕的物理服務(wù)器上獲得更高的應(yīng)用程序運(yùn)行效率HA-Aware（基于高可靠性配置）將支持高可靠性（HA）的服務(wù)器資源分配給關(guān)鍵業(yè)務(wù)提供更高的資源可用性Energy-Aware（節(jié)能）根據(jù)節(jié)能指數(shù)和數(shù)據(jù)中心熱點(diǎn)運(yùn)行應(yīng)用程序減少能源消耗Affinity-Aware（基于關(guān)聯(lián)程度）將任務(wù)分配到與關(guān)鍵資源關(guān)聯(lián)度最高的服務(wù)器上，例如將任務(wù)分配到與存儲系統(tǒng)直連的服務(wù)器上保證應(yīng)用程序運(yùn)行效率ServerModel-Aware（基于服務(wù)器類型）根據(jù)服務(wù)器類型分配資源盡可能利用性能好的、昂貴的資源，是投資回報最大化Topology-Aware（基于網(wǎng)絡(luò)拓?fù)洌┍M量使用連接到同一個交換機(jī)、背板、刀片中心的服務(wù)器運(yùn)行用戶任務(wù)提高應(yīng)用程序運(yùn)行效率1234444ContractAContractBHAServers$0.15/hour$2/

hour$1/

hour29Packing〔填滿〕資源分配策略AppAVMAppAVMAppAVMAppBVMAppBVMAppBVMAppCVMAppCVMAppBVMAppAVMAppDVMAppDVMAppDVMAppEVMAppAVMAppAVMAppCVM1234444BottomLeftBottomLeft每個被使用的效勞器利用率最大化，減少資源碎片節(jié)能–根據(jù)需求動態(tài)啟動和關(guān)閉效勞器Bottom-LeftDecreasingBin-PackingHeuristic30Striping〔分散〕資源分配策略AppBVMAppBVMAppCVMAppCVMAppAVMAppAVMAppEVMAppCVMAppAVM將應(yīng)用程序或虛擬機(jī)啟動在使用最少的物理效勞器上。每臺物理效勞器運(yùn)行的應(yīng)用程序或虛擬機(jī)最小化降低物理效勞器故障的影響提高應(yīng)用程序、虛擬機(jī)運(yùn)行效率31TopologyAware(基于網(wǎng)絡(luò)拓?fù)洹车姆峙洳呗詸C(jī)架二機(jī)架一刀片中心一刀片中心二刀片中心三刀片中心四可用的節(jié)點(diǎn)被占用的節(jié)點(diǎn)盡量保證為應(yīng)用程序分配的效勞器資源之間的網(wǎng)絡(luò)路徑最小僅在萬不得已的情況下才跨刀片中心、機(jī)架、交換機(jī)分配效勞器資源提高應(yīng)用程序運(yùn)行效率32TopologyAware(基于網(wǎng)絡(luò)拓?fù)洹车姆峙洳呗詸C(jī)架二機(jī)架一刀片中心一刀片中心二刀片中心三刀片中心四可用的節(jié)點(diǎn)被占用的節(jié)點(diǎn)應(yīng)用A32CPUs

應(yīng)用B96CPUs盡量保證為應(yīng)用程序分配的效勞器資源之間的網(wǎng)絡(luò)路徑最小僅在萬不得已的情況下才跨刀片中心、機(jī)架、交換機(jī)分配效勞器資源提高應(yīng)用程序運(yùn)行效率33Affinity-based(基于關(guān)聯(lián)程度)分配策略將任務(wù)分配到與關(guān)鍵資源關(guān)聯(lián)度最高的效勞器上，例如將任務(wù)分配到與存儲系統(tǒng)直連的效勞器上保證應(yīng)用程序運(yùn)行效率應(yīng)用A應(yīng)用B342024/3/1334節(jié)能優(yōu)化分配策略實現(xiàn)“綠色”策略:計算機(jī)設(shè)備傳感器任務(wù)分發(fā)EngineUPS需求,合同,資源供給…–R“….sort[EEindex]…”

=>通過上述