企業(yè)云平臺(tái)計(jì)算資源池規(guī)劃方案

1、企業(yè)云平臺(tái)計(jì)算資源池規(guī)劃方案容災(zāi)問(wèn)題當(dāng)前對(duì)容災(zāi)備份暫無(wú)考慮，數(shù)據(jù)可靠性和容災(zāi)能力較差資源利用問(wèn)題某些階段性應(yīng)用，在相當(dāng)長(zhǎng)時(shí)期內(nèi)或者永久不再需要，但是該資源不能被及時(shí)、方便的釋放或回收，以供新系統(tǒng)使用，造成空閑資源的浪費(fèi)安全問(wèn)題當(dāng)前對(duì)安全防護(hù)及隔離考慮較少，而系統(tǒng)安全性格外重要，必須嚴(yán)格遵守集團(tuán)對(duì)信息安全等級(jí)保護(hù)的要求；業(yè)務(wù)安全隔離也尤為重要自動(dòng)化及運(yùn)維問(wèn)題仍然存在很多手工配置的內(nèi)容和紙件辦公。隨著后續(xù)IT 資源規(guī)模不斷擴(kuò)大，服務(wù)模式轉(zhuǎn)型會(huì)使得業(yè)務(wù)需求更具多樣化，系統(tǒng)升級(jí)擴(kuò)容將更加頻繁，容易產(chǎn)生人為操作錯(cuò)誤的問(wèn)題，且不易維護(hù)信息中心一卡通員工報(bào)銷檔案管理統(tǒng)一支撐管理平臺(tái)測(cè)試系統(tǒng)系統(tǒng)仿真平臺(tái)大數(shù)據(jù)

2、平臺(tái)天氣預(yù)報(bào)平臺(tái)2信息化建設(shè)起步較早，但當(dāng)前并行存在多套具有各自架構(gòu)特點(diǎn)的平臺(tái)，孤島式建設(shè)導(dǎo)致資源不能重用，阻礙信息和業(yè)務(wù)的進(jìn)一步深度集成和共享。應(yīng)用系統(tǒng)現(xiàn)狀2.2.3目錄計(jì)算規(guī)劃計(jì)算資源池總體規(guī)劃計(jì)算虛擬化資源池規(guī)劃高性能計(jì)算資源池規(guī)劃計(jì)算資源池線路規(guī)劃3計(jì)算資源池建設(shè)目標(biāo)運(yùn)維成本節(jié)約業(yè)務(wù)管理簡(jiǎn)化硬件成本節(jié)約硬件虛擬化技術(shù)減少了設(shè)備的數(shù)量軟件成本節(jié)約降低軟件授權(quán)費(fèi)用，如Windows Server數(shù)據(jù)中心版按物理CPU授權(quán)。成本節(jié)約虛擬化整合及智能電源管理特性最多能節(jié)約90%的成本。管理成本節(jié)約更少的維護(hù)設(shè)備、集中的維護(hù)平臺(tái)、更少的維護(hù)人力。高可靠性保障虛擬化的HA能力和DRS、DRX能力保

3、障業(yè)務(wù)連續(xù)性運(yùn)行。靈活調(diào)度資源池化，能夠更加彈性、靈活地調(diào)度，按需滿足業(yè)務(wù)的需求?？蓴U(kuò)展性打破傳統(tǒng)的豎井架構(gòu)，易于資源的橫向和縱向擴(kuò)展。高效利用資源虛擬化，使資源實(shí)現(xiàn)了共享和復(fù)用，提高了資源利用率。自動(dòng)化交付通過(guò)云管理平臺(tái)可以實(shí)現(xiàn)IT資源的編排和自動(dòng)化交付。4適合虛擬化平臺(tái)的業(yè)務(wù)：業(yè)務(wù)對(duì)資源有快速部署、標(biāo)準(zhǔn)化（X86架構(gòu)）的需求；系統(tǒng)和應(yīng)用不依賴于特殊的、無(wú)法虛擬化的硬件；系統(tǒng)資源平均利用率較低；業(yè)務(wù)增長(zhǎng)快，導(dǎo)致平臺(tái)頻繁擴(kuò)容；需要用較低成本來(lái)提高系統(tǒng)可用性和可靠性；可以利用云計(jì)算的資源池共享來(lái)實(shí)現(xiàn)錯(cuò)峰填谷；測(cè)試業(yè)務(wù)；不適合虛擬化業(yè)務(wù)：應(yīng)用廠商明確表示不支持虛擬化，不建議虛擬化；應(yīng)用軟件廠商表示

4、不提供在虛擬化平臺(tái)上運(yùn)行的技術(shù)支撐；有特殊外設(shè)需求的應(yīng)用系統(tǒng)；非X86平臺(tái)系統(tǒng)，如小型機(jī)，暫緩虛擬化，如果可遷移到X86系統(tǒng)，則評(píng)估是否可采用高端X86服務(wù)器物理部署；系統(tǒng)本地I/O或網(wǎng)絡(luò)吞吐非常繁忙，會(huì)導(dǎo)致整個(gè)集群資源產(chǎn)生瓶頸，不建議虛擬化;業(yè)務(wù)系統(tǒng)的CPU或內(nèi)存資源需求量已達(dá)到單臺(tái)云節(jié)點(diǎn)（物理服務(wù)器）資源的80%，不建議采用虛擬化，建議采用物理機(jī)部署目前調(diào)研來(lái)看大部分的業(yè)務(wù)系統(tǒng)都是適合虛擬化的，并且目前正在進(jìn)行業(yè)務(wù)云化的工作；但大數(shù)據(jù)平臺(tái)等高性能計(jì)算、高IO的系統(tǒng)應(yīng)該部署在物理服務(wù)器上，以減少虛擬化平臺(tái)的資源爭(zhēng)用 。5業(yè)務(wù)系統(tǒng)是否適合虛擬化的評(píng)估標(biāo)準(zhǔn)6業(yè)務(wù)計(jì)算資源池規(guī)劃VM 1VM 2VM

5、 nFusionSphere統(tǒng)一資源池化Bare Metal裸金屬服務(wù)器華為兼容異構(gòu)虛擬化、容器、裸金屬、高性能計(jì)算的統(tǒng)一資源池，通過(guò)統(tǒng)一的云平臺(tái)，實(shí)現(xiàn)對(duì)各種異構(gòu)資源的統(tǒng)一整合管理，同時(shí)針對(duì)不同的業(yè)務(wù)需求，實(shí)現(xiàn)親和性的多資源池智能調(diào)度高性能計(jì)算高性能計(jì)算H3CVM 1VM 2VM nCASDocker1Docker2Docker n容器容器2.2.3目錄計(jì)算規(guī)劃計(jì)算資源池總體規(guī)劃計(jì)算虛擬化資源池規(guī)劃高性能計(jì)算資源池規(guī)劃計(jì)算資源池部署規(guī)劃7OpenStack創(chuàng)建的虛擬機(jī)默認(rèn)為KVMOpenStack對(duì)KVM支持特性最豐富OpenStack用戶幾乎全部采用KVMXEN屬于CLoudStack陣營(yíng)K

6、VM是Linux內(nèi)核的一部分，兼容性好、發(fā)展快技術(shù)構(gòu)架先進(jìn),天生支持硬件輔助虛擬化技術(shù)KVM性能完勝XEN安全性高于XENKVM具備更強(qiáng)大的生態(tài)圈,主流廠商轉(zhuǎn)投KVM陣營(yíng)KVM是OpenStack的最佳實(shí)現(xiàn)方案KVM是目前最優(yōu)秀的開(kāi)源虛擬化技術(shù)測(cè)試結(jié)論來(lái)源：2013年 Phoronix Haswell 性能評(píng)測(cè)，http:/major.io/2014/06/22/performance-benchmarks-kvm-vs-xen/8結(jié)合未來(lái)云規(guī)劃，虛擬化平臺(tái)應(yīng)該選擇KVM內(nèi)核架構(gòu)，并且兼容現(xiàn)有的虛擬化平臺(tái)虛計(jì)算虛擬化技術(shù)選型技術(shù)選型宿主機(jī)規(guī)劃功能集群規(guī)劃虛機(jī)模板物理服務(wù)器高可靠性（HA）資源動(dòng)

7、態(tài)調(diào)度（DRS）備份快照管理標(biāo)準(zhǔn)/分布式虛擬交換機(jī)兼容OpenStack開(kāi)放云平臺(tái)架構(gòu)、提供可定制化的北向REST API接口虛擬化內(nèi)核系統(tǒng)(Xen/KVM)云業(yè)務(wù)管理中心虛擬化管理平臺(tái)資源彈性伸縮（DRX）性能監(jiān)控網(wǎng)絡(luò)策略管理分布式融合存儲(chǔ)管理任務(wù)管理存儲(chǔ)適配器管理智能電源管理（DPM）虛擬機(jī)生命周期管理存儲(chǔ)（ Server &IP&FC）網(wǎng)絡(luò)（ToR&機(jī)箱）服務(wù)器（機(jī)架&刀片）虛擬數(shù)據(jù)中心自助服務(wù)門戶云業(yè)務(wù)電子流自動(dòng)化部署與交付云備份用戶管理用戶報(bào)表工單管理虛擬化軟件產(chǎn)品架構(gòu)9虛擬化平臺(tái)應(yīng)具備如下功能架構(gòu)，目前已經(jīng)建成計(jì)算資源池，但是在虛擬化的高可靠、資源動(dòng)態(tài)調(diào)度需要優(yōu)化，資源彈性伸縮和虛

8、機(jī)備份上有待建設(shè)虛計(jì)算虛擬化功能架構(gòu)規(guī)劃技術(shù)選型宿主機(jī)規(guī)劃功能集群規(guī)劃虛機(jī)模板物理服務(wù)器虛擬化管理平臺(tái)ActiveStandbyVIP心跳報(bào)文主管理節(jié)點(diǎn)備管理節(jié)點(diǎn)數(shù)據(jù)同步虛擬化集群1擴(kuò)展集群2主機(jī)池1虛擬化集群架構(gòu)設(shè)計(jì)：虛擬化管理平臺(tái)管理平臺(tái)應(yīng)部署雙機(jī)集群，支持高可用性；主機(jī)池同一個(gè)二層網(wǎng)絡(luò)的主機(jī)應(yīng)規(guī)劃在同一個(gè)主機(jī)池中；集群從主機(jī)池中選擇適當(dāng)數(shù)量的服務(wù)器（建議1420臺(tái)服務(wù)器），組成一個(gè)集群，如業(yè)務(wù)集群1 ，同一個(gè)集群具有HA的屬性。同一集群的主機(jī)應(yīng)該在同一個(gè)POD里面，因此建議4U服務(wù)器15臺(tái)組成一個(gè)集群，2U的服務(wù)器12臺(tái)或18臺(tái)組成集群；每個(gè)集群符合N+1原則，更具可靠性；同時(shí)避免只有2

9、臺(tái)物理機(jī)的資源池的相關(guān)可能潛在的問(wèn)題；集群內(nèi)節(jié)點(diǎn)數(shù)量或集群數(shù)量可在線擴(kuò)展;網(wǎng)絡(luò)從安全隔離、性能和可靠性角度，網(wǎng)絡(luò)可根據(jù)承載流量的不同，按功能劃分為業(yè)務(wù)、管理和存儲(chǔ)網(wǎng)絡(luò)，并獨(dú)立部署;存儲(chǔ)對(duì)物理層提供的存儲(chǔ)設(shè)備進(jìn)行統(tǒng)一的整合與池化，為虛擬機(jī)提供統(tǒng)一的存儲(chǔ)資源池，是高可用、資源彈性調(diào)度等特性的基礎(chǔ);建議每個(gè)LUN大小在1215T,但不能超過(guò)虛擬化平臺(tái)支持的最大值；共享存儲(chǔ)網(wǎng)絡(luò)計(jì)算節(jié)點(diǎn)虛擬機(jī)管理網(wǎng)存儲(chǔ)網(wǎng)業(yè)務(wù)網(wǎng)10虛計(jì)算虛擬化集群架構(gòu)規(guī)劃技術(shù)選型宿主機(jī)規(guī)劃功能集群規(guī)劃虛機(jī)模板物理服務(wù)器服務(wù)器類型服務(wù)器功能描述CPU配置標(biāo)準(zhǔn)內(nèi)存配置標(biāo)準(zhǔn)網(wǎng)絡(luò)配置標(biāo)準(zhǔn)硬盤(pán)宿主機(jī)建議采用2U或者4U的機(jī)架服務(wù)器虛擬化宿主機(jī)，通

10、過(guò)部署虛擬機(jī)的方式，承載應(yīng)用，多虛擬機(jī)共享計(jì)算、存儲(chǔ)和網(wǎng)絡(luò)資源支持Intel VT技術(shù)同集群內(nèi)服務(wù)器的CPU建議采用同一廠商、同一產(chǎn)品家族和同一代的型號(hào)CPU數(shù)量越多，虛擬化比例越高，建議16核以上虛擬化平臺(tái)通過(guò)內(nèi)存交換（swapping）、內(nèi)存氣泡（ballooning）和頁(yè)共享（page sharing）技術(shù)支持內(nèi)存過(guò)載使用，但是頻繁的內(nèi)存頁(yè)交換會(huì)嚴(yán)重影響性能，且降低系統(tǒng)穩(wěn)定性，因此生產(chǎn)環(huán)境不建議內(nèi)存過(guò)載使用。相比CPU來(lái)說(shuō)，內(nèi)存更容易成為性能瓶頸；宿主機(jī)的CPU和內(nèi)存的配比，建議按照CPU比例的4倍-10倍配置。宿主機(jī)應(yīng)該配置6個(gè)萬(wàn)兆網(wǎng)卡用于管理、業(yè)務(wù)和存儲(chǔ)，兩個(gè)HBA卡用于連接FC存儲(chǔ)

11、（可選）；按功能劃分不同的虛擬交換機(jī)，生產(chǎn)環(huán)境建議配置3個(gè)虛擬交換機(jī)管理虛擬交換機(jī)業(yè)務(wù)虛擬交換機(jī)存儲(chǔ)虛擬交換機(jī)每個(gè)虛擬交換機(jī)建議配置雙網(wǎng)卡，獲得更好的可靠性和性能系統(tǒng)盤(pán)：2塊盤(pán)，RAID1數(shù)據(jù)盤(pán)：4-8塊，無(wú)RAID服務(wù)器（宿主機(jī)）選型配置標(biāo)準(zhǔn)11為了更好的匹配實(shí)際業(yè)務(wù)需求，我們應(yīng)該對(duì)服務(wù)器的配置制定統(tǒng)一的標(biāo)準(zhǔn)和規(guī)范宿主機(jī)規(guī)劃技術(shù)選型宿主機(jī)規(guī)劃功能集群規(guī)劃虛機(jī)模板物理服務(wù)器序號(hào)服務(wù)器類型規(guī)格參數(shù)適用場(chǎng)景1高性能服務(wù)器（4U）1、4顆14核E7-4850 v3 2.20GHz；16條32G DDR4內(nèi)存，共512G內(nèi)存；2、2塊300G 15K RPM SAS硬盤(pán)；3、2G緩存的陣列卡，支持RA

12、ID 0、1、10、5、50、6、60，帶超級(jí)電容掉電保護(hù)；3、6個(gè)萬(wàn)兆網(wǎng)卡，2個(gè)HBA卡；4、冗余電源和風(fēng)扇，3年服務(wù)。三級(jí)等保業(yè)務(wù)區(qū)、數(shù)據(jù)庫(kù)區(qū)和少量測(cè)試區(qū)2中性能服務(wù)器（2U）1、2顆8核E5-2640V3 2.6GHz， 6條32G DDR4內(nèi)存，共192G內(nèi)存；2、2塊300G 15K RPM SAS硬盤(pán)；3、2G緩存的陣列卡，支持RAID 0、1、10、5、50、6、60，帶超級(jí)電容掉電保護(hù)。4、6個(gè)萬(wàn)兆網(wǎng)卡，2個(gè)HBA卡（可選）；5、冗余電源和風(fēng)扇，3年服務(wù)。三級(jí)等保區(qū)、二級(jí)等保區(qū)、測(cè)試區(qū)、VDI區(qū)和管理區(qū)以上配置僅供參考，可選購(gòu)相近配置的服務(wù)器根據(jù)不同業(yè)務(wù)對(duì)服務(wù)器性能的要求，建議

13、宿主機(jī)采用兩種規(guī)格的服務(wù)器：高性能和中性能服務(wù)器宿主機(jī)規(guī)劃技術(shù)選型宿主機(jī)規(guī)劃功能集群規(guī)劃虛機(jī)模板物理服務(wù)器虛擬機(jī)模板應(yīng)用類型操作系統(tǒng)版本CPU規(guī)格內(nèi)存規(guī)格硬盤(pán)規(guī)格計(jì)費(fèi)（元/月）小型虛擬機(jī)CentOSLiunxWinsows2核6GB160GB8GB4核8GB240GB中型虛擬機(jī)12GB16GB8核8GB320GB大型虛擬機(jī)16GB24GB32GB定制化虛擬機(jī)8核vCPU*2GB320GBvCPU*4GB虛擬機(jī)模板規(guī)劃根據(jù)實(shí)際應(yīng)用需要，定制不同規(guī)格虛擬機(jī)模板，匹配不同的用戶需求,內(nèi)存應(yīng)該是CPU核數(shù)的14倍；虛擬機(jī)的模板需要做系統(tǒng)加固、打上必要的補(bǔ)丁、安裝VMM Tools、開(kāi)啟監(jiān)控協(xié)議、安裝備

14、份和防病毒的客戶端，并經(jīng)常性維護(hù)更新Windows系統(tǒng)補(bǔ)丁VMM ToolsSNMP備份Agent系統(tǒng)加固監(jiān)控Agent防病毒AgentLinux系統(tǒng)補(bǔ)丁VMM ToolsSNMP備份Agent系統(tǒng)加固監(jiān)控Agent防病毒AgentOS系統(tǒng)補(bǔ)丁VMM ToolsSNMP備份Agent系統(tǒng)加固監(jiān)控Agent防病毒Agent13各應(yīng)用系統(tǒng)對(duì)計(jì)算能力的需求不同，為了能夠快速的為業(yè)務(wù)部門交付計(jì)算資源，我們需要設(shè)計(jì)一系列不同規(guī)格的虛擬機(jī)模板，以滿足不同應(yīng)用、不同時(shí)期的需求，同時(shí)對(duì)虛機(jī)模板進(jìn)行統(tǒng)一的加固和配置，簡(jiǎn)化運(yùn)維虛機(jī)模板規(guī)劃技術(shù)選型宿主機(jī)規(guī)劃功能集群規(guī)劃虛機(jī)模板物理服務(wù)器數(shù)據(jù)中心核心vswitchV

15、MVMVMvswitchVMVMVM業(yè)務(wù)匯聚 三級(jí)系統(tǒng)區(qū)核心交換區(qū)業(yè)務(wù)系統(tǒng)區(qū)vswitchVMVMVMvswitchVMVMVM業(yè)務(wù)匯聚 二級(jí)系統(tǒng)區(qū)14二、三級(jí)等保系統(tǒng)區(qū)的物理服務(wù)器規(guī)劃業(yè)務(wù)系統(tǒng)區(qū)vswitchVMVMVMvswitchVMVMVM業(yè)務(wù)匯聚 開(kāi)發(fā)測(cè)試區(qū) VxLAN廣域網(wǎng)序號(hào)服務(wù)器類型規(guī)格參數(shù)用途1高性能服務(wù)器（4U）1、4顆14核E7-4850 v3 2.20GHz；16條32G DDR4內(nèi)存，共512G內(nèi)存；2、2塊300G 15K RPM SAS硬盤(pán)；3、2G緩存的陣列卡，支持RAID 0、1、10、5、50、6、60，帶超級(jí)電容掉電保護(hù)；3、6個(gè)萬(wàn)兆網(wǎng)卡，2個(gè)HBA卡；4

16、、冗余電源和風(fēng)扇，3年服務(wù)。不適合虛擬化的應(yīng)用系統(tǒng)，性能要求比較高的數(shù)據(jù)庫(kù)等，如Oracle RAC技術(shù)選型宿主機(jī)規(guī)劃功能集群規(guī)劃虛機(jī)模板物理服務(wù)器裸金屬資源池規(guī)劃目標(biāo)：自動(dòng)化批量部署高性能物理服務(wù)器，運(yùn)維管理便捷服務(wù)器與云內(nèi)其它虛擬機(jī)、容器等資源互連互通，融合管理可以通過(guò)云平臺(tái)定制開(kāi)發(fā)實(shí)現(xiàn)物理服務(wù)器的管理，如通過(guò)OpenStack ironic組件來(lái)實(shí)現(xiàn)，但要注意服務(wù)器的兼容性15裸金屬資源池與云平臺(tái)集成技術(shù)選型宿主機(jī)規(guī)劃功能集群規(guī)劃虛機(jī)模板物理服務(wù)器2.2.3目錄計(jì)算規(guī)劃計(jì)算資源池總體規(guī)劃計(jì)算虛擬化資源池規(guī)劃高性能計(jì)算資源池規(guī)劃計(jì)算資源池部署規(guī)劃1617高性能計(jì)算資源池規(guī)劃序號(hào)服務(wù)器類型規(guī)

17、格參數(shù)適用場(chǎng)景1高性能服務(wù)器（4U）1、4顆14核E7-4850 v3 2.20GHz；16條32G DDR4內(nèi)存，共512G內(nèi)存；2、2塊300G 15K RPM SAS硬盤(pán)；3、2G緩存的陣列卡，支持RAID 0、1、10、5、50、6、60，帶超級(jí)電容掉電保護(hù)；4、6個(gè)萬(wàn)兆網(wǎng)卡，2個(gè)HBA卡；5、冗余電源和風(fēng)扇，3年服務(wù)。高性能計(jì)算、大數(shù)據(jù)管理2圖形處理服務(wù)器（4U）1、4顆14核E7-4850 v3 2.20GHz；16條32G DDR4內(nèi)存，共512G內(nèi)存；2、2塊300G 15K RPM SAS硬盤(pán)；3、2G緩存的陣列卡，支持RAID 0、1、10、5、50、6、60，帶超級(jí)電容掉

18、電保護(hù)；4、6個(gè)萬(wàn)兆網(wǎng)卡，2個(gè)HBA卡；5、GPU處理器6、冗余電源和風(fēng)扇，3年服務(wù)。GIS等需要GPU計(jì)算的應(yīng)用3中性能服務(wù)器（2U）1、2顆8核E5-2640V3 2.6GHz， 6條32G DDR4內(nèi)存，共192G內(nèi)存；2、2塊300G 15K RPM SAS硬盤(pán)；3、2G緩存的陣列卡，支持RAID 0、1、10、5、50、6、60，帶超級(jí)電容掉電保護(hù)。4、6個(gè)萬(wàn)兆網(wǎng)卡，2個(gè)HBA卡（可選）；5、冗余電源和風(fēng)扇，3年服務(wù)。大數(shù)據(jù)數(shù)據(jù)節(jié)點(diǎn)等性能要求一般的應(yīng)用18大數(shù)據(jù)服務(wù)器配置推薦硬件配置要求不推薦使用虛擬內(nèi)存建議使用更多塊硬盤(pán)，2塊1T硬盤(pán)性能優(yōu)于1塊2T硬盤(pán)。建議單數(shù)據(jù)節(jié)點(diǎn)容量最大不超

19、過(guò)24TB，否則節(jié)點(diǎn)失效后造成大量數(shù)據(jù)復(fù)本的復(fù)制。不建議使用SSD，Hadoop的磁盤(pán)IO多為順序讀寫(xiě)，不能完全發(fā)揮適用于隨機(jī)讀寫(xiě)的SSD的性能優(yōu)勢(shì)，同樣的采購(gòu)?fù)度肟梢酝ㄟ^(guò)多個(gè)HDD提高并發(fā)量提高性能。管理節(jié)點(diǎn)配置要求數(shù)據(jù)節(jié)點(diǎn)配置處理器4顆14核E7-4850 v3 2.20GHz2顆8核E5-2640V3 2.6GHz內(nèi)存512GB或更多 128GB 或更多硬盤(pán)SAS 10k rpm，1TB *4SAS 10k rpm，1TB及以上，數(shù)量建議滿配網(wǎng)卡2塊萬(wàn)兆網(wǎng)卡做聚合2塊萬(wàn)兆網(wǎng)卡做聚合19大數(shù)據(jù)硬盤(pán)RAID配置推薦硬盤(pán)RAID注意：共享存儲(chǔ)系統(tǒng)不適用于集群數(shù)據(jù)存儲(chǔ)，單點(diǎn)存儲(chǔ)是大數(shù)據(jù)集群的運(yùn)算

20、性能瓶頸。集群類型操作系統(tǒng)配置數(shù)據(jù)存儲(chǔ)配置Hadoop2塊硬盤(pán)做RAID1剩余部分每塊做一個(gè)RAID0MPP2塊硬盤(pán)做RAID1剩余部分做成一個(gè)RAID520大數(shù)據(jù)組網(wǎng)推薦IRF業(yè)務(wù)網(wǎng)交換機(jī)管理網(wǎng)交換機(jī)服務(wù)器服務(wù)器Hadoop集群MPP集群推薦集群規(guī)劃 Hadoop集群建議20臺(tái)及以上物理服務(wù)器，Hadoop集群管理節(jié)點(diǎn)和數(shù)據(jù)節(jié)點(diǎn)使用不同的物理服務(wù)器但是建議根據(jù)未來(lái)業(yè)務(wù)發(fā)展情況進(jìn)行提前規(guī)劃，避免后期擴(kuò)容需要平衡數(shù)據(jù)；MPP集群建議選擇3個(gè)節(jié)點(diǎn)為1個(gè)safegroup，推薦配置6臺(tái)及以上服務(wù)器IRF21大數(shù)據(jù)各節(jié)點(diǎn)安裝核心組件推薦服務(wù)組件管理節(jié)點(diǎn)數(shù)據(jù)節(jié)點(diǎn)主機(jī)一主機(jī)二主機(jī)三主機(jī)四主機(jī)五主機(jī)六主機(jī)N

21、管理平臺(tái)管理門戶ZooKeeperZooKeeper ServerZooKeeper Client HDFSNameNodeZKFailoverController DataNode JournalNodeYarn ResourceManager App Timeline Server NodeManager MapReduce2HistoryServer MR2SparkSparkSQL不安裝安裝選裝22大數(shù)據(jù)集群管理軟件的一點(diǎn)建議企業(yè)在構(gòu)建大數(shù)據(jù)平臺(tái)時(shí)一般都是循序漸進(jìn)式的建設(shè)，隨著數(shù)據(jù)量的高速增長(zhǎng)和數(shù)據(jù)分析業(yè)務(wù)的逐漸復(fù)雜，大數(shù)據(jù)平臺(tái)面臨經(jīng)常擴(kuò)容和參數(shù)調(diào)整的問(wèn)題，為了減低運(yùn)維難度，建議采用商

22、業(yè)化的大數(shù)據(jù)集群管理軟件，其優(yōu)點(diǎn)如下：一鍵部署，動(dòng)態(tài)擴(kuò)容；動(dòng)態(tài)參數(shù)調(diào)整；集群管理主機(jī)管理服務(wù)管理用戶管理告警監(jiān)控，多維度監(jiān)控豐富的BI展示2.2.3目錄計(jì)算規(guī)劃計(jì)算資源池總體規(guī)劃計(jì)算虛擬化資源池規(guī)劃高性能計(jì)算資源池規(guī)劃計(jì)算資源池部署規(guī)劃23內(nèi)網(wǎng)計(jì)算資源池部署架構(gòu)VDI區(qū)業(yè)務(wù)匯聚存儲(chǔ)及備份區(qū)數(shù)據(jù)中心核心vswitchVMVMVMvswitchVMVMVM業(yè)務(wù)匯聚 三級(jí)系統(tǒng)區(qū)核心交換區(qū)業(yè)務(wù)系統(tǒng)區(qū)vswitchVMVMVMvswitchVMVMVM業(yè)務(wù)匯聚 二級(jí)系統(tǒng)區(qū)大數(shù)據(jù)區(qū)業(yè)務(wù)匯聚存儲(chǔ)網(wǎng)管理網(wǎng) VxLAN內(nèi)網(wǎng)規(guī)劃部署說(shuō)明：內(nèi)網(wǎng)構(gòu)建三級(jí)系統(tǒng)資源池，二級(jí)系統(tǒng)資源池，后期逐漸按集群擴(kuò)容；在管理區(qū)雙擊熱備

23、部署虛擬化管理平臺(tái)，提高虛擬化管理平臺(tái)的可靠性；內(nèi)網(wǎng)構(gòu)建VDI資源池，供辦公區(qū)及就近區(qū)域的辦公人員使用VDI；在內(nèi)網(wǎng)大數(shù)據(jù)區(qū)在物理服務(wù)器上部署大數(shù)據(jù)平臺(tái)及高性能計(jì)算資源池；廣域網(wǎng)管理匯聚管理業(yè)務(wù)區(qū)云平臺(tái)VMMCompute*3VMVMVMSDN Controller*224物理服務(wù)區(qū)存儲(chǔ)及備份區(qū)數(shù)據(jù)中心核心vswitchVMVMVMvswitchVMVMVM業(yè)務(wù)匯聚 三級(jí)系統(tǒng)區(qū)（備份）核心交換區(qū)業(yè)務(wù)系統(tǒng)區(qū)vswitchVMVMVMvswitchVMVMVM業(yè)務(wù)匯聚 二級(jí)系統(tǒng)區(qū)（備份）VDI區(qū)業(yè)務(wù)匯聚內(nèi)網(wǎng)規(guī)劃部署說(shuō)明：內(nèi)網(wǎng)構(gòu)建三級(jí)系統(tǒng)備份資源池，二級(jí)系統(tǒng)備份資源池，用于內(nèi)網(wǎng)業(yè)務(wù)的災(zāi)備接管；內(nèi)網(wǎng)構(gòu)建測(cè)試資源池，用于全院測(cè)試業(yè)務(wù)的開(kāi)展；在管理區(qū)雙擊熱備部署虛擬化管理平臺(tái)，提高虛擬化管理平臺(tái)的可靠性；內(nèi)網(wǎng)構(gòu)建VDI資源池，供辦公區(qū)及就近區(qū)域的辦公人員使用VDI；廣域