H3CUniStorX10000G3方案建議書(shū)模板

XXX數(shù)據(jù)存儲(chǔ)項(xiàng)目方案建議書(shū)新目華三錄集團(tuán)第1章需求分析 3用戶現(xiàn)狀 3TOC\o"1-5"\h\z\o"CurrentDocument"1.2_面臨冋題 3\o"CurrentDocument"建設(shè)原則 4\o"CurrentDocument"建設(shè)目標(biāo) 4\o"CurrentDocument"第2 章 方案設(shè)計(jì) 6\o"CurrentDocument"方案描述 6\o"CurrentDocument"設(shè)備組網(wǎng) 7\o"CurrentDocument"配置清單 8方案優(yōu)勢(shì) 8\o"CurrentDocument"2.4.1 安全可靠 82.4.2 彈性擴(kuò)展 9\o"CurrentDocument"開(kāi)放性 9\o"CurrentDocument"易維護(hù)性 9\o"CurrentDocument"第3章 產(chǎn)品介紹 10\o"CurrentDocument"概述 10\o"CurrentDocument"產(chǎn)品優(yōu)勢(shì) 10\o"CurrentDocument"融合架構(gòu) 10\o"CurrentDocument"高可靠 10\o"CurrentDocument"高性能 11\o"CurrentDocument"高擴(kuò)展 12\o"CurrentDocument"簡(jiǎn)化運(yùn)維 12\o"CurrentDocument"產(chǎn)品規(guī)格 13第1章需求分析用戶現(xiàn)狀隨著XXX業(yè)務(wù)的快速發(fā)展，現(xiàn)有的IT系統(tǒng)在存儲(chǔ)容量以及性能和可靠性上都不能滿足現(xiàn)在業(yè)務(wù)發(fā)展的需求。存儲(chǔ)作為支撐業(yè)務(wù)的重要環(huán)節(jié)，不僅要滿足現(xiàn)在應(yīng)用的需求，同時(shí)也要為未來(lái)數(shù)據(jù)增長(zhǎng)提供良好的可擴(kuò)展性。當(dāng)今業(yè)務(wù)的數(shù)據(jù)量以指數(shù)級(jí)增長(zhǎng)，用戶對(duì)數(shù)據(jù)的要求全天候訪問(wèn)，現(xiàn)有的存儲(chǔ)基礎(chǔ)架構(gòu)顯得有些力不從心，系統(tǒng)管理復(fù)雜、運(yùn)營(yíng)成本不斷上升，存儲(chǔ)設(shè)施面臨著多重挑戰(zhàn)。

分布式架構(gòu)的存儲(chǔ)方案在為未來(lái)業(yè)務(wù)發(fā)展提高強(qiáng)大的可擴(kuò)展能力，同時(shí)能夠有效提升海量數(shù)據(jù)的可管理性、可靠性以及可用性。通過(guò)增加集群規(guī)模，容量和性能能夠同步提升，能夠很好地滿足XXX業(yè)務(wù)發(fā)展的需求。原有IT系統(tǒng)設(shè)備列表如下：（簡(jiǎn)要說(shuō)明，最好附上拓?fù)鋱D）XXX機(jī)房 XXX數(shù)據(jù)庫(kù)服務(wù)器H3CXXXX1XXX機(jī)房 中間件服務(wù)器XXX機(jī)房 XXX應(yīng)用服務(wù)器H3CXXXXH3CXXXXXXX原有IT系統(tǒng)設(shè)備列表如下：（簡(jiǎn)要說(shuō)明，最好附上拓?fù)鋱D）XXX機(jī)房 XXX數(shù)據(jù)庫(kù)服務(wù)器H3CXXXX1XXX機(jī)房 中間件服務(wù)器XXX機(jī)房 XXX應(yīng)用服務(wù)器H3CXXXXH3CXXXXXXX機(jī)房XX光纖交換機(jī)博科XXXXXXX機(jī)房XXX存儲(chǔ)HPEXXXXXXX機(jī)房1.2面臨問(wèn)題XXX備份服務(wù)器HPEXXXX11111選取典型的幾個(gè)問(wèn)題）存儲(chǔ)孤島：現(xiàn)有多臺(tái)獨(dú)立運(yùn)行的存儲(chǔ)服務(wù)器或SAN/NAS存儲(chǔ)設(shè)備，各部門(mén)間不能實(shí)現(xiàn)信息共享，存儲(chǔ)系統(tǒng)的利用率低下。此外系統(tǒng)管理員需要管理多個(gè)存儲(chǔ)系統(tǒng)，管理工作極其費(fèi)時(shí)耗力，同時(shí)還需要消耗大量軟硬件資源。數(shù)據(jù)可靠性：存儲(chǔ)數(shù)據(jù)的來(lái)源越來(lái)越多樣化，對(duì)數(shù)據(jù)可靠性提出更高的要求，在滿足數(shù)據(jù)可靠性的同時(shí)，還需要平衡硬盤(pán)利用率，避免犧牲大量的存儲(chǔ)空間（原始數(shù)據(jù)幾倍的存儲(chǔ)空間）來(lái)滿足數(shù)據(jù)可靠性要求。系統(tǒng)性能瓶頸：傳統(tǒng)Scale-up架構(gòu)的性能無(wú)法線性增長(zhǎng)，面臨海量數(shù)據(jù)的高帶寬要求時(shí)，往往無(wú)法快速響應(yīng)應(yīng)用的讀寫(xiě)請(qǐng)求，尤其是大文件和海量小隨文件讀寫(xiě)。擴(kuò)展能力不足：不能進(jìn)行靈活的擴(kuò)展以滿足快速變化的業(yè)務(wù)需求、確保數(shù)據(jù)可用及業(yè)務(wù)不中斷，缺乏可擴(kuò)展性或大規(guī)模文件處理能力。管理維護(hù)難度大：隨著應(yīng)用不斷發(fā)展，現(xiàn)有的數(shù)據(jù)規(guī)模已經(jīng)超出原有平臺(tái)管理的峰值，存儲(chǔ)設(shè)備的增多帶來(lái)維護(hù)成本居高不下，多套存儲(chǔ)系統(tǒng)空間不能共用，管理復(fù)雜，需要多個(gè)IT管理人員維護(hù)多套不同的存儲(chǔ)設(shè)備和網(wǎng)絡(luò)，TCO急劇上升。1.3建設(shè)原則 線性擴(kuò)展能力：系統(tǒng)應(yīng)具有良好的拓展能力，最大可擴(kuò)展容量應(yīng)能達(dá)到數(shù)十PB以上，同時(shí)性能隨容量的提升線性增加，確保整套系統(tǒng)隨容量增長(zhǎng)不出現(xiàn)性能瓶頸，整套系統(tǒng)的擴(kuò)展能力應(yīng)能滿足未來(lái)3-5年數(shù)據(jù)增長(zhǎng)的需求。高可靠性：系統(tǒng)應(yīng)保證有充分的冗余，在部分硬盤(pán)或節(jié)點(diǎn)損壞時(shí)系統(tǒng)能夠自動(dòng)恢復(fù)而不影響業(yè)務(wù)運(yùn)行，同時(shí)應(yīng)保證系統(tǒng)在7*24的高負(fù)荷環(huán)境中依然有良好的安全可靠性。易維護(hù)性：系統(tǒng)的運(yùn)維管理應(yīng)盡量簡(jiǎn)單，采用可視化圖形界面對(duì)整套系統(tǒng)進(jìn)行監(jiān)控維護(hù)，一旦發(fā)生故障應(yīng)能主動(dòng)告警，并迅速定位故障點(diǎn)，硬件部署安裝也應(yīng)簡(jiǎn)便，方便以后進(jìn)行系統(tǒng)擴(kuò)容和節(jié)點(diǎn)替換。綠色性：系統(tǒng)的能耗、噪聲應(yīng)滿足環(huán)保要求，使用的材料也滿足相關(guān)環(huán)保規(guī)定。1.4建設(shè)目標(biāo)根據(jù)XXX的IT發(fā)展規(guī)劃，本次存儲(chǔ)系統(tǒng)建設(shè)，需要針對(duì)未來(lái)3~5年建立一個(gè)高效、可擴(kuò)展、高可靠的海量數(shù)據(jù)存儲(chǔ)系統(tǒng)：融合架構(gòu)，能夠在同一個(gè)資源池內(nèi)同時(shí)提供塊、NAS、對(duì)象存儲(chǔ)服務(wù)。能夠支撐海量數(shù)據(jù)的存儲(chǔ)，單一命名空間下，支撐PB級(jí)數(shù)據(jù)存儲(chǔ)。存儲(chǔ)系統(tǒng)具有橫向擴(kuò)展能力，存儲(chǔ)容量不斷擴(kuò)展的同時(shí)，性能隨節(jié)點(diǎn)數(shù)增多而增加，隨時(shí)管理動(dòng)態(tài)的業(yè)務(wù)需求，響應(yīng)業(yè)務(wù)變化。高可靠的數(shù)據(jù)存儲(chǔ)，針對(duì)PB級(jí)數(shù)據(jù)存儲(chǔ)提供更高效、快速的備份、恢復(fù)能力高度自動(dòng)化和簡(jiǎn)化的IT操作，方便用戶管理PB級(jí)數(shù)據(jù)帶來(lái)IT設(shè)備增長(zhǎng)具有技術(shù)前瞻性，保證客戶投入，不會(huì)因?yàn)楫a(chǎn)品更新帶來(lái)數(shù)據(jù)遷移等問(wèn)題。

第2章方案設(shè)計(jì)方案描述本次存儲(chǔ)產(chǎn)品選型建議采用H3CUniStorX10000G3分布式融合存儲(chǔ)H3CUniStorX10000G3是新華三技術(shù)有限公司自主研發(fā)的新一代全對(duì)稱(chēng)分布式存儲(chǔ)，在一個(gè)平臺(tái)同時(shí)支持塊、文件、對(duì)象存儲(chǔ)能力，系統(tǒng)的性能及容量隨節(jié)點(diǎn)數(shù)增加呈線性增長(zhǎng)。產(chǎn)品擁有卓越的性能、超強(qiáng)的拓展能力、高可靠、高可用以及易維護(hù)等特性，單個(gè)系統(tǒng)可支持最大288個(gè)節(jié)點(diǎn)的集中部署，單一命名空間可存儲(chǔ)超過(guò)100PB容量，面向政府、金融、企業(yè)、運(yùn)營(yíng)商、廣電、教育、醫(yī)療、交通等各行業(yè)用戶提供高效可靠易管理的存儲(chǔ)資源池。H3CUniStorX10000G3與分散的存儲(chǔ)孤島相比，可以更好地滿足應(yīng)用的存儲(chǔ)需求。為使IT服務(wù)更加密切適應(yīng)業(yè)務(wù)目標(biāo)，首先要整合分散資源，使存儲(chǔ)數(shù)量更少但更具可擴(kuò)展性，X10000G3通過(guò)將數(shù)據(jù)集中至單一的命名空間，并簡(jiǎn)化與保存、移動(dòng)和訪問(wèn)文件相關(guān)的管理任務(wù)來(lái)支持整合。X10000G3提供了一個(gè)全局命名空間，允許基礎(chǔ)架構(gòu)存儲(chǔ)容量從TB級(jí)擴(kuò)展至PB級(jí)，能夠支持大容量的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)，并支持iSCSI、CIFS、NFS、FTP、HTTP等多種訪問(wèn)協(xié)議。X10000G3的系統(tǒng)架構(gòu)圖如下：2019年8月29日2019年8月29日Confidential保密第6頁(yè)共2.2設(shè)備組網(wǎng)X10000G3支持iSCSI、NFS、CIFS、FTP、S3、Swift等協(xié)議，可以同時(shí)對(duì)外提供塊、NAS、對(duì)象存儲(chǔ)服務(wù)，其集群組網(wǎng)如下所示，主要包括管理網(wǎng)，業(yè)務(wù)網(wǎng)和存儲(chǔ)網(wǎng)。管理氷務(wù)器交換機(jī)業(yè)勢(shì)網(wǎng)紹互矚網(wǎng)塑曽理闔絡(luò)/厶 丄管理氷務(wù)器交換機(jī)業(yè)勢(shì)網(wǎng)紹互矚網(wǎng)塑曽理闔絡(luò)/厶 丄X1000015點(diǎn)1）管理網(wǎng)絡(luò)配合Handy組件承載存儲(chǔ)集群管理業(yè)務(wù)，建議獨(dú)立組網(wǎng)，帶寬要求較低，可選用千兆帶寬。2） 業(yè)務(wù)網(wǎng)絡(luò)用于與用戶網(wǎng)絡(luò)相連，提供共享業(yè)務(wù)，需獨(dú)立組網(wǎng)，萬(wàn)兆帶寬，建議雙鏈路冗余3） 存儲(chǔ)網(wǎng)絡(luò)（存儲(chǔ)前端網(wǎng)和存儲(chǔ)后端網(wǎng)）承載存儲(chǔ)業(yè)務(wù)數(shù)據(jù)（存儲(chǔ)前端網(wǎng)），存儲(chǔ)后端心跳報(bào)文、數(shù)據(jù)分發(fā)和遷移等數(shù)據(jù)流量（存儲(chǔ)后端網(wǎng)），可能有較高的突發(fā)流量，帶寬要求大，需獨(dú)立組網(wǎng)，建議配置萬(wàn)兆帶寬+雙鏈路冗余交換機(jī)配置建議如下：存儲(chǔ)網(wǎng)絡(luò)交換機(jī)搭建集群存儲(chǔ)網(wǎng)絡(luò)推薦：H3CS6300-42QF （24口/萬(wàn)兆）；H3CS5820V2-52QF-H5 （48口/萬(wàn)兆）建議使用2臺(tái)，做IRF堆疊業(yè)務(wù)網(wǎng)絡(luò)交換機(jī)建議用戶側(cè)也使用2臺(tái)交換機(jī)進(jìn)行IRF堆疊，避免單點(diǎn)故障搭建管理網(wǎng)絡(luò)管理網(wǎng)絡(luò)交換機(jī)推薦：H3CS5130S-52S-EI （52口/千兆）管理網(wǎng)絡(luò)交換機(jī)建議使用1臺(tái)2.3配置清單P名稱(chēng) 型號(hào) 規(guī)格 單價(jià) 數(shù)量 總價(jià)容量型節(jié)點(diǎn)XXXXX配置……支持……XX萬(wàn)4臺(tái)XX萬(wàn)性能型節(jié)點(diǎn)XXXXX配置……支持……XX萬(wàn)3臺(tái)XX萬(wàn)千兆交換機(jī)XXXXX配置……支持……XX萬(wàn)2臺(tái)XX萬(wàn)萬(wàn)兆交換機(jī)XXXXX配置……支持……XX萬(wàn)2臺(tái)XX萬(wàn)2.4方案優(yōu)勢(shì)X10000G3存儲(chǔ)系統(tǒng)采用全分布式架構(gòu)，可橫向擴(kuò)展288個(gè)節(jié)點(diǎn)，具有如下優(yōu)勢(shì)2.4.1安全可靠采用副本及糾刪碼技術(shù)，冗余用戶自定義數(shù)據(jù)保護(hù)級(jí)別，數(shù)據(jù)可靠性超過(guò)11個(gè)9；支持快照、克隆、拷貝、故障域、保護(hù)域等數(shù)據(jù)保護(hù)技術(shù)；存儲(chǔ)節(jié)點(diǎn)損壞時(shí)（包括硬盤(pán)、機(jī)柜故障）不會(huì)丟失數(shù)據(jù)，硬盤(pán)發(fā)生故障時(shí)系統(tǒng)自動(dòng)執(zhí)行自愈操作，異常掉電后不丟失數(shù)據(jù)，供電恢復(fù)后自動(dòng)重新啟動(dòng)并自動(dòng)恢復(fù)正常連接；提供自身安全的登錄和訪問(wèn)措施，防止系統(tǒng)被攻擊，同時(shí)也可以融入客戶域管理系統(tǒng)，確保系統(tǒng)具有高度的安全性。2?4?2彈性擴(kuò)展可橫向最大擴(kuò)展288個(gè)節(jié)點(diǎn)，單集群支持100PB，容量擴(kuò)展時(shí)保證性能線性提升；同時(shí)支持容量性及性能型兩種硬件平臺(tái)，X10300系列定位為大容量型存儲(chǔ)節(jié)點(diǎn)，X10500系列定位為高性能型節(jié)點(diǎn)，在同一個(gè)系統(tǒng)內(nèi)，可以實(shí)現(xiàn)容量和性能的完美結(jié)合；基于X86平臺(tái)擴(kuò)展，整體系統(tǒng)利于靈活替換及容量擴(kuò)展。開(kāi)放性支持云平臺(tái)擴(kuò)展，支持主流接口和協(xié)議類(lèi)型；與主流服務(wù)器之間保持良好的兼容性，兼容各主流操作系統(tǒng)及應(yīng)用程序，為客戶環(huán)境中不同時(shí)期的操作系統(tǒng)，提供了良好的接入環(huán)境。易維護(hù)性全中文操作界面，操作方便，圖形化界面管理方式簡(jiǎn)單；具有豐富的權(quán)限管理、日志管理、故障管理，并能夠?qū)崿F(xiàn)故障自動(dòng)報(bào)警，可實(shí)時(shí)監(jiān)測(cè)系統(tǒng)健康狀態(tài)及性能參數(shù)；基于通用服務(wù)器架構(gòu)，安裝使用簡(jiǎn)單，無(wú)需專(zhuān)業(yè)人員維護(hù)；可按需在線擴(kuò)展容量，通過(guò)在線添加節(jié)點(diǎn)的方式進(jìn)行擴(kuò)容，無(wú)需停止業(yè)務(wù)。第3章產(chǎn)品介紹概述H3CUniStorX10000G3系列（以下簡(jiǎn)稱(chēng)X10000G3）是新華三集團(tuán)自主研發(fā)的分布式融合存儲(chǔ)，能同時(shí)提供塊、文件、對(duì)象存儲(chǔ)服務(wù)。X10000G3產(chǎn)品依托先進(jìn)的分布式系統(tǒng)架構(gòu)和強(qiáng)大的擴(kuò)展能力，提供高性能的海量存儲(chǔ)空間，滿足用戶不同應(yīng)用的存儲(chǔ)需求。產(chǎn)品優(yōu)勢(shì)3.2.1融合架構(gòu)XXX數(shù)據(jù)存儲(chǔ)項(xiàng)目方案建議書(shū)從存儲(chǔ)系統(tǒng)的業(yè)務(wù)供給能力角度看，不同的存儲(chǔ)系統(tǒng)可以提供塊存儲(chǔ)、文件存儲(chǔ)（NAS）、對(duì)象存儲(chǔ)等不同類(lèi)型。假如用戶有多重應(yīng)用，就需要購(gòu)買(mǎi)不同的存儲(chǔ)系統(tǒng)，這就會(huì)形成投資浪費(fèi)。X10000G3可以對(duì)用戶提供不同的存儲(chǔ)接口，滿足用戶針對(duì)不同類(lèi)型存儲(chǔ)的需求：庫(kù)函數(shù)接口：這一層的功能是對(duì)底層存儲(chǔ)服務(wù)進(jìn)行抽象和封裝，并向上層提供API（包括C和C++、Java、Python、Ruby和PHP的支持。高層應(yīng)用接口：這一層包括了三個(gè)部分：對(duì)象服務(wù)、塊設(shè)備服務(wù)、文件服務(wù)等三部分。應(yīng)用層：這一層就是不同場(chǎng)景下對(duì)于存儲(chǔ)集群各個(gè)應(yīng)用接口的各種應(yīng)用方式。從用戶的角度，一個(gè)存儲(chǔ)集群就可以滿足用戶不同的存儲(chǔ)應(yīng)用。從存儲(chǔ)系統(tǒng)的業(yè)務(wù)供給能力角度看，不同存儲(chǔ)系統(tǒng)可以提供塊存儲(chǔ)（Block）、對(duì)象存儲(chǔ)（Object）、文件存儲(chǔ)（File）等不同類(lèi)型的存儲(chǔ)服務(wù)。假如用戶有多種需求，就需要購(gòu)買(mǎi)不同類(lèi)型的存儲(chǔ)系統(tǒng)。H3CX10000G3分布式存儲(chǔ)系統(tǒng)可提供塊、對(duì)象、文件等多種不同的存儲(chǔ)接口，為用戶提供多種不同的存儲(chǔ)服務(wù)，從而達(dá)到統(tǒng)一存儲(chǔ)的特性，降低多種存儲(chǔ)系統(tǒng)帶來(lái)的運(yùn)維復(fù)雜度，提高存儲(chǔ)資源利用率，節(jié)省機(jī)房空間。3.2.2高可靠對(duì)存儲(chǔ)系統(tǒng)來(lái)說(shuō)，可靠性（Reliability）一般指其對(duì)存儲(chǔ)的數(shù)據(jù)無(wú)差錯(cuò)地保存能力，一般以在一段時(shí)間內(nèi)的不出錯(cuò)的概率來(lái)表示。X10000G3在1年內(nèi)的數(shù)據(jù)可靠性最高可以達(dá)到11個(gè)9，即99.999999999%。在實(shí)際部署中，X10000G3集群可以根據(jù)用戶需求針對(duì)不同的文件目錄設(shè)計(jì)不同的冗余策略。1）多副本機(jī)制為了保證數(shù)據(jù)的高可靠，X10000G3支持多副本技術(shù)，即把數(shù)據(jù)在不同節(jié)點(diǎn)中存放多份，比如典型的3副本。在這種情況下，只有在3份數(shù)據(jù)全部丟失，用戶的數(shù)據(jù)才會(huì)真正丟失。2） 糾刪碼和多副本相比，糾刪碼技術(shù)以同樣的初始容量存儲(chǔ)更多的數(shù)據(jù),磁盤(pán)利用率更高，從而大大降低了XXX數(shù)據(jù)存儲(chǔ)項(xiàng)目方案建議書(shū)用戶的成本。舉例來(lái)說(shuō)，3副本的利用率是1/3；而k+m糾刪碼的利用率是k/（k+m），如8+2的利用率是8/10。3.2.3高性能對(duì)用戶來(lái)說(shuō)，存儲(chǔ)系統(tǒng)的性能體現(xiàn)在兩個(gè)方面：一個(gè)是從客戶端角度看，客戶端可以從系統(tǒng)獲得的性能；一個(gè)是從存儲(chǔ)集群的角度看，存儲(chǔ)集群的供給能力。首先，從客戶端角度看，集群中的文件或LUN會(huì)根據(jù)特有算法偽隨機(jī)地分散在集群的所有磁盤(pán)。這個(gè)分布是通過(guò)集群自動(dòng)完成，無(wú)需手動(dòng)配置。由于每個(gè)文件或LUN可以使用整個(gè)集群的磁盤(pán)性能，因此整個(gè)集群能夠提供更高的性能。在X10000G3集群中，默認(rèn)存儲(chǔ)對(duì)象的大小是4M（可配置），比如一個(gè)1GB大小的文件或LUN，會(huì)被劃分成256個(gè)對(duì)象，這些對(duì)象分散在不同的OSD上。這樣在讀寫(xiě)文件時(shí)，就會(huì)充分利用集群的整體性能，提升IOPS和吞吐率。存儲(chǔ)集群的性能取決于兩方面：一方面是單節(jié)點(diǎn)的能力，另一方面是系統(tǒng)的擴(kuò)展能力。如前所述，X10000G3系統(tǒng)的性能可以隨節(jié)點(diǎn)的規(guī)模而線性擴(kuò)展。對(duì)于單節(jié)點(diǎn)的能力，X10000G3在系統(tǒng)設(shè)計(jì)和硬件配置方便實(shí)現(xiàn)了足夠的靈活性，從而可以表現(xiàn)出良好的性能。對(duì)傳統(tǒng)HDD來(lái)說(shuō)，受尋道能力的限制，單盤(pán)的隨機(jī)讀寫(xiě)能力一般不超過(guò)200個(gè)IOPS。SSD的出現(xiàn)，使得在IOPS上的能力相比于HDD有了成倍的提升，甚至是數(shù)量級(jí)的提升，在當(dāng)前對(duì)IOPS有較高需求的應(yīng)用（如數(shù)據(jù)庫(kù)、VDI等）中得到了廣泛使用。另一方面，當(dāng)前SSD在容量、價(jià)格、使用壽命等方面和HDD相比還有一定的差距，所以針對(duì)不同的場(chǎng)景和需求，一個(gè)良好的存儲(chǔ)系統(tǒng)應(yīng)該可以進(jìn)行靈活的配置。X10000G3系統(tǒng)支持的硬盤(pán)類(lèi)型包括：全HDD、SSD+HDD混合組網(wǎng)、全SSD。在SSD+HDD混合組網(wǎng)模式下，X10000G3系統(tǒng)既可以將SSD作為緩存使用，也可以將SSD和HDD放到不同的存儲(chǔ)池做分層存儲(chǔ)使用。在此情況下可以發(fā)揮SSD的IOPS和帶寬的優(yōu)勢(shì)，又可以發(fā)揮HDD的容量和價(jià)格優(yōu)勢(shì)。3.2.4高擴(kuò)展集群的線性擴(kuò)展能力，主要體現(xiàn)在兩個(gè)方面：一個(gè)是集群部署規(guī)模可以線性擴(kuò)展，另一個(gè)方面，隨集群規(guī)模的擴(kuò)展，其性能要能夠線性或近似線性擴(kuò)展。在規(guī)模上，傳統(tǒng)存儲(chǔ)之所以在擴(kuò)展能力上受限，一個(gè)很重要的原因就是一般其采用集中式控制，并且在控制節(jié)點(diǎn)存儲(chǔ)大量的元數(shù)據(jù)信息，從而使控制節(jié)點(diǎn)容易成為系統(tǒng)的瓶頸。對(duì)于X10000G3系統(tǒng)，客戶XXX數(shù)據(jù)存儲(chǔ)項(xiàng)目方案建議書(shū)端節(jié)點(diǎn)通過(guò)特有算法可以直接計(jì)算出數(shù)據(jù)的存儲(chǔ)位置，從而對(duì)OSD進(jìn)行直接讀寫(xiě)，完全是分布式并行的；而其元數(shù)據(jù)，也就是集群視圖，是輕量級(jí)數(shù)據(jù)，而且其更新的頻率較低。這種架構(gòu)就在理論上保證了X10000G3具備線性擴(kuò)展能力。當(dāng)然，除了集群架構(gòu)和元數(shù)據(jù)的設(shè)計(jì)之外， X10000G3在緩存設(shè)計(jì)，節(jié)點(diǎn)數(shù)據(jù)遷移方式等方面同樣滿足線性擴(kuò)展的要求。在性能上，根據(jù)集群的分布式架構(gòu)，客戶端的讀寫(xiě)數(shù)據(jù)最終會(huì)被打散，均勻分布到各OSD上，從而集群整體的吞吐率是各節(jié)點(diǎn)能力的總和，即集群的性能隨節(jié)點(diǎn)數(shù)量的增加而線性增加。在實(shí)際部署中，X10000G3存儲(chǔ)集群可以支持百PB級(jí)別的存儲(chǔ)容量規(guī)模，用戶可以根據(jù)自己的存儲(chǔ)情況和業(yè)務(wù)使用情況不斷向集群中添加存儲(chǔ)節(jié)點(diǎn)進(jìn)行擴(kuò)容，擴(kuò)容過(guò)程中不需要中斷用戶業(yè)務(wù)。3.2.5簡(jiǎn)化運(yùn)維X10000G3為了簡(jiǎn)化管理運(yùn)維，內(nèi)嵌了大量自動(dòng)化運(yùn)維工具：1） 集群快速部署包括批量部署、單節(jié)點(diǎn)增減、單磁盤(pán)增減等（詳見(jiàn)“管理平臺(tái)”章節(jié)，在此不再贅述）。2） 系統(tǒng)監(jiān)控報(bào)警發(fā)生故障時(shí)能快速界定問(wèn)題、排查故障（詳見(jiàn)“管理平臺(tái)”章節(jié)，在此不再贅述）。3） 靈活的部署方式X10000G3系統(tǒng)可以根據(jù)用戶需求靈活地部署Monitor節(jié)點(diǎn)和Client節(jié)點(diǎn)。一方面，這些節(jié)點(diǎn)既可以部署在單獨(dú)的物理服務(wù)器上，也可以部署在和OSD相同的物理節(jié)點(diǎn)上。另一方面，Monitor和Client的節(jié)點(diǎn)可以根據(jù)用戶的需求靈活地調(diào)整。比如為了可靠性保證，至少需要部署3個(gè)Monitor節(jié)點(diǎn)；為了保證對(duì)象存儲(chǔ)網(wǎng)關(guān)的性能，需要部署過(guò)個(gè) RGW（Client）節(jié)點(diǎn)4） 自定義分布策略允許用戶定制數(shù)據(jù)分布策略，方便地進(jìn)行故障域隔離，以及對(duì)數(shù)據(jù)存儲(chǔ)位置進(jìn)行靈活選擇。用戶的需求主要體現(xiàn)在存儲(chǔ)策略上，比如在選用副本策略時(shí)，用戶可能希望不同數(shù)據(jù)副本存儲(chǔ)在不同機(jī)架上面的主機(jī)上；或者主副本存儲(chǔ)在某個(gè)機(jī)架的主機(jī)上，其它副本存儲(chǔ)在另外機(jī)架的主機(jī)上；此類(lèi)需求可以靈活調(diào)整故障域和保護(hù)域策略，已滿足需求5） 節(jié)點(diǎn)快速增刪XXX數(shù)據(jù)存儲(chǔ)項(xiàng)目方案建議書(shū)在增刪存儲(chǔ)介質(zhì)，或存儲(chǔ)介質(zhì)發(fā)生故障時(shí)，系統(tǒng)會(huì)及時(shí)進(jìn)行檢測(cè)。比如，在磁盤(pán)發(fā)生故障時(shí)，X10000G3會(huì)利用損壞數(shù)據(jù)在其他存儲(chǔ)體上的副本進(jìn)行復(fù)制，并將復(fù)制的數(shù)據(jù)保存在健康的存儲(chǔ)體上；在增加磁盤(pán)時(shí)，同樣會(huì)把其他存儲(chǔ)體的數(shù)據(jù)安排容量比例重新分布到新磁盤(pán)，使集群的數(shù)據(jù)達(dá)到均衡。在上述過(guò)程中，完全不需要人工干預(yù)6）重構(gòu)自動(dòng)Qos在系統(tǒng)平衡數(shù)據(jù)（例如系統(tǒng)擴(kuò)容或者存儲(chǔ)節(jié)點(diǎn)、磁盤(pán)發(fā)生故障）的過(guò)程中，為保證用戶IO，X10000G3存儲(chǔ)系統(tǒng)支持10優(yōu)先級(jí)控制和Qos保證能力。我們知道，在系統(tǒng)擴(kuò)容或者存儲(chǔ)節(jié)點(diǎn)、磁盤(pán)故障過(guò)程中，為保證數(shù)據(jù)的可靠性，系統(tǒng)會(huì)自動(dòng)進(jìn)行數(shù)據(jù)平衡。為了盡快完成數(shù)據(jù)平衡，往往會(huì)沾滿每個(gè)存儲(chǔ)