一體化數(shù)據(jù)管理技術(shù)交流-保險(xiǎn)-20150620

1、Commvault一體化數(shù)據(jù)管理Jason D客戶LOGO21Commvault公司簡(jiǎn)介2數(shù)據(jù)管理面臨的問題與挑戰(zhàn)3Commvault解決之道4案例和總結(jié)公司創(chuàng)建于1996年，從AT&T貝爾實(shí)驗(yàn)室分離出來全球化企業(yè)：共有2,000多員工，遍布六大洲全球共有20000多客戶， 主要為財(cái)富2000強(qiáng)企業(yè)級(jí)客戶具有業(yè)內(nèi)最高的客戶滿意度：97%產(chǎn)品100%自主開發(fā)，沒有任何收購(gòu)NASDAQ上市（ 股票代碼：CVLT）倡導(dǎo)“一體化數(shù)據(jù)管理”理念：n單一產(chǎn)品實(shí)現(xiàn)數(shù)據(jù)保護(hù)、重復(fù)數(shù)據(jù)刪除、數(shù)據(jù)分級(jí)管理、數(shù)據(jù)復(fù)制、存儲(chǔ)快照管理、內(nèi)容管理的一體化數(shù)據(jù)管理 。4數(shù)據(jù)管理工具 vs. 數(shù)據(jù)管理平臺(tái)Commva

2、ult一體化數(shù)據(jù)管理平臺(tái)5一體化平臺(tái)的優(yōu)勢(shì) 費(fèi)用及風(fēng)險(xiǎn)低，性能高，無(wú)限的靈活性5備份/恢復(fù)歸檔eDiscovery復(fù)制邊緣數(shù)據(jù)保護(hù)搜索分析6Simpana現(xiàn)代化數(shù)據(jù)管理平臺(tái)Simpana ContentStore內(nèi)容存儲(chǔ)池智能索引 對(duì)象 元數(shù)據(jù) 屬性 全文索引 自助管理 規(guī)模效果數(shù)據(jù)拷貝 多個(gè)場(chǎng)所/地點(diǎn) 多個(gè)介質(zhì)/驅(qū)動(dòng)器 磁盤，VTL，磁帶，云存儲(chǔ) 快照/備份/歸檔數(shù)據(jù)集合 保留期限 數(shù)據(jù)縮減 合規(guī)7Commvault與傳統(tǒng)數(shù)據(jù)管理方法對(duì)比備份 & 恢復(fù)文件、郵件歸檔、eDiscovery & 法規(guī)遵從重復(fù)數(shù)據(jù)刪除 &數(shù)據(jù)壓縮企業(yè)級(jí)報(bào)告 復(fù)制、快照管理 & CD

3、P臺(tái)式機(jī)/便攜機(jī)保護(hù)CommvaultVeritasARCserveEMCTSM for SharePointIBMPrinceton SoftechCommoCommon Storen StorePureDiskCommand CentralReplication Exec NetBackupEnterprise VaultDiscovery CollectorSRMNOT AVAILABLED2DControl Center CenteraSourceOneHomeBaseReplistorRecoverPointNetworkerDPARepl. ManagerXtendersNOT A

4、VAILABLE8連續(xù)五年獲得企業(yè)級(jí)備份與恢復(fù)Gartner魔力象限領(lǐng)導(dǎo)者M(jìn)agic Quadrant for Enterprise Disk-based Backup/ Recovery ; by David Russell, Sheila Childs, Alan Dayley; January 28, 20112012 Gartner Magic Quadrant for Enterprise Backup/Recovery Software by Dave Russell, Alan Dayley, Sheila Childs, Pushan Rinnen, 11 June 20122

5、013 Gartner Magic Quadrant for Enterprise Backup/Recovery Software, June 2013Magic Quadrant for Enterprise Backup Software and Integrated Appliances; by David Russell, Pushan Rinnen; June 9, 20149DCIG 虛擬化備份軟件評(píng)測(cè) - 連續(xù)兩年蟬聯(lián)冠軍910國(guó)內(nèi)典型行業(yè)用戶 2000+數(shù)據(jù)管理面臨的挑戰(zhàn)？12主要行業(yè)規(guī)范及要求保險(xiǎn)業(yè)信息系統(tǒng)災(zāi)難恢復(fù)管理指引13相關(guān)指引和規(guī)范總結(jié)業(yè)務(wù)分級(jí)保護(hù)l業(yè)務(wù)數(shù)據(jù)每天至少

6、備份一次，且需場(chǎng)外存放l數(shù)據(jù)分級(jí)保護(hù),數(shù)據(jù)存放至少實(shí)現(xiàn)同城容災(zāi)和異地災(zāi)備 l備份數(shù)據(jù)具有完整性、安全保存和可恢復(fù)性的要求 加強(qiáng)日常維護(hù)l備份系統(tǒng)運(yùn)行監(jiān)控制度，具有事先預(yù)檢和事后報(bào)告機(jī)制l明確訪問控制及操作審計(jì)的規(guī)定l要求介質(zhì)存取、驗(yàn)證和定期檢驗(yàn)，對(duì)長(zhǎng)期保留的備份數(shù)據(jù)要有介質(zhì)驗(yàn)證和恢復(fù)演練制度，確保數(shù)據(jù)可恢復(fù)性滿足未來發(fā)展l制定容量規(guī)劃，滿足發(fā)展預(yù)測(cè)l能夠隨時(shí)統(tǒng)計(jì)和掌握生產(chǎn)系統(tǒng)、備份系統(tǒng)的容量情況 l備份系統(tǒng)具有事先預(yù)定和監(jiān)控機(jī)制 1414保險(xiǎn)行業(yè)主要數(shù)據(jù)管理挑戰(zhàn) A.C.S.S 備份恢復(fù)過程往往需要大量腳本操作，過分依賴管理員或DBA技能，難以共享和監(jiān)控，容易造成誤操作； 缺少管理者視圖，不能

7、提供分權(quán)報(bào)告。 核心數(shù)據(jù)保留要求時(shí)間長(zhǎng)，存有多個(gè)副本，導(dǎo)致后端備份存儲(chǔ)成本居高不下； 大量歷史數(shù)據(jù)在線存儲(chǔ)，擴(kuò)容和存儲(chǔ)成本高。數(shù)據(jù)同步無(wú)法防范邏輯錯(cuò)誤和人為誤操作；核心數(shù)據(jù)庫(kù)要求更高的RPO/RTO，能否快速恢復(fù)；數(shù)據(jù)可用性能否保證：備份的數(shù)據(jù)能否有效恢復(fù)？ 備份管理員往往具有Root權(quán)限，可以對(duì)所有數(shù)據(jù)做備份，恢復(fù)，查看的權(quán)限； 多人共用同一賬號(hào)，難以審計(jì)。管理問題成本問題SLA問題安全問題15數(shù)據(jù)管理面臨的問題與風(fēng)險(xiǎn)（1） 易用性問題及風(fēng)險(xiǎn)n全腳本化，容易誤操作；備份策略變更麻煩，工作量大n對(duì)運(yùn)維人員的技術(shù)水平要求高，依賴程度高n技術(shù)轉(zhuǎn)移困難：備份管理員自身的轉(zhuǎn)移，需要其他團(tuán)隊(duì)參與 備份數(shù)

8、據(jù)可用性問題及風(fēng)險(xiǎn)n備份數(shù)據(jù)的恢復(fù)完全依賴審計(jì)或應(yīng)用需求n無(wú)備份介質(zhì)檢驗(yàn)機(jī)制，更無(wú)法做到自動(dòng)化n沒有按照等保機(jī)制，做到備份數(shù)據(jù)的定期恢復(fù)演練；一旦真正做起來需要協(xié)調(diào)的部門多、工作量大16數(shù)據(jù)管理面臨的問題與風(fēng)險(xiǎn)（2） 安全問題及風(fēng)險(xiǎn)n所有人員使用一個(gè)具有最高權(quán)限的賬戶，容易誤操作，且無(wú)法審計(jì)？n數(shù)據(jù)保留周期越來越長(zhǎng)，設(shè)備不斷更新?lián)Q代，如何保證備份介質(zhì)安全，數(shù)據(jù)可用？介質(zhì)出庫(kù)如何管理？ 海量小文件數(shù)據(jù)管理問題及風(fēng)險(xiǎn)n備份時(shí)間窗口的問題？n恢復(fù)SLA的問題？n歷史數(shù)據(jù)大量占用空間的問題？n同城異地傳輸保留的問題？17數(shù)據(jù)管理面臨的問題與風(fēng)險(xiǎn)（3） 管理問題及風(fēng)險(xiǎn)n無(wú)法對(duì)整個(gè)備份恢復(fù)的成功率、數(shù)據(jù)增

9、長(zhǎng)情況、介質(zhì)利用率做及時(shí)、全面、易讀的了解n無(wú)法使各級(jí)人員掌握各自需要的信息n系統(tǒng)越來越多，能否實(shí)現(xiàn)主動(dòng)式運(yùn)維和自助式服務(wù)，減少工作量？ 功能擴(kuò)展問題及風(fēng)險(xiǎn)n傳統(tǒng)備份軟件只是專門用于數(shù)據(jù)備份恢復(fù)的一個(gè)工具而已n輕量級(jí)數(shù)據(jù)復(fù)制、重復(fù)數(shù)據(jù)刪除、海量文件、虛擬化管理、桌面管理、郵件歸檔合規(guī)等各自需要專門的工具，復(fù)雜度越來越大n如何把數(shù)據(jù)在“兩地三中心”有效的傳輸、不同時(shí)間的保留、恢復(fù)、演練18從一個(gè)系統(tǒng)管理員的角度進(jìn)行分析目前現(xiàn)狀 祈禱小概率事件不會(huì)發(fā)生 繁雜的日常維護(hù)工作 大量的緊急事件需要處理 無(wú)法全面統(tǒng)計(jì)和預(yù)測(cè)數(shù)據(jù)增長(zhǎng)核心交易系統(tǒng)數(shù)據(jù)庫(kù)需要恢復(fù)到清算前！1.融資融券需要增加快照保護(hù)2.某影像數(shù)

10、據(jù)需要延長(zhǎng)保留3.*本周五財(cái)務(wù)系統(tǒng)恢復(fù)演練1.備份數(shù)據(jù)所占存儲(chǔ)空間2.目前介質(zhì)使用情況3.明年存儲(chǔ)擴(kuò)容多少？需要再買多少介質(zhì)？下周一要給老板！ 最佳實(shí)踐方案 多級(jí)保護(hù)、檢驗(yàn)和演練機(jī)制避免小概率事件 統(tǒng)一界面、統(tǒng)一策略、統(tǒng)一報(bào)告，實(shí)現(xiàn)維護(hù)自動(dòng)化 日常維護(hù)流程化，加強(qiáng)預(yù)檢機(jī)制減少緊急事件的產(chǎn)生 全面的統(tǒng)計(jì)和預(yù)測(cè)報(bào)告，實(shí)現(xiàn)數(shù)據(jù)管理規(guī)范化Commvault解決之道20數(shù)據(jù)管理最佳實(shí)踐 - 四個(gè)現(xiàn)代化 管理界面友好、全圖形化配置界面、備份/恢復(fù)無(wú)需腳本，從而釋放對(duì)當(dāng)事人的依賴、完善的報(bào)告和監(jiān)控機(jī)制等簡(jiǎn)單易用 備份數(shù)據(jù)要有多份保留（本地、同城和異地） 備份數(shù)據(jù)完整、保存安全、可恢復(fù)驗(yàn)證 自動(dòng)化恢復(fù)演練有效

11、存放 完善的權(quán)限管理，從各個(gè)數(shù)據(jù)層面保證數(shù)據(jù)安全、加密管理、角色管理 審計(jì)篩選、審計(jì)跟蹤權(quán)限控制 時(shí)間窗口管理、報(bào)告和監(jiān)控管理、存儲(chǔ)設(shè)備管理、數(shù)據(jù)保護(hù)管理、數(shù)據(jù)保留管理、介質(zhì)管理、容量規(guī)劃和預(yù)測(cè)規(guī)范化等管理規(guī)范21整體數(shù)據(jù)管理方案概覽優(yōu)化備份架構(gòu)，結(jié)合權(quán)限集中管理。簡(jiǎn)化和安全管理?？焖俑咝ПＷo(hù)和顆粒度恢復(fù)。確保核心系統(tǒng)SLA。數(shù)據(jù)生命周期管理。降低存儲(chǔ)成本。多中心統(tǒng)一管理和自動(dòng)化災(zāi)難演練。集中監(jiān)控和確保合規(guī)。如何優(yōu)化備份架構(gòu)？ 23生產(chǎn)中心傳統(tǒng)備份系統(tǒng)的架構(gòu)備份服務(wù)器介質(zhì)服務(wù)器客戶端代理索引備份服務(wù)器介質(zhì)服務(wù)器客戶端備份服務(wù)器介質(zhì)服務(wù)器客戶端雙活中心/災(zāi)備中心備份服務(wù)器介質(zhì)服務(wù)器客戶端管理復(fù)雜

12、重復(fù)投資無(wú)法共享難以監(jiān)管24分布式、兩級(jí)索引機(jī)制橫向擴(kuò)展MAMAMAMAMA更大范圍中心分支機(jī)構(gòu)分支機(jī)構(gòu) 更大規(guī)范地?cái)U(kuò)展：一個(gè)管理域能實(shí)現(xiàn)對(duì)10000臺(tái)物理機(jī)，20000+虛擬機(jī)或桌面管理 可分布于廣域網(wǎng)：?jiǎn)我粋浞萦驅(qū)崿F(xiàn)多個(gè)數(shù)據(jù)中心的集中管理 數(shù)據(jù)自描述格式：數(shù)據(jù)和索引存放在一個(gè)拷貝中，便于傳輸和恢復(fù)25集中整合數(shù)據(jù)資產(chǎn)任意數(shù)據(jù)源任意存儲(chǔ)任意平臺(tái)和數(shù)據(jù)中心26核心業(yè)務(wù)虛擬化備份域1備份域2備份域3OA/財(cái)務(wù)統(tǒng)一備份架構(gòu)助您整合備份資源各業(yè)務(wù)系統(tǒng)分權(quán)管理滿足多用戶管理需求備份資源池共享，節(jié)約存儲(chǔ)成本備份數(shù)據(jù)可管理人員成本維護(hù)成本硬件成本TCO降低50%+27Commvault用戶權(quán)限控制示例權(quán)限

13、控制設(shè)計(jì)Commvault統(tǒng)一管理平臺(tái)本地?cái)?shù)據(jù)中心系統(tǒng)管理員組配置/修改備份操作報(bào)告收集應(yīng)用管理員組恢復(fù)操作本組主機(jī)查看/報(bào)告審計(jì)管理員組查看報(bào)告查看審計(jì)日志同城/異地?cái)?shù)據(jù)中心兩地三中心通過Commvault統(tǒng)一管理統(tǒng)一管理根據(jù)業(yè)務(wù)劃分業(yè)務(wù)維護(hù)小組業(yè)務(wù)分組根據(jù)級(jí)別劃分管理員權(quán)限權(quán)限分級(jí)28權(quán)限管理分組權(quán)限管理建議 圖形化實(shí)現(xiàn)按照業(yè)務(wù)組來劃分計(jì)算機(jī)計(jì)算機(jī)組用中文標(biāo)識(shí)，容易識(shí)別避免字母簡(jiǎn)稱重復(fù)按照職能和業(yè)務(wù)組劃分用戶組權(quán)限融資融券組投資管理組融資融券瀏覽用戶融資融券管理員瀏覽融資融券備份用戶融資融券恢復(fù)用戶恢復(fù)瀏覽如何滿足業(yè)務(wù)系統(tǒng)不同的SLA保護(hù)需求？ 30不同SLA的數(shù)據(jù)管理策略服務(wù)級(jí)別應(yīng)用類型

14、數(shù)據(jù)特點(diǎn)核心保險(xiǎn)業(yè)務(wù)系統(tǒng)，理賠，電話銷售核心數(shù)據(jù)庫(kù)Oracle/DB2為主二級(jí)OA, 財(cái)務(wù), CMS渠道管理 輕量數(shù)據(jù)庫(kù)和應(yīng)用三級(jí)影像，打印，客服海量非結(jié)構(gòu)化文件為主核心2-4h RPO/RTO結(jié)合存儲(chǔ)快照去重備份到磁盤定期檢驗(yàn)快照 24h磁盤 30d異地 15y二級(jí)24h RPO/RTO天級(jí)備份恢復(fù)磁盤 7d磁帶 60d三級(jí)48h+ RPO/RTO歸檔保護(hù)，分級(jí)存儲(chǔ)磁帶 - 30 天31保險(xiǎn)行業(yè)數(shù)據(jù)多級(jí)保護(hù)建議恢復(fù)層保護(hù)層法規(guī)層應(yīng)用層客戶端業(yè)務(wù)系統(tǒng)生產(chǎn)層磁帶庫(kù)快照克隆卷同城/異地鏡像復(fù)制本地存儲(chǔ)異地災(zāi)備同城災(zāi)備CAS云存儲(chǔ)Vaulting核心系統(tǒng)核心系統(tǒng)1.實(shí)時(shí)鏡像2.硬件快照（每2小時(shí)一次

15、，保留一周）3.快照克?。刻煲淮危┒?jí)系統(tǒng)二級(jí)系統(tǒng)三級(jí)系統(tǒng)三級(jí)系統(tǒng)數(shù)據(jù)快照快照快速恢復(fù)多級(jí)保留法規(guī)遵循備份1.快照備份（每天一次）2.去重傳送3.多級(jí)保留歸檔1.滿足法規(guī)2.加密運(yùn)輸3.定期校驗(yàn)1.軟件快照保護(hù)（每4小時(shí)一次，保留一周）1.數(shù)據(jù)歸檔2.傳統(tǒng)備份3.去重傳送4.多級(jí)保留1.定期校驗(yàn)2.加密保護(hù)無(wú)需該級(jí)別保護(hù)1.傳統(tǒng)備份2.多級(jí)保留1.介質(zhì)管理所有業(yè)務(wù)數(shù)據(jù)都需要備份保護(hù)！32CMD_STR=ORACLE_HOME=$ORACLE_HOMEexport ORACLE_HOMEORACLE_SID=$ORACLE_SIDexport ORACLE_SID$RMAN target $T

16、ARGET_CONNECT_STR nocatalog msglog $RMAN_LOG_FILE append 幾百GB-TB/H備份介質(zhì)數(shù)據(jù)卷影像文件電銷，客服等錄音文件SAN/LAN卷級(jí)/顆粒度恢復(fù)：小顆?；謴?fù)、可恢復(fù)單個(gè)文件可快速 恢復(fù)整卷可結(jié)合數(shù)據(jù)去重非結(jié)構(gòu)化數(shù)據(jù)高性能備份恢復(fù)41測(cè)試成果 與傳統(tǒng)備份方式相比快10倍以上測(cè)試環(huán)境nCPU：16個(gè)，內(nèi)存：14GB，系統(tǒng)版本：windowsn測(cè)試數(shù)據(jù)量近800GB，平均單個(gè)文件大小約20KB，估算文件數(shù)4千萬(wàn)備份數(shù)據(jù)總量備份類型平均備份速度預(yù)估完成時(shí)間近800GBBLB塊級(jí)備份386GB/小時(shí)（110MB/秒）2小時(shí)30分鐘近800GBF

17、ileSystem文件備份38.3GB/小時(shí)（10.9MB/秒）21小時(shí)結(jié)論：對(duì)于海量小文件類型的數(shù)據(jù)備份，通過塊級(jí)備份方式，可以將備份時(shí)間縮短為文件級(jí)備份的十分之一，備份效率顯著。42如何對(duì)文件進(jìn)行分層歸檔？ 設(shè)定一個(gè)時(shí)間線，把文件分成常用數(shù)據(jù)和歷史數(shù)據(jù)兩個(gè)部分 定期進(jìn)行歸檔操作,把歷史文件存放于歸檔存儲(chǔ) 歸檔后的文件在原處可留下存根 用戶訪問存根，歸檔文件自動(dòng)回調(diào) 歸檔后，只需要對(duì)常用數(shù)據(jù)進(jìn)行備份。大大減少備份數(shù)據(jù)量。 只要恢復(fù)常用數(shù)據(jù)，系統(tǒng)就能工作，大大降低恢復(fù)時(shí)間歷史數(shù)據(jù)歸檔卷文件存根常用數(shù)據(jù)歷史數(shù)據(jù)歸檔回調(diào)主存儲(chǔ)歸檔存儲(chǔ)0到1年1到N年 獨(dú)家支持將文件直接歸檔到磁帶庫(kù)，節(jié)約文件保存的

18、成本43數(shù)據(jù)分層存儲(chǔ)策略1年以內(nèi)1年3年3年以上備份歸檔同步歸檔影像，電銷等在線近線離線在線文件歸檔存根歸檔存根備份文件歸檔文件歸檔文件44數(shù)據(jù)恢復(fù)操作1年以內(nèi)1年3年3年以上恢復(fù)恢復(fù)回調(diào)近線離線在線文件歸檔存根歸檔存根備份文件歸檔文件歸檔文件回調(diào)影像，電銷等在線45文件歸檔46虛擬化生命周期管理一覽（VMware/Hyper-v/XenServer/Amazon/Azure）虛擬機(jī)生命周期配置供給運(yùn)維保護(hù)恢復(fù)回收設(shè)置基礎(chǔ)架構(gòu)和存儲(chǔ)池創(chuàng)建和部署虛擬機(jī)虛擬機(jī)模板分類用戶分配監(jiān)控使用情況負(fù)載和性能報(bào)告完整虛擬機(jī)恢復(fù)文件級(jí)別恢復(fù)Apps級(jí)別恢復(fù)Datastores 級(jí)別恢復(fù)Sites級(jí)別恢復(fù)關(guān)閉電源

19、 虛擬機(jī)歸檔刪除虛擬機(jī)保留目標(biāo)索引內(nèi)容索引虛擬機(jī)活動(dòng)恢復(fù)跨虛擬化平臺(tái)恢復(fù)自動(dòng)探尋分類CBT擴(kuò)展功能全局去重多流備份快照集成REST APISelf-ServiceTenant-basedCostingCloud-awareCloud-awareV-Ops teamMSPMulti-PlatformClusteredSimpana 10 (Now)市場(chǎng)狀態(tài)47快速部署管理云虛擬機(jī)/云生命周期管理架構(gòu)備份副本磁盤磁帶云存儲(chǔ)DataStore虛擬層物理層快照/去重備份，永久增量虛機(jī)復(fù)制無(wú)需恢復(fù)，直接運(yùn)行離線歸檔在線遷移AWS,Azure遷移部署恢復(fù)到云上快速部署管理虛機(jī)跨平臺(tái)恢復(fù)電源管理48生命周期

20、管理-自動(dòng)遷移虛擬機(jī)來自ESG統(tǒng)計(jì)：30-40% VM在生成后很少使用或閑置不用？ VM 生命周期APPOSAPPOSAPPOSAPPOSAPPOSAPPOSAPPOS備份和恢復(fù)APPOSCPUMEMAPPOSFind idle VMs and power off1 1APPOSAPPOSAPPOSAPPOSShift image to cheaper store2 2$APPOSArchive image off production3 3APPOSAPPOSAPPOST1T2Prod Storage 空間回收 快速恢復(fù) 減低TCO 支持VMware/MS Hyper-V/Amazon/Az

21、ure如何實(shí)現(xiàn)多中心集中管理和監(jiān)控？ 50多中心數(shù)據(jù)管理現(xiàn)狀和問題多套備份域 獨(dú)立管理多個(gè)孤島無(wú)法共享資源維護(hù)升級(jí)復(fù)雜存儲(chǔ)依賴依賴存儲(chǔ)硬件技術(shù)實(shí)現(xiàn)要求同構(gòu)，成本高被長(zhǎng)期綁定異地?cái)?shù)據(jù)難以 管理數(shù)據(jù)的有效性驗(yàn)證自動(dòng)演練困難恢復(fù)成功率低成本問題帶寬如何節(jié)??？如何限制帶寬？存儲(chǔ)成本高51Commvault Simpana 多中心數(shù)據(jù)管理自動(dòng)恢復(fù)演練 純軟件重復(fù)數(shù)據(jù)刪除，降低帶寬和存儲(chǔ)成本。結(jié)合分組權(quán)限管理，滿足多業(yè)務(wù)多部門管理需求，安全可靠。一套系統(tǒng)管理多各中心，集中管理和監(jiān)控，實(shí)現(xiàn)資源共享。52工作流自動(dòng)化管理Commvault數(shù)據(jù)異地快速恢復(fù) - 異地快速恢復(fù)本地?cái)?shù)據(jù)中心 異地?cái)?shù)據(jù)中心Datast

22、ore PoolDatastore Pool數(shù)據(jù)保護(hù)技術(shù)Source Dedupe IntelliSnap (HW Snaps) P2V保護(hù) 自動(dòng)恢復(fù)演練 即刻恢復(fù)DASH COPY純軟件去重復(fù)制存儲(chǔ)復(fù)制（NetApp/EMC/HDS)集中報(bào)告管理53內(nèi)置重復(fù)數(shù)據(jù)刪除技術(shù)原數(shù)據(jù)集合邏輯視圖物理存儲(chǔ)重復(fù)數(shù)據(jù)刪重復(fù)數(shù)據(jù)刪除除節(jié)省大量磁盤空間！ 內(nèi)置第四代重復(fù)數(shù)據(jù)刪除功能 與硬件設(shè)備無(wú)關(guān)，無(wú)需專用設(shè)備 支持源端、目標(biāo)端方式重刪 獨(dú)家支持將重刪后數(shù)據(jù)寫入磁帶54Commvault重刪技術(shù)的優(yōu)勢(shì)說明 去重算法n 大部分廠商采用MD5和SHA-1，Commvault采用SHA-512，安全性更高 定長(zhǎng)塊n

23、 Commvault采用128K默認(rèn)定長(zhǎng)塊，可根據(jù)情況在32KB、64KB、128KB、 256KB和512KB之間調(diào)整 自身的高可靠性n 系統(tǒng)會(huì)對(duì)重刪庫(kù)（DDB）自動(dòng)進(jìn)行定時(shí)備份n 數(shù)據(jù)恢復(fù)不需要查詢重刪庫(kù)（DDB），提高數(shù)據(jù)恢復(fù)速度，保證數(shù)據(jù)的可恢復(fù)性 其他高級(jí)功能n 去重?cái)?shù)據(jù)傳輸（DASH Copy）n 去重?cái)?shù)據(jù)合成全備份（DASH Full）n 去重到磁帶（SILO）n 全局重刪55多數(shù)據(jù)中心數(shù)據(jù)保留管理統(tǒng)一數(shù)據(jù)保留備份數(shù)據(jù)保留周期在存儲(chǔ)策略（SP）中設(shè)定數(shù)據(jù)中心SP-SP-業(yè)務(wù)數(shù)據(jù)業(yè)務(wù)數(shù)據(jù)Copy 1Copy 1MA:數(shù)據(jù)中心介質(zhì):磁盤保留:15天同城災(zāi)備異地災(zāi)備SP-SP-業(yè)務(wù)數(shù)據(jù)

24、業(yè)務(wù)數(shù)據(jù)Copy 2Copy 2MA:災(zāi)備中心介質(zhì):磁盤保留:30天SP-SP-業(yè)務(wù)數(shù)據(jù)業(yè)務(wù)數(shù)據(jù)Copy 4Copy 4MA:數(shù)據(jù)中心介質(zhì):磁帶保留:永久SP-SP-業(yè)務(wù)數(shù)據(jù)業(yè)務(wù)數(shù)據(jù)Copy 5Copy 5MA:數(shù)據(jù)中心介質(zhì):磁帶保留:20年SP-SP-業(yè)務(wù)數(shù)據(jù)業(yè)務(wù)數(shù)據(jù)Copy 3Copy 3MA:數(shù)據(jù)中心介質(zhì):磁盤保留:30天56Commvault分支機(jī)構(gòu)數(shù)據(jù)管理n 在窄帶寬上傳輸大量備份數(shù)據(jù)n重復(fù)數(shù)據(jù)刪除功能、網(wǎng)絡(luò)帶寬控制功能n 數(shù)據(jù)中心管理員能隨時(shí)知道每個(gè)分行機(jī)構(gòu)數(shù)據(jù)備份/恢復(fù)情況n實(shí)時(shí)狀態(tài)、歷史數(shù)據(jù)、發(fā)展趨勢(shì)n 輕松實(shí)現(xiàn)備份數(shù)據(jù)的異地保存n總部數(shù)據(jù)中心作為分支機(jī)構(gòu)的備份中心n 充分實(shí)現(xiàn)

25、資源共享n數(shù)據(jù)交換；設(shè)備共享；管理共享CS數(shù)據(jù)中心數(shù)據(jù)中心iDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDa分行分行57全面、完善的磁帶介質(zhì)管理磁帶介質(zhì)、驅(qū)動(dòng)器等設(shè)備在使用過程中，故障次數(shù)達(dá)到指定的閾值，會(huì)自動(dòng)提示用戶通過實(shí)時(shí)監(jiān)控磁帶介質(zhì)的使用狀態(tài)，避免數(shù)據(jù)備份到有問題的磁帶中，保證備份數(shù)據(jù)的有效性58磁帶介質(zhì)刷新 介質(zhì)刷新的作用nMedia Refresh技術(shù)（也可稱作：磁帶翻錄）是可以幫助用戶把舊磁帶（已達(dá)到淘汰閥值）的內(nèi)容翻錄到新的磁帶中，

26、或者將老型號(hào)磁帶（如LTO-4）翻錄到新型號(hào)磁帶（LTO-5）中，實(shí)現(xiàn)轉(zhuǎn)存和長(zhǎng)期保留的目的 介質(zhì)刷新的方法n手工介質(zhì)刷新n 利用GUI界面，手工進(jìn)行磁帶刷新操作，刷新對(duì)象是指定的磁帶n批量介質(zhì)刷新n 制定好計(jì)劃策略，自動(dòng)批量刷新磁帶，刷新對(duì)象是滿足刷新條件的磁帶n輔助拷貝刷新n 利用輔助拷貝操作，復(fù)制磁帶，達(dá)到磁帶刷新的目的59磁帶介質(zhì)校驗(yàn) 介質(zhì)校驗(yàn)的作用n定期對(duì)長(zhǎng)期保存的磁帶介質(zhì)進(jìn)行介質(zhì)校驗(yàn)，避免磁帶介質(zhì)因?yàn)闇囟?、濕度等環(huán)境原因造成消磁、粘連，導(dǎo)致數(shù)據(jù)丟失 介質(zhì)校驗(yàn)的方法n可選擇全部或指定的介質(zhì)n可配置計(jì)劃，自動(dòng)執(zhí)行60合規(guī)管理自動(dòng)恢復(fù)演練管理監(jiān)控操作自動(dòng)演練操作人員管理員經(jīng)理腳本操作其他備

27、份軟件關(guān)注數(shù)據(jù)恢復(fù)管理關(guān)注數(shù)據(jù)備份操作設(shè)計(jì)理念：Commvault審計(jì)監(jiān)控管理人工演練61磁帶數(shù)據(jù)校驗(yàn) 數(shù)據(jù)校驗(yàn)的作用n當(dāng)數(shù)據(jù)備份/歸檔到磁帶介質(zhì)上后，在數(shù)據(jù)恢復(fù)之前并不能確認(rèn)數(shù)據(jù)是否能有效恢復(fù)n通過數(shù)據(jù)校驗(yàn)，可檢測(cè)數(shù)據(jù)的正確性，確?；謴?fù)和輔助拷貝操作成功 數(shù)據(jù)校驗(yàn)的方法n數(shù)據(jù)校驗(yàn)是以存儲(chǔ)策略為對(duì)象來進(jìn)行的n可選擇全部或指定的拷貝n可配置計(jì)劃，自動(dòng)執(zhí)行62磁帶介質(zhì)刷新 介質(zhì)刷新的作用nMedia Refresh技術(shù)（也可稱作：磁帶翻錄）是可以幫助用戶把舊磁帶（已達(dá)到淘汰閥值）的內(nèi)容翻錄到新的磁帶中，或者將老型號(hào)磁帶（如LTO-4）翻錄到新型號(hào)磁帶（LTO-5）中，實(shí)現(xiàn)轉(zhuǎn)存和長(zhǎng)期保留的目的 介質(zhì)

28、刷新的方法n手工介質(zhì)刷新n 利用GUI界面，手工進(jìn)行磁帶刷新操作，刷新對(duì)象是指定的磁帶n批量介質(zhì)刷新n 制定好計(jì)劃策略，自動(dòng)批量刷新磁帶，刷新對(duì)象是滿足刷新條件的磁帶n輔助拷貝刷新n 利用輔助拷貝操作，復(fù)制磁帶，達(dá)到磁帶刷新的目的63磁帶介質(zhì)跟蹤管理 Vault TrackernVault Tracker是介質(zhì)運(yùn)輸及倉(cāng)儲(chǔ)管理方案，用于管理和跟蹤來回運(yùn)輸及倉(cāng)儲(chǔ)在異地的磁帶n通過定義跟蹤管理策略，可實(shí)現(xiàn)自動(dòng)跟蹤管理 基本功能n按策略識(shí)別需要倉(cāng)儲(chǔ)到異地或從異地召回的磁帶n自動(dòng)從磁帶庫(kù)中按順序移動(dòng)介質(zhì)，并生成介質(zhì)提取列表n識(shí)別并跟蹤磁帶運(yùn)輸過程n記錄并跟蹤那些不再使用或外部介質(zhì)n當(dāng)采用容器搬運(yùn)或倉(cāng)儲(chǔ)磁

29、帶時(shí)，記錄并跟蹤容器的信息磁帶倉(cāng)儲(chǔ)管理64CommVault自動(dòng)化恢復(fù)驗(yàn)證平臺(tái)流程圖65基于權(quán)限的圖形化報(bào)告 系統(tǒng)管理報(bào)告通過郵件定時(shí)分發(fā)給不同的管理人員65業(yè)務(wù)人員會(huì)收到相關(guān)系統(tǒng)的備份摘要報(bào)告管理員會(huì)收到所有系統(tǒng)的摘要報(bào)告和預(yù)檢報(bào)告IT經(jīng)理會(huì)收到月度備份和恢復(fù)成功率報(bào)告審計(jì)部門每季度收到系統(tǒng)的操作審計(jì)報(bào)告?zhèn)浞葑鳂I(yè)摘要報(bào)告08:00備份作業(yè)摘要報(bào)告08:00備份預(yù)檢報(bào)告16:00備份/恢復(fù)成功率月報(bào)08:00操作審計(jì)季度報(bào)告08:00恢復(fù)作業(yè)摘要報(bào)告10:00介質(zhì)使用報(bào)告09:00備份窗口使用報(bào)告10:00數(shù)據(jù)增長(zhǎng)情況年報(bào)10:00備份空間需求預(yù)測(cè)報(bào)告11:00保護(hù)覆蓋情況審計(jì)10:0066中

30、文、圖形化文件分析圖表67完善的中文、可定制、圖形化報(bào)表68客戶端SLA報(bào)告系統(tǒng)類型數(shù)量Windows客戶端2Linux/Unix58DB2 客戶端(P+V)/實(shí)例60/27SQL 客戶端(P+V)/實(shí)例3/1Vcenter 10VM291l 根據(jù)實(shí)際情況設(shè)定合理的SLA: 如果低于預(yù)設(shè)值說明某些客戶端沒有備份計(jì)劃或 30天內(nèi)沒有成功的作業(yè)l 短期備份趨勢(shì)報(bào)告: 最近2兩周的備份統(tǒng)計(jì).69數(shù)據(jù)增長(zhǎng)變化趨勢(shì)報(bào)告l 平均流數(shù)對(duì)應(yīng)的磁盤和磁帶性能統(tǒng)計(jì): (Per Stream) 周末全量備份能夠充分利用磁盤和磁帶, 體現(xiàn)更好的性能 l 數(shù)據(jù)量Top2570存儲(chǔ)資源利用率報(bào)告l 磁盤庫(kù)使用率l 整體去

31、重比率71云存儲(chǔ)備份 備份模式：D2D2C，保留本地副本，提高系統(tǒng)性能和RTO 架構(gòu)特點(diǎn)：本地保留去重?cái)?shù)據(jù)庫(kù)DDB和備份索引緩存 數(shù)據(jù)傳輸：去重?cái)?shù)據(jù)傳輸至云存儲(chǔ)并加密IndexCacheDDB-1本地副本DDB-2云副本HTTP / REST- Cloud Resources去重?cái)?shù)據(jù)加密后復(fù)制到云存儲(chǔ)介質(zhì)服務(wù)器備份歸檔快照備份復(fù)制高性價(jià)比的遠(yuǎn)程災(zāi)難備份方案72Commvault支持的云存儲(chǔ)接口云存儲(chǔ)廠商詳細(xì)介紹HuaWei http:/ S3 http:/ Synaptic Storage https:/ Caringo CAStor http:/ DX Object Storage Plat

32、form http:/ http:/ Atmos http:/ Hitachi Content Platform http:/ http:/ Azure Storage http:/ Nirvanix MFS http:/ Rackspace Cloud Files http:/ OpenStack Object Storage /73連續(xù)數(shù)據(jù)復(fù)制（CDR）CDR捕獲寫入文件系統(tǒng)的變化字節(jié)，存于后臺(tái)復(fù)制隊(duì)列用異步傳輸把隊(duì)列復(fù)制到目標(biāo)端回放，把數(shù)據(jù)寫入到目標(biāo)文件系統(tǒng)定時(shí)在應(yīng)用上創(chuàng)建應(yīng)用一致點(diǎn) ，當(dāng)應(yīng)用一致點(diǎn)復(fù)制到目標(biāo)端時(shí)，在目標(biāo)端啟動(dòng)快照，記錄應(yīng)用一

33、致點(diǎn)數(shù)據(jù)卷可以選擇把快照卷上數(shù)據(jù)備份到磁盤或磁帶或云存儲(chǔ)，進(jìn)行較長(zhǎng)時(shí)間保留支持應(yīng)用：文件系統(tǒng)、Oracle、SQL支持OS：Windows，Linux，UnixCDR文件系統(tǒng)復(fù)制對(duì)應(yīng)用CDR文件系統(tǒng)復(fù)制隊(duì)列應(yīng)用一致快照應(yīng)用一致點(diǎn)源端目標(biāo)端備份一個(gè)流程實(shí)現(xiàn)復(fù)制+快照+備份74邊緣數(shù)據(jù)云保護(hù)服務(wù)備份/恢復(fù)，同步l 自動(dòng)保護(hù)策略l 源端去重l 同步 設(shè)備間文件同步l 共享 用戶間共享，郵件共享l 云盤 多設(shè)備及用戶共享Content Storel 去重l 加密l 隱私管理l 內(nèi)容索引l 統(tǒng)計(jì)分析l 權(quán)限控制法規(guī)搜索WEB & 嵌入式訪問l Windows & Outlookl 瀏覽/

34、發(fā)現(xiàn)/讀取隨處訪問l 瀏覽/發(fā)現(xiàn)/讀取l 下載作為附件發(fā)送l Save to Store 從設(shè)備端推送文件Windows 7,8MAC OSLinux支持的平臺(tái)網(wǎng)絡(luò)流量調(diào)節(jié)，帶寬管理支持源端去重（SSDD）支持https和代理服務(wù)器網(wǎng)絡(luò)管理備份數(shù)據(jù)內(nèi)容索引資源統(tǒng)計(jì)分析eDiscovery數(shù)據(jù)中心和邊緣數(shù)據(jù)備份采用一套方案，共享存儲(chǔ)及服務(wù)器用戶能采用自助服務(wù)，支持移動(dòng)設(shè)備訪問，云盤及共享備份數(shù)據(jù)加密、權(quán)限控制、隱私管理其他方面案例和總結(jié)76馬士基集團(tuán)簡(jiǎn)介 130個(gè)國(guó)家, 89,000 員工, 470億美金營(yíng)收 (2013)n 全球 400+ 分支機(jī)構(gòu)n 10 個(gè)業(yè)務(wù)大區(qū)n 5大業(yè)務(wù)集團(tuán)n 100

35、+ 合資公司n 1994-2014， 三次大型業(yè)務(wù)并購(gòu)n 七次大規(guī)模業(yè)務(wù)重組77馬士基集團(tuán)利用Commvault實(shí)現(xiàn)統(tǒng)一數(shù)據(jù)管理平臺(tái)n 全球數(shù)據(jù)中心及分支機(jī)構(gòu)n 全部數(shù)據(jù)類型 （操作系統(tǒng)，文件系統(tǒng)，郵件，數(shù)據(jù)庫(kù)，郵件，虛擬機(jī)）n 2.6PB 數(shù)據(jù) （數(shù)據(jù)中心 1.8PB，分支機(jī)構(gòu) 800TB）n 全球統(tǒng)一管理，沒有本地磁帶！n 整個(gè)統(tǒng)一數(shù)據(jù)管理平臺(tái)管理人員：2人n 與其它系統(tǒng)管理平臺(tái)完美整合78成功案例: UBS瑞士聯(lián)合銀行 遍布50+國(guó)家95個(gè)分行 應(yīng)用環(huán)境：n Oraclen Sybasen SQLn 從NBU管理的15000+客戶端遷移 單一備份域管理7879成功案例：國(guó)內(nèi)某大型保險(xiǎn)公司

36、 深圳，上海兩中心 電銷錄音系統(tǒng)nNetApp+HDS BlueArcn100TB+ 之前：n NBU備份+業(yè)務(wù)人員定期刪除 之后：n OnePass一步式備份+歸檔n 業(yè)務(wù)人員存根回調(diào)80用戶體驗(yàn)比較 歸檔數(shù)據(jù)查詢之前：手工查詢歷史數(shù)據(jù)的過程座席給管理員發(fā)郵件，請(qǐng)求查詢歷史錄音數(shù)據(jù)管理員從歸檔磁盤中去查找錄音文件 之后：自動(dòng)化查詢歷史數(shù)據(jù)的過程管理員把找到的錄音文件拷貝到在線存儲(chǔ)管理員發(fā)郵件通知座席耗時(shí)2小時(shí)到幾十小時(shí)耗時(shí)=5分鐘系統(tǒng)自動(dòng)從歸檔磁盤或磁帶回調(diào)錄音文件事件組界面直接操作訪問歸檔存根觸發(fā)回調(diào)指令81成功案例：光大永明保險(xiǎn)系統(tǒng)級(jí)別數(shù)據(jù)類型作業(yè)信息管理策略觸發(fā)點(diǎn)方式運(yùn)行 窗口位置保留

37、時(shí)間數(shù)據(jù)校驗(yàn)恢復(fù)測(cè)試一級(jí)數(shù)據(jù)庫(kù)每天晚全備份8本 地 備份磁盤1周每周3個(gè)月每天中午備份日志1本 地 備份磁盤1周無(wú)3個(gè)月應(yīng)用程序變更前后全備份8本 地 備份磁盤1周每周3個(gè)月文件每天晚備份8本 地 備份磁盤1周每周3個(gè)月二級(jí)數(shù)據(jù)庫(kù)每天晚全備份8本 地 備份磁盤1周2周3個(gè)月應(yīng)用程序變更前后全備份8本 地 備份磁盤1周2周3個(gè)月8282技術(shù)對(duì)比Commvault Simpana Vertias NBUEMC BRSIBM TSM數(shù)據(jù)管理功能數(shù)據(jù)分析、數(shù)據(jù)備份、數(shù)據(jù)歸檔、復(fù)制快照、內(nèi)容檢索、異地災(zāi)備、報(bào)告和法規(guī)遵從等。數(shù)據(jù)備份，需要與其他眾多產(chǎn)品結(jié)合，才能完成管理功能。需要多個(gè)軟硬件產(chǎn)品的堆疊實(shí)現(xiàn)類似功能。需要多個(gè)軟硬件產(chǎn)品的堆疊實(shí)現(xiàn)類似功能。索引機(jī)制集中管理的分布式索引，單域支持上萬(wàn)臺(tái)服務(wù)器和虛擬機(jī)。單一索引，單域支持?jǐn)?shù)百臺(tái)單一索引，單域支持?jǐn)?shù)百臺(tái)單一索引快照備份技術(shù)支持主流20+存儲(chǔ)廠商并提供單獨(dú)快照管理。支持主流應(yīng)用和虛擬化平臺(tái)，無(wú)腳本管理存儲(chǔ)快照。有限支持存儲(chǔ)廠商（10-），不能提供顆粒度還原，需要腳本。有限支持存儲(chǔ)廠商(EMC/NetApp），不能提供顆粒度還原，需要腳本。有限支持存儲(chǔ)廠商(IBM/NetApp），不能提供顆粒度還原，需要腳本。重復(fù)數(shù)據(jù)刪除支持并行去重，磁帶去重，擴(kuò)展到240TB；采