Commvault企業(yè)數(shù)據(jù)管理解決方案

1、 企業(yè)數(shù)據(jù)管理解決方案1Commvault公司簡介3企業(yè)數(shù)據(jù)管理現(xiàn)狀4企業(yè)數(shù)據(jù)保護容災建議2數(shù)據(jù)管理的思路5Commvault一體化管理方案優(yōu)勢公司創(chuàng)建于1996年，從AT&T貝爾實驗室分離出來全球化企業(yè)：共有2,000多員工，遍布六大洲全球共有2萬多個客戶， 40%以上為企業(yè)級客戶具有業(yè)內(nèi)最高的客戶滿意度：97%產(chǎn)品100%自主開發(fā)，沒有任何收購NASDAQ上市（ CVLT） 連續(xù)六年獲得Gartner魔力象限的領(lǐng)導者4Magic Quadrant for Enterprise Disk-based Backup/ Recovery ; by David Russell, Sheila Ch

2、ilds, Alan Dayley; January 28, 20112012 Gartner Magic Quadrant for Enterprise Backup/Recovery Software by Dave Russell, Alan Dayley, Sheila Childs, Pushan Rinnen, 11 June 20122013 Gartner Magic Quadrant for Enterprise Backup/Recovery Software, June 2013Magic Quadrant for Enterprise Backup Software a

3、nd Integrated Appliances; by David Russell, Pushan Rinnen; June 9, 2014Gartner: 2015 Magic Quadrant for Enterprise Backup Software and Integrated AppliancesSource: The Gartner Magic Quadrant for Data Center Backup and Recovery Software; June, 2016眾多業(yè)界合作伙伴5Commvault中國典型用戶6數(shù)據(jù)管理的思路不斷進化的數(shù)據(jù)中心虛擬化，云計算是必然的趨

4、勢8應用服務器網(wǎng)絡(luò)存儲物理機虛擬化私有云公有云數(shù)據(jù)分布發(fā)生改變9數(shù)據(jù)中心包含企業(yè)95%的數(shù)據(jù)資產(chǎn)當前的狀態(tài)今后的狀態(tài)數(shù)據(jù)中心40% of dataEndPoint5% of dataSaaS Apps25% of dataCloud20% of dataMobile10% of dataInternet100% of other data數(shù)據(jù)怎樣遷移？數(shù)據(jù)如何分布？怎樣管理生命周期？如何轉(zhuǎn)換數(shù)據(jù)？如何發(fā)現(xiàn)數(shù)據(jù)？如何確保數(shù)據(jù)安全？數(shù)據(jù)保護方法對比分析10RAID復制快照備份物理錯誤（47%）自然災害YESYES硬件失效YESYESYESYES邏輯錯誤（53%）人工出錯YESYES軟件失效YESY

5、ES病毒YESYES恢復點（RPO）能容忍丟失多少數(shù)據(jù)？沒丟失秒、分鐘、小時小時天恢復時間（RTO）要多長時間才能恢復實時分鐘、小時分鐘小時、天數(shù)據(jù)保留時間能恢復多久以前的數(shù)據(jù)不能不能幾小時幾天幾周、幾月幾年數(shù)據(jù)保護主要有5個目標：防止物理錯誤、防止邏輯錯誤、滿足RPO及RTO、滿足數(shù)據(jù)保留的時間，沒有一種單一的數(shù)據(jù)保護算法能同時完全滿足這5個目標。因此一個完整的虛擬機數(shù)據(jù)保護系統(tǒng)應該是多種算法結(jié)合而構(gòu)成。我們的解決方案一體化數(shù)據(jù)管理平臺11業(yè)務挑戰(zhàn)預算約束更多數(shù)據(jù)更多負載業(yè)務需求服務提供商云SaaS移動數(shù)據(jù)中心架構(gòu)革新Commvault 軟件及服務Commvault 顧問服務Commvaul

6、t 管理服務操作數(shù)據(jù)平臺統(tǒng)一索引虛擬存儲倉庫管理應用數(shù)據(jù)管理備份 & DR恢復虛擬化方案云數(shù)據(jù)方案信息保留及管理搜索及發(fā)現(xiàn)終端數(shù)據(jù)安全及保護大數(shù)據(jù)方案醫(yī)療數(shù)據(jù)方案Commvault解決方案與傳統(tǒng)數(shù)據(jù)管理方法的區(qū)別12IT 運維及管理移動業(yè)務信息保留及管理數(shù)據(jù)保護及恢復Tivoli Storage ManagerSAN Volume ControllerV3700/ 7000 & TSMFastBackSpace ManagementTSM FastBack for WorkstationsTivoli Storage Productivity CenterTivoli Monitoring f

7、or TSMSystem RecoveryBackup ReporterIBMVRTSEMCInformation ArchiveCloud Tiering ApplianceBackup and Recovery ManagerData Protection AdvisorCVLT企業(yè)數(shù)據(jù)管理現(xiàn)狀當前IT系統(tǒng)分布狀況概述服務器類型物理服務器：數(shù)據(jù)庫、文件服務器、應用服務器虛擬服務器：VMware應用分類SQLSERVER、Oracle、MySQL、MongoDB數(shù)據(jù)庫VMware海量小文件系統(tǒng)數(shù)據(jù)量數(shù)據(jù)庫約10TB、VMware虛擬機約60TB、海量小文件約8TB。網(wǎng)絡(luò)分為管理網(wǎng)、運行網(wǎng)、對

8、外接入局域網(wǎng)、互聯(lián)網(wǎng)存儲設(shè)備生產(chǎn)存儲約25套。備份存儲3套（2臺NAS，1臺EMC DD）企業(yè)數(shù)據(jù)備份現(xiàn)狀分析存儲設(shè)備多，系統(tǒng)各自獨立，管理分散。目前未有統(tǒng)一備份保護。無統(tǒng)一界面對所有系統(tǒng)的備份情況進行管理和操作。無自動化報告等。Oracle等數(shù)據(jù)庫備份恢復需要腳本操作，操作難度較高。運維管理復雜海量小文件系統(tǒng)備份速度慢，無法進行分層管理，過多無效掃描和備份。虛擬機數(shù)據(jù)量太大，備份速度慢，無法在有限時間窗口內(nèi)完成備份。總體數(shù)據(jù)量大，當前集中式備份架構(gòu)有性能瓶頸。備份性能不足當前數(shù)據(jù)備份成功率不高。沒有形成定期有效的數(shù)據(jù)校驗和恢復演練機制，無法確認備份數(shù)據(jù)有效。數(shù)據(jù)備份范圍有限，沒有全覆蓋。很多

9、應用系統(tǒng)還未納入備份。數(shù)據(jù)可靠性差當前備份軟件對海量文件系統(tǒng)的歸檔沒有對應解決方案，需要引入其他產(chǎn)品配合。若歸檔之后的數(shù)據(jù)要保留到帶庫，需要進行再次備份。當前備份軟件沒有對國產(chǎn)公有云的專用接口，無法無縫實現(xiàn)本地和云平臺的對接。擴展功能有限企業(yè)數(shù)據(jù)保護容災建議企業(yè)數(shù)據(jù)備份容災優(yōu)化建議一期規(guī)劃:實現(xiàn)本地數(shù)據(jù)保護搭建Commvault一體化數(shù)據(jù)管理平臺，集中統(tǒng)一管理，解決目前管理分散的難題。采用D2D2T的備份模式，磁盤介質(zhì)的高并發(fā)提升備份性能。長期保留的數(shù)據(jù)復制到帶庫。采用LAN備份和LANFREE備份混合的模式，且LAN備份使用專用的備份網(wǎng)絡(luò)。實現(xiàn)企業(yè)級備份保護，對現(xiàn)有的Oracle、MySQL

10、、MSSQL、Mongo等數(shù)據(jù)庫實現(xiàn)在線自動備份，對VMware虛擬機實現(xiàn)無代理方式自動備份，并采用永久增量+合成全備份的模式降低備份影響。海量小文件服務器采用備份+歸檔的數(shù)據(jù)分層管理技術(shù)，將歷史文件自動歸檔，提升備份效率。備份系統(tǒng)運維流程化、規(guī)范化、標準化。通過告警、報表、實現(xiàn)主動式運維。通過備份預檢、數(shù)據(jù)校驗、恢復演練等實現(xiàn)備份數(shù)據(jù)的可用性保證。通過用戶權(quán)限管理實現(xiàn)各站點自助服務，權(quán)限控制，操作審計等。二期規(guī)劃：實現(xiàn)異地容災考慮海關(guān)總署未來會部署云平臺，企業(yè)的核心重要本地備份數(shù)據(jù)可以通過重刪復制到云平臺，實現(xiàn)數(shù)據(jù)異地容災。并滿足總署的總體規(guī)劃要求。企業(yè)備份容災架構(gòu)建議SAN生產(chǎn)存儲企業(yè)機房

11、WindowsOracle備份服務器介質(zhì)服務器CSMAMA介質(zhì)服務器虛擬機代理VSA重刪復制備份存儲VMOracle運行網(wǎng)管理網(wǎng)MySQLVM文件服務器VMwareVMVMWindowsSQLVMwareWindowsSQLMAVSA介質(zhì)服務器虛擬機代理防火墻OSS云存儲加密REST / HTTPEMC DDMongo云平臺管理網(wǎng)新增備份管理服務器1臺，管理調(diào)度整個備份域，兼介質(zhì)服務器。管理網(wǎng)新增介質(zhì)服務器1臺，負責管理備份存儲、虛擬帶庫，數(shù)據(jù)備份傳輸，備份數(shù)據(jù)索引管理。運行網(wǎng)新增介質(zhì)服務器2臺，負責管理備份存儲、虛擬帶庫，數(shù)據(jù)備份傳輸，備份數(shù)據(jù)索引管理。企業(yè)本地機房部署備份存儲和虛擬帶庫，負

12、責本地備份數(shù)據(jù)的保留。所有物理機上部署軟件件模塊，數(shù)據(jù)庫在線備份，VMware虛擬機通過代理機實現(xiàn)無代理方式備份。遠期考慮將本地重要備份數(shù)據(jù)容災到總署公有云平臺，采用加密和重刪的等技術(shù)，保證數(shù)據(jù)的安全和高效傳輸。COMMVAULT統(tǒng)一備份域備份容災系統(tǒng)構(gòu)成說明備份服務器CS：Windows平臺服務器，建議12core,32GB內(nèi)存，內(nèi)置硬盤500GB，具有至少2張Gb網(wǎng)絡(luò)接口、2張8GB FC接口。介質(zhì)服務器MA：支持UNIX、LINUX、WINDOWS平臺服務器（本次項目建議Windows平臺服務器），需要做LAN FREE的主機需要安裝此模塊，對于VMware虛擬機備份和其他LAN 方式的

13、備份需要根據(jù)數(shù)據(jù)量和備份策略準備若干臺MA，建議12core,32GB內(nèi)存，具有2*Gb網(wǎng)絡(luò)接口、內(nèi)置硬盤500GB，2*8GB FC接口。對于磁盤介質(zhì)重刪建議配置400GB 的SSD高速磁盤作為重刪數(shù)據(jù)庫存放地。磁盤備份介質(zhì)：可新增或利舊，中低端SAN或NAS存儲空間，備份數(shù)據(jù)量的2-3倍。物理磁帶庫：若有長期保留數(shù)據(jù)的需求，建議新增物理磁帶庫進行長期保存。IP網(wǎng)絡(luò)改造建議：在生產(chǎn)機的網(wǎng)絡(luò)負載比較高的情況下如果走LAN方式備份，建議新增備份網(wǎng)卡，配置專用的備份IP地址進行備份，做到備份網(wǎng)絡(luò)和生產(chǎn)網(wǎng)絡(luò)隔離，互不影響。需要確認生產(chǎn)機是否有冗余的網(wǎng)卡。SAN網(wǎng)絡(luò)建議：涉及到新增存儲情況下，需要提前

14、規(guī)劃SAN交換機端口，端口不夠的情況下提前擴容。企業(yè)備份容災系統(tǒng)硬件配置建議角色建議配置數(shù)量機房用途備份服務器介質(zhì)服務器Windows平臺服務器，建議12core，32GB內(nèi)存，2*500GB內(nèi)置硬盤，具有至少2張Gb網(wǎng)絡(luò)接口、2*8GB FC接口。對于磁盤介質(zhì)重刪建議配置2*400G SSD高速磁盤作為重刪數(shù)據(jù)庫存放地。1企業(yè)本地機房-管理網(wǎng)管理和調(diào)度整個備份域，同時兼介質(zhì)服務器，承擔部分生產(chǎn)系統(tǒng)的數(shù)據(jù)傳輸工作。介質(zhì)服務器Windows平臺服務器，建議12core，32GB內(nèi)存，2*500GB內(nèi)置硬盤，具有至少2張Gb網(wǎng)絡(luò)接口、2*8GB FC接口。對于磁盤介質(zhì)重刪建議配置2*400G SS

15、D高速磁盤作為重刪數(shù)據(jù)庫存放地。3企業(yè)本地機房-管理網(wǎng)/運維網(wǎng)負責部分生產(chǎn)系統(tǒng)的數(shù)據(jù)傳輸，重復數(shù)據(jù)刪除，索引管理等。磁盤備份空間中低端SAN或NAS存儲，可用空間為本站點需要備份數(shù)據(jù)量的2倍以上（160TB），吞吐量不小于500MB/S若干企業(yè)本地機房存放本地數(shù)據(jù)備份虛擬帶庫空間（利舊）利舊現(xiàn)有的EMC DD設(shè)備1企業(yè)本地機房存放本地數(shù)據(jù)備份物理帶庫（可選）若有數(shù)據(jù)長期保留需求可以考慮新增1本地機房存放長期保留數(shù)據(jù)網(wǎng)卡網(wǎng)絡(luò)負載高的主機需要使用專用備份網(wǎng)卡（如沒有需要新增），配置專用的備份網(wǎng)段IP。若干本地機房實現(xiàn)備份網(wǎng)和生產(chǎn)網(wǎng)的隔離。Commvault一體化數(shù)據(jù)管理方案優(yōu)勢企業(yè)級數(shù)據(jù)保護應用感

16、知虛機感知存儲感知生產(chǎn)存儲服務器文件數(shù)據(jù)庫郵件虛擬機虛機復制主機復制存儲復制存儲快照數(shù)據(jù)備份數(shù)據(jù)歸檔智能索引運維管理存儲/索引交互訪問恢復自服務WEBLive訪問移動訪問REST安全共享虛機復制存儲復制快照服務器DR備份去重災難備份智能分析運維報告工作流編排數(shù)據(jù)加密權(quán)限管理Commvault 數(shù)據(jù)庫解決方案Commvault數(shù)據(jù)庫備份特點備份配置全圖形化，易于操作。數(shù)據(jù)庫備份LOG日志直接查看，無需登錄生產(chǎn)機。圖形化一鍵恢復到打開數(shù)據(jù)庫，無需任何腳本。圖形化管理支持備份預檢，備份前檢查網(wǎng)絡(luò)、數(shù)據(jù)庫狀態(tài)，提前發(fā)現(xiàn)備份問題，提高備份成功率支持日志自動備份，自動監(jiān)控日志空間使用率智能發(fā)起備份，防止日

17、志空間滿。增強功能表級別恢復已支持Oracle即將支持DB2、PostgreSQL、MySQL、 Informix、MS SQL、Sybase傳統(tǒng)方法Commvault 方法2: Create aux 4: Verify6: ImportImport1: Find3: RestoreBrowse5: Export大型數(shù)據(jù)庫快照備份方案26便捷地從任何層中進行恢復1.快照3.備份單一控制策略(一個控制面板進行管理)保護作業(yè)、靜默應用、觸發(fā)快照、內(nèi)容編目、報告和報警提供應用和文件級別的一致性調(diào)節(jié)跨越所有存儲層的保留周期，使存儲費用更經(jīng)濟生產(chǎn)系統(tǒng)8 AM2 PM8 PM生產(chǎn)存儲恢復層 (與存儲設(shè)備緊

18、密集成)應用一致性副本確?？焖倩謴蛢?nèi)容感知 / 編目 （后臺處理）能搜索數(shù)據(jù)并進行小顆?；謴?HR SnapCopy 保留3天4.輔助拷貝自動發(fā)現(xiàn)各種操作系統(tǒng)下的文件系統(tǒng)、數(shù)據(jù)庫、所在的卷。自動發(fā)現(xiàn)2.編目靜默應用、觸發(fā)硬件快照，創(chuàng)建具有應用一致性的快照副本，確保郵件系統(tǒng)恢復?？煺諏煺崭北局械臄?shù)據(jù)進行后臺索引，確保應用快速恢復。編目對快照進行脫機備份，備份對生產(chǎn)服務器零影響，備份可選擇重復數(shù)據(jù)刪除，提高存儲利用率。備份把重要數(shù)據(jù)拷貝到磁帶或云存儲，進行長期保存，滿足審計、法規(guī)要求。法規(guī)遵從能從恢復層、保護層和法規(guī)遵從層恢復數(shù)據(jù)，并能確保小顆?；謴??；謴蚖indows, Linux, Unix

19、MySQL, SQL, Oracle, DB2, SAP法規(guī)遵從層選擇內(nèi)容存入到費用更低的存儲，進行長期保留，提供去重、加密。提供云存儲接口保留副本 保留7年保護層 (任何磁盤存儲)每天裝載快照，備份快照內(nèi)容去重、加密、校驗每天備份副本 保留60天去重磁盤塊級別備份Block Level Backup與現(xiàn)有的Commvault備份Agent完整的結(jié)合 支持文件系統(tǒng)及應用已經(jīng)支持：Linux、Unix、Windows,已經(jīng)支持：PostgreSQL、MySQL即將支持：Oracle、MS SQL、MS Exchange、SAP Oracle、DB2、Sybase支持以下功能全備份、增量備份、合成

20、全備份、快照備份、表級恢復、數(shù)據(jù)流恢復、數(shù)據(jù)塊級恢復、原格式訪問優(yōu)勢更快備份、更快恢復、減少沖擊、原格式訪問、小顆粒讀取27生產(chǎn)服務器1. 快照2. 備份數(shù)據(jù)塊備份服務器Commvault 虛擬機解決方案全方位虛機保護方案29虛擬化環(huán)境虛機存儲服務器虛機存儲復制快照備份歸檔災難備份虛機復制存儲復制存儲快照CBT備份虛機歸檔第一層 虛機復制或存儲復制 實現(xiàn)分鐘或秒級保護第二層 本地存儲快照保護 實現(xiàn)小時級數(shù)據(jù)保護第三層 CBT備份保護 實現(xiàn)快速數(shù)據(jù)備份第四層 虛擬機歸檔 節(jié)省資源、長期保留DR備份第五層 異地災難恢復備份 防止意外災難服務器一體化數(shù)據(jù)管理平臺快速恢復 Live系列功能Live B

21、rowse即時瀏覽備份時不做文件索引，恢復時直接瀏覽VM快照、備份或歸檔中的文件，并能恢復VM中單個文件支持Windows, ext3, ext4 及其他Linux/Unix 加快小顆?；謴图涌靷浞菟俣萀ive Recovery即時恢復恢復VM時，可直接打開備份副本，加電使用VM恢復過程中的變化數(shù)據(jù)在恢復作業(yè)完成后會整合到恢復好的虛擬機中 降低RTODR恢復/沙盒Live Mount即時加載不需要恢復VM，可直接打開VM備份副本，加電使用VM運行期間變化數(shù)據(jù)不保存測試、驗證沙盒Live Sync即時同步對VM持續(xù)進行增量備份，每次備份完成后，把變化數(shù)據(jù)塊傳輸?shù)絺溆肰M，或DASH復制到DR站點

22、變化的數(shù)據(jù)塊被覆蓋到備用VM上關(guān)鍵系統(tǒng)DR滿足RPO/RTO防止虛擬機爆炸性增長管理不活躍的VM30%左右的VM創(chuàng)建后處于閑置狀態(tài)，極大浪費資源Commvault管理方法把不活躍的VM關(guān)電，回收資源把休眠的VM遷移到低成本存儲把長期休眠VM歸檔到去重存儲回調(diào)歸檔VM非常方便31有25-35%不活躍的VMs浪費資源及& LicenseStep 2: 遷移到低成本存儲回收企業(yè)級存儲Step 3: 歸檔到去重存儲回收存儲及LicenseStep 1: 自動關(guān)電釋放CPU及基礎(chǔ)架構(gòu)ZVMCommvault 海量小文件解決方案海量小文件的數(shù)據(jù)分層存儲策略1年以內(nèi)1年以上備份在線離線在線文件歸檔存根備份文

23、件歸檔文件什么是“OnePass”傳統(tǒng)數(shù)據(jù)管理方式備份、歸檔、報告需要3個軟件的3個作業(yè)進程分別來完成，對生產(chǎn)系統(tǒng)的影響很大OnePass把3個流程合并成一個流程1次全備份，永遠增量 + 合成全備份（ Dash Full）歸檔和報告在后臺完成優(yōu)勢提高性能，極大消減數(shù)據(jù)管理窗口節(jié)約存儲容易部署和管理34文件及郵件系統(tǒng)掃描收集傳輸Commvault OnePass 技術(shù)備份OnePass歸檔報告OnePass 管理文件/郵件郵件數(shù)據(jù)35文件 / Exchange系統(tǒng)OnePassDASH拷貝挑選掃描歸檔拷貝索引分析二級保護每天對選擇的文件/郵箱進行OnePass管理，在一個流程中完成增量備份、歸檔

24、及分析定時做輔助拷貝，創(chuàng)建第二冗余副本定時對歸檔/備份文件/郵件進行內(nèi)容索引按內(nèi)容檢索歸檔郵件定期執(zhí)行合成全備，刪除失效數(shù)據(jù)全備合成合成備份策略增備增備增備增備增備增備增備增備增備增備Commvault 云災備解決方案支持更多云平臺及云存儲支持的云平臺支持云系統(tǒng)HADOOP HDFSOpenStack支持的云存儲支持21種云存儲，業(yè)界排第一PhysicalMobilePrivateHybridSaaSPublic MPublic AVirtual統(tǒng)一的數(shù)據(jù)塊備份(CBT & Live Copy)支持多種應用塊級備份（CBT）支持VM、Windows/Linux/Unix文件系統(tǒng)、及部分數(shù)據(jù)庫能

25、與HW快照結(jié)合即時復制（ Live Copy ）能對變化的數(shù)據(jù)塊即時復制到備份存儲Commvault云災備方案39本地副本HTTP / REST- Cloud ResourcesDASHDR恢復/測試備份公有云（DR站點）用戶數(shù)據(jù)中心備份歸檔復制備份歸檔復制DDB-1DASH云副本去重加密后復制到云存儲DDB-2DDB-3Commvault 其他解決方案連續(xù)數(shù)據(jù)復制CDR一個流程實現(xiàn)“復制+快照+備份”41CDR捕獲寫入文件系統(tǒng)的變化字節(jié)，存于后臺復制隊列用異步傳輸把隊列中數(shù)據(jù)復制到目標端，并回放寫入到目標文件系統(tǒng)定時在服務器上創(chuàng)建應用一致點，當應用一致點復制到目標端時，在目標端啟動快照，記錄

26、應用一致點的數(shù)據(jù)卷可以選擇把快照卷上數(shù)據(jù)備份到磁盤或磁帶存儲，進行較長時間保留支持應用：文件系統(tǒng)、Oracle、SQL支持OS：Windows，Linux，Unix文件系統(tǒng)復制對應用CDR文件系統(tǒng)復制隊列應用一致快照應用一致點源端目標端CDR備份Commvault應急庫方案對于核心數(shù)據(jù)庫，為了保障應用的連續(xù)性，Commvault提供了連續(xù)數(shù)據(jù)復制的解決方案，在生產(chǎn)庫出現(xiàn)故障的情況下，應急庫能快速接管。Endpoint管理方案提供的功能終端數(shù)據(jù)備份及恢復設(shè)備丟失保護隱私管理云盤存儲/訪問文件共享及協(xié)助法規(guī)搜索及封存數(shù)據(jù)分析及報告網(wǎng)絡(luò)管理網(wǎng)絡(luò)流量調(diào)節(jié)，帶寬管理支持源端去重（SSDD）支持https和代理服務器支持平臺WindowsMAC OS X Linux43保護Endpoint同步共享搜索訪問下載內(nèi)部/外部云盤共享WEB控制臺法規(guī)搜索/封存移動APP分布式機制 更大規(guī)范地擴展：一個管理域能對上萬個客戶端進行管理 可分布于廣域網(wǎng)：能實現(xiàn)對更大地域范圍的管理44橫向擴展更大范圍