AnyBackup 5040 重復(fù)數(shù)據(jù)刪除最佳實踐資料

1、 最佳實踐 AnyBackup 最佳實踐 重復(fù)數(shù)據(jù)刪除 AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 目 錄 3概覽 . 第一章 1.1 簡介. 3 1.2 主要功能 . 3 1.2.1 設(shè)置重復(fù)數(shù)據(jù)刪除策略 . 3 1.2.2 客戶端重刪數(shù)據(jù)任務(wù)設(shè)置 . 4 1.2.3 重刪支持SSD加速 . 4 1.3 術(shù)語 . 4 1.4 重復(fù)數(shù)據(jù)刪除支持的功能 . 5 6. 第二章 限制性列表 7重復(fù)數(shù)據(jù)刪除最佳實踐 . 第三章 3.1 定時備份最佳實踐 . 7 3.1.1 命名規(guī)則說明 . 7 3.1.2 定時備份任務(wù)建立 . 8 3.1.3 配置客戶端 . 12 3.1.

2、4 重復(fù)數(shù)據(jù)刪除支持SSD加速 . 13 3.2 重刪任務(wù)恢復(fù) . 16 .17 FAQs 2 / 22 WWW.EISOO.COM 重復(fù)數(shù)據(jù)刪除最佳實踐AnyBackup 概覽第一章 簡介1.1 本文檔是愛數(shù)備份容災(zāi)家族定時備份重復(fù)數(shù)據(jù)刪除功能最佳實踐文檔，要描述了如何正確地使用愛數(shù)備份容災(zāi)家族產(chǎn)品成員開啟重復(fù)數(shù)據(jù)刪除策略備份的方法，包括部署前后的注意事 項和典型部署方案。本產(chǎn)品提供定時備份任務(wù)重復(fù)數(shù)據(jù)刪除解決方案。隨著數(shù)字信息量的爆炸式增長，數(shù)據(jù)占，發(fā)展到數(shù)百TB用空間越來越大；在過去的10年里，很多行業(yè)提供的存儲系統(tǒng)容量從數(shù)十GB。隨著數(shù)據(jù)的指數(shù)級增長，企業(yè)面臨的快速備份

3、和恢復(fù)的時間點越來越多，管理保存甚至數(shù)PB數(shù)據(jù)的成本及數(shù)據(jù)中心空間和能耗也變得越來越嚴(yán)重。研究發(fā)現(xiàn)，應(yīng)用系統(tǒng)所保存的數(shù)據(jù)中高是冗余的，而且隨著時間的推移冗余數(shù)據(jù)越來越多。為了緩解存儲系統(tǒng)的空間增長，縮 60%達(dá)減數(shù)據(jù)占用空間，降低成本，最大程度地利用已有資源，重復(fù)數(shù)據(jù)刪除技術(shù)已成為一個熱門的研究課題。一方面，利用重復(fù)數(shù)據(jù)刪除技術(shù)可以對存儲空間的利用率進(jìn)行優(yōu)化，以消除分布在存儲系統(tǒng)中的相同文件或者數(shù)據(jù)塊；另一方面，利用重復(fù)數(shù)據(jù)刪除技術(shù)可以減少在網(wǎng)絡(luò)中傳輸 的數(shù)據(jù)量，進(jìn)而降低能量消耗和網(wǎng)絡(luò)成本，并為數(shù)據(jù)復(fù)制節(jié)省大量網(wǎng)絡(luò)帶寬。1.2 主要功能 1.2.1 設(shè)置重復(fù)數(shù)據(jù)刪除策略 完全備份 一個或多個數(shù)

4、據(jù)文件組成的一個完整副本，包含從備份開始處所有的數(shù)據(jù)塊。重復(fù)數(shù)據(jù)刪除策略支持除操作系統(tǒng)定時備份任務(wù)外的所有定時備份任務(wù)在完全備份時開啟源端重復(fù)數(shù)據(jù)刪除功能。 增量備份 包含從最近一次備份以來被修改、添加或刪除的數(shù)據(jù)塊。重復(fù)數(shù)據(jù)刪除策略支持除操作系統(tǒng)定時備份任務(wù)外的所有定時備份任務(wù)在增量備份時啟用源端重復(fù)數(shù)據(jù)刪除功能。 重復(fù)數(shù)據(jù)刪除策略不支持編輯任務(wù)時修改此策略，故一旦開啟重復(fù)數(shù)據(jù)刪除的任務(wù)在執(zhí)行完全備份、增量備份、以及某些數(shù)據(jù)庫應(yīng)用的日志備份時都會保持重復(fù)數(shù)據(jù)刪除開啟的狀態(tài)。 完全備份恢復(fù) 開啟重復(fù)數(shù)據(jù)刪除功能的定時備份任務(wù)，已進(jìn)行完全備份產(chǎn)生時間點，可將用戶備份數(shù)據(jù)恢復(fù)到最新及指定時間點的狀

5、態(tài)，恢復(fù)數(shù)據(jù)正確，恢復(fù)方法依據(jù)不同定時備份任務(wù)可參照具體的定時備份應(yīng)用最佳實踐。 3 / 22 WWW.EISOO.COM 重復(fù)數(shù)據(jù)刪除最佳實踐AnyBackup 增量備份恢復(fù)可將用戶備份數(shù)已進(jìn)行增量備份產(chǎn)生時間點，開啟重復(fù)數(shù)據(jù)刪除功能的定時備份任務(wù)，恢復(fù)方法依據(jù)不同定時備份任務(wù)可參照恢復(fù)數(shù)據(jù)正確，據(jù)恢復(fù)到最新及指定時間點的狀態(tài)， 具體的定時備份應(yīng)用最佳實踐。 事物日志備份恢復(fù)可將用戶備已進(jìn)行事務(wù)日志備份產(chǎn)生時間點，開啟重復(fù)數(shù)據(jù)刪除功能的定時備份任務(wù)，恢復(fù)方法依據(jù)不同定時備份任務(wù)可恢復(fù)數(shù)據(jù)正確，份數(shù)據(jù)恢復(fù)到最新及指定時間點的狀態(tài)， 參照具體的定時備份應(yīng)用最佳實踐。某些數(shù)據(jù)庫應(yīng)用

6、存在事務(wù)日志備份。 差異備份恢復(fù)可將用戶備份數(shù)已進(jìn)行差異備份產(chǎn)生時間點，開啟重復(fù)數(shù)據(jù)刪除功能的定時備份任務(wù)，恢復(fù)方法依據(jù)不同定時備份任務(wù)可參照恢復(fù)數(shù)據(jù)正確，據(jù)恢復(fù)到最新及指定時間點的狀態(tài)， 具體的定時備份應(yīng)用最佳實踐。某些數(shù)據(jù)庫應(yīng)用存在差異備份。 客戶端重刪數(shù)據(jù)任務(wù)設(shè)置1.2.2 在【客戶端管理】的【配置客戶端】界面中提供重刪數(shù)據(jù)任務(wù)設(shè)置，用戶可以自由設(shè)置客戶端產(chǎn)生的指紋庫緩存會存儲到重刪緩存存重刪緩存存儲路徑和重刪任務(wù)內(nèi)存空間大小，目錄）；用戶可根據(jù)自己儲路徑下，如果不配置，則使用默認(rèn)值（客戶端安裝目錄appbin客戶端實際內(nèi)存大小環(huán)境設(shè)置重刪任務(wù)內(nèi)存空間大小，可提高重刪的效率，默認(rèn)大小為

7、200MB。 SSD加速1.2.3 重刪支持的高性能讀寫，以提高重刪指SSDSSD通過支持作為重刪指紋庫的存放位置，借助，RAID紋庫的查詢速度，提升重刪效率。支持針對于插入存儲柜前面板的SSD硬盤創(chuàng)建卷是用戶存放重刪指紋庫DDCacheDDCache卷”類型的卷，在此RAID上創(chuàng)建唯一的“如果要啟數(shù)據(jù)的空間，如果用戶沒有創(chuàng)建該卷，則創(chuàng)建重刪任務(wù)時啟用重刪選項將提示：“您確認(rèn)“DDCache”；如果要刪除卷，將會提示警告信息DDCache用重刪選項，請創(chuàng)建卷 ?”要刪除選擇的邏輯卷嗎1.3 術(shù)語 重復(fù)數(shù)據(jù)刪除：重復(fù)數(shù)據(jù)刪除是一種數(shù)據(jù)壓縮技術(shù)，簡稱重刪，它分為源端重復(fù)數(shù)據(jù)刪除和目的端重復(fù)數(shù)據(jù)刪除

8、。本文檔中所說的重刪默認(rèn)為源端重復(fù)數(shù)據(jù)刪除，它指的是在執(zhí)行重復(fù)數(shù)據(jù)刪除時，重復(fù)的數(shù)據(jù)在通過網(wǎng)絡(luò)發(fā)送到存儲端之前即被刪除。可對網(wǎng)絡(luò)環(huán)境中的重 4 / 22 WWW.EISOO.COM 重復(fù)數(shù)據(jù)刪除最佳實踐AnyBackup 復(fù)數(shù)據(jù)進(jìn)行識別和刪除，并將重復(fù)的數(shù)據(jù)只在存儲上保存一份的壓縮技術(shù)。該哈希值稱為數(shù)每一個數(shù)據(jù)，采用哈希算法所生成的唯一代表該數(shù)據(jù)的哈希值，指紋： 據(jù)的指紋。 指紋庫：在存儲端保存著所有數(shù)據(jù)的指紋的區(qū)域稱為指紋庫。 重刪：重復(fù)數(shù)據(jù)刪除的簡稱。1.4 重復(fù)數(shù)據(jù)刪除支持的功能 下表列出了重復(fù)數(shù)據(jù)刪除模塊所支持的功能： 功能 子功能 支 持備注 支持各種定時備份開啟 重

9、刪 數(shù)據(jù)庫定時備份Active Directory DB2數(shù)據(jù)庫定時備份 Domino Server數(shù)據(jù)庫定時備份 Exchange Server數(shù)據(jù)庫定時備份 Exchange Server高級定時備份 GBase數(shù)據(jù)庫定時備份 Hyper-V虛擬化平臺定時備份 數(shù)據(jù)庫定時備份MySQL Oracle數(shù)據(jù)庫定時備份 數(shù)據(jù)庫雙機(jī)定時備份Oracle Oracle RAC 數(shù)據(jù)庫定時備份 數(shù)據(jù)庫定時備份SQL Server SQL Server 數(shù)據(jù)庫雙機(jī)定時備份 5 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 Sybase數(shù)據(jù)庫定時備份 虛擬化

10、平臺定時備份 VMware 操作系統(tǒng)定時備份 文件系統(tǒng)定時備份 郵件定時備份 備份類型定時備份 實時備份 應(yīng)用容災(zāi) 限制性列表第二章 1、不支持操作系統(tǒng)定時備份開啟重復(fù)數(shù)據(jù)刪除功能。 、已設(shè)置重復(fù)數(shù)據(jù)刪除功能的定時備份任務(wù)不支持在編輯此任務(wù)時修改此策略。2 DDCache卷。、只能創(chuàng)建一個3 6 / 22 WWW.EISOO.COM 重復(fù)數(shù)據(jù)刪除最佳實踐AnyBackup 、刪除開啟重復(fù)數(shù)據(jù)刪除策略的任務(wù)數(shù)據(jù)時，后臺數(shù)據(jù)實際不刪除。4 控制?！爸貜?fù)數(shù)據(jù)刪除2TB”5、重刪功能的可用性受軟件授權(quán) 、配置客戶端內(nèi)存空間大小時，如果客戶并發(fā)任務(wù)多，不宜配置過大。6卷DDCacheAn

11、yBackupMediaServer服務(wù)。刪除了7、刪除DDCache卷前需重啟其分鐘內(nèi)不要重啟10DDCache卷后后，原有的重刪任務(wù)再啟動時會執(zhí)行失敗，重建 AnyBackupMediaServer服務(wù)。 DDCache卷。、刪除了DDCache卷后，原有的重刪任務(wù)再啟動時不會提示用戶去建8、設(shè)置客戶端指紋緩存路徑時不支持非法路徑、網(wǎng)絡(luò)路徑、軟驅(qū)路徑及光盤路徑的配9 置。卷中已存在的數(shù)據(jù)。若需要使用需在重建DDCache、重建DDCache卷將刪除原10DDCache卷中的數(shù)據(jù)遷移出去并保證重建時指定的卷大小和原DDCache卷前將DDCache 卷的大小相同。，控制臺升級后，任務(wù)可以3K

12、B4KB11、升級前創(chuàng)建的任務(wù)重刪數(shù)據(jù)分塊范圍顯示為 繼續(xù)正常備份及恢復(fù)。 重復(fù)數(shù)據(jù)刪除最佳實踐第三章 3.1 定時備份最佳實踐 3.1.1 命名規(guī)則說明 1.【命名規(guī)則】:用戶名、任務(wù)組、任務(wù)等對象命名規(guī)則滿足：不允許為空，且名稱長度必須為 350個字符； 7 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 2.【郵件命名規(guī)則】: Email 地址只能由字母 AZ、az 、數(shù)字 09 及特殊字符 .-_ 組成，類似于 的形式，且最長不能超過50個字符； 3.【備注信息規(guī)范】：備注信息最大不超過255字符； 3

13、.1.2 定時備份任務(wù)建立 1. 以文件系統(tǒng)定時備份開啟重刪為例建立定時備份任務(wù)，其他定時備份應(yīng)用任務(wù)參照對應(yīng)的最佳實踐文檔，登錄愛數(shù)備份控制臺，點擊【數(shù)據(jù)保護(hù)】?【任務(wù)管理】?選中對應(yīng)的客戶端?在任務(wù)管理中，點擊新建按鈕?選擇定時備份?選擇文件系統(tǒng)； 2. 輸入任務(wù)名稱，在備注處，輸入自己想要的備份信息，選擇想要的介質(zhì)服務(wù)器作為備份的目的地，信息填寫完畢后，點擊下一步按鈕； 8 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 在選項中，選擇備份類型，是否開啟高級功能選項，各個選項說明如下：3. 重勾選該選項可以啟動源端重復(fù)數(shù)據(jù)刪除的功能；重復(fù)數(shù)據(jù)

14、刪除選項】默認(rèn)為不勾選，、128、64、328。刪屬性開啟后，默認(rèn)數(shù)據(jù)分塊范圍為464KB數(shù)據(jù)分塊可選值：4、16、；但最小數(shù)據(jù)分塊值不能大于或等于最大數(shù)據(jù)分塊值，即可調(diào)范圍為，單位為KB512256、 ；該選項，在建立任務(wù)后，不能通過修改任務(wù)的方式更改此屬性；4512KB 【備份數(shù)據(jù)保存完全副本數(shù)】可以設(shè)置用戶保留完全副本的個數(shù)； 設(shè)置完成后，點擊【下一步】按鈕，繼續(xù)； 9 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 “+”號，可以正常展開數(shù)據(jù)源，選中數(shù)據(jù)源，然后點擊【下一步】繼續(xù)；點擊4. 點擊【新建】按鈕創(chuàng)建備份任務(wù)計劃，然后點擊【確定】

15、、【完成】，完成任務(wù)的5. 如執(zhí)行什么類型的備創(chuàng)建。設(shè)置計劃，在此步驟，用戶可以選擇定時備份任務(wù)的執(zhí)行策略，份任務(wù)、一次性執(zhí)行、每天執(zhí)行、每周執(zhí)行、每月執(zhí)行；開始時間為任務(wù)生效的時間，可以 10 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 根據(jù)需要設(shè)置；高級計劃選項，設(shè)置可以使任務(wù)在規(guī)定的時間內(nèi)重復(fù)執(zhí)行；同時在此步驟，可以新建、修改、刪除、暫停的功能，點擊對應(yīng)的按鈕，即可進(jìn)行此操作； 6. 在任務(wù)創(chuàng)建完畢后，如果覺得任務(wù)配置信息有誤，可以在【任務(wù)管理】中再選中該任務(wù)，并點擊“編輯”按鈕進(jìn)行編輯；編輯的步驟和創(chuàng)建任務(wù)的步驟基本相同；重刪策略不支持

16、修改，此選項被置灰； 7. 計劃設(shè)置完畢，如果資源足夠，可立即開始一次完全備份。選中任務(wù)，點擊【發(fā)起】按鈕，可以看到可以發(fā)起的操作類型，點擊【備份】按鈕，即可開始備份操作； 11 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 注意事項： 1. 發(fā)起備份任務(wù)時，提示“請求失敗，您沒有進(jìn)行該操作的權(quán)限”，該問題是由于控制臺沒有進(jìn)行相關(guān)的授權(quán)，添加對應(yīng)的授權(quán)后，即可解決； 2. 添加授權(quán)在控制臺界面，【運(yùn)營管理】?【許可證管理】中添加，輸入對應(yīng)的授權(quán)碼和重復(fù)數(shù)據(jù)刪除代理，點擊在線激活即可； （1）如果無法在線激活，請先配置好有效的DNS地址再激活；或者

17、使用愛數(shù)激活工具激活； （2）啟用重刪時如果沒有創(chuàng)建DDCache卷，會提示“如果要啟用重刪選項，請創(chuàng)建DDCache卷”，創(chuàng)建了DDCache卷后才能選擇啟用重刪選項。 3.1.3 配置客戶端 1. 在【客戶端組】處選擇某客戶端，點擊齒輪按鈕，選擇【配置客戶端】可對重刪任務(wù)進(jìn)行客戶端指紋緩存路徑配置和內(nèi)存緩存空間大小配置； 12 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 重刪緩存存儲路徑可以通過手動輸入，也可以點擊【瀏覽】按鈕進(jìn)行路徑選擇，2. 【重刪緩存存儲路徑】：重刪任務(wù)數(shù)據(jù)緩存存儲路徑，通過【瀏覽】按鈕選擇客戶端上）。對手動輸入的動作

18、appbin的存儲路徑；如果不配置，則使用默認(rèn)值（客戶端安裝目錄: 做如下檢查，如果輸入包含以上字符提示錯誤：重刪 路徑格式中不包含* ? |（1）Windows ；* ? |緩存存儲路徑不應(yīng)包含下列字符： 重刪緩存存儲路徑時給出錯誤提示信息“確定”（2）如果輸入路徑的盤符不存在，則在 ；檢測不存在” ）不支持網(wǎng)絡(luò)路徑；（3，約束為輸入正200MB3. 【重刪任務(wù)內(nèi)存空間】：重刪任務(wù)內(nèi)存使用范圍限制。默認(rèn)就可以了，如果用戶客戶200MB整數(shù)。其中內(nèi)存使用限制越大，性能越好；一般取默認(rèn)值如果并發(fā)任務(wù)多配置默認(rèn)值為端實際內(nèi)存比較大而且用戶的并發(fā)任務(wù)不是很多可以配大點， 宜。內(nèi)存配置太大并發(fā)任務(wù)一多

19、客戶端內(nèi)存很快會被吃光，任務(wù)執(zhí)行失敗。 SSD加速3.1.4 重復(fù)數(shù)據(jù)刪除支持提升重刪硬盤來作為指紋庫存儲介質(zhì)的目的是為了提高指紋庫查詢速度，1. 增加SSD 率 2. 使用場景： 上存放重刪指紋庫，提高重刪效率 SSDSSD ?用戶采購了硬盤，期望通過在 13 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 （1）針對于插入存儲柜前面板的SSD硬盤創(chuàng)建RAID； （2）支持在創(chuàng)建卷時，可以指定該RAID后，創(chuàng)建新增名為“DDCache”的卷類型，分配卷大小即可（要大于50GB，建議將RAID空間全部用來建DDCache卷）； （3）該存儲柜的重刪

20、任務(wù)的指紋庫會存放在這個卷中： ? 用戶無SSD硬盤，期望通過在普通硬盤存放重刪指紋庫 （1）針對于插入存儲柜前面板的HDD硬盤創(chuàng)建RAID （2）支持在創(chuàng)建卷時，可以指定該RAID后，創(chuàng)建新增名為“DDCache”的卷類型，分配卷大小即可 （3）該存儲柜的重刪任務(wù)的指紋庫會存放在這個卷中 3. 在沒有創(chuàng)建DDCache卷時，啟用重刪選項時將提示：“如果要啟用重刪選項，請創(chuàng)建DDCache卷“,如下圖： 4. 在【存儲管理】-【介質(zhì)服務(wù)器管理】-選擇介質(zhì)服務(wù)器-【卷管理】-【創(chuàng)建卷】，卷類型選擇DDCache-選擇要創(chuàng)建的卷所在的設(shè)備-輸入卷容量。 DDCache卷的大小根據(jù)需要進(jìn)行分配，如果

21、任務(wù)重刪分塊大小設(shè)置為464KB，則 14 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 DDCache卷的大小約為每1TB重刪后的數(shù)據(jù)（無重復(fù)塊），需要1.6GB17GB DDCache空間存放指紋，另固定有重刪任務(wù)都會先占用3.5GB的DDCache空間 (FAQ 4中有具體的計算方法)。 5. 選好卷類型和卷大小以及RAID后，點擊【保存】，創(chuàng)建DDCache卷； 6. 創(chuàng)建了DDCache卷后再去創(chuàng)建重刪任務(wù)執(zhí)行備份，不會再提示“如果要啟用重刪選項，請創(chuàng)建DDCache卷“，任務(wù)執(zhí)行過程中指紋信息會寫到此卷上； 7. 刪除DDCache卷

22、：在【存儲管理】-【介質(zhì)服務(wù)器管理】-【磁盤管理】-【卷管理】，選擇DDCache卷，點擊【刪除卷】按鈕進(jìn)行刪除，如下圖所示： 15 / 22 WWW.EISOO.COM 重復(fù)數(shù)據(jù)刪除最佳實踐AnyBackup 注意事項： 卷，拋錯；有重刪任務(wù)正在執(zhí)行時不能刪除DDCache1. 卷，原有的重刪任務(wù)再啟動時會因包后刪除DDCache2. 重新安裝了控制臺的server卷卷后才能使指紋數(shù)據(jù)重新寫到DDCache為沒有DDCache卷執(zhí)行失敗，重建DDCache 中；卷，DDCache刪除了DDCache卷后，原有的重刪任務(wù)再啟動時不會提示用戶重建3. 但任務(wù)會執(zhí)行失敗結(jié)束；卷時，

23、即使有指紋數(shù)據(jù)也可以刪除，不影響已備份任務(wù)的恢復(fù)，但DDCache4. 刪除重刪存儲指紋信息、是再次備份重刪任務(wù)時，數(shù)據(jù)會像沒有備份過一樣重新計算指紋信息、 率； 5. DDCache卷只能創(chuàng)建一個； 卷滿，需要重建DDCacheDDCache卷才可繼續(xù)使用；6. 如果3.2 重刪任務(wù)恢復(fù) 重刪任務(wù)恢復(fù)與一般的沒有開啟重刪備份的任務(wù)恢復(fù)過程相同，請參照其他各應(yīng)用最佳實踐文檔。 16 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 FAQs 1. 配置重刪客戶端怎樣提高備份速度？ 配置客戶端任務(wù)內(nèi)存空間越大，備份的速度會越快，但是這個要根據(jù)用戶客戶端

24、實際內(nèi)存大小情況來配置，還有客戶端備份任務(wù)并發(fā)數(shù)，一般使用默認(rèn)值就可以了。 具體參照以下： ? 客戶端開重刪內(nèi)存消耗規(guī)律 任務(wù)數(shù)（300MB+160MB+n)* 開重刪后客戶端內(nèi)存占用峰值： 參數(shù)解釋：300M:各個應(yīng)用占用的內(nèi)存,160M:重刪占用的內(nèi)存,n為配置客戶端時輸入的 。200MB重刪任務(wù)內(nèi)存空間”，默認(rèn)為“每個任務(wù)開重刪備份時都會消耗客戶端(300MB+160MB+n)這么多內(nèi)存，有多少個任務(wù)數(shù)就會占用（300MB+160MB+n）*任務(wù)數(shù) 這么多內(nèi)存且（300MB+160MB+n)*任務(wù)數(shù)客 戶端內(nèi)存總數(shù)。如果按這個公式計算的內(nèi)存總數(shù)超過了客戶端的內(nèi)存總數(shù)時，實際每個任務(wù)占用不

25、了(300MB+160MB+n)這么多內(nèi)存，有些任務(wù)的內(nèi)存占的多，有些任務(wù)內(nèi)存占的少，最多不超過 (300MB+160MB+n)。例如：如果配置為200MB，任務(wù)數(shù)為4，客戶端實際內(nèi)存大小為16GB，重刪任務(wù)占用客戶端內(nèi)存為（300 MB +200 MB +160 MB）*4=2640MB；如果配置為2GB，任務(wù)數(shù)為10，客戶端實際內(nèi)存大小為16GB，重刪任務(wù)占用客戶端內(nèi)存為不確定值，各個任務(wù)內(nèi)存占用有大有小，總大小16GB? 開重刪后服務(wù)器端內(nèi)存占用峰值： 基礎(chǔ)內(nèi)存：1G 沒有遠(yuǎn)程復(fù)制任務(wù)時的重刪內(nèi)存計算：3.5G + 重刪服務(wù)器緩存 + 300M * 重刪任務(wù)數(shù) + （非重刪定時+實時任務(wù)

26、數(shù)）*200M （重刪服務(wù)器緩存：是安裝目錄下dedupserver.config中cache_size的值， 默認(rèn)為1024MB） 有遠(yuǎn)程復(fù)制任務(wù)時的重刪內(nèi)存計算： 如果控制臺有重刪的遠(yuǎn)程復(fù)制任務(wù)， 假設(shè)任務(wù)的重刪分塊大小設(shè)置為464KB，則一 17 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 個遠(yuǎn)程復(fù)制任務(wù)（復(fù)制重刪任務(wù)）：備份的最大文件的數(shù)據(jù)量/64K*48B 到 最大文件的數(shù)據(jù)量/4K*48B 之間（這是源端介質(zhì)服務(wù)，目標(biāo)端按普通的重刪非重刪來算） EG:假設(shè)有一個1TB的重刪任務(wù)，重刪服務(wù)器緩存為默認(rèn)的1024MB,只有一個重刪任務(wù)，

27、其中最大文件大小為500GB，重刪分塊大小設(shè)置為464KB， 沒有的非重刪定時備份任務(wù)或?qū)崟r任務(wù)，有一個遠(yuǎn)程復(fù)制任務(wù)，同步此重刪任務(wù)，那么： 1TB重刪任務(wù)內(nèi)存占用計算為： 1GB+3.5GB+1024MB+300MB*1+0*200MB + 500GB/64KB*48B = 6.2GB 到 1GB+3.5GB+1024MB+300MB*1+0*200MB + 500GB/4KB*48B = 11.65GB之間。 如果有多個重刪任務(wù)，每個重刪任務(wù)都在遠(yuǎn)程復(fù)制任務(wù)中，則需要計算所有重刪任務(wù)中的最大文件數(shù)據(jù)量/nKB*48B （n為最大重刪數(shù)據(jù)塊到最小重刪數(shù)據(jù)塊） 客戶端內(nèi)存占用：根據(jù)任務(wù)數(shù)成倍增

28、長，所以客戶端配置一般建議采用默認(rèn)配置 200MB即可，如果客戶端實際內(nèi)存較大，用戶可適當(dāng)增加配置的內(nèi)存大小，如果是多任務(wù)并發(fā)也不宜配置過大的內(nèi)存空間，內(nèi)存空間配置大對提升性能有一定的作用，但不是必須的，根據(jù)測試結(jié)果默認(rèn)配置基本滿足需求，性能體驗還行。不正確的客戶端內(nèi)存配置，可能會導(dǎo)致并發(fā)任務(wù)執(zhí)行卡死。 2. 創(chuàng)建DDCache卷如何提高備份速度？ 重刪指紋庫固定存放在DDCache卷中，不會占用別的路徑下的空間，導(dǎo)致系統(tǒng)空間滿；通過支持SSD作為重刪指紋庫的存放地點，借助SSD的高性能讀寫， 以提高重刪指紋庫的查詢速度，提升重刪效率。 3. 如何刪除OFS介質(zhì)中數(shù)據(jù)后重建OFS卷和DDCac

29、he卷重AnyBackupMediaS erver服務(wù)？ 刪除OFS數(shù)據(jù)和指紋庫數(shù)據(jù)， web界面上刪除OFS和DDCache卷，然后重新建卷。 數(shù)據(jù)：刪除OFS service AnyBackupMediaServer stop rm -rf /var/lib/newcore/AnyBackup/ofs.db rm -rf /sysvol/node/volhcache/backup/OFS/* rm -rf /sysvol/node/volume1/OFS/* (如果有多個卷則卷中數(shù)據(jù)都刪除) 18 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐

30、 刪除指紋庫數(shù)據(jù)： rm -rf /sysvol/node/volume_dc/* service AnyBackupMediaServer start 在web界面上刪除后重建OFS卷和DDCache卷。 注意：OFS 數(shù)據(jù)刪了，指紋一定要刪掉。 以上不允許用戶在后臺進(jìn)行操作，如果技術(shù)支持人員在后臺刪除了OFS介質(zhì)或指紋庫的數(shù)據(jù)時，需做以上操作并在WEB界面上刪除OFS和DDCache卷后重建(新建DDCache卷需等10分鐘才能重啟其AnyBackupMediaServer服務(wù))，保險起見重啟下其AnyBackupMediaServer服務(wù)。不重啟時會報錯。 4. 配置DDCache卷空間

31、大小時，如何判斷該取多大的DDCache卷？ 參考公式： 重刪后數(shù)據(jù)大小N（TB）*)(索引32Byte?指紋36Byte3.5GB? 重刪塊分割大小n（4-512）KB其中：3.5GB為布隆過濾器占用，只要有重刪任務(wù)都會固定占用3.5GB的空間。 N對應(yīng)重刪后的數(shù)據(jù)量，單位為TB，空間最大上浮4GB，建議配置DDCache卷初始大小至少400GB以上。 例如：設(shè)置重刪塊大小為4KB512KB , 重刪后數(shù)據(jù)量為2TB，則對應(yīng)的DDCache空間占用范圍為：5.625GB37.5GB，計算如下： 2TB?37*.5GB53.GB?68Byte 4KB 2TB?5.625GB3.5GB?68By

32、te* KB64 5. 更換了Server包后，沒有重建DDCache卷，執(zhí)行重刪任務(wù)會怎么樣？ 任務(wù)直接報錯失敗。如果更換Server包后，不重建DDCache卷，在/apphome/app/bin 文件中指紋存儲路徑為空，如dedupserver.config目錄下的 指紋數(shù)據(jù)的存儲路徑# data_store_path = 19 / 22 WWW.EISOO.COM AnyBackup 重復(fù)數(shù)據(jù)刪除最佳實踐 需修改為當(dāng)前DDCache卷路徑后，如 指紋數(shù)據(jù)的存儲路徑# data_store_path = /sysvol/node/volume_dc 中。重啟介質(zhì)服務(wù)，指紋庫才能存儲到對應(yīng)的DDCache GB#指紋數(shù)據(jù)和索引數(shù)據(jù)占用空間大小，單位為 data_store_size = 500此修改根據(jù)實際配置的DDCache卷大小配置，該大小應(yīng)與DDCache卷的大小相同，否則將導(dǎo)致備份異常，不建議使用該方法修改。以上操作不允許用戶操作，由技術(shù)支持人員換 卷情況下做以上操作。DDCache包后，在不重建 客戶端指紋緩存路徑下空間已滿時，備份重刪任務(wù)會怎么樣？ 6. 客戶端指紋緩存路徑下空間已滿時，再備份重刪任務(wù)時，Win