NAS存儲配置文檔

1、NAS3300，NAS3600部署文檔目錄一、硬件配置：3二、設備連線圖31、NAS3300主機和EXN1000擴展柜連線圖32、NAS3600主機連線圖：4三、用戶需求4四、知識點：5五、配置過程：61、配置主機端口IP地址：82、Web界面設置介紹：93、在NAS3600A上創(chuàng)建3.5T共享存儲空間114、在NAS3600A上創(chuàng)建CIFS網(wǎng)絡文件系統(tǒng)：175、在NAS3600A上創(chuàng)建NFS網(wǎng)絡文件系統(tǒng)256、在NAS3600和NAS3300之間創(chuàng)建Snapmirror287、重要補充1：NFS和CIFS用戶權限一致性映射318、重要補充2：Snapmirror原理策略和NAS3600宕機后

2、的處理及恢復32一、硬件配置：序號設備名稱配置數(shù)量1NAS3300主機單節(jié)點（控制器）12塊500G SATA硬盤，激活feature：CIFS，iSCSI，snapmirror12EXN1000擴展柜5塊500G SATA硬盤與NAS3300主機互聯(lián)擴容磁盤到17塊13NAS3600主機雙節(jié)點（控制器）16塊500G SATA硬盤，激活feature：CIFS，iSCSI，snapmirror，cluster1表格 1 硬件配置表二、設備連線圖1、NAS3300主機和EXN1000擴展柜連線圖圖表 1 NAS3300和EXN1000連線圖*注意圖中e0b雖有連線，但實際未配置IP地址，處于閑

3、置狀態(tài)。2、NAS3600主機連線圖：圖表 2 NAS3600連線圖三、用戶需求 用戶對NAS的大致需求為：NAS3600和NAS3300組成一套高可靠的NAS系統(tǒng)，其中NAS3600為主，NAS3300為備，整個NAS系統(tǒng)對以太網(wǎng)絡中的各種主機（Unix，Windows）提供1個大約3.5T的多協(xié)議（NFS，CIFS）支持網(wǎng)絡共享文件系統(tǒng)，并通過snapmirror功能將該文件系統(tǒng)鏡像到NAS3300中備用。系統(tǒng)拓撲如下：圖表 3 系統(tǒng)拓撲圖四、知識點：Ø NAS存儲：就是網(wǎng)絡上的共享文件系統(tǒng)。注意NAS和普通的陣列存儲柜最大的區(qū)別在于NAS在文件系統(tǒng)層次對外提供存取服務，而普通陣

4、列存儲柜在底層（數(shù)據(jù)塊）對外提供存取服務，二者的層次和數(shù)據(jù)單位完全不同。NAS N系列盡管外形像一個陣列存儲，但實際上它是一臺對網(wǎng)絡提供文件存取/共享服務的服務器，所以在NAS領域?qū)ζ淇刂破鞣Q為“節(jié)點”，NAS3600配置了2個控制器，應看成2臺文件服務器、2個節(jié)點（可構成cluster）。Ø NAS操作系統(tǒng)：NAS對外提供文件系統(tǒng)級服務，其自身必須具備相應處理能力，也就是在NAS存儲中，必須安裝一套通用（windows NT/linux/unix）操作系統(tǒng)或?qū)Ｓ貌僮飨到y(tǒng)以實現(xiàn)上述功能。NAS N系列采用基于Unix，取消通用功能，只注重文件服務的專用操作系統(tǒng)à ONTAP

5、。Ø ONTAP在存儲上的分布：ONTAP以控制器為單位部署，1個控制器上面就有1個ONTAP。Ø NAS N系列的磁盤聚合（aggregate）：NAS N系列用聚合來表示一個RAID，與普通的DS陣列柜不同的是，NAS N只支持RAID4和RAID_DP（其實就是RAID6）兩種模式，并且NAS N的磁盤聚合必須要求熱備支持，不像DS系列那樣可以單獨設置hotspare，在NAS N中創(chuàng)建磁盤聚合的同時就必須包含spare盤（就是熱備）。按照此種規(guī)則，用戶創(chuàng)建RAID4磁盤聚合時就需要3塊盤（1塊data，1塊parity，1塊spare），而RAID_DP更是需要4塊

6、（因為多了1個parity校驗盤）。Ø NAS N上的磁盤空間估算：由于NAS N需要安裝ONTAP操作系統(tǒng)，并且NAS N以磁盤聚合方式提供RAID功能，如果是2節(jié)點機型，操作系統(tǒng)磁盤占用量就比較夸張了。所以，在訂購NAS N時，必須要把操作系統(tǒng)占用的磁盤空間排出后，再來計算數(shù)據(jù)存儲空間。比如這次的NAS3600，配了16塊500G SATA盤（實際使用414G），數(shù)據(jù)空間計劃3.5T，但是由于使用了雙節(jié)點，每節(jié)點操作系統(tǒng)出廠默認采用RAID_DP磁盤聚合，這樣共有8塊磁盤被占用，實際可分配磁盤只有8塊，如果再配1個聚合，容量就不夠了（因為parity和spare又要占用磁盤，實際

7、可用空間大大降低）。只能把8塊空閑盤加入到操作系統(tǒng)的聚合中，對空間進行再分配。Ø NAS N支持iSCSI：NAS N支持iSCSI，即底層的數(shù)據(jù)塊存取，需要相關licence激活。激活后NAS N可以同時對外提供文件系統(tǒng)和LUN存取服務。不過如果單獨用來跑iSCSI就本末倒置了，還不如買個專門的iSCSI存儲，成本還低些。Ø NAS N Cluster支持：這部分定義尚不是很清晰，應該是同一個NAS N存儲里的2個節(jié)點（控制器）之間可以構成1個高可靠群集，就象雙機熱備。五、配置過程： NAS N通過專門的串口（RJ45）和主機端口開啟的Web頁面提供人機交互，但是要實現(xiàn)W

8、eb方式，必須事先通過串口對NAS N的主機端口（e0a，e0b）設置IP地址，所以，配置NAS N的先決條件是訪問串口。 訪問串口：首先找到NAS N自帶的一個9針串口轉(zhuǎn)RJ45口轉(zhuǎn)接線，然后采用自備的USB轉(zhuǎn)串口線，由于這2根線在串口段都是針，所以還需要一根串口連接線，這根線非常特殊，因為線序不同于普通9針串口連接線，只能從配件中找，本次項目是用公司自備的存儲專用9孔串口連接線才搞定。拓撲連接如下圖：圖表 4 串口連線圖RJ45口9“針”串口（對于針口：寬在上左起為1）3（棕色）34（棕白）56（橙色）2表格 2 RJ45轉(zhuǎn)9“針”串口線對應表9“孔”串口（對于孔口：寬在上右起為1）9“孔

9、”串口（對于孔口：寬在上右起為1）14233241557887表格 3 9“孔”轉(zhuǎn)9“孔”串口連接線對應表1、配置主機端口IP地址： NAS N要正常對外提供文件服務，必須要配置其主機端口：e0a和e0b：IP地址，子網(wǎng)掩碼，網(wǎng)關，DNS設置等等。NAS N e0a和e0b出廠默認未配置，無法通過Web方式對其進行訪問和配置，必須通過串口對其進行最基本的初始設置。 用筆記本通過上述連接線與NAS N節(jié)點串口接好后，使用windows自帶的超級終端對設備進行初始設置，com口參數(shù)設置如下：圖表 5 COM口參數(shù) 登陸之后3秒鐘按下enter鍵即進入NAS N命令行模式（用戶名：root，密碼初始

10、為空），如果是第一次未配置的設備，命令行界面自動進入系統(tǒng)設置step by step交互模式，在設置了e0a和e0b兩個主機端口的節(jié)點名稱（e0a和e0b共用1個節(jié)點名）、IP地址和一些其他網(wǎng)絡屬性后，命令行會提示后續(xù)配置是否進入圖形方式（Web），我們選擇“y”后，step by step交互模式終止。通過與NAS N e0a和e0b在同一個網(wǎng)絡里的pc主機里的Web瀏覽器，直接對設備進行圖形化的配置。NAS3600上節(jié)點NAS3600下節(jié)點NAS3300節(jié)點名NAS3600ANAS3600BNAS3300IP地址e0a：e0b：未設置e0a：e0b：未設置e0a：e0b：未設置網(wǎng)關10.1

11、表格 4 節(jié)點基本設置表2、Web界面設置介紹： 1）、節(jié)點基本設置： http:/<e0a IP地址>/api，主要是對節(jié)點一些最基本參數(shù)的設置，包括主機節(jié)點名（Filer Name）、端口IP地址，網(wǎng)關，DNS，功能激活等等，設置完畢后見下圖：2）、節(jié)點各功能詳細設置： http:/ <e0a IP地址>/na_admin，對節(jié)點各個功能的詳細設置，包括添加/刪除磁盤，創(chuàng)建聚合、卷、CIFS / NFS文件共享和snapshot、snapmirror等高級功能設置。主頁面參見下圖：主頁面有3個選項：Ø FilerView：配置節(jié)點功能Ø File

12、r At-A-Glance：性能檢測Ø Manual pages：命令參考手冊選擇FilerView進入圖形化配置界面：在這里可以查看設備基本狀態(tài)。見下圖：3、在NAS3600A上創(chuàng)建3.5T共享存儲空間1）、首先查看設備磁盤使用狀況： 進入FilerView后，選擇左邊導航菜單中的StorageàDisksàManage，如下圖：Ø Disk：顯示磁盤的名稱（0c.10.0）Ø Type：顯示磁盤所屬關系以及狀態(tài)：l spare：磁盤屬于當前節(jié)點，并且為熱備盤l parity：磁盤屬于當前節(jié)點，并且為校驗盤l dparity：磁盤屬于當前節(jié)點

13、，并且為第二校驗盤（RAID_DP獨有）l data：磁盤屬于當前節(jié)點，并且為數(shù)據(jù)盤l partner：磁盤不屬于當前節(jié)點（雙節(jié)點情況下），只有在另外一個節(jié)點才可以查看該類磁盤的狀態(tài)l unowned：磁盤不屬于任何節(jié)點（未分配）Ø physical：每塊磁盤實際容量（標稱值為500G）Ø Aggregrate：磁盤所屬的聚合（aggr0為ONTAP操作系統(tǒng)所在磁盤聚合） 在本例中，NAS3600有16塊500G SATA硬盤，但由于NAS3600有2個節(jié)點，每節(jié)點出廠設置各占用磁盤4塊，即：Ø NAS3600A占用：0c.10.1、 0c.10.3、 0c.10

14、.5、 0c.10.7Ø NAS3600B占用：0c.10.0、 0c.10.2、 0c.10.4、 0c.10.6Ø 剩下8塊為unowned狀態(tài)2）、出現(xiàn)的問題： 不管把剩下8塊磁盤放入NAS3600的A或B節(jié)點的aggr0中，實際可用容量都只能達到2.7T總?cè)萘浚ggr0中ONTAP操作系統(tǒng)所在vol0卷占用的空間，數(shù)據(jù)卷vol1只有大約2.2T可用3）、原因： 與原廠商工程師溝通后，發(fā)現(xiàn)有以下幾個因素影響容量大?。?#216; 雙節(jié)點：NAS N系列的每一個節(jié)點都要單獨占用一定數(shù)量的磁盤來構成操作系統(tǒng)所需的聚合（aggr0），本例中，NAS3600每節(jié)點聚合（

15、aggr0）出廠配置為RAID_DP，至少需要4塊磁盤，2節(jié)點至少占用8塊。Ø 雙spare盤：NAS N在圖形界面下往aggr0添加磁盤時，必須要保留2塊磁盤為spare，否則，配置不能通過（圖形界面下的bug，在命令行下可以只保留1塊spare）。Ø snapshot占用20%的可用空間：在創(chuàng)建聚合時，默認有20%的空間保留給了snapshot，如果不使用該功能是可以不用保留的。Ø vol0卷空間過大：vol0空間是aggr0聚合下的一個卷，用來放置ONTAP操作系統(tǒng)，默認該空間較大。4）、針對以上問題的解決思路：Ø 把NAS3600A作為工作節(jié)點，

16、把NAS3600B aggr0的陣列模式從RAID_DP改為RAID4，釋放出一塊磁盤，再分配給NAS3600A。Ø 在命令行下執(zhí)行給NAS3600A添加磁盤操作，可以只用1塊spareØ 修改NAS3600A aggr0的屬性，把snapshot的空間從20%降到0%Ø 修改NAS3600A aggr0下的vol0卷屬性，把大小降到80G左右Ø 最后重新調(diào)整NAS3600A aggr0下的vol1卷大小 具體步驟：1) 用Web瀏覽器登陸到NAS3600B節(jié)點：n2) 選擇FileràUser Command Line，進入命令行模式（圖形界

17、面操作只是命令行的一個子集，有些命令必須通過命令行方式執(zhí)行）3) 輸入： aggr options aggr0 raidtype raid44) 執(zhí)行完畢后， 0c.10.0磁盤就從Dparity狀態(tài)變?yōu)镾pare狀態(tài)，可以輸入：aggr status查看aggr0的RAID狀態(tài)是否變?yōu)镽AID45) 然后在StorageàDisksàManage下可以看見NAS3600B下aggr0中有2塊spare（c，計劃把c0.10.06盤劃給NAS3600A）6) 在FileràUser Command Line，輸入命令： disk assign 0c.10.6 -s

18、 unowned 把c磁盤的所有關系從NAS3600B變?yōu)閡nowned7) 用Web瀏覽器登陸到NAS3600A節(jié)點：8) 在FileràUser Command Line，輸入命令： disk assign 0c.10.6 -o NAS3600A 把c磁盤的所有關系從unowned變?yōu)镹AS3600A9) 在FileràUser Command Line，輸入命令： aggr add aggr0 -d <c 和處于unowned的8塊磁盤> 把從NAS3600B分過來的c磁盤和其他8塊處于unowned的磁盤加入aggr0聚合10) 在Volumes

19、4;Manage中選擇vol0，重新修改vol0的卷大小（resize storage按鍵）11) 選擇VolumesàAdd，創(chuàng)建共享數(shù)據(jù)卷vol1，創(chuàng)建步驟如下（圖片與實際數(shù)據(jù)有差異）： 選擇卷類型：Flexible（廠家建議） 保持卷名為vol1（可自定義），本項目需要中文支持，Language選項選擇“Simplified Chinese（GBK）”，不選擇UFT-8編碼（如果操作系統(tǒng)語言環(huán)境支持UTF-8編碼，此處也可以選擇） 選擇新卷所在磁盤聚合（注意：實際NAS3600A只有1個磁盤聚合aggr0，只能選aggr0），空間保證選擇volume。 卷大小類型選Total

20、Size，卷大小設為最大容量（Max）減1（實際輸入3.37TB），snapshot空間設為0%（在該卷上關閉snapshot功能，以省出數(shù)據(jù)空間） 提交新卷創(chuàng)建查看并修改vol1的qtree屬性，因為本項目要求vol1同時對Unix和Windows客戶端提供服務，所以在vol1的“Style”項上選擇“Mixed”： 經(jīng)過以上步驟設置后，NAS3600A最終的數(shù)據(jù)空間達到3.38T，實際結(jié)果如下圖： NAS3300為單控制器（節(jié)點）不需要調(diào)整存儲空間，直接參照NAS3600的配置步驟7開始配置。4、在NAS3600A上創(chuàng)建CIFS網(wǎng)絡文件系統(tǒng)：1) 選擇CIFSà Setup Wi

21、zard：2) 設置CIFS所在節(jié)點名稱：NAS3600A3) 權限設置選工作組模式下的NT Local User4) 設置工作組名稱，這里選擇windows默認的WORKGROUP5) 選擇多協(xié)議：Multi-Protocol6) 提交CIFS設置7) 提交后結(jié)果8) 在CIFSàSharesàManageàAdd Share中創(chuàng)建CIFS共享點：（注意：實際Share Name=cifs Mount Point=/vol/vol1，其他為空）9) 設置訪問該卷的用戶首先在命令行界面下運行：useradmin user add <用戶名> -g &l

22、t;組名> 添加1個訪問用戶 passwd <用戶名> 設置或修改密碼然后在CifsàSharesàManage下添加該用戶，使其可以訪問目標卷：本項目沒有創(chuàng)建新用戶，直接采用NAS系統(tǒng)管理員帳號administrator，密碼：cqmc123ctg12310) 在Windows XP客戶端上測試CIFS，創(chuàng)建1個網(wǎng)絡磁盤驅(qū)動器W，指向的cifs共享點12) 可以在CIFSàSharesàManages下修改/vol/vol1的訪問屬性（Change Access）：5、在NAS3600A上創(chuàng)建NFS網(wǎng)絡文件系統(tǒng)1）、NFS Licen

23、ce激活以后，每創(chuàng)建1個新卷，系統(tǒng)會自動生成1個NFS共享點，但是需要做修改，本項目需要修改/vol/vol1的Options2）鼠標點擊/vol/vol1的Options，出現(xiàn)以下頁面：3）、修改需要導出的卷，本項目是/vol/vol1：4）、設置匿名用戶的ID號（就是Unix系統(tǒng)用戶的ID號），本項目選擇采用root用戶對NFS進行訪問控制，所以，選擇ID號“0”（root用戶默認ID號）5）、設置可以訪問該NFS的主機IP地址，限制網(wǎng)絡訪問本NFS（用戶可根據(jù)實際需要設置，初始配置是允許所有主機訪問）6）、選擇NFS的安全機制：7）、提交設置內(nèi)容：6、在NAS3600和NAS3300之間

24、創(chuàng)建Snapmirror1) 用Web瀏覽器登陸到NAS3300節(jié)點：（創(chuàng)建2個節(jié)點的snapmirror關系，一定要在備份節(jié)點上進行配置）2) 選擇SnapMirroràAdd：NAS3300上用來備份的卷為vol1，需要備份的節(jié)點為NAS3600A，該節(jié)點上需要備份的卷為vol13) 選擇SnapMirroràEnable/Disable，啟動Snapmirror4) 選擇SnapMirroràManage，察看狀態(tài)為未初始化（uninitialized）5) 選擇VolumesàManage，選擇vol1卷，點擊Restrict按鍵對vol1執(zhí)行r

25、estrict操作。6) 在FileràUser Command Line，輸入以下命令打開NAS3300對NAS3600A的Snapmirror訪問許可7) 用Web瀏覽器登陸到NAS3600A節(jié)點：，在FileràUser Command Line，輸入以下命令打開NAS3600A對NAS3300的Snapmirror訪問許可8) 回到NAS3300節(jié)點，選擇SnapMirroràManageàAdvanced，點擊Initialize（注意：初始化時間長短與卷上原有數(shù)據(jù)大小有關）9) 初始化完畢后，選擇SnapMirroràManage察

26、看結(jié)果7、重要補充1：NFS和CIFS用戶權限一致性映射由于Windows用戶和Unix用戶需對同一個對象（文件和目錄）進行各種操作（創(chuàng)建，修改，刪除），所以本項目要求在Unix和Windows下的用戶必須具有權限一致性。本項目Cifs采用NAS系統(tǒng)自帶的administrator用戶（注意：不是客戶端的），NFS采用匿名方式，但由于指定了ID=0，所以NFS下對象所屬用戶為root；但是administrator創(chuàng)建的對象所屬用戶為65534，所以必須把root和administrator權限一致性化，才能保證對對象的各種操作的正確性，在命令行下執(zhí)行如下指令： options wafl.nt

27、_admin_priv_map_to_root on 執(zhí)行該命令后，在Unix下可以發(fā)現(xiàn)，windows客戶端和unix客戶端創(chuàng)建的對象都屬于root用戶，權限一致。8、重要補充2：Snapmirror備份策略和NAS3600宕機后的處理及恢復 Snapmirror是在2臺以上的NAS N系列存儲上實現(xiàn)數(shù)據(jù)快速備份和恢復的機制。NAS 主存儲在每一個周期，定時向備份存儲copy本時間段數(shù)據(jù)的變化（snapshot，異步方式），一旦主存儲出現(xiàn)故障無法訪問，用戶可以將應用重新定向到備份存儲，保障應用正常運行。主存儲恢復后，可以通過反向的Snapmirror，把主存儲宕機期間的數(shù)據(jù)變化從備份存儲copy到主存儲，