Lenovo v5030存儲(chǔ)HyperSwap雙活實(shí)施方案

1、 Page * MERGEFORMAT 30Lenovo v5030 存儲(chǔ)HyperSwap實(shí)施方案目錄 TOC o 1-3 h z u HYPERLINK l _Toc509352798 1.培訓(xùn)環(huán)境介紹 PAGEREF _Toc509352798 h 2 HYPERLINK l _Toc509352799 2.配置光纖交換機(jī) PAGEREF _Toc509352799 h 4 HYPERLINK l _Toc509352800 3.初始化存儲(chǔ) PAGEREF _Toc509352800 h 7 HYPERLINK l _Toc509352801 4.配置Cluster和站點(diǎn) PAGEREF

2、 _Toc509352801 h 11 HYPERLINK l _Toc509352802 5.部署IP Quorum PAGEREF _Toc509352802 h 19 HYPERLINK l _Toc509352803 6.配置Linux環(huán)境multipath PAGEREF _Toc509352803 h 24 HYPERLINK l _Toc509352804 V5030存儲(chǔ)配置主機(jī)映射 PAGEREF _Toc509352804 h 24 HYPERLINK l _Toc509352805 Redhat 6.5安裝配置iscsi服務(wù) PAGEREF _Toc509352805 h

3、25 HYPERLINK l _Toc509352806 Redhat 6.5安裝并啟用multipath PAGEREF _Toc509352806 h 27 HYPERLINK l _Toc509352807 Redhat 6.5掛載并使用iSCSI卷 PAGEREF _Toc509352807 h 28 HYPERLINK l _Toc509352808 7.故障場(chǎng)景測(cè)試 PAGEREF _Toc509352808 h 29部署環(huán)境介紹設(shè)備類型IP地址用戶名/密碼SAN交換機(jī)Management58/24admin/passwordV5030-1Service IP150/24passw

4、0rdService IP251/24passw0rdV5030-2Service IP152/24passw0rdService IP253/24passw0rdV5030-clusterManagement54/24superuser/passw0rdESXi1Management60/24root/ESXi2Management61/24root/vCenterManagement64/24administratorvsphere.local/Pssw0rd.IP QuorumRedhat 6.565/24root/網(wǎng)關(guān)：54配置光纖交換機(jī)通過telnet或者ssh登錄光纖交換機(jī)，用sw

5、itchshow命令查看交換機(jī)的基本信息和所連設(shè)備的wwn號(hào)存儲(chǔ)V5030-1的4個(gè)FC端口 WWPN：50:05:07:68:0d:08:6e:d8;50:05:07:68:0d:08:6e:d9;50:05:07:68:0d:04:6e:d8;50:05:07:68:0d:04:6e:d9存儲(chǔ)V5030-2的4個(gè)FC端口 WWPN：50:05:07:68:0d:08:67:c0;50:05:07:68:0d:08:67:c1;50:05:07:68:0d:04:67:c0;50:05:07:68:0d:04:67:c1ESXi1的2個(gè)FC端口WWPN：10:00:00:00:c9:b6:1

6、9:e2; 10:00:00:00:c9:b6:17:a4ESXi2的2個(gè)FC端口WWPN：10:00:00:00:c9:c1:82:f1; 10:00:00:90:fa:1d:a7:a1根據(jù)主機(jī)存儲(chǔ)的WWPN和ZONE規(guī)劃，編寫光纖交換機(jī)配置腳本如下：Zonecreate zone_v5k_cluster,50:05:07:68:0d:08:6e:d8;50:05:07:68:0d:08:6e:d9;50:05:07:68:0d:04:6e:d8;50:05:07:68:0d:04:6e:d9;50:05:07:68:0d:08:67:c0;50:05:07:68:0d:08:67:c1;5

7、0:05:07:68:0d:04:67:c0;50:05:07:68:0d:04:67:c1zonecreate host1_hba1v5k_site1,10:00:00:00:c9:b6:17:a4;50:05:07:68:0d:08:6e:d8;50:05:07:68:0d:08:6e:d9;50:05:07:68:0d:04:6e:d8;50:05:07:68:0d:04:6e:d9zonecreate host1_hba2v5k_site2,10:00:00:00:c9:b6:19:e2;50:05:07:68:0d:08:67:c0;50:05:07:68:0d:08:67:c1;5

8、0:05:07:68:0d:04:67:c0;50:05:07:68:0d:04:67:c1zonecreate host2_hba1v5k_site1,10:00:00:00:c9:c1:82:f1;50:05:07:68:0d:08:6e:d8;50:05:07:68:0d:08:6e:d9;50:05:07:68:0d:04:6e:d8;50:05:07:68:0d:04:6e:d9zonecreate host2_hba2v5k_site2,10:00:00:90:fa:1d:a7:a1;50:05:07:68:0d:08:67:c0;50:05:07:68:0d:08:67:c1;5

9、0:05:07:68:0d:04:67:c0;50:05:07:68:0d:04:67:c1zonecreate host1_hba1v5k_site2,10:00:00:00:c9:b6:17:a4;50:05:07:68:0d:08:67:c0;50:05:07:68:0d:08:67:c1;50:05:07:68:0d:04:67:c0;50:05:07:68:0d:04:67:c1zonecreate host1_hba2v5k_site1,10:00:00:00:c9:b6:19:e2;50:05:07:68:0d:08:6e:d8;50:05:07:68:0d:08:6e:d9;5

10、0:05:07:68:0d:04:6e:d8;50:05:07:68:0d:04:6e:d9zonecreate host2_hba1v5k_site2,10:00:00:00:c9:c1:82:f1;50:05:07:68:0d:08:67:c0;50:05:07:68:0d:08:67:c1;50:05:07:68:0d:04:67:c0;50:05:07:68:0d:04:67:c1zonecreate host2_hba2v5k_site1,10:00:00:90:fa:1d:a7:a1;50:05:07:68:0d:08:6e:d8;50:05:07:68:0d:08:6e:d9;5

11、0:05:07:68:0d:04:6e:d8;50:05:07:68:0d:04:6e:d9cfgcreate cfg1,host1_hba1v5k_site1;host1_hba2v5k_site2;host2_hba1v5k_site1;host2_hba2v5k_site2;host1_hba1v5k_site2;host1_hba2v5k_site1;host2_hba1v5k_site2;host2_hba2v5k_site1;zone_v5k_clustercfgsavecfgenable cfg1cfgshow初始化存儲(chǔ)做HyperSwap前首先要保證兩臺(tái)V5030的微碼一致。修

12、改兩臺(tái)存儲(chǔ)的默認(rèn)Service IP，配置為同一網(wǎng)段的4個(gè)IP地址，登錄第一個(gè)節(jié)點(diǎn)的Service ip 50/24，進(jìn)行初始化存儲(chǔ)配置，并創(chuàng)建4節(jié)點(diǎn)集群。當(dāng)SAN網(wǎng)絡(luò)正確配置完成后，在節(jié)點(diǎn)1的配置界面，可以看到雙活存儲(chǔ)的全部4個(gè)節(jié)點(diǎn)，且節(jié)點(diǎn)狀態(tài)全部為“候選”。創(chuàng)建系統(tǒng)此處要激活V5030的“遠(yuǎn)程鏡像”功能，才能使用HyperSwap功能。至此，IO GROUP 1存儲(chǔ)初始化任務(wù)完成，瀏覽器會(huì)自動(dòng)重定向到集群管理IP。配置Cluster和站點(diǎn)在存儲(chǔ)初始化任務(wù)完成后，進(jìn)入到cluster配置階段。在v5030的最新微碼版本中，這個(gè)階段的配置操作，全部都可以通過WEB GUI圖形界面進(jìn)行配置。進(jìn)入

13、初始化好的V5030-1節(jié)點(diǎn)的web管理界面，將還處于自由狀態(tài)的V5030-2添加到系統(tǒng)中此時(shí)V5030-1和V5030-2已被添加到一起，組成統(tǒng)一管理存儲(chǔ)。修改兩臺(tái)V5030的系統(tǒng)拓?fù)湎到y(tǒng)拓?fù)湫薷耐戤吅?，可看到如下圖示兩臺(tái)V5030分別屬于site1和site2，并分屬兩個(gè)IO組。集群創(chuàng)建完成后，在service界面里看到的4個(gè)節(jié)點(diǎn)狀態(tài)使用兩臺(tái)存儲(chǔ)的內(nèi)部磁盤分別創(chuàng)建屬于兩個(gè)站點(diǎn)的pool0-site1和pool-site2，并創(chuàng)建mdisk、HyperSwap卷部署IP QuorumSSH登錄存儲(chǔ)cluster管理地址，查看現(xiàn)有仲裁狀態(tài)，命令svcinfo lsquorum。當(dāng)前在兩個(gè)站點(diǎn)的

14、存儲(chǔ)上，各有一個(gè)online狀態(tài)仲裁盤，但沒有第三站點(diǎn)仲裁。輸入命令svctask mkquorumapp，生成ip仲裁jar小程序。通過瀏覽器，登錄集群服務(wù)界面，下載ipquorum.jar然后將文件ipquoram.jar上傳到一臺(tái)提前創(chuàng)建的一臺(tái)RHEL 6.5 虛擬機(jī)中。在redhat6.5上執(zhí)行java -jar ipquorum.jar &，運(yùn)行ip仲裁小程序，并使之轉(zhuǎn)入后臺(tái)運(yùn)行。在實(shí)際生成環(huán)境，建議利用cron計(jì)劃任務(wù)把該程序配置成重啟后自動(dòng)運(yùn)行。登錄存儲(chǔ)，執(zhí)行svcinfo lsquorum， 查看當(dāng)前仲裁狀態(tài)，已經(jīng)有第三站點(diǎn)ip仲裁，status是online，active是y

15、es。這就表明，已經(jīng)配置好ip quorum。創(chuàng)建主機(jī)，并將卷映射到主機(jī)登錄vSphere web client，在vCenter中掃描識(shí)別剛才映射的存儲(chǔ)共享盤?？梢钥吹?，這臺(tái)ESXi主機(jī)已經(jīng)識(shí)別到存儲(chǔ)盤，兩塊HBA卡總共16條存儲(chǔ)路徑。為WinDemo虛擬機(jī)，添加裸磁盤映射，以便訪問存儲(chǔ)共享盤。對(duì)識(shí)別的存儲(chǔ)盤，格式化文件系統(tǒng)，然后使用iometer磁盤壓力測(cè)試工具進(jìn)行讀寫測(cè)試。配置Linux環(huán)境multipathV5030存儲(chǔ)配置主機(jī)映射Linux Demo虛擬機(jī)通過iscsi協(xié)議訪問v5030雙活存儲(chǔ)，利用linux自帶的multipath工具配置存儲(chǔ)多路徑。首先，在v5030存儲(chǔ)中，配置

16、iscsi portal 地址，分別為68和69。添加主機(jī)，主機(jī)連接選擇“iscsi”Redhat 6.5安裝配置iscsi服務(wù)掛載redhat 光盤，通過rpm ivh 安裝軟件包： iscsi-initiator-utils 。#Chkconfig iscsi on #iscsiadm m discovery t sendtargets p 68#iscsiadm m discovery t sendtargets p 69#iscsiadm m node L all#lsblkRedhat 6.5安裝并啟用multipath掛載redhat 光盤，通過rpm ivh 安裝軟件包：devi

17、ce-mapper-multipath-libs，device-mapper-multipath 。#chkconfig multipathd on#modprobe dm-multipath#modprobe dm-round-robin#service multipathd start #mpathconf -enable -with_multipathdy#multipath -F#multipath -v2#multipath llRedhat 6.5掛載并使用iSCSI卷對(duì)multipath聚合生成的mpatha和mpathb進(jìn)行分區(qū)和格式化，并掛載到/test。使用dd if=/d

18、ev/zero of=/test/test bs=8k count=1000000進(jìn)行存儲(chǔ)盤讀寫測(cè)試。故障場(chǎng)景測(cè)試本次故障測(cè)試只選擇了一種最常見的場(chǎng)景，即site1站點(diǎn)整臺(tái)存儲(chǔ)出現(xiàn)宕機(jī)故障。此種故障現(xiàn)象，通過直接存儲(chǔ)雙控?cái)嚯娺M(jìn)行模擬。正常狀態(tài)時(shí)，在遠(yuǎn)程拷貝界面看到的cluster狀態(tài)。當(dāng)site1站點(diǎn)存儲(chǔ)發(fā)生整體故障時(shí)，site1站點(diǎn)主機(jī)的存儲(chǔ)多路徑軟件能夠自動(dòng)判斷鏈路狀況，并將路徑自動(dòng)切換到site2站點(diǎn)。site2站點(diǎn)存儲(chǔ)會(huì)自動(dòng)接管來自主機(jī)的數(shù)據(jù)訪問。整個(gè)存儲(chǔ)切換接管過程中，前端應(yīng)用服務(wù)不會(huì)崩潰，仍然能夠繼續(xù)運(yùn)行，應(yīng)用數(shù)據(jù)也不會(huì)丟失。當(dāng)site1站點(diǎn)存儲(chǔ)修復(fù)上線后，雙活存儲(chǔ)集群會(huì)自動(dòng)進(jìn)行數(shù)據(jù)同步。當(dāng)同步完成后，存儲(chǔ)集群會(huì)根據(jù)負(fù)載壓力智能選擇講存儲(chǔ)路徑回切至site1存儲(chǔ)。注：測(cè)試中遇到的問題是zone的劃分首先四個(gè)node的wwp