NEC-ExperssCluster集群軟件部署手冊.doc

北京中科大洋科技發(fā)展股份有限公司 技術(shù)研究院Dayang SI Lab ReleaseNEC ExperssCluster集群軟件部署手冊 Dayang Technology Development Inc北京中科大洋科技發(fā)展有限公司NEC ExperssCluster集群軟件部署手冊報告文檔信息：NEC ExperssCluster集群軟件部署手冊版本編號版本日期修改者語言更 新 說 明V.1.0A2009-6-5劉釗（技術(shù)研究院）中文創(chuàng)建新測試報告目錄目錄- 5 -前言- 6 -Experss Cluster集群軟件功能特點- 6 -1.創(chuàng)建集群的基本要求及前期準備- 12 -系統(tǒng)拓撲圖- 12 -IP規(guī)劃- 13 -軟硬件要求- 13 -2.建立群集- 13 -安裝Experss Cluster集群軟件（兩臺機器都做）- 13 -配置Experss Cluster集群軟件（一臺即可）- 22 -4.驗證安裝- 107 -4.其它說明- 109 -前言EXPRESSCLUSTER是一款專業(yè)的高可用集群軟件產(chǎn)品，它可提供Windows和Linux平臺上完整的高可用性解決方案。當集群中的某個節(jié)點由于軟件或硬件原因發(fā)生故障時，集群系統(tǒng)可以把IP、客戶業(yè)務(wù)等資源切換到其他健康的節(jié)點上，使整個系統(tǒng)能連續(xù)不間斷的對外提供服務(wù)Experss Cluster集群軟件功能特點高可靠性.高可用性在要求持續(xù)運行的關(guān)鍵業(yè)務(wù)系統(tǒng)中，由于服務(wù)器宕機等故障所造成的業(yè)務(wù)停止將帶來無法估量的損失。在由NEC的容錯軟件EXPRESSCLUSTER構(gòu)建的集群系統(tǒng)中，即使某臺服務(wù)器發(fā)生故障，用戶業(yè)務(wù)和數(shù)據(jù)也可迅速切換到健康的服務(wù)器上，從而保證了整個系統(tǒng)對外服務(wù)的正常，為企業(yè)24小時x365天的關(guān)鍵業(yè)務(wù)應(yīng)用提供了強大的保障。 多種心跳監(jiān)測方式 支持網(wǎng)卡(私網(wǎng)/公網(wǎng))、COM口、磁盤心跳等多種心跳方式,多重保障心跳檢測途徑，進一步提高了系統(tǒng)的可靠性。EXPRESSCLUSTER獨特的利用內(nèi)核空間進行心跳探測的技術(shù)，可以保證心跳探測不受系統(tǒng)負荷影響，從而避免在高負荷狀態(tài)下心跳超時所導(dǎo)致的誤切換。支持共享、鏡像、混合等多種集群構(gòu)成方式支持差分鏡像在鏡像型方案中，我們使用的差分備份和差分恢復(fù)技術(shù),可直接對2臺服務(wù)器的鏡像盤中的差分數(shù)據(jù)進行同步和恢復(fù)，而不必通過全盤Copy，大幅縮短了鏡像同步及恢復(fù)所需的時間，提高了鏡像集群的性能。 支持多節(jié)點鏡像支持多節(jié)點鏡像技術(shù)，可以用一臺服務(wù)器同時對多個節(jié)點進行鏡像復(fù)制，實現(xiàn)多節(jié)點之間互為備份的構(gòu)筑方式。利用EXPRESSCLUSTER率先實現(xiàn)的多節(jié)點鏡像技術(shù)，可以在不犧牲系統(tǒng)可靠性和性能的前提下，實現(xiàn)更為靈活的配置，進一步節(jié)省硬件投資。多種集群工作模式不僅支持傳統(tǒng)的單活(Active/Passive)、雙活(Active/Active)，還支持N和N+1多節(jié)點集群備份。 (1)Active/Passive (2)Active/Active (3)N+1備份 (4) M+N備份 支持鏡像集群的遠程容災(zāi) EXPRESSCLUSTER在應(yīng)用方式上的另一個創(chuàng)舉就是將鏡像型集群應(yīng)用于遠程容災(zāi)解決方案中。通常的遠程容災(zāi)解決方案，對網(wǎng)絡(luò)環(huán)境要求高、實施復(fù)雜、實現(xiàn)成本也比較昂貴。而利用EXPRESSCLUSTER鏡像型集群軟件的遠程容災(zāi)解決方案，不但能夠異地備份業(yè)務(wù)數(shù)據(jù)，還可以對軟硬件資源進行監(jiān)視，在主節(jié)點發(fā)生故障時，還能夠自動在備份節(jié)點恢復(fù)業(yè)務(wù)。將業(yè)務(wù)服務(wù)的停止控制在最小限度。 支持虛擬技術(shù) EXPRESSCLUSTER支持虛擬集群，它既可以做虛擬機層級的高可用集群解決方案，也可以針對虛擬機上的業(yè)務(wù)構(gòu)建高可用集群。當虛擬計算機上運行業(yè)務(wù)發(fā)生故障時， EXPRESSCLUSTER可以將其切換到另外一個虛擬計算機。如果虛擬機軟件本身發(fā)生故障，或者物理服務(wù)器發(fā)生故障，EXPRESSCLUSTER能夠?qū)⑻摂M計算機整個切換到另外一臺物理服務(wù)器上。此外，還可以利用虛擬計算機，對物理服務(wù)器進行備份。例如，如果希望利用一臺服務(wù)器，分別對運行不同操作系統(tǒng)的物理服務(wù)器進行備份利用虛擬技術(shù)與EXPRESSCLUSTER相結(jié)合，將很容易就可以實現(xiàn)。最多支持32節(jié)點，具備良好的系統(tǒng)擴展性 伴隨業(yè)務(wù)的擴大可動態(tài)追加集群的服務(wù)器節(jié)點，最多能擴展到32個節(jié)點； 多平臺支持支持目前國內(nèi)幾乎所有主流的Windows和Linux操作系統(tǒng)平臺,如WindowsNT/2000/2003,RedHat,Turbolinux,MIRACLELINUX,Novell SUSE LINUX,RedFlag等。支持64位架構(gòu)支持IA-64、EM64T和和PPC64等64位架構(gòu)的服務(wù)器和操作系統(tǒng)平臺靈活選擇存儲設(shè)備支持目前國內(nèi)大多數(shù)主流的存儲設(shè)備，如NEC、IBM、Dell、EMC、HP、聯(lián)想、曙光等眾多知名存儲設(shè)備廠商的產(chǎn)品。并且不僅支持單通路盤柜，還支持多通路盤柜，另外，對iSCSI型的盤柜設(shè)備也提供支持。支持多種應(yīng)用保護EXPRESSCLUSTER可以保護大量的應(yīng)用程序和服務(wù)，幾乎涵蓋了目前Windows和Linux平臺上所有主流的應(yīng)用和服務(wù)，如Oracle、SQLServer、DB2、Sybase、Postgre SQL、PowerGres、MySQL、Exchange Server、Appache、Samba等（詳細參見“確認支持的軟件”）。除了這些主流的應(yīng)用和服務(wù)，還可以保護用戶自己開發(fā)的應(yīng)用程序和服務(wù)。深層次僵死狀態(tài)的監(jiān)控除了對應(yīng)用程序和服務(wù)的常規(guī)級別的監(jiān)視外(所謂常規(guī)監(jiān)視即進程死活級別的監(jiān)視), EXPRESSCLUSTER還提供了一系列監(jiān)視選件，如Database Agent, Internet Server Agent, Application Server Agent, File Server Agent等，這些監(jiān)視選件可對EXPRESSCLUSTER上運行的數(shù)據(jù)庫等應(yīng)用程序和服務(wù)的僵死狀態(tài)(Stall)進行監(jiān)視,從而為用戶的關(guān)鍵業(yè)務(wù)系統(tǒng)提供了更深層次的保護。全新的中文化界面，輕松配置集群使用全新的中文界面集群簡易構(gòu)筑工具（Builder）可以實現(xiàn)集群的快速構(gòu)筑，大大方便系統(tǒng)管理員的操作。人性化的向?qū)崾?，可輕松、快速構(gòu)建集群；支持在線的編輯方式，集群配置信息直接上傳到集群并生效；支持集群配置文件的導(dǎo)入、導(dǎo)出和離線編輯，稍作修改就可輕松配置出大量結(jié)構(gòu)相似的集群。在發(fā)生故障更換服務(wù)器時，只需要將備份的配置文件導(dǎo)入新服務(wù)器即可迅速完成恢復(fù)。遠程管理.簡便操作 基于B/S架構(gòu)的管理工具和配置工具，支持跨平臺遠程管理，不需要安裝客戶端程序，只要有瀏覽器和Java運行環(huán)境，任何一臺機器都可以進行監(jiān)控、維護和配置操作，極大的方便了系統(tǒng)管理員的操作和管理。提供故障通知服務(wù)當集群發(fā)生異常狀態(tài)時，ExpressCluster會通過AlertService功能向管理者發(fā)送電子郵件形式或者手機短信方式的故障通知服務(wù)，極大的方便了管理員的維護工作，讓管理員隨時隨地掌握集群最新狀況。另外，還可以通過外接的網(wǎng)絡(luò)報警燈設(shè)備，進行聲光方式的故障報警對GPT分區(qū)格式的支持增加了對GPT分區(qū)格式的支持，可實現(xiàn)超過2TB的大容量數(shù)據(jù)分區(qū)的劃分。1.創(chuàng)建集群的基本要求及前期準備系統(tǒng)拓撲圖IP規(guī)劃名稱IP地址子網(wǎng)掩碼Dayang-1 公網(wǎng)IP0Dayang-2 公網(wǎng)IP1Dayang-1 心跳IP0Dayang-2 心跳IP1數(shù)據(jù)庫實例虛擬IP客戶端IP00軟硬件要求EXPRESSCLUSTER軟件對硬件沒有特殊要求，在進行高可用部署時，要求雙機已經(jīng)安裝好SQLServer軟件，并將系統(tǒng)服務(wù)中的SQL Server服務(wù)停止，并將屬性改為“手動”。本次手冊中的軟硬件環(huán)境如下：Dayang-1硬件配置2*CPU E5430 2.66GHz8GB 內(nèi)存3*146GB SATA軟件配置Windows 2008 EnterpriseSQL Server 2008 EnterpriseExperss Cluster 2.0 TrailDayang-2硬件配置2*CPU E5430 2.66GHz8GB 內(nèi)存3*146GB SATA軟件配置Windows 2008 EnterpriseSQL Server 2008 EnterpriseExperss Cluster 2.0 Trail2.建立群集安裝Experss Cluster集群軟件（兩臺機器都做）NEC ExpressCluster工作時需要一個管理分區(qū)，大小在20MB以上即可，2臺服務(wù)器的分區(qū)大小必須在字節(jié)上保持一致，做鏡像時要求鏡像分區(qū)大小也在字節(jié)上保持一致，這里一定要注意，否則會引起集群工作失?。∶總€分區(qū)的盤符和卷標必須一致。并且管理分區(qū)不能使用Windows自帶的文件系統(tǒng)格式化，將空間分好就可以了。在劃分管理分區(qū)時，選擇“不要格式化這個磁盤分區(qū)”安裝好SQLServer2005,并將數(shù)據(jù)庫文件保存在F盤下，2臺服務(wù)器都是如此。并且請注意在服務(wù)項里需要將SQLServer的啟動類型改為手動運行安裝文件，選擇“NEC EXPRESSCLUSTER for Windows”點擊“下一步”，點擊“下一步”，點擊“安裝”，點擊“下一步”，這里不進行任何操作，這是使用共享式存儲設(shè)置的地方，本次測試針對鏡像磁盤，在隨后彈出的警告對話框不用理會，點擊“下一步”點擊“是”，點擊“登錄”，點擊“使用License文件進行登錄”在彈出的對話框中，選擇以“BASE20”結(jié)尾的License文件。點擊“確定”。重復(fù)上述操作，將結(jié)尾“REPL20”的License文件也進行注冊。安裝完成后，重啟計算機。配置Experss Cluster集群軟件（一臺即可）使用dayang-1服務(wù)器，打開IE瀏覽器，在地址欄里輸入“1:29003”，回車。這里的管理端使用的2008系統(tǒng)，IE安全度較高，將0:29003或者1:29003添加到信任網(wǎng)站就可以了，XP系統(tǒng)不存在此問題。這時會彈出一個界面，意思是需要編輯一個“java.policy”的文件開打運行，在其中輸入紅框處的命令，打開“java.policy”會提示找個不到改文件，是否創(chuàng)建，點擊“是”將紅框處的內(nèi)容整體復(fù)制到創(chuàng)建的“java.policy”文本框中，保存退出。將這個IE全部推出，重新登陸一遍，就可以進入“START BUILDER”,配置集群了點擊“設(shè)定”彈出“START BUILDER”界面點擊左上“文件”，彈出的下拉菜單選擇“集群生成向?qū)А睆棾龅膶υ捒驗榧喝∶?，這里輸入群集名，點擊“下一步”點擊紅框處的“添加”，這里是添加集群節(jié)點的。這里在名稱處輸入第一臺節(jié)點的機器名“dayang-1”，點擊“下一步”在出現(xiàn)的對話框中點擊“添加”，在出現(xiàn)的界面中輸入改節(jié)點的鏡像IP地址“”，點擊“確定”同樣，在添加完鏡像IP后，再將改節(jié)點公網(wǎng)IP添加進來，“”，保持鏡像IP地址在公網(wǎng)IP地址之上就可以了，點擊“下一步”可以看到，公網(wǎng)IP地址自動出現(xiàn)了，直接點擊“下一步”不進行任何設(shè)置，下一步不進行任何設(shè)置，下一步不進行任何設(shè)置，下一步不進行任何設(shè)置，下一步不進行任何設(shè)置，下一步不進行任何設(shè)置，完成在返回到向?qū)Ы缑婧?，可以看到添加的第一個節(jié)點“dayang-1”，這時再點擊“添加”，添加第2臺節(jié)點，輸入機器名“dayang-2”，下一步因為是第2臺節(jié)點，這里直接就有2個IP地址輸入，分別選擇地址框后，點擊“編輯”，將IP地址加入，注意要和節(jié)點1對應(yīng)，1IP輸入“1”，2IP輸入“1”不進行任何設(shè)置，點擊“下一步”，不進行任何設(shè)置，點擊“下一步”，不進行任何設(shè)置，點擊“下一步”，不進行任何設(shè)置，點擊“下一步”，不進行任何設(shè)置，點擊“下一步”，不進行任何設(shè)置，點擊“完成”，點擊“添加”類型是“失效切換”，名稱為“failover_SQL”，點擊“下一步”把2個節(jié)點從“能夠使用的服務(wù)器”添加到“可以啟動組的服務(wù)器”中，點擊“完成”選擇“組資源”點擊“添加”類型選擇“浮動IP資源”，名稱為“fip_SQL”,點擊“下一步”輸入虛擬IP地址，，點擊“下一步”這里不做任何修改，下一步這里點擊“完成”點擊“關(guān)閉”為剛才建立的虛擬IP添加一個監(jiān)控，這里點擊“添加”資源類型選擇“浮動IP監(jiān)視”，名稱是“fipw_SQL”，點擊“下一步”點擊“下一步”在目標資源處點擊“參照”，出現(xiàn)的對話框選擇“fip_SQL”，點擊“確定”在復(fù)歸對象處點擊“參照”，在出現(xiàn)的對話框中選擇“fip_SQL”，點擊“確定”點擊“完成”點擊“文件”，選擇“上傳配置文件”顯示上傳成功在最初登陸界面上的“服務(wù)”中選擇“重新啟動管理器”，之后再選擇“啟動群集”可以看到集群已經(jīng)正常工作了，顯示為綠色，在右邊狀態(tài)欄中顯示綠色“NORMAL”，此時可以在命令行中去PING 的虛IP，發(fā)現(xiàn)已經(jīng)可以PING通了。代表虛擬IP已經(jīng)工作了?，F(xiàn)在來添加鏡像磁盤。在集群配置界面的SERVERS項中，右鍵點擊“dayang-1”，選擇“屬性”在這里選擇“鏡像連接I/F”，點擊“添加”在這里輸入該節(jié)點的鏡像IP地址 0，點擊“確定”點擊“確定”另一個節(jié)點“dayang-2”也是一樣，點擊“鏡像連接I/F”可以發(fā)現(xiàn)，已經(jīng)生成了地址框，只需要編輯添加dayang-2的鏡像IP地址就可以了返回集群設(shè)置界面，在“GROUPS”下的“failover_SQL”項目上點擊右鍵，選擇“添加資源”類型選擇“鏡像磁盤資源”，名稱為“md_SQL”，點擊“下一步”選擇dayang-1，點擊“添加”，這里在數(shù)據(jù)分區(qū)里點亮F盤，在集群分區(qū)里點亮E盤，點擊“確定”。如果這里沒有顯示出磁盤信息，點擊“連接”就可以了這時紅框處已經(jīng)顯示了節(jié)點的分區(qū)信息。不做任何更改，下一步取消鉤選左上的“遵循原由的依賴關(guān)系”，將在右邊可用資源中出現(xiàn)的“fip_SQL”添加到左邊的依賴資源中，點擊“完成”在集群配置中就出現(xiàn)了鏡像盤資源，點擊文件，選擇“上傳信息文件”，按照軟件提示，停掉一些服務(wù)或者集群，直到上傳成功上傳成功后，啟動服務(wù)后，2個節(jié)點會對鏡像盤做一個初始同步，需要一定的時間（NEC工程師說1個G空間大概需要1分鐘左右）。等初始化結(jié)束，可以看到資源中虛擬IP和鏡像磁盤工作都是正常的，狀態(tài)均是“ONLINE”,接下來添加數(shù)據(jù)庫程序，在集群