所HACMP51安裝報(bào)告

1、沈陽(yáng)606所HACMP5.1安裝與配置報(bào)告ED-In P.R. China2005-03Hacmp 5.1 的安裝配置方法一、 Hacmp 的軟件安裝1 安裝前提1.1 準(zhǔn)備AIX操作系統(tǒng) 在開(kāi)始安裝HACMP5.1軟件之前，首先要完成兩臺(tái)P660服務(wù)器的操作系統(tǒng)升級(jí)操作，包括在兩臺(tái)P660服務(wù)器上安裝AIX v操作系統(tǒng)，并使用AIX Maintenance Level ML04軟件包將操作系統(tǒng)升級(jí)至版本。目前，AIX v5.2操作系統(tǒng)最新的Maintenance Level版本為ML05，如果有條件，最好升級(jí)至最新的Maintenance Level。在升級(jí)完操作

2、系統(tǒng)之后，請(qǐng)檢查系統(tǒng)中已經(jīng)安裝的軟件包，并確認(rèn)系統(tǒng)中已經(jīng)安裝了如下所列的各個(gè)軟件包，如果系統(tǒng)中未安裝這些軟件包，那么請(qǐng)使用基本的AIX v操作系統(tǒng)光盤(pán)安裝這些軟件包，并使用Maintenance Level補(bǔ)訂包將這些軟件包升級(jí)至最新版本。l RSCT 0 或更高版本l bos.adt.libl bos.adt.libml bos.adt.syscallsl bos.datal .tcp.clientl .tcp.serverl bos.rte.SRCl bos.rte.libcl bos.rte.libcfgl bos.rte.libcurl bos.rte.li

3、bpthreadsl bos.rte.odml rsct.*如果您要安裝并行的資源組，還要安裝下面的包：l bos.rte.lvm.rte5 or higherl bos.clvm.enh*1.2 準(zhǔn)備Oracle數(shù)據(jù)庫(kù)系統(tǒng)如果系統(tǒng)中需要安裝Oracle 9i數(shù)據(jù)庫(kù)，而又不想配置成Oracle并行數(shù)據(jù)庫(kù)系統(tǒng)，那么請(qǐng)?jiān)陂_(kāi)始安裝HACMP之前完成Oracle 9i數(shù)據(jù)庫(kù)的安裝與配置操作。1.2.1 準(zhǔn)備共享磁盤(pán)卷 為實(shí)現(xiàn)HACMP環(huán)境下Oracle數(shù)據(jù)庫(kù)的高可用配置，我們需要為Oracle數(shù)據(jù)庫(kù)實(shí)例準(zhǔn)備共享磁盤(pán)卷。 在AIX操作系統(tǒng)下使用smitty ssaraid命令，在7133

4、D40磁盤(pán)陣列上創(chuàng)建兩個(gè)RAID 5類型的Disk Array，分別用于Oracle數(shù)據(jù)庫(kù)數(shù)據(jù)和Iman文件系統(tǒng)數(shù)據(jù)。使用上面創(chuàng)建的Disk Array分別創(chuàng)建oraclevg和imanvg兩個(gè)卷組，設(shè)置卷組auto varyon為no，在Oraclevg上創(chuàng)建oraclelv和/oracledbs文件系統(tǒng)（類型為jfs2），在imanvg上創(chuàng)建imanlv和/imanvol文件系統(tǒng)，設(shè)置兩個(gè)文件系統(tǒng)的auto mount屬性為no。 在創(chuàng)建卷組和文件系統(tǒng)的P660服務(wù)器上varyoff這兩個(gè)卷組，在另外一臺(tái)P660服務(wù)器上使用smitty importvg命令分別導(dǎo)入兩個(gè)卷組，注意在導(dǎo)入卷組

5、時(shí)設(shè)置major number屬性值與另外一臺(tái)P660服務(wù)器上相同的值。導(dǎo)入卷組后修改卷組的auto varyon屬性為no。1.2.2 安裝并創(chuàng)建Oracle實(shí)例 使用Oracle 9i安裝介質(zhì)安裝數(shù)據(jù)庫(kù)系統(tǒng)，如果使用的是光盤(pán)，那么首先mount光盤(pán)，我們這里假設(shè)mount點(diǎn)為/cdrom，記得在/下而不是在/cdrom下去運(yùn)行/cdrom/runInstaller安裝腳本，否則在要求更換光盤(pán)時(shí)無(wú)法umount光盤(pán)。 安裝Oracle安裝程序的提示進(jìn)行安裝，選擇安裝企業(yè)版數(shù)據(jù)庫(kù)服務(wù)器，選擇僅安裝軟件文件而不創(chuàng)建實(shí)例。 在一臺(tái)服務(wù)器上完成安裝之后，在另外一臺(tái)服務(wù)器上完成同樣的安裝過(guò)程。 然后在

6、兩臺(tái)服務(wù)器上創(chuàng)建dba用戶組和oracle、infodba兩個(gè)系統(tǒng)用戶。在兩個(gè)用戶的home目錄下編輯.profile文件至適當(dāng)內(nèi)容（請(qǐng)按照IMAN系統(tǒng)要求編輯該文件）。 安裝過(guò)程完成之后，在擁有oraclevg卷組的服務(wù)器上運(yùn)行oracle的數(shù)據(jù)庫(kù)配置工具dbca創(chuàng)建數(shù)據(jù)庫(kù)實(shí)例iman，按照IMAN系統(tǒng)需求設(shè)置各參數(shù)，設(shè)置各配置文件、控制文件、日志文件、數(shù)據(jù)文件的存儲(chǔ)位置到/oracledbs/dbs/目錄下的相應(yīng)位置。然后完成實(shí)例創(chuàng)建。完成后，將/etc/oratab文件拷貝到另外一臺(tái)服務(wù)器的相同位置。2 開(kāi)始安裝使用HACMP v5.1光盤(pán)介質(zhì)進(jìn)行安裝，在安裝過(guò)程中除了haview，ne

7、twiew( Tivoli)的包以外，所有的hacmp的包都要安裝。3 打補(bǔ)丁在HACMP v5.1安裝完成之后，需要繼續(xù)為HACMP打補(bǔ)丁，以將HACMP版本升級(jí)至最新，如果可以獲得最新的HACMP完整的補(bǔ)訂包，那么使用該補(bǔ)訂包進(jìn)行升級(jí)，如果無(wú)法獲得最新的HACMP完整的補(bǔ)訂包，那么可以在IBM網(wǎng)站下載IY53044、IY37779、IY45695、IY65063這幾個(gè)必需的補(bǔ)訂，然后使用smitty install命令將其安裝到系統(tǒng)中。4 重啟機(jī)器安裝完HACMP軟件之后，需要重新啟動(dòng)系統(tǒng)，現(xiàn)在我們重新啟動(dòng)兩臺(tái)P660服務(wù)器，接下來(lái)再進(jìn)行HACMP的配置操作。注：在hacmp 5.1中為了

8、安全起見(jiàn)，不再使用/.rhosts文件來(lái)控制兩臺(tái)機(jī)器之間的命令和數(shù)據(jù)交換，而是引進(jìn)的一個(gè)新的進(jìn)程clcomd。如果你編輯/etc/inittab文件就會(huì)發(fā)現(xiàn)安裝完hacmp后，在最后添加了一行：clcomdES:2:once:startsrc -s clcomdES >/dev/console 2>&1。因此重新啟機(jī)后，ps ef|grep clcomd ,會(huì)發(fā)現(xiàn)：root 12908 6478 0 Apr 12 - 0:21 /usr/es/sbin/cluster/clcomd d，證明該進(jìn)程啟動(dòng)了。Hacmp5.1使用/usr/es/sbin /cluster/etc

9、/rhosts文件來(lái)代替/.rhosts文件的功能。注意：如果兩個(gè)節(jié)點(diǎn)間的通訊發(fā)生了什么問(wèn)題，可以檢查rhots文件，或者編輯rhosts文件加入兩個(gè)節(jié)點(diǎn)的網(wǎng)絡(luò)信息。二、 hacmp5.1 的配置1. 準(zhǔn)備2臺(tái)P660服務(wù)器的網(wǎng)絡(luò)配置在P660服務(wù)器Oraclesvr上，使用smitty hostname命令設(shè)置主機(jī)名為Oraclesvr，使用smitty tcpip命令設(shè)置2塊網(wǎng)卡的boot ip。設(shè)置第一塊網(wǎng)卡的boot ip為，子網(wǎng)掩碼為；設(shè)置第二塊網(wǎng)卡的boot ip為，設(shè)置子網(wǎng)掩碼為。編輯/etc/h

10、osts文件如下：loopback localhost# loopback (lo0) name/address Oraclesvr_boot1 Oraclesvr Oraclesvr_svc Oraclesvr_per Oraclesvr_boot2 Imansvr_boot1 Imansvr Imansvr_boot Imansvr_svc編輯/.rhosts文件如下：ImansvrImansvr_boot1Imansvr_boot2Im

11、ansvr_svcOraclesvr_boot1Oraclesvr_boot2Oraclesvr_svcOraclesvr_perOraclesvr在P660服務(wù)器Imansvr上，使用smitty hostname命令設(shè)置主機(jī)名為Imansvr，使用smitty tcpip命令設(shè)置2塊網(wǎng)卡的boot ip。設(shè)置第一塊網(wǎng)卡的boot ip為，子網(wǎng)掩碼為；設(shè)置第二塊網(wǎng)卡的boot ip為，設(shè)置子網(wǎng)掩碼為。編輯/etc/hosts文件如下：loopback localhost# loopback

12、(lo0) name/address Imansvr_boot1 Imansvr Imansvr_svc Imansvr_boot2 Oraclesvr_boot1 Oraclesvr Oraclesvr_boot Oraclesvr_svc Oraclesvr_per編輯/.rhosts文件如下：Imansvr_boot1Imansvr_boot2Imansvr_svcImansvrOraclesvr_boot1Oraclesvr_boot2Oraclesv

13、r_svcOraclesvr_perOraclesvr注意：在使用smitty tcpip設(shè)置網(wǎng)卡的boot ip時(shí)，一定要保證2臺(tái)服務(wù)器4塊網(wǎng)卡的tcpip子網(wǎng)掩碼設(shè)置一致，否則在后面同步HACMP配置時(shí)無(wú)法通過(guò)。2. 準(zhǔn)備共享卷組 共享卷組的準(zhǔn)備過(guò)程我們?cè)谇懊鏈?zhǔn)備Oracle數(shù)據(jù)庫(kù)系統(tǒng)的過(guò)程中已經(jīng)做過(guò)，這里不需要再重復(fù)。3. 準(zhǔn)備RS232連接 注：RS232連接在HACMP 5.1版本中已經(jīng)不再是必需的，如果環(huán)境中有，那么可以按照如下方式配置。 首先，使用smitty aio命令將系統(tǒng)中的異步I/O卡設(shè)置為enable，并且配置為available。 然后，使用smitty tty命令在

14、連接了RS232線纜的端口上創(chuàng)建/dev/tty0（序號(hào)因系統(tǒng)環(huán)境不同系統(tǒng)會(huì)自動(dòng)設(shè)定）。設(shè)置參數(shù)如下所示：配置完成后，應(yīng)測(cè)試串行網(wǎng)絡(luò)的連通性。假定在兩個(gè)節(jié)點(diǎn)上配置的TTY的設(shè)備名都為/dev/tty0，在兩個(gè)節(jié)點(diǎn)上分別輸入命令stty < /dev/tty0，如果TTY配置正確且連通，兩條命令都應(yīng)正確返回命令行。4. 準(zhǔn)備Application啟動(dòng)/停止腳本 在/pdm/oracle/ora92目錄下創(chuàng)建script子目錄，在該子目錄下創(chuàng)建start_oracle腳本文件，內(nèi)容如下：su oracle c dbstart創(chuàng)建stop_oracle腳本文件，內(nèi)容如下：su oracle c

15、 dbshut創(chuàng)建start_iman腳本文件和stop_iman腳本文件，暫時(shí)保持文件內(nèi)容為空，待將來(lái)安裝了TSM Client之后再在其中添件所需內(nèi)容。將4個(gè)腳本在2臺(tái)P660服務(wù)器的/pdm/oracle/ora92/script目錄下均保存一份，注意兩邊保存的位置和文件名稱一定要保持一致。5. 用smitty hacmp來(lái)配置hacmp 5.1 添加cluster 和node smitty hacmpInitialization and Standard Configuration Extended Configuration System Management (C-SPOC) Pr

16、oblem Determination ToolsAdd Nodes to an HACMP Cluster Configure Resources to Make Highly Available Configure HACMP Resource Groups Verify and Synchronize HACMP ConfigurationDisplay HACMP Configuration * Cluster Name imanha New Nodes (via selected communication paths) oraclesvr_boot1 imansvr_boot1 C

17、urrently Configured Node(s)這一部很重要，一般我們都是把每個(gè)節(jié)點(diǎn)的boot1 作為communication path 。 New node可以一起加，也可以一個(gè)一個(gè)的加。當(dāng)回車(chē)以后，系統(tǒng)會(huì)自己discover hacmp的資源。顯示如下：。IP Network Discovery completed normallyCurrent cluster configuration:No resource groups definedCluster Description of Cluster: imanhaCluster Security Level: StandardT

18、here are 2 node(s) and 1 network(s) definedNODE imansvr: Network net_ether_01 imansvr_boot1 imansvr_boot2 NODE oraclesvr: Network net_ether_01 oraclesvr _boot1 oraclesvr _boot2 。5.2 添加高可用資源（service ip，application server，vg and jfs） 添加服務(wù)ip地址 Add Nodes to an H

19、ACMP Cluster Configure Resources to Make Highly Available Configure HACMP Resource Groups Verify and Synchronize HACMP Configuration Display HACMP Configuration Configure Service IP Labels/Addresses Configure Application Servers Configure Volume Groups, Logical Volumes and Configure Concurrent Volum

20、e Groups and Logical Volumes Add a Service IP Label/Address Change/Show a Service IP Label/Address Remove Service IP Label(s)/Address(es)* IP Label/Address imansvr_svc Network Name net_ether_01* IP Label/Address oraclesvr_svc Network Name net_ether_01添加application server Configure Service IP Labels/

21、Addresses Configure Application Servers Configure Volume Groups, Logical Volumes and Configure Concurrent Volume Groups and Logical Volumes Add an Application Server Change/Show an Application Server Remove an Application Server* Server Name imanapp* Start Script /pdm/oracle/ora92/start_iman* Stop S

22、cript /pdm/oracle/ora92/stop_iman* Server Name oracleapp* Start Script /pdm/oracle/ora92/start_oracle* Stop Script /pdm/oracle/ora92/stop_oracle添加共享vg，jfs 注意在前面的準(zhǔn)備Oracle數(shù)據(jù)庫(kù)的步驟中我們已經(jīng)建立了共享VG imanvg和oraclevg， 并建立了共享文件系統(tǒng)/imanvol和/oracledbs。這里無(wú)需再做。5.3 創(chuàng)建資源組 Initialization and Standard Configuration Extend

23、ed Configuration System Management (C-SPOC) Problem Determination ToolsAdd Nodes to an HACMP Cluster Configure Resources to Make Highly Available Configure HACMP Resource Groups Verify and Synchronize HACMP Configuration Display HACMP ConfigurationAdd a Resource Group Change/Show a Resource Group Re

24、move a Resource Group Change/Show Resources for a Resource Group (standard)CascadingRotating Concurrent Custom * Resource Group Name imanres* Participating Node Names / Default Node Priority imansvr oraclesvr同樣方法可以添加oracleres* Resource Group Name oracleres* Participating Node Names / Default Node Pr

25、iority oraclesvr imansvr接下來(lái)可以配置資源組，當(dāng)然也可以在Extended Configuration 中去詳細(xì)配置。我們姑且先在Initialization and Standard Configuration 中配置。 Smitty cm_config_hacmp_resource_groups_menu_dmnAdd a Resource Group Change/Show a Resource Group Remove a Resource GroupChange/Show Resources for a Resource Group (standard)選擇i

26、manresResource Group Name imanres Participating Node Names (Default Node Priority) imansvr oraclesvr* Service IP Labels/Addresses imansvr_svc Volume Groups imanvg (empty is ALL for VGs specified) /imanvol Application Servers imanapp同樣的方法配置oracleres Resource Group Name oracleres Participating Node Na

27、mes (Default Node Priority) oraclesvr imansvr* Service IP Labels/Addresses oraclesvr_svc Volume Groups oraclevg (empty is ALL for VGs specified) /oracledbs Application Servers oracleapp檢查和同步hacmp配置Initialization and Standard Configuration Extended Configuration System Management (C-SPOC) Problem Det

28、ermination ToolsAdd Nodes to an HACMP Cluster Configure Resources to Make Highly Available Configure HACMP Resource Groups Verify and Synchronize HACMP Configuration Display HACMP ConfigurationCluster Description of Cluster: imanhaCluster Security Level: StandardThere are 2 node(s) and 1 network(s)

29、definedNODE imansvr: Network net_ether_01 imansvr_svc oraclesvr_svc imansvr_boot2 imansvr_boot1 NODE oraclesvr: Network net_ether_01 oraclesvr_svc imansvr_svc oraclesvr_boot1 oraclesvr_boot2 Resource Group imanres: Beh

30、avior cascading Participating Nodes imansvr oraclesvr Service IP Label imansvr_svcResource Group oracleres: Behavior cascading Participating Nodes oraclesvr imansvr Service IP Label oraclesvr_svc注意node imansvr的ip 地址排列，雖然imansvr_boot2 排在imansvr_boot1前面，但是實(shí)驗(yàn)證明，service 地址依然會(huì)綁定在communication path 上?，F(xiàn)在就可

31、以做Initialization and Standard Configuration Verify and Synchronize HACMP Configuration . 然后start 一下hacmp ，看看take over 是否都正常。 注意，很多客戶是把所有的hacmp 包括應(yīng)用都配好后再試起hacmp, 作takeover 測(cè)試，這是很不好的一種習(xí)慣。因?yàn)槿谌氲目赡芤蛩靥嗔耍坏┯辛藛?wèn)題，我們還要隔離問(wèn)題，先把hacmp配置簡(jiǎn)化，再一步步作pd , 那么先前的配置就白做了。所以建議客戶階段性的監(jiān)測(cè)一下hacmp。到此為止我們的hacmp已經(jīng)基本配置完成了。剩下的要在Exten

32、ded Configuration中配置了。6. HACMP Extended Configuration在Extended Configuration中我們還可以配置tty心跳網(wǎng)絡(luò)，hdisk心跳網(wǎng)絡(luò)，Persistent Node IP，application monitor等等。 6.1 配置RS232心跳網(wǎng)絡(luò)下面我們先介紹一下配置RS232心跳網(wǎng)絡(luò)。添加RS232網(wǎng)絡(luò)和設(shè)備Initialization and Standard Configuration Extended Configuration System Management (C-SPOC) Problem Determin

33、ation ToolsDiscover HACMP-related Information from Configured Nodes Extended Topology Configuration Extended Resource Configuration Extended Event Configuration Extended Performance Tuning Parameters Configuration Security and Users ConfigurationSnapshot ConfigurationExtended Verification and Synchr

34、onizationConfigure an HACMP Cluster Configure HACMP Nodes Configure HACMP Sites Configure HACMP Networks Configure HACMP Communication Interfaces/Devices Configure HACMP Persistent Node IP Label/Addresses Configure HACMP Global Networks Configure HACMP Network Modules Configure Topology Services and

35、 Group Services Show HACMP TopologyAdd a Network to the HACMP Cluster Change/Show a Network in the HACMP Cluster Remove a Network from the HACMP Cluster# Pre-defined Serial Device Types diskhb rs232 tmscsi tmssa * Network Namem net_rs232_01* Network Type rs232添加設(shè)備：Extended ConfigurationExtended Topo

36、logy ConfigurationConfigure HACMP Communication Interfaces/Devices Add Communication Interfaces/Devices Add Pre-defined Communication Interfaces and Devices Communication Devices net_rs232_01 * Device Name imansvr_rs232* Network Type rs232* Network Name net_rs232_01* Device Path /dev/tty0* Node Name

37、 imansvr * Device Name oraclesvr_rs232* Network Type rs232* Network Name net_rs232_01* Device Path /dev/tty0* Node Name oraclesvr Extended ConfigurationExtended Topology Configuration Show HACMP TopologyCluster Description of Cluster: imanhaCluster Security Level: StandardNODE imansvr: Network net_rs232_01 Imansvr_rs232 /dev/tty0 Network net_ether_01 imansvr_svc oraclesvr_svc imansvr_boot2 imansvr_boot1 NODE oraclesvr: Network net_rs232_01 Oraclesvr_rs232 /dev/tty0 Network net_ether_01 imansv