巡檢常用命令.doc

IBM AIX 小型機(jī)巡檢常用命令及流程第一：首先是機(jī)房溫度以及濕度的檢查，當(dāng)然這些一般情況都沒(méi)問(wèn)題。 參考值：溫度（攝氏 ） 10 40 濕度 8% 80%第二：就是關(guān)于電源的檢測(cè)，這個(gè)只要不是新裝機(jī)，一般沒(méi)問(wèn)題。 參考值： 零-地電壓 小于1V 火-地電壓 200-240V （補(bǔ)充：當(dāng)然59系列的機(jī)器相間380V，相地240V）第三：關(guān)于報(bào)錯(cuò)。 主要查看硬件的永久性報(bào)錯(cuò) #errpt -dH | pg 軟件的永久性報(bào)錯(cuò) #errpt -dS | pg 還有系統(tǒng)又沒(méi)又報(bào)警燈 第三：機(jī)器的序列號(hào)：#uname -Mu第四：操作系統(tǒng)版本：#oslevel -r 注：有時(shí)候不能使用是因?yàn)橄到y(tǒng)版本低的原因第五：其他檢測(cè)執(zhí)行sysdumpdev l （檢查dump是否設(shè)置為always allow sysdump）執(zhí)行sysdumpdev e （檢查當(dāng)前dump大小應(yīng)該為主dump設(shè)備的大小的80以下）執(zhí)行l(wèi)svg -l rootvg （檢查有否stale狀態(tài)的邏輯卷）執(zhí)行l(wèi)sps -s （檢查內(nèi)存交換區(qū)占用情況）執(zhí)行df k （檢查文件系統(tǒng)的分配狀況,一般不要超過(guò)80%）執(zhí)行l(wèi)sdev Cc disk （檢查硬盤狀態(tài)為available）執(zhí)行l(wèi)sdev Cc adapter （檢查PCI卡狀態(tài)為available）執(zhí)行l(wèi)sdev Cc tape （檢查磁帶機(jī)狀態(tài)為available）執(zhí)行l(wèi)sdev Cc processor （檢查CPU狀態(tài)為available）執(zhí)行l(wèi)sattr El sys0|grep autorestart （檢查系統(tǒng)crash后是否自動(dòng)重新啟動(dòng)）執(zhí)行l(wèi)sattr El sys0|grep cpuguard （檢查CPU GUARD是否開(kāi)啟）執(zhí)行l(wèi)sattr El mem0 （檢查內(nèi)存狀態(tài)正常size=goodsize）執(zhí)行 vmstat 2iostat,topas觀察us,sy,pi,po， （內(nèi)存占用率，硬盤讀寫速度等檢查是否有性能瓶頸）執(zhí)行netstat in和netstat rn （觀察網(wǎng)絡(luò)狀態(tài)）執(zhí)行entstat d enX （檢測(cè)網(wǎng)卡運(yùn)行速率與交換機(jī)速率是否匹配）（網(wǎng)卡速率由10M半工改為自適應(yīng)時(shí)，缺省網(wǎng)關(guān)會(huì)丟失。更改網(wǎng)卡速率后需要在系統(tǒng)中執(zhí)行smitty route 操作重新激活缺省路由。如果進(jìn)行網(wǎng)卡速率的調(diào)整，請(qǐng)務(wù)必小心。）執(zhí)行ping命令 （檢查網(wǎng)絡(luò)連接狀況）執(zhí)行l(wèi)sdev C|grep aio （檢查異步IO是否可用）執(zhí)行l(wèi)ssrc g cluster （查看是否有三個(gè)進(jìn)程均為active狀態(tài)）（這個(gè)主要看起了幾個(gè)HA的進(jìn)程了，有的時(shí)候是一個(gè)或兩個(gè)）執(zhí)行/usr/sbin/cluster/clstat a （查看cluster狀態(tài)是否正常）檢查/etc/hosts, 確保雙機(jī)配置中IP別名不會(huì)存在包含關(guān)系（share_ip1包含了share_ip）執(zhí)行 #more /usr/es/adm/cluster.log #more /usr/es/sbin/cluster/history/* #cat /tmp/hacmp.out （檢查這三個(gè)日志中是否有error或者fail.）檢查7133面板上的指示燈，如果黃燈亮則需要診斷問(wèn)題HOTspare 磁盤檢測(cè)1、檢查是否有raid保護(hù) # smitty ssaraid-List All Defined SSA RAID Arrays2、檢查是否有Hot Spare # smitty ssaraid-List Components in a Hot Spare Pool對(duì)于7133，執(zhí)行Smitty ssaraid? List All Defined SSA RAID Arrays查看7133 raid狀態(tài)，正常應(yīng)該為good狀態(tài)。對(duì)于7133，執(zhí)行Smitty ssaraid?Change/Show Use of an SSA Physical Disk查看7133硬盤狀態(tài)，正常應(yīng)該為member或者spare狀態(tài)對(duì)于FastT，分別登錄上兩個(gè)controller （登陸方法后面詳細(xì)講解），查看是否有錯(cuò)誤日志。記錄檢查結(jié)果cpu （主頻*數(shù)量） #lsattr -El proc0內(nèi)置磁盤個(gè)數(shù)： #lsdev -Cc disk 網(wǎng)卡信息： #lsdev -Cc adapter系統(tǒng)屬性： #lsattr -E -l sys0 1 系統(tǒng)錯(cuò)誤報(bào)告(Error Log)的檢查： 硬件故障檢測(cè)命令：# errpt -d H -T PERM 若有故障執(zhí)行命令# errpt -a -d H -T PERM/tmp/harderror.log保存，分析結(jié)果報(bào)告給客戶 軟件故障檢測(cè)命令：# errpt -d S -T PERM 若有故障執(zhí)行命令# errpt -a -d S -T PERM/tmp/softerror.log保存，分析結(jié)果報(bào)告給客戶 2 有否發(fā)給root用戶的錯(cuò)誤報(bào)告(mail): #mail (1) 觀察所有未讀消息，注意有關(guān)diagela的消息。 (2) 常用命令： h Display headings of group containing message t Display messages in or current message. n Display next message. q Quit (3) 對(duì)發(fā)現(xiàn)的問(wèn)題詳細(xì)分析，結(jié)果報(bào)告給客戶 3 文件系統(tǒng)的檢查： 命令： # df k %Used為文件系統(tǒng)的使用率。所有文件系統(tǒng)的使用率不能大于80%4 通信系統(tǒng)的檢測(cè)： (1) 網(wǎng)卡的狀態(tài) 命令： #ifconfig a 輸出判斷： en0: flags=e080863 inet 192.9.200.2 netmask 0xffffff00 broadcast 192.9.200.255 en1: flags=e080863 inet 192.9.201.1 netmask 0xffffff00 broadcast 192.9.200.255 主備網(wǎng)卡的flag為UP屬正常。同時(shí)檢查ip地址和netmask是否正確。 (2) 路由的檢測(cè) 命令： #lsattr El inet0 authm 65536 Authentication Methods True hostname h24 Host Name True gateway Gateway True route net,0,172.16.23.81 Route True bootup_option no Serial Optical Network Interface True rout6 FDDI Network Interface True (3) 網(wǎng)絡(luò)的檢測(cè) 命令： #ping ip address 輸出判斷： 用ping命令對(duì)/etc/hosts文件中的IP地址進(jìn)行操作，檢測(cè)網(wǎng)絡(luò)是否聯(lián)通。 5系統(tǒng)DUMP設(shè)置的檢查 命令： #sysdumdev l 輸出判斷： 結(jié)果應(yīng)為 primary /dev/hd6 secondary /dev/sysdumpnull copy directory /var/adm/ras forced copy flag TRUE always allow dump FALSE dump compression OFF 若不正確請(qǐng)用下列命令修改： #sysdumdev P p /dev/hd6 s /dev/sysdumpnull 6系統(tǒng)硬件診斷： 命令順序?yàn)椋?(1)#diag (2).Enter (3).Diagnostic Routines (4).System Verification (5).All Resources (6).F7 輸出判斷： 結(jié)果應(yīng)為No trouble was found.7補(bǔ)丁程序(PTF)的檢查 (1) 系統(tǒng)維護(hù)補(bǔ)丁版本為ML09，檢查命令為： #instfix i |grep ML 8系統(tǒng)參數(shù)的檢查 (1)HIGH water mark for pending write I/Os # lsattr -El sys0 |grep maxpout 輸出判斷： 結(jié)果應(yīng)為 maxpout 33 HIGH water mark for pending write I/Os per file True (2)LOW water mark for pending write I/Os # lsattr -El sys0|grep minpout 輸出判斷： 結(jié)果應(yīng)為 minpout 24 LOW water mark for pending write I/Os per file True 更改命令為： #chdev -l sys0 -a maxpout=33 -a minpout=24 (3)Syncd參數(shù) # grep syncd /sbin/rc.boot 輸出判斷： 結(jié)果應(yīng)為 nohup /usr/sbin/syncd 10 /dev/null 2&1 & 更改命令為： #vi /sbin/rc.boot (4)aio參數(shù) # lsdev -Cc aio 輸出判斷： 結(jié)果應(yīng)為 aio0 Available Asynchronous I/O # lsattr -El aio0 輸出判斷： 結(jié)果應(yīng)為 minservers 1 MINIMUM number of servers True maxservers 10 MAXIMUM number of servers True maxreqs 4096 Maximum number of REQUESTS True kprocprio 39 Server PRIORITY True autoconfig available STATE to be configured at system restart True fastpath enable State of fast path True 更改命令為： #smitty aio (5)Limits文件的設(shè)置： #ulimit a 輸出判斷： 結(jié)果應(yīng)為 time(seconds) unlimited file(blocks) 2097151 data(kbytes) 262144 /尤其是這項(xiàng)參數(shù) stack(kbytes) 32768 memory(kbytes) 32768 coredump(blocks) 2097151 nofiles(descriptors) 2000 更改命令為： #vi /etc/security/limits 更改data為5242889.集群狀態(tài)檢查smitty ssaraid List All Defined SSA RAID Arrayshdisk1 40263B2E0DF74CK system good 91.1GB RAID-5 array（如果是good就正常）IBM巡檢流程1、檢查系統(tǒng)硬件情況：設(shè)備故障燈是否有亮 2、系統(tǒng)錯(cuò)誤報(bào)告(errlog) 3、有否發(fā)給root用戶的錯(cuò)誤報(bào)告(mail) 4、檢查hacmp.out,smit.log,boot.log 5、關(guān)鍵系統(tǒng)的文件使用率不大于80% 6、邏輯卷有否stale 7、內(nèi)存交換區(qū)使用率是否超過(guò)70% 8、內(nèi)存交換區(qū)的大小是否為物理內(nèi)存的1.5倍 9、檢查備份情況（有否系統(tǒng)備份、用戶數(shù)據(jù)備份、磁帶機(jī)是否需要清洗） 10、通信（網(wǎng)卡、IP、路由表、ping、etchosts、DNS設(shè)置等） 11、是否有數(shù)據(jù)保護(hù)方式如RAID10RAID5,是否有Hot spare 12、系統(tǒng)DUMP設(shè)置是否正確 13、檢查系統(tǒng)參數(shù)是否正確 1)etcenviroment中的TZ不能有夏時(shí)制 2)如有數(shù)據(jù)庫(kù)： Aioavailable 3)HACMP中 IO pacingHigh Water MarkLow Water MArk3324 4)HACMP中 Syncd10 5)HACMP中 Power Monitoroff 14、檢查rootvg是否有鏡象 15、檢查errdemon,srcmstr是否正常運(yùn)行 16、機(jī)房環(huán)境（電壓、濕度） 17、系統(tǒng)性能：有否性能瓶頸(topas,vmstat) 18、補(bǔ)丁程序（PTF）、微碼（是否需要升級(jí)） 19、HACMP測(cè)試：Cluster Verification 20、系統(tǒng)硬件診斷 21、運(yùn)行#snap -ac,生成文件snap+sn.pax.Z 22、機(jī)器清潔 注115為A類維護(hù)（季度維護(hù)），1618為B類維護(hù)（半年維護(hù)），1922為C類維護(hù)（年度維護(hù)）1、檢查系統(tǒng)硬件情況：設(shè)備故障燈是否有亮 2、系統(tǒng)錯(cuò)誤報(bào)告(errlog) errpt -d H -T PERM 對(duì)有懷疑的進(jìn)一步errpt -aj 錯(cuò)誤代碼more3、有否發(fā)給root用戶的錯(cuò)誤報(bào)告(mail) mail 4、檢查hacmp.out,smit.log,boot.log #cd tmp ls hacmp.out找到時(shí)間最近的字節(jié)不為零的文件，vi查看 如果懷疑系統(tǒng)曾經(jīng)有調(diào)整操作，檢查smit.logalog -ot boot5、關(guān)鍵系統(tǒng)的文件使用率不大于80% #df k （查看%Used）6、邏輯卷有否stale #lsvg -l 卷組名稱 （查看狀態(tài)是否有stale的邏輯卷）7、內(nèi)存交換區(qū)使用率是否超過(guò)70% #lsps a （查看占用率是否超過(guò)70%） 8、內(nèi)存交換區(qū)的大小是否為物理內(nèi)存的1.5倍 命令同上現(xiàn)在原則有所改變，2G內(nèi)存以下可按照1.5倍的標(biāo)準(zhǔn)，2G內(nèi)存以上如果交換區(qū)占用率不高，可用2GB標(biāo)準(zhǔn)9、檢查備份情況（有否系統(tǒng)備份、用戶數(shù)據(jù)備份、磁帶機(jī)是否需要清洗） 口頭詢問(wèn)：系統(tǒng)備份、數(shù)據(jù)備份 檢查磁帶機(jī)面板，提醒用戶清洗10、通信（網(wǎng)卡、IP、路由表、ping、etchosts、DNS設(shè)置等） #netstat in #netstat rn #netstat I #vi etchosts （檢查DNS相關(guān)文件內(nèi)容）11、是否有數(shù)據(jù)保護(hù)方式如RAID10RAID5,是否有Hot spare 如果是7133，diagTask SelectionSSA Service AidsLink Verification，smitty ssaraidFAStT產(chǎn)品使用其管理軟件Storage Manager查看 ESS使用ESS控制臺(tái)查看12、系統(tǒng)DUMP設(shè)置是否正確 sysdumpdev -l 13、檢查系統(tǒng)參數(shù)是否正確1)etcenvironment中的TZ不能有夏時(shí)制 #vi etcenvironment檢查環(huán)境變量TZ，其格式應(yīng)該是這樣：TAIST-8，而不能是TAIST-8TAIDT-7這樣的格式2)如有數(shù)據(jù)庫(kù)：Aioavailable #lsdev -Cgrep aio （查看其狀態(tài)是否available）如不是：smitty chgaio，將狀態(tài)修