系統(tǒng)健康檢查服務方案

1、設備健康檢查計劃XX集團股份有限公司2009 年前言31 .服務概況31.1 客戶名稱31.2 服務時間31.3 服務設備31.4 服務內(nèi)容32 .服務前期準備工作42.1 XXX巡檢服務的前期準備工作： 42.2 客戶方的前期準備工作： 42.3 雙方待討論和協(xié)商的問題： 43 .服務具體計劃44 .應急計劃55 .備件計劃66 .文檔信息6附錄7SUN系統(tǒng)巡檢報告及相關命令說明 7ORACL激據(jù)庫巡檢報告及相關命令說明 7系統(tǒng)配置信息7ORACLE數(shù)據(jù)庫系統(tǒng)維護檢查報告 12、戶 -刖百感謝尊敬的廣東XXX用戶選擇了 XXX勺服務，XXX公司秉承用戶至上宗旨，堅持以 技術為先導，嚴格按照項

2、目流程和規(guī)范管理服務項目，竭誠為用戶提供一流優(yōu)質(zhì)的服務。本文檔的主要內(nèi)容是對客戶信息系統(tǒng)進行系統(tǒng)健康檢查 （簡稱：巡檢）的計劃安排 包括服務概況、服務前期準備工作、服務具體計劃、應急計劃等等。1 .服務概況1.1 客戶名稱廣東XXX1.2 服務時間待定1.3 服務設備見設備清單1.4 服務內(nèi)容系統(tǒng)健康檢測維護服務的目的在于了解被巡檢系統(tǒng)截至到目前系統(tǒng)的性能狀態(tài)和存在的隱患和運行風險；檢查系統(tǒng)的運行狀況、系統(tǒng)配置和連接方式、系統(tǒng)設置的情況、系統(tǒng)使用環(huán)境的及 系統(tǒng)的日志文件，進行系統(tǒng)的自檢和檢測，分析已經(jīng)發(fā)現(xiàn)的和潛在的問題，建議必要的 措施，提高系統(tǒng)的可用性和可靠性。內(nèi)容包括如下：? 檢查設備使用

3、環(huán)境是否符合要求和發(fā)生顯著變更，包括濕度、電壓、濕度、擺設位 置等? 檢查電源，信號線的連接是否牢固；檢查、清潔、調(diào)節(jié)系統(tǒng)硬件，并為需要的設備更換元件；檢查系統(tǒng)的硬件和系統(tǒng)環(huán)境配置及網(wǎng)絡環(huán)境配置；針對客戶系統(tǒng)現(xiàn)狀， 提出建議和意見。? 查閱有關系統(tǒng)信息，檢查有無出錯信息，如發(fā)現(xiàn)出錯信息，設法了解問題原因，并 后續(xù)給出問題的可能原因和解決建議。? 進行系統(tǒng)分析和檢測，及時掌握系統(tǒng)的運行和安全狀況，發(fā)現(xiàn)系統(tǒng)潛在問題，排除故障隱患和安全 漏洞。? 在完成系統(tǒng)健康檢測后,XXX務工程師將會同XXXft術專家團隊一起分析系統(tǒng)狀況，并內(nèi)向客戶提交巡檢分析報告和有關改進措施建議。2 .服務前期準備工作2.1

4、 XXX巡檢服務的前期準備工作:1 .負責提交巡檢方案，獲得客戶認可2 .負責準備巡檢報告模板2份，巡檢報告模板請見附錄。（注：一機一份，巡檢完畢后, 現(xiàn)場提交用戶）3 .提供服務的工程師在約定時間準時到達現(xiàn)場4 .2客戶方的前期準備工作：1 .負責環(huán)境、場地、電源、網(wǎng)線、終端設備等準備工作。2 .負責提供系統(tǒng)主機Root登陸口令（清單）。3 .負責提供系統(tǒng)設備IP地址（清單）。4 .負責下電設備的加電準備工作5 .負責確定下電設備加電后的連網(wǎng)情況6 .3雙方待討論和協(xié)商的問題:1 . Root 口令以何種方式提供？一般可采取兩種方式，一是每臺設備由客戶來輸入Root 口令，另外一種方式是由客

5、戶事先臨時修改Root 口令，提供給服務工程師，巡檢完畢后再由客戶改回。2 .下電設備加電后，是否仍然具備連網(wǎng)條件？如果下電設備加電后不連接網(wǎng)絡，則需要采取串口直接連接主機的方式來進行巡檢，可能會影響巡檢整體速度。3 .確定巡檢主機順序？系統(tǒng)健康檢測不會影響在線設備的運行。建議巡檢順序為，首先用一臺終端依次檢測所有連網(wǎng)設備，包括加電后能連網(wǎng)的設備，其次檢測所有加電后無法連網(wǎng)的設備。3.服務具體計劃任務名稱XXX責任人客戶方計劃持續(xù)配合人 員時間步驟1.現(xiàn)場環(huán)1服務工程師了解現(xiàn)場機房 環(huán)境狀況服務工程師約40分鐘境勘察 以及用 戶交流2服務工程師在開始實施巡 檢時，向客戶了解自前一次 維護服務以

6、來所發(fā)現(xiàn)的異 常和問題，并采取必要的措 施服務工程師3在對系統(tǒng)米取任何行動之 前，確保已經(jīng)采取必要的數(shù) 據(jù)信息保護措施，如系統(tǒng)的 備份或數(shù)據(jù)轉存等；服務工程師步驟2 .巡檢服 務4服務工程師收集與所服務 的系統(tǒng)有關的系統(tǒng)變更、微 碼發(fā)布、軟件升級、軟件 PATCK布和系統(tǒng)問題的信 息和資料服務工程師約一到二個工作日5依次按照巡檢內(nèi)容對系統(tǒng) 設備進行逐項巡檢，并填寫 巡檢報告服務工程師6巡檢過程中如果發(fā)現(xiàn)任何 系統(tǒng)問題，雙方將協(xié)調(diào)處理服務銷售7巡檢過程中如果發(fā)現(xiàn)任何 突發(fā)事件，請參考本文檔5。服務銷售步驟3.服務收8提交現(xiàn)場巡檢報告，客戶簽 字服務工程師大約1個 小時尾工作9請客戶填寫服務滿意度

7、評 價表10雙方交流服務工程師11五個工作日內(nèi)提交巡檢分 析報告服務工程師-4 .應急計劃本次巡檢服務中的設備為在線系統(tǒng)， 理論上講，巡檢只是對系統(tǒng)狀態(tài)進行查看，本 身不會對系統(tǒng)產(chǎn)生影響，只是在極少數(shù)情況下，系統(tǒng)本身已經(jīng)有故障隱患，因為巡檢觸 發(fā)，可能會影響系統(tǒng)的運行，必須通過事先充分準備，識別可能的風險，并進行規(guī)避和控 制。通過以下方法來盡可能減少風險：? 服務工程師在開始實施巡檢時，應首先向客戶了解自前一次維護服務以來所發(fā)現(xiàn)的異常和問題，并采取必要的措施? 在對系統(tǒng)采取任何行動之前，應確保已經(jīng)采取必要的數(shù)據(jù)信息保護措施，如系統(tǒng)的 備份或數(shù)據(jù)轉存等；? 服務工程師在巡檢過程中記錄操作步驟，一

8、旦發(fā)生突發(fā)問題，也有據(jù)可查，方便問 題的定位。? 服務工程師在巡檢過程中如果發(fā)現(xiàn)設備有重大問題，必須盡快進行處理的事件，由 現(xiàn)場巡檢工程師向本次用戶通報，由用戶同 XX刈艮務銷售進行協(xié)商進行處理。5 .備件計劃針對本次健康檢查服務，我方主要提供對SUNK統(tǒng)以及ORACL敢據(jù)庫的檢查服務為主， 如果在檢查過程中，發(fā)現(xiàn)有備件壞，我們會第一時間跟用戶通報，并從XXX廣州備件庫 調(diào)相應備件進行更換；如果備件更換處于合同覆蓋范圍， 我們將不收取備件費用，如果合同未覆蓋，我們將收 取備件物料成本費；為此次檢查服務準備的備件清單包含但不限于:型號描述數(shù)量Sun V480 整機帶cpu,內(nèi)存,硬盤1X6805

9、A73.4GB,10000 RPM 硬盤4ST3310帶控制器，無硬盤1XTA-SC1NC-73G10K73GB,3310陣列硬盤4XTA-SC1NC-146G10K73GB,3310陣列硬盤46 .文檔信息本文檔由XXX負責起草附錄SUN系統(tǒng)巡檢報告及相關命令說明ORACL敢據(jù)庫巡檢報告及相關命令說明系統(tǒng)配置信息SUN系統(tǒng)巡檢報告日期：年 月 日報告編號:客戶名稱檢查地點主機型號IP地址主機SNHost ID配置部件型號/數(shù)量部件型號/數(shù)量CPU主板內(nèi)存CPU/內(nèi)存板硬盤I/O板顯卡存儲陣列電源磁帶驅動器SCSI型號外擴網(wǎng)卡型號其它卡型號系統(tǒng)盤Raid情況管理軟件名稱版本RAID類型硬件檢查

10、項目結果不正常請注明原因檢查項目結果不正常請注明原因顯示器Lth常 L止常光驅Ulh常 L止常鍵盤Lth常 L止常軟驅Ulh常 L止常鼠標Lth常 L止常線纜Ulh常 L止常磁帶機板卡Lth常 L止常Ulh常L止常系統(tǒng)檢查項目內(nèi)容結果不正常請注明原因系統(tǒng)指示燈狀態(tài)Front Panel LEDSLth常 L止常Power Supply LEDSLth常 L止常Disk LEDSLth常 L止常System Controller Board LEDS(CPU/Memory 、I/O etc.)Lth常 L止常系統(tǒng) messages信息cd /var/admgrep WARN messages*g

11、rep error messages*grep panic messages*/var/adm/messagesLth常 L止常/var/adm/messages.0Lth常 L止常/var/adm/messages.1Lth常 L止常/var/adm/messages.2Lth常 L止常/var/adm/messages.3Lth常 L止常硬件運行狀態(tài)/usr/platform/sun4u/sbin/prtdiag -vLth常 L止常文件系統(tǒng)利用率df df o i/利用率%Lth常 L止常/usr 利用率%Lth常 L止常/var 利用率%Lth常 L止常其它分區(qū)Lth常 L止常lond

12、e利用率（是否有空閑）Lth常 L止常Swap分區(qū)swap -susedk availablekLth常 L止常CPU負載sar1 10% idleLth常 L止常內(nèi)存剩余量vmstat 1KBytesLth常 L止常I/O資源iostat EnLth常 L止常網(wǎng)絡接口流量netstat -i 1Lth常 L止常網(wǎng)口以及IP狀態(tài)ifconfig -aLth常 L止常網(wǎng)絡傳輸率ping網(wǎng)關（1分鐘）averagemsLth常 L止常NTP狀態(tài)ntpq -pLth常 L止常遠程登錄設置/etc/inetd.confftp匚開啟 口關閉telnet匚開啟 口關閉進程總數(shù)ps -ef|wc -l個進程

13、核心Patch版本uname -a冗 余 軟 件Disk Suite 狀態(tài)（沒有的不填）metastat輸出結果是否正常Lth常止常metadbMetadb建立在有個備份Volume Manager 狀態(tài)（沒有的不 填）vxdisk list輸出結果是否正常Lth常止常vxdg list有磁盤組Vxprint -ht輸出結果是否正常Lth常止常高 可 用 性 軟 件SunCluster 狀態(tài)版本scstat輸出結果是否正常Lth常止常備注存儲ST3310陣列外觀及指示燈是否正常Lth常止常show-config輸出結果是否正常Lth常止常固件版本SUN&機巡檢相關命令及說明檢查項目使用的命令及

14、相關目錄內(nèi)容及其說明外觀檢查無檢查機器的指示燈情況、看有無故障 指示主機的總體情 況/usr/platform/sun4u/sbin/prtdiag -v通過該命令，可以查看到CPU的數(shù)量、主頻、CACH改小，內(nèi)存、板卡、 風扇轉速、環(huán)境溫度等情況查看文件系統(tǒng) 掛接情況df -k可以查看到文件系統(tǒng)的掛接、使用量等情況，如果某個文件系統(tǒng)使用大于 85%則要提請注意，大于 90啾1要 對其進行清理，刪除廢文件，如果根 文件系統(tǒng)使用量達到 100%,會造成 系統(tǒng)崩潰檢查系統(tǒng)日志 文件grep panic /var/adm/messages* grep error /var/adm/messages*

15、 grep WARN /var/adm/messages*檢查系統(tǒng)的日志文件，看有無panic、 error、WARN和錯誤有關的關鍵字， 其中，panic關鍵字一般出現(xiàn)在操作 系統(tǒng)因軟件或硬件故障崩潰的時候， error則是系統(tǒng)因軟件或硬件產(chǎn)生了錯誤，WARNW相對關注級別較低， 屬于警告，這2種情況，都要根據(jù)系 統(tǒng)的日志提示，進一步檢查系統(tǒng)情況檢查CPU使用 情況sar 1 10檢查CPU的IDEL值，越大越好，這 里給出的命令是指間隔 1秒，檢查 10次交換分區(qū)使用 情況swap -s查看交換區(qū)（即虛擬內(nèi)存） 的使用情 況內(nèi)存使用情況vmstat 1檢查內(nèi)存的使用情況， 尤其檢查其中 的

16、剩余內(nèi)存量，如內(nèi)存剩余過少，則 要檢查進程及應用的情況，如無異 常，則意味著系統(tǒng)需要更多的物理內(nèi) 存硬盤數(shù)量及容 量format通過該命令，可以查看到硬盤的容量 大小、數(shù)量等情況，硬盤及其他存 儲設備的情況iostat -E這個命令可以看到硬盤的運行情況， 包括：廠商、序列號，有無運行錯誤等網(wǎng)絡情況netstat -i 1查看網(wǎng)絡的包吞吐情況以及沖突、包錯誤率等情況網(wǎng)絡的IP設置ifconfig -a查看系統(tǒng)中的IP地址設置查看操作系統(tǒng) 的核心版本uname -a該命令除了能查看到操作系統(tǒng)的核 心版本外，還可以查看到主機的硬件 型號主機的廠商ID 號hostid可以查看到廠商為主機設置的唯一I

17、D統(tǒng)計系統(tǒng)當前 進程數(shù)量ps -ef |wc -l可以查看到系統(tǒng)當前進程數(shù)量遠程登錄設置grep ftp /etc/inetd.confgrep telnet /etc/inetd.conf可以查看系統(tǒng)的遠程登錄是否打開網(wǎng)絡流通情況pingping網(wǎng)絡中的另一設備，通常是缺 省網(wǎng)關，以檢查網(wǎng)絡的流通延時情況檢查SUN CLUSTER!理 的雙機系統(tǒng)狀 態(tài)scstat該命令可以顯示 SUNCLUSTERZ機系統(tǒng)的和配置、狀態(tài)有關的信息通過Web方式管理SUNCLUSTERS機系統(tǒng)通過瀏覽其，輸入主機的IP地址，端口號為3000,可以通過Web的方 式管理SUN CLUSTERS機系統(tǒng)存儲及冗余軟

18、件相關檢查及其命令檢查項目使用的命令及相關目錄內(nèi)容及其說明外觀檢查無檢查機器的指示燈情況、看有無故障指示ST3x10陣列檢查無通過串行口連接到陣列的串口，利用其設置 界菜單檢查，具體的參數(shù)為：波特率38400,數(shù)據(jù)位8,停止位1,奇偶校驗無，流控無ST3x10陣列檢查（通過sccli 工具檢查）show-config連接了 ST3x10陣列的主機，如果安裝了 sccli 工具，通過輸入 sccli命令，選擇了控制器 后，在其界面卜輸入的命令用 Varitas Volume Manager管理的硬盤檢 查其管理下硬盤的狀態(tài)vxdisk list檢查Varitas Volume Manager管理

19、下硬盤的狀態(tài)用 Varitas Volume Manager管理的硬盤檢 查其管理下磁盤組的狀 態(tài)vxprint -ht檢查Varitas Volume Manager管理下磁盤組的狀態(tài)，包括其劃分的子磁盤的、所做的卷等的狀態(tài)用SDS管理軟件管理的 磁盤及其虛擬設備狀態(tài)metastat對于用Solstice DiskSuite （SDS新的版本 改為 Solaris Volume Manager ,簡稱 SVM 管理的磁盤，在操作系統(tǒng)下，輸入該命令， 檢查其管理的磁盤以及虛擬磁盤（mcl）的狀態(tài)用SDS管理軟件管理的 磁盤，檢查起狀態(tài)數(shù)據(jù) 庫的狀態(tài)metadb對于用Solstice DiskS

20、uite （SDS新的版本 改為 Solaris Volume Manager ,簡稱 SVM 管理的磁盤，在操作系統(tǒng)下，輸入該命令，檢查其管理數(shù)據(jù)庫（用戶保存SDS的設置等）的狀態(tài)ORACLE 數(shù)據(jù)庫系統(tǒng)維護檢查報告報告編號：用戶基本信息用戶名稱：聯(lián)系人：電話/傳真：地址：應用系統(tǒng)名稱：巡檢時間：主機廠商/型號：操作系統(tǒng)/版本：cpuB /硬件內(nèi)存：數(shù)據(jù)庫服務器運行方式：Oracle產(chǎn)品/版本：系統(tǒng)運行狀況檢測序 號檢測內(nèi)容檢測指令檢測結果建議1檢查alert日志，是 否有ora錯誤提示Alert 文件2數(shù)據(jù)庫名SQLshowparameterdb_name3實例名SQLshowparame

21、terinstance_name4數(shù)據(jù)庫版本SQLselect*fromv$version;5是否歸檔模式SQLarchive log list6安裝組件SQLselect*fromv$option;7初始化參數(shù)SQLshow parameters8SGA區(qū)SQLshow sga9用戶檢查SQLselect username,account_status, default_tablespace,tempo rary_tablespace,created from dba_users10用戶權限檢查SQLselect*fromdba_role_privs;11是否存在失效對 象SQLselect

22、owner,object_name,object_type fromdba_objectswherestatus =INVALID 12檢查控制文件SQLselect*fromv$controlfile13檢查聯(lián)機日志SQLselect*fromv$logfile;14檢查數(shù)據(jù)文件SQLselect*fromv$datafile;15查看現(xiàn)有回滾段 及其狀態(tài)SQLSELECTSEGMENT_NAME,OWNER,TABLE SPACE_NAME,SEGMENT_ID,FI LE_ID,STATUSFROMDBA_ROLLBACK_SEGS;16是否有異常等待 事例SQLselect event

23、,sum(decode(wait_Ti me,0,0,1) Prev,sum(decode(wait_T ime,0,1,0) Curr,count(*)Tot ”fromv$session_Waitgroup by event order by 4;17檢測連接數(shù)情況SQLSELECT status,count(*)countFROM v$sessionGROUP BYstatus; select sid,serial#,username,pro gram,machine,statusfromv$session;18檢查表空間使用 情況19備份策略的討論 與實施20listener可用性檢查

24、lsnrctl statuslistener.log21CRS進程檢查ps-df |grep d.bin結論:1、alert 文件：有無錯誤？2、表空間使用情況：set linesize 300SELECT upper(f.tablespace_name) tablespace_name,d.Tot_gr00 tte_Mb tablespace(M),d.Tot_grootte_Mb - f.total_bytes used(M),round(d.Tot_grootte_Mb - f.total_bytes) / d.Tot_grootte_Mb * 100,2) use%,f.total_b

25、ytes free_space(M),round(f.total_bytes / d.Tot_grootte_Mb * 100,2) free%”FROM(SELECT tablespace_name,round(SUM(bytes)/(1024*1024),2) total_bytes,round(MAX(bytes)/(1024*1024),2) max_bytesFROM sys.dba_free_spaceGROUP BY tablespace_name) f,(SELECT dd.tablespace_name, round(SUM(dd.bytes)/(1024*1024),2)

26、Tot_grootte_MbFROM sys.dba_data_files ddGROUP BY dd.tablespace_name) dWHERE d.tablespace_name = f.tablespace_nameORDER BY 4 DESC /3、Shared Pool Size 命中率：select round(sum(gets)-sum(reloads)/sum(gets)*100,1) libiary cache hit ratio % from v$librarycache where namespacein (SQL AREA,TABLE/PROCEDURE,BODY

27、,TRIGGER);4、數(shù)據(jù)字典命中率：select round(1-sum(getmisses)/sum(gets)*100,1) data dictionary hit ratio % from v$rowcache;5、鎖競爭：select substr(,1,25) Name,l.gets, l.misses,100*(l.misses/l.gets) % Ratio (STAY UNDER 1%)from v$latch l, v$latchname Inwhere I in (cache buffers Iru chain) and ln.latch# =

28、 l.latch#;6、排序命中率：select a.value Sort(Disk), b.value Sort(Memory),round(100*(a.value/decode(a.value+b.value), 0,1,(a.value+b.value),2) % Ratio (STAY UNDER 5%) from v$sysstat a, v$sysstat b where = sorts (disk) and = sorts (memory);7、數(shù)據(jù)緩沖區(qū)命中率：select round(1-(phy.value/(cur.value+con.val

29、ue)*100,1)|% ratio from v$sysstat phy,v$sysstat cur,v$sysstat conwhere =physical reads and =db block gets and =consistent gets;8、v$session_wait :select sid,seq#,event,WAIT_TIME,SECONDS_IN_WAIT from v$session_wait where event not like SQL% and event not like rdbms%;9、回滾段的爭用情況：

30、select name, waits, gets, waits/gets Ratio from v$rollstat a, v$rollname b where a.usn = b.usn;10、無效對象情況：col OBJECT_NAME for a36SELECT object_name, object_type,status FROM dba_objects WHERE status like INV ALID;客戶簽名:工程師簽名:日期：檢查項 目使用的命令及相關目錄內(nèi)容及具說明alert文件alert XXX在sqlplus命令行狀態(tài)卜，檢查日志文 件，其中XXX是只alert文件名

31、數(shù)據(jù)庫 名SQLshow parameter db_name顯示數(shù)據(jù)庫名實例名SQLshow parameter instance_name顯示數(shù)據(jù)庫實例名版本SQLselect * from v$version;顯示數(shù)據(jù)庫版本歸檔設 置SQLarchive log list顯示歸檔設置，狀況安裝組 件SQLselect * from v$option;顯示已安裝的組件初始化 參數(shù)SQLshow parameters顯示初始化參數(shù)SGASQLshow sga顯示SGA勺設置，狀態(tài)用戶SQLselectusername,account_status,default_ta blespace,tem

32、porary_tablespace,cre ated from dba users用戶檢查權限SQLselect * from dba role privs;檢查用戶的權限設置失效對 象SQLselect owner, object_name,object_type from dba_objects where status = INVALID檢查是否啟失效對象控制文 件SQLselect * from v$controlfile檢查控制文件連機日 志SQLselect * from v$logfile;檢查數(shù)據(jù)庫的連接日志數(shù)據(jù)文 件SQLselect * from v$datafile;檢查

33、數(shù)據(jù)文件回滾段SQL SELECTSEGMENT_NAME,OWNER,TA BLESPACE_NAME,SEGMENT_I D,FILE_ID,STATUS FROM DBA ROLLBACK SEGS;查看現(xiàn)有回滾段及其狀態(tài)Sessionselect SESSIONS_CURRENT , SESSIONS_HIGHWATER from v$license;系統(tǒng)Session使用狀態(tài)字符集select userenv(language) from dual;字符集共享池 命中率selectround(sum(gets)-sum(reloads)/su m(gets)*100,1) libiary cache hit ratio % from v$