管理系統(tǒng)應(yīng)急預(yù)案

管理系統(tǒng)故障處理應(yīng)急方案一、管理系統(tǒng)故障處理相關(guān)人員二、管理系統(tǒng)故障處理通知流程1、發(fā)現(xiàn)管理系統(tǒng)網(wǎng)絡(luò)故障或供電系統(tǒng)故障，應(yīng)及時(shí)立即通知相關(guān)負(fù)責(zé)人或值班人員，由其進(jìn)行相關(guān)處理，并保持聯(lián)絡(luò)了解處理進(jìn)度，通知客戶人員以便做好解析工作。2、發(fā)現(xiàn)管理系統(tǒng)中非數(shù)據(jù)庫系統(tǒng)設(shè)備故障（包括網(wǎng)卡故障），應(yīng)立即按相關(guān)步驟啟用備用系統(tǒng)，通知相關(guān)負(fù)責(zé)人或值班人員，約定好時(shí)間盡快到現(xiàn)場診斷排查。通知客戶人員以便做好解析工作。3、發(fā)現(xiàn)管理系統(tǒng)中數(shù)據(jù)庫系統(tǒng)故障，應(yīng)立即按相關(guān)步驟進(jìn)行處理，通知相關(guān)負(fù)責(zé)人或值班人員，通知客戶人員以便做好解析工作。三、管理系統(tǒng)各類故障處理流程1、網(wǎng)絡(luò)故障或供電系統(tǒng)故障判斷方法：機(jī)房內(nèi)所有外網(wǎng)地址均無法訪問，但可以訪問其他互聯(lián)網(wǎng)地址。處理流程：通知相關(guān)負(fù)責(zé)人或值班人員,確認(rèn)情況。保持聯(lián)絡(luò)了解處理進(jìn)度。如果是網(wǎng)絡(luò)故障，故障恢復(fù)后，逐個(gè)檢查各系統(tǒng)是否都已正常對外服務(wù)。如果是供電系統(tǒng)故障，供電故障恢復(fù)后，首先請值班人員協(xié)助啟動(dòng)各個(gè)計(jì)算機(jī)設(shè)備；然后檢查各系統(tǒng)是否能正常啟動(dòng)；在對外服務(wù)前先進(jìn)行一次數(shù)據(jù)庫備份。最后，再啟動(dòng)對外服務(wù)程序。2、個(gè)別設(shè)備（非數(shù)據(jù)庫）故障判斷方法：機(jī)房內(nèi)所有外網(wǎng)地址均可以訪問，但在內(nèi)網(wǎng)監(jiān)測到部分地址不可訪問；部分外網(wǎng)地址不可訪問。處理流程：確定故障機(jī)器位置及故障類型。如果是軟件故障（如內(nèi)存、硬盤空間引起的軟件錯(cuò)誤退出），內(nèi)存引起的重新啟動(dòng)整個(gè)機(jī)器；硬盤空間不足的先清理無用的垃圾和臨時(shí)文件，或重新分配硬盤空間，滿足條件后重新啟動(dòng)軟件。如果是網(wǎng)卡或硬件引起的故障，這時(shí)是無法進(jìn)行遠(yuǎn)程維護(hù)的，應(yīng)立即啟用備用系統(tǒng)，以實(shí)現(xiàn)盡快提供對外服務(wù)。然后通知相關(guān)負(fù)責(zé)人或值班人員，在值班人員協(xié)助下，先嘗試檢查是否網(wǎng)線連接故障，如是重新連接后將該機(jī)設(shè)為備用系統(tǒng)；如不是再嘗試重啟機(jī)器，如重啟后能夠遠(yuǎn)程訪問，通過遠(yuǎn)程檢查故障原因并在可繼續(xù)使用時(shí)將該機(jī)設(shè)為備用系統(tǒng)，如重啟后仍不能遠(yuǎn)程訪問，和相關(guān)負(fù)責(zé)人或值班人員約定好時(shí)間盡快到機(jī)房現(xiàn)場診斷排查。數(shù)據(jù)庫系統(tǒng)軟件故障判斷方法：網(wǎng)絡(luò)正常并可訪問，不能訪問數(shù)據(jù)庫或數(shù)據(jù)庫響應(yīng)很慢。處理流程：檢查數(shù)據(jù)庫進(jìn)程是否正常運(yùn)行，如正常運(yùn)行，檢查內(nèi)存占用情況和硬盤空間使用情況，如硬盤空間不足清理臨時(shí)文件和無用垃圾文件或重新分配硬盤空間。如內(nèi)存占用滿，找到長時(shí)間訪問會(huì)話并終止，記錄該會(huì)話相關(guān)的sql,數(shù)據(jù)庫正常后，分析該SQL運(yùn)行時(shí)間長的原因，并排除（如臨時(shí)表空間不足）。如數(shù)據(jù)庫進(jìn)程異常退出，檢查機(jī)器是否有錯(cuò)誤日志，檢查硬盤文件是否正常。如果硬件沒有問題，則有可能是內(nèi)存不足引起的數(shù)據(jù)庫進(jìn)程，可重新啟動(dòng)數(shù)據(jù)庫后，立即備份數(shù)據(jù)，然后調(diào)整數(shù)據(jù)庫參數(shù)，如減少會(huì)話訪問數(shù)量等，再對外提供服務(wù)。如果是硬件問題如硬盤滿（現(xiàn)在還沒有出現(xiàn)這種情況），請先將數(shù)據(jù)庫備份恢復(fù)到備用機(jī)器后，啟用備用機(jī)器后，增加硬盤空間，并改該機(jī)為備用系統(tǒng)。數(shù)據(jù)庫系統(tǒng)網(wǎng)卡故障判斷方法：數(shù)據(jù)庫主網(wǎng)卡不能訪問，通過第二網(wǎng)卡可以訪問。處理流程：通知相關(guān)負(fù)責(zé)人或值班人員，在值班人員協(xié)助下，先嘗試檢查是否網(wǎng)線連接故障，如是重新連接后，立即備份數(shù)據(jù)。如果不是，請通過值班人員協(xié)助下將主網(wǎng)卡與第二網(wǎng)卡網(wǎng)線進(jìn)行交換。如果可以訪問（按理這是可以的），立即備份數(shù)據(jù)。如果仍不可以訪問，將主網(wǎng)卡與第二網(wǎng)卡網(wǎng)線交換回去，通過第二網(wǎng)卡將數(shù)據(jù)庫備份并恢復(fù)到備用數(shù)據(jù)庫，啟用備用數(shù)據(jù)庫作為主數(shù)據(jù)庫服務(wù)器。相關(guān)負(fù)責(zé)人或值班人員約定好時(shí)間盡快到機(jī)房現(xiàn)場診斷排查。數(shù)據(jù)庫系統(tǒng)設(shè)備故障判斷方法：數(shù)據(jù)庫主網(wǎng)卡不能訪問，通過第二網(wǎng)卡也不可以訪問。處理流程：通知相關(guān)負(fù)責(zé)人或值班人員，在值班人員協(xié)助下，先嘗試重啟機(jī)器，如重啟后能夠遠(yuǎn)程訪問，通過遠(yuǎn)程檢查故障原因，立即備份數(shù)據(jù)并恢復(fù)到備用服務(wù)器，啟用備用數(shù)據(jù)庫作為主數(shù)據(jù)庫服務(wù)器。如能夠重啟機(jī)器到操作系統(tǒng)，但網(wǎng)絡(luò)不能訪問的，立即趕往機(jī)房備份數(shù)據(jù)，并恢復(fù)到備用服務(wù)器，啟用備用數(shù)據(jù)庫作為主數(shù)據(jù)庫服務(wù)器。無法啟動(dòng)機(jī)器的，立即趕到機(jī)房，確定硬件故障原因，如果在當(dāng)天無法排除故障的，在備用數(shù)據(jù)庫器恢復(fù)最近的數(shù)據(jù)備份，并啟用為主數(shù)據(jù)