軟件系統(tǒng)部署應急處理方案

x系統(tǒng)目 錄1. 32. 33. 34. 35. 46. 46.1. 46.2. 46.3. 56.4. 56.5. 56.6. 57. 57.1. 57.2. 57.3. 5. 5. 6. 6. 6.2 7. 7. 71.目的為妥善應對和處置xxx系統(tǒng)信息安全突發(fā)事件確保滿意度調(diào)查系統(tǒng)的運安全和數(shù)據(jù)安全結(jié)合滿意度調(diào)查項目實際情況特制定本應急預案本預案要立足防范和消除以下危害情況的出現(xiàn)：1、滿意度系統(tǒng)運行過程中數(shù)據(jù)庫異常導致數(shù)據(jù)丟失系統(tǒng)不能正常運行；2、滿意度系統(tǒng)運行過程中，應用服務程序異常，導致系統(tǒng)異常系統(tǒng)不能常運行；3、滿意度系統(tǒng)運行過程中，服務器間網(wǎng)絡連接異常，導致系統(tǒng)異常系統(tǒng)不能正常運行。2.適用范圍本預案適用于xxx公司xxx系統(tǒng)正在發(fā)生或可能發(fā)生的系統(tǒng)安全和數(shù)據(jù)安突發(fā)事件。3.涉及服務器列表設備名稱設備名稱系統(tǒng)名稱IP地址操作系統(tǒng)、、4.危險因素分析xxx系統(tǒng)是作為應用組件部署在信息中心數(shù)據(jù)和業(yè)務兩個平臺而并非單獨孤立的應用系統(tǒng)且該系統(tǒng)直接部署在生產(chǎn)環(huán)境中所以引發(fā)零售客戶客戶滿度網(wǎng)上調(diào)查系統(tǒng)潛在危險的因素主要包括部署環(huán)境的硬件設備故障部署軟系統(tǒng)故障、網(wǎng)絡故障及滿意度系統(tǒng)本身的程序錯誤。5.危險事件等級定義分類1個別信息內(nèi)容出現(xiàn)明顯錯誤、個別服務和功能無法正常使用等。2、重大故障：指出現(xiàn)系統(tǒng)出現(xiàn)異常，但不影響系統(tǒng)日常使用，具體包括：局部頁面錯誤、部分功能無法使用，部分信息內(nèi)容出現(xiàn)明顯錯誤等。3和數(shù)據(jù)庫文件損壞等。6.應急響應流程6.1.事件報警與確認工作人員對數(shù)據(jù)庫服務器應用系統(tǒng)的運行狀況以及網(wǎng)絡情況進行監(jiān)測及時發(fā)現(xiàn)系統(tǒng)的異常和網(wǎng)絡故障一旦發(fā)現(xiàn)異常情況需及時通知項目維護相關人員進行原因的排查和故障的處理；6.2.對系統(tǒng)進行檢查1、檢查網(wǎng)絡連接：需要相關網(wǎng)絡管理人員配合檢查；2、檢查應用服務器性能指標，檢查的內(nèi)容包括：WebSphere進程是正常、CPU使用率、內(nèi)存使用率；3、檢查后臺數(shù)據(jù)庫服務器性能指標，檢查內(nèi)容包括：數(shù)據(jù)庫服務器雙機狀態(tài)、數(shù)據(jù)庫進程是否正常、數(shù)據(jù)庫服務是否啟動、CPU使用率內(nèi)存使用率。6.3.安全審計及事故分析通過系統(tǒng)日志、網(wǎng)絡設備日志、數(shù)據(jù)庫訪問日志等，對事件進行審計，對損失進行評估，追查事件的發(fā)生原因；6.4.消除隱患、恢復正常運行根據(jù)審計結(jié)果，排除系統(tǒng)隱患，恢復系統(tǒng)正常運行；6.5.重新啟動系統(tǒng)啟動數(shù)據(jù)庫服務器->啟動應用服務器；6.6.安全報告、歸檔提供故障分析報告，分析故障原因，修正預案處理流程并歸檔。7.應急處理措施7.1.一般故障工作人員第一時間迅速準確判斷事件原因，提交甘肅省煙草公司零售客戶滿意度網(wǎng)上調(diào)查系統(tǒng)項目組進行處置。7.2.重大故障按規(guī)定及時向信息中心報告。報告內(nèi)容主要包括故障范圍、影響范圍協(xié)商解決。必要時可以停止系統(tǒng)運行。7.3.特大故障按規(guī)定及時向甘肅省煙草公司信息中心辦公室報告并要實行報告勢態(tài)程。甘肅省煙草公司信息中心辦公室根據(jù)系統(tǒng)故障發(fā)展態(tài)勢，現(xiàn)場指導，織派遣應急支援力量。具體措施如下：7.3.1.系統(tǒng)無法登錄系統(tǒng)無法正常登錄一般由于應用服務器與數(shù)據(jù)庫服務器之間網(wǎng)絡連接異?；驍?shù)據(jù)庫服務未啟動導致，現(xiàn)場處理措施如下：檢查應用服務器與數(shù)據(jù)庫服務器之間網(wǎng)絡連接是否正常，若應用服務器與數(shù)據(jù)庫服務器之間網(wǎng)絡連接異常，恢復應用服務器與數(shù)據(jù)庫服務器絡解決，重新啟動系統(tǒng)；應用程序后臺服務是否運行正常；檢查數(shù)據(jù)庫服務器數(shù)據(jù)庫服務是否運行正常，如數(shù)據(jù)庫服務器服務未動則啟動數(shù)據(jù)庫服務器數(shù)據(jù)庫服務，重新啟動系統(tǒng)；若以上方案均無法解決系統(tǒng)無法登錄問題，抓取并保存系統(tǒng)出錯信息日志文件，簡單判斷異常部位，通知系統(tǒng)維護相關人員，保留現(xiàn)場，析查找原因。7.3.2.系統(tǒng)應用連接數(shù)據(jù)庫超時數(shù)據(jù)庫連接超時一種情況是應用服務器與數(shù)據(jù)庫服務器網(wǎng)絡連接異常另一種情況是系統(tǒng)數(shù)據(jù)源出錯，現(xiàn)場處理措施如：應用服務器與數(shù)據(jù)庫服務器網(wǎng)絡連接異常排除網(wǎng)絡連接異常故障重啟數(shù)據(jù)庫服務器和應用服務器。系統(tǒng)數(shù)據(jù)源出錯，重新配置系統(tǒng)數(shù)據(jù)源。以上方案無法解決系統(tǒng)故障時，應停止系統(tǒng)后臺服務，防止不知情用戶繼續(xù)投遞數(shù)據(jù)。抓取并保存系統(tǒng)出錯信息及日志文件，簡單判斷異常部位，通知系統(tǒng)維護相關人員，保留現(xiàn)場，分析查找原因。7.3.3.滿意度調(diào)查系統(tǒng)應用服務啟動正常，卻無法訪問系統(tǒng)如果滿意度調(diào)查系統(tǒng)應用服務啟動正常，無法訪問系統(tǒng)?，F(xiàn)場處理措如下：系統(tǒng)應用程序包出現(xiàn)故障，需重新部署滿意度調(diào)查系統(tǒng)應用程序包系統(tǒng)數(shù)據(jù)源出錯，需重新配置數(shù)據(jù)源。7.3.4.數(shù)據(jù)庫出錯導致系統(tǒng)無法使用數(shù)據(jù)庫出現(xiàn)故障系統(tǒng)數(shù)據(jù)文件損壞，以系統(tǒng)管理員用戶登錄在應用服務器上的DB2客戶端，創(chuàng)建新的表空間，導入最近的一個時間點的系統(tǒng)數(shù)據(jù)庫作過程中，應停止系統(tǒng)后臺服務，防止不知情用戶繼續(xù)投遞數(shù)據(jù)。7.3.5.DB2數(shù)據(jù)庫程序異常BD2數(shù)據(jù)庫出現(xiàn)故障無法繼續(xù)使用，需重新安裝DB2數(shù)據(jù)庫程序，安裝完成后，創(chuàng)建新的數(shù)據(jù)庫和表空間，導入系統(tǒng)數(shù)據(jù)文件到新建的表空間里及數(shù)據(jù)服務。7.3.6.操作系統(tǒng)故障應用服務器或數(shù)據(jù)庫服務器系統(tǒng)故障，導致系統(tǒng)無法正常運行，需重新安裝操作系統(tǒng)。應用服務器操作系統(tǒng)故障，重新安裝操作系統(tǒng)，重新部署滿意度系統(tǒng)。具體操作參照《xxx系統(tǒng)部署方案，部署完畢啟動數(shù)據(jù)庫服和應用服務。數(shù)據(jù)庫服務器操作系統(tǒng)故障，重新安裝操作系統(tǒng)，以系統(tǒng)管理員用戶登錄在應用服務器上的DB2客戶端，創(chuàng)建新的表空間，導入最的一個時間點的系統(tǒng)數(shù)據(jù)庫備份文件到新建的表空間里，重新添加部署系統(tǒng)數(shù)據(jù)源，進行恢復操作。7.3.7.系統(tǒng)收集調(diào)查問卷失敗系統(tǒng)收集調(diào)查問卷失敗一般由于網(wǎng)絡連接故障、數(shù)據(jù)庫異?；蛳到y(tǒng)程序?qū)е?，現(xiàn)場處理措施如下：檢查應用服務器與數(shù)據(jù)庫服務器之間網(wǎng)絡連接是否正常，若應用服務與數(shù)據(jù)庫服務器之間網(wǎng)絡連接異常，恢復應用服務器與數(shù)據(jù)庫服務器絡解決，重新啟動系統(tǒng)；檢查應用服務器與新商盟平臺網(wǎng)絡連接是否正常，若應用服務器與新盟平息之間網(wǎng)絡連接異常，排除網(wǎng)絡故障，重新啟動系統(tǒng)；應用程序后臺服務