軟件系統部署應急預案初稿

應急預案

目錄TOC\o"1-3"\h\z1.目的 32.適用范圍 33.涉及服務器列表 34.危險因素分析 45.危險事件等級定義分類 46.應急響應流程 46.1.事件報警與確認 46.2.對系統進行檢查 46.3.安全審計及事故分析 56.4.消除隱患、恢復正常運行 56.5.重新啟動系統 56.6.安全報告、歸檔 57.應急處理措施 57.1.一般故障 57.2.重大故障 57.3.特大故障 57.3.1.系統無法登錄 67.3.2.系統應用連接數據庫超時 67.3.3.滿意度調查系統應用服務啟動正常，卻無法訪問系統 67.3.4.數據庫出錯導致系統無法使用 77.3.5.DB2數據庫程序異常 77.3.6.操作系統故障 77.3.7.系統收集調查問卷失敗 88.系統環(huán)境要求 88.1.硬件環(huán)境 88.2.網絡環(huán)境 9目的為妥善應對和處理甘肅省零售客戶滿意度網上調查系統信息安全突發(fā)事件、確保滿意度調查系統的運行安全和數據安全，結合滿意度調查項目實際情況，特制定本應急預案。本預案主要立足防范和消除以下危害情況的出現：滿意度系統運行過程中數據庫異常，導致數據丟失，系統不能正常運行；滿意度系統運行過程中，應用服務程序異常，導致系統異常系統不能正常運行；滿意度系統運行過程中，服務器間網絡連接異常，導致系統異常系統不能正常運行。適用范圍本預案適用于甘肅省煙草公司零售客戶滿意度網上調查系統正在發(fā)生或可能發(fā)生的系統安全和數據安全突發(fā)事件。涉及服務器列表設備名稱系統名稱IP地址操作系統甘肅省煙草公司內網系統業(yè)務平臺應用服務器甘肅省零售客戶滿意度網上調查系統10.52.4.157、10.52.4.158Aix6.1甘肅省煙草公司內網系統業(yè)務平臺數據庫服務器甘肅省零售客戶滿意度網上調查系統10.52.4.161、10.52.4.162Aix6.1危險因素分析客戶滿意度網上調查系統是作為應用組件部署在信息中心數據和業(yè)務兩個平臺，而并非單獨孤立的應用系統，且該系統直接部署在生產環(huán)境中，因此引發(fā)零售客戶客戶滿意度網上調查系統潛在危險的因素主要包括：部署環(huán)境的硬件設備故障、部署軟件系統故障、網絡故障及滿意度系統本身的程序錯誤。危險事件等級定義分類1、一般故障：指系統出現輕微錯誤或瑕疵，具體包括：個別圖片無法顯示、個別信息內容出現明顯錯誤、個別服務和功能無法正常使用等。2、重大故障：指出現系統出現異常，但不影響系統日常使用，具體包括：局部頁面錯誤、部分功能無法使用，部分信息內容出現明顯錯誤等。3、特大故障：指系統崩潰，應用服務停止，導致大規(guī)模用戶無法使用系統，出現數據丟失，具體包括：系統服務無法啟動、數據庫無法連接、系統程序異常和數據庫文件損壞等。應急響應流程事件報警與確認工作人員對數據庫服務器、應用系統的運行狀況以及網絡情況進行監(jiān)測，及時發(fā)現系統的異常和網絡故障，一旦發(fā)現異常情況需及時通知項目維護相關人員進行原因的排查和故障的處理；對系統進行檢查檢查網絡連接：需要相關網絡管理人員配合檢查；檢查應用服務器性能指標，檢查的內容包括：WebSphere進程是否正常、CPU使用率、內存使用率；檢查后臺數據庫服務器性能指標，檢查內容包括：數據庫服務器雙機狀態(tài)、數據庫進程是否正常、數據庫服務是否啟動、CPU使用率、內存使用率。安全審計及事故分析經過系統日志、網絡設備日志、數據庫訪問日志等，對事件進行審計，對損失進行評估，追查事件的發(fā)生原因；消除隱患、恢復正常運行根據審計結果，排除系統隱患，恢復系統正常運行；重新啟動系統啟動數據庫服務器->啟動應用服務器；安全報告、歸檔提供故障分析報告，分析故障原因，修正預案處理流程并歸檔。應急處理措施一般故障工作人員第一時間迅速準確判斷事件原因，提交甘肅省煙草公司零售客戶滿意度網上調查系統項目組進行處理。重大故障按規(guī)定及時向信息中心報告。報告內容主要包括故障范圍、影響范圍、事件性質、事件發(fā)展趨勢和采取的措施等。信息中心召集相關責任部門共同協商解決。必要時能夠停止系統運行。特大故障按規(guī)定及時向甘肅省煙草公司信息中心辦公室報告，并要實行報告勢態(tài)進程。甘肅省煙草公司信息中心辦公室根據系統故障發(fā)展態(tài)勢，現場指導，組織派遣應急支援力量。具體措施如下：系統無法登錄系統無法正常登錄一般由于應用服務器與數據庫服務器之間網絡連接異?；驍祿旆瘴磫訉е?，現場處理措施如下：檢查應用服務器與數據庫服務器之間網絡連接是否正常，若應用服務器與數據庫服務器之間網絡連接異常，恢復應用服務器與數據庫服務器網絡解決，重新啟動系統；應用程序后臺服務是否運行正常；檢查數據庫服務器數據庫服務是否運行正常，如數據庫服務器服務未啟動則啟動數據庫服務器數據庫服務，重新啟動系統；若以上方案均無法解決系統無法登錄問題，抓取并保存系統出錯信息及日志文件，簡單判斷異常部位，通知系統維護相關人員，保留現場，分析查找原因。系統應用連接數據庫超時數據庫連接超時，一種情況是應用服務器與數據庫服務器網絡連接異常；另一種情況是系統數據源出錯，現場處理措施如：應用服務器與數據庫服務器網絡連接異常，排除網絡連接異常故障，重啟數據庫服務器和應用服務器。系統數據源出錯，重新配置系統數據源。（詳情參照《甘肅省煙草公司零售客戶滿意度網上調查系統部署方案》5.3配置文件說明配置數據源）。以上方案無法解決系統故障時，應停止系統后臺服務，防止不知情用戶繼續(xù)投遞數據。抓取并保存系統出錯信息及日志文件，簡單判斷異常部位，通知系統維護相關人員，保留現場，分析查找原因。滿意度調查系統應用服務啟動正常，卻無法訪問系統如果滿意度調查系統應用服務啟動正常，無法訪問系統?，F場處理措施如下：系統應用程序包出現故障，需重新部署滿意度調查系統應用程序包；系統數據源出錯，需重新配置數據源。（詳情參照《甘肅省煙草公司零售客戶滿意度網上調查系統部署方案》5.3配置文件說明配置數據源）。數據庫出錯導致系統無法使用數據庫出現故障系統數據文件損壞，以系統管理員用戶登錄在應用服務器10.52.4.161上的DB2客戶端，創(chuàng)立新的表空間，導入最近的一個時間點的系統數據庫備份文件到新建的表空間里，重新添加部署系統數據源，進行恢復操作。操作過程中，應停止系統后臺服務，防止不知情用戶繼續(xù)投遞數據。DB2數據庫程序異常BD2數據庫出現故障無法繼續(xù)使用，需重新安裝DB2數據庫程序，安裝完成后，創(chuàng)立新的數據庫和表空間，導入系統數據文件到新建的表空間里，重新添加部署應用系統數據庫，進行恢復操作。操作完后重新啟動應用服務及數據服務。操作系統故障應用服務器或數據庫服務器系統故障，導致系統無法正常運行，需重新安裝操作系統。應用服務器操作系統故障，重新安裝操作系統，重新部署滿意度系統。具體操作參照《甘肅省煙草公司零售客戶滿意度網上調查系統部署方案》，部署完畢啟動數據庫服務和應用服務。數據庫服務器操作系統故障，重新安裝操作系統，以系統管理員用戶登錄在應用服務器10.52.4.161上的DB2客戶端，創(chuàng)立新的表空間，導入最近的一個時間點的系統數據庫備份文件到新建的表空間里，重新添加部署系統數據源，進行恢復操作。系統收集調查問卷失敗系統收集調查問卷失敗一般由于網絡連接故障、數據庫異?；蛳到y程序導致，現場處理措施如下：檢查應用服務器與數據庫服務器之間網絡連接是否正常，若應用服務器與數據庫服務器之間網絡連接異常，恢復應用服務器與數據庫服務