XXXX銀行XXX管理系統(tǒng)應(yīng)急預(yù)案

1、XXX銀行XXXX管理系統(tǒng)應(yīng)急預(yù)案V1.0XXXXXX2016 年8月目 錄1總則51.1適用范圍51.2系統(tǒng)重要等級(jí)52應(yīng)急組織架構(gòu)52.1應(yīng)急執(zhí)行小組53系統(tǒng)資產(chǎn)配置說(shuō)明53.1系統(tǒng)功能簡(jiǎn)述53.2基礎(chǔ)環(huán)境配置53.3物理架構(gòu)圖63.4系統(tǒng)關(guān)聯(lián)關(guān)系圖63.5系統(tǒng)關(guān)鍵文件說(shuō)明63.6數(shù)據(jù)備份策略63.7監(jiān)控預(yù)警措施64系統(tǒng)應(yīng)急場(chǎng)景分類及描述64.1故障場(chǎng)景分類64.2硬件故障場(chǎng)景74.2.1主機(jī)硬件故障導(dǎo)致服務(wù)器宕機(jī)74.2.2設(shè)備硬盤異常74.3通用軟件故障場(chǎng)景74.3.1操作系統(tǒng)（AIX）文件系統(tǒng)空間利用率高94.3.2操作系統(tǒng)（AIX）用戶無(wú)法登陸94.3.3操作系統(tǒng)（AIX）內(nèi)存不足

2、94.3.4操作系統(tǒng)（AIX）CPU繁忙94.3.5操作系統(tǒng)（AIX）磁盤繁忙94.3.6中間件（Weblogic） Crash94.3.7中間件（Weblogic）內(nèi)存溢出94.3.8中間件（Weblogic）掛起94.3.9中間件（Weblogic）占CPU高94.3.10數(shù)據(jù)庫(kù)（Oracle）性能異常94.3.11數(shù)據(jù)庫(kù)（Oracle）文件損壞94.3.12數(shù)據(jù)庫(kù)（Oracle）歸檔日志滿導(dǎo)致掛起94.3.13數(shù)據(jù)庫(kù)（Oracle）表空間OffLine94.3.14數(shù)據(jù)庫(kù)（Oracle）實(shí)例監(jiān)聽(tīng)宕掉94.4應(yīng)用軟件故障場(chǎng)景94.4.1用戶無(wú)法登陸WEB應(yīng)用界面114.4.2WEB應(yīng)用無(wú)法

3、啟動(dòng)114.4.3可進(jìn)入登陸界面但登陸異常114.4.4WEB應(yīng)用響應(yīng)緩慢或無(wú)響應(yīng)114.4.5WEB中某一聯(lián)機(jī)交易大面積異常報(bào)錯(cuò)114.4.6對(duì)外服務(wù)端進(jìn)程異常114.5其他異常情況114.5.1網(wǎng)絡(luò)攻擊114.5.2治安事件114.5.3人為破壞114.5.4電力故障114.5.5火災(zāi)等事故造成系統(tǒng)癱瘓115系統(tǒng)重建116應(yīng)急演練117持續(xù)改進(jìn)12附件2：XXX管理系統(tǒng)雙機(jī)切換方案12文檔修訂記錄作 者修訂內(nèi)容簡(jiǎn)述修訂日期修訂前版本號(hào)2016-08-14V1.01 總則為進(jìn)一步健全XX銀行XXX管理系統(tǒng)應(yīng)急處置工作機(jī)制，防范系統(tǒng)運(yùn)行風(fēng)險(xiǎn)，有效處置系統(tǒng)突發(fā)事件，保證對(duì)客戶的業(yè)務(wù)連續(xù)性，依據(jù)X

4、X銀行信息科技突發(fā)事件應(yīng)急預(yù)案有關(guān)規(guī)定制定本預(yù)案。1.1 適用范圍1. 本預(yù)案適用于預(yù)防和處置XXX管理系統(tǒng)的突發(fā)事件。2. 本預(yù)案所稱突發(fā)事件，指XXX管理系統(tǒng)出現(xiàn)異常，影響業(yè)務(wù)的持續(xù)開(kāi)展，影響客戶業(yè)務(wù)辦理，需要啟動(dòng)應(yīng)急處置措施應(yīng)對(duì)的事件。1.2 系統(tǒng)重要等級(jí)2 應(yīng)急組織架構(gòu)2.1 應(yīng)急執(zhí)行小組3 系統(tǒng)資產(chǎn)配置說(shuō)明3.1 系統(tǒng)功能簡(jiǎn)述XXX管理系統(tǒng)的主要的功能有： 功能框架如下圖：3.2 基礎(chǔ)環(huán)境配置設(shè)備名稱類型用途物理位置服務(wù)IP管理IP3.3 物理架構(gòu)圖3.4 系統(tǒng)關(guān)聯(lián)關(guān)系圖3.5 系統(tǒng)關(guān)鍵文件說(shuō)明3.6 數(shù)據(jù)備份策略3.7 監(jiān)控預(yù)警措施4 系統(tǒng)應(yīng)急場(chǎng)景分類及描述4.1 故障場(chǎng)景分類系統(tǒng)

5、故障場(chǎng)景按照故障特點(diǎn)分為五類：硬件故障場(chǎng)景、通用軟件故障場(chǎng)景、應(yīng)用軟件故障場(chǎng)景、網(wǎng)絡(luò)故障場(chǎng)景和其它故障場(chǎng)景。1. 硬件故障場(chǎng)景：主要包含系統(tǒng)硬件方面的故障場(chǎng)景。例如服務(wù)器異常宕機(jī)、設(shè)備CPU異常、設(shè)備內(nèi)存異常、設(shè)備磁盤異常、設(shè)備網(wǎng)卡異常等。2. 通用軟件故障場(chǎng)景：主要操作系統(tǒng)、數(shù)據(jù)庫(kù)軟件、中間件等方面的故障場(chǎng)景。例如AIX操作系統(tǒng)異常、Weblogic服務(wù)異常、系統(tǒng)數(shù)據(jù)庫(kù)崩潰等。3. 應(yīng)用軟件故障場(chǎng)景：主要包含業(yè)務(wù)應(yīng)用系統(tǒng)方面的故障。例如系統(tǒng)應(yīng)用響應(yīng)緩慢或無(wú)響應(yīng)、應(yīng)用進(jìn)程異常、系統(tǒng)應(yīng)用無(wú)法啟動(dòng)、交易異常報(bào)錯(cuò)等。4. 網(wǎng)絡(luò)故障場(chǎng)景：主要包含與網(wǎng)絡(luò)相關(guān)的故障場(chǎng)景。例如WEB與DB間網(wǎng)絡(luò)異?；虿豢捎?/p>

6、、IP地址異?；虺霈F(xiàn)沖突、數(shù)據(jù)傳輸中出現(xiàn)異常丟包等5. 其它故障場(chǎng)景：主要包含系統(tǒng)相關(guān)的外聯(lián)系統(tǒng)、外部環(huán)境等方面的故障。例如機(jī)柜異常掉電、與外聯(lián)系統(tǒng)交易異常、設(shè)備被人為破壞等。4.2 硬件故障場(chǎng)景n 主機(jī)硬件故障導(dǎo)致服務(wù)器宕機(jī)n 設(shè)備硬盤異常4.2.1 主機(jī)硬件故障導(dǎo)致服務(wù)器宕機(jī)故障說(shuō)明： 處理時(shí)間 現(xiàn)象 現(xiàn)場(chǎng)保護(hù) 應(yīng)急方法 操作步驟 驗(yàn)證方式4.2.2 設(shè)備硬盤異常4.3 通用軟件故障場(chǎng)景通用軟件常見(jiàn)故障事件列舉如下：n 操作系統(tǒng)（AIX）文件系統(tǒng)空間利用率高n 操作系統(tǒng)（AIX）用戶無(wú)法登陸n 操作系統(tǒng)（AIX）內(nèi)存不足n 操作系統(tǒng)（AIX）CPU繁忙n 操作系統(tǒng)（AIX）磁盤繁忙n 中間

7、件（Weblogic）Crashn 中間件（Weblogic）內(nèi)存溢出n 中間件（Weblogic）掛起n 中間件（Weblogic）占CPU高n 數(shù)據(jù)庫(kù)（Oracle）性能異常n 數(shù)據(jù)庫(kù)（Oracle）文件損壞n 數(shù)據(jù)庫(kù)（Oracle）表死鎖n 數(shù)據(jù)庫(kù)（Oracle）歸檔日志滿導(dǎo)致掛起n 數(shù)據(jù)庫(kù)（Oracle）表空間OffLinen 數(shù)據(jù)庫(kù)（Oracle）實(shí)例監(jiān)聽(tīng)宕掉4.3.1 操作系統(tǒng)（AIX）文件系統(tǒng)空間利用率高4.3.2 操作系統(tǒng)（AIX）用戶無(wú)法登陸4.3.3 操作系統(tǒng)（AIX）內(nèi)存不足4.3.4 操作系統(tǒng)（AIX）CPU繁忙4.3.5 操作系統(tǒng)（AIX）磁盤繁忙4.3.6 中間件（

8、Weblogic） Crash4.3.7 中間件（Weblogic）內(nèi)存溢出4.3.8 中間件（Weblogic）掛起4.3.9 中間件（Weblogic）占CPU高4.3.10 數(shù)據(jù)庫(kù)（Oracle）性能異常4.3.11 數(shù)據(jù)庫(kù)（Oracle）文件損壞4.3.12 數(shù)據(jù)庫(kù)（Oracle）歸檔日志滿導(dǎo)致掛起4.3.13 數(shù)據(jù)庫(kù)（Oracle）表空間OffLine4.3.14 數(shù)據(jù)庫(kù)（Oracle）實(shí)例監(jiān)聽(tīng)宕掉4.4 應(yīng)用軟件故障場(chǎng)景通用軟件常見(jiàn)故障事件列舉如下：n 用戶無(wú)法登陸WEB應(yīng)用界面n WEB應(yīng)用無(wú)法啟動(dòng)n WEB應(yīng)用響應(yīng)緩慢或無(wú)響應(yīng)n WEB中某一聯(lián)機(jī)交易大面積異常報(bào)錯(cuò)n 對(duì)外服務(wù)端

9、進(jìn)程異常n 對(duì)外服務(wù)端無(wú)法啟動(dòng)4.4.1 用戶無(wú)法登陸WEB應(yīng)用界面4.4.2 WEB應(yīng)用無(wú)法啟動(dòng)4.4.3 可進(jìn)入登陸界面但登陸異常4.4.4 WEB應(yīng)用響應(yīng)緩慢或無(wú)響應(yīng)4.4.5 WEB中某一聯(lián)機(jī)交易大面積異常報(bào)錯(cuò)4.4.6 對(duì)外服務(wù)端進(jìn)程異常4.5 其他異常情況4.5.1 網(wǎng)絡(luò)攻擊4.5.2 治安事件4.5.3 人為破壞4.5.4 電力故障4.5.5 火災(zāi)等事故造成系統(tǒng)癱瘓5 系統(tǒng)重建6 應(yīng)急演練1. 每年進(jìn)行一次應(yīng)急演練。2. 每季至少進(jìn)行1次備份數(shù)據(jù)恢復(fù)，出具恢復(fù)測(cè)試報(bào)告。3. 演練完成后編寫XXX管理系統(tǒng)應(yīng)急演練總結(jié)報(bào)告，包括演練時(shí)間、演練內(nèi)容、參加人員、演練中發(fā)現(xiàn)的問(wèn)題、原因分析、應(yīng)對(duì)措施。7 持續(xù)改進(jìn)應(yīng)急預(yù)案持續(xù)改進(jìn)遵循以下原則：1. 根據(jù)每次應(yīng)急演練的經(jīng)驗(yàn)、風(fēng)險(xiǎn)分析，及時(shí)更新本應(yīng)急預(yù)案分冊(cè)。2. 當(dāng)事故發(fā)生后，總結(jié)應(yīng)急處置經(jīng)驗(yàn)，形成應(yīng)急場(chǎng)景，加入本應(yīng)急預(yù)案分冊(cè)。3. 當(dāng)發(fā)生重大系統(tǒng)架構(gòu)、系統(tǒng)軟/硬件變更時(shí)更新本應(yīng)急預(yù)案分冊(cè)。4. 當(dāng)監(jiān)管部門的監(jiān)管文件、XX銀行應(yīng)急管理辦