多渠道智能一體化運維管理平臺

1、多渠道智能一體化運維管理平臺項目背景及目標在我國過去20年里，IT信息化建設在國內各行各業(yè)發(fā)展迅速，尤其在金融領域極為明顯。然而隨著業(yè)務規(guī)模的不斷擴大，IT基礎資源建設規(guī)模也越來越大，IT基礎資源規(guī)模的快速增長給IT管理部門帶來了莫大的挑戰(zhàn)，即“網(wǎng)絡安全穩(wěn)定、基礎設施安全可靠、應用系統(tǒng)安全穩(wěn)定高效、業(yè)務滿足7X24小時服務等”各種要求，再加上監(jiān)管部門的各種安全規(guī)范與要求，IT管理部門需要克服現(xiàn)實工作中的各種技術及管理問題。在諸多問題中最突出的問題主要集中在“IT運維的系統(tǒng)化管理”上：一是在如此繁雜IT架構下，IT基礎信息管理混亂、對象間關系模糊，缺少對IT對象的系統(tǒng)化、標準化管理；二是IT監(jiān)控

2、分專業(yè)，專業(yè)間數(shù)據(jù)無關聯(lián)，缺少一套集中式監(jiān)控與預警系統(tǒng)；三是業(yè)務發(fā)生故障時IT響應滯后、被動，缺少網(wǎng)絡性能及交易性能方面的監(jiān)控手段。這些問題的存在，從短期看，已或大或小地影響了天津農商銀行IT信息化建設，如：不利于IT基礎設施資產統(tǒng)計、不利于IT基礎設施生命周期的跟蹤、控制與管理、圍繞IT基礎設施生產運維工作效率提升不上去及生產運維工作難以形成“主動運維”機制等等；從長期看，已經(jīng)嚴重影響到了天津農商銀行新數(shù)據(jù)中心的建設，關系到未來天津農商銀行新數(shù)據(jù)中心啟用后IT運維管理水平能否再上新臺階。綜上所述，天津農商銀行需要搭建一套能夠滿足未來新數(shù)據(jù)中心需求、為信息科技管理工作質量提升及快速實現(xiàn)“科技引

3、領業(yè)務”目標起到推動作用的“多渠道一體化運維管理平臺”。項目方案天津農商銀行通過構建“多渠道智能一體化運維管理”體系，并以此指導“多渠道智能一體化運維管理平臺”建設過程。該平臺能夠有效實現(xiàn)對IT運行整體環(huán)境的監(jiān)控，即對主機系統(tǒng)、網(wǎng)絡系統(tǒng)、安全設備、數(shù)據(jù)庫、中間件、存儲設備、應用系統(tǒng)、IT環(huán)境等的集中監(jiān)控和管理。能夠及時采集各類告警數(shù)據(jù)、性能數(shù)據(jù)和配置數(shù)據(jù)，進行集成統(tǒng)一的分析、查詢、報告和展示，幫助運維管理人員方便有效的定位系統(tǒng)問題，直觀快速的診斷和分析問題，將運維模式由被動的支持轉為主動式服務。通過幫助服務臺接收各類告警事件，按照預先定義的事件管理流程完成事件的處理。建立故障管理、問題管理、變

4、更管理、配置管理等服務工作流程，通過管理人員、技術和流程的有機結合，實現(xiàn)IT運維管理標準化和規(guī)范化，形成一套完整的IT一體化運維管理體系。平臺主要功能包括：一是，基于ITIL理念，結合IT信息化管理要求，構建IT基礎信息數(shù)據(jù)庫（CMDB），實現(xiàn)對天津農商銀行IT基礎信息的統(tǒng)一標準化、系統(tǒng)化管理；二是，結合當今IT信息化技術，采用帶外技術構建基于帶外數(shù)據(jù)的性能監(jiān)控系統(tǒng)，實現(xiàn)對天津農商銀行重要、一級、二級業(yè)務系統(tǒng)網(wǎng)絡性能及交易性能方面監(jiān)控；三是，構建“多渠道智能一體化運維管理平臺”基礎平臺，打通該平臺與各專業(yè)監(jiān)控系統(tǒng)信息通道，實現(xiàn)對IT基礎對象的集中式監(jiān)控與統(tǒng)一預警。創(chuàng)新點一、本系統(tǒng)的技術架構以基

5、于SOA架構，集成動環(huán)、網(wǎng)絡、系統(tǒng)監(jiān)控以及交易監(jiān)控等系統(tǒng)，以IT基礎信息配置管理為建設基礎，以CMDB為核心支撐點，以業(yè)務為管理視角實現(xiàn)監(jiān)控集中和統(tǒng)一展現(xiàn)；二、基于CMDB構建ITSM流程化控制與管理功能和移動終端APP功能；三、利用大數(shù)據(jù)技術通過對全IT日志進行統(tǒng)計分析實現(xiàn)“事件關聯(lián)預警”，結合各種IT運維場景，利用機器學習與算法建模技術，實現(xiàn)基于IT運維日志數(shù)據(jù)輔助提升IT運維質量的“精準預警、異常檢測、容量管理”等深度應用。技術實現(xiàn)特點“多渠道智能一體化運維管理平臺”技術架構圖如上圖所示:、內部結構采用分層式設計，各層間通過接口對接，為了保證接口的標準化和數(shù)據(jù)傳遞的規(guī)范性，設計中采用服務

6、總線的設計思想和相關技術實現(xiàn)數(shù)據(jù)整合平臺（DIP）。它介于專業(yè)子系統(tǒng)層和集中處理層之間，起到規(guī)范數(shù)據(jù)交換標準、可以消除不同監(jiān)控應用之間的技術差異，讓不同的專業(yè)子系統(tǒng)協(xié)調運作，實現(xiàn)了不同服務之間的通信與整合。二、數(shù)據(jù)整合平臺采用標準、通用的接口技術（如WebService等），實現(xiàn)性能數(shù)據(jù)、事件告警數(shù)據(jù)、其它事件數(shù)據(jù)、配置數(shù)據(jù)、報表數(shù)據(jù)在專業(yè)子系統(tǒng)層與集中處理層之間的數(shù)據(jù)傳送；三、外部訪問接口提供多種接口，如文件接口、rest接口、Webservice接口等，以滿足三方系統(tǒng)不同接入方式，這也為后續(xù)該平臺的可擴展性提供了方便。項目過程管理依項目初期制定的目標，整個項目實施分成了兩個子項目，即“多渠

7、道智能一體化運維管理平臺”基礎平臺和基于帶外流數(shù)據(jù)的“性能監(jiān)控系統(tǒng)”。前者實現(xiàn)對IT基礎信息的統(tǒng)一標準化、系統(tǒng)化管理及“集中監(jiān)控與統(tǒng)一預警”功能，后者主要實施“網(wǎng)絡性能監(jiān)控”及“交易性能監(jiān)控”。因為兩個系統(tǒng)間有關聯(lián)，所以由一個大項組分出兩個小項目組各負責一個子項目，大項目組統(tǒng)一管理兩個小項目組，負責項目間協(xié)調和統(tǒng)一項目管理工作。整個項目從項目啟動會直至投產試運行，平均12個人歷經(jīng)8個月。運營情況一、“多渠道智能一體化運維管理平臺”已經(jīng)實現(xiàn)了基于天津農商銀行IT信息化管理要求的IT基礎信息數(shù)據(jù)結構落地工作，各部分數(shù)據(jù)按要求有序入庫管理，數(shù)據(jù)管理工作例行納管流程有序推進；平臺已納管全部重要、一級、

8、二級業(yè)務系統(tǒng)相關服務器、數(shù)據(jù)庫、中間件、應用等監(jiān)控任務，經(jīng)過近半年左右的優(yōu)化，已能夠對服務器硬件、存儲硬件、操作系統(tǒng)、數(shù)據(jù)庫、中間件、應用等進行實時監(jiān)控，并能夠按照預設的預警規(guī)則進行有效預警；二、“網(wǎng)絡性能監(jiān)控”已實現(xiàn)對天津農商銀行全部生產環(huán)境中重要網(wǎng)絡設備的網(wǎng)絡性能監(jiān)控；三、“交易性能監(jiān)控”已實現(xiàn)對天津農商銀行重要、一級、二級近40余套業(yè)務系統(tǒng)的交易性監(jiān)控，預警信息實時推送“多渠道智能一體化運維管理平臺”實現(xiàn)統(tǒng)一預警；四、“動環(huán)監(jiān)控”系統(tǒng)實時推送預警信息給“多渠道智能一體化運維管理平臺”實現(xiàn)統(tǒng)一預警。項目成效一、在IT基礎信息管控方面，“多渠道智能一體化智能運維管理平臺”讓IT運維人員徹底告

9、別了之前臺賬式無系統(tǒng)的IT基礎數(shù)據(jù)管理時代，CMDB結合制度化流程管控，IT基礎數(shù)據(jù)賬實相符度比之前提高了40%-50%，數(shù)據(jù)質量顯著提高；二、網(wǎng)絡性能監(jiān)控實時監(jiān)測重要監(jiān)測點的網(wǎng)絡流，特別是與第三方相關的網(wǎng)絡，如銀聯(lián)、人行、農信銀等，比起之前在出現(xiàn)與三方間交易性能或交易中斷問題時通過命令排查網(wǎng)絡問題，排查效率大大提升；三、交易性能監(jiān)控系統(tǒng)實時從“交易量、響應時間、響應率、成功率”四個維度對每個業(yè)務系統(tǒng)的相關監(jiān)控點進行監(jiān)控，實時保存流水數(shù)據(jù)，并依預設預警規(guī)則實時預警，這既改變了之前交易故障時IT運維人員的被動運維狀態(tài)，而且也為IT運維人員排障提供了有效的排障依據(jù)，從而提高了排障速度。經(jīng)驗總結經(jīng)過多渠道智能一體化運維管理平臺的落地實施，天津農商銀行已經(jīng)實現(xiàn)了對IT運行整體環(huán)境的集中監(jiān)控、管理和統(tǒng)一展現(xiàn)，并能幫助運維管理人員方便有效的定位系統(tǒng)問題，直觀快速的診斷和分析問題，將運維模式由被動的支持轉為主動式服務。同時，梳理了數(shù)據(jù)中心的I