數(shù)據(jù)中心運(yùn)維管理建設(shè)方案

數(shù)據(jù)中心運(yùn)維管理建設(shè)方案第一章某數(shù)據(jù)中心基礎(chǔ)運(yùn)維概述 4第二章數(shù)據(jù)中心運(yùn)維分類 42.1基礎(chǔ)環(huán)境運(yùn)維管理 42.2網(wǎng)絡(luò)運(yùn)維管理 62.3服務(wù)器和存儲運(yùn)維管理 62.3.1服務(wù)器運(yùn)行情況及性能監(jiān)測 62.3.2服務(wù)器軟硬件兼容性檢查 72.3.3磁盤陣列設(shè)備管理 72.3.4機(jī)柜、電源、網(wǎng)線布局管理 82.3.5協(xié)助第三方維護(hù) 82.4基礎(chǔ)軟件運(yùn)維管理 82.4.1操作系統(tǒng) 82.4.2數(shù)據(jù)庫 92.4.3中間件 2.4.4備份系統(tǒng) 2.4.5應(yīng)用系統(tǒng) 第三章運(yùn)維工作內(nèi)容 3.1日常維護(hù)工作 3.2系統(tǒng)性能監(jiān)控管理 3.3系統(tǒng)維護(hù)管理 3.4系統(tǒng)配置與支持維護(hù) 3.5系統(tǒng)容量管理 3.6巡檢工作 3.7定期服務(wù)報(bào)告 3.7.1設(shè)備配置檔案 3.7.2服務(wù)文檔 3.7.3服務(wù)總結(jié) 3.8運(yùn)行維護(hù)優(yōu)化評估 3.9應(yīng)急保障措施和組織 3.9.1應(yīng)急響應(yīng)系統(tǒng) 203.9.2應(yīng)急響應(yīng)過程 203.9.3制定應(yīng)急保障預(yù)案及演練 213.10IT運(yùn)維服務(wù)工具 3.10.1運(yùn)維監(jiān)控平臺 23第一章某數(shù)據(jù)中心基礎(chǔ)運(yùn)維概述以及由這些設(shè)備組成的所有網(wǎng)絡(luò)，需要監(jiān)控網(wǎng)絡(luò)運(yùn)行情況并提出網(wǎng)絡(luò)風(fēng)估，定期對網(wǎng)絡(luò)進(jìn)行優(yōu)化配置，提高網(wǎng)絡(luò)運(yùn)行效率第三部分服務(wù)器和存儲部分，包含整個數(shù)據(jù)中心的小型機(jī)、服務(wù)器、存第四部分為基礎(chǔ)軟件部分，包括各種操作系統(tǒng)、數(shù)據(jù)庫、中間件、備份軟件等等。要求這些軟件可以正常工作，并服務(wù)，當(dāng)這些軟件出現(xiàn)問題時，能發(fā)現(xiàn)并提出解決第二章數(shù)據(jù)中心運(yùn)維分類通過主動性、預(yù)防性維護(hù)，執(zhí)行日常維護(hù)作態(tài)進(jìn)行檢查分析，及時進(jìn)行數(shù)據(jù)備份，并定證，對系統(tǒng)運(yùn)行質(zhì)量進(jìn)行分析，并進(jìn)行維護(hù)題及時處理，消除隱患，保障平臺的穩(wěn)定運(yùn)行。我1)機(jī)房機(jī)柜擺放規(guī)劃和機(jī)柜管理；2)服務(wù)器和網(wǎng)絡(luò)設(shè)備擺放規(guī)劃和日常管理；3)設(shè)備出入機(jī)房審批登記管理；4)內(nèi)部人員出入機(jī)房審批登記管理；5)外部來賓機(jī)房參觀審批登記管理；6)機(jī)房電力系統(tǒng)監(jiān)控、問題及時上報(bào)；7)消防監(jiān)控系統(tǒng)監(jiān)控、接收報(bào)警短信和聯(lián)系第三方；8)空調(diào)報(bào)警系統(tǒng)監(jiān)控、接收報(bào)警短信和聯(lián)系9)溫濕度報(bào)警監(jiān)控、接受報(bào)警短信和聯(lián)系專業(yè)第三方；10)漏水報(bào)警系統(tǒng)監(jiān)控、接受報(bào)警短信和聯(lián)系專業(yè)第三方；12)視頻監(jiān)控系統(tǒng)日常運(yùn)維；14)機(jī)房資產(chǎn)管理系統(tǒng)(CMDB)。15)機(jī)房環(huán)境。清理機(jī)房的雜物，將機(jī)房物品定置。清潔機(jī)房門窗、地面。定期清潔電池室的地面；檢查機(jī)房所有堵，嚴(yán)密防鼠；檢查機(jī)房玻璃、地板、天花16)巡視電池間；檢查電池工作狀態(tài)。17)確認(rèn)機(jī)房照明良好，出現(xiàn)問題及時報(bào)告。18)視頻網(wǎng)絡(luò)播放系統(tǒng)。定期檢查可用性，有問題及時與專業(yè)第三方公19)填寫巡檢記錄。針對數(shù)據(jù)中心的網(wǎng)絡(luò)部分，運(yùn)維內(nèi)容主要包含以下內(nèi)容：1)測試網(wǎng)絡(luò)接入速度，監(jiān)控網(wǎng)絡(luò)訪問可用性和訪問質(zhì)量，出現(xiàn)問題第一時間直接聯(lián)系接入商解決。2)網(wǎng)絡(luò)接入商變化時，配合網(wǎng)絡(luò)接入商對網(wǎng)絡(luò)變更方案的可行性審查、問題審查。配合網(wǎng)絡(luò)接入商更替施工。3)局域網(wǎng)。本地局域網(wǎng)日常管理和維護(hù)；VLAN劃分；網(wǎng)絡(luò)性能優(yōu)化；故障排除；網(wǎng)絡(luò)節(jié)點(diǎn)周期性檢查，發(fā)現(xiàn)潛在問題，并解決。4)無線局域網(wǎng)。負(fù)責(zé)無線局域網(wǎng)的日常管理和維護(hù)；客戶端不能正常接入網(wǎng)絡(luò)的故障排除；網(wǎng)絡(luò)性能優(yōu)化；故障排除；網(wǎng)絡(luò)節(jié)點(diǎn)周期性檢查，發(fā)現(xiàn)潛在問題并解決。5)遠(yuǎn)程接入。制定VPN使用策略，實(shí)施VPN用戶日常遠(yuǎn)程接入服務(wù)器的管理，以及性能優(yōu)化和故障排除等。6)網(wǎng)絡(luò)病毒查殺和網(wǎng)絡(luò)安全保護(hù)。7)根據(jù)實(shí)際項(xiàng)目或安排而產(chǎn)生的其他工作。2.3服務(wù)器和存儲運(yùn)維管理2.3.1服務(wù)器運(yùn)行情況及性能監(jiān)測數(shù)據(jù)中心運(yùn)維團(tuán)隊(duì)將通過綜合監(jiān)控系統(tǒng)實(shí)施7*24小時平臺設(shè)備監(jiān)控，發(fā)現(xiàn)告警，并進(jìn)行處理，解決問題。對系統(tǒng)運(yùn)行進(jìn)行實(shí)時檢查。對監(jiān)控或維護(hù)中發(fā)現(xiàn)的問題及時處理，消除隱患，保障平臺的穩(wěn)定運(yùn)行。并且還提供針對各服務(wù)器物理資源的使用情況和操作系統(tǒng)的運(yùn)行情況、進(jìn)行實(shí)時監(jiān)控，提供服務(wù)器安全監(jiān)測報(bào)告。主機(jī)性能監(jiān)控的檢查列表包括：>內(nèi)存使用情況>交換區(qū)使用情況>磁盤I/O情況>關(guān)鍵文件系統(tǒng)的狀態(tài)>重要進(jìn)程的運(yùn)行情況(例程數(shù)量、消耗CPU、占用內(nèi)存)>操作系統(tǒng)的各類日志文件>網(wǎng)絡(luò)、端口信息運(yùn)維團(tuán)隊(duì)需根據(jù)檢查列表進(jìn)行日常檢查，并不斷地改進(jìn)日常檢查列表，以滿足對系統(tǒng)監(jiān)控的需要。2.3.2服務(wù)器軟硬件兼容性檢查數(shù)據(jù)中心運(yùn)維團(tuán)隊(duì)在維護(hù)系統(tǒng)穩(wěn)定運(yùn)行的同時，需主動收集系統(tǒng)關(guān)鍵補(bǔ)丁、軟件補(bǔ)丁、硬件微碼等信息，在通過數(shù)據(jù)中心專家評審的前提下，對相關(guān)設(shè)備進(jìn)行升級服務(wù)，并在升級完成后配合應(yīng)用方對系統(tǒng)進(jìn)行測試。升級前后需要和應(yīng)用方及時做好溝通確認(rèn)工作，確保不會產(chǎn)生兼容性導(dǎo)致的故障。運(yùn)維團(tuán)隊(duì)需要對磁盤陣列設(shè)備及其相關(guān)的部件(如硬盤、控制器等)進(jìn)行編號，并記錄在案，對軟件設(shè)置中的參數(shù)也要進(jìn)行詳細(xì)的記錄，并在每次變更后及時更新相關(guān)的信息。除此之外，運(yùn)維團(tuán)隊(duì)定期(暫定每半年)對于每個服務(wù)器的系統(tǒng)容量監(jiān)測的審核，并制定相應(yīng)的容量規(guī)劃，主要監(jiān)測文件系統(tǒng)的空間、數(shù)據(jù)庫的空間資源利用情況，分析資源利用趨勢，并提供資源情況報(bào)表。文件系統(tǒng)空間管理>定期檢查文件系統(tǒng)的空間使用情況，根據(jù)業(yè)務(wù)發(fā)展需求和新業(yè)務(wù)的增加，制定合理的空間分配方案，新增、修改或刪除空間。>對文件系統(tǒng)空間的使用進(jìn)行監(jiān)控，發(fā)現(xiàn)空間使用不合理或需要清理的協(xié)調(diào)數(shù)據(jù)庫空間管理>應(yīng)實(shí)時監(jiān)測數(shù)據(jù)存儲空間的使用情況，根據(jù)業(yè)務(wù)數(shù)據(jù)的數(shù)據(jù)量、數(shù)據(jù)結(jié)構(gòu)以及增長速度，制定合適的數(shù)據(jù)存儲和結(jié)構(gòu)優(yōu)化策略，動態(tài)增加新的空間>定期檢查數(shù)據(jù)存儲空間的使用情況，根據(jù)實(shí)際情況規(guī)劃增加新的空間，填寫數(shù)據(jù)庫空間新增/修改/刪除申請表，經(jīng)審核后實(shí)施，并更新數(shù)據(jù)庫配置2.3.4機(jī)柜、電源、網(wǎng)線布局管理運(yùn)維團(tuán)隊(duì)對于新上架安裝的設(shè)備，需要進(jìn)行拍照留檔，確認(rèn)各線路位置，并對服務(wù)器的電源部分進(jìn)行編號整理，最終登記在冊。2.3.5協(xié)助第三方維護(hù)對于由專業(yè)第三方提供運(yùn)維的設(shè)備，設(shè)備出現(xiàn)問題后運(yùn)維團(tuán)隊(duì)需及時通知第三方并告知采購人，視情況嚴(yán)重性，決定是否啟動應(yīng)急預(yù)案；配合第三方服務(wù)商一起排查和解決問題，實(shí)施為了解決故障而進(jìn)行的系統(tǒng)軟硬件的補(bǔ)丁、升級及維護(hù)工作。獨(dú)立處理初級系統(tǒng)故障，與第三方廠商或服務(wù)商配合解決高級別系統(tǒng)故障。記錄問題、故障的解決辦法及解決過程。做出臨時的配置變更以排除故障，在必要的時候，提出永久性配置變更建議。2.4基礎(chǔ)軟件運(yùn)維管理運(yùn)維團(tuán)隊(duì)充分保障服務(wù)器操作系統(tǒng)的穩(wěn)定運(yùn)行，將提供以下服務(wù)內(nèi)容：1)系統(tǒng)升級運(yùn)維團(tuán)隊(duì)在維護(hù)系統(tǒng)穩(wěn)定運(yùn)行的同時，需主動收集系統(tǒng)關(guān)鍵補(bǔ)丁、軟件補(bǔ)丁等信息，在通過數(shù)據(jù)中心專家評審的前提下，對相關(guān)系統(tǒng)進(jìn)行升級服務(wù)，并在升級完成后配合應(yīng)用方對系統(tǒng)進(jìn)行測試。升級前后需要和應(yīng)用方及時做好溝通確認(rèn)工作，確保不會產(chǎn)生兼容性導(dǎo)致的故障。2)操作系統(tǒng)穩(wěn)定性監(jiān)控定時查看操作系統(tǒng)日志及IIS日志，查看CPU、內(nèi)存3)權(quán)限與文件管理服務(wù)器應(yīng)明確責(zé)任人及管理帳號持有人，不應(yīng)出現(xiàn)多人單帳戶，單人多帳戶的情況，不利于在服務(wù)器出現(xiàn)問題后，對服務(wù)器進(jìn)行操作維護(hù)、查找問4)定期檢查磁盤空間進(jìn)行磁盤文件排列的優(yōu)化和錯誤掃描，并處理錯誤；安全地刪除系統(tǒng)各路徑下存放的臨時文件、無用文件、備份文件等等，完全釋放磁盤空間。5)維護(hù)系統(tǒng)注冊表。6)系統(tǒng)配置。優(yōu)化系統(tǒng)配置，關(guān)閉無用服務(wù)和端口，以最適合系統(tǒng)運(yùn)行方式，最小化安裝等。維護(hù)系統(tǒng)配置文檔。7)負(fù)責(zé)系統(tǒng)用戶管理，如增加、刪除用戶、重置用戶密碼、管理用戶權(quán)限等。進(jìn)行系統(tǒng)用戶管理時，記錄所有相關(guān)的系統(tǒng)變更。8)對于新安裝的服務(wù)器，運(yùn)維團(tuán)隊(duì)?wèi)?yīng)負(fù)責(zé)安裝必要的應(yīng)用軟件：如遠(yuǎn)程監(jiān)控工具、備份工具、防病毒軟件等。運(yùn)維團(tuán)隊(duì)將對數(shù)據(jù)進(jìn)行日常維護(hù)，在數(shù)據(jù)庫性能監(jiān)控的檢查列表包括：>資源使用情況>運(yùn)行情況>數(shù)據(jù)庫進(jìn)程狀態(tài)>數(shù)據(jù)庫連接狀態(tài)>數(shù)據(jù)庫進(jìn)程使用資源>數(shù)據(jù)庫的表空間(數(shù)據(jù)表空間、索引空間、臨時表空間等等)使用情況；>數(shù)據(jù)庫日志空間>回滾段使用情況>數(shù)據(jù)庫鎖的數(shù)量>死鎖的發(fā)生、死鎖資源>數(shù)據(jù)庫碎片的數(shù)量>磁盤I/0>數(shù)據(jù)庫運(yùn)行日志>數(shù)據(jù)庫用戶登錄情況>監(jiān)控結(jié)果應(yīng)做登記管理，如實(shí)記錄系統(tǒng)日常運(yùn)行狀況及異常情況，填寫日常運(yùn)行情況記錄表；除此之外，數(shù)據(jù)庫的運(yùn)維工作還包含一些其他工作，如：1)數(shù)據(jù)庫備份和恢復(fù)2)做好備份計(jì)劃，工程師定時完成，因備份占用內(nèi)存較大，在訪問量大的情況下進(jìn)行。當(dāng)出現(xiàn)數(shù)據(jù)問題時，向采購人管理部門通報(bào)，說明數(shù)據(jù)情況，后3)訪問性能優(yōu)化及數(shù)據(jù)庫同步4)服務(wù)器管理人員需記錄詳細(xì)的設(shè)置；數(shù)據(jù)庫如需要同步，應(yīng)明確同步時間或?qū)崟r同步等方式。5)數(shù)據(jù)庫日志和表空間，定期進(jìn)行整理，問題解決。運(yùn)維團(tuán)隊(duì)針對中間件的運(yùn)維工作，內(nèi)容如下：1)OracleWeblogic,輔助開發(fā)公司進(jìn)行配置，保留配置文檔。模塊配置與更新，配合第三方配置.java及wls的版本及更新工作。操作系統(tǒng)模塊配置與更新，配合第三方配置操作系統(tǒng)到可用的版本及更新。配合反饋第三方解決服務(wù)錯誤日志中的問題。2)新軟件安裝，收集安裝光盤、安裝合同(可復(fù)印學(xué)習(xí))、使用說明書、授權(quán)書(Liscense)。紙質(zhì)版文件掃描后入庫，電子版文件進(jìn)入配置庫。為保證在系統(tǒng)崩潰或停止運(yùn)行時能盡快恢復(fù)系統(tǒng)，將制定相關(guān)的數(shù)據(jù)備份制度。應(yīng)針對不同系統(tǒng)制定備份方案，應(yīng)包括備份方法、頻率等。數(shù)據(jù)備份包括定期和不定期備份。重要數(shù)據(jù)應(yīng)每月進(jìn)行全備份和增量備份；不定期備份應(yīng)該在數(shù)據(jù)變更后立即進(jìn)行，更新前的備份按需要保存一定時間。當(dāng)前的應(yīng)用系統(tǒng)及相關(guān)的開發(fā)工作由第三方公司負(fù)責(zé)，運(yùn)維團(tuán)隊(duì)主要起配合作用，相關(guān)的工作內(nèi)容如下：1)當(dāng)應(yīng)用出現(xiàn)問題，及時聯(lián)系第三方解決，并做問題記錄。2)配合第三方進(jìn)行操作系統(tǒng)、數(shù)據(jù)庫和中間件的系統(tǒng)配置，并做配置記錄，在有授權(quán)運(yùn)維的系統(tǒng)中，熟悉應(yīng)用系統(tǒng)維護(hù)方法。3)配合第三方新應(yīng)用系統(tǒng)上線，需收集安裝文件，源代碼，部署文檔、運(yùn)維文檔。掃描后，入配置庫。與合同庫相關(guān)聯(lián)，記錄維護(hù)期間聯(lián)系人，原公司質(zhì)保期。4)每日上班后、下班前檢查可用性，確認(rèn)無災(zāi)難性問題、黑客篡改問題。5)其他待完成工作，根據(jù)實(shí)際情況來處理。第三章運(yùn)維工作內(nèi)容運(yùn)維團(tuán)隊(duì)的值班安排分三班，保持7x24小時的人員安排，在任何時間數(shù)據(jù)中心都由值班人員。運(yùn)維團(tuán)隊(duì)根據(jù)數(shù)據(jù)中心的運(yùn)維管理制度，通過主動性、預(yù)防性維護(hù)，執(zhí)行日常維護(hù)作業(yè)計(jì)劃，對告警、性能、運(yùn)行狀態(tài)進(jìn)行檢查分析，及時進(jìn)行數(shù)據(jù)備份，并定期對備份數(shù)據(jù)進(jìn)行恢復(fù)性測試驗(yàn)證，對系統(tǒng)運(yùn)行質(zhì)量進(jìn)行分析，并進(jìn)行維護(hù)記錄。對監(jiān)控或維護(hù)中發(fā)現(xiàn)的問題及時處理，消除隱患，保障平臺的穩(wěn)定運(yùn)行。3.2系統(tǒng)性能監(jiān)控管理運(yùn)維團(tuán)隊(duì)通過綜合監(jiān)控系統(tǒng)等實(shí)施7*24a小時平臺設(shè)備監(jiān)控，發(fā)現(xiàn)告警，并進(jìn)行處理，解決問題。使用綜合監(jiān)控系統(tǒng)對系統(tǒng)運(yùn)行進(jìn)行實(shí)時檢查。對監(jiān)控或維護(hù)中發(fā)現(xiàn)的問題及時處理，消除隱患，保障平臺的穩(wěn)定運(yùn)行。3.3系統(tǒng)維護(hù)管理運(yùn)維團(tuán)隊(duì)負(fù)責(zé)故障發(fā)現(xiàn)、故障分析、故障處理工作，在規(guī)定時間內(nèi)，處理完成故障，同時負(fù)責(zé)調(diào)查故障原因，最后編寫詳細(xì)的《故障報(bào)告》,包括故障發(fā)生的起止時間、原因、現(xiàn)象、處理過程、處理結(jié)果和處理經(jīng)驗(yàn)。如果故障設(shè)備或組件為第三方維保，值班工程師負(fù)責(zé)和第三方對接，迅速解決問軟件和補(bǔ)丁維護(hù)操作系統(tǒng)級別的軟件和補(bǔ)丁服務(wù)：>運(yùn)維團(tuán)隊(duì)對于維保設(shè)備提供所有軟件補(bǔ)丁，提供預(yù)警服務(wù)，對于軟件的維護(hù)版本提供補(bǔ)丁，并按穩(wěn)定性和安全性的要求，提供是否升級的建議，評估風(fēng)險和制作實(shí)施方案。>故障經(jīng)工程師的分析表明它是由一個軟件錯誤所引起的，那么運(yùn)維團(tuán)隊(duì)需提供相應(yīng)的軟件版本和補(bǔ)丁。>對于軟件版本和補(bǔ)丁的安裝，運(yùn)維團(tuán)隊(duì)首先將確認(rèn)是否可以在對應(yīng)平臺上進(jìn)行裝載。若確認(rèn)可實(shí)施，運(yùn)維團(tuán)隊(duì)則將提供補(bǔ)丁升級服務(wù)，升級前要配合相關(guān)應(yīng)用方做好測試。應(yīng)急預(yù)案及演練為加強(qiáng)風(fēng)險管理意識，提高應(yīng)急預(yù)案相關(guān)人員的應(yīng)急處置能力，及時發(fā)現(xiàn)應(yīng)急預(yù)案可能存在的問題，確保在緊急情況下，應(yīng)急預(yù)案能夠真正發(fā)揮作用，需要通過周期性的演習(xí)演練來不斷檢驗(yàn)應(yīng)急體系應(yīng)急預(yù)案的可靠性、有效性和可操作性。應(yīng)急預(yù)案的演習(xí)演練方式、演習(xí)演練頻度等內(nèi)容明確如下：1、演練分為桌面演練和實(shí)戰(zhàn)演練兩種方式，每次演練都應(yīng)該有相關(guān)技術(shù)人員3、每次演練結(jié)束之后應(yīng)進(jìn)行分析和總結(jié)，及時完成應(yīng)急預(yù)案的更新、優(yōu)化和協(xié)助第三方維護(hù)在服務(wù)期內(nèi)，運(yùn)維團(tuán)隊(duì)將配合第三方或服務(wù)商進(jìn)行系統(tǒng)的升級、替換、新部件(模塊)安裝等，并在實(shí)施完成后確認(rèn)工作正常。為保證在系統(tǒng)崩潰或停止運(yùn)行時能盡快恢復(fù)系統(tǒng)，將制定相關(guān)的數(shù)據(jù)備份制度。應(yīng)針對不同系統(tǒng)制定備份方案，應(yīng)包括備份方法、頻率等。數(shù)據(jù)備份包括定期和不定期備份。重要數(shù)據(jù)應(yīng)每月進(jìn)行全備份和增量備份；不定期備份應(yīng)該在數(shù)據(jù)變更后立即進(jìn)行，更新前的備份按需要保存一定時間。系統(tǒng)優(yōu)化對于巡檢或日常維護(hù)過程中發(fā)現(xiàn)的系統(tǒng)隱患或系統(tǒng)不是處于滿意狀態(tài)，提供相關(guān)系統(tǒng)優(yōu)化的報(bào)告。對于運(yùn)行情況跟蹤，預(yù)防性診斷設(shè)備存在的隱患，提供系統(tǒng)優(yōu)化建議，提供系統(tǒng)規(guī)范和流程的建議，提供系統(tǒng)優(yōu)化概要。硬件設(shè)備統(tǒng)計(jì)運(yùn)維團(tuán)隊(duì)將定期對參保設(shè)備進(jìn)行統(tǒng)計(jì)。質(zhì)量分析報(bào)告運(yùn)維團(tuán)隊(duì)建立數(shù)據(jù)中心平臺的質(zhì)量分析報(bào)告。每月匯總設(shè)備運(yùn)行質(zhì)量、系統(tǒng)性能等指標(biāo)，進(jìn)行數(shù)據(jù)中心平臺運(yùn)行質(zhì)量分析，排除質(zhì)量隱患，不斷提高網(wǎng)絡(luò)運(yùn)行質(zhì)量和服務(wù)質(zhì)量。運(yùn)維工程師應(yīng)每周和每月對于數(shù)據(jù)中心在網(wǎng)系統(tǒng)運(yùn)行情況作分析，數(shù)據(jù)采集、統(tǒng)計(jì)和分析系統(tǒng)設(shè)備的運(yùn)行數(shù)據(jù)，形成系統(tǒng)運(yùn)行周報(bào)和月報(bào)。分析報(bào)告，包括優(yōu)化設(shè)備運(yùn)行的績效，提高系統(tǒng)穩(wěn)定性的建議，對于系統(tǒng)擴(kuò)容和優(yōu)化投資的建議，提供系統(tǒng)運(yùn)行情況概要，系統(tǒng)中關(guān)鍵設(shè)備的運(yùn)行情況分析，并能識別和解決潛在問題，做好預(yù)警，制定并實(shí)施相應(yīng)的優(yōu)化措施，并對于系統(tǒng)的擴(kuò)容和項(xiàng)目投資提供建議報(bào)告。3.4系統(tǒng)配置與支持維護(hù)運(yùn)維團(tuán)隊(duì)的日常工作中，在系統(tǒng)配置和支持方面的工作內(nèi)容如下：>維護(hù)系統(tǒng)軟硬件配置文檔；>進(jìn)行系統(tǒng)用戶管理時必須遵循數(shù)據(jù)中心的賬戶命名規(guī)則及賬戶密碼策略，并文檔記錄所有相關(guān)的系統(tǒng)變更；>每月提交系統(tǒng)賬戶變更月報(bào)；>配合第三方進(jìn)行升級、安裝系統(tǒng)，及時更新操作系統(tǒng)補(bǔ)丁，進(jìn)行系統(tǒng)軟件>根據(jù)運(yùn)維報(bào)告及統(tǒng)計(jì)報(bào)表，每月制定維護(hù)作業(yè)計(jì)劃，并提交日常維護(hù)報(bào)告；3.5系統(tǒng)容量管理運(yùn)維團(tuán)隊(duì)至少每半年進(jìn)行一次對于每個服務(wù)器的系統(tǒng)容量監(jiān)測的審核，并制定相應(yīng)的容量規(guī)劃，主要監(jiān)測文件系統(tǒng)的空間、數(shù)據(jù)庫的空間資源利用情況，分析資源利用趨勢，并提供資源情況月報(bào)表。文件系統(tǒng)空間管理>定期檢查文件系統(tǒng)的空間使用情況，根據(jù)業(yè)務(wù)發(fā)展需求和新業(yè)務(wù)的增加，制定合理的空間分配方案，新增、修改或刪除空間。>對文件系統(tǒng)空間的使用進(jìn)行監(jiān)控，發(fā)現(xiàn)空間使用不合理或需要清理的協(xié)調(diào)數(shù)據(jù)庫空間管理>應(yīng)實(shí)時監(jiān)測數(shù)據(jù)存儲空間的使用情況，根據(jù)業(yè)務(wù)數(shù)據(jù)的數(shù)據(jù)量、數(shù)據(jù)結(jié)構(gòu)以及增長速度，制定合適的數(shù)據(jù)存儲和結(jié)構(gòu)優(yōu)化策略，動態(tài)增加新的空間>定期檢查數(shù)據(jù)存儲空間的使用情況，根據(jù)實(shí)際情況規(guī)劃增加新的空間，填寫數(shù)據(jù)庫空間新增/修改/刪除申請表，經(jīng)審核后實(shí)施，并更新數(shù)據(jù)庫配置除了依靠數(shù)據(jù)中心的監(jiān)控軟件，還要求運(yùn)維團(tuán)隊(duì)對服務(wù)器、存儲、操作系統(tǒng)、數(shù)據(jù)庫、中間件等基礎(chǔ)設(shè)施進(jìn)行巡檢，并編寫巡檢報(bào)告。通過巡檢可以對當(dāng)前系統(tǒng)的運(yùn)行狀況有一個詳細(xì)的了解，對巡檢中發(fā)現(xiàn)的問題可以及時采取預(yù)防性措施，降低故障發(fā)生的概率，提高系統(tǒng)的可靠性。>設(shè)備清潔：對相關(guān)設(shè)備進(jìn)行維護(hù)保潔工作，使設(shè)備保持良好的運(yùn)行狀態(tài)；機(jī)房環(huán)境服務(wù)是為機(jī)房設(shè)備如小型機(jī)、網(wǎng)絡(luò)設(shè)備安全可靠的物理環(huán)境，確保機(jī)房設(shè)備不會因?yàn)榄h(huán)境因素導(dǎo)致不能正常運(yùn)行或>確保機(jī)房溫度在24+2℃之間，最大溫度變化率不超過10℃/小時；>確保機(jī)房電壓在220V+5%之間，電壓頻率在壓不超過220V+/-15%,總諧波不高于5%;徑至少為3.5mm,系統(tǒng)接地電阻在電源插座連線與地線間不大于2歐姆，在電源輸出座連線與地線間電壓小于1V,在接地線的接地端測的接地電阻不大于1歐姆；>確保機(jī)房為網(wǎng)絡(luò)設(shè)備、空調(diào)、視頻等提供獨(dú)立的冗余雙電源供應(yīng)系統(tǒng)，杜絕電源公用現(xiàn)象，確保網(wǎng)絡(luò)設(shè)備電源無隱患；>確保機(jī)房整潔干凈，避免機(jī)房在陽光直射之下；>確保機(jī)房無線電雜波干擾低于0.5V/米；2.服務(wù)器、存儲、操作系統(tǒng)、數(shù)據(jù)庫、中間件巡檢及巡檢報(bào)告內(nèi)容針對服務(wù)器、存儲、操作系統(tǒng)、數(shù)據(jù)庫、中間件等比較重要的組件，數(shù)據(jù)中心制定了按月巡檢的計(jì)劃，需要按照巡檢報(bào)告的模板進(jìn)行檢查，巡檢報(bào)系統(tǒng)維護(hù)檔案，詳細(xì)記錄數(shù)據(jù)中心相關(guān)的設(shè)備信息和項(xiàng)目管理信息。在日常運(yùn)維中，服務(wù)報(bào)告和技術(shù)文檔由運(yùn)維團(tuán)隊(duì)的相關(guān)人員負(fù)責(zé)維護(hù)和更新。系統(tǒng)維護(hù)檔案將分為以下四個部分：3.7.2服務(wù)文檔3.7.3服務(wù)總結(jié)運(yùn)維團(tuán)隊(duì)根據(jù)自身的工作內(nèi)容，在每季度需要對自己的工作進(jìn)行匯總，并生成《季度運(yùn)維總結(jié)》。報(bào)告中的具體內(nèi)容包括：>故障處理及備件更換情況匯總；>設(shè)備狀況分析及評價；>人員出勤情況，工作量，或資源使用情況，包括第三方供應(yīng)商服務(wù)情況；>重大事件和變更情況；>配置管理相關(guān)信息；>趨勢信息；>下一步工作計(jì)劃；3.8運(yùn)行維護(hù)優(yōu)化評估(1)建立基于數(shù)據(jù)中心的基礎(chǔ)運(yùn)維服務(wù)管理框架體系及運(yùn)維團(tuán)隊(duì)，根據(jù)網(wǎng)絡(luò)的現(xiàn)狀提出整體安全規(guī)劃，包括日常維護(hù)計(jì)劃、安全風(fēng)險控制計(jì)劃、應(yīng)急響應(yīng)計(jì)劃等(2)提供風(fēng)險評估、災(zāi)難恢復(fù)、應(yīng)急響應(yīng)、安全培訓(xùn)服務(wù)并提供報(bào)告每季度定期對服務(wù)范圍內(nèi)的對網(wǎng)絡(luò)設(shè)備、服務(wù)器操作系統(tǒng)、數(shù)據(jù)庫系統(tǒng)、應(yīng)用軟件系統(tǒng)的安全策略和安全配置進(jìn)行檢查和測試，從中獲得相關(guān)的信息、發(fā)現(xiàn)系統(tǒng)面臨的威脅以及存在的安全性。每季度對服務(wù)范圍內(nèi)的整體網(wǎng)絡(luò)系統(tǒng)進(jìn)行全面、統(tǒng)一的系統(tǒng)性的安全風(fēng)險評估，識別和控制網(wǎng)絡(luò)中的關(guān)鍵資產(chǎn)及可能會產(chǎn)生的安全風(fēng)險，并對所發(fā)現(xiàn)的問題提供優(yōu)化、改進(jìn)建議。并根據(jù)評估的結(jié)果為關(guān)鍵資產(chǎn)建立應(yīng)急響應(yīng)預(yù)案以及細(xì)微調(diào)整其后安全維護(hù)服務(wù)所要監(jiān)控的內(nèi)容。根據(jù)安全評估的結(jié)果每半年對系統(tǒng)策略及網(wǎng)絡(luò)系統(tǒng)進(jìn)行優(yōu)化設(shè)計(jì)，制定調(diào)整系統(tǒng)策略優(yōu)化、網(wǎng)絡(luò)拓?fù)鋬?yōu)化、安全域規(guī)劃與配置、IP規(guī)劃、VLAN優(yōu)化等策略，并根據(jù)實(shí)際情況調(diào)整與實(shí)施。(6)應(yīng)急預(yù)案與演練根據(jù)數(shù)據(jù)中心的現(xiàn)狀，模擬實(shí)際災(zāi)難發(fā)生場景，提供各種應(yīng)急預(yù)案，經(jīng)過采購人討論，協(xié)助采購人實(shí)施演練。運(yùn)維服務(wù)期內(nèi)，安排以運(yùn)維管理、安全為主題的培訓(xùn)，數(shù)量為4~5人次，按要求制定相應(yīng)的培訓(xùn)計(jì)劃。(8)資料收集存檔參與機(jī)房運(yùn)維涉及的專業(yè)第三方機(jī)構(gòu)合同的起草、談判，與采購人一起對第三方機(jī)構(gòu)進(jìn)行管理。整理收集涉及到的第三方合同，中間文檔、過程記錄，備查，按照采購人規(guī)定進(jìn)行提交。3.9應(yīng)急保障措施和組織3.9.1應(yīng)急響應(yīng)系統(tǒng)運(yùn)維團(tuán)隊(duì)在處理緊急情況和重大事項(xiàng)時，會啟用應(yīng)急指揮系統(tǒng)：接口人：應(yīng)用系統(tǒng)下，各個相關(guān)方的固定接口人，一般為項(xiàng)目經(jīng)理運(yùn)維團(tuán)隊(duì)：事故發(fā)生期間提供直接的技術(shù)咨詢、指導(dǎo)服務(wù)，負(fù)責(zé)直接處理故二線專家：嚴(yán)重事件由承保的第三方服務(wù)商或原廠商的二線專家最快速度到達(dá)現(xiàn)場處理事故。a)應(yīng)急準(zhǔn)備階段的工作包括：組建應(yīng)急響應(yīng)組織，確定應(yīng)急響應(yīng)制度，系統(tǒng)性識別運(yùn)行維護(hù)服務(wù)對象及運(yùn)行維護(hù)活動中可能出現(xiàn)的風(fēng)險，定義應(yīng)急事件級別，制定預(yù)案，開展培訓(xùn)和演練；b)監(jiān)測與預(yù)警階段的工作包括：進(jìn)行日常監(jiān)測，及時發(fā)現(xiàn)應(yīng)急事件并有效預(yù)警，進(jìn)行核實(shí)和評估，以規(guī)定的策略和程序啟動預(yù)案，并保持對應(yīng)急事件的c)應(yīng)急處置階段的工作包括：采取必要的應(yīng)急調(diào)度手段，基于預(yù)案開展故障提供持續(xù)性服務(wù)保障，進(jìn)行結(jié)果評價，關(guān)閉事件；d)總結(jié)改進(jìn)階段的工作包括：對應(yīng)急事件發(fā)生原因、處理過程和結(jié)果進(jìn)行總結(jié)分析，持續(xù)改進(jìn)應(yīng)急工作，完善信息系統(tǒng)。3.9.3制定應(yīng)急保障預(yù)案及演練為了應(yīng)對業(yè)務(wù)系統(tǒng)可能出現(xiàn)的緊急故障，運(yùn)維團(tuán)隊(duì)將定期模擬故障演練服務(wù)。運(yùn)維團(tuán)隊(duì)有一套整體的應(yīng)急方案，以確保數(shù)據(jù)中心在系統(tǒng)發(fā)生突發(fā)事件或?yàn)?zāi)難情況下能夠迅速恢復(fù)IT服務(wù)，從而保證系統(tǒng)業(yè)務(wù)的持續(xù)運(yùn)行。根據(jù)普遍認(rèn)可的最佳實(shí)踐指導(dǎo)原則，IT應(yīng)急和IT災(zāi)難恢復(fù)的定義應(yīng)該是：“計(jì)算機(jī)系統(tǒng)災(zāi)難是指任何造成計(jì)算機(jī)系統(tǒng)不能處理業(yè)務(wù)的時間超過了可容忍程度的事故。應(yīng)急方案是指計(jì)算機(jī)系統(tǒng)災(zāi)難發(fā)生后，按照既定的應(yīng)急恢復(fù)方案在一定時間內(nèi)恢復(fù)系統(tǒng)運(yùn)行和業(yè)務(wù)處理的過程。”為了應(yīng)對生產(chǎn)系統(tǒng)可能出現(xiàn)的緊急故障(重大、嚴(yán)重故障),數(shù)據(jù)中心將從事前預(yù)防和事后處理兩個方面制定緊急故障應(yīng)處理預(yù)案。>應(yīng)急涉及到多個層面的配合，每方都需要指定專人負(fù)責(zé)在緊急故障發(fā)生時及時溝通>數(shù)據(jù)中心專家支持團(tuán)隊(duì)進(jìn)行系統(tǒng)風(fēng)險評估，提出系統(tǒng)整改建議，制定緊急故障應(yīng)急處理預(yù)案>進(jìn)行一定次數(shù)的實(shí)際演練，包括后備系統(tǒng)切換測試、備份數(shù)據(jù)還原測試>對流程進(jìn)行持續(xù)性跟蹤，系統(tǒng)出現(xiàn)變更后，重新評估流程的有效性>響應(yīng)時間：由工程師立即做出響應(yīng)>故障修復(fù)：由經(jīng)驗(yàn)豐富的專家支持團(tuán)隊(duì)提供專人支持，包括搭建測試環(huán)境、遠(yuǎn)程和現(xiàn)場故障診斷和排除；同時啟動緊急故障處理流程，按既定程序做應(yīng)急處理內(nèi)容補(bǔ)充說明1服務(wù)范圍急處理預(yù)案，并對預(yù)案進(jìn)行持續(xù)性改進(jìn)2服務(wù)時間緊急故障預(yù)案制定：雙方協(xié)商緊急故障處理：全年7×24小時3遠(yuǎn)程或現(xiàn)場4由數(shù)據(jù)中心負(fù)責(zé)人提出服務(wù)請求5緊急故障應(yīng)軟件介質(zhì)、安裝文檔、系統(tǒng)配置文檔完備，并由雙急處理流程涵蓋范圍方專人保管，隨時可以查閱有完善的數(shù)據(jù)恢復(fù)流程文檔6實(shí)際演練演練內(nèi)容包括：的順暢運(yùn)行業(yè)務(wù)替代演練：定期進(jìn)行冷備機(jī)啟動業(yè)務(wù)替代演的可用性所有測試和演練的結(jié)果應(yīng)當(dāng)依據(jù)事先確定好的標(biāo)準(zhǔn)，來判斷測試和演練在測試完成后應(yīng)記錄下結(jié)果，并根據(jù)需要對應(yīng)急恢復(fù)運(yùn)維服務(wù)事件管理系統(tǒng)是支撐運(yùn)維管理組織中各運(yùn)維角色按照規(guī)定的運(yùn)要支持運(yùn)維服務(wù)提供者按照商定的服務(wù)級別協(xié)議方便地向運(yùn)維服務(wù)使用者提供運(yùn)維服務(wù)；同時，要支持運(yùn)維服務(wù)管理者對整個運(yùn)維服務(wù)事件的考核、監(jiān)督和評估。運(yùn)維服務(wù)事件管理工具是構(gòu)成運(yùn)行管理體系不可缺少的元素，從被動管理向主動管理轉(zhuǎn)化的重要部分，為整個運(yùn)行管理體系的高效實(shí)施奠定監(jiān)控拓?fù)洚?dāng)前數(shù)據(jù)中心采用了某運(yùn)維監(jiān)控平臺，對數(shù)據(jù)中心設(shè)備進(jìn)行監(jiān)測。用戶通過客戶端登錄運(yùn)維監(jiān)控平臺，查看所有被監(jiān)控設(shè)備的運(yùn)行情況。當(dāng)前監(jiān)控平臺支持機(jī)房環(huán)境、網(wǎng)絡(luò)設(shè)備、存儲設(shè)備、服務(wù)器設(shè)備、系統(tǒng)和數(shù)據(jù)庫等組件的監(jiān)控，支持故障預(yù)警等服務(wù)。電視墻市局一級平臺服務(wù)器服務(wù)器服務(wù)器警坐席客戶端查詢終端磁整陣列磁商陣到網(wǎng)絡(luò)傳輸鏈路磁整陣列網(wǎng)絡(luò)傳輸鏈路流煤體服務(wù)器工作站視分屬二級平臺網(wǎng)絡(luò)傳輸鏈路下作站流碳體服務(wù)器工作站下作站派出所三級平臺聚字視頻服務(wù)卷派出所三級平臺派出所三級平臺數(shù)字視頻服務(wù)器派出所三級平臺器防水音柱拾音員報(bào)警枝鈕高速球機(jī)防水音柱報(bào)警按鈕高速球機(jī)拾!拾!器報(bào)警按鈕高速球機(jī)防水音柱拾音器報(bào)警按鈕高速球機(jī)防水音柱拾音器報(bào)警按鈕高速球機(jī)的木音其拾音縣報(bào)警校鈕重報(bào)警按鈕拾音景防水音桂拾音是報(bào)警按鈕高速球機(jī)主機(jī)監(jiān)控為確保數(shù)據(jù)中心服務(wù)器高速、穩(wěn)定運(yùn)轉(zhuǎn)，運(yùn)維監(jiān)控平臺從多個方面對主機(jī)服務(wù)器的硬件設(shè)備及操作系統(tǒng)進(jìn)行監(jiān)控管理和性能管理。它通過采集服務(wù)器的CPU、內(nèi)存、硬盤、網(wǎng)卡等硬件的關(guān)鍵運(yùn)行參數(shù)，以及軟件和應(yīng)用程序的進(jìn)程、服務(wù)、端口等的運(yùn)行狀況，對系統(tǒng)日志進(jìn)行分類掃描查詢。通過數(shù)據(jù)采集和分析，運(yùn)維監(jiān)控平臺能夠及時對影響用戶服務(wù)器運(yùn)行性能的故障事件發(fā)送報(bào)警，并采取相應(yīng)的故障處理措施，保證服務(wù)器的正常安全運(yùn)行。方式，方便不同用戶對服務(wù)器全面監(jiān)控的需求。運(yùn)維監(jiān)控平臺服務(wù)器主要監(jiān)測指標(biāo)如下包成功率(%)數(shù)據(jù)往返時間(ms)狀態(tài)值(200表示成功300表示出錯)CPU.使用率(%)列速度/次數(shù)每秒(次數(shù))處理器數(shù)量(個數(shù))內(nèi)存使用率(%)可用內(nèi)存量(M)總內(nèi)存空間(M)內(nèi)存使用率(%)內(nèi)存可用太小(M)總內(nèi)存量(M)Top-5CPU使用CPU使用率(%)cpuTop1-使用率(%)cpuTop2-使用率(%)cpuTop4-使用率(%)cpuTop5-使用率(%)Top-5虛擬內(nèi)存使用內(nèi)存總使用量(M)MemTop1-進(jìn)程名()MemTop1-內(nèi)存使用(M)MemTop2-進(jìn)程名()MemTop2-內(nèi)存使用(M)MemTop3-進(jìn)程名()MemTop3-內(nèi)存使用(M)MemTop4-進(jìn)程名()MemTop4-內(nèi)存使用(M)MemTop5-進(jìn)程名()Top5-物理內(nèi)存使用內(nèi)存總是用量(M)MemTop1-進(jìn)程名()MemTop1-物理內(nèi)存使用(M)MemTop2-進(jìn)程名()MemTop2-物理內(nèi)存使用(M)MemTop3-進(jìn)程名()MemTop3-物理內(nèi)存使用(M)MemTop4-進(jìn)程名()MemTop4-物理內(nèi)存使用(M)MemTop5-進(jìn)程名()MemTop5-物理內(nèi)存使用(M)Disk使用率(%)磁盤總量(MB)剩余突間(MB)賬戶個數(shù)()系統(tǒng)賬戶()匹配狀態(tài)()進(jìn)程總數(shù)(個)服務(wù)總數(shù)(個)網(wǎng)卡流曩接收流量(Kbit/s)接受流量百分比(%)發(fā)送流量(Kbit/s)發(fā)送流量百分比(%)接收包數(shù)(packets/s)發(fā)送包數(shù)(packets/s)端只平均響應(yīng)時間(ms)CPU.使用率(%)Linux服務(wù)器監(jiān)控Telnet非代理三大方式，方便不同用戶對服務(wù)器全面監(jiān)控的需求。運(yùn)維監(jiān)控平臺Linux服務(wù)器主要監(jiān)測指標(biāo)如下服務(wù)成功率(%)平均響應(yīng)時間(%)CPU使用率(%)Disk.使用率(%)剩余空間(MB)交換分區(qū)內(nèi)存使用率(%)可用內(nèi)存量(M)總內(nèi)存量(M)內(nèi)存指標(biāo)Memorx使用率(%)剩余空間(MB)錯誤頁/秒(頁/秒)內(nèi)存總量(MB)監(jiān)測Linux事件日志檢真的總行數(shù)(行)匹配行數(shù)(行)Linux進(jìn)程監(jiān)測運(yùn)行實(shí)例個數(shù)(個)端只平均響應(yīng)時間(ms)Top-5CPU使用cpuTop1-使用率(%)cpuTop2-使用率(%)cpuTop4-使用率(%)cpuTop5-使用率(%)Top-5虛擬內(nèi)存使用()內(nèi)存總使用量(M)MemTop1-進(jìn)程名()MemTop1-內(nèi)存使用(M)MemTop2-進(jìn)程名()MemTop2-內(nèi)存使用(M)MemTop3-進(jìn)程名()MemTop3-內(nèi)存使用(M)MemTop4-進(jìn)程名()MemTop4-內(nèi)存使用(M)MemTop5-進(jìn)程名()MemTop5-內(nèi)存使用(M)Top5-物理內(nèi)存使用內(nèi)存總晨用量(M)MemTop1-進(jìn)程名()MemTop1-物理內(nèi)存使用(M)MemTop2-進(jìn)程名()MemTop2-物理內(nèi)存使用(M)MemTop3-進(jìn)程名()MemTop3-物理內(nèi)存使用(M)MemTop4-進(jìn)程名()MemTop4-物理內(nèi)存使用(M)MemTop5-進(jìn)程名()MemTop5-物理內(nèi)存使用(M)運(yùn)維監(jiān)控平臺可以從各個方面對數(shù)據(jù)中心的網(wǎng)絡(luò)設(shè)備進(jìn)行監(jiān)測和管理，內(nèi)容包括網(wǎng)絡(luò)設(shè)備的可用性、設(shè)備性能、流量管理等等。運(yùn)維監(jiān)控平臺的網(wǎng)絡(luò)設(shè)備管理系統(tǒng)支持的網(wǎng)絡(luò)設(shè)備，包括各種類型的交換機(jī)、路由器、防火墻、VoIP網(wǎng)關(guān)設(shè)備和其他啟用了SNMP協(xié)議的網(wǎng)絡(luò)設(shè)備。運(yùn)維監(jiān)控平臺監(jiān)測對象主要包括網(wǎng)絡(luò)設(shè)備(路由器、交換機(jī)、防火墻)的狀態(tài)，如端口，路由器CPU負(fù)載等，支持Cisco、華為、港灣、Juniper等各主流廠家的路由器、交換機(jī)，支持Netscreen、Cisco、天融信等主流廠商的防火墻等網(wǎng)絡(luò)安全設(shè)備。>網(wǎng)絡(luò)設(shè)備監(jiān)控cpu使用率(5秒)(%)內(nèi)存內(nèi)存使用率(%)服務(wù)成功率(%)平均響應(yīng)時間(ms)設(shè)備運(yùn)行時間運(yùn)行時間()接只信息接收流量(kbit/s)發(fā)送流量(kbit/s)每秒發(fā)送數(shù)據(jù)包(個/s)每秒接收數(shù)據(jù)包