企業(yè)云平臺運維管理標準規(guī)范

1、企業(yè)云平臺建設落地方案運維管理標準規(guī)范EMC Consulting云平臺調研評估分析云平臺架構設計方案服務器現狀評估分析存儲現狀評估分析備份現狀評估分析運維現狀評估分析應用現狀評估分析存儲選型存儲容量計算與擴容以太網絡光纖網絡存儲及備份云平臺落地實施方案入云流程圖入云原則應用評級資源池規(guī)劃服務器配置規(guī)劃虛擬機部署規(guī)劃資源交付矩陣集群架構規(guī)劃網絡規(guī)劃千兆網絡規(guī)劃設計萬兆網絡規(guī)劃設計存儲規(guī)劃業(yè)務遷移規(guī)劃賬戶安全防病毒服務器選型云平臺運維章節(jié)虛擬化平臺性能指標定義vCOPs運維維管理實施交付說明書網絡現狀評估分析技術點目錄指引C優(yōu)化與維護管理標準規(guī)范定義指定標準一定，規(guī)范運維管理平臺完善及優(yōu)化A調研

2、分析評估階段詳細環(huán)境評估調研收集建設支撐數據信息采集、分析制定項目方向完善詳細架構設計詳細的標準原則完備實施方案設計、細化的實施流程細節(jié)及標準P架構設計搭建實施方案設計搭建D業(yè)務遷移多樣性的業(yè)務遷移策略制定標準的遷移流程云平臺建設落地方法論（PDCA循環(huán)）云平臺建設落地篇目錄第三部分企業(yè)云平臺建設落地方案監(jiān)控建議、性能監(jiān)控指標建立監(jiān)控運維平臺運維管理概要標準規(guī)范定義摘 要第五章節(jié)優(yōu)化與維護管理與標準規(guī)范定義虛擬化平臺建設方案-平臺運維監(jiān)控建議業(yè)務遷移方案篇監(jiān)控指標建立定義常規(guī)類硬件及平臺事件及處理流程人工手動定期發(fā)現自動工具發(fā)現安裝流程處理規(guī)范解決事件問題定義事件發(fā)現事件處理事件總結事件處理后

3、總結形成運維運維經驗定義事件針對平臺硬件根據不同廠家的硬件特性及技術特點制定梳理事件目錄針對虛擬化平臺定制事件目錄及事件處理指引包括：性能及故障類對象：單元組件 集群 主機 網絡 存儲 虛擬機 云平臺監(jiān)控運維事件管理體系規(guī)劃目標：通過完善的運維體系解決平臺事件問題ITIL發(fā)現事件人工手動發(fā)現：針對平臺硬件制定巡檢監(jiān)控制度每天-進行硬件巡檢及狀態(tài)監(jiān)控每月-總結硬件故障報告每年-統(tǒng)計故障率實現主動預測針對平臺通過vCOPs進行定期的報告查看，進行預警分析自動化工具：通過定義事件與郵件系統(tǒng)和短信平臺對接，實現事件立即出發(fā)告知事件監(jiān)控平臺-告警平臺處理事件按照事件解決指引進行處理處理方式：內部運維知識

4、庫的技術指導硬件廠家技術支持軟件廠家技術支持代理商技術支持總結事件事件的處理總結，形成企業(yè)內部知識庫，完善事件定義、發(fā)現、處理，進一步提升整體運維能力，及平臺穩(wěn)定性虛擬化平臺建設方案-性能監(jiān)控指標定義業(yè)務遷移方案篇監(jiān)控指標建立集群處理器利用率 集群內存利用率虛擬化層監(jiān)控定義項：Cluster 集群集群CPU利用率百分比較高CPU分配資源較高監(jiān)控項描述級別閥值=90%=80%=75%=90%=80%=75%響應處理告警閥值告警閥值集群內存利用率百分比較高內存分配資源較高A級警告B級警告C級警告A級警告B級警告C級警告當天處理，立即平衡資源規(guī)劃資源，調整分配需要關注資源分配情況當天處理，立即平衡資

5、源規(guī)劃資源，調整分配需要關注資源分配情況虛擬化平臺建設方案-性能監(jiān)控指標定義業(yè)務遷移方案篇監(jiān)控指標建立主機處理器利用率主機內存利用率虛擬化層監(jiān)控定義項：平臺操作系統(tǒng)ESXI主機CPU利用率百分比較高CPU分配資源較高監(jiān)控項描述級別閥值=90%=80%=75%=90%=80%=75%響應處理告警閥值告警閥值主機內存利用率百分比較高內存分配資源較高A級警告B級警告C級警告A級警告B級警告C級警告當天處理，立即平衡資源規(guī)劃資源，調整分配需要關注資源分配情況當天處理，立即平衡資源規(guī)劃資源，調整分配需要關注資源分配情況主機內存交換VMkernel 級別的 交換監(jiān)控告警閥值出現即觸發(fā)B級警告查看內存使用情

6、況避免過多內存分配存儲路徑最長的滯后時間=100ms=50ms=20ms告警閥值 監(jiān)控所有存儲路徑（主機HBA卡）最長的滯后時間，包含了讀寫A級警告B級警告C級警告當天處理，立即平衡資源規(guī)劃資源，調整分配需要關注資源分配情況虛擬化平臺建設方案-性能監(jiān)控指標定義業(yè)務遷移方案篇監(jiān)控指標建立數據存儲使用率讀、寫延時虛擬化層監(jiān)控定義項：數據存儲Datastore數據存儲容量使用率較高監(jiān)控項描述級別閥值=90%=80%=75%響應處理告警閥值告警閥值Datastore I/O每秒延時A級警告B級警告C級警告A級警告B級警告C級警告當天處理，立即平衡資源規(guī)劃資源，調整分配需要關注資源分配情況立即解決，調整

7、存儲性能立即解決，調整存儲性能忽略峰值，關注性能瓶頸=100ms=50ms=20ms虛擬化平臺建設方案-性能監(jiān)控指標定義業(yè)務遷移方案篇監(jiān)控指標建立主機網絡丟包虛擬化層監(jiān)控定義項：網絡主機ESXI網絡NIC卡的丟包數量監(jiān)控項描述級別閥值響應處理告警閥值B級警告檢查網絡,協商速率或異常問題0出現即觸發(fā)虛擬化平臺建設方案-性能監(jiān)控指標定義業(yè)務遷移方案篇監(jiān)控指標建立虛擬機處理器利用率虛擬機內存利用率虛擬化層監(jiān)控定義項：虛擬機VM虛擬機CPU利用率超出使用預期，出現性能瓶頸監(jiān)控項描述級別閥值響應處理告警閥值告警閥值虛擬機內存利用率超出使用預期，出現性能瓶頸A級警告B級警告C級警告A級警告B級警告C級警告

8、當天處理，立即平衡資源規(guī)劃資源，調整分配需要關注資源分配情況當天處理，立即平衡資源規(guī)劃資源，調整分配需要關注資源分配情況=90%=80%=75%=90%=80%=75%虛擬機處理器就緒 基于單顆VCPU Ready time 告警閥值虛擬機CPU處于就緒過長B級警告C級警告減少vCPU分配擴展服務里服務器資源確認CPU利用率情況參考DRS運行建議手動均衡VM=1000ms OR 5%（每20秒）=2000ms OR 10%（每20秒）虛擬化平臺建設方案-監(jiān)控管理vCenter Operations Management 健康指標、風險預估、效能vCenter Operations Manage

9、ment運維管理方案篇監(jiān)控運維平臺虛擬化平臺建設方案-監(jiān)控管理!ProblemMaintenance性能低下確認根源糾正措施當前利用率容量回收保證和恢復服務級別優(yōu)化效益和成本未來需求檢測隔離修復分析預測優(yōu)化虛擬化全面可見vCenter Operations Management我們用來做什么業(yè)務遷移方案篇監(jiān)控運維平臺虛擬化平臺建設方案-監(jiān)控管理部署模型建議/selfservice/microsites/search.do?language=en_US&cmd=displayKC&externalId=2057607 業(yè)務遷移方案篇監(jiān)控運維平臺Small較小規(guī)模環(huán)境VM規(guī)模：1500臺環(huán)境指標總

10、條目：600000vAPP CPU：4vAPP MEN：16GUI CPU：2UI MEN：7GAnalytics CPU：2 Analytics MEN：9GAnalytics VM IOPS：1500Disk storage：900GMedium中型規(guī)模環(huán)境VM規(guī)模：3000臺環(huán)境指標總條目：1100000vAPP CPU：8vAPP MEN：25GUI CPU：4UI MEN1：11GAnalytics CPU：4 Analytics MEN：14GAnalytics VM IOPS：3000Disk storage：1.8TLarge較小規(guī)模環(huán)境VM規(guī)模：6000臺環(huán)境指標總條目：25

11、00000vAPP CPU：16vAPP MEN：34GUI CPU：8UI MEN：13GAnalytics CPU：8 Analytics MEN：21GAnalytics VM IOPS：6000Disk storage：3.6T虛擬化平臺建設方案-監(jiān)控管理vCenter Operations Management工作負載：分數越低，說明對象的健康性越好異常：分數值越低，問題越?。▍⒖細v史指標范圍）故障：故障的分值越高，故障嚴重性越高綠色對應分數=76-100（正常范圍，需要了解原因）黃色對應分數=51-75（存在一般問題，需要關注解決）橙色對應分數=26-50（存在嚴重問題，需要立即解

12、決）紅色對應分數=1-25（無法正常運行，需要立即解決）提供基礎架構的運行狀態(tài)通過工作負載、異常、故障3個指標并結合VMware內置函數算法進行綜合打分 工作負載：分數越低，說明對象的健康性越好異常：分數值越低，問題越小（參考歷史指標范圍） 故障：故障的分值越高，故障嚴重性越高虛擬化平臺建設方案-監(jiān)控管理vCenter Operations Management工作負載：分數越低，說明對象的健康性越好工作負載綠色:對象的工作負載未過量（正常范圍，需要了解原因）黃色:對象的某些資源工作負載較高（需要關注解決）橙色:對象上工作負載正在接近容量極限（需要立即解決）紅色:對象的工作負載等于或超過容量極

13、限（無法正常運行）虛擬化平臺建設方案-監(jiān)控管理vCenter Operations Management異常綠色:正常范圍黃色:異常超出正常范圍（需要關注解決）橙色:出現異常情況（需要立即解決）紅色:出現嚴重異常（需要立即解決）異常：分數值越低，問題越小（參考歷史指標范圍）虛擬化平臺建設方案-監(jiān)控管理vCenter Operations Management故障綠色:未出現故障黃色:對象上有重要性較低錯誤（需要關注解決）橙色:對象上有較高重要性故障（需要盡快解決）紅色:對象上有重要性嚴重的故障（需要立即解決）故障：故障的分值越高，故障嚴重性越高虛擬化平臺建設方案-監(jiān)控管理vCenter Ope

14、rations Management工作負載：分數越低，說明對象的健康性越好異常：分數值越低，問題越小（參考歷史指標范圍）故障：故障的分值越高，故障嚴重性越高提供基礎架構的運行狀態(tài)目前環(huán)境可能存在的潛在問題通過剩余時間、剩余容量、壓力綜合計算的得分計算剩余時間：預計30天內顯示對象資源耗盡之前剩余的時間長度剩余容量：表示對象接近耗盡的資源策劃那個度及承載的VM數量壓力：根據歷史壓力負載評測壓力越低，表示資源環(huán)境壓力較低綠色對應分數= 1-25 （正常范圍，需要了解原因）黃色對應分數= 26-50 （存在一般問題，需要關注解決）橙色對應分數= 51-75 （存在一般問題，需要立即解決）紅色對應分

15、數= 76-100 （存在嚴重問題，需要立即解決）虛擬化平臺建設方案-監(jiān)控管理vCenter Operations Management剩余時間：預計30天內顯示對象資源耗盡之前剩余的時間長度剩余時間綠色:剩余天數遠高于評分緩沖區(qū)（無需任何關注）黃色:剩余天數高于評分緩沖區(qū)，但低于指定緩沖區(qū)2倍(檢查并采取操作)橙色:剩余天數高于評分緩沖區(qū)，但接近所指定緩沖區(qū)（需要盡快解決）紅色:剩余天數低于指定評分緩沖區(qū)對象可能已經用盡部分資源或即將用盡（需要立即解決）虛擬化平臺建設方案-監(jiān)控管理vCenter Operations Management剩余容量：表示對象接近耗盡的資源策劃那個度及承載的VM

16、數量剩余容量綠色:剩余容量處于正常級別（無需任何關注）黃色:剩余容量低于正常級別 (檢查并采取操作)橙色:剩余容量嚴重偏低（需要盡快解決）紅色:剩余容量將耗盡或已經耗盡（需要立即解決）虛擬化平臺建設方案-監(jiān)控管理vCenter Operations Management壓力：根據歷史壓力負載評測壓力越低，表示資源環(huán)境壓力較低壓力綠色:正常無壓力（無需任何關注）黃色:對象資源不足以滿足需求 (檢查并采取操作)橙色:對象定期會出現資源短缺（需要盡快解決）紅色:對象大部分資源經常不滿足（需要立即解決）虛擬化平臺建設方案-監(jiān)控管理vCenter Operations Management工作負載：分數

17、越低，說明對象的健康性越好異常：分數值越低，問題越?。▍⒖細v史指標范圍）故障：故障的分值越高，故障嚴重性越高可回收廢棄資源通過vCPU、內存、磁盤進行分析建議可回收那些資源密度虛擬機與主機數量之比 虛擬CPU 與物理 CPU 數量之比 虛擬內存與物理內存量之比提供基礎架構的效率預估及資源收回目前環(huán)境需要優(yōu)化的建議通過可回收的廢棄資源、密度綜合計算的得分計算綠色對應分數=76-100（正常范圍，需要了解原因）黃色對應分數=51-75（存在一般問題，需要關注解決）橙色對應分數=26-50（存在一般問題，需要立即解決）紅色對應分數=1-25（存在嚴重問題，需要立即解決）虛擬化平臺建設方案-監(jiān)控管理v

18、Center Operations Management可回收廢棄資源通過vCPU、內存、磁盤進行分析建議可回收那些資源可回收廢棄資源綠色:對象無資源浪費情況（無需任何關注）黃色:某些資源可以更充分利用 (檢查并采取操作)橙色:許多資源未充分利用（可以規(guī)劃利用）紅色:資源極大浪費（需要規(guī)劃利用，避免浪費資源）虛擬化平臺建設方案-監(jiān)控管理vCenter Operations Management密度虛擬機與主機數量之比 虛擬CPU 與物理 CPU 數量之比 虛擬內存與物理內存量之比密度綠色:資源整合比良好（無需任何關注）黃色:某些資源未完全整合 (關注并計劃平衡資源)橙色:多數資源的整合率低（規(guī)劃平衡資源）紅色:資源整合比非常低（平衡資源避免資源浪費）虛擬化平臺建設方案-監(jiān)控管理vCenter Operations Management Report報告編號 報告名稱描述采集周期建議備注1虛擬機容量概覽報告容量現狀和趨勢預測、分析，利用率趨勢每周2容量清單和優(yōu)化