FusionCubeHANA一體機(jī)日常維護(hù)及故障處理

1、1會(huì)計(jì)學(xué)FusionCubeHANA一體機(jī)日常維護(hù)及故一體機(jī)日常維護(hù)及故障處理障處理1.1. FusionCube HANAFusionCube HANA一體機(jī)日常維護(hù)一體機(jī)日常維護(hù)三板斧三板斧2.2. HANAHANA一體機(jī)配置郵件告警一體機(jī)配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計(jì)算資源占用情況統(tǒng)計(jì)與分析計(jì)算資源占用情況統(tǒng)計(jì)與分析7.7. 網(wǎng)絡(luò)故障如何網(wǎng)絡(luò)故障如何處理處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)9.9. 系統(tǒng)搬遷時(shí)如何全局下電

2、上電系統(tǒng)系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時(shí)網(wǎng)絡(luò)規(guī)劃變更時(shí)IPIP變更操作變更操作三板斧三板斧1：查看：查看FusionManager的的Portal看是否有告警：看是否有告警：FusionManager的的Portal整合了所有日常巡檢內(nèi)容，包括硬件、網(wǎng)絡(luò)、軟件、存儲(chǔ)等。整合了所有日常巡檢內(nèi)容，包括硬件、網(wǎng)絡(luò)、軟件、存儲(chǔ)等。三板斧三板斧2：查看資源占用曲線變化情況：查看資源占用曲線變化情況：簡(jiǎn)單對(duì)比連續(xù)簡(jiǎn)單對(duì)比連續(xù)2天天CPU占用曲線，如有明顯變化說明可能有故障或變更：占用曲線，如有明顯變化說明可能有故障或變更：三板斧三板斧3： 查看查看HANA節(jié)點(diǎn)的目錄空間占用情況：節(jié)

3、點(diǎn)的目錄空間占用情況：HANA節(jié)點(diǎn)的節(jié)點(diǎn)的SHARE卷、卷、LOG卷、卷、DATA卷和備份目錄空間占用不在卷和備份目錄空間占用不在FusionManager監(jiān)控范圍內(nèi)：監(jiān)控范圍內(nèi)：1.1. FusionCube HANAFusionCube HANA一體機(jī)日常維護(hù)三板斧一體機(jī)日常維護(hù)三板斧2.2. HANAHANA一體機(jī)配置郵件告警一體機(jī)配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計(jì)算資源占用情況統(tǒng)計(jì)與分析計(jì)算資源占用情況統(tǒng)計(jì)與分析7.7. 網(wǎng)絡(luò)故障如何網(wǎng)絡(luò)故障如何處理處理8.8.

4、操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)9.9. 系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時(shí)網(wǎng)絡(luò)規(guī)劃變更時(shí)IPIP變更操作變更操作可配置告警郵件發(fā)送，產(chǎn)生告警時(shí)郵件提醒：1.1. FusionCube HANAFusionCube HANA一體機(jī)日常維護(hù)三板斧一體機(jī)日常維護(hù)三板斧2.2. HANAHANA一體機(jī)配置郵件告警一體機(jī)配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計(jì)算資源占用情況統(tǒng)計(jì)與分析計(jì)算資源占用情況統(tǒng)計(jì)

5、與分析7.7. 網(wǎng)絡(luò)故障如何處理網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)9.9. 系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時(shí)網(wǎng)絡(luò)規(guī)劃變更時(shí)IPIP變更操作變更操作通過通過FMFM檢查檢查FusionCube HANA FusionCube HANA 一體機(jī)告警一體機(jī)告警綜合健康評(píng)分告警級(jí)別和數(shù)量1、點(diǎn)擊頂菜單“監(jiān)控”菜單查看具體告警列表。2、點(diǎn)擊告警右側(cè)放大鏡按鈕查看告警具體內(nèi)容。1.1. FusionCube HANAFusionCube HANA一體機(jī)日常維護(hù)三板斧一體機(jī)日常維護(hù)三板斧2.2. H

6、ANAHANA一體機(jī)配置郵件告警一體機(jī)配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計(jì)算資源占用情況統(tǒng)計(jì)與分析計(jì)算資源占用情況統(tǒng)計(jì)與分析7.7. 網(wǎng)絡(luò)故障如何處理網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)9.9. 系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時(shí)網(wǎng)絡(luò)規(guī)劃變更時(shí)IPIP變更操作變更操作內(nèi)存ECC校驗(yàn)糾正是一種常見現(xiàn)象，太陽黑子爆、經(jīng)過機(jī)箱的人身上帶靜電發(fā)等因素都可能讓內(nèi)存短時(shí)間內(nèi)產(chǎn)生多次

7、ECC校驗(yàn)糾正。該類告警閾值為24小時(shí)內(nèi)單根內(nèi)存1000次ECC校驗(yàn)糾正，如超過該閾值則產(chǎn)生告警，如低于1000次告警自動(dòng)解除。因此遇到該告警首先等待24小時(shí)看告警是否消失排除偶然外因影響。如持續(xù)很長(zhǎng)時(shí)間不消失則建議更換內(nèi)存。首先記錄下告警的服務(wù)器名稱和內(nèi)存槽位號(hào)，本例為E9000_1_2_03和DIMM620。E9000_1_2_03表示1機(jī)柜2框03槽位。點(diǎn)擊頂菜單的“資源”，再點(diǎn)擊側(cè)菜單的“設(shè)備”菜單。點(diǎn)擊左側(cè)菜單的服務(wù)器菜單，在右側(cè)工作區(qū)點(diǎn)擊告警中的服務(wù)器名稱。記錄下故障節(jié)點(diǎn)的Hostname和登陸IPSSH登陸該節(jié)點(diǎn)：查看Linux操作系統(tǒng)通用的硬件日志/var/log/mcelog

8、文件，可以看到內(nèi)存錯(cuò)誤發(fā)生的相關(guān)記錄。在更換內(nèi)存前線利用HANA的HA特性，將該節(jié)點(diǎn)設(shè)置為Standby節(jié)點(diǎn)，而后關(guān)閉操作系統(tǒng)。在Portal上點(diǎn)擊查看詳細(xì)信息，彈出窗口中點(diǎn)擊左側(cè)安裝部署菜單，找到機(jī)框SMM板的IP地址。遠(yuǎn)程登陸管理虛擬機(jī)桌面，網(wǎng)頁瀏覽器中輸入SMM板地址并登陸SMM硬件管理界面：點(diǎn)擊告警中槽位刀片，點(diǎn)擊制造信息，抄下Board Serial Number并聯(lián)系華為獲得新內(nèi)存。點(diǎn)擊告警中槽位刀片，并點(diǎn)亮UID指示燈，機(jī)房中刀片的定位燈會(huì)亮起，方便更換內(nèi)存人員找到故障內(nèi)存刀片。1.1. FusionCube HANAFusionCube HANA一體機(jī)日常維護(hù)三板斧一體機(jī)日常維

9、護(hù)三板斧2.2. HANAHANA一體機(jī)配置郵件告警一體機(jī)配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計(jì)算資源占用情況統(tǒng)計(jì)與分析計(jì)算資源占用情況統(tǒng)計(jì)與分析7.7. 網(wǎng)絡(luò)故障如何處理網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)9.9. 系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時(shí)網(wǎng)絡(luò)規(guī)劃變更時(shí)IPIP變更操作變更操作點(diǎn)擊告警放大鏡，記錄好服務(wù)器IP地址和磁盤槽位號(hào)：登陸任意該套一體機(jī)的HANA節(jié)點(diǎn)，

10、用dsware用戶SSH到告警中的IP。在/var/log/dsware目錄下找到告警發(fā)生時(shí)間段的日志壓縮包，可以解壓縮查看或發(fā)送給華為工程人員定位：可以通過HOSTNAME得知硬盤故障節(jié)點(diǎn)的信息：Storage003_0_1_2_16，后三位代表1機(jī)柜2機(jī)框16槽位。點(diǎn)擊頂菜單中的“資源”，選擇“設(shè)備”，點(diǎn)擊“FusionStorage”，進(jìn)入到具體資源池中。點(diǎn)擊磁盤管理按鈕點(diǎn)擊磁盤管理按鈕?？梢圆榭吹礁婢疘P所在服務(wù)器的硬盤被踢出集群。遠(yuǎn)程登陸管理虛擬機(jī)桌面，網(wǎng)頁瀏覽器中輸入SMM板地址并登陸SMM硬件管理界面，點(diǎn)擊UID指示燈為ON，機(jī)房中的對(duì)應(yīng)刀片會(huì)亮起藍(lán)燈，方便更換硬盤人員找到。故障

11、硬盤被替換后，會(huì)自動(dòng)加入集群并進(jìn)行數(shù)據(jù)冗余重分配，不必做額外操作。1.1. FusionCube HANAFusionCube HANA一體機(jī)日常維護(hù)三板斧一體機(jī)日常維護(hù)三板斧2.2. HANAHANA一體機(jī)配置郵件告警一體機(jī)配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計(jì)算資源占用情況統(tǒng)計(jì)與分析計(jì)算資源占用情況統(tǒng)計(jì)與分析7.7. 網(wǎng)絡(luò)故障如何處理網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)9.9. 系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)系統(tǒng)搬遷時(shí)

12、如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時(shí)網(wǎng)絡(luò)規(guī)劃變更時(shí)IPIP變更操作變更操作點(diǎn)擊頂菜單“資源”，選擇設(shè)備中的“FusionStorage”，選擇具體FSM后，點(diǎn)擊性能統(tǒng)計(jì)。如何查看資源占用統(tǒng)計(jì)曲線左邊的IP地址是內(nèi)部管理IP，該IP可查詢各HANA節(jié)點(diǎn)的Bond0的IP進(jìn)行節(jié)點(diǎn)對(duì)應(yīng)。右側(cè)選擇時(shí)間區(qū)域和統(tǒng)計(jì)項(xiàng)，點(diǎn)擊統(tǒng)計(jì)即可查看資源曲線，點(diǎn)擊導(dǎo)出可以保存。如何查看資源占用統(tǒng)計(jì)曲線1.1. FusionCube HANAFusionCube HANA一體機(jī)日常維護(hù)三板斧一體機(jī)日常維護(hù)三板斧2.2.HANAHANA一體機(jī)配置郵件告警一體機(jī)配置郵件告警3.3.FusionCubeFusionCu

13、be告警查看告警查看4.4.內(nèi)存故障處理內(nèi)存故障處理5.5.磁盤故障處理磁盤故障處理6.6. 計(jì)算資源占用情況統(tǒng)計(jì)與分析計(jì)算資源占用情況統(tǒng)計(jì)與分析7.7. 刀片網(wǎng)絡(luò)故障如何處理刀片網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)9.9.系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)10.10. 網(wǎng)絡(luò)規(guī)劃變更時(shí)網(wǎng)絡(luò)規(guī)劃變更時(shí)IPIP變更操作變更操作遠(yuǎn)程登陸管理虛擬機(jī)桌面，網(wǎng)頁瀏覽器中輸入SMM板地址并登陸，點(diǎn)擊中轉(zhuǎn)KVM登陸：刀片網(wǎng)絡(luò)故障如何處理1.1. FusionCube HANAFusionCube HANA一體機(jī)日常維護(hù)三板斧一體機(jī)

14、日常維護(hù)三板斧2.2. HANAHANA一體機(jī)配置郵件告警一體機(jī)配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計(jì)算資源占用情況統(tǒng)計(jì)與分析計(jì)算資源占用情況統(tǒng)計(jì)與分析7.7. 刀片網(wǎng)絡(luò)故障如何處理刀片網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)9.9. 系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時(shí)網(wǎng)絡(luò)規(guī)劃變更時(shí)IPIP變更操作變更操作點(diǎn)擊刀片槽位號(hào)，即可遠(yuǎn)程BMC方式管理刀片，點(diǎn)擊右側(cè)電源按鈕，即可對(duì)刀

15、片進(jìn)行上電、下電、重啟等操作。刀片網(wǎng)絡(luò)不通如何查看1.1. FusionCube HANAFusionCube HANA一體機(jī)日常維護(hù)三板斧一體機(jī)日常維護(hù)三板斧2.2.HANAHANA一體機(jī)配置郵件告警一體機(jī)配置郵件告警3.3.FusionCubeFusionCube告警查看告警查看4.4.內(nèi)存故障處理內(nèi)存故障處理5.5.磁盤故障處理磁盤故障處理6.6. 計(jì)算資源占用情況統(tǒng)計(jì)與分析計(jì)算資源占用情況統(tǒng)計(jì)與分析7.7. 刀片網(wǎng)絡(luò)故障如何處理刀片網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)9.9. 系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)系統(tǒng)搬遷時(shí)如何全局下電上電

16、系統(tǒng)10.10. 網(wǎng)絡(luò)規(guī)劃變更時(shí)網(wǎng)絡(luò)規(guī)劃變更時(shí)IPIP變更操作變更操作關(guān)閉HANA的所有業(yè)務(wù)后，點(diǎn)擊頂菜單“資源”，選擇“設(shè)備”，“服務(wù)器”，點(diǎn)擊右側(cè)的全部下電按鈕。系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)待搬遷完成后，只上電管理刀片，10分鐘左右后管理虛擬機(jī)啟動(dòng)完成，F(xiàn)usionManager的Portal可以登陸，此時(shí)可能有網(wǎng)絡(luò)不通等告警不必理會(huì)，點(diǎn)擊頂菜單“資源”，選擇“設(shè)備”，“服務(wù)器”，點(diǎn)擊右側(cè)的全部上電按鈕。HANA節(jié)點(diǎn)內(nèi)存很大，可能自檢時(shí)間長(zhǎng)達(dá)30分鐘左右，請(qǐng)耐心等待任務(wù)完成。系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)1.1. FusionCube HANAFusionCube HANA一體機(jī)日常維護(hù)

17、三板斧一體機(jī)日常維護(hù)三板斧2.2. HANAHANA一體機(jī)配置郵件告警一體機(jī)配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計(jì)算資源占用情況統(tǒng)計(jì)與分析計(jì)算資源占用情況統(tǒng)計(jì)與分析7.7. 刀片網(wǎng)絡(luò)故障如何處理刀片網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)9.9. 系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)系統(tǒng)搬遷時(shí)如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時(shí)網(wǎng)絡(luò)規(guī)劃變更時(shí)IPIP變更操作變更操作管理網(wǎng)絡(luò)變更：點(diǎn)擊頂菜單“系統(tǒng)”，選擇系統(tǒng)管理子網(wǎng)，按照需

18、要進(jìn)行網(wǎng)絡(luò)IP變更，等待10分鐘左右變更完成。網(wǎng)絡(luò)規(guī)劃變更時(shí)IP變更操作HANA業(yè)務(wù)，備份網(wǎng)絡(luò)IP變更：點(diǎn)擊頂菜單“資源”，選擇“設(shè)備”，“服務(wù)器”，選擇要變更IP的右側(cè)下三角踩點(diǎn)，選擇修改主機(jī)業(yè)務(wù)IP，彈出對(duì)話框修改IP地址后點(diǎn)“確定?！本W(wǎng)絡(luò)規(guī)劃變更時(shí)IP變更操作SSH登陸該節(jié)點(diǎn)：查看Linux操作系統(tǒng)通用的硬件日志/var/log/mcelog文件，可以看到內(nèi)存錯(cuò)誤發(fā)生的相關(guān)記錄。在更換內(nèi)存前線利用HANA的HA特性，將該節(jié)點(diǎn)設(shè)置為Standby節(jié)點(diǎn)，而后關(guān)閉操作系統(tǒng)。點(diǎn)擊告警中槽位刀片，并點(diǎn)亮UID指示燈，機(jī)房中刀片的定位燈會(huì)亮起，方便更換內(nèi)存人員找到故障內(nèi)存刀片。1.1. FusionCube HANAFusionCube HANA一體機(jī)日常維護(hù)三板斧一體機(jī)日常維護(hù)三板斧2.2. HANAHANA一體機(jī)配置郵件告警一體機(jī)配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計(jì)算資源占用情況統(tǒng)計(jì)與分析計(jì)算資源占用情況統(tǒng)計(jì)與分析7.7. 網(wǎng)絡(luò)故障如何處理網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)操作系統(tǒng)掛死無法登陸如何重啟節(jié)點(diǎn)9.9