網(wǎng)絡故障案例手冊簿Ver0

1、網(wǎng)絡故障案例手冊Ver 1.0w m u.cilicncsvcdgc.coHi目錄 TOC o 1-5 h z HYPERLINK l bookmark0 o Current Document 案例編號201302084交換機硬件故陣弓I起網(wǎng)絡中斷4典型癥狀4其它現(xiàn)玫4處暨方法4案例具體原因4擴展6 HYPERLINK l bookmark2 o Current Document 案例編號201306046癥狀6處;&方法6處;H結果8擴展8 HYPERLINK l bookmark16 o Current Document 案例編號201306149癥狀9處暨方法9處;H結果9擴展9 HYP

2、ERLINK l bookmark18 o Current Document 案例編號2013101611癥狀11處理方法11w m u.cilicncsvcdgc.coHi處貿(mào)結杲11擴展11w m M.cilicncsvcdgc.coHi案例編& 20130208交換機硬件故障弓I起網(wǎng) 絡中斷興起癥狀在交換機log中出現(xiàn)如下信息%SW_MATM-4-MACFLAP_NOTIF:Host 68b5.99cd.d276 in vlan 8 is flapping between port GiO/33 and port Po2;交換機在線檢查各項參數(shù)未見異常，交換機重啟后報錯，無法加載I0S;

3、其它現(xiàn)豪交機機載高，網(wǎng)絡延遲大，網(wǎng)絡丟包。處Jt方法交換機離線與網(wǎng)絡隔離，與故障交換機連接的服務器切換到備用交換 機中。如不確認弓I起此故障的具體交換機，可將交換機與主網(wǎng)絡逐一隔離。案例具體原因管理網(wǎng)絡端口 Port-ASIC芯片自檢Fail。以下為故障交換機啟動自檢全過程Logfront_end/ (directory)w m u.cilicncsvcdgc.coHiend/tejype_l (34760 bytes)PortASIC CAM Subsystem Tests : Be(HTD POST: Basic Test FailedPOST: PortASIC CAM Subsyste

4、m Tests : End. Status FailedPOST Failed: disabling stack links and shutting down SDP driver class subsystem initialization tai*Mar 1 00:00:35.66& %SYS-3-LOGGER_FLUSHING: System pausing to ensure constdebugging output.Mar00:00:35.66&Assertiontailed:1DE66F4 1A2F5C8 1w m u.cilicncsvcdgc.coHi% Software-

5、forced reload擴展弓I起 Host Flapping不只上述情況，大家可參考下面的文檔：cisco/en/US/products/hw/switches/ps4324/products_tech_note09186a008063c36f.shtml案例鑰號20130604互聯(lián)網(wǎng)用戶訪問交易網(wǎng)關延遲大有客戶反映通過互聯(lián)網(wǎng)連接CTP電借網(wǎng)關交易延遲大。處置方法檢查網(wǎng)絡線路的連通性及模擬客戶發(fā)起Ping值測試，并與其它期貨公司 的網(wǎng)絡延遲做對比。主要做了兩種比較一是測試同一線路的不同網(wǎng)關的延遲情況，發(fā)現(xiàn)CTP電借網(wǎng)關相對其它網(wǎng)關延遲略大些，但在可接受圍。通過與其它家期貨公司的交易網(wǎng)關做比

6、較，發(fā)現(xiàn)我司的互耳關網(wǎng)延遲確通過檢查，確認我方網(wǎng)絡設備負載和帶寬流呈并沒有超出基準值。根據(jù)客戶的網(wǎng)絡迫蹤情況發(fā)現(xiàn)有幾跳延遲大，初步判斷問題可能發(fā)現(xiàn) 在互耳關網(wǎng)的傳輸節(jié)點上。w m u.cilicncsvcdgc.coHi為進一步明確問題，我們聯(lián)絡了線路供應商數(shù)訊。要求其分析數(shù)據(jù),數(shù)據(jù)通過分析認為未見明顯問題，提出建議解決方案。為升級用戶側（即我端）接入光端機的固件，并給出了升級計劃。我們同您了其您 見。并在升級前后做了數(shù)據(jù)包的迫蹤對比，結果如下：升級前： C2 lJ 於3：UsersAdninistratortracert 203.110.179.220畫過最多30個旺點跟蹤，至| 17.22

7、0.DSNEI 20317丫22BJ 的路由：134ms1亳秒升級后：w m M.cilicncsvcdgc.coHiC： XUserssAdministratoptracert 203.110.179.220通過最多30個躍點跟蹤到 179.220DSNET (202.179.2201 的路由:121*ms518nsns19毫秒 192.168.1.1ns116.247.96.1693*38me11ns124.74.97.944ms3ms2ms12474547?54ms8ns9ns124 ?4 209.2564ms4ns4ns1162472嘰5761ms8ns13me2226825384ms

8、4ns3ns61.152.81.69979ns4ns5ns61.152.81.13810*請求超時。116ms5ns5ins208丄53DSNET211 1.44208：L53】12*5ms5ms208134DSNET2 144.208.134139ms9ns10ms179.220.DSNET203.110.179.22011414ms10ms10ms179.220.DSNET203.110.179.2201518ms9ms10IDS179.220.DSNET203 .JL1.8.JL79.220161Rms9ms9ms179.220DSNFTr2R2.l1fi17922R1G rllcq.y

9、、Cc ；0*9*小.、可以看到從11跳開始，12跳之后延遲有了較明顯的減小。通過進一步確認，從11跳開始數(shù)據(jù)包才進入數(shù)訊網(wǎng)絡，得到了網(wǎng)絡優(yōu)化。擴艮網(wǎng)絡調優(yōu)是需多方介入和合作的具有挑戰(zhàn)性的技術難題，因為網(wǎng)絡延 遲和不合乎客戶預期是最為直接的反映，也是客戶最直接的感受。因 此遇到問題應多芹度分析問題.不再局限于本公司的網(wǎng)絡以至，從總 體上把握，配合好服務商，協(xié)作處理。w m u.cilicncsvcdgc.coHi案例編號20130614仿真交易軟件登錄一金就報超時癥狀有客戶反映通過互耳關網(wǎng)連接仿真交易網(wǎng)關沒過幾分鐘就報超時錯誤， 需要重新登陸。處置方法在自己電腦上登陸，確有相囘現(xiàn)象，客戶反映無

10、誤。檢查網(wǎng)絡線路的 連通性及模擬客戶發(fā)起Ping包測試，發(fā)現(xiàn)時有丟包現(xiàn)象。于是檢查 防火墻，CPU,存使用率都正常，線路也無中斷，連接此防火墻的其 他應用都正常，懷疑是該服務器本身受到攻擊或者網(wǎng)卡故障。登陸該 服務器檢查，發(fā)現(xiàn)該服務器啟用了兩塊網(wǎng)卡，且都配置了網(wǎng)關，導致 網(wǎng)紹故障。處置結臬刪除新増的網(wǎng)關后故障解決。擴展對于雙網(wǎng)卡的服務器，不能配魚兩個網(wǎng)關，建議一個網(wǎng)卡配置網(wǎng)關， 令一個配宜靜態(tài)路由。例如要添加去往10.12.10.0/24網(wǎng)段，網(wǎng)關是10.12.10.1, Windows中添加靜態(tài)路由的命令是:w m u.cilicncsvcdgc.coHi route add 10.12.1

11、0.0 mask 255.255.255.0 10.12.10.1 -p 注您最后要加 -p參數(shù)，確保重啟后路由依舊有效。案例編號20131016弟二套CTP交換機硬件故陣w m u.cilicncsvcdgc.coHi癥狀OP網(wǎng)管軟件報警顯示SWX-B-DIR 這臺交換機輪詢三次無應答，連 接該交換機的服務器ip無法ping通。處置方法在自己電腦上telnet和ping該交換機均無反應，于是拿好筆記本和相 關工具進機房現(xiàn)場查看。發(fā)現(xiàn)該交換機為加電狀態(tài)，但是除電源指示 燈外，網(wǎng)絡指示燈和狀態(tài)指示燈都為滅，用console線連接后也無任 訶反應。于是重啟該交換機，重啟多次后設備仍然工作異常，于是在 機