中國電信ChinaNet和CN網(wǎng)絡技術介紹

會計學1中國電信ChinaNet和CN網(wǎng)絡技術介紹ChinaNet介紹CN2介紹第1頁/共32頁ChinaNet網(wǎng)絡架構

ChinaNet骨干路由策略ChinaNet骨干規(guī)范ChinaNet骨干新技術應用4123第2頁/共32頁ChinaNet網(wǎng)絡架構

層次化結構

接入層逐漸扁平化網(wǎng)絡現(xiàn)狀網(wǎng)絡目標結構調(diào)整本地網(wǎng)接入接入模式本地網(wǎng)出入流量模型VNH應用提升類核心扁平化類核心鏈路組織第3頁/共32頁中國電信IP網(wǎng)絡架構現(xiàn)狀中國電信的IP網(wǎng)絡包括骨干網(wǎng)和城域網(wǎng)，骨干網(wǎng)分為ChinaNet和CN2兩個并行的、各自擁有獨立公有AS號的網(wǎng)絡。城域網(wǎng)和星級IDC各自擁有獨立的公有或私有AS號ChinaNet網(wǎng)絡定位于公共信息交換平臺，承載基本的互聯(lián)網(wǎng)接入業(yè)務CN2網(wǎng)絡定位于承載有QoS要求的業(yè)務和中國電信自身的關鍵業(yè)務，網(wǎng)絡基本覆蓋到各地市城域網(wǎng)統(tǒng)一承載各類業(yè)務，包括基本的互聯(lián)網(wǎng)接入業(yè)務、有QOS要求的業(yè)務及電信自營業(yè)務，同時上連ChinaNet和CN2IDC統(tǒng)一承載各類公眾業(yè)務和自營業(yè)務，同時上聯(lián)ChinaNet和CN2MCE網(wǎng)絡定位于承載中國電信自身的關鍵業(yè)務，如軟交換、IMS、移動數(shù)據(jù)增值業(yè)務、移動寬帶業(yè)務等，以地市為單位進行網(wǎng)絡部署，就近與CN2進行互聯(lián)分組域網(wǎng)絡定于承載中國電信的移動寬帶業(yè)務和移動數(shù)據(jù)增值業(yè)務，以省為單位進行部署城域網(wǎng)CN2境外運營商國內(nèi)其他運營商省內(nèi)國際ChinaNet省內(nèi)國際境外境內(nèi)境外運營商城域上聯(lián)17304

G網(wǎng)內(nèi)帶寬8370

G省際帶寬13970

G城域上聯(lián)1969

G互聯(lián)互通約450

G國際C-I440

G國際C-I80

G兩網(wǎng)互連140

GMCE分組域IDCIDC上聯(lián)3576GC網(wǎng)上聯(lián)364

GIDC上聯(lián)約80G第4頁/共32頁ChinaNet由核心、匯接兩個層次組成，實現(xiàn)結構扁平化核心層九個節(jié)點(北京、上海、廣州、南京、武漢、成都、天津、西安、杭州)全互連，其中京、滬、穗為國際出入節(jié)點和互聯(lián)互通節(jié)點匯接層在每省設置兩個匯接節(jié)點，上聯(lián)兩個或3個核心節(jié)點。各省接入層設備扁平化后，由城域網(wǎng)核心設備承擔，并直接上掛骨干匯接或者核心設備（北方部分省份還保留有省網(wǎng)核心同骨干匯接的背靠背結構）。2009年擴容后，ChinaNet省際總帶寬達到近13970G，國際出口帶寬440G，互聯(lián)互通帶寬450G互聯(lián)互通國際出口全互連核心核心核心核心匯接匯接1城域網(wǎng)核心層匯接層匯接2ChinaNet扁平化演進示意圖城域網(wǎng)核心匯接接入出口07年前163與城域網(wǎng)背靠背結構城域網(wǎng)核心匯接出口07-08年接入下放核心核心匯接城域網(wǎng)出口2008年后的結構城域網(wǎng)出口城域網(wǎng)核心匯接接入出口接入03年前163與省網(wǎng)匯接背靠背結構AS4134AS4134AS4134AS4134省網(wǎng)骨干網(wǎng)骨干網(wǎng)ChinaNet網(wǎng)絡現(xiàn)狀第5頁/共32頁目標網(wǎng)絡結構ChinaNet目標網(wǎng)絡結構以扁平化為主要特征，未來幾年內(nèi)全網(wǎng)形成15-20個核心節(jié)點，核心層根據(jù)流量流向形成網(wǎng)狀或半網(wǎng)狀連接業(yè)務大省直接互聯(lián)，省間流量優(yōu)先通過直連鏈路轉發(fā)，國際互聯(lián)以及業(yè)務較小省份出省流量仍通過核心層轉發(fā)超大型城域網(wǎng)，當?shù)侥硞€省的業(yè)務量達到一定程度時，可以考慮跨省上連到其他ChinaNet核心節(jié)點，對部分小型城域網(wǎng)可以考慮就近合并成適度規(guī)模的大中型城域網(wǎng)特點網(wǎng)絡扁平化，投資效益好，轉發(fā)效率高，擴展性強省際流量經(jīng)過骨干網(wǎng)統(tǒng)一轉發(fā)，便于集團統(tǒng)一管控，統(tǒng)一規(guī)劃建設同現(xiàn)網(wǎng)的發(fā)展思路一致，網(wǎng)絡繼承性相對較好開通方向基于流量以省間直達流量為主，對流量預測和帶寬規(guī)劃要求較高扁平化結構對設備匯聚轉發(fā)能力進一步提高要求，大容量多機框匯聚設備的能力決定了扁平化架構的基本結構單元，架構設計和設備能力需要在規(guī)劃中較好實現(xiàn)平衡ChinaNet的目標網(wǎng)絡結構第6頁/共32頁目標網(wǎng)絡模型核心層匯聚層接入層業(yè)務接入控制層城域骨干網(wǎng)BRASMANSRDSLAM園區(qū)交換機CN2SRCN2骨干網(wǎng)ChinaNet骨干網(wǎng)寬帶接入網(wǎng)匯聚交換機/MSTP/RPR(可級連)樓道交換機骨干網(wǎng)核心路由器(可級連)CPE銅纜五類線終端第7頁/共32頁ChinaNet網(wǎng)絡結構調(diào)整-網(wǎng)絡鏈路組織（1）中國電信CHINANET作為目前用戶規(guī)模和流量最大的網(wǎng)絡，基于整體業(yè)務發(fā)展演進需求，對網(wǎng)絡進行了邏輯分層調(diào)整，以適應業(yè)務發(fā)展的爆發(fā)性增長趨勢。以省為單位，機房編號分為A機房平面和B機房平面，設備編號對應為A1、A2、B1、B2；部分只有2臺設備的省份，設備編號對應為A1、B1整網(wǎng)形成4個鏈路組，同機房平面同鏈路組設備對之間互聯(lián)，鏈路聯(lián)接關系A1-A1、A2-A2、B1-B1、B2-B2；部分只有2臺設備的省份，鏈路聯(lián)接關系為A1-A1、A1-A2、B1-B1、B1-B2第8頁/共32頁ChinaNet網(wǎng)絡結構調(diào)整-網(wǎng)絡鏈路組織（2）有利于數(shù)據(jù)鏈路的規(guī)劃和維護提高擴展性。單方向由2組鏈路增到4組鏈路，同時充分利用ISIS等價鏈路數(shù)，同方向可提高到>32條10G鏈路進行分擔鏈路清晰，互連規(guī)范，降低升級擴容對網(wǎng)絡和業(yè)務的影響便于實施路由策略，有利于實現(xiàn)全網(wǎng)流量的負載均衡有利于實現(xiàn)省內(nèi)城域網(wǎng)均衡上連兩匯接節(jié)點基于CHINANET流量負荷實現(xiàn)業(yè)務保障CHINANET核心流量負荷要求是實現(xiàn)忙時電路均值<80%，同時不提供故障完全備份四核心分層方式在單組設備出現(xiàn)故障情況下，業(yè)務影響在25%以下，其他三組設備基本可以實現(xiàn)業(yè)務無阻基于工程建設期間，頻繁電路調(diào)整和設備維護，將影響范圍局限到最小，基本可實現(xiàn)建設工程對業(yè)務無明顯影響有利于傳輸和數(shù)據(jù)鏈路的協(xié)同組織劃分鏈路群組可實現(xiàn)同方向多種共用10G和40G的方式同組機房在同一傳輸系統(tǒng)下，減少城市內(nèi)傳輸中繼占用提升負載均衡能力可采用多種10G與40G混用方式

第9頁/共32頁ChinaNet－城域網(wǎng)出入流量的控制城域網(wǎng)入流量控制1.城域網(wǎng)的路由通過EBGP發(fā)布給骨干網(wǎng)D路由器后，經(jīng)由D路由器修改BGPnext-hop為本機router-id后發(fā)給一級RR2.一級RR通常會收到2條next-hop屬性分別為D1和D2的BGP路由，并選擇較小的那個地址發(fā)送給其他RR和Client路由器3.全網(wǎng)只看到router-id較小的D1所發(fā)布的城域網(wǎng)路由，有可能導致回城域網(wǎng)流量不均4.解決回城域網(wǎng)流量不均衡采用城域網(wǎng)發(fā)布不對稱路由或者采用VNH技術（虛擬下一跳、anycast路由）城域網(wǎng)出流量控制1.骨干網(wǎng)承載的全國路由通過D路由器EBGP發(fā)布至城域網(wǎng)核心，所有發(fā)布給城域網(wǎng)的BGP路由帶有骨干MED值，所帶MED值和骨干網(wǎng)BGP路由的到next-hop的igpmetric相對應。從而使城域網(wǎng)核心具備優(yōu)選最近出口的能力第10頁/共32頁ChinaNet（VNH）部署（1）1.BGP協(xié)議中RR在選路時針對同一Prefix只能選出一條最優(yōu)路由，在多個Peer發(fā)布同樣一條路由且其余屬性一致時，選擇BGProuter-id小的為最優(yōu)路由。2.I路由器能夠從A1/A2學到同樣的路由，但因為所有的屬性都一致，因此只選擇A1發(fā)布的路由為最優(yōu)（A1loopback地址?。㊣A1A2城域網(wǎng)城域網(wǎng)//省網(wǎng)省網(wǎng)IA1A2城域網(wǎng)城域網(wǎng)//省網(wǎng)省網(wǎng)城域網(wǎng)城域網(wǎng)//省網(wǎng)省網(wǎng)第11頁/共32頁ChinaNetVNH部署（2）VNH（虛擬下一跳）的原理：1.A1/A2將從省網(wǎng)或者城域網(wǎng)收到的eBGP路由向RR發(fā)布時，將Next-Hop更改為一個VR的地址（VR為虛擬設備）2.并將VR的地址重新分布進IGP中，這樣I設備看到城域網(wǎng)或者省網(wǎng)的路由的下一跳為VR3.根據(jù)IGP負載均衡，I到VR有兩條路徑，分別到A1和A2，這樣I到城域網(wǎng)或者省網(wǎng)的流量就會分別送到A1、A2第12頁/共32頁路由概況ISISBGP控制策略ChinaNet骨干路由策略第13頁/共32頁IGP采用ISIS協(xié)議作為中國電信ChinaNet骨干的IGP協(xié)議ISIS協(xié)議主要承載中國電信ChinaNet骨干設備路由，BGP下一跳路由ISIS協(xié)議不承載ChinaNet用戶路由及業(yè)務路由ChinaNet骨干設備共同工作在ISISLevel2ChinaNet骨干ISISMertic設置決定了骨干的流量模型第14頁/共32頁BGP采用BGP協(xié)議承載所有的用戶路由，業(yè)務路由，ChinaNet骨干采用AS4134與其它運營商交換ChinaNet路由北京、上海、廣州三個節(jié)點的國際出入口路由器和國內(nèi)互聯(lián)互通路由器與國際和國內(nèi)運營商之間采用EBGP互聯(lián)扁平化完成后，ChinaNet骨干只存在一級RR，負責向全網(wǎng)反射BGP路由，一級RR維持全網(wǎng)的三個Cluster結構，北京片區(qū)RR：BJ-BJ-XD-G-1.163，SN-XA-XHM-G-1.163；上海片區(qū)RR：SH-SH-WS-G-1.163，JS-NJ-GL-G-1.163；廣州片區(qū)RR：GD-GZ-TH-G-1.163，HB-WH-BFL-G-1.163；匯接層以上路由器和都作為一級RR的Client，與本片區(qū)的兩個路由反射器建立IBGP的鄰居關系；BGP路由在相同的層面實現(xiàn)同步，在核心C層面實現(xiàn)全球路由的同步，在匯接D層面實現(xiàn)全國路由的同步ChinaNet骨干設備與本地網(wǎng)之間通過eBGP交換用戶路由與業(yè)務路由第15頁/共32頁接入策略通過eBGP協(xié)議交換路由信息城域網(wǎng)向骨干設備應發(fā)送相同路由骨干接收本地網(wǎng)路由接入前綴數(shù)限制大型城域網(wǎng)Max5000普通城域網(wǎng)Max2000公有AS路由通過as-path匹配方式進行控制私有AS路由由本地網(wǎng)向骨干發(fā)布路由時進行控制骨干對本地網(wǎng)路由community進行重新設定骨干向本地網(wǎng)發(fā)送路由缺省路由、缺省路由+國內(nèi)路由設置MED為骨干ISISMetric第16頁/共32頁ChinaNet骨干規(guī)范ISIS規(guī)范BGP規(guī)范Community規(guī)范策略命名第17頁/共32頁10GEWAN捆綁MPLSTEIPv6ChinaNet骨干新技術應用第18頁/共32頁ChinaNet網(wǎng)絡部分新技術的應用不等速電路的混用方案針對10G/40G電路或10G/2.5G電路混用解決目前路由技術無法實現(xiàn)的端到端不同電路帶寬混用情況下的流量分配問題骨干已完成捆綁，MPLSTE兩種技術的現(xiàn)網(wǎng)測試10GEWAN技術在傳統(tǒng)DWDM傳輸上的承載目前10GEWAN技術已經(jīng)成熟，主流廠商已經(jīng)實現(xiàn)其在傳統(tǒng)傳輸電路的承載對比POS接口可以大幅度降低整體投資骨干已完成10GEWAN技術的現(xiàn)網(wǎng)測試IPV6技術在現(xiàn)網(wǎng)的承載能力中國電信目標在CHINANET采用雙棧方式實現(xiàn)IPV4/V6的共同承載，在CN2采用雙棧＋6VPE方式實現(xiàn)共同承載目前已經(jīng)完成江蘇、湖南開展城域網(wǎng)內(nèi)的業(yè)務測試和網(wǎng)絡測試，骨干承載測試正在進行第19頁/共32頁ChinaNet介紹CN2介紹第20頁/共32頁CN2承載網(wǎng)架構

CN2網(wǎng)絡概況基于IP/MPLS技術的大容量多業(yè)務融合承載網(wǎng)ChinatelecomNext-generationConvergencyNetWorkCNCNCN2ChinaNetCN1CN3maybe第21頁/共32頁CN2承載網(wǎng)架構

CN2網(wǎng)絡概況CN2網(wǎng)絡業(yè)務定位提供的關鍵盈利品牌類業(yè)務具有SLA保證的贏利業(yè)務能夠同時支持語音、數(shù)據(jù)、視頻、專線等業(yè)務的統(tǒng)一核心承載平臺承載中國電信自身關鍵贏利業(yè)務和具有QoS保證的SLA業(yè)務網(wǎng)絡規(guī)劃與設計需要保證CN2的可控和可管理、充分考慮目前已經(jīng)出現(xiàn)的業(yè)務、并適當考慮未來的應用中國電信提供的大客戶和商業(yè)客戶的VPN業(yè)務，專線接入業(yè)務中國電信3G、NGN語音業(yè)務PSTN網(wǎng)絡長途語音業(yè)務（VoIP）由中國電信VIP-ICP提供的各類互聯(lián)網(wǎng)增值業(yè)務中國電信、VIP-ICP提供的VOIP等業(yè)務VIP-ICP提供的視頻類業(yè)務中國電信、VIP-ICP提供的流媒體等業(yè)務游戲業(yè)務中國電信提供的視訊會議、可視電話等視頻類業(yè)務第22頁/共32頁CN2承載網(wǎng)架構

CN2網(wǎng)絡概況IGP收斂時間小于1s，達到設計目標BGP收斂時間與BGP路由規(guī)模有關系，收斂時間遠大于IGPMPLS收斂時間小于1s，基本達到設計目標快速重路由收斂時間小于50ms，達到設計目標區(qū)域平均單向時延最大單向時延對傳輸要求

(最大時延)單向抖動單向丟包率區(qū)域1（不含北方9省、新疆、西藏）<=30ms<=45ms<=30ms<=1ms<=0.05%區(qū)域2（全部大陸）<=37.5ms<=60ms<=45ms<=1ms<=0.05%（注：此為初驗基線測試結論，結果是達到設計目標）QOS分級能力、QOS帶寬保證網(wǎng)絡擁塞情況下轉發(fā)性能基本上達到設計目標網(wǎng)絡轉發(fā)性能網(wǎng)絡可用性指標QOS指標第23頁/共32頁CN2承載網(wǎng)架構

CN2網(wǎng)絡概況組播指標組播組數(shù)600，達到設計目標對于直掛CN2的終端和組播源，從發(fā)送Join消息到接收相應組播內(nèi)容時間差不超過2s，達到設計目標組播頻道切換時間小于1s，達到設計目標CN2全網(wǎng)能實現(xiàn)組播負載分擔，達到設計目標

VPN指標全網(wǎng)實現(xiàn)MPLS和VPN正常功能，實現(xiàn)optionA和B兩種跨域VPN，達到設計目標單機支持500個VPN，15萬VPN路由，達到設計目標

NTP全網(wǎng)時間同步NTP部署誤差小于20ms，達到設計目標第24頁/共32頁CN2承載網(wǎng)架構

結構設計

12泰州/宿遷等13地市合肥宣城/蚌埠/巢湖等17地市舟山/麗水/衢州/湖州/臺州/紹興/金華/嘉興/溫州/寧波124536廣州南京杭州浙江江蘇安徽安徽跨省匯聚到南京江蘇本地網(wǎng)絡直接匯聚到南京和上海核心路由器核心節(jié)點內(nèi)部簡化層次PPE

PPEPE

PPEPE24536上海PE1PE直接連接核心路由器第25頁/共32頁CN2承載網(wǎng)架構

結構設計CN2與ChinaNet互聯(lián)第26頁/共32頁CN2承載網(wǎng)架構

RR設計RR設計VPNRR和GlobalRR是各自獨立的GlobaliBGPandVPNiBGP都采用增加并列的RR組來實現(xiàn)路由容量的擴展性iBGP采用一級路由反射器結構，并分為兩組：VPNRRforRFC2547-basedVPNservice(VRR)GlobalRRforglobalinternetrouting(GRR)第27頁/共32頁CN2整個骨干網(wǎng)是一個自治域(包括核心、匯接、邊緣、PE和海外POP點)。CN2海外POP點與ChinaNet海外POP點相連時采用BGP-4；北京、上海、廣州三個節(jié)點與ChinaNet互連互通時采用BGP-4；CN2骨干網(wǎng)與有自治域的城域網(wǎng)互聯(lián)也采用BGP-4。在CN2骨干網(wǎng)中使用IS-IS作為IGP，核心層和匯接層以及其它設備統(tǒng)一運行在IS-IS的Level2骨干區(qū)域。BGPv4作為EGP；CN2所有骨干路由器均運行ISIS和BGP。CN2骨干路由器（C3及以上）的管理地址和互聯(lián)中繼地址的路由由IGP承載；其他路由（包括ChinaNet、城域網(wǎng)、IDC、專線