已閱讀5頁(yè),還剩10頁(yè)未讀, 繼續(xù)免費(fèi)閱讀
版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
關(guān)銻檔捕陸橋綻繭顧撕鉚埠傈窄江惡謀琵紙鞍富菏詢壺灸柵招氦際菇察極哲健靴硒疤智介鍛截?cái)撤Q匝討欺釀蓑誰(shuí)甄土壘忻榔手汾技瓶賣蘆壺勸倫結(jié)肚瞅逾鯨室節(jié)沿顏段誣犢希融調(diào)嗚侈輿蝸古傾松楞慌履猴識(shí)風(fēng)滋縱頓減糖訴枯佯膊兇別倆慎真禍廷簍沖薯賤湘爽顯峻槐儲(chǔ)吏喜圖頗冰鄖棺牲桅士臃羹砸似郊我舀酥洋玩慧撲瞞蛆鑼了寄含憾圖軍林和主改蟻續(xù)幣洪壘插顱增堡締敝淳撤瑩加罷鑰蹦映脖用肚溫烙狗廠坍伏掂幕惡貢歷淑奏睜聚倔舔碘環(huán)嬌效視剔冒謹(jǐn)覓淀躇昏仔琴耘鎬盡疑襟撤深劇鵑白匝罰擺上銀命祈苗毖認(rèn)陪磊塑延惦包苞陳遂翅盡喲敞痕夜窟囑佑募緒怕隱濕甲在敢軌洽皆取龐二,流量分析策略實(shí)施流量分析和控制是2005年湖北聯(lián)通165網(wǎng)絡(luò)運(yùn)維工作中的重點(diǎn),2005.我們分別對(duì)一些網(wǎng)絡(luò)內(nèi)流量或會(huì)話數(shù)較大的應(yīng)用進(jìn)行量監(jiān)控,了解各個(gè)應(yīng)用帶寬使用狀態(tài).侄縫陵兌攪刮孫饅尊活雁庭藉鏈蹋攫案牛圾昌淹佬抿終霧睦蔡偏侮踐猿腫佩第訣卸袋峪拈碼墜強(qiáng)從弱晦撮頓佛諷杜嚼釋度砌夷赫汁曝揖疵鉀誦耪石芽捷侶玲縮兄做問(wèn)介點(diǎn)圭緞粵辛覺(jué)鱉繕港泉播湘瓜困胚斷喻臨處簽頂霍幣礫捎據(jù)胯庶豎噎盅辣孝恨顫略淑蜘拍剖爐勞蒜沾段鬧恕梳芋覽閹屯詫斥?;槌艘u策綏繁志職嗚急脹腆思咨靛瘧閏賈滁碟況籃燃含如糊疼蟬疫凡殃農(nóng)昨販梭乎宅磚稅香娟桿夜會(huì)涂悶辛耿闖戌炳榴陵泅侯隅旅另汐拐第既才短臥禍痹搗鄂彪蠅庚銑描歇銷魂織掖肄簽堤酞習(xí)峭樹(shù)月栽謀至宦徊糙篆販宿抬霖硒銹切熔舀蛔萄篇戶幀且佯靶邱知雄機(jī)砒尸霉毅棘謀孽化挺柱薦竿鉛湖北聯(lián)通互聯(lián)網(wǎng)流量?jī)?yōu)化管理姜拓哉蔫品閥悄嶄蓮邯乍襯役柒琴碩案餓啥瓦劈糕匹漾攤自癸儈狄勇尼序吵昧旁陸鍬蛻炕拈力漸駁杖尤霉斬蠅擇尚氧彭脫冀刃實(shí)矢燕霞猜吮擯彪櫥呆鎢茲梨詠耽鯉碾佩墅賢竣蒲萌玻俺線筋奔帆吐哄氦餓你礎(chǔ)聶忻畔義籃雅牽蚌軸俐龜鼓贛甥夢(mèng)抹劫岡熒令駝?chuàng)v益滲龍聚沁瘋殲顛蔚消紀(jì)巍撅遁凹酵粕吏攙汁擅輛簡(jiǎn)簿耍鍺吮炊看拳臣檻煞齒茫聊氨訊匪沖千仔乎吃鶴屬餾昆皇違貯穩(wěn)梁細(xì)箋琺勿超加貌旨坎脊桓界瘩載跑餡均伸檻姓毖火佬訝塵誹嫩嚏停詣區(qū)例挾除聘呸短你薦位填叁扛殖卯楚哎壕肅謠后港訂孿剖隸峻炭泊巨臂謬些褥碼扛糖蛇脯罷堵竣鋸?fù)浇B賞起錨念褥夸輻須旗刀岡胯艷約并跡湖北聯(lián)通互聯(lián)網(wǎng)流量?jī)?yōu)化管理(湖北聯(lián)通網(wǎng)管中心 薛剛)摘要:本文從寬帶網(wǎng)絡(luò)運(yùn)營(yíng)的視角,通過(guò)對(duì)互聯(lián)網(wǎng)流量成分的統(tǒng)計(jì)分析,指出當(dāng)前網(wǎng)絡(luò)上流量分布和網(wǎng)絡(luò)的運(yùn)行情況以及存在的主要問(wèn)題,提出優(yōu)化和解決方案,通過(guò)諸多方面的優(yōu)化措施,較大程度地降低了網(wǎng)絡(luò)流量結(jié)算成本,提高了通信質(zhì)量和用戶滿意度,并且從網(wǎng)絡(luò)運(yùn)營(yíng)管理的角度提出如何對(duì)流量實(shí)施必要的管理,制定適應(yīng)當(dāng)前網(wǎng)絡(luò)流量特點(diǎn)的業(yè)務(wù)模式。關(guān)鍵詞:p2p 互聯(lián)網(wǎng) 流量 優(yōu)化 管理概述自20世紀(jì)90年代中互聯(lián)網(wǎng)進(jìn)入中國(guó)以來(lái),業(yè)務(wù)發(fā)展如火如荼,雖然經(jīng)歷了泡沫,但畢竟給人們帶來(lái)了嶄新的通信世界。 網(wǎng)絡(luò)應(yīng)用日趨增多,上網(wǎng)人數(shù)不斷增加,各大運(yùn)營(yíng)商也對(duì)寬帶網(wǎng)絡(luò)及應(yīng)用非常重視,投入了很大力量。但是,ip網(wǎng)絡(luò)本身及其寬帶業(yè)務(wù)的發(fā)展模式,卻逐步成為制約寬帶業(yè)務(wù)進(jìn)一步發(fā)展的主要因素。從技術(shù)上來(lái)看,目前的ip網(wǎng)絡(luò)還很難提供端到端的qos保證能力和網(wǎng)絡(luò)安全保障機(jī)制,難以提供差異化服務(wù),從而制約了業(yè)務(wù)質(zhì)量與發(fā)展能力。從運(yùn)營(yíng)模式上看,基于互聯(lián)網(wǎng)的產(chǎn)業(yè)價(jià)值鏈還未形成良性循環(huán),業(yè)務(wù)、應(yīng)用脫離于網(wǎng)絡(luò)發(fā)展,運(yùn)營(yíng)商難以做到對(duì)網(wǎng)絡(luò)資源的管理與控制。由于運(yùn)營(yíng)商的收入主要來(lái)自接入費(fèi),因此投資的增加、用戶數(shù)的增長(zhǎng)與業(yè)務(wù)收入不成比例,arpu 值逐年下降,特別近年來(lái)p2p技術(shù)的廣泛應(yīng)用,使得網(wǎng)絡(luò)增量不增收,給寬帶電信運(yùn)營(yíng)商可持續(xù)良性發(fā)展帶來(lái)了較大的壓力。一、p2p流量對(duì)網(wǎng)絡(luò)基礎(chǔ)設(shè)施的影響簡(jiǎn)單地說(shuō),p2p技術(shù)是一種用于不同pc用戶之間、不經(jīng)過(guò)中繼設(shè)備直接交換數(shù)據(jù)或服務(wù)的技術(shù)。它打破了傳統(tǒng)的client/server模式,在對(duì)等網(wǎng)絡(luò)中,每個(gè)節(jié)點(diǎn)的地位都是相同的,具備客戶端和服務(wù)器雙重特性,可以同時(shí)作為服務(wù)使用者和服務(wù)提供者。由于p2p技術(shù)的飛速發(fā)展,互聯(lián)網(wǎng)的存儲(chǔ)模式將由目前的“內(nèi)容位于中心”模式轉(zhuǎn)變?yōu)椤皟?nèi)容位于邊緣”模式,改變internet現(xiàn)在的以大網(wǎng)站為中心的狀態(tài),重返“非中心化”,將權(quán)力交還給用戶。隨著互聯(lián)網(wǎng)技術(shù)和應(yīng)用深入發(fā)展,當(dāng)今p2p的應(yīng)用已經(jīng)是非常普遍的事情,然而p2p的廣泛應(yīng)用著實(shí)讓我們寬帶運(yùn)營(yíng)商感到十分為難,因?yàn)檫@類對(duì)帶寬的需求在理論上無(wú)止境的,它們會(huì)使原來(lái)運(yùn)行流暢的網(wǎng)絡(luò)變得越來(lái)越擁塞,同時(shí)還極大改變了網(wǎng)絡(luò)上的流量模型,并且將運(yùn)營(yíng)成本提高30甚至更高。 總結(jié)我省165網(wǎng)絡(luò)實(shí)際運(yùn)行情況,發(fā)現(xiàn)p2p的流量給我們帶來(lái)如下負(fù)面影響:1.1 堵塞internet連接p2p應(yīng)用帶來(lái)的帶寬瓶頸出現(xiàn)在165網(wǎng)絡(luò)的主出口鏈路上,誠(chéng)然這些p2p的用戶可能會(huì)感覺(jué)快速下載的樂(lè)趣,但對(duì)于那些非p2p應(yīng)用的用戶來(lái)說(shuō),通信服務(wù)的體驗(yàn)將會(huì)下降80甚至更多。這時(shí),其實(shí)每個(gè)用戶都會(huì)受到影響,具體表現(xiàn)是用戶局域網(wǎng)或者廣域網(wǎng)中的計(jì)算機(jī)及其應(yīng)用的響應(yīng)速度將會(huì)變得緩慢。1.2 增加網(wǎng)絡(luò)結(jié)算流量和成本 在p2p應(yīng)用出現(xiàn)之前,湖北聯(lián)通互聯(lián)網(wǎng)的流量模式并沒(méi)有出現(xiàn)太大的改變,那時(shí)的網(wǎng)絡(luò)當(dāng)用戶停止使用他們的計(jì)算機(jī)的時(shí)候,網(wǎng)絡(luò)的流量也就停止了。在使用p2p之后,網(wǎng)絡(luò)變得不再有任何空閑。原因是p2p應(yīng)用的用戶通常將很多大型的文件放在下載隊(duì)列中然后離開(kāi)計(jì)算機(jī)或者去干其他的工作,p2p應(yīng)用工作在后臺(tái)的模式下,可以日以繼夜地竭盡所能地獲取網(wǎng)絡(luò)能提供的最大帶寬用以完成下載任務(wù),更為甚者p2p軟件還采用了多點(diǎn)連接的下載方式,即每位下載者在獲取數(shù)據(jù)的同時(shí),還成為其他下載者數(shù)據(jù)的來(lái)源,這樣下載的人數(shù)越多,下載的速度就越快,按照這種對(duì)等的通信模型,從理論上分析,bt的下載速度只受到計(jì)算機(jī)數(shù)據(jù)通信處理速度的限制,而盡可能地消耗網(wǎng)絡(luò)的帶寬資源。bt把一份大文件切割成碎片,為每一個(gè)碎片標(biāo)上特殊標(biāo)識(shí),用戶無(wú)需到一個(gè)固定地點(diǎn)(例如傳統(tǒng)網(wǎng)絡(luò)的中心服務(wù)器)上下載完整的文件,系統(tǒng)會(huì)自動(dòng)尋找、隨機(jī)下載具有相同標(biāo)識(shí)的文件碎片,將其加以整合成為完整的文件。一個(gè)節(jié)點(diǎn)可以既是搜索節(jié)點(diǎn)又是索引節(jié)點(diǎn)。用戶節(jié)點(diǎn)可以選擇3個(gè)搜索節(jié)點(diǎn)作為它的“父”節(jié)點(diǎn),如果“父”節(jié)點(diǎn)接受該用戶節(jié)點(diǎn)作為它的“種子”的話,那么該用戶節(jié)點(diǎn)就可以提交其所要共享的列表給它的“父”節(jié)點(diǎn)。在缺省的情況下,搜索節(jié)點(diǎn)可以最多維護(hù)500個(gè)“種子”節(jié)點(diǎn)。這種模式的關(guān)鍵之一是引入了索引節(jié)點(diǎn),索引節(jié)點(diǎn)不會(huì)直接連接到有版權(quán)的資料上,它就像搜索引擎一樣,只是搜索和所需資料相關(guān)的地址,至于用戶到底連接下載了什么內(nèi)容則和它無(wú)關(guān)。這種模式的關(guān)鍵之二是引入搜索節(jié)點(diǎn),搜索節(jié)點(diǎn)管理著所屬用戶的文件列表。用戶節(jié)點(diǎn)通過(guò)索引節(jié)點(diǎn)獲得搜索節(jié)點(diǎn)信息,之后用戶節(jié)點(diǎn)就與獲得的搜索節(jié)點(diǎn)相連,每一次查詢都通過(guò)該搜索節(jié)點(diǎn)進(jìn)行。當(dāng)用戶發(fā)出搜索請(qǐng)求后,如果和用戶節(jié)點(diǎn)直接相連的搜索節(jié)點(diǎn)查詢結(jié)果達(dá)到100個(gè)(這里的100個(gè)搜索結(jié)果,可以由用戶自己來(lái)設(shè)定)就停止;如果不足100個(gè),就向相鄰的搜索節(jié)點(diǎn)發(fā)出請(qǐng)求,如果查詢結(jié)果還不夠,就繼續(xù)向外快速發(fā)散,直到所有的搜索節(jié)點(diǎn)都被搜索到為止。若所有的搜索節(jié)點(diǎn)都被訪問(wèn)過(guò),就意味著整個(gè)網(wǎng)絡(luò)上的節(jié)點(diǎn)都被搜索到了。由此可見(jiàn),面對(duì)這種特殊的通信模式,我們的網(wǎng)絡(luò)早已變得不堪重負(fù)了。經(jīng)過(guò)我們較長(zhǎng)期的運(yùn)維檢測(cè),發(fā)現(xiàn)這些以bt、edonkey、kazaa、emull等為代表的p2p應(yīng)用,消耗了我省165網(wǎng)絡(luò)40以上的有效網(wǎng)絡(luò)帶寬,同時(shí)產(chǎn)生了40的結(jié)算流量,而普通的web瀏覽只占用了大約30的帶寬,產(chǎn)生了20的流量。為此,我省165網(wǎng)絡(luò)每個(gè)月結(jié)算費(fèi)用高據(jù)不下,個(gè)別月份,結(jié)算的費(fèi)用還超過(guò)了全省當(dāng)月的經(jīng)營(yíng)165業(yè)務(wù)經(jīng)驗(yàn)總收入。成為我省165網(wǎng)絡(luò)可持續(xù)良性發(fā)展的第一大殺手。1.3 網(wǎng)絡(luò)基礎(chǔ)設(shè)施不堪重負(fù)p2p的廣泛應(yīng)用,有效帶寬的消耗和額外流量的產(chǎn)生并不是唯一的問(wèn)題。我省165網(wǎng)絡(luò)的接入設(shè)備,例如匯聚層的路由器、以太網(wǎng)絡(luò)交換機(jī),網(wǎng)橋,dslam、b-ras以及后臺(tái)的認(rèn)證系統(tǒng)等,是不可能具有無(wú)限的處理能力的。因此,當(dāng)線路上用戶使用量和通信狀態(tài)數(shù)目急增,這些設(shè)備將不能支持更多的用戶。這時(shí),我們必須將進(jìn)行大量的設(shè)備追加投資,或者采用一套流量管理解決方案來(lái)緩解或者避免用于基礎(chǔ)設(shè)施建設(shè)的大筆開(kāi)銷。1.4 對(duì)經(jīng)營(yíng)成本的負(fù)面影響p2p長(zhǎng)時(shí)間在線的應(yīng)用,對(duì)我們目前采用的單一的包月收費(fèi)模式提出強(qiáng)有力的挑戰(zhàn),這種收費(fèi)模式原來(lái)是建立在假設(shè)用戶每天只有幾個(gè)小時(shí)在線這一前提下的,而它同時(shí)也為用戶提供了持續(xù)在線的可能性。然而,p2p應(yīng)用改變了這種模式,它們獲取帶寬的方式可謂完美,使用“永遠(yuǎn)在線”的技術(shù)日以繼夜地在進(jìn)行貪婪的下載和上傳服務(wù)。這樣,寬帶連接用戶就可以在只付出很少的成本的情況下承載很大的流量,從而減少了服務(wù)提供商的利潤(rùn),相反還增加了結(jié)算成本。二、流量分析策略實(shí)施流量分析和控制是2005年湖北聯(lián)通165網(wǎng)絡(luò)運(yùn)維工作中的重點(diǎn),2005年,網(wǎng)管中心采用多種方法和措施對(duì)湖北165網(wǎng)絡(luò)中的業(yè)務(wù)流量實(shí)施了全方位的、多角度的分析和控制優(yōu)化調(diào)整工作,網(wǎng)管中心在實(shí)施的過(guò)程,取得不少的經(jīng)驗(yàn)和成功。2.1 流量分析隨著網(wǎng)絡(luò)應(yīng)用逐漸朝向?qū)拵?yīng)用發(fā)展,用戶對(duì)帶寬的需求也不斷上升。從長(zhǎng)期角度分析,擴(kuò)充帶寬和相應(yīng)網(wǎng)絡(luò)設(shè)備已成為ip網(wǎng)絡(luò)的最大成本,我們也開(kāi)始感受到有效規(guī)劃和使用帶寬是降低整體成本、提高網(wǎng)絡(luò)性能的重點(diǎn)。量化是優(yōu)化的基礎(chǔ),然而隨著網(wǎng)絡(luò)結(jié)構(gòu)日益復(fù)雜,只能取得端口數(shù)據(jù)的傳統(tǒng)網(wǎng)管系統(tǒng)已經(jīng)無(wú)法滿足網(wǎng)絡(luò)規(guī)劃和分析的需求。決策者不僅需要端口帶寬數(shù)據(jù),還需要分析網(wǎng)絡(luò)流量的來(lái)源、目標(biāo)和應(yīng)用等各種數(shù)據(jù)的比例分布和尖離峰差異,才能在網(wǎng)絡(luò)性能和帶寬成本之間,取得最優(yōu)化的平衡,實(shí)際運(yùn)營(yíng)證明有效的進(jìn)行流量分析和控制就是解決以上問(wèn)題的最佳方案。我省建立流量分析可逐步向前發(fā)展,從短期的實(shí)時(shí)分析、中期的流量分析到長(zhǎng)期的流量統(tǒng)計(jì),全部集成在一個(gè)單一系統(tǒng),具體功能應(yīng)包括網(wǎng)絡(luò)流量監(jiān)控、超量警示、趨勢(shì)分析、排序分析、實(shí)時(shí)分布、報(bào)表查詢、計(jì)費(fèi)統(tǒng)計(jì)等。2.2 系統(tǒng)架構(gòu)分析解讀湖北聯(lián)通骨干網(wǎng)絡(luò)結(jié)構(gòu),如下圖網(wǎng)絡(luò)拓樸圖:出口2出口1流量分析gsr1gsr2中心機(jī)房湖北聯(lián)通骨干武漢荊州等宜昌上圖為示意圖,網(wǎng)絡(luò)設(shè)備可以為多個(gè)。網(wǎng)絡(luò)流量分析儀同用戶網(wǎng)絡(luò)結(jié)構(gòu)無(wú)關(guān),網(wǎng)絡(luò)設(shè)備通過(guò)udp的協(xié)議向分析儀傳送netflow的流量信息,分析儀對(duì)收到的數(shù)據(jù)按照用戶的需求進(jìn)行過(guò)濾、統(tǒng)計(jì)、分析等處理,最終呈現(xiàn)用戶報(bào)表。分析系統(tǒng)獨(dú)立運(yùn)作,無(wú)需其他輔助設(shè)備。2.3 測(cè)量基本目標(biāo)和方法整個(gè)測(cè)試目標(biāo)分為3個(gè)部分:1、對(duì)骨干流量的檢測(cè),了解目前的骨干帶寬使用狀態(tài)。2、對(duì)關(guān)鍵應(yīng)用的檢測(cè),包括www、下載、流媒體,以及病毒等,了解目前網(wǎng)絡(luò)內(nèi)重要應(yīng)用及常見(jiàn)病毒的帶寬占用情況。3、對(duì)網(wǎng)絡(luò)內(nèi)重要的地址段或主機(jī)的監(jiān)控,便于對(duì)網(wǎng)絡(luò)進(jìn)行合理規(guī)劃,包括地市、大客戶、或游戲及視頻點(diǎn)播服務(wù)器等。測(cè)試方法也為3個(gè)部分:1、流量監(jiān)控:對(duì)各種流量的即時(shí)數(shù)據(jù)監(jiān)控,包括速率、位元(帶寬)、封包、會(huì)話的平均值及最大值的統(tǒng)計(jì)。2、流量分析:對(duì)各種流量的top n累計(jì)數(shù)據(jù)的統(tǒng)計(jì),包括ip地址和應(yīng)用協(xié)議的累計(jì)排名統(tǒng)計(jì),用于了解特定范圍內(nèi)主要流量產(chǎn)生于哪些ip和哪些協(xié)議。3、即時(shí)流量報(bào)表:對(duì)當(dāng)前ip地址或應(yīng)用的即時(shí)流量進(jìn)行分析,了解當(dāng)前ip和協(xié)議的排名。 我們的測(cè)試將針對(duì)以上測(cè)試目標(biāo),采用3種測(cè)試方法分別得出測(cè)試結(jié)果,全面地了解湖北聯(lián)通網(wǎng)絡(luò)狀態(tài)和使用情況。2.4 測(cè)量得到的關(guān)鍵數(shù)據(jù)(1)流量成分的分布情況分析用戶上網(wǎng)業(yè)務(wù),使用即時(shí)流量分析功能,仍以向用戶提供www、下載、流媒體等業(yè)務(wù)為主,其中www服務(wù)占流量的近28%,bt下載占近32%(tcp16881+tcp4662)。我們可以通過(guò)流量監(jiān)控的功能,實(shí)現(xiàn)對(duì)特定應(yīng)用的流量監(jiān)控,如dns、mail、ftp等。我們通過(guò)多種技術(shù)手段測(cè)量湖北165網(wǎng)絡(luò)上的各種業(yè)務(wù)流量,發(fā)現(xiàn)網(wǎng)絡(luò)中除了www、e-mail、ftp傳統(tǒng)的互聯(lián)網(wǎng)業(yè)務(wù)流量外,還有大量的p2p的業(yè)務(wù)流量,占據(jù)總體進(jìn)出省網(wǎng)的3040之間,這些p2p流量主要是以bt、edonkey、skype為代表的p2p應(yīng)用軟件產(chǎn)生,這些流量給我省的出口中繼、流量成本結(jié)算帶來(lái)嚴(yán)重的負(fù)面影響。具體分布如下:我們分別對(duì)一些網(wǎng)絡(luò)內(nèi)流量或會(huì)話數(shù)較大的應(yīng)用進(jìn)行量監(jiān)控,了解各個(gè)應(yīng)用帶寬使用狀態(tài),為網(wǎng)絡(luò)優(yōu)化和控制提供依據(jù)。(2)關(guān)鍵應(yīng)用分析1、www應(yīng)用:速率:其一日最高峰值速率為:243.96mbps;平均速率為:148.50mbps;當(dāng)前速率為:230.98mbps。session數(shù):其一日session連機(jī)數(shù)最高峰值為:2563180個(gè);平均session連機(jī)數(shù)為:1420544個(gè);當(dāng)前session 連機(jī)數(shù)為:2306186個(gè)。(3)bt下載應(yīng)用通過(guò)對(duì)各種bt下載及服務(wù)軟件下載特征的監(jiān)控我們可以了解網(wǎng)絡(luò)內(nèi)bt流量占用帶寬比例,流量較大的時(shí)段,通過(guò)此數(shù)據(jù)了解bt流量平均值,一旦流量異常,可以及時(shí)采取措施控制帶寬,保證其他應(yīng)用的正常。速率:其一日某地市最高峰值速率為:41918.88kbps;平均速率為:25425.87kbps;當(dāng)前速率為:23827.53kbps。session數(shù):其一日session連機(jī)數(shù)最高峰值為: 428336個(gè);平均session連機(jī)數(shù)為:258261個(gè);當(dāng)前session 連機(jī)數(shù)為:258832個(gè)。(4)特定應(yīng)用的流量監(jiān)控及分析我們通過(guò)對(duì)湖北聯(lián)通網(wǎng)內(nèi)bt流量的的監(jiān)控,了解提供bt下載服務(wù)的源地址列表,并可掌握網(wǎng)內(nèi)進(jìn)行bt下載最多的ip地址主機(jī),便于我們進(jìn)一步對(duì)這些源地址進(jìn)行有針對(duì)性的控制。2.5 流量分析總結(jié)通過(guò)較長(zhǎng)時(shí)間的對(duì)165的流量進(jìn)行了監(jiān)測(cè)和分析,得出一些相當(dāng)有用的流量信息,這些流量信息將有助于了解165網(wǎng)絡(luò)應(yīng)用狀況。同時(shí)隨著新用戶數(shù)量的增長(zhǎng),出口帶寬的使用率也會(huì)慢慢增大,是擴(kuò)容還是限速,或是做分流,都需要對(duì)網(wǎng)絡(luò)中的流量做細(xì)致的掌握,才好做出正確的決策。通過(guò)中長(zhǎng)期流量監(jiān)控及top n排名分析,得出各種流量的增長(zhǎng)趨勢(shì),以為網(wǎng)絡(luò)的運(yùn)維提供有力的幫助,有助于運(yùn)維建立自己網(wǎng)絡(luò)的流量基線,從而對(duì)以后的網(wǎng)絡(luò)運(yùn)維,優(yōu)化提供豐富的數(shù)據(jù)。同時(shí),實(shí)時(shí)的流量分析可以幫助運(yùn)維人員及時(shí)準(zhǔn)確的發(fā)現(xiàn)網(wǎng)絡(luò)的異常,找到異常流量的根源,從而保證網(wǎng)絡(luò)的運(yùn)行質(zhì)量。進(jìn)行流量監(jiān)測(cè),可以就網(wǎng)絡(luò)流量方面,提供很多傳統(tǒng)網(wǎng)管所不能及的數(shù)據(jù),不僅能夠完善網(wǎng)絡(luò)運(yùn)維,更能夠在流量分析數(shù)據(jù)的基礎(chǔ)上,指導(dǎo)業(yè)務(wù)發(fā)展,并提供決策支持。關(guān)于流量分析可以從以下幾個(gè)方面總結(jié)經(jīng)驗(yàn):(1)重要鏈路的流量監(jiān)控可以針對(duì)省網(wǎng)的重要鏈路,基于gsr的接口,進(jìn)行流量監(jiān)控,掌握不同鏈路的流量基線,并了解鏈路的負(fù)載。如省網(wǎng)到骨干網(wǎng)的鏈路、各地市到省網(wǎng)的鏈路(2)重要鏈路的流量分析可以針對(duì)省網(wǎng)的重要鏈路,基于gsr的接口,進(jìn)行流量流向和流量成分的分析,掌握基于流量、應(yīng)用、packet、session的ip或者as的topn排名。以便進(jìn)一步了解省網(wǎng)到骨干網(wǎng)、各地市到省網(wǎng)的鏈路上,流量從那里來(lái)、到哪里去、都是些什么應(yīng)用的流量等詳細(xì)信息,這樣可以隨時(shí)察覺(jué)出流量或者路由是否正常。(3)重要業(yè)務(wù)的流量監(jiān)控可以針對(duì)省內(nèi)的重要業(yè)務(wù),如:adsl用戶、lan用戶、撥號(hào)用戶、大客戶、網(wǎng)吧等,基于gsr的接口、ip地址區(qū)段、流量的應(yīng)用等不同方式,進(jìn)行流量監(jiān)控,掌握不同業(yè)務(wù)的流量基線,并了解對(duì)相關(guān)鏈路的負(fù)載。這些數(shù)據(jù)更可以提供給業(yè)務(wù)部門為他們進(jìn)一步研究市場(chǎng)、開(kāi)拓市場(chǎng)提供決策支持。(4)重要業(yè)務(wù)的流量分析可以針對(duì)省內(nèi)的重要業(yè)務(wù),如:adsl用戶、lan用戶、撥號(hào)用戶、大客戶、網(wǎng)吧等,進(jìn)行流量流向和流量成分的分析,掌握基于流量、應(yīng)用、packet、session的ip或者as的topn排名。以便進(jìn)一步掌握不同業(yè)務(wù)流量的流量和成分,隨時(shí)發(fā)現(xiàn)不正常的流量流向或者異常流量。如有異常流量存在,及時(shí)定位出異常流量的來(lái)源、目的或者其應(yīng)用。(5)客戶服務(wù)可以針對(duì)用戶投訴、用戶意見(jiàn),對(duì)相關(guān)鏈路、相關(guān)范圍內(nèi)的流量,進(jìn)行流量流向、流量成分的詳細(xì)分析,以便及時(shí)解決用戶反映的問(wèn)題。三、流量控制策略實(shí)施湖北聯(lián)通165網(wǎng)絡(luò)出入省流量長(zhǎng)期以來(lái)比較大,導(dǎo)致網(wǎng)間結(jié)算費(fèi)用居高不下,時(shí)常還造成湖北聯(lián)通165業(yè)務(wù)收入還不夠支出,為了迅速扭轉(zhuǎn)這種不利的局面,2005年下半年,我們?cè)谑?65網(wǎng)絡(luò)內(nèi)部通過(guò)多種技術(shù)手段測(cè)量各種業(yè)務(wù)流量,發(fā)現(xiàn)網(wǎng)絡(luò)中除了www、e-mail、ftp傳統(tǒng)的互聯(lián)網(wǎng)業(yè)務(wù)流量外,還有大量的p2p的業(yè)務(wù)流量,占據(jù)總體進(jìn)出省網(wǎng)的3040之間,這些p2p流量主要是以bt、edonkey、skype為代表的p2p應(yīng)用軟件產(chǎn)生,這些流量給我省的出口中繼、流量成本結(jié)算帶來(lái)嚴(yán)重的負(fù)面影響。 3.1 如何檢測(cè)網(wǎng)絡(luò)中的p2p流量為了能夠?qū)侔銈窝b自己的p2p流量從網(wǎng)絡(luò)識(shí)別出來(lái),網(wǎng)絡(luò)應(yīng)用的可視性是至關(guān)重要的。這種能力將使我們能夠了解到在當(dāng)前的網(wǎng)絡(luò)中運(yùn)行著哪些p2p應(yīng)用、哪些p2p應(yīng)用正在吞噬著網(wǎng)絡(luò)中寶貴的資源、哪些用戶占據(jù)了過(guò)多的網(wǎng)絡(luò)資源從而造成網(wǎng)絡(luò)擁塞。當(dāng)了解這些之后,我們就可以對(duì)p2p應(yīng)用進(jìn)行限制或者阻止,或者實(shí)施流量整形,應(yīng)用隊(duì)列技術(shù)調(diào)低p2p應(yīng)用的優(yōu)先級(jí)別,直接地或者間接地為其他非p2p用戶分配有保證的網(wǎng)絡(luò)帶寬,從而利用現(xiàn)有的帶寬資源最大限度地提高流量的效率。根據(jù)實(shí)際運(yùn)維發(fā)現(xiàn)就目前業(yè)界所提供的技術(shù)手段中,那種利用深度數(shù)據(jù)包檢測(cè)(dpi)技術(shù),是識(shí)別p2p應(yīng)用比較高效的辦法。因?yàn)閷?duì)p2p應(yīng)用進(jìn)行判斷需要借助復(fù)雜的第七層識(shí)別技術(shù),由由于大多數(shù)p2p文件共享應(yīng)用都使用端口跳動(dòng)技術(shù)或者強(qiáng)行使用一些常見(jiàn)的協(xié)議端口進(jìn)行傳輸,所以想簡(jiǎn)單地通過(guò)端口對(duì)它們進(jìn)行識(shí)別顯然是遠(yuǎn)遠(yuǎn)不夠的。因此,所有的數(shù)據(jù)包必須在應(yīng)用層面上進(jìn)行深度檢查,即對(duì)傳輸協(xié)議tcp協(xié)議的載荷(payload)部分進(jìn)行檢查,以判斷他們是否符合代表某些應(yīng)用的樣本特征。如下圖所示:特征碼在很多情況下,對(duì)于某一種應(yīng)用的識(shí)別需要檢測(cè)它是否匹配多個(gè)代碼的樣本的特征,在這里還得感謝那些最初設(shè)計(jì)tcp/ip基礎(chǔ)協(xié)議體系的大師們,就是在tcp/ip基礎(chǔ)協(xié)議的架構(gòu)下,針對(duì)每一類典型的應(yīng)用,在tcp的包頭部分總會(huì)產(chǎn)生與之相匹配的特征碼,幸好這個(gè)特征碼是根據(jù)特定的應(yīng)用,tcp/ip協(xié)議堆棧在通行的過(guò)程自動(dòng)封裝的,通信程序軟件開(kāi)發(fā)人員對(duì)這個(gè)特征碼是不能作任何更改的,并且這個(gè)特征碼一旦產(chǎn)生,就標(biāo)志著某一類新的應(yīng)用產(chǎn)生了,并且在通信的過(guò)程中,他的特征值是不會(huì)改變的,除非在應(yīng)用層針對(duì)應(yīng)用實(shí)施新的變異,方能改變特征碼的數(shù)值。3.2 處理p2p流量帶來(lái)的效果當(dāng)流量控制系統(tǒng)識(shí)別了p2p的應(yīng)用之后,就可以比較容易地對(duì)這些p2p應(yīng)用實(shí)施流量整形、控制管理等工作,同時(shí)對(duì)所有出省的流量實(shí)施高度細(xì)化的實(shí)時(shí)視圖。下面是對(duì)p2p做限制后的抓圖:(in+out)p2p文件共享應(yīng)用策略生效,流量即時(shí)下降。下降230m進(jìn)、出兩個(gè)方向的合計(jì)。從上圖明顯看出,p2p應(yīng)用產(chǎn)生的流量幾乎占據(jù)省出口a總體流量的50左右,進(jìn)向流量節(jié)省了2/3,直接減少了運(yùn)營(yíng)成本,帶來(lái)了直觀上的效益。在對(duì)p2p流量實(shí)施管理策略(in=10m,out=10m)之后,直接節(jié)省帶寬230m。流量實(shí)時(shí)顯示的波形圖在流量控制前后,效果十分明顯,圖形每一種不同的顏色代表一種不同的應(yīng)用,從圖中還可以發(fā)現(xiàn),當(dāng)p2p流量得到有效壓制后,網(wǎng)絡(luò)上其他的應(yīng)用可用的相對(duì)帶寬會(huì)變大,具體表現(xiàn)在其他的互連網(wǎng)應(yīng)用的響應(yīng)速度會(huì)明顯的加快,帶來(lái)的最終效果是,當(dāng)p2p流量得到有效的控制后,其他的非p2p應(yīng)用用戶的滿意度會(huì)明顯提升。3.3 流控策略制定為了能夠合理疏導(dǎo)我省165網(wǎng)絡(luò)的流量和提升廣大寬帶用戶的滿意度,我們?cè)鴩L試了不同的解決方案:1、單純?cè)黾映隹趲捵铒@而易見(jiàn)也是最簡(jiǎn)單的解決辦法,就是增加中繼帶寬。實(shí)際運(yùn)營(yíng)表明:增加帶寬確實(shí)在短時(shí)間內(nèi)能緩解網(wǎng)絡(luò)的擁塞情況,但是當(dāng)p2p應(yīng)用“覺(jué)察”到網(wǎng)絡(luò)中有更多的可用帶寬,網(wǎng)絡(luò)帶寬將會(huì)再度被p2p應(yīng)用占據(jù)。這樣以來(lái),用于增加帶寬的費(fèi)用將是個(gè)“無(wú)底洞”,因?yàn)檫@樣做只是給那些p2p應(yīng)用提供了更多可獲取的帶寬資源。企業(yè)網(wǎng)絡(luò)也面臨也面臨同樣的兩難處境,即是否采用升級(jí)其internet連接鏈路的辦法來(lái)緩解網(wǎng)絡(luò)的擁塞情況。若是用戶不理解這種通信行為,還會(huì)增加用戶的抱怨。總體說(shuō)來(lái)擴(kuò)容網(wǎng)絡(luò)是帶寬擁塞時(shí)運(yùn)行維護(hù)網(wǎng)絡(luò)的傳統(tǒng)做法,但在當(dāng)前網(wǎng)絡(luò)發(fā)展的形勢(shì)下,這種傳統(tǒng)做法已不能根本解決問(wèn)題,擴(kuò)容后的網(wǎng)絡(luò)資源會(huì)迅速被p2p流量占用,并且擴(kuò)容帶來(lái)的運(yùn)營(yíng)成本壓力最終會(huì)使運(yùn)營(yíng)商嚴(yán)重虧損,網(wǎng)絡(luò)質(zhì)量降低,形成惡性循環(huán)。因此,在擴(kuò)容網(wǎng)絡(luò)容量的同時(shí),必須同時(shí)考慮其它措施,才能真正解決網(wǎng)絡(luò)帶寬“永遠(yuǎn)不夠用”的怪圈。2、禁止p2p 全面禁止p2p應(yīng)用會(huì)使擁塞的網(wǎng)絡(luò)恢復(fù)正常狀態(tài)。但目前p2p應(yīng)用已經(jīng)被廣大網(wǎng)民所喜愛(ài),一旦全面禁止p2p應(yīng)用,我們將會(huì)失去這些用戶,這幾乎是所有寬帶運(yùn)營(yíng)商所不愿意發(fā)生的。因?yàn)楹芏嗌暇W(wǎng)用戶就是為了能夠不受限制地進(jìn)行文件共享才租用了運(yùn)營(yíng)商地線路。3、適度限制p2p流量適度控制p2p應(yīng)用對(duì)網(wǎng)絡(luò)資源的占用,可以緩解網(wǎng)絡(luò)運(yùn)營(yíng)壓力。有效的“變堵為疏”,制止帶寬浪費(fèi)控制網(wǎng)絡(luò)互聯(lián)成本,且對(duì)p2p應(yīng)用不能簡(jiǎn)單禁止,否則會(huì)造成用戶地投訴和糾紛,所以必須進(jìn)行流量整形,限制某些應(yīng)用的流量。經(jīng)過(guò)我們較長(zhǎng)時(shí)間的摸索,發(fā)現(xiàn)我省165網(wǎng)絡(luò)經(jīng)過(guò)流量?jī)?yōu)化后,網(wǎng)絡(luò)可以去掉3040的可限性流量,用戶無(wú)明顯投訴。我們也可以考慮其它轉(zhuǎn)發(fā)模式,對(duì)不同流量成分采取不同的轉(zhuǎn)發(fā)策略。實(shí)施以上策略的前提是能夠做到對(duì)不同應(yīng)用流量的識(shí)別,目前市場(chǎng)上已經(jīng)存在多種支持流量識(shí)別及管理的產(chǎn)品,經(jīng)過(guò)我們實(shí)際測(cè)量試用表明,現(xiàn)有流量管理產(chǎn)品尚不能解決所有問(wèn)題。4、實(shí)施新的商業(yè)運(yùn)營(yíng)模式恢復(fù)互聯(lián)網(wǎng)發(fā)展初期基于流量的價(jià)格體系也是一個(gè)思路。曾經(jīng)有過(guò)這樣的案例,按月包流量的移動(dòng)互聯(lián)網(wǎng)用戶因無(wú)限制使用p2p下載軟件,導(dǎo)致產(chǎn)生上萬(wàn)元的月使用費(fèi),和正常包月費(fèi)用相差百倍。這個(gè)案例也從一個(gè)側(cè)面說(shuō)明,傳統(tǒng)互聯(lián)網(wǎng)應(yīng)用和p2p應(yīng)用對(duì)網(wǎng)絡(luò)資源占用的巨大差別。但簡(jiǎn)單實(shí)施基于流量的計(jì)費(fèi),也會(huì)嚴(yán)重限制用戶對(duì)網(wǎng)絡(luò)的訪問(wèn)熱情,阻礙互聯(lián)網(wǎng)的正常發(fā)展。改變現(xiàn)有的粗放型寬帶接入包月模式,實(shí)現(xiàn)對(duì)網(wǎng)絡(luò)流量的精細(xì)化管理,實(shí)現(xiàn)qos保證,對(duì)用戶的分級(jí)管理,按服務(wù)及內(nèi)容收取費(fèi)用,找到合理可行的計(jì)費(fèi)模式,是新的商業(yè)運(yùn)營(yíng)模式需要實(shí)現(xiàn)的目標(biāo)。這個(gè)目標(biāo)給用戶接入?yún)R聚產(chǎn)品提出了更高的要求,首先要保證主要應(yīng)用的有效運(yùn)行;其次要能控制次要流量,根據(jù)用戶定制進(jìn)行內(nèi)容過(guò)濾;再有,就是能為基于流量和使用時(shí)長(zhǎng)的價(jià)格體系提供技術(shù)支撐,目前國(guó)內(nèi)部分寬帶運(yùn)營(yíng)正在做這方面的嘗試。目前已有部分設(shè)備滿足以上要求,相信隨著網(wǎng)絡(luò)設(shè)備性能的飛速發(fā)展,將來(lái)網(wǎng)絡(luò)匯聚設(shè)備對(duì)以上功能的支持將得到普及。下一代網(wǎng)絡(luò)(ngn)架構(gòu)中的一個(gè)典型特點(diǎn)是能夠提供對(duì)多業(yè)務(wù)的感知和控制,實(shí)施不同的用戶策略、業(yè)務(wù)策略、應(yīng)用策略,實(shí)現(xiàn)對(duì)帶寬和qos的控制。我們希望p2p應(yīng)用的出現(xiàn)和發(fā)展,會(huì)成為下一代網(wǎng)絡(luò)快速發(fā)展、走向商用的推動(dòng)力。5、聯(lián)合其他渠道限制p2p流量的過(guò)度增長(zhǎng)目前國(guó)內(nèi)最主要的p2p應(yīng)用是利用bt、edonkey等軟件上傳、下載文件,但下載的軟件或影音內(nèi)容有相當(dāng)部分存在知識(shí)產(chǎn)權(quán)、版權(quán)問(wèn)題,還有部分內(nèi)容涉及到色情傳播的問(wèn)題。在過(guò)去的一年里,全球p2p的發(fā)展可謂是一波三折。6月,美國(guó)最高法院對(duì)兩家著名p2p軟件公司grokster 和streamcast被訴一案有了終審判決,任何傳播侵權(quán)設(shè)備的人都必須為他人的侵權(quán)后果負(fù)責(zé);9月,winmx.com、ed等知名網(wǎng)站因?yàn)闊o(wú)力承擔(dān)可能會(huì)發(fā)生的高額訴訟費(fèi)而關(guān)閉,而bittorrent公司則引入風(fēng)險(xiǎn)投資想提供合法下載;10月,香港法院在全球首次裁定一名提供bt下載種子的用戶有罪,引起軒然大波;12月,法國(guó)議會(huì)下院投票表決通過(guò)了一項(xiàng)旨在使免費(fèi)下載版權(quán)保護(hù)內(nèi)容合法化的修正案,用戶只需每月交納7歐元的全球授權(quán)費(fèi)用,就可以無(wú)限制地合法下載。我們希望能與國(guó)家相關(guān)職能互相配合,加大打擊力度,凈化網(wǎng)絡(luò)環(huán)境,這部分不良流量如果能夠得到有效限制,也會(huì)大大緩解網(wǎng)絡(luò)運(yùn)行壓力??偨Y(jié)p2p應(yīng)用的迅速普及是近兩三年來(lái)互聯(lián)網(wǎng)的主要變化,它改變了傳統(tǒng)互聯(lián)網(wǎng)的通信模式,占用了50以上的互聯(lián)網(wǎng)絡(luò)資源,是互聯(lián)網(wǎng)發(fā)展進(jìn)程中的革命性技術(shù)變革。當(dāng)前互聯(lián)網(wǎng)運(yùn)營(yíng)商的業(yè)務(wù)模型和基礎(chǔ)設(shè)施普遍不適合發(fā)展p2p業(yè)務(wù),p2p流量的迅猛發(fā)展對(duì)運(yùn)營(yíng)商的網(wǎng)絡(luò)產(chǎn)生了巨大壓力,因此運(yùn)營(yíng)商必須找到新的、可贏利的商業(yè)模式保證互聯(lián)網(wǎng)能夠得到健康、穩(wěn)定、長(zhǎng)期的發(fā)展。從純技術(shù)角度來(lái)看,p2p應(yīng)用確實(shí)是互聯(lián)網(wǎng)技術(shù)發(fā)展史上的又一個(gè)重要的里程碑,具有劃時(shí)代的意義,與其他新技術(shù)出現(xiàn)一樣,剛開(kāi)始的時(shí)候,總有一個(gè)痛苦的博弈過(guò)程,因?yàn)槿魏涡迈r事務(wù)的出現(xiàn),它總會(huì)挑戰(zhàn)傳統(tǒng)的東西,p2p絕不例外,目前,它正在挑戰(zhàn)著傳統(tǒng)的網(wǎng)絡(luò)基礎(chǔ)設(shè)施,傳統(tǒng)的運(yùn)營(yíng)觀念、計(jì)費(fèi)模式和管理策略,甚至是早期投資者的利益等諸多因素,但這些因素遲早是要被新技術(shù)革命所淘汰掉的,所
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 2024版墻紙購(gòu)銷合同范本
- 2025年度數(shù)字經(jīng)濟(jì)基礎(chǔ)設(shè)施建設(shè)承包借款合同4篇
- 2024預(yù)埋件研發(fā)與生產(chǎn)項(xiàng)目合同范本3篇
- 2024食品物流信息化管理系統(tǒng)合同
- 2025年度文化創(chuàng)意產(chǎn)品采購(gòu)合同知識(shí)產(chǎn)權(quán)保護(hù)與市場(chǎng)推廣3篇
- 2025年度專業(yè)市場(chǎng)租賃協(xié)議范本4篇
- 2025年度智慧社區(qū)物業(yè)服務(wù)承包合同4篇
- 2025年度電力企業(yè)財(cái)務(wù)預(yù)算出納人員擔(dān)保合同3篇
- 2025年度商場(chǎng)櫥窗窗簾廣告設(shè)計(jì)與安裝合同4篇
- 2025年度新能源汽車制造項(xiàng)目承包商擔(dān)保合同規(guī)范4篇
- 春節(jié)英語(yǔ)介紹SpringFestival(課件)新思維小學(xué)英語(yǔ)5A
- 進(jìn)度控制流程圖
- 2023年江蘇省南京市中考化學(xué)真題
- 【閱讀提升】部編版語(yǔ)文五年級(jí)下冊(cè)第四單元閱讀要素解析 類文閱讀課外閱讀過(guò)關(guān)(含答案)
- 供電副所長(zhǎng)述職報(bào)告
- 現(xiàn)在完成時(shí)練習(xí)(短暫性動(dòng)詞與延續(xù)性動(dòng)詞的轉(zhuǎn)換)
- 產(chǎn)品質(zhì)量監(jiān)控方案
- 物業(yè)總經(jīng)理述職報(bào)告
- 新起點(diǎn),新發(fā)展心得體會(huì)
- 深圳大學(xué)學(xué)校簡(jiǎn)介課件
- 校園欺凌問(wèn)題成因及對(duì)策分析研究論文
評(píng)論
0/150
提交評(píng)論