面向運(yùn)營(yíng)商的垃圾短信過濾技術(shù)與系統(tǒng)研究ppt課件

1、面向運(yùn)營(yíng)商的渣滓短信過濾技術(shù)與系統(tǒng)研討姓 名：曹 耀 輝學(xué) 號(hào)：2220210179導(dǎo) 師：孫建偉匯報(bào)提綱背景引見 運(yùn)營(yíng)商現(xiàn)有系統(tǒng)引見渣滓短信集中管控系統(tǒng)方案渣滓短信過濾運(yùn)營(yíng)分析系統(tǒng)支撐方案總結(jié)與展望 匯報(bào)提綱背景引見 運(yùn)營(yíng)商現(xiàn)有系統(tǒng)引見渣滓短信集中管控系統(tǒng)方案渣滓短信過濾運(yùn)營(yíng)分析系統(tǒng)支撐方案總結(jié)與展望 背景 隨著短信業(yè)務(wù)的開展，手機(jī)用戶遭到越來(lái)越多渣滓短信的騷擾。2021 年下半年手機(jī)短信息情況調(diào)查報(bào)告顯示，用戶平均每周收到渣滓短信11.4條，收到渣滓短信息占全部短信息的比例為22.6%。渣滓短信治理刻不容緩，治理好渣滓短信成為運(yùn)營(yíng)商提高通訊效力質(zhì)量的關(guān)鍵所在。渣滓短信產(chǎn)生的緣由：利益驅(qū)動(dòng)，

2、短信業(yè)務(wù)被開展成了廉價(jià)的廣告平臺(tái)立法滯后，手機(jī)實(shí)名制沒有實(shí)踐運(yùn)用SP行業(yè)缺乏自律，挪動(dòng)運(yùn)營(yíng)商對(duì)SP監(jiān)管不嚴(yán)厲運(yùn)營(yíng)商渣滓短信過濾系統(tǒng)和技術(shù)存在缺乏，需求根據(jù)需求進(jìn)一步研討與改造。渣滓短信的定義根據(jù)普通渣滓短信的特征，以為滿足以下兩個(gè)條件的短信為渣滓短信。條件1：渣滓短信發(fā)送者和接納者之間不存在社會(huì)網(wǎng)絡(luò)的聯(lián)絡(luò)，也就是說渣滓短信發(fā)送者和接納者之間不認(rèn)識(shí)。條件2：內(nèi)容一樣或類似的短信在短時(shí)間內(nèi)到達(dá)一定的發(fā)送數(shù)量。渣滓短信分類點(diǎn)對(duì)點(diǎn)渣滓短信，其發(fā)送號(hào)碼為手機(jī)號(hào)碼。根據(jù)發(fā)送號(hào)碼與接納號(hào)碼能否屬于同一家運(yùn)營(yíng)商，還可詳細(xì)分為網(wǎng)內(nèi)點(diǎn)對(duì)點(diǎn)短信和網(wǎng)間點(diǎn)對(duì)點(diǎn)短信；網(wǎng)關(guān)渣滓短信，其發(fā)送號(hào)碼為網(wǎng)關(guān)接入號(hào)。渣滓短信過濾方法

3、垃圾短信過濾方法優(yōu)點(diǎn)缺點(diǎn)流量控制方法能夠快速簡(jiǎn)潔的識(shí)別出垃圾短信并對(duì)垃圾短信發(fā)送者實(shí)施關(guān)停操作當(dāng)某用戶被判定為垃圾短信發(fā)送者時(shí)其已經(jīng)發(fā)送了大量的垃圾短信并造成嚴(yán)重的影響，而且這種方法容易對(duì)發(fā)送量大的非垃圾短信誤判，損害用戶的正常利益關(guān)鍵字匹配方法方法簡(jiǎn)便；關(guān)鍵詞庫(kù)易配置；容易對(duì)正常短信造成誤判，因?yàn)橛行┱６绦胖幸部赡芎嘘P(guān)鍵詞庫(kù)中的關(guān)鍵字，僅僅依靠關(guān)鍵字可能就過濾掉這些短信；另一方面中文詞匯太多，而且某些關(guān)鍵字可以使用同音字代替，關(guān)鍵詞庫(kù)不完備，過濾效率比較低下基于黑白名單的過濾方法方法簡(jiǎn)單；可人工添加，也可系統(tǒng)自動(dòng)添加便于運(yùn)營(yíng)商通過客戶屬性信息進(jìn)行控制；黑白名單不完備，且垃圾短信發(fā)送者大部

4、分為新開卡用戶匯報(bào)提綱背景引見 運(yùn)營(yíng)商現(xiàn)有系統(tǒng)引見渣滓短信集中管控系統(tǒng)方案渣滓短信過濾運(yùn)營(yíng)分析系統(tǒng)支撐方案總結(jié)與展望 短信中心系統(tǒng)構(gòu)造 運(yùn)營(yíng)分析系統(tǒng)構(gòu)造與流程 現(xiàn)有渣滓短信監(jiān)控平臺(tái)渣滓短信過濾流程 現(xiàn)有系統(tǒng)存在的問題與處理方法 序號(hào)現(xiàn)有系統(tǒng)存在的問題解決方法1現(xiàn)有系統(tǒng)為以省為單位進(jìn)行部屬，人工審核工作也是以省為單位進(jìn)行，各省都要消耗大量的人力資源來(lái)審核經(jīng)過過濾系統(tǒng)一次識(shí)別的疑似垃圾短信。建立集中管控系統(tǒng)，進(jìn)行統(tǒng)一審核，并添加二次過濾規(guī)則2疑似垃圾短信數(shù)量龐大，沒有審核優(yōu)先級(jí)順序，審核工作比較滯后根據(jù)指定策略通過對(duì)疑似垃圾短信進(jìn)行分析，得到嫌疑度更高的疑似垃圾短信，送審后人工審核人員可優(yōu)先對(duì)這些

5、高嫌疑度疑似垃圾短信進(jìn)行處理3現(xiàn)有系統(tǒng)策略單一，關(guān)鍵字容易被替代繞過，攔截效率低下提出了策略集的新概念，方便系統(tǒng)對(duì)整個(gè)策略的管理，并在策略集的基礎(chǔ)上提出關(guān)鍵詞策略和流量策略的具體實(shí)施模型，在模型中新加入雙閥值控制的策略，可以更及時(shí)有效的對(duì)疑似垃圾短信做出相應(yīng)處理4全國(guó)各省的策略不統(tǒng)一，不能共享各省的黑白名單發(fā)布全網(wǎng)統(tǒng)一策略，共享各省的黑白名單5中文語(yǔ)法復(fù)雜，關(guān)鍵字庫(kù)不完備選取入網(wǎng)時(shí)長(zhǎng)、品牌、主被叫時(shí)長(zhǎng)、人均發(fā)送短信量、發(fā)送峰值等用戶屬性作為特征向量，建立了基于決策樹的垃圾短信過濾系統(tǒng)模型匯報(bào)提綱背景引見 運(yùn)營(yíng)商現(xiàn)有系統(tǒng)引見渣滓短信集中管控系統(tǒng)方案渣滓短信過濾運(yùn)營(yíng)分析系統(tǒng)支撐方案總結(jié)與展望 渣滓

6、短信集中管控系統(tǒng)系統(tǒng)處置流程戰(zhàn)略集定義戰(zhàn)略集屬性 關(guān)鍵詞戰(zhàn)略流量戰(zhàn)略 二次過濾戰(zhàn)略二次放行戰(zhàn)略優(yōu)質(zhì)客戶短信放行戰(zhàn)略短信長(zhǎng)度戰(zhàn)略白關(guān)鍵字組合不含中文的短信指定時(shí)間段內(nèi)同一用戶多次送審那么僅審第一次 二次攔截戰(zhàn)略疑似渣滓短信如和被審核過的短信內(nèi)容一樣，不進(jìn)展人工審核，直接參照上次審核結(jié)果確定高嫌疑度的疑似渣滓短信優(yōu)先進(jìn)展人工審核匯報(bào)提綱背景引見 運(yùn)營(yíng)商現(xiàn)有系統(tǒng)引見渣滓短信集中管控系統(tǒng)方案渣滓短信過濾運(yùn)營(yíng)分析系統(tǒng)支撐方案總結(jié)與展望 運(yùn)營(yíng)分析系統(tǒng)渣滓短信治理運(yùn)用模塊功能建模數(shù)據(jù)集建模處置流程訓(xùn)練集樣本品牌變量A入網(wǎng)渠道變量B是否垃圾短信U神州行營(yíng)業(yè)廳是全球通營(yíng)業(yè)廳是全球通代理商是動(dòng)感地帶營(yíng)業(yè)廳否神州行代理商是神州行代理商是動(dòng)感地帶代理商是動(dòng)感地帶代理商是動(dòng)感地帶營(yíng)業(yè)廳否全球通代理商否神州行營(yíng)業(yè)廳是全球通營(yíng)業(yè)廳否全球通代理商否動(dòng)感地帶營(yíng)業(yè)廳是建模流程計(jì)算輸出變量 的平均不確定性。計(jì)算“品牌變量 的信息熵和信息增益。建模流程計(jì)算“入網(wǎng)渠道變量 的信息熵和信息增益。由于“品牌變量 的信息增益值比“入網(wǎng)渠道變量 的信息增益值大，以“品牌作為根節(jié)點(diǎn)，“入網(wǎng)渠道作為二層節(jié)點(diǎn)，構(gòu)建決策樹選取決議渣滓短信置信度高通?？稍O(shè)為80%以上的分支作為斷定渣滓短信的規(guī)那么分支，可得出最終的規(guī)那么：建模流程匯報(bào)提綱背景引見 運(yùn)營(yíng)商現(xiàn)有系統(tǒng)引見渣滓短信集中管控系統(tǒng)方案渣滓短信過濾運(yùn)營(yíng)分析系統(tǒng)支