大數(shù)據(jù)運營平臺技術方案（純方案137頁）

1、大數(shù)據(jù)運營平臺科技工程技術建議書1. 6其他要求(1)買方在任何時候保存和擁有對本文件的解釋權和修改權。買方有權在簽 定合同前，根據(jù)需要修改和補充本技術規(guī)范書，修改補充后的最終技術規(guī)范書將 作為合同的附件。答復：滿足。(2)投標方除以下情況外，非經(jīng)中國電信股份浙江分公司書面許可, 不得將本文件的任何內(nèi)容透露給除中國電信股份浙江分公司以外的第 三方。經(jīng)中國電信股份浙江分公司書面許可，應標商才允許將本文(限 于必要局部)透露給其合作伙伴，并保證其合作伙伴不將本文透露給其它人。未 經(jīng)書面許可將本文件透露給第三方的應標商，將被剝奪中標資格。答復：滿足。(3)在技術談判的各個階段，買方將要求投標方對有關

2、問題進行進一步的技 術澄清，投標方應給予應答。答復：滿足。2工程概述工程背景隨著移動互聯(lián)網(wǎng)、云計算、物聯(lián)網(wǎng)技術和業(yè)務的開展，數(shù)據(jù)呈爆炸性增長， 全球進入數(shù)據(jù)ZB時代，2010年全球數(shù)據(jù)量到達1.2 ZB, 2011年全球數(shù)據(jù)量達 到1.8 ZB,到2020年，將到達35 ZB。電信運營商與互聯(lián)網(wǎng)公司等產(chǎn)業(yè)上下游 企業(yè)激烈競合，產(chǎn)業(yè)格局正在重塑，傳統(tǒng)電信運營商面臨低值化、管道化，在新 的產(chǎn)業(yè)鏈中需要謀求新突破。為了應對移動互聯(lián)網(wǎng)時代的挑戰(zhàn)，中國電信正在向 “智能管道的主導者、綜合平臺的提供者、內(nèi)容和應用的參與者”的新三者戰(zhàn)略 轉(zhuǎn)型。.同步標簽模塊采用Storm組件實時處理寬帶DPI數(shù)據(jù)流，為寬帶

3、DPI數(shù)據(jù) 流打上標簽。.實時入庫模塊采用Storm組件將寬帶DPI數(shù)據(jù)流以文件形式寫入云平臺 HDFS,后續(xù)可以對寬帶DPI文件進行離線標簽處理。寬帶DPI數(shù)據(jù)清洗寬帶DPI數(shù)據(jù)清洗主要是針對兩類流量進行清洗： 一類是非瀏覽器發(fā)起的 請求；另一類是瀏覽器發(fā)起的非用戶點擊請求；最終清洗后留下的url為用戶的真實點擊；寬帶DPI數(shù)據(jù)清洗規(guī)那么要求如下：可以實現(xiàn)“用戶有效點擊”的 Get的實時提取。（此處“用戶有效點 擊”的定義為：用戶在瀏覽器輸入的有效網(wǎng)址，點擊瀏覽器書簽，用戶在網(wǎng)頁 中發(fā)起的任意主動點擊行為）。通過清洗規(guī)那么的設定，實現(xiàn)“用戶有效點擊”的 Get的實時提取。規(guī)那么庫1：根據(jù)后綴

4、過濾圖片、腳本等 針對單條url的規(guī)那么。對應現(xiàn)象：圖片、腳本等頁面元素。規(guī)那么描述：一般非頁面資源的文件后綴名有一定規(guī)那么可循，后綴滿足匹 配指定字串，那么被識別為非頁面請求而被過濾去除。特征字符串可配置添加，例如如下:redis-cli sadd blockedurlpa t terns2.JS? jpg jpeg . png . gif . css . swf規(guī)那么庫2:過濾帶有指定特征字符串的url針對單條url的規(guī)那么。對應現(xiàn)象:廣告、框架、廣告聯(lián)盟。規(guī)那么描述：一般廣告、圖片服務或框架頁面會帶有固定的特征字串，選 擇可靠的字串可以排除大量的非頁面請求URLo如下規(guī)那么可配置添加：r

5、edis-cli sadd blockedurlpa t ternsal lyes. comjcpro. bai du. comcache, google. comadmaster. com. cniframecjhq. baidu. com/quotenew規(guī)那么庫3:過濾重復包針對多條URL請求的規(guī)那么對應現(xiàn)象:一個緩沖區(qū)域長度內(nèi)的重復包。規(guī)那么描述：在緩沖內(nèi)判斷是否有重復請求出現(xiàn)，如有那么只提取第一個規(guī)那么庫4:識別非頁面類型請求（包含Js發(fā)出的請求）針對單條URL的規(guī)那么對應現(xiàn)象：瀏覽器與Js腳本發(fā)出非頁面類型的請求。規(guī)那么描述：瀏覽器與Js腳本發(fā)出的非頁面類型請求有一定特征，其中主

6、要是Accept字段值，一般非頁面的請求，如圖片請求那么會包含“image/ 字串，這類請求一般不屬于頁面類型。當 Accept 字段值中不包含“text/html或 application/xhtml+xmlv 子串并不能識別該請求是不是頁面請求，因此而保存下來。規(guī)那么庫5：保存白名單中的請求針對單條URL的規(guī)那么對應現(xiàn)象：有些URL的特征設定為白名單項規(guī)那么描述：設置白名單直接放行已明確需要的URL請求，這樣就不會浪 費實時計算資源而做進一步判斷，提高了系統(tǒng)的吞吐量。白名單可以配置，例如如下：redis-cli sadd allowedurlpa t terns : baidu. com/

7、s?” Jttp :cn. bing. com/search?” littp:ww w. google, com. hk/search?4. 2. 2 3G DPI數(shù)據(jù)采集清洗系統(tǒng)通過FTP方式采集3G DPI文件，3G DPI數(shù)據(jù)采集清洗網(wǎng)絡架構如下:外部環(huán)境I3G DPI設備3G DPI數(shù)據(jù)采集清洗軟件3G DPI接口服務器千兆千兆交換機超髭3G DPI接口服務器千兆千兆Hadoop大數(shù)據(jù)平臺3G DPI文件清洗流程如下：將3G DPI文件的zip壓縮格式轉(zhuǎn)成gz壓縮格式。對3G DPI文件進行數(shù)據(jù)清洗，包括加協(xié)議號，過濾重復的記錄，文件加宓 LU O輸出正常文件和重單文件寫入HDFS。2

8、. 3 AAA數(shù)據(jù)采集清洗城域網(wǎng)中獲取到 GET報文數(shù)據(jù)中用戶標識是IP地址，由于每次用戶登 錄撥號IP地址均可能不同，在進行用戶分析時用戶的標識應該為AD帳號。需要 獲取Radius數(shù)據(jù)，將用戶上網(wǎng)撥號AAA過程中IP和AD信息的導入，匹配用戶 上網(wǎng)行為記錄中的IP地址和AD賬號的數(shù)據(jù)原始信息，完成用戶上網(wǎng)記錄身份的 辨識。實現(xiàn)獨立運行的AAA radius解報文模塊，實時提取AAA報文中的Attribute Value Pairs 中的對應報文段，將其 User-Name Framed-IP-Address Acct-Status-Type并組合當前的系統(tǒng)時間戳形成一條完整的用戶身份配對的

9、撥 號上下線狀態(tài)數(shù)據(jù)的記錄，用于與偽CDR數(shù)據(jù)進行匹配。2. 4 0IDD數(shù)據(jù)采集清洗系統(tǒng)通過FTP方式采集OIDD文件。OIDD數(shù)據(jù)采集清洗網(wǎng)絡架構如下:外部環(huán)境OIDD數(shù)據(jù)采集清洗軟件OIDD文件通過分布式ETL工具Kettle寫入HDFSO OIDD數(shù)據(jù)接口1） OIDD數(shù)據(jù)表一:sada_ticket,表結構如下：hive desc formatted sada_ticket;OK# col name# col namedata_typecommentstringNone（用戶號碼）stringNone（開始時間）stringNone（基站）stringNone（上電標記）string

10、None（用戶號碼）stringNone（開始時間）stringNone（基站）stringNone（上電標記）prod_inst_numstart_time base_station power_flag# Partition# PartitionInformation# col name# col namedata_typecommentdatelabelstringNoneloadstampstringNone# DetailedTable InformationDatabase:oidd2） OIDD數(shù)據(jù)表二:sada oidd day,表結構如下:2） OIDD數(shù)據(jù)表二:sada o

11、idd day,表結構如下:hive desc formatted sada_oidd_day;# col_namedata_typecommentprod_inst_numstringNone（用戶號碼）start_timestringNone（開始口寸間）base_stationstringNone（基站）sectorstringNone（扇區(qū)）power_flagstringNone（上電標記）# PartitionInformation# col_namedata_typecommentdatelabelstringNoneloadstampstringNoneOK# Detailed

12、 Table InformationDatabase:oidd4. 2. 5 ODS數(shù)據(jù)采集清洗系統(tǒng)通過FTP方式采集ODS文件，ODS數(shù)據(jù)采集清洗網(wǎng)絡架構如下:外部環(huán)境ODS數(shù)據(jù)采集清洗軟件IODS設備千兆ODS接口服務器千兆交換機千兆ODS接口服務器千兆Hadoop大數(shù)據(jù)平臺ODS文件通過分布式ETL工具Kettle寫入HDFS ODS數(shù)據(jù)接口ODS 數(shù)據(jù)表：rpt_telecom_user_info,表結構如下:hive desc formatted rpt_telecom_user_info; OK# col namedata_typecommentwb_ispacnt numstri

13、ngNone（帳號加密）user_agestringNone（用戶年齡）user_sexstringNone（用戶性別）user_typestringNone（用戶類型）user_areastringNone（用戶所屬區(qū)域）desccoststringNone（費用范圍描述）wb_access_tpstringNone（寬帶訪問類型）act_op_ratestringNone（活躍操作頻度）prom_groupstringNone（套餐類型）guangwangflagstringNone（是否光釬標記）a_connect_collegestringNone0agrmnt_const_exp_d

14、tstringNone（協(xié)議有效日期）balancestringNone（余額）pi_sub_stat_tpstringNone（是否在用）update_statusstringNone（更新狀態(tài)）lst_update_tmpstringNone（最后更新日期）latstringNone（緯度）IngstringNone（經(jīng)度）# Partition# col nameInformation data_typecommentdatelabelstringNone# Detailed Table InformationDatabase:ods4. 2. 6數(shù)據(jù)脫敏數(shù)據(jù)脫敏也被稱為數(shù)據(jù)混淆、數(shù)據(jù)保

15、密、數(shù)據(jù)消毒、數(shù)據(jù)擾頻、數(shù)據(jù)匿名 化和數(shù)據(jù)認證。采用數(shù)據(jù)脫敏技術，可以幫助大數(shù)據(jù)平臺提高平安性和保密等 級，以防止其數(shù)據(jù)被濫用，同時滿足集團對數(shù)據(jù)平安性的規(guī)范要求，以及由管 理/審計機關所要求的隱私標準。從實現(xiàn)手段上看,針對不同的數(shù)據(jù)內(nèi)容，會有多種數(shù)據(jù)脫敏方式。在Hadoop平臺上，利用采集清洗及流處理的功能，可以實現(xiàn)對各個字段，針對性的脫敏 處理，并且保證在數(shù)據(jù)進入hadoop之前已經(jīng)是脫敏之后的數(shù)據(jù)。另外針對AD的脫敏尤為關鍵，AD是唯一能將DPI數(shù)據(jù)關聯(lián)到ODS客戶數(shù) 據(jù)的字段，我們對所有進入大數(shù)據(jù)平臺的AD都統(tǒng)一采用sha-1的加密方式，轉(zhuǎn)換成只有大數(shù)據(jù)平臺能夠認識的客戶唯一標示。需要

16、進行脫敏處理的信息如下:需脫敏字段描述脫敏前脫敏后Ad寬帶設備號實際adsha加密結果（該算法不可反解）user_age用戶年齡實際年齡年齡段信息，如5年一段，取起始 數(shù)值顯示，如25表示25-29address用戶地址實際地址，精確到戶小區(qū)、樓盤或商圈信息，如武林商圈lat&lng位置經(jīng)緯度實際經(jīng)緯度精確到0.001,約1000平方米，注：lng*lat = 0. 001*0. 001 （度）=約 95. 18 米*111. 32 米username用戶姓名實際姓名僅保存用戶姓氏desc_cost用戶消費情況實際消費金額每150元一檔：0 （表示0T49）,150, 3004. 2.7數(shù)據(jù)加

17、密大數(shù)據(jù)平臺以HDFS為基礎，利用HDFS驅(qū)動提供的Format功能，實現(xiàn) hadoop云平臺系統(tǒng)級、業(yè)務級數(shù)據(jù)加密。HDFS數(shù)據(jù)加密原理圖如下：數(shù)據(jù)加密不修改HDFS內(nèi)核，不影響將來HDFS的升級維護。數(shù)據(jù)加密后，保證HDFS數(shù)據(jù)透明訪問，同時支持SQL查詢服務。2. 8數(shù)據(jù)ETL處理平臺采用ETL工具實現(xiàn)高速ETL處理，處理效率強。功能包括：ETL作業(yè)GUI設計器的功能。ETL作業(yè)自動調(diào)度器的功能。ETL作業(yè)多路并發(fā)提取的功能。ETL作業(yè)多路并發(fā)轉(zhuǎn)換的功能。ETL作業(yè)多路并發(fā)加載的功能。ETL作業(yè)管理功能。ETL作業(yè)日志管理功能。2. 9作業(yè)智能排隊調(diào)度.作業(yè)靈活調(diào)度系統(tǒng)可以制定作業(yè)調(diào)度計

18、劃進行作業(yè)調(diào)度。對于臨時出現(xiàn)的需要緊急運行的作業(yè)，可以靈活調(diào)整作業(yè)調(diào)度計劃保證緊急 任務優(yōu)先執(zhí)行。.資源智能調(diào)整系統(tǒng)保證每個作業(yè)都能獲得相應的系統(tǒng)資源，同時對于臨時出現(xiàn)的需要緊急 運行的作業(yè)，可以靈活調(diào)整資源配置保證緊急任務優(yōu)先執(zhí)行。當一個隊列空閑，其系統(tǒng)資源可以被其他隊列搶占使用。一旦空閑隊列有作 業(yè)提交時，會返回該隊列的系統(tǒng)資源，直到滿足該隊列最低配置，甚至搶占其他 隊列資源。系統(tǒng)可以動態(tài)增加隊列，并且新提交的隊列會慢慢滿足最低資源配置，甚至搶占其他隊列資源。4.3外部服務能力子平臺4. 3.1標簽查詢服務分布式K-V數(shù)據(jù)庫采用分布式K-V數(shù)據(jù)庫,主要用于存放標簽結果數(shù)據(jù),并支持以下基礎功

19、能：.數(shù)據(jù)查詢接口以API的方式提供通用的根據(jù)key查詢value的高速查詢接口。.數(shù)據(jù)加載支持數(shù)據(jù)直接以文件或者分布式文件系統(tǒng)批量導入的方式,并提供導入的 API 接口。另外除了數(shù)據(jù)追加的方式，還需要支持數(shù)據(jù)的刪除或修改功能。.分布式模式數(shù)據(jù)存儲采用類似HDFS的分布式存儲模型,另外計算資源也需要采用分布 式集群調(diào)用的方式以此來保證數(shù)據(jù)的可靠性和系統(tǒng)的可擴展性。.統(tǒng)一的元數(shù)據(jù)管理對元數(shù)據(jù)進行統(tǒng)一的存儲和管理。并提供訪問API供業(yè)務管理平臺調(diào)用。.系統(tǒng)管理提供集群監(jiān)控、服務管理、日志管理、監(jiān)控報警等一整套系統(tǒng)管理功能。高并發(fā)查詢服務該模塊基于nginx+Apache MINA的框架開發(fā)。其中n

20、ginx提供高并發(fā)的對外 服務，而Apache MINA是一個高性能和高可用性的網(wǎng)絡應用框架?？梢酝瓿梢韵?功能：.基于token的用戶平安認證根據(jù)集團大數(shù)據(jù)業(yè)務規(guī)劃，大數(shù)據(jù)運營以“一點管控、集約運營”為原那么， 通過大數(shù)據(jù)的挖掘分析，一方面可形成對內(nèi)數(shù)據(jù)運營，為精確管理和精確營銷提 供服務，另一方面可形成對外數(shù)據(jù)運營，直接向外部合作伙伴提供大數(shù)據(jù)服務， 進一步挖掘數(shù)據(jù)資產(chǎn)的商業(yè)價值，探索基于大數(shù)據(jù)的新型應用與商業(yè)模式，實現(xiàn) 企業(yè)數(shù)據(jù)價值變現(xiàn)答復：滿足。2.2工程目標構建大數(shù)據(jù)運營平臺，實現(xiàn)數(shù)據(jù)價值變現(xiàn)：平臺可支撐向行業(yè)用戶、外部合 作伙伴提供數(shù)據(jù)出售、數(shù)據(jù)咨詢、數(shù)據(jù)能力和數(shù)據(jù)解決方案等四種業(yè)

21、務形態(tài)的數(shù) 據(jù)服務。通過對外合作的模式，可融合合作伙伴的數(shù)據(jù)內(nèi)容，根據(jù)合作伙伴和客 戶的需求，將電信的數(shù)據(jù)資產(chǎn)進行包裝，向合作伙伴提供數(shù)據(jù)服務。答復：滿足。3總體技術要求1總體要求1）投標人提供完整、最新而成熟的系統(tǒng)軟硬件等技術和產(chǎn)品。其各項技術 應保證具有開放性、可移植性、兼容性和可擴展性。答復：滿足。2）投標人提供的應用軟件應該提供開放的應用接口，可以方便的于其他廠 家應用系統(tǒng)進行軟件平臺互連，便于系統(tǒng)未來的擴展。答復：滿足。3）如果投標人目前難以到達買方所提出的技術要求，買方要求通過商務條 件使投標人承諾進行產(chǎn)品的技術升級。答復：滿足。采用基于Token （令牌）的用戶身份驗證機制，使用

22、戶在訪問受保護的服 務資源時僅需提供Token,而不需要提供用戶名和密碼。Token是包含用戶名、 有效期和某些專有信息并通過共享密鑰加密的信息字符串。對于通過Web Application訪問查詢服務的用戶來說，這種認證方式可以有 效防止服務器的用戶賬戶泄露。對于已經(jīng)授權訪問服務的用戶，獲取和使用Token的總體流程：1）用戶憑借自身的賬戶向電信申請和獲取Token02）攜帶已獲取的Token查詢有權限的數(shù)據(jù)標簽Token的生成除了需要獲取Token時用戶輸入的信息外，還需要服務器端指 定的加密密鑰。系統(tǒng)管理員可以對生成Token的加密密鑰進行配置。2.用戶訪問權限控制基于K-V數(shù)據(jù)庫的元數(shù)

23、據(jù)管理，增加用戶對元數(shù)據(jù)的權限信息，查詢訪問的 時候首先進行用戶識別，然后根據(jù)用戶的元數(shù)據(jù)權限信息進行訪問控制。3.高并發(fā)低延時的查詢接口采用web服務的方式封裝K-V數(shù)據(jù)庫的高速查詢接口，并提供短連接和長連 接兩種方式。需要支持對K-V數(shù)據(jù)庫的接口分發(fā)功能。4.查詢緩存服務對一些訪問熱度較高的數(shù)據(jù)或表通過緩存的方式提高查詢響應效率，并減少 Flash卡訪問頻率，增加壽命。3. 2 DSP廠商程序接入系統(tǒng)允許每個廠商程序?qū)氇毩⒌腃acheo系統(tǒng)支持多個廠商程序算法模型 加載和數(shù)據(jù)訪問。系統(tǒng)支持多租戶作業(yè)的統(tǒng)一任務調(diào)度。用戶提交業(yè)務應用作業(yè) 申請，云平臺統(tǒng)一封裝各業(yè)務應用作業(yè)。如果用戶網(wǎng)絡時延

24、較大，可以有以下兩種方式實現(xiàn)實時數(shù)據(jù)查詢：1）將K/V內(nèi)存數(shù)據(jù)庫安裝于用戶端。2）系統(tǒng)進行數(shù)據(jù)分發(fā)。3. 3廠商作業(yè)性能優(yōu)化SQL語句優(yōu)化系統(tǒng)支持SQL語句優(yōu)化，可以解決數(shù)據(jù)傾斜的問題。系統(tǒng)提供MapReduce定制服務，當SQL語句效率不高時，可以將SQL語句轉(zhuǎn) 化成高效的MapReduce作業(yè)直接執(zhí)行。MapReduce 定制服務我們提供MapReduce定制服務，當SQL語句效率不高時，可以將SQL語句轉(zhuǎn) 化成高效的MapReduce作業(yè)直接執(zhí)行。SQL語句會產(chǎn)生大量的中間數(shù)據(jù)，從而影響作業(yè)執(zhí)行效率。MapReduce不產(chǎn) 生中間數(shù)據(jù)。MapReduce作業(yè)和SQL語句相比擬，作業(yè)執(zhí)行效

25、率可以提高37倍。3. 4交互式SQL查詢用戶可以通過圖形化界面定義查詢參數(shù)，執(zhí)行自己的查詢?nèi)蝿?。系統(tǒng)接口如下：系統(tǒng)兼容標準的SQL語法，可以通過SQL語句訪問查詢。系統(tǒng)支持JDBC連接方式，適合JAVA應用。系統(tǒng)支持ODBC連接方式，適合WIN應用。系統(tǒng)提供CLI命令接口，適合UNIX應用。系統(tǒng)支持Corba協(xié)議，適合IDL服務對象接口。系統(tǒng)支持SOAP協(xié)議，適合遠程RPC調(diào)用。3. 5在線報表系統(tǒng)提供豐富的報表展現(xiàn)形式，支持表格、餅圖、柱狀圖、折線圖，用戶可 以自由選擇報表展現(xiàn)形式。報表的定義和配置都要求可視化的靈活操作，要求可見即可得，且結果能夠 靈活導出。生成的報表可輸出各種文件格式，

26、如EXCEL、HTML. XML、RTF等。4.4信息推送子平臺4. 4. 1流量分發(fā)模塊可以控制流量的轉(zhuǎn)發(fā)，流量分發(fā)模塊，可以精準的將符合業(yè)務的需求流量轉(zhuǎn) 發(fā)到指定的服務器上，對不符合廣告投放的流量，不做分發(fā)引導。在流量轉(zhuǎn)發(fā)的 過程中，可以將一份流量同時轉(zhuǎn)發(fā)多份到多個服務器上。也可以提供多種流量分 發(fā)的規(guī)那么。使系統(tǒng)具備多種流量轉(zhuǎn)發(fā)的規(guī)那么。從而提升廣告推送效率和精準度， 減輕服務器壓力。域名、URL配置規(guī)那么通過設置域名、URL規(guī)那么，可以對指定的域名和URL的報文，進行解析?？?制定向域名的流量分發(fā)或者禁止指定域名的分發(fā)。從而實現(xiàn)流量轉(zhuǎn)發(fā)的精細控 制。特定域名和URL擁有加*實現(xiàn)模糊匹配

27、的功能。轉(zhuǎn)發(fā)總流量控制規(guī)那么可以設置轉(zhuǎn)發(fā)流量的總量，一旦超出設置的總量，將停止轉(zhuǎn)發(fā)。441.3頻次控制規(guī)那么可對用戶的流量轉(zhuǎn)發(fā)到服務器的頻次進行控制。具體根據(jù)用戶ADSL和IPo定向策略控制規(guī)那么定向策略是對受眾的篩選，即廣告的顯示是根據(jù)訪問者來決定的，平 臺提供多種多樣的定向方式。定向傳播可以按訪問者的行業(yè)、地理區(qū)域、職務等 選擇不同的廣告出現(xiàn)，根據(jù)一天或一周中不同的時間出現(xiàn)不同性質(zhì)廠商的廣告， 根據(jù)用戶所使用的操作系統(tǒng)或瀏覽器版本選擇不同廣告格式，等等。可以精確定 為廣告受眾，提高廣告效果。根據(jù)用戶偏好對其投放感興趣的廣告。以多維定向 為基礎，結合多種廣告形式（圖片BANNER、文字點擊、

28、富媒體廣告），利用多 種付費形式（包括彈窗付費、點擊付費、注冊付費、銷售分成以及競價付費）， 使廣告性價比得到最大的提升。441.5黑名單控制依據(jù)IP和ADSL兩個維度的黑名單設置，那么是用來控制哪些用戶的流量不做 分發(fā)，來保證一些用戶的體驗和隱私。諸如政府機關等機構的流量要防止分發(fā)。4. 4. 2廣告推送模塊廣告推送模塊是該系統(tǒng)的核心模塊，根據(jù)各種設置項實現(xiàn)運營商流量的廣告 營銷策略，幫助運營商實現(xiàn)流量變現(xiàn)。4. 4. 3廣告提單系統(tǒng)4.431廣告投放規(guī)那么管理廣告的投放規(guī)那么管理是指可以根據(jù)業(yè)務的需求對某一個廣告或者一類廣告 指定投放規(guī)那么。投放規(guī)那么可以按照投放頻率、觸發(fā)時段、投放日期時

29、間、適用客 戶群等進行設置。按地域要求平臺支持指定廣告投放在特定地域的用戶。比方某幾個市的用戶O按廣告預算要求平臺支持根據(jù)廣告預算來自動匹配廣告位，以到達有限預算的情況下效 益最大化。平臺根據(jù)廣告主的廣告預算和平臺現(xiàn)有的廣告位組合，按最優(yōu)算法進 行廣告匹配。其它定制策略要求平臺提供接口，可對現(xiàn)行的投放策略進行定制。投放規(guī)那么管理是整個平臺精確投放的關鍵。通過審核的廣告投放，將會由系 統(tǒng)根據(jù)條件自動觸發(fā)投放。平臺自動根據(jù)投放策略進行廣告主廣告與網(wǎng)站廣告位 之間的匹配，匹配成功即進行廣告投放。平臺提供以下各個策略以供廣告主選擇: 流量打包及分割、按用戶區(qū)域、按廣告預算等。各個策略可以交叉使用。廣告

30、頁面被訪問投放策略應用廣告顯示圖中的“投放策略應用”為并行處理，平臺的廣告投放量大時，可以通過增 加服務器的方式動態(tài)擴展平臺的能力。表查看排期表是在投放審核通過后系統(tǒng)自動生成的排期記錄。排期表查看是供浙江電信互聯(lián)網(wǎng)廣告管理和推送系統(tǒng)內(nèi)部人員使用的功能， 用于方便跟蹤廣告的排期及投放情況?？砂搭愋?、欄目、年、月查看所有定位記錄?？煽吹脚牌诒碇忻總€單據(jù)的客戶廣告定位情況及成交價格?？煽吹綇V告排期 的相關信息（廣告主名稱、銷售人員、審核人員等信息）。廣告主自助管理廣告主是廣告投放的主體，在做廣告投放之前首先要創(chuàng)立相應的廣告主。當 需要為新的廣告主進行廣告投放時，需要創(chuàng)立相應的廣告主。要求系統(tǒng)支持對廣

31、告主增加、修改、刪除以及廣告主投放廣告的查詢 統(tǒng)計 等管理功能。自注冊廣告主可在自助門戶上進行自注冊，自助注冊界面中允許廣告主填寫相關信 息，并可粘貼附件；查詢/修改功能廣告主登錄系統(tǒng)之后可查看自己的相關信息，并可提出修改申請。修改申請 被系統(tǒng)管理員審批通過之后才能生效。申請廣告主自服務門戶應為廣告主提供WEB界面，廣告主通過WEB界面進行廣告 申請、物料上傳、物料刪除等。廣告主也可以通過WEB界面查詢廣告申請的進展 情況。業(yè)務修改廣告主自服務門戶應為廣告主提供業(yè)務修改功能。對于申請狀態(tài)下的業(yè)務， 廣告主可以直接修改，對于其它狀態(tài)下的業(yè)務，廣告主需要提交廣告業(yè)務修改申 請，由系統(tǒng)管理員負責修改

32、。自服務及其他功能廣告主賬單查詢及打印帳單。提供分時間、分產(chǎn)品的廣告購買明細及相 關統(tǒng)計信息等。結算數(shù)據(jù)查詢。權限管理管理員可設置用戶群組，并將不同的用戶歸入不同的群組。群組可按用戶權 限不同進行劃分：如系統(tǒng)管理員、管理人員、廣告營銷人員、營銷客服人員、市 場部人員、財務人員。此外，還有廣告主。4.4310廣告主賬號管理系統(tǒng)管理員可對用戶進行管理用戶驗證增加用戶（為客戶開通登錄帳號）編輯用戶資料停用用戶帳號（停用帳號后與其相關的單據(jù)仍舊保存）刪除用戶（刪除用戶前必須先停用用戶帳號）4.4311廣告審核有投放審核權限的人員對指定日期的注冊用戶的申請進行投放審核、續(xù)費 審核、特批審核或取消所有審核

33、。審核t青況以郵件的形式通知到注冊用戶,用 戶登錄廣告投放系統(tǒng)后也能收到審核情況的通知。審核人員審核申請可直接查 看申請單據(jù)內(nèi)容，審核投放申請時，系統(tǒng)自動生成審核人員及審核日期信息。4. 4. 4廣告提單系統(tǒng)用戶可以創(chuàng)立廣告計劃，在廣告計劃中，由四局部組成：廣告計劃報表、新 建或編輯廣告計劃、導出廣告計劃報表、搜索廣告計劃的功能。廣告計劃報表可 查看廣告計劃的預算、狀態(tài)、展示次數(shù)、點擊次數(shù)、點擊率、展示和點擊費用、 總費用；新建廣告計劃包括選擇所屬的行業(yè)，廣告計劃的預算、結算類型、選擇 廣告投放的周期及投放時間段。定義完廣告計劃后，可以在廣告計劃中定義廣告組。廣告組中定義廣告的投 放策略，包括

34、：地域定向、關鍵詞定向、興趣組定向、用戶訪問行為定向、用戶 點擊行為定向。定義完成后，執(zhí)行下一步廣告定義。定義完廣告組后，可以在廣告組下創(chuàng)立廣告。用戶可以選擇廣告類型、素材 形式、上傳廣告素材。營銷推送記錄管理1）投放效果報告廣告主可查看自己的投放效果報告（按周更新廣告投放效果報告）。查看廣告點擊量查看頁面點擊量廣告點擊量與頁面點擊量的比率本廣告與歷史投放的類同（同級頁面）的點擊量變化比照等2）點擊量查詢當用戶選擇的是按點擊量計算價格的廣告位時，當廣告投放生效后，系統(tǒng)自 動記錄此廣告的點擊次數(shù)，并按天/周/月進行統(tǒng)計，用戶可隨時查看自己的廣告 的點擊次數(shù)。444.2預算管理廣告計劃下的總投放控

35、制金額。如果預算金額不填寫，系統(tǒng)投遞過程中不會 做費用控制。廣告計劃中如果總預算和實際投放用不同，取兩者中比擬小的計費。 廣告計劃下每日投放控制金額，投放到達每日預算金額，投放自動停止。如果每 日預算金額不填寫，互動營銷平臺在廣告投遞過程中不做每日費用控制。報表系統(tǒng)該模塊主要是對系統(tǒng)中的業(yè)務數(shù)據(jù)及日志進行統(tǒng)計和分析。對于存儲于數(shù)據(jù)庫中的業(yè)務數(shù)據(jù)，如廣告位的使用率、投放金額等，通過編 寫相應的SQL語句進行分析。而對于需要通過分析日志而得出結果的統(tǒng)計，那么采取定時進行日志分析的方 法，如某個廣告的點擊數(shù)，如果采取一天分析一次日志的方法，實時性不夠；為 了做到更“實時”，那么采取半小時進行一次日志

36、分析的方法，將分析結果存入數(shù) 據(jù)庫，并對已經(jīng)分析過的日志文件做標記，下次分析時不再重復分析。分析新的 日志文件時，將分析結果與上次的分析結果進行合并并存入數(shù)據(jù)庫中?？筛鶕?jù)不同的需求生成統(tǒng)計某一時間段、標簽用戶的推送效果的報表。包括 廣告類型、所屬計劃、所屬組、所屬計劃預算、狀態(tài)、展示次數(shù)、點擊次數(shù)、總 費用。444.4廣告匹配系統(tǒng)平臺運營商可以根據(jù)要求，在平臺上實施不同的廣告匹配規(guī)那么，如在平臺運 營初期可以按網(wǎng)站的類型進行匹配，隨著用戶行為數(shù)據(jù)的收集，可以將用戶行為 數(shù)據(jù)作為廣告匹配的依據(jù)。因此，平臺必須可以靈活地設置匹配規(guī)那么。廣告匹配示意圖在平臺上實施不同的廣告匹配規(guī)那么，平臺運營可以按

37、網(wǎng)站的類型進行匹配， 隨著用戶行為數(shù)據(jù)的收集，可以將用戶行為數(shù)據(jù)作為廣告匹配的依據(jù)。因此，平 臺必須可以靈活地設置匹配規(guī)那么。這種規(guī)那么的優(yōu)勢在于，匹配系統(tǒng)盡可能實現(xiàn)了4）投標人應詳細說明本期工程所提供設備配置的處理能力、容量以及最大 擴容可到達的處理能力及容量，說明系統(tǒng)容量受限制的原因，并提供系 統(tǒng)進一步擴容的方案?？梢园葱钄U充集群，需要額外的運算能力和存儲 能力，可以靈活的加入節(jié)點到集群當中，并保持良好的線性擴展能力。 答復：滿足。5）如設備為OEM第三方產(chǎn)品，投標人應說明該產(chǎn)品的原生產(chǎn)廠商。 答復：滿足。6）投標人應保證系統(tǒng)割接不能中斷業(yè)務，也不能影響原有業(yè)務數(shù)據(jù)。 答復：滿足。7）如果

38、投標人目前難以到達買方所提出的技術要求，買方要求通過商務條 件使投標人承諾進行產(chǎn)品的技術升級。答復：滿足。8）投標人應根據(jù)買方的業(yè)務需求及相關的技術規(guī)劃要求，提出完整的工程 管理、系統(tǒng)設計、工程培訓、工程施工、工程驗收、技術支持方案以及 投標人人力資源供給方案，投標人負責建立并向買方提交工程技術文檔。 答復：滿足。3.2系統(tǒng)要求基本要求1）要求采用Hadoop分布式處理架構，符合未來大數(shù)據(jù)管理技術的開展潮 流。答復：滿足。輕量化，從而提高了匹配速度。在運營商廣告推送系統(tǒng)中，匹配速度提升是重中 之重，從而極大提升了廣告位容量。每個用戶請求均需求根據(jù)匹配規(guī)那么進行廣告 匹配運算，并且對實時性要求較

39、高，必須在用戶可以接受的時間范圍內(nèi)得出結果 并實施廣告投放。并且隨著對精確投放的要求越來越高，保持平臺的性能，使之 能精準而快速地投放廣告，匹配系統(tǒng)可以配置匹配的黑白名單，及每個用戶的最大匹配次數(shù)和頻率，在 盡量不降低用戶體驗的前提下，實現(xiàn)廣告推送業(yè)務。黑白名單的配置，分為網(wǎng)站、 IP、ADSL用戶三個維度進行設置。其中網(wǎng)站維度控制哪些網(wǎng)站的流量不做匹配, 最大限度實現(xiàn)業(yè)務平安。利用IP和ADSL分析，來控制哪些用戶的流量不做匹配。4. 4. 5廣告檢索系統(tǒng)廣告檢索系統(tǒng)通過應用于WAP站請求，在合適的位置，對合適的用戶，展示 最合適的廣告。用戶通過終端訪問媒體，媒體通過嵌入的SDK代碼向平臺發(fā)

40、送廣 告請求，平臺根據(jù)用戶所使用的機型和操作系統(tǒng)、所處的地理位置、所處的網(wǎng)絡 接入狀況、當前所訪問的資源信息等等一系列的條件，對應的廣告檢索模塊的網(wǎng) 頁分類和用戶興趣分類的關聯(lián)映射矩陣，使廣告主題、廣告分類、關鍵詞等多種 特征融合，并將這些特征作為廣告匹配檢索條件，按照權重對檢索結果進行排序, 在廣告庫里選擇一條當前最合適展示給的廣告發(fā)送給媒體，提高廣告推送的精確 度。445.1廣告選擇由于用戶在訪問媒體的時候所處的網(wǎng)絡環(huán)境各不相同。因此在廣告檢索模 塊，通過對廣告資源管理中心的所有有效廣告資源建立索引，并通過增量索引機 制，定時維護更新。從而實現(xiàn)根據(jù)廣告查詢請求提供的用戶標簽、域名、地域等

41、進行選擇。這些列表中的廣告需符合投放排期、時間段、地域、廣告狀態(tài)、廣告 形式（嵌入式、浮窗）和廣告尺寸等約束條件的限制。對廣告請求包括請求重試和容災備份，根據(jù)廣告模板生成廣告樣式，點擊串 的生成與展示日志生成，對于廣告的選擇根據(jù)終端的信息特征，在廣告庫種進行計算，從而檢索出一條最合適展示的廣告。如果當前滿足多個廣告展示，平臺將 平衡流量將廣告進行依次排隊推送。cookie 管理通過全局唯一 cookie標示生成、客戶端cookie植入、cookie推送信息記 錄和查詢、cookie mapping等。其中全局cookie標志生成主要用于當有cookie 植入請求發(fā)生時，自動生成一個全局唯一的c

42、ookie標識串，用于用戶身份唯一 標記。Cookie Mapping就是將用戶隸屬于SSP的Cookie與隸屬于DSP的 Cookie進行映射。Cookie Mapping工作需要兩個數(shù)據(jù)，分別是用戶隸屬于SSP 方的Cookie及用戶隸屬于DSP方的Cookie,同時需要SSP方或者DSP方進 行數(shù)據(jù)的映射工作。將自有cookie與運營商流量中的其他域名cookie進行關聯(lián)。 如百度 cookie、360 cookie 淘寶 cookie,通過 cookie mapping 技術打通用 戶在不同域名上的行為，使用戶畫像更加全面飽滿。頻次控制同一廣告可通過多個媒體業(yè)務進行組合投放，平臺需支持

43、跨媒體業(yè)務去重的 功能，即同一個廣告只給同一個用戶在N天的時間內(nèi)最多發(fā)送M次。在創(chuàng)立廣告 組過程中可以填寫頻次控制信息實現(xiàn)。分為cookie、IP、ADSL頻次控制三種。 Cookie頻次控制，是指每個cookie只推送設定的次數(shù)（如一次）；IP頻次控制 指每個IP只推送預訂次數(shù)，而無論該IP下有多少臺終端設備；ADSL頻次是根 據(jù)運營商AD賬號，每個賬號僅推送預訂次數(shù)（每個ADSL可能會動態(tài)更新多個 IP） O標簽定向標簽定向從現(xiàn)有廣告系統(tǒng)、流量分析系統(tǒng)等系統(tǒng)獲取的信息主要是描述用戶 的基本屬性、通信消費能力、位置信息等行為屬性，這些信息一般不能夠直接作 為用于廣告投放的標簽（簡稱為廣告標簽

44、）來使用，廣告標簽側(cè)重描述用戶的社 會人群特征、消費能力、產(chǎn)品與服務購買傾向性等社會行為屬性。平臺具備將用戶的通信業(yè)務行為屬性轉(zhuǎn)換為能夠被廣告主/代理商所理解的 社會行為屬性，并創(chuàng)立用戶廣告標簽，如年收入范圍、是否有車、音樂喜好、是 否經(jīng)常旅游等。采用特定的數(shù)據(jù)挖掘算法（聚類算法、分類算法），分析出用戶 的特定屬性特征，進而形成受眾廣告標簽。并將分析結果導入標簽庫。也支持第 三方自定義標簽的離線導入，標簽庫用redis進行管理，支持key-value結構數(shù) 據(jù)的快速查詢。狀態(tài)控制當用戶賬號、廣告計劃、廣告策略、廣告素材四個局部處于正確的狀態(tài)才可 以進行廣告的推送。用戶賬號的狀態(tài)需滿足賬戶內(nèi)的余

45、額大于0才可以進行賬戶下的廣告推送。廣告計劃需要滿足廣告的預算。需要由運營管理人員對其進行審批，審批通 過后，廣告計劃，廣告生效，否那么可將廣告計劃，廣告返回給創(chuàng)立人進行修改。 每個廣告計劃都可以設置每天投放預算，預算狀態(tài)是指預算是否消耗完成，消耗 完預算的廣告計劃當天不再推送，第二天凌晨會自動將預算恢復成可投狀態(tài)。時 段狀態(tài)主要用于判斷廣告計劃是否在預定推送周期內(nèi)。人工可以對其啟動、刪除 或暫停三種狀態(tài)。廣告組需要滿足啟用狀態(tài)。擁有啟動、刪除或暫停三種狀態(tài)。廣告有廣告中止，廣告修改，廣告撤銷三種狀態(tài)。廣告修改：廣告審批通過 后，只有廣告中止后才能修改廣告內(nèi)容，廣告內(nèi)容修改完成后，仍需提交到運

46、營 管理員進行審批，審批通過后，廣告再次處于待執(zhí)行狀態(tài)。廣告中止：廣告中止 是指對于一個時間跨度較長的廣告在執(zhí)行過程中由于某種原因被強行中止，中止 后，廣告處于“執(zhí)行中止”狀態(tài)，被中止的廣告還可被恢復繼續(xù)執(zhí)行，直到廣告 的結束時間執(zhí)行完畢廣告中止的場景可能是由于政策或其他突發(fā)原因?qū)е虏辉?許繼續(xù)投放廣告，或者出于廣告投放效果的考慮，廣告主不希望再繼續(xù)執(zhí)行該廣 告。廣告中止需由直客廣告主提交中止申請，然后由運營管理人員審批通過后方 可生效。廣告中止時，相應廣告位和用戶資源釋放。廣告撤銷是指廣告在執(zhí)行中、 中止、生效待執(zhí)行狀態(tài)下都可進行撤消；廣告被撤銷后處于“已撤銷”狀態(tài)，且 不能被重新啟用，如果

47、已經(jīng)有局部廣告投放了，已投放廣告仍然正常計費。廣告 撤銷需由廣告主/代理商提交撤銷申請，然后由運營管理人員審批通過后方可生 效。廣告被撤銷后，系統(tǒng)自動釋放相應的廣告位和用戶資源。4. 4. 6內(nèi)部業(yè)務支撐信息推送平臺可以作為電信內(nèi)部業(yè)務營銷的支撐平臺，面向內(nèi)部客戶，可以 通過平臺時時推送一些消費服務提醒信息，可以根據(jù)后臺數(shù)據(jù)分析，獲取用戶偏 好，量身定制推送用戶可能適用的產(chǎn)品或套餐。平臺提供統(tǒng)一的推送策略管理功能，實現(xiàn)對如下內(nèi)部業(yè)務信息的支持，后續(xù) 支持更多規(guī)那么的擴展：3）用戶實時流量提醒規(guī)那么無套餐用戶使用實時提醒套餐使用量提醒4）用戶行為套餐分析通用套餐推薦個性化套餐推薦三、產(chǎn)品配置清單

48、1、大數(shù)據(jù)處理子平臺大數(shù)據(jù)處理子平臺產(chǎn)品配置清單如下:編號系統(tǒng)功能系統(tǒng)功能描述1平臺平安管控平臺平安管控2平臺資源管理平臺資源管理3平臺數(shù)據(jù)授權平臺數(shù)據(jù)授權4平臺統(tǒng)一管理平臺統(tǒng)一管理5集中監(jiān)控告警管理集中監(jiān)控告警管理6可視化業(yè)務管理可視化業(yè)務管理7同步標簽服務同步標簽服務8離線標簽服務離線標簽服務2、數(shù)據(jù)匯聚子平臺數(shù)據(jù)匯聚子平臺產(chǎn)品配置清單如下:編號系統(tǒng)功能系統(tǒng)功能描述1寬帶DPI數(shù)據(jù)采集清洗寬帶DPI數(shù)據(jù)米集清洗23G DPI數(shù)據(jù)采集清洗3G DPI數(shù)據(jù)采集清洗3AAA數(shù)據(jù)米集清洗AAA數(shù)據(jù)采集清洗4OIDD數(shù)據(jù)采集清洗OIDD數(shù)據(jù)采集清洗5ODS數(shù)據(jù)采集清洗ODS數(shù)據(jù)采集清洗6數(shù)據(jù)脫敏數(shù)據(jù)

49、脫敏編號系統(tǒng)功能系統(tǒng)功能描述7數(shù)據(jù)加密數(shù)據(jù)加密8數(shù)據(jù)ETL處理數(shù)據(jù)ETL處理3、外部服務能力子平臺外部服務能力子平臺產(chǎn)品配置清單如下:編號系統(tǒng)功能系統(tǒng)功能描述1標簽查詢服務標簽查詢服務2DSP廠商程序接入服務DSP廠商程序接入服務3廠商作業(yè)性能優(yōu)化服務廠商作業(yè)性能優(yōu)化服務4交互式SQL查詢服務交互式SQL查詢服務5在線報表在線報表4、信息推送子平臺信息推送子平臺產(chǎn)品配置清單如下:編號系統(tǒng)功能系統(tǒng)功能描述1流量分發(fā)模塊流量分發(fā)服務2廣告推送模塊廣告推送服務3廣告提單系統(tǒng)廣告提單服務4廣告引導系統(tǒng)廣告引導服務5廣告檢索系統(tǒng)廣告檢索服務6內(nèi)部業(yè)務支撐內(nèi)部業(yè)務支撐四、所提供設備情況本工程基于Hadoo

50、p分布式云計算平臺構建大數(shù)據(jù)運營平臺，包含以下四 個子平臺：數(shù)據(jù)匯聚子平臺寬帶DPI數(shù)據(jù)采集清洗3G DPI數(shù)據(jù)采集清洗AAA數(shù)據(jù)采集清洗0IDD數(shù)據(jù)采集清洗ODS數(shù)據(jù)采集清洗數(shù)據(jù)脫敏數(shù)據(jù)加密數(shù)據(jù)ETL處理作業(yè)智能排隊調(diào)度大數(shù)據(jù)處理子平臺平臺平安管控平臺資源管理平臺數(shù)據(jù)授權平臺統(tǒng)一管理集中監(jiān)控告警管理可視化業(yè)務管理標簽服務外部能力開放子平臺標簽查詢服務DSP廠商程序接入服務廠商作業(yè)性能優(yōu)化服務交互式SQL查詢服務在線報表信息推送子平臺 流量分發(fā)模塊 廣告推送模塊 廣告提單系統(tǒng) 廣告引導系統(tǒng) 廣告檢索系統(tǒng) 內(nèi)部業(yè)務支撐五、系統(tǒng)連接示意圖本工程為軟件產(chǎn)品，系統(tǒng)架構為：信息推送子平臺外部能力開放子平

51、臺大數(shù)據(jù)處理子平臺數(shù)據(jù)匯聚子平臺hadoop平臺寬帶DPI數(shù)據(jù)3G DPI數(shù)據(jù) AAA數(shù)據(jù) 0IDD數(shù)據(jù)ODS數(shù)據(jù)數(shù)據(jù)源六、場地及環(huán)境準備要求為了保證本期工程的順利展開，浙江電信應在工程開始一周前做好機房所有 準備工作，包括：一設備到位一動力電源到機架到位一傳輸線路調(diào)試暢通等。2）具有支持結構化、半結構化以及非結構化數(shù)據(jù)處理能力，支持多種多樣 的數(shù)據(jù)類型，結構化，非結構化以及混合負載。答復：滿足。3）支持多語種，支持UNICODE標準滿足中文及多字節(jié)編碼需要，支持中文 國家標準（GB18030-2000）的中文字符的存儲處理。答復：滿足。4）支持主流廠商的硬件和操作系統(tǒng)平臺，如Centos等免

52、費操作系統(tǒng)、Red Hat Linux, SUSE Linux （x86-64 /PLinux）等。答復：滿足。5） Hadoop平臺需要能夠基于軟件而不是硬件綁定的方式進行部署。答復：滿足。6）平臺具有較強的可兼容性，提供向下兼容機制。答復：滿足。7）分布式的框架，支持基于x86的廉價集群方式進行大規(guī)模部署，處理海 量PB級別的數(shù)據(jù)。答復：滿足。8）半結構化和非結構化數(shù)據(jù)分析和管理平臺支持大規(guī)模分布式計算和分布 式存儲。答復：滿足。3. 2. 1. 1功能性要求I）支持多CPU系統(tǒng)并行處理，提供并行服務機制，能在系統(tǒng)資源低負擔的條件下提供最高的并發(fā)度和最大的吞吐量。七、工程進度安排工程進度安

53、排如下:編號工作內(nèi)容詳細內(nèi)容時間周期1到貨驗收本工程合同設備（包括軟硬件） 到貨驗收1天2設備安裝調(diào)試大數(shù)據(jù)平臺服務器安裝和調(diào) 試、操作系統(tǒng)安裝、大數(shù)據(jù)平 臺應用軟件安裝調(diào)試及網(wǎng)絡接 入15天3初驗系統(tǒng)的整體功能驗收4天4試運行系統(tǒng)試運行6個月5終驗系統(tǒng)的整體功能終驗5天八、分工界面雙方職責分工如下：中國電信浙江公司.負責提供大數(shù)據(jù)運營平臺所需的硬件設備；.負責提供大數(shù)據(jù)運營平臺所需的網(wǎng)絡并保證網(wǎng)絡傳輸暢通穩(wěn)定;.負責工程協(xié)調(diào)；.負責工程驗收；華信郵電咨詢設計研究院.負責平臺服務器的軟件安裝調(diào)試.負責大數(shù)據(jù)運營平臺系統(tǒng)聯(lián)調(diào)；.負責工程進度管控.配合工程驗收九、測試及驗收1、功能驗收大數(shù)據(jù)處理子

54、平臺功能驗收:功能編號功能名稱驗收結果1平臺平安管控2平臺資源管理3平臺數(shù)據(jù)授權4平臺統(tǒng)一管理5集中監(jiān)控告警管理6可視化業(yè)務管理7同步標簽服務8離線標簽服務數(shù)據(jù)匯聚子平臺功能驗收:功能編號功能名稱驗收結果1寬帶DPI數(shù)據(jù)米集清洗23G DPI數(shù)據(jù)采集清洗3AAA數(shù)據(jù)采集清洗4OIDD數(shù)據(jù)采集清洗5ODS數(shù)據(jù)采集清洗6數(shù)據(jù)脫敏7數(shù)據(jù)加密8數(shù)據(jù)ETL處理9作業(yè)智能排隊調(diào)度外部服務子平臺功能驗收:功能編號功能名稱驗收結果1標簽查詢服務2DSP廠商程序接入服務3廠商作業(yè)性能優(yōu)化服務4交互式SQL查詢服務5在線報表信息推送子平臺:功能編號功能名稱驗收結果1流量分發(fā)模塊2廣告推送模塊3廣告提單系統(tǒng)4廣告引

55、導系統(tǒng)5廣告檢索系統(tǒng)6內(nèi)部業(yè)務支撐2、驗收總結總結驗收及測試，陳述發(fā)現(xiàn)問題和建議等。驗收人：驗收時間:十、培訓計劃1、培訓目的為了保證大數(shù)據(jù)平臺建成后能夠穩(wěn)定、可靠地長期運行，并能充分發(fā)揮大 數(shù)據(jù)平臺的功能，我們特此制定詳細的免費培訓計劃，讓浙江電信能夠最大限 度地掌握該系統(tǒng)的使用方法，并能獨立判斷與排除日常常見故障。我們將建立 完善的溝通渠道，不斷向用戶提供最新的信息系統(tǒng)技術，使用戶能夠不斷提高 自己的業(yè)務水平?；趶姶蟮募夹g儲藏與高素質(zhì)的客戶服務工程師，我們的培訓能力與培訓 效果一直很受用戶的好評。我們將以深厚的專業(yè)知識與敏銳的洞察力，為該系 統(tǒng)的建成與使用提供良好的技術咨詢與培訓服務，為

56、整個工程順利實施打下堅 實的基礎。2、培訓方式我們將為用戶提供兩類培訓。系統(tǒng)操作人員培訓：使用人員培訓是普及型培訓，目的是讓操作人員對整 個大數(shù)據(jù)平臺的原理、運作、故障排除有充分了解，學習整個系統(tǒng)的調(diào)試和維 護。系統(tǒng)管理人員培訓：管理人員培訓是面向平臺管理人員，目的是使平臺管理人員了解各個設備的工作原理，獨立進行常見故障的判斷與排除。3、培訓內(nèi)容培訓內(nèi)容：結合大數(shù)據(jù)運營平臺操作手冊和維護手冊，對系統(tǒng)的基本原理、 總體功能、平臺操作進行整體全面的培訓，并接受工作人員的具體技術咨詢。 對系統(tǒng)日常出現(xiàn)的輕微故障的處理方法進行現(xiàn)場講解分析、指導。十一、技術承諾我們承諾：在本工程中投入技術精湛、業(yè)務熟悉

57、、經(jīng)驗豐富的穩(wěn)定工程實施隊伍， 并保證全體人員具有合理的配備和技術構成；采用目前先進、成熟的技術，并充分利用先進技術的技術特征，以保證 本系統(tǒng)具有較長的產(chǎn)品生命周期和產(chǎn)品質(zhì)量全面滿足局方標書中技術規(guī)范的要求，努力使局方滿意，與浙江電信通 力協(xié)作，以使本工程的建成能為浙江電信真正帶來價值。本工程所采用的技術，我們將毫無保存的共享給局方技術人員，進行相 關技術知識轉(zhuǎn)移。十二、技術服務、支持、保修浙江電信大數(shù)據(jù)平臺售后服務內(nèi)容包括：.服務響應及維修服務保修期內(nèi)我方免費提供預防性現(xiàn)場維護巡檢服務，巡檢結束后提供巡檢報 告。我公司為本工程提供1年的免費維修期和免費軟件升級。我公司承諾響應時間為1小時。我

58、公司對所提供的軟硬件系統(tǒng)提供滿意的熱線服務，隨時解決所發(fā)生的問 題。如發(fā)生緊急故障，在得到通知后，我公司在1小時內(nèi)作出實質(zhì)性響應，在遠 程不能解決問題的情況下，確保在“車程+1小時”之內(nèi)趕到現(xiàn)場，實地解決問 題。. 支持服務服務內(nèi)容包括在使用產(chǎn)品過程中的故障處理咨詢和在使用產(chǎn)品過程中的使 用技巧咨詢。在正常辦公時間內(nèi)，用戶可以通過熱線 與公司。非正常工作時間，可撥 打提供的手機尋求支持。技術支持人員會盡量即時在 中幫助用戶解決問題，假設當時不能馬上解 決，熱線人員會記錄用戶單位的名稱，聯(lián)系 及聯(lián)系人，在得到解決方案后， 立刻主動與用戶聯(lián)系。.現(xiàn)場服務及響應 支持服務無法解決的硬件或軟件故障，本

59、公司將在1小時內(nèi)做出響應， 在遠程不能解決問題的情況下，確保在“車程+1小時”之內(nèi)趕到現(xiàn)場，實地解 決問題。.巡檢服務我公司提供每年的1次巡檢服務，巡檢的目的是監(jiān)測用戶系統(tǒng)運行狀況，及 使發(fā)現(xiàn)和解決出現(xiàn)的問題，保證系統(tǒng)穩(wěn)定高效運行。本公司的巡檢包括現(xiàn)場巡檢 和 巡檢兩局部。巡檢結束后填寫巡檢記錄，并上交存檔。.優(yōu)化服務我公司將不遺余力地協(xié)助用戶對該工程提出進一步的優(yōu)化方案。我公司將配合用戶或第三方對該工程予以優(yōu)化。根據(jù)用戶要求開發(fā)軟件和其 它增值服務。.系統(tǒng)升級我公司對本工程提供軟件升級服務。軟件升級和增強版本可能包括對已發(fā)現(xiàn) 問題的修正及對新硬件平臺的支持。我公司客服中心技術人員將時刻跟蹤軟

60、件產(chǎn)品的最新信息，當軟件產(chǎn)品發(fā)布 升級軟件或增強版本時，客服中心技術人員將立即對軟件的新版本進行必要的測 試，判斷該升級軟件對用戶系統(tǒng)的實際意義，并與用戶技術人員一起分析軟件升 級的必要性。如果需要進行軟件升級，本公司技術人員會編寫出詳細的軟件升級 方案，與相應的升級軟件一起下發(fā)到用戶，同時以 支持或者現(xiàn)場服務的方式 協(xié)助用戶技術人員完成升級工作。.保修服務我公司為本工程提供2年的免費保修。保修期滿后，公司維修響應時間、服 務質(zhì)量承諾不變。保修期滿后，公司仍提供免費技術咨詢，但提供有償維修服務。 保修期滿后，公司免費提供軟件升級版本。保修期內(nèi)本公司免費提供預防性現(xiàn)場 維護巡檢服務，巡檢結束后提