5G通信大數(shù)據(jù)分析與應(yīng)用 習(xí)題及參考答案匯 第1-7章

1.大數(shù)據(jù)技術(shù)各國都加大了投入，具體表現(xiàn)有哪些？參考答案：美國把大數(shù)據(jù)研究和生產(chǎn)計(jì)劃提高到國家戰(zhàn)略層面；英國在五年內(nèi)投資1000萬英鎊建立世界上首個(gè)“開放數(shù)據(jù)研究所”；法國投入3億歐元資金用于推動(dòng)大數(shù)據(jù)領(lǐng)域的發(fā)展；日本公布了新IT戰(zhàn)略——“創(chuàng)建最尖端IT國家宣言”；印度在數(shù)據(jù)開放方面效仿美國政府的做法，制定了一個(gè)一站式政府?dāng)?shù)據(jù)門戶，把政府收集的所有非涉密數(shù)據(jù)集中起來等。2.NHBigdata大數(shù)據(jù)平臺(tái)的特點(diǎn)有哪些？參考答案：1.多源數(shù)據(jù)的高效集成2.異構(gòu)數(shù)據(jù)的海量存儲(chǔ)3.場景豐富的計(jì)算框架4.海量數(shù)據(jù)的實(shí)時(shí)分析挖掘5.統(tǒng)一的平臺(tái)化管理監(jiān)控6.便捷易用的數(shù)據(jù)操作7.立體化的數(shù)據(jù)安全8.多樣化的通信實(shí)訓(xùn)案例9.實(shí)時(shí)的案例結(jié)果數(shù)據(jù)可視化顯示3.大數(shù)據(jù)技術(shù)在通信領(lǐng)域目前已存在的典型的應(yīng)用有哪些？參考答案：大數(shù)據(jù)技術(shù)可對移動(dòng)通信用戶進(jìn)行有效管理；對移動(dòng)通信計(jì)費(fèi)的高效管理；四合作變現(xiàn)；提升網(wǎng)絡(luò)質(zhì)量。4.通訊大數(shù)據(jù)課程的特點(diǎn)？參考答案：通信大數(shù)據(jù)這門課程將通過大數(shù)據(jù)技術(shù)融合云網(wǎng)的基礎(chǔ)理論，覆蓋網(wǎng)絡(luò)的規(guī)劃設(shè)計(jì)與網(wǎng)絡(luò)部署、網(wǎng)絡(luò)運(yùn)維和運(yùn)營、網(wǎng)絡(luò)優(yōu)化等多個(gè)維度鍛煉和提升學(xué)生的數(shù)據(jù)分析、數(shù)據(jù)處理能力。5.通信大數(shù)據(jù)產(chǎn)業(yè)的關(guān)注點(diǎn)有哪些？參考答案：規(guī)范數(shù)據(jù)交易模式；積極樹立數(shù)據(jù)應(yīng)用成熟行業(yè)標(biāo)桿；探索新的數(shù)據(jù)應(yīng)用模式。1、Hadoop發(fā)展至現(xiàn)在經(jīng)歷了幾個(gè)大版本的更新，分別是什么？參考答案：3個(gè)，hadoop1.0、hadoop2.0、hadoop3.0。2、大數(shù)據(jù)組件中，提供數(shù)據(jù)存儲(chǔ)的組件叫什么，主要包含了哪些實(shí)例（服務(wù)），實(shí)例的作用是什么？參考答案：HadoopDistributedFileSystem，簡稱HDFS，是一個(gè)分布式文件系統(tǒng)。包含了NameNode和DataNode兩個(gè)實(shí)例；NameNode存儲(chǔ)文件的元數(shù)據(jù)，如文件名，文件目錄結(jié)構(gòu)，文件屬性（生成時(shí)間、副本數(shù)、文件權(quán)限），以及每個(gè)文件的塊列表和塊所在的DataNode等；DataNode在本地文件系統(tǒng)存儲(chǔ)文件塊數(shù)據(jù)，以及存儲(chǔ)數(shù)據(jù)塊等。3、YARN的作用是什么，主要包含什么實(shí)例（服務(wù)），什么作用？參考答案：主要負(fù)責(zé)集群資源的協(xié)調(diào)管理；ResourceManager(RM)：負(fù)責(zé)整個(gè)集群資源（內(nèi)存、CPU等）的管理；NodeManager(NM)：負(fù)責(zé)單個(gè)節(jié)點(diǎn)服務(wù)器資源的管理。4、MapReduce架構(gòu)用于計(jì)算的階段是什么？參考答案：分為Map、Reduce兩個(gè)截?cái)?，Map過程將輸入數(shù)據(jù)拆分成多個(gè)小塊分別進(jìn)行處理，Reduce過程主要負(fù)責(zé)匯聚結(jié)果值。列舉幾項(xiàng)Hive的優(yōu)缺點(diǎn)？參考答案：優(yōu)點(diǎn)：操作接口采用類SQL語法，提供快速開發(fā)的能力（簡單、容易上手）；避免了去寫MapReduce，減少開發(fā)人員的學(xué)習(xí)成本。Hive支持用戶自定義函數(shù)，用戶可以根據(jù)自己的需求來實(shí)現(xiàn)自己的函數(shù)。缺點(diǎn)：實(shí)現(xiàn)算法比較局限，迭代式算法無法表達(dá)；Hive調(diào)優(yōu)比較困難，粒度較粗。該章節(jié)介紹的計(jì)算法框架有哪些？哪個(gè)更優(yōu)秀一些？參考答案：Spark和MapReduce兩種；Spark的計(jì)算更加優(yōu)秀。消息隊(duì)列的組件是哪個(gè)？參考答案：KafkaZookeeper的主要作用？參考答案：ZooKeeper的主要作用是提供一種可靠的、分布式的協(xié)調(diào)服務(wù)，使得分布式系統(tǒng)中的各個(gè)節(jié)點(diǎn)能夠協(xié)同工作，保持一致性，實(shí)現(xiàn)可靠的分布式應(yīng)用。問答：簡述sql中的插入數(shù)據(jù)操作語句。inserintotable表名[(字段列表)]values（值列表);查詢字段非空的寫法有哪些？Isnotnull和<>’’對表tables的字段sname進(jìn)行模糊查詢，查詢出姓”張”的數(shù)據(jù)的寫法？Select*fromtablesWheresnamelike‘張%’；對表tables的字段sname進(jìn)行模糊查詢，查詢出姓”張”，名字是三個(gè)字的數(shù)據(jù)，的數(shù)據(jù)的寫法？Select*fromtablesWheresnamelike‘張__’；列舉去重查詢的兩種sql寫法，表名tablename，對字段sname進(jìn)行去重查詢；第一種：selectdistinctsnamefromtablename；第二種：selectsnamefromtablenamegroupbysname；查詢工資總和大于9000的部門編號(hào)以及工資和，工資信息表表名emp，部門編號(hào)字段為deptno，工資信息字段sal？selectdeptno,SUM(sal)FROMempGROUPBYdeptnoHAVINGSUM(sal)>9000;兩個(gè)表關(guān)聯(lián)產(chǎn)生笛卡爾積時(shí)，關(guān)聯(lián)后的數(shù)據(jù)數(shù)據(jù)量跟兩個(gè)表的關(guān)系？當(dāng)產(chǎn)生笛卡爾積后，關(guān)聯(lián)后的數(shù)據(jù)是兩表數(shù)據(jù)量的乘機(jī)。寫出三種內(nèi)連接的sql，實(shí)現(xiàn)表名t1t2的內(nèi)連接Select*fromt1,t2;Select*fromt1joint2;Select*fromt1innerjoint2;sql語言主要分類有哪幾種？數(shù)據(jù)定義語言（DDL）、數(shù)據(jù)操作語言（DML）、數(shù)據(jù)查詢語言（DQL）、數(shù)據(jù)控制語言（DCL）列舉Python的幾個(gè)標(biāo)準(zhǔn)的數(shù)據(jù)類型Numbers（數(shù)字）、String（字符串）、List（列表）、Tuple（元組）、Dictionary（字典）Python支持多少種數(shù)字類型？分別列舉共4種。分別為：int（有符號(hào)整型）、long（長整型）、float（浮點(diǎn)型）、complex（復(fù)數(shù)）字典和列表是python中最靈活的兩種內(nèi)置數(shù)據(jù)結(jié)構(gòu)類型，他們之間的區(qū)別是什么?列表是有序的對象集合，字典是無序的對象集合。字典當(dāng)中的元素是通過鍵來存取的，而不是通過偏移存取。python中的循環(huán)語句有哪些，舉例說明。while判斷條件(condition)：執(zhí)行語句(statements)……foriterating_varinsequence:執(zhí)行語句(statements)……循環(huán)中break和continue語句均可停止循環(huán)，他們之間的區(qū)別在哪里？continue語句跳出本次循環(huán)，而break跳出整個(gè)循環(huán)。Python位運(yùn)算符代表和運(yùn)算、或運(yùn)算的符號(hào)是什么？和運(yùn)算：&或運(yùn)算：|python語言寫一個(gè)判斷，判斷當(dāng)變量a等于0，且當(dāng)變量b等于1或變量c不等于2時(shí)，打印輸出變量d。ifa==0and(b==1orc!=2):print(d)用python寫一個(gè)for循環(huán)，初始i=0，循環(huán)當(dāng)i=100跳出循環(huán)foriinrange(101):#循環(huán)范圍從0到100，包括100ifi==100:#當(dāng)i等于100時(shí)break#跳出循環(huán)print(i)#輸出當(dāng)前i的值定義一個(gè)列表a，并對a逐個(gè)增加原始，1,2,3,4,5,6#定義一個(gè)空列表aa=[]#逐個(gè)增加元素a.append(1)a.append(2)a.append(3)a.append(4)a.append(5)a.append(6)print(a)1、5G主要性能指標(biāo)有哪些？答案：共有8個(gè)，分別是峰值速率、用戶體驗(yàn)速率、頻譜效率、移動(dòng)性、時(shí)延、連接密度、網(wǎng)絡(luò)能效、區(qū)域業(yè)務(wù)容量。2、列舉幾個(gè)智能網(wǎng)優(yōu)關(guān)鍵KPI指標(biāo)？答案：無線接通率指標(biāo)、RRC連接建立成功率、切換成功率、無線掉線率。3、通信數(shù)據(jù)源有哪些？答案：DT（Drivetest）數(shù)據(jù)，MR測量報(bào)告，CDR呼叫詳細(xì)記錄、基站工參、性能數(shù)據(jù)、DPI數(shù)據(jù)、告警數(shù)據(jù)、投訴數(shù)據(jù)。4、nr網(wǎng)絡(luò)質(zhì)量分析有哪幾大類？答案：覆蓋類、干擾累、CSFB、移動(dòng)性、nr速率。5、根據(jù)MR觸發(fā)方式的不同，MR測量報(bào)告主要分為哪些？答案：周期性觸發(fā)的MRO、事件觸發(fā)的MRE、統(tǒng)計(jì)計(jì)算測量數(shù)據(jù)的MRS。6、搭建通信大數(shù)據(jù)平臺(tái)需要登錄多個(gè)服務(wù)后臺(tái)修改相關(guān)配置操作嗎？答案：不需要。將大數(shù)據(jù)平臺(tái)安裝包放到要部署的網(wǎng)段內(nèi)的任意電腦上，雙擊安裝根據(jù)提示操作即可。7、通信大數(shù)據(jù)平臺(tái)的特色功能有哪些？答案：一鍵初始化、一鍵備份、一鍵刪除、一鍵還原、一鍵授權(quán)、一鍵緊急修復(fù)、一鍵下電、支持用戶名單導(dǎo)入/導(dǎo)出等。傳統(tǒng)的室內(nèi)分布系統(tǒng)的組成和分類？參考答案：室內(nèi)分布系統(tǒng)通常由信號(hào)源和分布系統(tǒng)組成。無源室內(nèi)分布系統(tǒng)、有源室內(nèi)分布系統(tǒng)、宏蜂窩接入室內(nèi)分布系統(tǒng)、微蜂窩室內(nèi)分布系統(tǒng)、分布式室內(nèi)分布系統(tǒng)、直放站室內(nèi)分布系統(tǒng)、單通道室內(nèi)分布系統(tǒng)、雙通道室內(nèi)分布系統(tǒng)。室分的典型場景舉例？參考答案：機(jī)場的候機(jī)廳、出發(fā)廳、到達(dá)廳；火車站、汽車站的候車廳、售票處、過道、站臺(tái)；地鐵站點(diǎn)、換乘通道及隧道；體育場館、會(huì)展中心、圖書館、博物館等。弱覆蓋的判斷標(biāo)準(zhǔn)是什么？參考答案：在GSM網(wǎng)絡(luò)RxLev_DL功率小于-90dBm，或者RSCP小于-90dBm的屬于弱覆蓋；在nr網(wǎng)絡(luò)RSRP低于-110dBm屬于弱覆蓋；在5GNR網(wǎng)絡(luò)RSRP低于-105dBm屬于弱覆蓋。覆蓋類問題判斷手段有哪些？參考答案：①通過路測方式。路測分為DT、CQT兩種，DT主要針對道路，了解“線”的連續(xù)覆蓋情況。CQT主要針對室內(nèi)，了解“點(diǎn)”的深度覆蓋情況。②KPI指標(biāo)統(tǒng)計(jì)。主要對重定向次數(shù)及5G/4G向2G、3G高倒流比例進(jìn)行統(tǒng)計(jì)。假如4G小區(qū)向2G小區(qū)發(fā)起重定向，一般認(rèn)為是nr網(wǎng)絡(luò)弱覆蓋所致。③MR數(shù)據(jù)分析。通過對MR數(shù)據(jù)的采集、解析、可柵格化的顯示全網(wǎng)弱覆蓋的區(qū)域。④站點(diǎn)覆蓋仿真。結(jié)合基站站高、方位角、下傾角、地理環(huán)境等，應(yīng)用仿真工具，可仿真出現(xiàn)無線網(wǎng)絡(luò)可能存在弱覆蓋的區(qū)域。本章節(jié)分析任務(wù)的主要步驟是什么？參考答案：①創(chuàng)建Hive結(jié)果表（或中間表）并完善表結(jié)構(gòu)提交；②創(chuàng)建Hive算法并編輯調(diào)試算法內(nèi)容；③創(chuàng)建mysql數(shù)據(jù)庫結(jié)果表并完善表結(jié)構(gòu)提交；④創(chuàng)建同步算法，配置同步的庫名表名參數(shù)，提交算法；⑤添加可視化模塊，連接數(shù)據(jù)庫，配置可視化，調(diào)試呈現(xiàn)結(jié)果。本章節(jié)分析任務(wù)的分析過程我們接觸了哪幾類數(shù)據(jù)庫，作用有何不同之處？參考答案：兩類；第一類為hive數(shù)據(jù)庫，是集群數(shù)據(jù)庫，用于計(jì)算和存放過程數(shù)據(jù)用；第二類mysql數(shù)據(jù)庫，是關(guān)系型數(shù)據(jù)庫，用于存放和展示業(yè)務(wù)分析結(jié)果數(shù)據(jù)用的。本章節(jié)分析任務(wù)的算法主要涉及的幾個(gè)數(shù)據(jù)庫的數(shù)據(jù)，介紹各庫存數(shù)據(jù)的特征分別是什么？參考答案：所有任務(wù)算法涉及了5個(gè)數(shù)據(jù)庫的數(shù)據(jù)，4個(gè)hive庫和1個(gè)mysql數(shù)據(jù)庫。4個(gè)hive庫分別為：edu_odsdata、edu_middata、edu_tmpdata、edu_resdata，1個(gè)mysql庫為：data_sync。edu_odsdata這個(gè)庫存了源數(shù)據(jù)，我們這里的算法只做讀取使用；edu_middata這個(gè)庫是我們生成匯總大的數(shù)據(jù)表存放的中間庫，這個(gè)庫里的表是我們創(chuàng)建的，可以供后面多個(gè)算法取用數(shù)據(jù)；edu_tmpdata這個(gè)庫為臨時(shí)庫，存了我們計(jì)算過程中臨時(shí)存放的數(shù)據(jù)的臨時(shí)表；edu_resdata這個(gè)庫是結(jié)果庫，最終我們計(jì)算分析的結(jié)果表都存放于此；不同于上面4個(gè)庫data_sync這個(gè)庫是mysql的數(shù)據(jù)庫，主要存放從hive庫同步過來的數(shù)據(jù)（可以是源數(shù)據(jù)、結(jié)果數(shù)據(jù)等）。分析基于大數(shù)據(jù)技術(shù)弱覆蓋問題，分析問題的源數(shù)據(jù)有哪些？生成的表有哪些？參考答案：源數(shù)據(jù)是：質(zhì)差路段表、采樣點(diǎn)表、工參表（nr_poorquality_points、nr_cover_servingcell、nr_siteinfo）。生成的表是：質(zhì)差路段小區(qū)采樣信息匯總的中間表、弱覆蓋問題質(zhì)差路段表（mid_nr_servingcellinfo_XX_XXX、res_nr_pq_poorcover_XX_XXX）。分析切換問題大數(shù)據(jù)過程中使用的到源數(shù)據(jù)有哪些？參考答案：質(zhì)差路段表、切換事件表（也可以是表名稱nr_poorquality_points、nr_event_handover）。10、hive數(shù)據(jù)庫的數(shù)據(jù)是如何同步到mysql數(shù)據(jù)庫的？參考答案：通過創(chuàng)建同步任務(wù)，配置對應(yīng)正確的庫名、表名然后執(zhí)行。目前主要的衛(wèi)星定位系統(tǒng)有哪些？參考答案：美國全球定位系(GPS)、俄羅斯格洛納斯(GLONASS)、歐洲伽利略(GALILEO)系統(tǒng)、中國北斗衛(wèi)星導(dǎo)航系統(tǒng)。什么原因?qū)е禄径ㄎ痪葻o法很高？參考答案：基站定位時(shí)，信號(hào)很容易受到干擾，所以先天就決定了它定位的不準(zhǔn)確性?；诘乩砦恢玫姆?wù)有哪些？參考答案：地圖、打車、外賣、團(tuán)購、社交、物流等。熱點(diǎn)區(qū)域的定義是什么，舉例說明？參考答案：熱點(diǎn)區(qū)域，即關(guān)注時(shí)段內(nèi)人流量密集的區(qū)域，如周杰倫演唱會(huì)當(dāng)晚的演唱會(huì)現(xiàn)場、春運(yùn)期間的火車站/機(jī)場、早晚高峰的地鐵口/公交站、節(jié)假日的游樂園等等；關(guān)注這樣的區(qū)域可以對該類熱點(diǎn)區(qū)域的無線網(wǎng)絡(luò)、交通指揮、園區(qū)管理和人員安排等都有很好的指導(dǎo)作用，如演唱會(huì)現(xiàn)場可以采用安排緊急通訊車輛加大無線網(wǎng)絡(luò)的支撐力度、演唱會(huì)附近交通進(jìn)行適當(dāng)管制和紅綠燈策略調(diào)整等等。所以定義好熱點(diǎn)區(qū)域就顯得相當(dāng)重要。我們將一天內(nèi)單位區(qū)域內(nèi)的活躍人流數(shù)量達(dá)到一定門限的區(qū)域定義為熱點(diǎn)區(qū)域。在本章節(jié)分析基于位置信息的熱點(diǎn)區(qū)域使用什么代碼語言實(shí)現(xiàn)的，為了可視化呈現(xiàn)分析的結(jié)果使用了什么模塊？參考答案：Python3+hql（主要處理和分析代碼都是Python3、過程中獲取表數(shù)據(jù)時(shí)用到了少了hivesql）。使用了folium加載地圖和渲染結(jié)果數(shù)據(jù)。在本章節(jié)分析基于位置信息的熱點(diǎn)區(qū)域的分析代碼中，調(diào)用的geopy模塊下的distance目的是什么？參考答案：計(jì)算不同經(jīng)緯度點(diǎn)之間的距離。在本章節(jié)分析基于位置信息的熱點(diǎn)區(qū)域任務(wù)中，代碼頂端有什么注意事項(xiàng)？參考答案：加入定義代碼的執(zhí)行環(huán)境的參數(shù)，即添加%python，否則代碼可能因?yàn)閳?zhí)行環(huán)境不明確導(dǎo)致任務(wù)無法執(zhí)行。移動(dòng)互聯(lián)網(wǎng)業(yè)務(wù)感知數(shù)據(jù)的獲取主要有哪些方式？參考答案：方式1為測試APP方式，方式2為信令及DPI（DeepPacketInspection深度報(bào)文監(jiān)測）監(jiān)測方式。業(yè)務(wù)監(jiān)測數(shù)據(jù)采集方式有哪些？參考答案：①業(yè)務(wù)行為信息采集功能：在不干擾用戶正常使用網(wǎng)絡(luò)和業(yè)務(wù)的前提下，在用戶使用手機(jī)進(jìn)行各種數(shù)據(jù)業(yè)務(wù)的過程中，對手機(jī)上發(fā)生的業(yè)務(wù)感知信息進(jìn)行采集，并同時(shí)記錄業(yè)務(wù)發(fā)生時(shí)的無線環(huán)境信息。②數(shù)據(jù)連接信息采集功能：在用戶使用手機(jī)APP進(jìn)行數(shù)據(jù)業(yè)務(wù)使用時(shí)，記錄手機(jī)由無數(shù)據(jù)連接狀態(tài)轉(zhuǎn)換為進(jìn)入數(shù)據(jù)連接狀態(tài)的成功率和所用時(shí)間。熱門app算法設(shè)計(jì)邏輯？參考答案：篩選出入庫時(shí)間為當(dāng)天且測試業(yè)務(wù)正常的抖音業(yè)務(wù)，存放入臨