Hadoop大數(shù)據(jù)技術(shù)與項目實戰(zhàn)智慧樹知到期末考試答案2024年

Hadoop大數(shù)據(jù)技術(shù)與項目實戰(zhàn)智慧樹知到期末考試答案2024年Hadoop大數(shù)據(jù)技術(shù)與項目實戰(zhàn)ADS數(shù)據(jù)應(yīng)用層，在ADS層中，進行最終指標統(tǒng)計，從而服務(wù)于報表系統(tǒng)的數(shù)據(jù)展示。（）

A:對B:錯答案:對使用列式存儲數(shù)據(jù)采用LZO的壓縮格式，目的是提高當前表數(shù)據(jù)在查詢過程中的效率。（）

A:對B:錯答案:對Flume在數(shù)據(jù)傳輸過程中，事件中的Value即body，body是一個字節(jié)數(shù)組，封裝的是傳輸?shù)臄?shù)據(jù)。（）

A:對B:錯答案:對刪除Kafka主題時，在配置文件中設(shè)置delete.topic.enable=true，才是完全刪除，否則為標記刪除。

A:錯B:對答案:對Flume的數(shù)據(jù)流可以根據(jù)headers的信息發(fā)送到不同的channel中。（）

A:正確B:錯誤答案:正確外連接中，顯示左表所有數(shù)據(jù)的是右外連接。（）

A:錯B:對答案:錯Hadoop是Apache基金會開發(fā)的一款分布式系統(tǒng)基礎(chǔ)架構(gòu)，主要解決海量數(shù)據(jù)存儲和海量數(shù)據(jù)計算兩大問題，從廣義上來說，Hadoop通常指的是Hadoop生態(tài)圈。（）

A:錯B:對答案:對MapReduce詞頻統(tǒng)計案例中，Driver階段的Configuration會操作job對象實現(xiàn)案例需求（）。

A:錯B:對答案:對Hive本身沒有存儲功能，其數(shù)據(jù)要基于HDFS來存儲。（）

A:對B:錯答案:對在項目中，關(guān)于數(shù)據(jù)遷移的實現(xiàn)是由sqoop完成，主要將HDFS上的數(shù)據(jù)抽取到MySQL。（）

A:對B:錯答案:對在HQL關(guān)聯(lián)測試中，測試表是員工表和地址表。（）

A:對B:錯答案:錯Event的最大定義為1024字節(jié)，超過會被切割放到下一個Event中。（）

A:錯B:對答案:錯在使用PyEcharts繪制輪播多圖時，需要事先導(dǎo)入Timeline類。（）

A:對B:錯答案:對insertoverwrite命令將數(shù)據(jù)寫入表中（）

A:對B:錯答案:對可以使用zkServer.shstop命令開啟Zookeeper。（）

A:對B:錯答案:錯在使用pyecharts繪制餅圖時，需要事先導(dǎo)入PictorialBar類。（）

A:對B:錯答案:錯在Flume數(shù)據(jù)傳輸過程中，選擇Kafkasink，能把數(shù)據(jù)寫入Kafka對應(yīng)的Topic中（）

A:錯B:對答案:對在編寫Flume攔截器代碼時，configure方法的功能是可以獲取到Flume進程在運行過程中的運行參數(shù)，然后對其進行引用。（）

A:錯B:對答案:對在項目中，使用MySQL的應(yīng)用場景有兩個，一是用來存儲Hive的元數(shù)據(jù)信息，二是存儲數(shù)據(jù)倉庫統(tǒng)計出來的指標結(jié)果（）

A:對B:錯答案:對在設(shè)計Flume數(shù)據(jù)采集系統(tǒng)時，增加source個數(shù)，可以增大source讀取能力。（）

A:錯B:對答案:對使用pyecharts進行可視化時，可以用下哪個選項設(shè)置圖例不顯示？（）

A:label_opts=opts.LabelOpts(is_show=False)B:axisline_opts=opts.AxisLineOpts(is_show=False)C:xaxis_opts=opts.AxisOpts(is_show=False)D:legend_opts=opts.LegendOpts(is_show=False)答案:legend_opts=opts.LegendOpts(is_show=False)在Linux命令行中，使用schematool命令（）

A:格式化hive元數(shù)據(jù)庫B:刷新配置C:刪除hive元數(shù)據(jù)庫D:更新hive元數(shù)據(jù)庫答案:格式化hive元數(shù)據(jù)庫Hive定義了類似于SQL語言的（）語言。

A:DQLB:EQLC:HQLD:VQL答案:HQLFlume可以快速消費KafkaTopic數(shù)據(jù)，然后將消費后的數(shù)據(jù)轉(zhuǎn)發(fā)到（）上。

A:HDFSB:SourceC:SinkD:Channel答案:HDFS下列哪條命令可以為f1.sh腳本文件賦予權(quán)限（）。

A:./f1.shstartB:vimf1.shC:./f1.shstopD:chmodu+xf1.sh答案:chmodu+xf1.sh使用hdfsdfs-count/查看根目錄下面數(shù)據(jù)文件的個數(shù)，顯示結(jié)果為“149458745”，其中9代表的是（）

A:文件的嵌套層數(shù)B:子目錄的個數(shù)C:所有文件的字節(jié)數(shù)D:文件個數(shù)答案:文件個數(shù)執(zhí)行聚合統(tǒng)計的函數(shù)是（）

A:MINB:COUNTC:SUMD:MAX答案:COUNTSqoop的工作本質(zhì)是（）。

A:遷移數(shù)據(jù)B:存儲數(shù)據(jù)C:接收數(shù)據(jù)D:處理數(shù)據(jù)答案:遷移數(shù)據(jù)在縱向拼接中，可以實現(xiàn)去重的是（）。

A:UnionallB:DistinctC:FulljoinD:union答案:union（）命令可以查看當前HDFS上面文件內(nèi)容的數(shù)據(jù)。

A:catB:cdC:lsD:open答案:cd在Flume數(shù)據(jù)采集配置文件中，kafka.bootstrap.servers=node1:9092，該配置表示（）

A:配置Kafka的路徑B:配置Kafka的通信地址C:配置kafka的Topic的數(shù)量D:配置Kafka的消費組答案:配置Kafka的通信地址在Hive中，給數(shù)據(jù)表添加數(shù)據(jù)，可以將數(shù)據(jù)文件當中的數(shù)據(jù)一次性加載到指定的表中的方法是（）。

A:insertintoB:appendC:addD:load答案:loadpyecharts中，用以下哪個配置項對圖表標題進行設(shè)置？（）

A:LegendOptsB:AxisOptsC:TitleOptsD:InitOpts答案:TitleOptspyecharts中的（）可以實現(xiàn)將多個圖表在一個頁面中進行布局。（）

A:PolarB:PageC:PieD:PictorialBar答案:Page在Sqoop執(zhí)行數(shù)據(jù)遷移過程中，當不需要做任何聚合操作時，只需要MR程序當中的（）階段即可。

A:ShuffleB:ReduceC:MapD:Split答案:Map公共字段cm中字段含義為設(shè)備唯一標識的字段是（）

A:vcB:midC:uidD:vn答案:mid在Flume數(shù)據(jù)傳輸過程中，Agent主要由（）組成。

A:SinkB:ChannelC:AppD:Source答案:Source###Channel###Sink根據(jù)在Flume數(shù)據(jù)采集腳步中的攔截器配置，程序首先對Builder內(nèi)部類進行實例化，從而執(zhí)行類中的兩個方法，分別為（）。

A:CloseB:initializeC:BuildD:Configure答案:Build###ConfigureFlume在數(shù)據(jù)傳輸過程中，事件包含兩部分（）。

A:ValueB:actionC:MethodD:Key答案:Key###Value下列屬于事件日志數(shù)據(jù)合法校驗步驟的是（）。

A:對數(shù)據(jù)進行校驗B:校驗是否為json格式C:校驗服務(wù)器時間D:對日志進行切割答案:對日志進行切割###對數(shù)據(jù)進行校驗###校驗服務(wù)器時間###校驗是否為json格式DWT層，構(gòu)建一張設(shè)備主題寬表的字段有哪些（）

A:手機型號B:手機品牌C:累積活躍天數(shù)D:設(shè)備唯一標識答案:設(shè)備唯一標識###手機型號###手機品牌###累積活躍天數(shù)安裝MySQL服務(wù)時，需要安裝以下（）。

A:MySQL所需要的依賴庫B:MySQL的客戶端服務(wù)C:MySQL的公共服務(wù)D:MySQL的服務(wù)端服務(wù)答案:MySQL的公共服務(wù)###MySQL所需要的依賴庫###MySQL的客戶端服務(wù)###MySQL的服務(wù)端服務(wù)內(nèi)連接使用到的關(guān)鍵字是（）。

A:joinB:FulljoinC:LeftjoinD:innerjoin答案:innerjoin下列關(guān)于zookeeper的描述，正確的是（）。

A:一次數(shù)據(jù)更新要么成功(半數(shù)以上節(jié)點成功)，要么失敗，不存在中間狀態(tài)，即數(shù)據(jù)更新原子性B:具有順序性，即更新請求是按照順序進行的C:集群中只要有半數(shù)以上節(jié)點存活，Zookeeper集群就能正常服務(wù)D:Zookeeper是一個領(lǐng)導(dǎo)者(Leader)，多個跟隨者(Follower)組成的集群答案:Zookeeper是一個領(lǐng)導(dǎo)者(Leader)，多個跟隨者(Follower)組成的集群;集群中只要有半數(shù)以上節(jié)點存活，Zookeeper集群就能正常服務(wù);一次數(shù)據(jù)更新要么成功(半數(shù)以上節(jié)點成功)，要么失敗，不存在中間狀態(tài)，即數(shù)據(jù)更新原子性;具有順序性，即更新請求是按照順序進行的在HQL實現(xiàn)過程中，一個語句里要執(zhí)行（）兩部分操作。

A:分析數(shù)據(jù)B:將查詢結(jié)果直接保存到對應(yīng)的統(tǒng)計結(jié)果表中C:數(shù)據(jù)可視化的展示D:查詢業(yè)務(wù)數(shù)據(jù)表中的數(shù)據(jù)答案:查詢業(yè)務(wù)數(shù)據(jù)表中的數(shù)據(jù)###將查詢結(jié)果直接保存到對應(yīng)的統(tǒng)計結(jié)果表中外連接中，顯示左表或者右表所有數(shù)據(jù)的是（）。

A:全外連接B:左外連接C:內(nèi)連接D:右外連接答案:左外連接###右外連接整個MapReduce的執(zhí)行過程可以分為split、map、（）五個階段。

A:輸出B:輸入C:shuffleD:reduce答案:shuffle###reduce###輸出下列參數(shù)中，哪些是Sqoop導(dǎo)入全部數(shù)據(jù)命令時用到的參數(shù)（）？

A:--connectB:--tableC:--passwordD:--username答案:--connect###--username###--password###--table配置hadoop的核心文件有（）。

A:core-site.xml,B:mapred-site.xmlC:hadoop-env.shD:hdfs-site.xml答案:core-site.xml###hadoop-env.sh###hdfs-site.xml###mapred-site.xmlyarn集群核心配置的文件是（）。

A:hdfs-site.xmlB:yarn-site.xmlC:core-site.xmlD:mapred-site.xml答案:yarn-site.xml###mapred-site.xml在本教材的實戰(zhàn)操作中，打開hosts文件，設(shè)置三臺虛擬機的IP地址及映射名稱，需要輸入（）內(nèi)容。

A:192.168.100.5node3B:192.168.100.3node1C:192.168.100.4node2D:192.168.100.5node4答案:192.168.100.3node1###192.168.100.4node2###192.168.100.5node3以下描述正確的是（）

A:Map階段產(chǎn)生的數(shù)據(jù)會通過shuffle階段，在內(nèi)存緩沖區(qū)中進行數(shù)據(jù)的分區(qū)、排序、分組的處理B:Reduce階段是將一個大的計算任務(wù)分解成多個小任務(wù)C:shuffle階段是整個MapReduce執(zhí)行過程中最復(fù)雜的一步D:整個MapReduce的執(zhí)行過程可以分為五個階段答案:AI參考:正確選項為：D:整個MapReduce的執(zhí)行過程可以分為五個階段。\n\n整個MapReduce的執(zhí)行過程可以分為五個階段，分別是：\n\n1.Map階段：將輸入數(shù)據(jù)映射成中間鍵值對，并輸出到輸