大數(shù)據(jù)技術(shù)與應(yīng)用智慧樹(shù)知到期末考試答案章節(jié)答案2024年咸陽(yáng)職業(yè)技術(shù)學(xué)院

大數(shù)據(jù)技術(shù)與應(yīng)用智慧樹(shù)知到期末考試答案+章節(jié)答案2024年咸陽(yáng)職業(yè)技術(shù)學(xué)院克服MapReduce在迭代式計(jì)算和交互式計(jì)算方面的不足。（）

答案:對(duì)Sqoop常用命令import是將數(shù)據(jù)導(dǎo)出。（）

答案:錯(cuò)Flumeagent承載了三大組件Source、Channel、Sink。（）

答案:對(duì)生效環(huán)境變量的命令是：source/etc/profile。（）

答案:對(duì)下載Hadoop的官網(wǎng)是/。（）

答案:錯(cuò)hadoopdfsadmin–report命令用于檢測(cè)HDFS損壞塊。（）

答案:錯(cuò)DataNode是文件存儲(chǔ)的基本單元，它將Block存儲(chǔ)在本地文件系統(tǒng)中，保存了Block的Meta-data，同時(shí)周期性地將所有存在的Block信息發(fā)送給NameNode。NameNode返回文件存儲(chǔ)的DataNode的信息。（）

答案:對(duì)Channel不可以連接Source和Sink的組件。（）

答案:錯(cuò)最早提出“大數(shù)據(jù)”時(shí)代到來(lái)的是全球知名公司谷歌（）

答案:錯(cuò)HiveServer將用戶提交的HL語(yǔ)句進(jìn)行編譯，解析成對(duì)應(yīng)的Yarn任務(wù)、Spak任務(wù)或者HDFS操作，從而完成數(shù)據(jù)的提取、轉(zhuǎn)換、分析。（）

答案:對(duì)Hadoop環(huán)境變量中的HADOOP_HEAPSIZE用于設(shè)置所有Hadoop守護(hù)線程的內(nèi)存。它默認(rèn)是200GB。（）

答案:錯(cuò)Hadoop系統(tǒng)中，如果HDFS文件系統(tǒng)的備份因子是3，那么MapReduce每次運(yùn)行的task都要從3個(gè)有副本的機(jī)器上傳輸需要處理的文件段。（）

答案:錯(cuò)傳統(tǒng)的數(shù)據(jù)倉(cāng)庫(kù)無(wú)法有效處理不同類型的數(shù)據(jù)。（

）

答案:對(duì)Hadoop完全分布模式配置免密登錄是要?（）

答案:主節(jié)點(diǎn)和從節(jié)點(diǎn)任意兩個(gè)節(jié)點(diǎn)之間免密登錄下面哪個(gè)目錄保存了Hadoop集群的命令(比如啟動(dòng)Hadoop)?（）

答案:sbinHBase的訪問(wèn)方式有很多，如下的訪問(wèn)方式中，哪一種是支持直接命令行方式訪問(wèn)（）

答案:HbaseShell并行數(shù)據(jù)處理框架MapReduce是（）公司在大數(shù)據(jù)領(lǐng)域的重要貢獻(xiàn)。

答案:谷歌下列關(guān)于傳統(tǒng)并行計(jì)算框架（比如MPI）和MapReduce并行計(jì)算框架比較正確的是：（）

答案:前者是共享式（共享內(nèi)存/共享存儲(chǔ)），容錯(cuò)性差，后者是非共享式的，容錯(cuò)性好（）是一個(gè)處理、存儲(chǔ)和分析海量的分布式、非結(jié)構(gòu)化數(shù)據(jù)的開(kāi)源框架。

答案:Hadoop下列對(duì)HBase的理解正確的是：（）

答案:HBase是針對(duì)谷歌BigTable的開(kāi)源實(shí)現(xiàn)下列關(guān)于計(jì)算機(jī)存儲(chǔ)容量單位的說(shuō)法中，錯(cuò)誤的是（）。

答案:一個(gè)漢字需要一個(gè)字節(jié)的存儲(chǔ)空間關(guān)于Hbase的數(shù)據(jù)模型敘述中，正確的是（）

答案:Hbase表中的單元由行Key，列族名，列限定符和時(shí)間戳共同唯一確定端口50090默認(rèn)是Hadoop哪個(gè)服務(wù)的端口?（）

答案:SecondaryNameNodeHive是由哪家公司開(kāi)源的（

）。

答案:Facebook在ZooKeeper和YARN的協(xié)同工作中，當(dāng)ActiveResourceManager產(chǎn)生故障時(shí)，StandbyResourceManager會(huì)從以下哪個(gè)目錄中獲取Application相關(guān)信息（）

答案:Statestore(正確答案)（）指對(duì)客觀事件進(jìn)行記錄并可以鑒別的符號(hào)，是對(duì)客觀事物的性質(zhì)、狀態(tài)以及相互關(guān)系等進(jìn)行記載的物理符號(hào)或這些物理符號(hào)的組合。

答案:數(shù)據(jù).下面關(guān)于Hivemetastore的三種模式的描述錯(cuò)誤的是（

）。

答案:Derby方式在同一時(shí)間只能有多個(gè)進(jìn)程連接使用數(shù)據(jù)庫(kù)HDFS為海量的數(shù)據(jù)提供了存儲(chǔ)，而MapReduce為海量的數(shù)據(jù)提供了計(jì)算。（）

答案:對(duì)Sqoop對(duì)于數(shù)據(jù)的導(dǎo)入、導(dǎo)出都是通過(guò)MapReduce作業(yè)實(shí)現(xiàn)的。（）

答案:對(duì)SecureCRT是一款世界一流的終端仿真程序，終端仿真其實(shí)就是用于與遠(yuǎn)程主機(jī)（計(jì)算機(jī)）進(jìn)行通信。（）

答案:對(duì)HBase是一個(gè)構(gòu)建在HDFS上的分布式列存儲(chǔ)系統(tǒng)。（）

答案:對(duì)mysql到hdfs通過(guò)sqoop進(jìn)行數(shù)據(jù)傳輸分兩種，一是只支持新增不支持更新、二是可以修改和新增。（）

答案:對(duì)集群的目的是為了節(jié)省成本，用廉價(jià)的pc機(jī)，取代小型機(jī)及大型機(jī)。（）

答案:對(duì)Source組件只能處理單一類型格式的日志數(shù)據(jù)。（）

答案:錯(cuò)MapReduce的核心理念是數(shù)據(jù)向計(jì)算靠攏。（）

答案:錯(cuò)Flume具有高可靠性、高容錯(cuò)性，并且是可升級(jí)的、易管理的、可定制的。（）

答案:對(duì)Sqoop常用命令exportt是將數(shù)據(jù)導(dǎo)出。（）

答案:對(duì)大數(shù)據(jù)的核心就是（），大數(shù)據(jù)能夠預(yù)測(cè)體現(xiàn)在很多方面。

答案:預(yù)測(cè)Hadoop平臺(tái)中啟用YARN組件的日志聚集功能，需要配置哪個(gè)參數(shù)（）

答案:yarn.log-aggregation-enable(正確答案)在HBase數(shù)據(jù)庫(kù)中，每個(gè)Region的建議最佳大小是：（）

答案:1GB-2GB解壓JDK軟件jdk-linux-x64.tar.gz的正確命令是（）

答案:tar-xzvfjdk-linux-x64.tar.gz查看IP地址的命令錯(cuò)誤的為：（）

答案:startnetwork下面關(guān)于Hive和傳統(tǒng)數(shù)據(jù)庫(kù)的比較描述正確的是（

）。

答案:Hive的針對(duì)數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)，針對(duì)的是讀多寫少的場(chǎng)景下列說(shuō)法錯(cuò)誤的是:（）

答案:Hadoop框架是用Java實(shí)現(xiàn)的，MapReduce應(yīng)用程序則一定要用Java來(lái)寫下面關(guān)于Hive各個(gè)格式使用場(chǎng)景描述錯(cuò)誤的是（

）。

答案:目前Parquet默認(rèn)使用gzip壓縮格式Flume是Cloudera提供的一個(gè)分布式、高可靠的、高可用的海量日志收集、聚合和傳輸系統(tǒng)。（）

答案:對(duì)FlumeSource可以監(jiān)聽(tīng)一個(gè)或者多個(gè)網(wǎng)絡(luò)端口，也可以從本地文件系統(tǒng)讀取數(shù)據(jù)。（）

答案:對(duì)傳統(tǒng)的數(shù)據(jù)倉(cāng)庫(kù)可以滿足快速增長(zhǎng)的海量數(shù)據(jù)存儲(chǔ)需求。（

）

答案:錯(cuò)Flume不具有高擴(kuò)展性，而且不容易地被水平擴(kuò)展。（）

答案:錯(cuò)在hive中下列哪些命令可以實(shí)現(xiàn)去重（

）。

答案:groupby;row_number;distinct互聯(lián)網(wǎng)和大數(shù)據(jù)的發(fā)展，是一個(gè)從信息找人，到人找信息的過(guò)程。（）

答案:錯(cuò)下面關(guān)于Hive數(shù)據(jù)裝載描述正確的是（

）。

答案:什么場(chǎng)景，裝載數(shù)據(jù)使用LOADDATA效率最低并行數(shù)據(jù)處理技術(shù)MapReduce是由哪家公司最先提出的（）

答案:谷歌公司下面關(guān)于Hive外表table1的數(shù)據(jù)刪除描述正確的是（

）。

答案:ALTERtable1SETTBLPROPERTIES('EXTERNAL'='FALSE');DROPTABLEtable1;Flume采用了三層架構(gòu)，分別為agent，collector和storage，每一層均可以水平擴(kuò)展。（）

答案:對(duì)Sqoop不可以高效的可控的利用資源，比如它可以通過(guò)調(diào)整任務(wù)數(shù)，來(lái)控制任務(wù)的并發(fā)度，另外還可以配置數(shù)據(jù)庫(kù)的訪問(wèn)時(shí)間等等。（）

答案:錯(cuò)YARN調(diào)度器分配資源的順序，下面哪一個(gè)描述是正確的（）

答案:本地資源->同機(jī)架->任意機(jī)器(正確答案)停止Hadoop進(jìn)程正確的命令是（）。

答案:stop-all.shHive是為了解決哪類問(wèn)題（

）。

答案:海量結(jié)構(gòu)化日志的數(shù)據(jù)統(tǒng)計(jì)HDfS中的block默認(rèn)保存幾份？（）

答案:3份下列有關(guān)大數(shù)據(jù)的典型應(yīng)用，說(shuō)法錯(cuò)誤的是（）

答案:大數(shù)據(jù)的應(yīng)用只能讓我們了解事物的現(xiàn)狀，不能預(yù)測(cè)未來(lái)測(cè)試Sqoop安裝是否成功，輸入sqoopversion命令之后，系統(tǒng)不會(huì)提示Sqoop版本相關(guān)信息。（）

答案:錯(cuò)今天，大數(shù)據(jù)已經(jīng)廣泛應(yīng)用于各個(gè)行業(yè)中。例如，金融、汽車、餐飲、電信、能源、體育和娛樂(lè)等社會(huì)各行各業(yè)都已經(jīng)融入了大數(shù)據(jù)的印跡。（）

答案:對(duì)Sqoop啟動(dòng)MapReduce作業(yè)，MapReduce中主要是對(duì)輸入類InputFormat和輸出類OutputFormat進(jìn)行定制。（）

答案:對(duì)Flume于2019年被捐贈(zèng)給apache軟件基金會(huì)，成為Hadoop相關(guān)組件之一。（）

答案:錯(cuò)Flume的核心是FlumeAgent。（）

答案:對(duì)大數(shù)據(jù)的戰(zhàn)略意義不在于掌握龐大的數(shù)據(jù)信息，而在于對(duì)這些含有意義的數(shù)據(jù)進(jìn)行專業(yè)化處理。（）

答案:對(duì)Sqoop常用命令help是打印Sqoop幫助信息。（）

答案:對(duì)Sqoop底層用MapReduce程序?qū)崿F(xiàn)數(shù)據(jù)的抽取、轉(zhuǎn)換、加載。（）

答案:對(duì)MapReduce是基于內(nèi)存計(jì)算機(jī)。（）

答案:錯(cuò)HBase的分布式存儲(chǔ)的最基本單元是Region。（）

答案:對(duì)虛擬機(jī)是一個(gè)相對(duì)獨(dú)立的環(huán)境，在這個(gè)環(huán)境里，可以安裝各個(gè)版本的Windows系統(tǒng)。也可以根據(jù)環(huán)境自己調(diào)節(jié)環(huán)境的配置，像一般電腦一樣開(kāi)機(jī)。（）

答案:對(duì)BlockSize是不可以修改的。（）

答案:錯(cuò)rhadoop是用R語(yǔ)言開(kāi)發(fā)的，MapReduce是一個(gè)框架，可以理解是一種思想，可以使用其他語(yǔ)言開(kāi)發(fā)。（）

答案:對(duì)Flume具有基于流動(dòng)數(shù)據(jù)流的簡(jiǎn)單靈活的體系結(jié)構(gòu)，具有可調(diào)整的可靠性機(jī)制以及許多故障轉(zhuǎn)移和恢復(fù)機(jī)制，具有強(qiáng)大的功能和容錯(cuò)能力。（）

答案:對(duì)添加了一個(gè)新的標(biāo)識(shí)符ClusterID用于標(biāo)識(shí)集群中所有的節(jié)點(diǎn)。當(dāng)格式化一個(gè)Namenode，需要提供這個(gè)標(biāo)識(shí)符或者自動(dòng)生成。這個(gè)ID可以被用來(lái)格式化加入集群的其他Namenode。（）

答案:對(duì)Flume支持多種接入資源數(shù)據(jù)的類型以及接出數(shù)據(jù)類型。（）

答案:對(duì)通常是集群的最主要瓶頸是D磁盤。（）

答案:錯(cuò)hadoop大數(shù)據(jù)的兩大核心技術(shù)是（）

答案:HDFS;MapReduceHive是采用批處理的方式處理海量數(shù)據(jù)。（

）

答案:對(duì)FlumeSource是負(fù)責(zé)接收數(shù)據(jù)到FlumeAgent的組件，接收外部源（如Web服務(wù)器）傳遞給它的事件，外部數(shù)據(jù)源以目標(biāo)FlumeSource可以識(shí)別的格式將事件發(fā)送到FlumeSource。（）

答案:對(duì)YARN中，slave節(jié)點(diǎn)負(fù)責(zé)以下哪些工作（）

答案:監(jiān)督Container的生命周期管理HIVE與傳統(tǒng)SQL數(shù)據(jù)庫(kù)對(duì)比,下面描述不正確的是(

)。

答案:最終執(zhí)行者：HIVE使用MapReduce和Excutor執(zhí)行，傳統(tǒng)SQL數(shù)據(jù)庫(kù)使用Excutor執(zhí)行器下列關(guān)于對(duì)大數(shù)據(jù)特點(diǎn)的說(shuō)法中，錯(cuò)誤的是（）。

答案:數(shù)據(jù)價(jià)值密度高有關(guān)HBase的敘述，正確的是（）

答案:提供了簡(jiǎn)單的基于Key的查詢方法下列哪個(gè)屬性是hdfs—site。xml中的配置?（）

答案:dfs.replicationHadoop中，如果將yarn.scheduler.capacity.root.QueueA.minimum-user-limit-percent設(shè)置為50，下面說(shuō)法錯(cuò)誤的是（）

答案:QueueA中的每個(gè)用戶最多只能獲得50%的資源。(正確答案)下列哪項(xiàng)通常是集群的最主要瓶頸（）。

答案:磁盤HBase三層結(jié)構(gòu)的順序是:（）

答案:Zookeeper文件，-ROOT-表，.MEATA.表下列對(duì)HBase數(shù)據(jù)模型的描述錯(cuò)誤的是:（）

答案:HBase中執(zhí)行更新操作時(shí)，會(huì)刪除數(shù)據(jù)舊的版本，并生成一個(gè)新的版本關(guān)于Hadoop單機(jī)模式和偽分布式模式的說(shuō)法，正確的是（）

答案:后者比前者增加了HDFS輸入輸出以及可檢查內(nèi)存使用情況訪問(wèn)HBase表中的行，有哪些方式:（）

答案:全表掃描MapReduce是一種編程模型，用戶只需通過(guò)編寫（）函數(shù)來(lái)實(shí)現(xiàn)自己的計(jì)算邏輯。

答案:map+reduce（）擅長(zhǎng)處理和分析大量分布式的非結(jié)構(gòu)化數(shù)據(jù)，以分批的方式進(jìn)行歷史分析。

答案:HadoopHadoop平臺(tái)中，要查看YARN服務(wù)中一個(gè)application的信息，通常需要使用什么命令（）

答案:application大數(shù)據(jù)時(shí)代，數(shù)據(jù)使用的關(guān)鍵是（）。

答案:數(shù)據(jù)再利用Sqoop軟件能夠?qū)崿F(xiàn)關(guān)系數(shù)據(jù)庫(kù)和HDFS數(shù)據(jù)之間的傳輸，在數(shù)據(jù)導(dǎo)入、導(dǎo)出時(shí)都要生成相應(yīng)的（）作業(yè)，提高工作性能。

答案:MapReduce下面中不屬于HIVE中的元數(shù)據(jù)信息(

)。

答案:表的屬性（只存儲(chǔ)內(nèi)部表信息）MapReduce是一種并行式的計(jì)算模型，用于大規(guī)模數(shù)據(jù)集，通常是大于（）的并行計(jì)算。

答案:1TBSqoop導(dǎo)入數(shù)據(jù)：MySQL，Oracle導(dǎo)入數(shù)據(jù)到Hadoop的HDFS、HIVE、HBASE等數(shù)據(jù)存儲(chǔ)系統(tǒng)。（）

答案:對(duì)Sqoop就是一個(gè)工具，需要在兩個(gè)以上節(jié)點(diǎn)上進(jìn)行安裝即可。（）

答案:錯(cuò)Sqoop核心的功能有導(dǎo)入或遷入、導(dǎo)出或遷出。（）

答案:對(duì)Sqoop不能自動(dòng)地完成數(shù)據(jù)類型的映射與轉(zhuǎn)換。（）

答案:錯(cuò)Sqoop是apache旗下一款“Hadoop和關(guān)系數(shù)據(jù)庫(kù)服務(wù)器之間傳送數(shù)據(jù)”的工具。（）

答案:對(duì)Flume可以將應(yīng)用產(chǎn)生的數(shù)據(jù)存儲(chǔ)到任何集中存儲(chǔ)器中，比如HDFS,HBase。（）

答案:對(duì)Flume的管道是基于事務(wù)，保證了數(shù)據(jù)在傳送和接收時(shí)的一致性。（）

答案:對(duì)Flume是可靠的，容錯(cuò)性高的，可升級(jí)的，易管理的,并且不可以定制。（）

答案:錯(cuò)實(shí)時(shí)性，F(xiàn)lume有一個(gè)好處可以實(shí)時(shí)的將分析數(shù)據(jù)并將數(shù)據(jù)保存在數(shù)據(jù)庫(kù)或者其他系統(tǒng)中。（）

答案:對(duì)Flume的配置很繁瑣，source，channel，sink的關(guān)系在配置文件里面交織在一起，便于管理。（）

答案:錯(cuò)Hive有四個(gè)驅(qū)動(dòng)器，下面那個(gè)不是（）。

答案:策略器(Strategyimplement)Hive有什么好處（）。

答案:可以通過(guò)語(yǔ)句自動(dòng)編譯mapreduce（Mapreducecanbeautomaticallycompiledusingstatements）Hive的元數(shù)據(jù)存儲(chǔ)在derby和MySQL中有什么區(qū)別（）。

答案:多會(huì)話(Moresession)下列關(guān)于Hive特點(diǎn)總結(jié)正確的選項(xiàng)是（）。

答案:Hive支持自定義函數(shù)，用戶可以根據(jù)自己的需求去定義函數(shù)下列哪個(gè)組件不屬于Hive架構(gòu)（）

答案:TaskManagerHBase的每個(gè)列族均對(duì)應(yīng)了一個(gè)（）屬性。

答案:時(shí)間戳（）是一個(gè)實(shí)時(shí)收集、分析、展示、監(jiān)控?cái)?shù)據(jù)的分布式數(shù)據(jù)庫(kù)，它基于HBase存儲(chǔ)和查詢監(jiān)控?cái)?shù)據(jù)。

答案:OpenTSDB在水平方向，HBase的一張表由一個(gè)或多個(gè)（）組成。

答案:列族HBase每個(gè)行有一個(gè)（）唯一標(biāo)識(shí)了行的地址。

答案:行鍵在垂直方向，HBase的一張表有多個(gè)（）來(lái)組成。

答案:行族谷歌公司關(guān)于MapReduce模型的論文發(fā)布于（）年

答案:2004大數(shù)據(jù)的開(kāi)發(fā)和利用，關(guān)鍵在于大數(shù)據(jù)技術(shù)的支撐。其中，MapReduce是分布式數(shù)據(jù)庫(kù)。（）

答案:錯(cuò)適合MapReduce框架處理的任何和數(shù)據(jù)集要求待處理的數(shù)據(jù)集可以分解為許多小的數(shù)據(jù)子集，而且每個(gè)數(shù)據(jù)子集的處理不依賴也不影響其他數(shù)據(jù)子集的處理。（）

答案:對(duì)下列關(guān)于MapReduce模型的說(shuō)法錯(cuò)誤的是（）

答案:MapReduce模型是一種理論模型，無(wú)法實(shí)現(xiàn)以下關(guān)于yarn的描述正確的是：（）

答案:支持多個(gè)框架，yarn不再是一個(gè)單純的計(jì)算框架，而是一個(gè)框架管理器。以下關(guān)于yarn的說(shuō)法正確的是：（）

答案:Yarn是采用兩級(jí)式資源分配方案對(duì)新一代資源管理調(diào)度框架YARN的理解正確的是：（）

答案:YARN可以實(shí)現(xiàn)“一個(gè)集群多個(gè)框架”，即在一個(gè)集群上部署一個(gè)統(tǒng)一的資源調(diào)度管理框架Yarn附則整個(gè)集群的資源管理功能，每個(gè)任務(wù)都單獨(dú)有一個(gè)“應(yīng)用服務(wù)器”：（）

答案:對(duì)Yarn各模塊組成有：（）

答案:Resourcemanager、nodemanager、applicationMasterHadoop環(huán)境變量中的HADOOP_HEAPSIZE用于設(shè)置所有Hadoop守護(hù)線程的內(nèi)存。它默認(rèn)是（）。

答案:1000M配置機(jī)架感知的下面哪項(xiàng)正確：（）

答案:如果一個(gè)機(jī)架出問(wèn)題，不會(huì)影響數(shù)據(jù)讀寫;MapReduce會(huì)根據(jù)機(jī)架獲取離自己比較近的網(wǎng)絡(luò)數(shù)據(jù);寫入數(shù)據(jù)的時(shí)候會(huì)寫到不同機(jī)架的DataNode中如果NameNode意外終止，SecondaryNameNode會(huì)接替它使集群