Hadoop大數(shù)據(jù)技術(shù)與項(xiàng)目實(shí)戰(zhàn)智慧樹(shù)知到期末考試答案2024年

Hadoop大數(shù)據(jù)技術(shù)與項(xiàng)目實(shí)戰(zhàn)智慧樹(shù)知到期末考試答案2024年Hadoop大數(shù)據(jù)技術(shù)與項(xiàng)目實(shí)戰(zhàn)ADS數(shù)據(jù)應(yīng)用層，在ADS層中，進(jìn)行最終指標(biāo)統(tǒng)計(jì)，從而服務(wù)于報(bào)表系統(tǒng)的數(shù)據(jù)展示。（）

A:對(duì)B:錯(cuò)答案:對(duì)使用列式存儲(chǔ)數(shù)據(jù)采用LZO的壓縮格式，目的是提高當(dāng)前表數(shù)據(jù)在查詢過(guò)程中的效率。（）

A:對(duì)B:錯(cuò)答案:對(duì)Flume在數(shù)據(jù)傳輸過(guò)程中，事件中的Value即body，body是一個(gè)字節(jié)數(shù)組，封裝的是傳輸?shù)臄?shù)據(jù)。（）

A:對(duì)B:錯(cuò)答案:對(duì)刪除Kafka主題時(shí)，在配置文件中設(shè)置delete.topic.enable=true，才是完全刪除，否則為標(biāo)記刪除。

A:錯(cuò)B:對(duì)答案:對(duì)Flume的數(shù)據(jù)流可以根據(jù)headers的信息發(fā)送到不同的channel中。（）

A:正確B:錯(cuò)誤答案:正確外連接中，顯示左表所有數(shù)據(jù)的是右外連接。（）

A:錯(cuò)B:對(duì)答案:錯(cuò)Hadoop是Apache基金會(huì)開(kāi)發(fā)的一款分布式系統(tǒng)基礎(chǔ)架構(gòu)，主要解決海量數(shù)據(jù)存儲(chǔ)和海量數(shù)據(jù)計(jì)算兩大問(wèn)題，從廣義上來(lái)說(shuō)，Hadoop通常指的是Hadoop生態(tài)圈。（）

A:錯(cuò)B:對(duì)答案:對(duì)MapReduce詞頻統(tǒng)計(jì)案例中，Driver階段的Configuration會(huì)操作job對(duì)象實(shí)現(xiàn)案例需求（）。

A:錯(cuò)B:對(duì)答案:對(duì)Hive本身沒(méi)有存儲(chǔ)功能，其數(shù)據(jù)要基于HDFS來(lái)存儲(chǔ)。（）

A:對(duì)B:錯(cuò)答案:對(duì)在項(xiàng)目中，關(guān)于數(shù)據(jù)遷移的實(shí)現(xiàn)是由sqoop完成，主要將HDFS上的數(shù)據(jù)抽取到MySQL。（）

A:對(duì)B:錯(cuò)答案:對(duì)在HQL關(guān)聯(lián)測(cè)試中，測(cè)試表是員工表和地址表。（）

A:對(duì)B:錯(cuò)答案:錯(cuò)Event的最大定義為1024字節(jié)，超過(guò)會(huì)被切割放到下一個(gè)Event中。（）

A:錯(cuò)B:對(duì)答案:錯(cuò)在使用PyEcharts繪制輪播多圖時(shí)，需要事先導(dǎo)入Timeline類。（）

A:對(duì)B:錯(cuò)答案:對(duì)insertoverwrite命令將數(shù)據(jù)寫(xiě)入表中（）

A:對(duì)B:錯(cuò)答案:對(duì)可以使用zkServer.shstop命令開(kāi)啟Zookeeper。（）

A:對(duì)B:錯(cuò)答案:錯(cuò)在使用pyecharts繪制餅圖時(shí)，需要事先導(dǎo)入PictorialBar類。（）

A:對(duì)B:錯(cuò)答案:錯(cuò)在Flume數(shù)據(jù)傳輸過(guò)程中，選擇Kafkasink，能把數(shù)據(jù)寫(xiě)入Kafka對(duì)應(yīng)的Topic中（）

A:錯(cuò)B:對(duì)答案:對(duì)在編寫(xiě)Flume攔截器代碼時(shí)，configure方法的功能是可以獲取到Flume進(jìn)程在運(yùn)行過(guò)程中的運(yùn)行參數(shù)，然后對(duì)其進(jìn)行引用。（）

A:錯(cuò)B:對(duì)答案:對(duì)在項(xiàng)目中，使用MySQL的應(yīng)用場(chǎng)景有兩個(gè)，一是用來(lái)存儲(chǔ)Hive的元數(shù)據(jù)信息，二是存儲(chǔ)數(shù)據(jù)倉(cāng)庫(kù)統(tǒng)計(jì)出來(lái)的指標(biāo)結(jié)果（）

A:對(duì)B:錯(cuò)答案:對(duì)在設(shè)計(jì)Flume數(shù)據(jù)采集系統(tǒng)時(shí)，增加source個(gè)數(shù)，可以增大source讀取能力。（）

A:錯(cuò)B:對(duì)答案:對(duì)使用pyecharts進(jìn)行可視化時(shí)，可以用下哪個(gè)選項(xiàng)設(shè)置圖例不顯示？（）

A:label_opts=opts.LabelOpts(is_show=False)B:axisline_opts=opts.AxisLineOpts(is_show=False)C:xaxis_opts=opts.AxisOpts(is_show=False)D:legend_opts=opts.LegendOpts(is_show=False)答案:legend_opts=opts.LegendOpts(is_show=False)在Linux命令行中，使用schematool命令（）

A:格式化hive元數(shù)據(jù)庫(kù)B:刷新配置C:刪除hive元數(shù)據(jù)庫(kù)D:更新hive元數(shù)據(jù)庫(kù)答案:格式化hive元數(shù)據(jù)庫(kù)Hive定義了類似于SQL語(yǔ)言的（）語(yǔ)言。

A:DQLB:EQLC:HQLD:VQL答案:HQLFlume可以快速消費(fèi)KafkaTopic數(shù)據(jù)，然后將消費(fèi)后的數(shù)據(jù)轉(zhuǎn)發(fā)到（）上。

A:HDFSB:SourceC:SinkD:Channel答案:HDFS下列哪條命令可以為f1.sh腳本文件賦予權(quán)限（）。

A:./f1.shstartB:vimf1.shC:./f1.shstopD:chmodu+xf1.sh答案:chmodu+xf1.sh使用hdfsdfs-count/查看根目錄下面數(shù)據(jù)文件的個(gè)數(shù)，顯示結(jié)果為“149458745”，其中9代表的是（）

A:文件的嵌套層數(shù)B:子目錄的個(gè)數(shù)C:所有文件的字節(jié)數(shù)D:文件個(gè)數(shù)答案:文件個(gè)數(shù)執(zhí)行聚合統(tǒng)計(jì)的函數(shù)是（）

A:MINB:COUNTC:SUMD:MAX答案:COUNTSqoop的工作本質(zhì)是（）。

A:遷移數(shù)據(jù)B:存儲(chǔ)數(shù)據(jù)C:接收數(shù)據(jù)D:處理數(shù)據(jù)答案:遷移數(shù)據(jù)在縱向拼接中，可以實(shí)現(xiàn)去重的是（）。

A:UnionallB:DistinctC:FulljoinD:union答案:union（）命令可以查看當(dāng)前HDFS上面文件內(nèi)容的數(shù)據(jù)。

A:catB:cdC:lsD:open答案:cd在Flume數(shù)據(jù)采集配置文件中，kafka.bootstrap.servers=node1:9092，該配置表示（）

A:配置Kafka的路徑B:配置Kafka的通信地址C:配置kafka的Topic的數(shù)量D:配置Kafka的消費(fèi)組答案:配置Kafka的通信地址在Hive中，給數(shù)據(jù)表添加數(shù)據(jù)，可以將數(shù)據(jù)文件當(dāng)中的數(shù)據(jù)一次性加載到指定的表中的方法是（）。

A:insertintoB:appendC:addD:load答案:loadpyecharts中，用以下哪個(gè)配置項(xiàng)對(duì)圖表標(biāo)題進(jìn)行設(shè)置？（）

A:LegendOptsB:AxisOptsC:TitleOptsD:InitOpts答案:TitleOptspyecharts中的（）可以實(shí)現(xiàn)將多個(gè)圖表在一個(gè)頁(yè)面中進(jìn)行布局。（）

A:PolarB:PageC:PieD:PictorialBar答案:Page在Sqoop執(zhí)行數(shù)據(jù)遷移過(guò)程中，當(dāng)不需要做任何聚合操作時(shí)，只需要MR程序當(dāng)中的（）階段即可。

A:ShuffleB:ReduceC:MapD:Split答案:Map公共字段cm中字段含義為設(shè)備唯一標(biāo)識(shí)的字段是（）

A:vcB:midC:uidD:vn答案:mid在Flume數(shù)據(jù)傳輸過(guò)程中，Agent主要由（）組成。

A:SinkB:ChannelC:AppD:Source答案:Source###Channel###Sink根據(jù)在Flume數(shù)據(jù)采集腳步中的攔截器配置，程序首先對(duì)Builder內(nèi)部類進(jìn)行實(shí)例化，從而執(zhí)行類中的兩個(gè)方法，分別為（）。

A:CloseB:initializeC:BuildD:Configure答案:Build###ConfigureFlume在數(shù)據(jù)傳輸過(guò)程中，事件包含兩部分（）。

A:ValueB:actionC:MethodD:Key答案:Key###Value下列屬于事件日志數(shù)據(jù)合法校驗(yàn)步驟的是（）。

A:對(duì)數(shù)據(jù)進(jìn)行校驗(yàn)B:校驗(yàn)是否為json格式C:校驗(yàn)服務(wù)器時(shí)間D:對(duì)日志進(jìn)行切割答案:對(duì)日志進(jìn)行切割###對(duì)數(shù)據(jù)進(jìn)行校驗(yàn)###校驗(yàn)服務(wù)器時(shí)間###校驗(yàn)是否為json格式DWT層，構(gòu)建一張?jiān)O(shè)備主題寬表的字段有哪些（）

A:手機(jī)型號(hào)B:手機(jī)品牌C:累積活躍天數(shù)D:設(shè)備唯一標(biāo)識(shí)答案:設(shè)備唯一標(biāo)識(shí)###手機(jī)型號(hào)###手機(jī)品牌###累積活躍天數(shù)安裝MySQL服務(wù)時(shí)，需要安裝以下（）。

A:MySQL所需要的依賴庫(kù)B:MySQL的客戶端服務(wù)C:MySQL的公共服務(wù)D:MySQL的服務(wù)端服務(wù)答案:MySQL的公共服務(wù)###MySQL所需要的依賴庫(kù)###MySQL的客戶端服務(wù)###MySQL的服務(wù)端服務(wù)內(nèi)連接使用到的關(guān)鍵字是（）。

A:joinB:FulljoinC:LeftjoinD:innerjoin答案:innerjoin下列關(guān)于zookeeper的描述，正確的是（）。

A:一次數(shù)據(jù)更新要么成功(半數(shù)以上節(jié)點(diǎn)成功)，要么失敗，不存在中間狀態(tài)，即數(shù)據(jù)更新原子性B:具有順序性，即更新請(qǐng)求是按照順序進(jìn)行的C:集群中只要有半數(shù)以上節(jié)點(diǎn)存活，Zookeeper集群就能正常服務(wù)D:Zookeeper是一個(gè)領(lǐng)導(dǎo)者(Leader)，多個(gè)跟隨者(Follower)組成的集群答案:Zookeeper是一個(gè)領(lǐng)導(dǎo)者(Leader)，多個(gè)跟隨者(Follower)組成的集群;集群中只要有半數(shù)以上節(jié)點(diǎn)存活，Zookeeper集群就能正常服務(wù);一次數(shù)據(jù)更新要么成功(半數(shù)以上節(jié)點(diǎn)成功)，要么失敗，不存在中間狀態(tài)，即數(shù)據(jù)更新原子性;具有順序性，即更新請(qǐng)求是按照順序進(jìn)行的在HQL實(shí)現(xiàn)過(guò)程中，一個(gè)語(yǔ)句里要執(zhí)行（）兩部分操作。

A:分析數(shù)據(jù)B:將查詢結(jié)果直接保存到對(duì)應(yīng)的統(tǒng)計(jì)結(jié)果表中C:數(shù)據(jù)可視化的展示D:查詢業(yè)務(wù)數(shù)據(jù)表中的數(shù)據(jù)答案:查詢業(yè)務(wù)數(shù)據(jù)表中的數(shù)據(jù)###將查詢結(jié)果直接保存到對(duì)應(yīng)的統(tǒng)計(jì)結(jié)果表中外連接中，顯示左表或者右表所有數(shù)據(jù)的是（）。

A:全外連接B:左外連接C:內(nèi)連接D:右外連接答案:左外連接###右外連接整個(gè)MapReduce的執(zhí)行過(guò)程可以分為split、map、（）五個(gè)階段。

A:輸出B:輸入C:shuffleD:reduce答案:shuffle###reduce###輸出下列參數(shù)中，哪些是Sqoop導(dǎo)入全部數(shù)據(jù)命令時(shí)用到的參數(shù)（）？

A:--connectB:--tableC:--passwordD:--username答案:--connect###--username###--password###--table配置hadoop的核心文件有（）。

A:core-site.xml,B:mapred-site.xmlC:hadoop-env.shD:hdfs-site.xml答案:core-site.xml###hadoop-env.sh###hdfs-site.xml###mapred-site.xmlyarn集群核心配置的文件是（）。

A:hdfs-site.xmlB:yarn-site.xmlC:core-site.xmlD:mapred-site.xml答案:yarn-site.xml###mapred-site.xml在本教材的實(shí)戰(zhàn)操作中，打開(kāi)hosts文件，設(shè)置三臺(tái)虛擬機(jī)的IP地址及映射名稱，需要輸入（）內(nèi)容。

A:192.168.100.5node3B:192.168.100.3node1C:192.168.100.4node2D:192.168.100.5node4答案:192.168.100.3node1###192.168.100.4node2###192.168.100.5node3以下描述正確的是（）

A:Map階段產(chǎn)生的數(shù)據(jù)會(huì)通過(guò)shuffle階段，在內(nèi)存緩沖區(qū)中進(jìn)行數(shù)據(jù)的分區(qū)、排序、分組的處理B:Reduce階段是將一個(gè)大的計(jì)算任務(wù)分解成多個(gè)小任務(wù)C:shuffle階段是整個(gè)MapReduce執(zhí)行過(guò)程中最復(fù)雜的一步D:整個(gè)MapReduce的執(zhí)行過(guò)程可以分為五個(gè)階段答案:AI參考:正確選項(xiàng)為：D:整個(gè)MapReduce的執(zhí)行過(guò)程可以分為五個(gè)階段。\n\n整個(gè)MapReduce的執(zhí)行過(guò)程可以分為五個(gè)階段，分別是：\n\n1.Map階段：將輸入數(shù)據(jù)映射成中間鍵值對(duì)，并輸出到輸