《大數(shù)據(jù)平臺搭建與配置管理》期中試卷及答案

大數(shù)據(jù)平臺搭建與配置管理第11頁共11頁《大數(shù)據(jù)平臺搭建與配置管理》期中試題期中試題（閉卷B）題號一二三四五六七八九十成績滿分30202030100得分【本套試卷共有4大題，計66小題】一、選擇題（20題，每題1.5分，共30分）1、欲把當(dāng)前目錄下的file1.txt復(fù)制為file2.txt，以下正確的命令是（）。A.copyfile1.txtfile2.txtB.cpfile1.txt|file2.txtC.catfile2.txtfile1.txtD.catfile1.txt>file2.txt2、下面哪個命令可以用來切換使用者的身份（）。A.passwdB.logC.whoD.su3、以下哪個不是HDFS的守護進程（）。A.datanodeB.namenodeC.secondarynamenodeD.mrappmaster/yarnchild4、Hadoop-2.6.5集群中的HDFS的默認的數(shù)據(jù)塊的大小是（）。A.32MBB.64MBC.128MBD.256MB5、HDFS集群中的namenode職責(zé)不包括（）。A.維護HDFS集群的目錄樹結(jié)構(gòu)B.維護HDFS集群的所有數(shù)據(jù)塊的分布、副本數(shù)和負載均衡C.負責(zé)保存客戶端上傳的數(shù)據(jù)D.響應(yīng)客戶端的所有讀寫數(shù)據(jù)請求6、下列關(guān)于HDFS的描述正確的是（）。A.如果NameNode宕機，SecondaryNameNode會接替它使集群繼續(xù)工作B.HDFS集群支持?jǐn)?shù)據(jù)的隨機讀寫C.NameNode磁盤元數(shù)據(jù)不保存Block的位置信息D.DataNode通過長連接與NameNode保持通信7、MapReduce是（）上的并行計算。A.運行于大規(guī)模集群B.運行于磁盤C.運行于小規(guī)模集群D.運行在復(fù)雜的系統(tǒng)中8、MapReduce框架會將Map程序就近地在（）數(shù)據(jù)所在的節(jié)點運行。A.HDFSB.SparkC.MapReduceD.Zookeeper9、MapReduce為了保證任務(wù)的正常執(zhí)行，采用（）等多種容錯機制。A.重復(fù)執(zhí)行B.重新開始整個任務(wù)C.直接丟棄執(zhí)行效率低的作業(yè)D.以上都是10、ZooKeeper是集群的（），監(jiān)視著集群中各個節(jié)點的狀態(tài)根據(jù)節(jié)點提交的反饋進行下一步合理操作。A.領(lǐng)導(dǎo)者B.執(zhí)行者C.管理者D.以上都不是11、ZK提供了一定的（）可以用來獲取一個順序增長的，可以在集群環(huán)境下使用的ID。A.函數(shù)B.接口C.方法D.類12、名稱空間由（）組成。A.磁盤寄存器B.表C.內(nèi)存寄存器D.數(shù)據(jù)寄存器13、hive數(shù)據(jù)倉庫中的數(shù)據(jù)，不可能的來源有哪些？（）A.Mysql或Oracle數(shù)據(jù)庫B.行為數(shù)據(jù)C.業(yè)務(wù)數(shù)據(jù)系統(tǒng)D.娛樂資料14、解壓.tar.gz結(jié)尾的HBase壓縮包使用的Linux命令是什么？（）A.tar-vfB.tarC.tar-zxD.tar-zxvf15、下以下數(shù)據(jù)第三列，應(yīng)該用哪種數(shù)據(jù)類型存儲:1,zhangsan,[90,79.88]。（）A.mapB.intC.arrayD.struct16、查詢速度的提升是以額外的（）為代價的。A.創(chuàng)建索引B.創(chuàng)建索引和存儲索引C.刪除索引D.存儲索引17、當(dāng)客戶端發(fā)起一個Put請求時，首先它從（）表中查出該Put數(shù)據(jù)。A.hbase:metaB.hbase:valueC.-ROOT-D.hbase:key18、HBase構(gòu)建二級索引的實現(xiàn)方式有哪些？（）A.MapReduceB.HiveC.BloomFilterD.Filter19、Storm將（）組成的網(wǎng)絡(luò)抽象成Topology。A.Spouts和BoltsB.字段C.GFSD.Tuple20、Storm運行在分布式集群中，其運行任務(wù)的方式與（）類似。A.HDFSB.HBaseC.HadoopD.Zookeeper二、填空題（20題，每題1分，共10分）21、鏈接分為：。22、JDK下解釋執(zhí)行Java的程序是。23、是客戶端需要執(zhí)行的一個工作單元。24、HDFS在設(shè)計上采取了多種機制保證在硬件出錯的環(huán)境中實現(xiàn)數(shù)據(jù)的。25、HDFS不適合用在的應(yīng)用場合。26、HDFS集群中只有唯一一個名稱節(jié)點，該節(jié)點負責(zé)所有的。27、Map的輸出結(jié)果首先被寫入。28、磁盤包含機械部件，它是通過和來尋址定位數(shù)據(jù)。29、Shuffle優(yōu)化的原則是給Shuffle過程盡可能多的。30、ZooKeeper允許分布式進程通過共享的相互協(xié)調(diào)。31、分布式應(yīng)用正在運行的一組系統(tǒng)稱為。32、ZooKeeper類通過其構(gòu)造函數(shù)提供功能。33、Hive中創(chuàng)建的目的就是在查詢一個表中某列值時提升速度。34、使用命令可以創(chuàng)建一個指定名字的表。35、WHERE子句是一個。36、HBase主要用來存儲和的松散數(shù)據(jù)。37、在HBase中執(zhí)行操作時，并不會刪除數(shù)據(jù)舊的版本。38、服務(wù)器負責(zé)存儲和維護分配給自己的。39、Storm可以用來實時處理新數(shù)據(jù)和。40、Topology中每一個計算組件都有一個執(zhí)行度。三、判斷題，正確填“T”，錯誤填“F”（20題，每題1分，共20分）41、Hive本地模式和遠程模式，最關(guān)鍵的差別是存儲元數(shù)據(jù)的mysql數(shù)據(jù)庫的安裝位置是在本地還是在遠端。（）42、Hive數(shù)據(jù)類型中date類型是與時區(qū)無關(guān)的類型。（）43、Hive數(shù)據(jù)類型中，Timestamp類型是與時區(qū)無關(guān)的類型。（）44、Hive中的表，對應(yīng)hdfs中文件的目錄。（）45、外部表和內(nèi)部表的差別，只是需要添加External關(guān)鍵詞就可以了。（）46、刪除外部表，只會刪除外部表的元數(shù)據(jù)信息，并不會將外部表的數(shù)據(jù)刪除。（）47、刪除外部表，會同時刪除外部表的數(shù)據(jù)和元數(shù)據(jù)。（）48、在Hive中，執(zhí)行分桶操作，具體哪個值，分到哪個桶中，可以通過對數(shù)據(jù)進行Hash運算取得。（）49、HBase是一套高性能的分布式數(shù)據(jù)集群，必須在大型機或者高性能的服務(wù)器上進行搭建。（）50、HBase是Apache的Hadoop項目的子項目，利用HadoopHDFS作為其文件存儲系統(tǒng)，適合于非結(jié)構(gòu)化數(shù)據(jù)存儲。（）51、MapReduce程序可以直接讀取HBase內(nèi)存儲的數(shù)據(jù)內(nèi)容。（）52、HBase系統(tǒng)適合進行多表聯(lián)合查詢以及復(fù)雜性讀寫操作。（）53、Hadoop是IBM公司開發(fā)的一款商用大數(shù)據(jù)軟件。（）54、Hadoop是一個能夠?qū)Υ罅繑?shù)據(jù)進行分布式處理的軟件框架，能夠處理PB級數(shù)據(jù)。（）55、Hadoop存儲系統(tǒng)HDFS的文件是分塊存儲，每個文件塊默認大小為32MB。（）56、HDFS系統(tǒng)為了容錯保證數(shù)據(jù)塊完整性，每一塊數(shù)據(jù)都采用2份副本。（）57、HDFS系統(tǒng)采用NameNode定期向DataNode發(fā)送心跳消息，用于檢測系統(tǒng)是否正常運行。（）58、用戶可以通過”hadoopfs–put”命令獲取遠端文件數(shù)據(jù)。（）59、Nagios不可以監(jiān)控Hadoop集群，因為它不提供Hadoop支持（）。60、Ganglia不僅可以進行監(jiān)控，也可以進行報警（）。四、簡答題（6題，每題5分，共30分）61、試論述實現(xiàn)矩陣向量乘法與矩陣乘法采用不同MapReduce策略的原因。62、試論述HBase的三層結(jié)構(gòu)中各層次的名稱和作用。答：63、Storm集群中的Master節(jié)點和Work節(jié)點各自運行什么后臺進程？這些進程又分別負責(zé)什么工作？答：64、試論述Storm框架的工作流程。答：65、試論述Hadoop和谷歌的mapreduce、gfs等技術(shù)之間的關(guān)系。答：66、試論述Hadoop在各個領(lǐng)域的應(yīng)用情況。答：《大數(shù)據(jù)平臺搭建與配置管理》期中標(biāo)答期中標(biāo)答B(yǎng)（閉卷）題號一二三四五六七八九十成績滿分30202030100得分一、選擇題（20題，每題1.5分，共30分）1-5：DDDCD 6-10：CAAAC11-15：BDDDC16-20：BAAAC二、填空題（20題，每題1分，共20分）21、軟鏈接和硬鏈接 22、java.exe23、job24、完整性25、低延遲26、元數(shù)據(jù)的管理27、緩存28、磁頭移動盤片的轉(zhuǎn)動29、內(nèi)存30、分層命名空間31、集群32、connect33、索引34、CREATETABLE35、邏輯表達式36、非結(jié)構(gòu)化半結(jié)構(gòu)化37、更新38、RegionRegion39、更新數(shù)據(jù)庫40、并行三、判斷題（20題，每題1分，共20分）41-45：FFTTF46-50：TFTFT51-55：TFFTF56-60：FFFFT四、簡答題（6題，每題5分，共60分）61、答：矩陣向量乘法：Map函數(shù)：每個Map任務(wù)將整個向量V和矩陣M的一個文件塊作為輸入。對每個元素Mij，Map任務(wù)會產(chǎn)生鍵值對。Reduce函數(shù)：Reduce任務(wù)將所有與給定鍵i關(guān)聯(lián)的值相加即可得到<i，xi>。矩陣乘法：1.自然連接：Map函數(shù)：對每個矩陣元素My產(chǎn)生一個鍵值對，對每個矩陣元素Njk產(chǎn)生一個鍵值對。Reduce函數(shù)：對每個相同鍵j，輸出所有滿足形式<j,<i,k,mijnjk>>的元組。62、答：63、答：Storm采用“Master-Worker”的節(jié)點方式：Master節(jié)點運行名為“Nimbus”的后臺程序，負責(zé)在集群范圍內(nèi)分發(fā)代碼、為Work