2023學(xué)年完整公開課版Hive表定義

大數(shù)據(jù)Hive數(shù)據(jù)倉庫1Hive表定義目錄Hive概述3Hive導(dǎo)入及導(dǎo)出數(shù)據(jù)45Hive查詢Hive安裝配置2HiveQL是一種類SQL語言，用于分析存儲(chǔ)在HDFS中的數(shù)據(jù)。不支持事務(wù)及更新操作，延遲比較大。HiveQL語句通過解釋器轉(zhuǎn)換為MapReduce作業(yè)提交到Hadoop集群上。HiveQL執(zhí)行方式：

hive命令行hive–eHive語句hive–fHive腳本Hive表定義HQL語句簡(jiǎn)介執(zhí)行shell命令用戶不需要退出hiveCLI就可以執(zhí)行簡(jiǎn)單的bashshell命令。只要在命令前加上!并且以分號(hào)（;）結(jié)尾就可以在Hive中使用Hadoop的dfs命令Hive表定義HQL語句簡(jiǎn)介數(shù)據(jù)庫操作Hive表定義創(chuàng)建表的語法Hive表定義CREATE[EXTERNAL]TABLE[IFNOTEXISTS][db_name.]table_name[(col_namedata_type[COMMENTcol_comment],...)][PARTITIONEDBY(col_namedata_type,...)][CLUSTEREDBY(col_name,col_name,...)[SORTEDBY(col_name[ASC|DESC],...)]INTOnum_bucketsBUCKETS][ROWFORMATrow_format][STOREDASfile_format][LOCATIONhdfs_path]Hive表定義創(chuàng)建內(nèi)表創(chuàng)建外表創(chuàng)建靜態(tài)分區(qū)表創(chuàng)建動(dòng)態(tài)分區(qū)表創(chuàng)建帶有數(shù)據(jù)的表Hive表分類在train數(shù)據(jù)庫下創(chuàng)建表person，表的結(jié)構(gòu)如下idint類型namestring類型ageint類型Hive表定義創(chuàng)建內(nèi)表創(chuàng)建Hive外部表external_person，指定HDFS的路徑為/user/root/external/person，表的結(jié)構(gòu)如下idint類型namestring類型ageint類型Hive表定義創(chuàng)建外表現(xiàn)有一份數(shù)據(jù)student_part.txt，如下圖所示。該數(shù)據(jù)表示某學(xué)校某年級(jí)ClassA班的成績(jī)，數(shù)據(jù)有三個(gè)字段，分別為id，name，score。創(chuàng)建Hive靜態(tài)分區(qū)表student_part，指定分區(qū)字段為班級(jí)classHive表的定義創(chuàng)建靜態(tài)分區(qū)表創(chuàng)建靜態(tài)分區(qū)表Hive表的定義已知數(shù)據(jù)student_part.txt是屬于班級(jí)ClassB的數(shù)學(xué)成績(jī)，需要把數(shù)據(jù)歸檔到某個(gè)班級(jí)某個(gè)科目的分區(qū)下，Hive創(chuàng)建靜態(tài)分區(qū)表是如何指定多個(gè)分區(qū)？Hive定義創(chuàng)建靜態(tài)分區(qū)表已知數(shù)據(jù)students.txt記錄了某個(gè)年級(jí)的信息，包括2a，2b，3a，3c這4個(gè)班級(jí)的成績(jī)，要求創(chuàng)建動(dòng)態(tài)分區(qū)表，把每個(gè)班級(jí)的成績(jī)存儲(chǔ)到對(duì)應(yīng)的分區(qū)里數(shù)據(jù)如圖所示Hive表定義創(chuàng)建動(dòng)態(tài)分區(qū)表第一步：創(chuàng)建普通表student第二步：導(dǎo)入數(shù)據(jù)到student表Hive表定義創(chuàng)建動(dòng)態(tài)分區(qū)表第三步：創(chuàng)建動(dòng)態(tài)分區(qū)表student_dynamicHive表定義創(chuàng)建動(dòng)態(tài)分區(qū)表第四步：導(dǎo)入數(shù)據(jù)到student_dynamicHive表定義創(chuàng)建