《大數(shù)據(jù)存儲技術(shù)與應(yīng)用》 課件 項目四-任務(wù)三 深入MPP數(shù)據(jù)存儲技術(shù)

《大數(shù)據(jù)存儲技術(shù)與應(yīng)用》大數(shù)據(jù)存儲技術(shù)與應(yīng)用項目四深入結(jié)構(gòu)化存儲任務(wù)三深入MPP并行數(shù)據(jù)存儲技術(shù)什么是結(jié)構(gòu)化數(shù)據(jù)？什么是MPP？結(jié)構(gòu)化數(shù)據(jù)存儲的技術(shù)路線？Hadoop？回顧任務(wù)引入-MPP技術(shù)Greenplum。該公司成立于2003年，2006年推出了首款產(chǎn)品，其主營業(yè)務(wù)關(guān)注在數(shù)據(jù)倉庫和商業(yè)智能方面，GreenplumDW/BI軟件可以在虛擬化x86服務(wù)器上運行無分享（shared-nothing）的大規(guī)模并行處理（MPP）架構(gòu)。任務(wù)描述:節(jié)以開源數(shù)據(jù)庫GreenPlum為基礎(chǔ)系統(tǒng)學(xué)習(xí)MPP并行數(shù)據(jù)存儲技術(shù)。在任務(wù)實踐過程中，可以選擇企業(yè)版本Teryx或開源GreenPlum版本進行部署。任務(wù)教學(xué)目標：領(lǐng)會關(guān)系數(shù)據(jù)庫理論基礎(chǔ)。掌握關(guān)系數(shù)據(jù)庫模型設(shè)計。應(yīng)用結(jié)構(gòu)化數(shù)據(jù)存儲。任務(wù)概要教學(xué)內(nèi)容MPP并行數(shù)據(jù)存儲概述Greenplum數(shù)據(jù)存儲架構(gòu)一二Greenplum數(shù)據(jù)存儲操作Greenplum應(yīng)用案例三四MPP并行數(shù)據(jù)存儲概述知識點一

安裝依賴（53&54）MPP（MassivelyParallelProcessing，大規(guī)模并行處理）也被稱為SharedNothing架構(gòu)，指有兩個或者多個處理器協(xié)同執(zhí)行一個操作的并行系統(tǒng)，每一個處理器都有其自己的內(nèi)存、操作系統(tǒng)和磁盤。GreenPlum使用這種高性能系統(tǒng)架構(gòu)來分布數(shù)T字節(jié)數(shù)據(jù)負載并且能夠使用系統(tǒng)的所有資源并行處理一個查詢。（一）MPP并行存儲概述Greenplum數(shù)據(jù)存儲操作知識點三

安裝依賴（53&54）GreenPlum數(shù)據(jù)庫是一種大規(guī)模并行處理（MPP）數(shù)據(jù)庫服務(wù)器，GreenPlum架構(gòu)特別適合大規(guī)模數(shù)據(jù)分析、機器學(xué)習(xí)和AI。（二）Greenplum數(shù)據(jù)存儲架構(gòu)Greenplum數(shù)據(jù)存儲架構(gòu)知識點二

安裝依賴（53&54）（三）Greenplum數(shù)據(jù)庫操作1.創(chuàng)建數(shù)據(jù)庫CREATEDATABASEnew_dbname;2.克隆數(shù)據(jù)庫CREATEDATABASEnew_dbnameTEMPLATEold_dbname;3.創(chuàng)建不同Owner的數(shù)據(jù)庫CREATEDATABASEnew_dbnameWITHowner=new_user;4.修改數(shù)據(jù)庫ALTERDATABASEmydatabaseSETsearch_pathTOmyschema,public,pg_catalog;5.刪除數(shù)據(jù)庫DROPDATABASEmydatabase;

安裝依賴（53&54）（三）Greenplum數(shù)據(jù)操作1.Insert操作INSERT語句向GreenPlum數(shù)據(jù)表中添加數(shù)據(jù)。INSERTINTOStudents(SNo,SName,SClass)VALUES('2020101001','李**','2020級大數(shù)據(jù)1班');INSERTINTOStudentsVALUES('2020101001','李**','2020級大數(shù)據(jù)1班');INSERTINTOStudentsSELECT*FROMtmp_StudentsWHERESClass='2019級大數(shù)據(jù)1班';INSERTINTOStudents(SNo,SName,SClass)VALUES('2020101001','李**','2020級大數(shù)據(jù)1班')；

安裝依賴（53&54）（三）Greenplum數(shù)據(jù)操作UPDATE語句更新GreenPlum數(shù)據(jù)表中的數(shù)據(jù)。UPDATEStudentsSETSAge=21WHERESNo='2020101003';3.Delete操作DELETE語句從GreenPlum數(shù)據(jù)表中刪除行。DELETEFROMStudentsWHERESNo='2020101003';4.Truncate操作使用TRUNCATE語句可以快速地清空GreenPlum表中的所有數(shù)據(jù)。TRUNCATEtmp_Students;Greenplum應(yīng)用案例知識點四

安裝依賴（53&54）（四）Greenplum應(yīng)用案例Teryx是一款MPP架構(gòu)的分布式數(shù)據(jù)庫引擎，基于GreenPlum開源數(shù)據(jù)庫實現(xiàn)，相比于原生數(shù)據(jù)庫，總體性能有一定提升。本案例基于Teryx實現(xiàn)對score（成績表）的結(jié)構(gòu)化數(shù)據(jù)操作。也可以基于開源Greenplum安裝實現(xiàn)。（四）Greenplum應(yīng)用案例（四）Greenplum應(yīng)用案例（四）Greenplum應(yīng)用案例（四）Greenplum應(yīng)用案例（四）Greenplum應(yīng)用案例4（四）Greenplum應(yīng)用案例.1.3.1安裝依53&54）（四）Greenplum應(yīng)用案例

安裝（53&54）（四）Greenplum應(yīng)用案例.1.3.1安裝依賴53&54）任務(wù)小結(jié)本節(jié)學(xué)習(xí)了MPP并行計算，同時系統(tǒng)學(xué)習(xí)了GreenPlum并行數(shù)據(jù)庫。GreenPlum數(shù)據(jù)庫是一種大規(guī)模并行處理（MPP）數(shù)據(jù)庫服務(wù)器，MPP架構(gòu)特別針對管理大規(guī)模分析型數(shù)據(jù)倉庫以及商業(yè)智能工作負載而設(shè)計。GreenPlum官網(wǎng)的定義：“GreenPlum是全球最先進的大數(shù)據(jù)分析引擎，專為分析、機器學(xué)習(xí)和AI而打造?！睌U展訓(xùn)練PostgreSQL獨立學(xué)習(xí)起源于加利福尼亞大學(xué)伯克利分校的PostgreSQL作為世界上最先進的開源數(shù)據(jù)庫，已經(jīng)有30多年的歷史，并且以無與倫比的開發(fā)速度繼續(xù)發(fā)展。PostgreSQL的成熟功能不僅與頂級商業(yè)數(shù)