GreenPlum數(shù)據(jù)庫詳細(xì)安裝過程

1、Gree nP lum數(shù)據(jù)庫概述GreenPlum數(shù)據(jù)庫架構(gòu)原理SUSEL in uxE nterprise1164-bit操作系統(tǒng)安裝過程初始化階段.系統(tǒng)分區(qū).軟件選擇和系統(tǒng)任務(wù) 語言選擇 .Kdump設(shè)置.安裝過程.配置網(wǎng)卡IP .GreenPlum中Master配置過程建立gpadmin用戶關(guān)閉防火墻.啟動FTP.使用FlashXP上傳GreenPlum數(shù)據(jù)使用工具配置GreenPlum數(shù)據(jù)庫.GreenPlum數(shù)據(jù)庫配置詳情 .GrennPlum數(shù)據(jù)庫的初始化.修改GreenPlum數(shù)據(jù)庫賬戶的權(quán)限附錄A附錄B.2.34.1.概述1.1. GreenPlum數(shù)據(jù)庫概述1.2. Gree

2、nPlum數(shù)據(jù)庫架構(gòu)原理本系統(tǒng)中GreenPlum由一個主節(jié)點(diǎn)（master）和四個從節(jié)點(diǎn)（segment）構(gòu)成，主節(jié)點(diǎn)和從節(jié)點(diǎn)由一臺千兆交換機(jī)進(jìn)行連接?？蛻舳耍–lient）發(fā)送的命令通過主節(jié)點(diǎn)的主控作用，然后分發(fā)到從節(jié)點(diǎn)；從節(jié)點(diǎn)將用戶需要的結(jié)果匯總到主節(jié)點(diǎn)， 由主節(jié)點(diǎn)進(jìn)行整合然后再將結(jié)果返回給客戶端。主節(jié)點(diǎn)與從節(jié)點(diǎn)的鏈接規(guī)則是保證每臺服務(wù)器中網(wǎng)口的IP地址不是互聯(lián)互 通的，但是與其他的服務(wù)器之間可以通信。換句換說保障同一臺服務(wù)器中的IP地址不是處于同一網(wǎng)段，但是不同服務(wù)器中的相同網(wǎng)口屬于同一網(wǎng)段。 在此需要 特別提醒用戶Master中一共擁有五塊網(wǎng)卡，第五塊網(wǎng)卡是與client進(jìn)行連接的

3、網(wǎng)口。負(fù)責(zé)外部用戶的訪問和數(shù)據(jù)傳輸。網(wǎng)線連接順序節(jié)點(diǎn)名稱網(wǎng)口1網(wǎng)口2網(wǎng)口3網(wǎng)口4網(wǎng)口5MasterSeg1Seg2Seg3Seg4GP數(shù)據(jù)庫網(wǎng)線的接線示意圖2. SUSEL in uxE nterprise1164-bit操作系統(tǒng)安裝過程安裝GreenPlum數(shù)據(jù)庫的服務(wù)器，在安裝SUSELinuxEnterprise11操作系統(tǒng)之前首先需要進(jìn)行磁盤陣列的設(shè)置。本系統(tǒng)的GP數(shù)據(jù)庫中磁盤陣列選擇Raid5的方式（未完待續(xù)）。在主節(jié)點(diǎn)服務(wù)器的安裝過程中尤其需要注意：主節(jié)點(diǎn)比 從節(jié)點(diǎn)多一塊網(wǎng)卡，在服務(wù)器的外面可以很容易的看到主節(jié)點(diǎn)的網(wǎng)口為5個，其余從節(jié)點(diǎn)的網(wǎng)口為4個。2.1.初始化階段服務(wù)器的磁盤陣

4、列做完之后，進(jìn)入服務(wù)器的BIOS將服務(wù)器的硬盤分Raid5,Raid5做好后設(shè)置BIOS的啟動項為光驅(qū)啟動。然后將SUSES統(tǒng)安裝光盤放入服務(wù)器的光驅(qū)進(jìn)入系統(tǒng)安裝界面，選擇第二項“Installation”，然后按回車鍵。接收許可協(xié)議如下圖中的紅色框內(nèi)，點(diǎn)擊下一步 校驗(yàn)光盤系統(tǒng)完整性，完成后，點(diǎn)擊下一步選擇安裝模式“New In stallation”，點(diǎn)擊下一步選擇時區(qū)與時鐘，Region選擇“亞洲” （Asia），Time_Zone選擇“北京”（Beijing）。注意：此處需要將左下角的“HardWareclockSettoUTC”去掉勾選。然后點(diǎn)擊下一步2.2.系統(tǒng)分區(qū)本系統(tǒng)需要分成4個

5、分區(qū)，其中數(shù)據(jù)分區(qū)（/data）要求容量最大，其余的 分區(qū)在滿足系統(tǒng)正常運(yùn)行的前提下保證使用的容量最小。 本系統(tǒng)中每個節(jié)點(diǎn)的硬 盤為八塊1T，做完磁盤陣列后，系統(tǒng)硬盤的總?cè)萘看蠹s為7T。系統(tǒng)分區(qū)建議表系統(tǒng)分區(qū)建議分區(qū)序號大小文件系統(tǒng)Mou nt110GExt3/boot250GSwa pswa p350GExt3/4剩余容量XFS/data選擇 “PhysicalMachine”，點(diǎn)擊下一步 在安裝設(shè)置中選擇“Expert”主菜單 在Expert菜單內(nèi)選擇“Partitioning”選擇“CustomPartitioning(forExpert)”，點(diǎn)擊下一步在左側(cè)的樹狀結(jié)構(gòu)中選擇“HardD

6、isks”中的sda；然后點(diǎn)擊頁面下端的“AdcT按鈕，界面跳轉(zhuǎn)。選擇“Primary”，點(diǎn)擊下一步設(shè)置“CustomSize”為1GB然后點(diǎn)擊下一步設(shè)置“FormatPartition”文件系統(tǒng)的格式為 “EXT3；MountPartition選擇“/boot”目錄；然后點(diǎn)擊“完成”再一次點(diǎn)擊“Ade”按鈕，界面跳轉(zhuǎn)選擇“PrimaryPartition”，點(diǎn)擊下一步設(shè)置“CustomSize”為5GB點(diǎn)擊下一步 設(shè)置“FormatPartition”為“Swap ,“MountPartition”為“swap，點(diǎn)擊完成 第三次點(diǎn)擊“Add按鈕，界面跳轉(zhuǎn)選擇“Primary Partitio

7、n”，然后點(diǎn)擊下一步設(shè)置“CustomSize”為5GB點(diǎn)擊下一步設(shè)置“FormatPartition”格式為“Ext3”，“MountPartition”格式為“/”，點(diǎn) 擊完成最后一次點(diǎn)擊“Add按鈕，界面跳轉(zhuǎn)。選擇“PrimaryPartition”，點(diǎn)擊下一步設(shè)置“CustomSize”為剩余的所有容量，點(diǎn)擊下一步設(shè)置“FormatPartition”文件系統(tǒng)格式為 “XFS”，“MountPartition”為“/data”，注意：此處的“/data”需要用戶手動輸入。點(diǎn)擊完成在“ExpertP artitioner“In stallati on Sett ing”2.3.軟件選擇和

8、系統(tǒng)任務(wù) 在 “In stallati on Sett ing按照下圖進(jìn)行勾選勾選完成后，點(diǎn)擊界面左下角的“Details”按鈕，界面跳轉(zhuǎn) 在“Search”輸入框內(nèi)輸入 勾選，然后點(diǎn)擊“Accept” 界面彈出提示框，請點(diǎn)擊“In stallatio nSetti ng”界面”主界面右下角點(diǎn)擊“Accept”按鈕。界面跳轉(zhuǎn)回界面”主界面選擇“Expert”中的“Software”，界面跳轉(zhuǎn),“ VSFTP， 點(diǎn)擊“Search”按鈕， 將查詢的結(jié)果 按鈕。Continue”按鈕。界面將跳轉(zhuǎn)回24語言選擇在 “InstallationSetting” 界面，選擇 “Expert” 主菜單中的“

9、Language”，界面跳轉(zhuǎn)在語言欄選擇“SimpledChinese”然后點(diǎn)擊“Accept”彈出提示框，點(diǎn)擊“OK”按鈕，界面將跳轉(zhuǎn)回“InstallationSetting”界面Kdump設(shè)置在 “InstallationSetting”界面，選擇“Expert” 主菜單中的“Kdump，界面跳轉(zhuǎn)在服務(wù)器的安裝過程中，Kdump中默認(rèn)選中“enable_Kdump，我們需要將Kdump更改為“Disable_Kdump”。然后點(diǎn)擊“OK按鈕，界面將跳轉(zhuǎn)回“In stallati onSett ing安裝過程直接點(diǎn)擊右下角“ 彈出提示框，點(diǎn)擊開始安裝系統(tǒng)，（大約2540分鐘）。安裝結(jié)束后，

10、系統(tǒng)會自動重啟進(jìn)入到配置root用戶、密碼頁面。將密碼修改為“root”之后，點(diǎn)擊下一步配置網(wǎng)卡IP主節(jié)點(diǎn)的用戶名為：mdw從節(jié)點(diǎn)的用戶名為：sdw1/sdw2/sdw3。進(jìn)入網(wǎng)卡配置界面，選擇“NetworkInteface”。（注意：關(guān)閉防火墻功能） 要求配置的網(wǎng)段IP地址使數(shù)據(jù)庫內(nèi)部實(shí)現(xiàn)完全不共享的架構(gòu)，并且支持多路數(shù) 據(jù)并發(fā)。服務(wù)器中網(wǎng)卡IP地址配置規(guī)則節(jié)點(diǎn)名網(wǎng)段1網(wǎng)段2網(wǎng)段3網(wǎng)段4mdwsdw1sdw2sdw3注意： 主節(jié)點(diǎn) （mdW中擁有5塊網(wǎng)卡，第五塊網(wǎng)卡配置成對外訪問的IP，例如：下面以mdw主節(jié)點(diǎn)為例演示網(wǎng)卡的配置過程。其他三個子節(jié)點(diǎn)的網(wǎng)卡配置過程與 主節(jié)點(diǎn)網(wǎng)卡配置的過程相似

11、，只是子節(jié)點(diǎn)中不存在“”段的網(wǎng)卡，詳細(xì)的配置請 參考“服務(wù)器中網(wǎng)卡IP地址配置規(guī)則”。 選擇第一塊網(wǎng)卡，然后點(diǎn)擊“Edit”按鈕按下圖填寫網(wǎng)卡IP，然后點(diǎn)擊下一步。注意此處的IP地址是GP數(shù)據(jù)庫對外 連接是使用的IP，請用戶記好。選擇第二塊網(wǎng)卡，然后點(diǎn)擊“Edit”按鈕 按下圖填寫網(wǎng)卡IP地址，點(diǎn)擊下一步選擇第三塊網(wǎng)卡，點(diǎn)擊“Edit”按鈕 按下圖填寫網(wǎng)卡的IP，點(diǎn)擊“下一步” 選擇第四塊網(wǎng)卡，點(diǎn)擊“Edit”按鈕 按下圖填寫網(wǎng)卡IP地址，點(diǎn)擊下一步 選擇最后一塊網(wǎng)卡，點(diǎn)擊“Edit” 按下圖填寫網(wǎng)卡IP，點(diǎn)擊“下一步” 網(wǎng)卡配置結(jié)束，點(diǎn)擊右下角“OK”按鈕 點(diǎn)擊“下一步” 選擇“”，然后點(diǎn)擊

12、“下一步”按鈕選擇“UseFollowingConfiguration”，點(diǎn)擊“下一步”按鈕 直接點(diǎn)擊“下一步”按鈕彈出提示框，選擇“Yes”繼續(xù)直接點(diǎn)擊“下一步”按鈕 點(diǎn)擊“完成”按鈕 系統(tǒng)重新啟動 輸入用戶名：root,然后按“回車”鍵 輸入密碼：root，然后按“回車”鍵”界面In stall”按鈕“In stall”界面將跳轉(zhuǎn)到安裝進(jìn)度界GreenPlum中Master配置過程SUSELinuxEnterprise11操作系統(tǒng)安裝完成之后，在Master服務(wù)器中進(jìn)行操 作。首先，在Master節(jié)點(diǎn)中新建一個用戶(用戶名：gpadmin,密碼：gpadmin), 并且將系統(tǒng)的防火墻關(guān)閉、

13、啟動FTP服務(wù)；然后使用FlashXP將GreenPlum數(shù)據(jù) 庫配置所需要的文件上傳到指定文件夾；最后使用工具配置GreenPlum數(shù)據(jù)庫中 的相關(guān)參數(shù)。建立gpadmin用戶登錄系統(tǒng)成功后，點(diǎn)擊左下角“Computer”，選擇“YaS!”在“Filter”中輸入“user”，然后選擇“UserandGroupManage-” 點(diǎn)擊左下角“AdcT按鈕新建一個用戶，用戶名：gpadmin，密碼：gpadmin點(diǎn)擊“Detail”按鈕，在“UserID(uid)”中數(shù)據(jù)“3030”，然后點(diǎn)擊下一步關(guān)閉防火墻在Suse系統(tǒng)中選擇“Computer”，點(diǎn)擊“YaS!”在“Filter”中輸入“Fi

14、rewall”命令，然后選右側(cè)“Firewall”將防火墻關(guān)閉，否則使用“FlashXP”工具連接“”時，無法連接成功啟動FTP在Suse系統(tǒng)中選擇“Computer”，點(diǎn)擊“YaS!”在“Filter”中輸入“ftp”，然后點(diǎn)擊右側(cè)的“FTPServer” 按照下圖設(shè)置“F!PStart-Up”設(shè)置完成后，點(diǎn)擊“StartFTPNow”按鈕，然后點(diǎn)擊“finish”按鈕使用FlashXP上傳GreenPlum數(shù)據(jù)使用root用戶名和密碼登錄到SUSE系統(tǒng)，然后logout然后使用FlashXP軟件上傳所需文件注意此處的IP地址是安裝系統(tǒng)時，設(shè)置的第一塊網(wǎng)卡的IP地址使用工具配置GreenPl

15、um數(shù)據(jù)庫輸入密碼：root時用戶不可見，數(shù)據(jù)完成之后回車查看home/gpadmin/Desktop目錄下的文件是否存在，按回車鍵ll命令顯示所有的文件夾，按回車鍵輸入下圖中劃紅線的命令，然后按“回車”鍵 一直按空格鍵直到顯示如下圖所示輸入“yes”同意許可條件按回車鍵輸入yes輸入命令“chown- Rgpadmin/user/local/greenplum-db”數(shù)據(jù)命令“chown- Rgpadmir”輸入命令“chown-Rgpadmin/data/”安裝greenPlum軟件vi/etc/hosts，編輯etc目錄下的hosts文件在鍵盤上按“insert”鍵，或者直接輸入“ins

16、ert”命令，使用上下左右鍵 進(jìn)行選擇，將這一行刪除，刪除時請按DEL鍵在mdwmd后面回車然后按照下圖輸入，從“mdwmd”開始輸入修改環(huán)境變量注意： 其余的子節(jié) （sdw1,sdw2,sdw3） 請參考MDW節(jié)點(diǎn)進(jìn)行配置。 都需要將grennplum文件上傳、修改etc/hosts文件和環(huán)境變量。GreenPlum數(shù)據(jù)庫配置詳情source/usr/local/greenplum-db/ root不顯示 使用如下命令，對master機(jī)器進(jìn)行無驗(yàn)證連接;Gpssh-exkeys-fall_hosts期間需要輸入作為驗(yàn)證root密碼（root退出putty，使用gpadmin賬戶登錄，然后再次

17、使用Putty,用戶名修改.Bashrc文件，添加兩行:Source/usr/local/greenplum-db/ExportMASTER_DATA_DIRECTORY=/data/gpseg-1/使用如下命令：Gpssh-exkeys-fall_hosts期間需要輸入作為驗(yàn)證 碼（gpadmin用戶）所有的服務(wù)器都安裝greenplum-db軟件，但是只有mdW需要做上述無驗(yàn)證連接GrennP lum數(shù)據(jù)庫的初始化打開FlashXP將下圖中的劃紅線部分的文件上傳到中 上傳的文件無需選擇目錄，直接點(diǎn)擊上傳即可使用vi命令進(jìn)行“gpinitsystem_config”文件的編輯，檢查文件中的數(shù)

18、據(jù)存放位置和備份文件存放位置。檢查數(shù)據(jù)文件夾的存放位置，如下圖中紅色框內(nèi)所示vigpinitsystem_config使用“gpinitsystem-Cgpinitsystem_config”命令進(jìn)行g(shù)reenplum數(shù)據(jù)庫的初 始化。命令請參考下圖中紅色框內(nèi)初始化過程中，會出現(xiàn)“是否繼續(xù)greenplum數(shù)據(jù)庫的創(chuàng)建”選項，輸入“y” 或者輸入“丫”進(jìn)行確定。然后系統(tǒng)將繼續(xù)進(jìn)行g(shù)reenplum數(shù)據(jù)庫的創(chuàng)建 創(chuàng)建成功后，系統(tǒng)將會出現(xiàn)如下的提示，如下圖中紅色框內(nèi)的提示信息。修改GreenPlum數(shù)據(jù)庫賬戶的權(quán)限GP初始化完成之后，修改/data/gpseg-1/文件，在最后一行加上如下命令:hostallall（注意md5請小寫，本人在測試過程中截圖截錯了！md5 定要小寫 ）重新讀取配置文件使用psql-dtemplate1進(jìn)入系統(tǒng)的模板數(shù)據(jù)庫， 使用如下命令修改gpadmin賬戶權(quán)限:alterrolegpadminwit