集團大數(shù)據(jù)平臺建設(shè)項目人員培訓(xùn)方案

>>資料轉(zhuǎn)換管理系統(tǒng)(DataManagement，ETL) V4.0集團大數(shù)據(jù)平臺建設(shè)項目人員培訓(xùn)方案我方嚴格按照集團的要求，向業(yè)務(wù)和技術(shù)團隊提供相應(yīng)培訓(xùn)，具體培訓(xùn)實施要求包括：（1）制定詳細的項目培訓(xùn)計劃根據(jù)項目安排和進度，預(yù)先制定詳細的項目培訓(xùn)計劃，包括：a）確定項目培訓(xùn)時間;b）確定項目培訓(xùn)內(nèi)容;c）確定講師名單;d）確定集團方參與培訓(xùn)人員角色。（2）確定項目培訓(xùn)資料根據(jù)項目培訓(xùn)計劃，預(yù)先就項目培訓(xùn)內(nèi)容準備培訓(xùn)資料，并在與集團有關(guān)人員充分溝通后確定項目培訓(xùn)資料。（3）保證項目培訓(xùn)效果我方嚴格按照項目培訓(xùn)計劃為集團提供項目培訓(xùn)（經(jīng)雙方建議或同意更改的項目培訓(xùn)計劃除外），保證為項目培訓(xùn)提供充分的時間和人力資源保障，確保項目的最終培訓(xùn)效果。Hadoop系統(tǒng)培訓(xùn)我方專門為集團管理層、關(guān)鍵用戶和相關(guān)技術(shù)骨干開展大數(shù)據(jù)、Hadoop系統(tǒng)和業(yè)務(wù)領(lǐng)域的概覽性培訓(xùn)，使其理解實施大數(shù)據(jù)帶來的變革影響及意義，能順利開展相關(guān)業(yè)務(wù)領(lǐng)域的支持工作。培訓(xùn)包含如下內(nèi)容：大數(shù)據(jù)和大數(shù)據(jù)發(fā)展趨勢；大數(shù)據(jù)生態(tài)圈以及原理構(gòu)架課程；大數(shù)據(jù)技術(shù)與數(shù)據(jù)分析基礎(chǔ)知識；大數(shù)據(jù)應(yīng)用案例；計劃安排兩輪培訓(xùn)，每輪3天，每輪不少于50人，即滿足總?cè)藬?shù)不少于100人，每人不少于3天的要求。此培訓(xùn)主要由軟件原廠商星環(huán)科技提供。具體課程安排如下：表17-1Hadoop系統(tǒng)培訓(xùn)課程表培訓(xùn)類型培訓(xùn)課程培訓(xùn)時間培訓(xùn)內(nèi)容簡介基礎(chǔ)培訓(xùn)大數(shù)據(jù)和大數(shù)據(jù)發(fā)展趨勢0.5天什么是大數(shù)據(jù)？大數(shù)據(jù)發(fā)展趨勢基礎(chǔ)培訓(xùn)大數(shù)據(jù)生態(tài)圈以及原理構(gòu)架課程0.5天包含下列內(nèi)容：ApacheHadoop的發(fā)展歷史ApacheHadoop生態(tài)系統(tǒng)HDFS技術(shù)原理、HDFS基本操作和編程Map/Reduce基礎(chǔ)集群架構(gòu)基礎(chǔ)培訓(xùn)大數(shù)據(jù)技術(shù)與數(shù)據(jù)分析基礎(chǔ)知識1天針對系統(tǒng)功能，進行數(shù)據(jù)處理和數(shù)據(jù)分析；基礎(chǔ)培訓(xùn)大數(shù)據(jù)應(yīng)用案例1天應(yīng)用案例培訓(xùn)業(yè)務(wù)使用培訓(xùn)我方專門為業(yè)務(wù)人員開展業(yè)務(wù)操作相關(guān)培訓(xùn)，使其能熟練操作基于Hadoop系統(tǒng)實現(xiàn)的業(yè)務(wù)功能。培訓(xùn)包含如下內(nèi)容：大數(shù)據(jù)和Hadoop簡介；集團大數(shù)據(jù)平臺介紹；集團大數(shù)據(jù)平臺業(yè)務(wù)使用詳細培訓(xùn)；集團大數(shù)據(jù)平臺業(yè)務(wù)應(yīng)用案例；計劃安排兩輪培訓(xùn)，每輪7天，每輪不少于100人，即滿足人數(shù)不少于200人，每人不少于7天的要求。具體課程安排如下：表17-2業(yè)務(wù)使用培訓(xùn)課程表培訓(xùn)類型培訓(xùn)課程培訓(xùn)時間培訓(xùn)內(nèi)容簡介基礎(chǔ)培訓(xùn)大數(shù)據(jù)和Hadoop簡介1天什么是大數(shù)據(jù)？Hadoop功能特點。基礎(chǔ)培訓(xùn)集團大數(shù)據(jù)平臺介紹1天大數(shù)據(jù)平臺建設(shè)目標、建設(shè)思路、建設(shè)方法、架構(gòu)設(shè)計?；A(chǔ)培訓(xùn)集團大數(shù)據(jù)平臺業(yè)務(wù)使用詳細培訓(xùn)3天如何使用集團大數(shù)據(jù)平臺各項功能；基礎(chǔ)培訓(xùn)集團大數(shù)據(jù)平臺業(yè)務(wù)應(yīng)用案例2天應(yīng)用大數(shù)據(jù)平臺進行業(yè)務(wù)，推動發(fā)展的應(yīng)用案例培訓(xùn)分析挖掘培訓(xùn)我方專門為數(shù)據(jù)分析人員提供數(shù)據(jù)分析挖掘培訓(xùn)，使其能熟練運用Hadoop系統(tǒng)開展數(shù)據(jù)分析挖掘工作，能夠按需基于系統(tǒng)（工具）做數(shù)據(jù)分析開發(fā)，尤其是對報表的定制化開發(fā)。培訓(xùn)包含如下內(nèi)容：我方專門為集團業(yè)務(wù)分析團隊提供如下培訓(xùn)；大數(shù)據(jù)技術(shù)與數(shù)據(jù)處理基礎(chǔ)知識；R語言開發(fā)基礎(chǔ)與RStudio工具使用基礎(chǔ)；數(shù)據(jù)挖掘算法與數(shù)據(jù)可視化基礎(chǔ)知識；定制化報表實際應(yīng)用案例；計劃安排六輪培訓(xùn)，每輪5天，每輪不少于200人，即滿足人數(shù)不少于200人，每人不少于30天的要求。表17-3分析挖掘培訓(xùn)課程表培訓(xùn)類型培訓(xùn)課程培訓(xùn)時間培訓(xùn)內(nèi)容簡介基礎(chǔ)培訓(xùn)大數(shù)據(jù)技術(shù)與數(shù)據(jù)處理基礎(chǔ)知識1天大數(shù)據(jù)技術(shù)與數(shù)據(jù)處理基礎(chǔ)知識業(yè)務(wù)分析培訓(xùn)R語言初級培訓(xùn)RStudio工具使用培訓(xùn)1天RStudio工具介紹培訓(xùn)R語言編程基礎(chǔ)、數(shù)據(jù)處理、作圖和數(shù)據(jù)分析R軟件及應(yīng)用統(tǒng)計方法1天語言入門、用R編程、用R繪圖?；A(chǔ)統(tǒng)計、經(jīng)典回歸分析、現(xiàn)代回歸和分類、列聯(lián)表分析、關(guān)聯(lián)規(guī)則分析、廣義線性模型、多層模型、通過顧客滿意度模型引入路徑模型及其PLS偏最小二乘方法和SEM模型、時間序列簡介及狀態(tài)空間模型、多元分析TranswarpDiscover基礎(chǔ)培訓(xùn)1天TranswarpDiscover基礎(chǔ)原理，問題診斷，基礎(chǔ)算法庫簡介，基礎(chǔ)算法調(diào)用實踐定制化報表實際應(yīng)用案例1天定制化報表實際應(yīng)用案例培訓(xùn)運行維護培訓(xùn)我方專門為運維人員提供運維知識和技能的轉(zhuǎn)移培訓(xùn)，使其可承擔系統(tǒng)交付后的運維工作，能熟練使用系統(tǒng)監(jiān)控等管理功能，能診斷處理各類問題，能夠維護優(yōu)化系統(tǒng)性能。培訓(xùn)包含如下內(nèi)容：大數(shù)據(jù)和Hadoop簡介；集團大數(shù)據(jù)平臺和功能介紹；集團大數(shù)據(jù)平臺日常運行維護；集團大數(shù)據(jù)平臺常見問題處理；計劃安排三輪培訓(xùn)，每輪5天，每輪不少于300人，即滿足要求人數(shù)不少于300人，每人不少于14天的要求。具體課程安排如下：表17-4運行維護培訓(xùn)課程表培訓(xùn)類型培訓(xùn)課程培訓(xùn)時間培訓(xùn)內(nèi)容簡介基礎(chǔ)培訓(xùn)大數(shù)據(jù)和Hadoop簡介1天什么是大數(shù)據(jù)？Hadoop功能特點。基礎(chǔ)培訓(xùn)集團大數(shù)據(jù)平臺和功能介紹1天大數(shù)據(jù)平臺架構(gòu)和各項功能介紹?；A(chǔ)培訓(xùn)集團大數(shù)據(jù)平臺日常運行維護培訓(xùn)2天大數(shù)據(jù)平臺的日常運行維護工作詳細介紹；基礎(chǔ)培訓(xùn)集團大數(shù)據(jù)平臺常見問題處理1天集團大數(shù)據(jù)平臺常見問題處理開發(fā)培訓(xùn)我方專門為開發(fā)人員提供開發(fā)知識和技術(shù)的轉(zhuǎn)移培訓(xùn)，使其可承擔系統(tǒng)交付后的功能開發(fā)工作，完全了解開發(fā)過程、系統(tǒng)配置和功能開發(fā)內(nèi)容，能熟練完成系統(tǒng)功能開發(fā)、升級，對于系統(tǒng)軟件問題能獨立診斷和處理，培訓(xùn)包含如下內(nèi)容：計劃安排兩輪培訓(xùn)，每輪15天，每輪不少于200人，即滿足要求人數(shù)不少于200人，每人不少于30天的要求。表17-5開發(fā)培訓(xùn)課程表培訓(xùn)類型培訓(xùn)課程培訓(xùn)時間培訓(xùn)內(nèi)容簡介基礎(chǔ)培訓(xùn)大數(shù)據(jù)生態(tài)圈以及原理構(gòu)架課程1天包含下列內(nèi)容：ApacheHadoop的發(fā)展歷史ApacheHadoop生態(tài)系統(tǒng)HDFS技術(shù)原理、HDFS基本操作和編程Map/Reduce基礎(chǔ)集群架構(gòu)技術(shù)開發(fā)培訓(xùn)TranswarpDataHub安裝培訓(xùn)1天提供TranswarpDataHub各組件的安裝、配置、部署、監(jiān)控、維護，以及高可用性配置的培訓(xùn)，組件包括TranswarpHadoop，TranswarpHyperbase，TranswarpInceptor，TranswarpStreamTranswarpDataHub產(chǎn)品架構(gòu)、軟件特性培訓(xùn)1天提供TranswarpDataHub整體產(chǎn)品架構(gòu)以及各個組件包括TranswarpHadoop，TranswarpHyperbase，TranswarpInceptor，TranswarpStream的功能特性介紹TranswarpDataHub運維培訓(xùn)1天產(chǎn)品運維培訓(xùn)，包括日常運維管理指標監(jiān)控以及故障診斷Hyperbase開發(fā)培訓(xùn)課程2天包含下列內(nèi)容：Zookeeper的原理、Zookeeper的基本操作、Hyperbase的組成和原理、常見數(shù)據(jù)模型設(shè)計模式、基本編程接口、Hyperbase的運行和操作Hyperbase集群的優(yōu)化Inceptor開發(fā)培訓(xùn)課程2天包含下列主要內(nèi)容：Inceptor的架構(gòu)和組成Inceptor的數(shù)據(jù)模型Inceptor的執(zhí)行引擎InceptorSQL語法詳解JDBC接口編程TDH中Inceptor的高級特性：創(chuàng)建內(nèi)存列式數(shù)據(jù)庫；設(shè)置高效索引和過濾，加快Group-By和JOIN操作。Stream開發(fā)培訓(xùn)1天包含下列主要內(nèi)容：Stream架構(gòu)和原理編寫StreamJobStream性能及優(yōu)化StreamSQLStream接口等；半結(jié)構(gòu)化數(shù)據(jù)與圖數(shù)據(jù)應(yīng)用開發(fā)1天半結(jié)構(gòu)化數(shù)據(jù)處理與圖數(shù)據(jù)應(yīng)用開發(fā)Map/Reduce原理編程培訓(xùn)1天MapReduce基礎(chǔ)原理深入講解MapReduce編程實例培訓(xùn)Spark原理編程培訓(xùn)1天Spark基礎(chǔ)原理深入講解Spark編程實例培訓(xùn)數(shù)據(jù)挖掘應(yīng)用開發(fā)培訓(xùn)2天數(shù)據(jù)挖掘基礎(chǔ)培訓(xùn)，數(shù)據(jù)挖掘常用算法培訓(xùn)，TranswarpDiscover基礎(chǔ)原理，問題診斷，基礎(chǔ)算法庫簡介，基礎(chǔ)算法調(diào)用實踐，應(yīng)用開發(fā)實踐TranswarpDataHub系統(tǒng)性能監(jiān)控與調(diào)優(yōu)1天性能監(jiān)控與調(diào)優(yōu)培訓(xùn)我方提供的培訓(xùn)內(nèi)容涵蓋了集團對技術(shù)開發(fā)團隊培訓(xùn)要求的全部內(nèi)容：大數(shù)據(jù)技術(shù)基礎(chǔ)知識大數(shù)據(jù)產(chǎn)品軟件架構(gòu)、功能特性日常運維管理、監(jiān)控與故障診斷結(jié)構(gòu)化數(shù)據(jù)庫應(yīng)用開發(fā)流式計算應(yīng)用開發(fā)應(yīng)用整體規(guī)劃與系統(tǒng)性能優(yōu)化指南半結(jié)構(gòu)化數(shù)據(jù)與圖數(shù)據(jù)應(yīng)用開發(fā)數(shù)據(jù)挖掘應(yīng)用開發(fā)MapReduce與Spark計算編程范型培訓(xùn)目標我方對于向用戶提供的培訓(xùn)服務(wù)通過精心準備、細致安排、積極實施、及時總結(jié)，會取得好的效果和既定的目標。我們的培訓(xùn)目標為：通過培訓(xùn)確保使用人員經(jīng)過培訓(xùn)后，能熟練使用系統(tǒng)，進行應(yīng)用開發(fā)，充分了解各個子系統(tǒng)的功能操作流程和方法，并通過系統(tǒng)提高工作效率和質(zhì)量。確保系統(tǒng)維護人員經(jīng)過培訓(xùn)后，應(yīng)能監(jiān)控系統(tǒng)運行情況，及時排除常見系統(tǒng)故障，針對使用人員進行使用問題技術(shù)支持。能夠獨立完成系統(tǒng)的維護工作，掌握網(wǎng)絡(luò)運行情況，以及及時排除部分系統(tǒng)故障。確保高級系統(tǒng)管理員經(jīng)過培訓(xùn)后，能熟練掌握系統(tǒng)整體結(jié)構(gòu)，系統(tǒng)數(shù)據(jù)結(jié)構(gòu)、能夠分析系統(tǒng)故障，管理系統(tǒng)設(shè)備，掌握系統(tǒng)內(nèi)部和外部接口，承擔全面的技術(shù)管理工作。培訓(xùn)方式此次建設(shè)項目中涉及到的軟件功能較多、對技術(shù)人員的技術(shù)能力要求較高，為了項目的順利實施和今后日常維護工作的正常進行，參加培訓(xùn)的技術(shù)人員需要具備較全面的知識。為此，我們制定了全面的培訓(xùn)計劃?，F(xiàn)場培訓(xùn)是項目實施不可分割的一個部分，現(xiàn)場培訓(xùn)是指在平臺工作的現(xiàn)場，進行的簡單、快捷、實用的技術(shù)傳授。這種培訓(xùn)的特點是針對性強、直觀、方式靈活，而且與實際結(jié)合緊密，用戶在培訓(xùn)中的問題可以及時得到解答?，F(xiàn)場培訓(xùn)的培訓(xùn)教師由我們的實施人員工程師來完成，他們會對安裝配置的過程進行詳細的講解?，F(xiàn)場培訓(xùn)對于系統(tǒng)管理員和運行維護人員來說是個提高自身技術(shù)水平的難得機會。培訓(xùn)資源我方培訓(xùn)還需要落實以下內(nèi)容：培訓(xùn)時間——結(jié)合項目實施計劃進行階段性培訓(xùn)，系統(tǒng)使用人員培訓(xùn)、一般系統(tǒng)維護人員培訓(xùn)在試運行前完成，高級系統(tǒng)管理員培訓(xùn)可以在試運行期間安排完成。培訓(xùn)教材——我方將在培訓(xùn)前編制完整實用的培訓(xùn)教材，并