《Hadoop大數(shù)據(jù)原理與應(yīng)用》授課計(jì)劃

西京學(xué)院教師授課計(jì)劃20**—20**學(xué)年第*學(xué)期課程名稱：大數(shù)據(jù)技術(shù)原理及應(yīng)用課程性質(zhì)：專業(yè)必修課程編寫教師：徐魯輝職稱：副教授總學(xué)時(shí)：48其中理論學(xué)時(shí)：32實(shí)驗(yàn)學(xué)時(shí)：16其它學(xué)時(shí)：0考核方式：考試教材名稱：Hadoop大數(shù)據(jù)原理與應(yīng)用主編：徐魯輝出版社：西安電子科技大學(xué)出版社適用專業(yè)、年級：數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)****級要求：1.授課計(jì)劃由教研室主任（團(tuán)隊(duì)負(fù)責(zé)人）召集相關(guān)主講教師集體研究后編寫；2.每個(gè)授課單元（2學(xué)時(shí)）的內(nèi)容占一格，表格不夠可另加附頁；3.任課教師須嚴(yán)格按授課計(jì)劃教學(xué)，進(jìn)度提前或推遲超過4學(xué)時(shí)視為教學(xué)事故；4.“講課”、“實(shí)驗(yàn)”、“其它”的填寫，應(yīng)在相應(yīng)欄畫“√”，如果有其它教學(xué)內(nèi)容必須在備注欄進(jìn)一步說明；“課程性質(zhì)”填寫公共必修課程、公共選修課程、數(shù)學(xué)與自然科學(xué)類課程、工程基礎(chǔ)類課程、專業(yè)基礎(chǔ)類課程、專業(yè)必修課程、專業(yè)方向課程、專業(yè)選修課程、專業(yè)實(shí)踐環(huán)節(jié)等。5.授課計(jì)劃經(jīng)審核后使用，報(bào)院系教務(wù)科備案，授課教師人手一份。教研室主任簽字:學(xué)院(中心)負(fù)責(zé)人簽字:教學(xué)單位蓋章序號周周課次講課實(shí)驗(yàn)其它教學(xué)內(nèi)容備注（如課堂討論、習(xí)題等）章節(jié)（章節(jié)名稱、教學(xué)內(nèi)容提要、實(shí)驗(yàn)的名稱、課堂討論的題目）111√11.1-1.7開學(xué)第一課1.自我介紹2.課程地位、先修及后續(xù)課程3.教學(xué)目標(biāo)及知識圖譜4.課時(shí)分配（理論+實(shí)驗(yàn)）及進(jìn)度、教材、參考資料、上機(jī)軟件5.考核方式：平時(shí)+實(shí)驗(yàn)+期末6.雨課堂、學(xué)堂云使用方法一、大數(shù)據(jù)概述1.大數(shù)據(jù)內(nèi)涵、特征、關(guān)鍵技術(shù)、產(chǎn)業(yè)2.大數(shù)據(jù)與云計(jì)算、物聯(lián)網(wǎng)、人工智能、5G的關(guān)系3.大數(shù)據(jù)崗位介紹4.大數(shù)據(jù)學(xué)習(xí)路線圖頭腦風(fēng)暴，問卷調(diào)查，在線復(fù)習(xí)并測試Java、Python知識，導(dǎo)入必備Linux基礎(chǔ)操作章節(jié)測試1212√1/22.1-2.4二、初識Hadoop1.Hadoop來源、發(fā)展史、特點(diǎn)、版本2.Hadoop生態(tài)系統(tǒng)3.Hadoop體系架構(gòu)4.Hadoop應(yīng)用現(xiàn)狀章節(jié)測試2預(yù)習(xí)實(shí)驗(yàn)1指導(dǎo)書，自行實(shí)踐部署Hadoop集群321√22.5實(shí)驗(yàn)1部署全分布模式Hadoop集群1.安裝和配置CentOS2.安裝和配置Java環(huán)境3.啟動(dòng)和配置SSH免密登錄4.安裝和配置Hadoop實(shí)驗(yàn)報(bào)告1431√33.1-3.4三、分布式文件系統(tǒng)HDFS1.HDFS簡介2.HDFS體系結(jié)構(gòu)3.HDFS文件存儲(chǔ)機(jī)制：塊的分布4.HDFS數(shù)據(jù)讀寫532√33.5三、分布式文件系統(tǒng)HDFS5.實(shí)戰(zhàn)HDFSWebUI、HDFSShell、HDFSJavaAPI編程6.HDFS高可靠性機(jī)制章節(jié)測試3641√33.5實(shí)驗(yàn)2實(shí)戰(zhàn)HDFS實(shí)驗(yàn)報(bào)告2751√44.1-4.3四、分布式計(jì)算框架MapReduce1.MapReduce簡介2.第一個(gè)MapReduce案例：WordCount3.MapReduce作業(yè)執(zhí)行流程852√44.4-4.6四、分布式計(jì)算框架MapReduce4.MapReduce數(shù)據(jù)類型與格式5.Shuffle機(jī)制6.在MapReduce中自定義組件961√44.7實(shí)驗(yàn)3MapReduce編程(1)實(shí)驗(yàn)報(bào)告31071√54.7-4.9四、分布式計(jì)算框架MapReduce7.實(shí)戰(zhàn)MapReduce：MapReduceWebUI、MapReduceShell、MapReduceJavaAPI編程8.MapReduce調(diào)優(yōu)9.其他主流計(jì)算框架章節(jié)測試41172√55.1-5.6五、分布式資源管理平臺(tái)YARN1.YARN簡介2.YARN體系架構(gòu)3.YARN工作流程新舊MapReduce對比（補(bǔ)充）4.實(shí)戰(zhàn)YARN5.YARN新特性6.其他統(tǒng)一資源管理和調(diào)度框架章節(jié)測試51281√補(bǔ)充實(shí)驗(yàn)4MapReduce編程(2)實(shí)驗(yàn)報(bào)告41391√66.1-6.5六、分布式協(xié)調(diào)框架ZooKeeper1.分布式協(xié)調(diào)技術(shù)2.初識ZooKeeper3.ZooKeeper系統(tǒng)模型4.ZooKeeper工作原理5.ZooKeeper應(yīng)用場景1492√66.6-6.7六、協(xié)調(diào)系統(tǒng)ZooKeeper6.部署Zookeeper集群7.實(shí)戰(zhàn)ZooKeeper：ZooKeeperShell，ZooKeeperJavaAPI編程章節(jié)測試615101√66.6-6.7實(shí)驗(yàn)5部署ZooKeeper集群和實(shí)戰(zhàn)ZooKeeper實(shí)驗(yàn)報(bào)告516111√77.1-7.5七、分布式數(shù)據(jù)庫HBase1.NoSQL簡介2.初識HBase3.HBase數(shù)據(jù)模型4.HBase體系架構(gòu)5.HBase運(yùn)行機(jī)制17112√77.6-7.7七、分布式數(shù)據(jù)庫HBase6.部署HBase集群7.實(shí)戰(zhàn)HBase：HBaseShell，HBaseJavaAPI編程章節(jié)測試718121√77.6-7.7實(shí)驗(yàn)6部署HBase集群和實(shí)戰(zhàn)HBase實(shí)驗(yàn)報(bào)告619131√88.1-8.6八、數(shù)據(jù)倉庫Hive1.初識Hive2.Hive體系架構(gòu)3.Hive數(shù)據(jù)類型4.Hive文件格式5.Hive數(shù)據(jù)模型6.Hive函數(shù)20132√88.7-8.8八、數(shù)據(jù)倉庫Hive7.部署Hive8.實(shí)戰(zhàn)Hive：HWI，HiveShell，HiveJavaAPI編程章節(jié)測試821141√88.7-8.8實(shí)驗(yàn)7部署Hive和實(shí)戰(zhàn)Hive實(shí)驗(yàn)報(bào)告722151√99.1-9.4九、數(shù)據(jù)遷移和采集1.數(shù)據(jù)遷移工具Sqoop2.日志采集工具Flume3.分布