《大數(shù)據(jù)技術與應用》教案

gg大數(shù)據(jù)技術與應用》教案3/193/19《大數(shù)據(jù)技術與應用》教案20XX20XX學年第M學院（部）： 教研室（系）： 授課班級： 課程學分： 課程學時： 課程周學時： 使用教材：大數(shù)據(jù)技術與應用-微視頻版章節(jié)名稱授課形式

1121章大數(shù)據(jù)概論掌握大數(shù)據(jù)分析的過程，技術及工具教學目的及掌握大數(shù)據(jù)分析的過程，技術及工具教學目的及要熟悉大數(shù)據(jù)的概念及特征求熟悉大數(shù)據(jù)的當前應用及前景發(fā)展大數(shù)據(jù)采集方式教學重點大數(shù)據(jù)存儲技術大數(shù)據(jù)分析技術教學難點大數(shù)據(jù)特征的理解和大數(shù)據(jù)分析處理的過程大數(shù)據(jù)基本槪念大數(shù)據(jù)的特征教學內(nèi)容大數(shù)據(jù)的分析過程，涉及大數(shù)據(jù)的采集，存儲以及分析。大數(shù)據(jù)的具體應用和大數(shù)據(jù)的發(fā)展前景1、教學方法：介紹/演示大數(shù)據(jù)的基本概念和特征示例說明大數(shù)據(jù)的特征的類型，加強概念的理解。教學方法與手段設計 （3）示例說明使用大數(shù)據(jù)分析過程的步驟以及各自的類型（4）示例說明大數(shù)據(jù)與人工智能的關系，以及大數(shù)據(jù)的發(fā)展應用前景2、輔助手段：多媒體演示。3、對于重點和難點，通過例題討論講解、師生互動、作業(yè)等來突出。（PPt課件）（1）以文字描述為主，要點及關鍵詞用不同顏色標注：板書設計

涉及有關大數(shù)據(jù)的發(fā)展背景或前景可以學生討論回答PPt的播放做到適時呈現(xiàn)、對過程有動態(tài)演示。章節(jié)名稱2章大數(shù)據(jù)集群系統(tǒng)基礎授課形式教學目的及要求理論課■案例討論課□實驗課■習題課□其他□熟悉大數(shù)據(jù)集群概念及系統(tǒng)組成章節(jié)名稱2章大數(shù)據(jù)集群系統(tǒng)基礎授課形式教學目的及要求理論課■案例討論課□實驗課■習題課□其他□熟悉大數(shù)據(jù)集群概念及系統(tǒng)組成LinUX操作系統(tǒng)以及常用指令熟悉虛擬技術掌握大數(shù)據(jù)集群部署教學重點?用VMWareWOrkStatiOnXCentOS7、SeCUreCRT的安裝和使教學難點使用三臺服務器作為集群節(jié)點，部署網(wǎng)絡配這、安全配置、時間同步及實現(xiàn)登錄大數(shù)據(jù)集群系統(tǒng)的槪述及分類，集群的目的?LinUX系統(tǒng)簡介與特性LinUXLinUX常用命令，目錄操作，文件瀏覽查找以及歸檔，系統(tǒng)教學內(nèi)容類，網(wǎng)絡類，進程類等命令虛擬化技術簡介、原理及優(yōu)勢劣勢VirtualBo×,VMWareWOrkStation,KVM等?CentOS大數(shù)據(jù)集群系統(tǒng)的組成，架構操作實踐：大數(shù)據(jù)集群的部署思考題和作業(yè)1章課后習題實驗內(nèi)容無章節(jié)名稱3HadOOP分布式系統(tǒng)授課形式章節(jié)名稱3HadOOP分布式系統(tǒng)授課形式理論課■案例討論課□實驗課■習題課□其他□Hadoop系統(tǒng)及其優(yōu)點教學目的及要求Hadoop原理及運行機制HadOOPHadOOPJaVaHadoop安裝與配置教學重點VMWareHadoop教學難點VMWareHadoop1、教學方法：（1）介紹大數(shù)據(jù)集群系統(tǒng)的原理，組成，架構；教學方法與手段設計（2）LinUX系統(tǒng)命令行進行集群的部署。2、輔助手段：多媒體演示。3、對于重點和難點，通過例題討論講解、師生互動、作業(yè)等來突岀。（PPt課件）（1）以文字描述為主，要點及關鍵詞用不同顏色標注：板書設計（2）涉及有關集群部署時，通過示例演示完成：（3）PPt的播放做到適時呈現(xiàn)、對過程有動態(tài)演示。思考題和作業(yè)2章課后習題實驗內(nèi)容（1）完成課本實例集群的部署；（2）LinUX系統(tǒng)的命令行操作教學內(nèi)容

HadOOP系統(tǒng)的發(fā)展歷程及其優(yōu)點的介紹HadOOP原理的介紹HDFS,MaPRedUCe組件的介紹VMWareHadOOP運行環(huán)境VMWareHadOOP在線幫助和相關資源1、教學方法：（1）介紹/Hadoop的運行環(huán)境教學方法與手段設計

（2）VMWare2、輔助手段：多媒體演示。3、對于重點和難點，通過例題討論講解、師生互動、作業(yè)等來突出。（PPt課件）以文字描述為主，要點及關鍵詞用不同顏色標注：板書設計

Hadoop時，通過示例演示：PPt的播放做到適時呈現(xiàn)、對過程有動態(tài)演示。思考題和作業(yè)3章復習題：填空題&思考題實驗內(nèi)容 熟悉HadOOP運行環(huán)境章節(jié)名稱授課形式教學目的及要求教學重點?教學難點 ?

442+24HDFS分布式文件系統(tǒng)理論課■案例討論課□實驗課■習題課□其他□HDFS的常規(guī)操作ECliPSeHDFS的操作實踐HDFS的設計前提與目標，及架構組成ECliPSe進行操作實踐HDFS的原理、數(shù)據(jù)讀寫的原理ECliPSeHDFS進行目錄創(chuàng)建刪除，列目錄以及文件的上傳下載HDFS的介紹HDFS的設計前提與目標教學內(nèi)容

NamenOde和Datanode文件系統(tǒng)的名字空間數(shù)據(jù)復制，及英中的特性HDFS的讀寫流程HDFS中Sheil及JaVaAPlECIiPSeHDFS的操作1、教學方法：（1）介紹/HDFS相關知識點；教學方法與手段設計

ECliPSeHDFS項目，及常規(guī)操作。2、輔助手段：多媒體演示。3、對于重點和難點，通過例題討論講解、師生互動、作業(yè)等來突岀。章節(jié)名稱5MaPRedUCe分布式計算授課形式章節(jié)名稱5MaPRedUCe分布式計算授課形式理論課■案例討論課□實驗課■習題課□其他□MaPRedUCe架構，原理及工作機制教學目的及要求MaPRedUCeWOrdCOUnt編程實例MaPRedUCe倒排索引編程實例教學重點?MaPRedUCe的基本原理、架構以及工作機制等知識內(nèi)容教學難點??MapReduceWOrdCOUnt編程實例；MapReduce倒排索引編程實例MaPRedUCe架構和原理MaPRedUCe的工作機制教學內(nèi)容IDLEMaPRedUCeWOrdCOUnt實例IDLEMaPRedUCe倒排索引實例（PPt課件）（1）以文字描述為主，要點及關鍵詞用不同顏色標注：板書設計（2）HDFS的創(chuàng)建及操作時，通過示例演示；（3）PPt的播放做到適時呈現(xiàn)、對過程有動態(tài)演示。思考題和作業(yè)4章習題：簡答題實驗內(nèi)容HDFS的應用1、教學方法：1、教學方法：（1）MaPRedUCe架構，原理及工作機制：（2）IDLEMaPRedUCe倒排教學方法與手段設計索引實例（3）IDLEMaPRedUCeWOrdCount實例2、輔助手段：多媒體演示。3、對于重點和難點，通過例題討論講解、師生互動、作業(yè)等來突岀。（PPt課件）（1）以文字描述為主，要點及關鍵詞用不同顏色標注：板書設計（2）MapReduce實例時，通過示例演示；（3）PPt的播放做到適時呈現(xiàn)、對過程有動態(tài)演示。思考題和作業(yè)5章復習題：填空題&思考題實驗內(nèi)容MaPRedUCeWOrdCOUntMaPRedUCe倒排索引編程章節(jié)名稱授課形式

662+26HBaS分布式數(shù)據(jù)庫應用理論課■案例討論課□實驗課■習題課□其他□HBaSe的架構及存儲教學目的及要求

HBaSe的集群部署，SheII操作，過濾器HBaSe編程HBaSe架構與存儲的介紹HBaSe部署時，參數(shù)配置，運行與測試教學重點教學難點

HBaSeSheIl操作命令HBaSe的各種過濾器HBaSe的表編程及過濾查詢編程HBaSeSheIl各種操作命令HBaSe相關過濾器HBaSe的編程HBaSe簡介，包括架構與存儲教學內(nèi)容

HBaSeHBaSe參數(shù)配置HBaSe運行與測試HBaSe的general操作，namespace操作，DDL操作以及授權HBaSe過濾器，包括行，列，列名，值，前綴，列前綴，行鍵，首次行鍵，單列值，單列排除，包含結束，列計數(shù)等。HBaSeJaVaAPI,實現(xiàn)表的創(chuàng)建刪除，數(shù)據(jù)查詢等HBaSe提供的過濾類進行査詢1、教學方法：（1）HBaSeHBaSe的配宜及相關操作：教學方法與手段設計（2）HBaSeSheIl操作命令，過濾器及編程。2、輔助手段：多媒體演示。3、對于重點和難點，通過例題討論講解、師生互動、作業(yè)等來突出。（PPt課件）（1）以文字描述為主，要點及關鍵詞用不同顏色標注：板書設計（2）HBaSe代碼時，通過示例描述：（3）PPt的播放做到適時呈現(xiàn)、對過程有動態(tài)演示。思考題和作業(yè)6章習題：簡答題&實踐題HBaSeSheIlH實驗內(nèi)容BaSe的使用。章節(jié)名稱授課形式教學目的及要求

772+27YARN資源分配理論課■案例討論課□實驗課■習題課□其他□了解統(tǒng)一資源調(diào)度平臺YARN架構及其工作流程YARN的基本原理、架構及其工作流程教學重點 ?YARNSheIl實例操作教學難點

YARNShell實例的命令及其操作統(tǒng)一資源管理和調(diào)度平臺介紹YARN的優(yōu)勢對比教學內(nèi)容 ?YARN架構及工作流程YARNShell實例的具體操作1、教學方法：介紹統(tǒng)一資源管理和調(diào)度平臺：教學方法與手

YARNYARN的架構和工作流程，介紹段設計 YARN的優(yōu)勢，具體操作YARNSheIl實例。2、輔助手段：多媒體演示。3PPt課件)以文字描述為主，要點及關鍵詞用不同顏色標注：板書設計

YARNSheIl實例的具體命令和操作，通過示例演示；PPt的播放做到適時呈現(xiàn)、對過程有動態(tài)演示。章節(jié)名稱授課形式

882+28SPark集群計算理論課■案例討論課□實驗課■習題課□其他□SPark的生態(tài)系統(tǒng)及架構教學目的及要求

熟悉SParkRDDSPark集群部署及應用案例SParkRDD工作流程思考題和作業(yè)7章復習題：填空題&思考題思考題和作業(yè)7章復習題：填空題&思考題實驗內(nèi)容YARNSheIl實例的操作教學難點 ? SPark編程應用，SPark算法實現(xiàn)Spark及其特性SPark生態(tài)系統(tǒng)的組成及應用框架RDDs,作業(yè)調(diào)度，內(nèi)存管理，檢査點支持SPark集群部署所需軟件包并解壓教學內(nèi)容 ?完成參數(shù)配置及運行SPark交互RDD的轉(zhuǎn)化操作，行動操作PairRDD的轉(zhuǎn)化操作，行動操作RDD的其他操作1、教學方法：（1）1、教學方法：（1）SParkRDD；（2）PythOnRDD的相關操作。教學方法與手段設計（3）PythOnSParkW法實例。2、輔助手段：多媒體演示。3、對于重點和難點，通過例題討論講解、師生互動、作業(yè)等來突岀。（PPt課件）（1）以文字描述為主，要點及關鍵詞用不同顏色標注；板書設計（2）RDDSpark算法時，通過示例描述：（3）PPt的播放做到適時呈現(xiàn)、對過程有動態(tài)演示。思考題和作業(yè)8章習題：簡答題&實踐題8-1?8-50PythOn進實驗內(nèi)容RDD相關操作章節(jié)名稱9SPark機器學習章節(jié)名稱9SPark機器學習授課形式理論課■案例討論課□實驗課■習題課□其他□SParkMLlibLOCalVeCtOr數(shù)據(jù)類型（本地向雖:）、教學目的及要求LabeIedPOint類型（標簽向量）、LOCalmatrix數(shù)拯類型（本地矩陣）、ROWMatriX類型（分布式矩陣）、IndeXedRoWMatriX類型、COOrdinateMatrix類型、BIOCkMatriX類型DataFrameAPlRDDAPl的基本統(tǒng)計SParkMLIib的LOCalVeCtOr數(shù)據(jù)類型（本地向量）、LabeledPOint類型（標簽向量）、LOCalmatrix數(shù)據(jù)類型（本地矩陣）、R教學重點 OWMatriX類型（分布式矩陣）、IndeXedRoWMatriX類型、nateMatrix類型、BlOCkMatriX類型DataFrameAPlRDDAPI體步驟比較Spark實例中的聚類問題和隨機森林問題K-MeanS算法教學難點 ?分析鶯尾花數(shù)據(jù)，學習隨機森林算法，掌握數(shù)據(jù)集的訓練、評與預測方法SParkMLIib數(shù)據(jù)類型槪述LOCalVeCtOr數(shù)據(jù)類型（本地向量）LabeledPOint類型（標簽向量）LOCalmatrix數(shù)據(jù)類型（本地矩陣）教學內(nèi)容

ROWMatriX類型（分布式矩陣）IndeXedROWMatriX類型COOrdinateMatriX類型BIOCkMatriX類型DataFrameAPIRDDAPI的基本統(tǒng)計比較聚類問題和隨機森林問題的實例操作1、教學方法：1、教學方法：通過示例說明常用內(nèi)置數(shù)據(jù)類型的泄義、聲明和使用。教學方法與手段設計2、輔助手段：多媒體演示。3、對于重點和難點，通過例題討論講解、師生互動、作業(yè)等來突岀。（PPt課件）（1）以文字描述為主，要點及關鍵詞用不同顏色標注：板書設計（2）涉及有關常用數(shù)據(jù)類型的使用以及聚類問題和隨機森林問題，通過示例描述：（3）PPt的播放做到適時呈現(xiàn)、對過程有動態(tài)演示。思考題和作業(yè)9章復習題：填空題&思考題求HiVe編程?HiVe原理及數(shù)據(jù)處理教學重點求HiVe編程?HiVe原理及數(shù)據(jù)處理教學重點HiVe的數(shù)據(jù)類型和文件格式教學難點?HiVe實例，如表、數(shù)據(jù)的命令應用章節(jié)名稱IOHiVe數(shù)據(jù)倉庫應用授課形式理論課■案例討論課□實驗課■習題課□其他□HiVe的數(shù)據(jù)類型和文件格式教學目的及要熟悉數(shù)據(jù)定義，數(shù)據(jù)操作以及數(shù)據(jù)查詢HiVe組成模塊，執(zhí)行流程概述MetaStOre存儲模式教學內(nèi)容教學方法與手

Hive,配置參數(shù)并運行測試HiVeBeeline了解基本數(shù)據(jù)類型與文件格式數(shù)據(jù)的定義，操作，查詢HiVe編程1、教學方法：（L）HiVe運行環(huán)境，數(shù)據(jù)類型和文件格式；HiVe進行數(shù)據(jù)相關操作。段設計 （3）示例說明HiVe中，JDBC函數(shù)應用及相關實例。2、輔助手段：多媒體演示。3、對于重點和難點，通過例題討論講解、師生互動、作業(yè)等來突岀。（PPt課件）（1）以文字描述為主，要點及關鍵詞用不同顏色標注；板書設計

HiVe數(shù)據(jù)操作及編程時，通過示例描述：PPt的播放做到適時呈現(xiàn)、對過程有動態(tài)演示。思考題和作業(yè)10章習題：簡答題&實踐題實驗內(nèi)容 完成課本中的實例，熟悉HiVe的使用11112+2章節(jié)名稱授課形式教學目的及要

ZOOKeePer協(xié)調(diào)服務理論課■案例討論課□實驗課■習題課□其他□ZOOKeePerZAB及數(shù)拯模型，集群部署的過程和配置ZOOKeePer在HadOOPYARNHA、SParkHA和HiV求 eHA的應用及配置方法ZOOKeePer在單節(jié)點故障的解決辦法ZOOKeePer基本的讀寫操作編程案例實現(xiàn)教學重點

ZOoKeePer的特性及其應用

ZOOKeePer集群的操作編程ZOOKeePer的數(shù)據(jù)模型和事件監(jiān)聽器的工作機制ZOOKeePer集群部署的操作及相關基本命令了解ZOOKeePer在Hadoop,HBas