《大數(shù)據(jù)采集與預處理》教案

模塊/項目九任務9《大數(shù)據(jù)Hadoop平臺的Flume數(shù)據(jù)采集框架——日志數(shù)據(jù)采集應用案例》教學設計方案一、教學分析課題名稱Flume的配置和案例應用授課方式線上線下、理實一體授課學時2授課地點授課時間教學內(nèi)容掌握Flume的Source、Channel和Sink的結構及配置要點；學會查閱官方文檔確定配置項；針對web日志和TCP端口的數(shù)據(jù)采集能進行實施學情分析通過前面的學習，學生已經(jīng)初步了解了大數(shù)據(jù)情況下數(shù)據(jù)采集將面臨的挑戰(zhàn)，對Hadoop生態(tài)圈和Flume有了基本的了解。教學目標知識目標掌握Flume的配置方法和步驟掌握web日志采集的場景下，如何實現(xiàn)對文件夾的監(jiān)控和采集掌握TCP端口的數(shù)據(jù)采集能力目標能根據(jù)業(yè)務場景設計采集方案能根據(jù)官網(wǎng)文檔進行配置文件的編寫能夠解決運行過程中遇到的異常能夠靈活組合Flume，實現(xiàn)多級數(shù)據(jù)采集素質目標課程思政育人目標：線上線下結合，引導學習方式，培養(yǎng)自主學習能力；培養(yǎng)學生分析方法、孜孜不倦；通過小組協(xié)作學習，提高學生解決問題能力和培養(yǎng)學生團隊合作精神；在實踐教學中培養(yǎng)學生精益求精的工匠精神；勞動教育目標：在學生進行數(shù)據(jù)采集、HDFS操作實踐練習過程中培養(yǎng)學生勤儉、奮斗、創(chuàng)新、奉獻的勞動精神。教學重點掌握Flume配置編寫的過程；掌握文件夾監(jiān)控，TCP端口監(jiān)控采集的配置過程教學難點解決運行過程中遇到的異常二、教學策略教學資源教材頁、多媒體課件、重慶高等教育智慧教育平臺任務模塊五、國家職業(yè)教育智慧教育平臺大數(shù)據(jù)技術專業(yè)教學資源庫、理實一體化實訓室、教學方法與手段通過學情調(diào)研，分析學情，根據(jù)學生基礎情況，設計教學策略；通過多媒體演示的方法進行講授，講授過程中根據(jù)學生的掌握情況調(diào)整教學策略，進行課堂互動討論；通過情境教學法營造情境，進行實踐操作演示，耐心地進行學生實踐指導；通過小組協(xié)作的方式，提高學生解決問題的能力，培養(yǎng)學生團隊合作意識；通過理論與實踐相結合的方式，讓學生在實踐中加深對理論知識的理解；采用線上線下混合教學模式，提升教學質量。教學重點解決措施根據(jù)學生基礎情況自然引入課程內(nèi)容；通過多媒體演示、課堂互動討論等方式提高講授質量；通過小組協(xié)作的方式，提高學生參與課堂的積極性；通過細致地進行實踐操作演示，讓學生理解實踐操作步驟；通過線上線下混合教學模式，豐富教學方式，為學生提供反復學習的機會，并開展線上答疑。教學難點解決措施由于本次課教學難點主要在實踐操作方面，所以本次課將從以下三個方面解決本次課教學難點：通過線上線下混合教學模式，豐富教學方式，為學生提供反復學習的機會，并開展線上答疑；通過細致地進行實踐操作演示，讓學生理解實踐操作步驟；通過課堂互動，解除學生疑惑，讓學生一步一步解決問題；三、教學實施第X次課（2課時）課前準備教學內(nèi)容教師活動學生活動設計意圖備注教學環(huán)境準備調(diào)試好教室的硬件設備和軟件環(huán)境準備好教學需要使用的工具發(fā)布教學資料準備任務準備好教材、課堂記錄本、筆等學習用品。培養(yǎng)學生養(yǎng)成良好的學習習慣、督促學生進入良好的學習狀態(tài)教學內(nèi)容準備根據(jù)學情分析、教學內(nèi)容和教學環(huán)境，研究和準備教學內(nèi)容、設計和制作教學資源（包括多媒體課件，教學案例等）預習學習內(nèi)容更好地開展課堂教學激發(fā)學生主動學習、提高學生信息整理能力教學策略準備根據(jù)學情分析、教學內(nèi)容和教學環(huán)境，設計教學策略學習小組進行課前預習知識討論、研究本次課學習方法更加有效地提高教學質量、促進學生對本次課知識的理解和技能的掌握課中探究教學內(nèi)容教師活動學生活動設計意圖課程引入-復習前面學習的內(nèi)容、引入本次課內(nèi)容復習之前的HDFS基本操作，重溫面臨的挑戰(zhàn)認真聽講、思考回答問題、積極參與課堂討論讓學生復習上次課學習內(nèi)容的重點培養(yǎng)學生積極探索、勇于創(chuàng)新的科學素養(yǎng)掌握Flume的Source、Channel和Sink的工作原理講解Flume的設計理念，特別注意講解散入散出的概念；同時講解級聯(lián)采集的理念；認真聽講、小組討論、課堂提問通過小組協(xié)作學習，提高學生解決問題能力和培養(yǎng)學生團隊合作精神在實踐教學中培養(yǎng)學生精益求精的工匠精神培養(yǎng)勤儉、奮斗、創(chuàng)新、奉獻的勞動精神Flume的配置基礎以一個監(jiān)控文件內(nèi)容的案例，講解配置文件的配置方式，尤其注意講明如何根據(jù)官網(wǎng)文檔進行對應項的配置；同時，講解如何執(zhí)行Flume進行數(shù)據(jù)采集。認真聽講，認真進行實踐練習，完成實踐練習項目讓學生理解并掌握如何利用官網(wǎng)文檔進行Flume的配置，以及如何啟動Flume采集，通過小組協(xié)作學習，提高學生解決問題能力和培養(yǎng)學生團隊合作精神Web日志采集和TCP端口數(shù)據(jù)采集基于兩個典型的大數(shù)據(jù)采集場景。講解如何進行web日志采集和TCP端口采集。注意講解如何實現(xiàn)級聯(lián)采集，如何設置Source為文件夾，Sink為HDFS；尤其注意講解如何解決執(zhí)行過程中出現(xiàn)的各類異常。認真聽講、小組討論、課堂展示讓學生理解并掌握基于文件夾和TCP的采集，同時理解級聯(lián)采集的應用場景。通過小組協(xié)作學習，提高學生解決問題能力和培養(yǎng)學生團隊合作精神培養(yǎng)學生語言表達能力培養(yǎng)勤儉、奮斗、創(chuàng)新、奉獻的勞動精神課后拓展教學內(nèi)容教師活動學生活動設計意圖完成課后作業(yè)布置課后任務、進行課后答疑根據(jù)文檔實現(xiàn)采集數(shù)據(jù)放入MySQL中。掌握本次課的知識與技能總結本次任務，預習新知識布置總結及預習任務完成課后總結及預習任務培養(yǎng)學生課后總結復習、課前預習的良好習慣?？己嗽u價本次課通過對學生課前、課中、課后的綜合表現(xiàn)情況評價完成本次課評