《大數(shù)據(jù)項目綜合實踐》課程教學(xué)大綱

1、大數(shù)據(jù)項目綜合實踐課程教學(xué)大綱一、課程基本信息課程編號：sk221課程名稱：大數(shù)據(jù)項目綜合實踐英文名稱：Big Data Project Comprehensive Practice課程類型：實踐教學(xué)課程要求：必修學(xué)時/學(xué)分：6周/6先修課程：本專業(yè)培養(yǎng)方案內(nèi)的課程后續(xù)課程：畢業(yè)設(shè)計適用專業(yè)：數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)、信息與計算科學(xué)二、課程描述“大數(shù)據(jù)項目綜合實踐”是數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)、信息與計算科學(xué)專業(yè)的一門實踐課程，是綜合利用所學(xué)知識進(jìn)行大數(shù)據(jù)應(yīng)用系統(tǒng)的分析、設(shè)計、開發(fā)的重要實踐環(huán)節(jié)。本課程以搜素引擎項目開發(fā)為背景，要求學(xué)生基于Hadoop大數(shù)據(jù)技術(shù)體系，實現(xiàn)海量數(shù)據(jù)的分布存儲、分析和計算，

2、以及分析結(jié)果的可視化展現(xiàn)。通過實習(xí)，使學(xué)生理解虛擬機(jī)的概念，能熟練應(yīng)用常用的虛擬機(jī)軟件創(chuàng)建和配置虛擬機(jī)；深入理解大數(shù)據(jù)和NoSQL數(shù)據(jù)庫的基本概念，并能利用分布式Hadoop進(jìn)行大數(shù)據(jù)的存儲和處理；能熟練地利用開源云平臺管理軟件，進(jìn)行云平臺的架構(gòu)，并進(jìn)行配置和管理；利用云計算仿真軟件進(jìn)行云計算資源調(diào)度的算法設(shè)計，進(jìn)一步培養(yǎng)獨(dú)立分析問題、解決問題的能力，以及大數(shù)據(jù)應(yīng)用項目的工程化開發(fā)能力。三、教學(xué)目標(biāo) 1基于Hadoop平臺設(shè)計、實現(xiàn)全文搜索引擎系統(tǒng)。學(xué)生應(yīng)理解系統(tǒng)的業(yè)務(wù)流程，基于項目背景進(jìn)行合理分析并確定系統(tǒng)需求，對開發(fā)技術(shù)、方法和開發(fā)語言進(jìn)行分析和選擇，提出系統(tǒng)實施方案，解決大數(shù)據(jù)領(lǐng)域復(fù)雜的

3、工程問題。培養(yǎng)學(xué)生通過查閱資料、使用現(xiàn)代化工具等多種手段進(jìn)行大數(shù)據(jù)相關(guān)問題的分析能力。（支持畢業(yè)能力要求1、2）2按照軟件工程思想和分布式系統(tǒng)設(shè)計流程進(jìn)行系統(tǒng)開發(fā)，完成概要設(shè)計、具體設(shè)計、編碼實現(xiàn)、系統(tǒng)測試，實現(xiàn)系統(tǒng)功能，撰寫開發(fā)文檔和項目答辯。通過項目研發(fā)，培養(yǎng)學(xué)生設(shè)計大數(shù)據(jù)相關(guān)工程問題的解決方案的能力。（支持畢業(yè)能力要求3、6）3按照企業(yè)項目組織方式，安排學(xué)生組建項目組，以項目組為單位進(jìn)行設(shè)計與開發(fā)，培養(yǎng)學(xué)生的團(tuán)隊合作意識與項目管理能力。培養(yǎng)學(xué)生在團(tuán)隊中承擔(dān)個體、團(tuán)隊成員、負(fù)責(zé)人角色，履行相應(yīng)責(zé)任。（支持畢業(yè)能力要求9、11） 四、教學(xué)內(nèi)容、安排及與教學(xué)目標(biāo)的對應(yīng)關(guān)系1.一般性安排見表1。

4、表1 教學(xué)安排序號教學(xué)內(nèi)容教學(xué)目標(biāo)學(xué)時（天）教學(xué)方式對應(yīng)實習(xí)教學(xué)目標(biāo)1 單元1：需求分析組建項目組、熟悉項目調(diào)研、需求分析(1)明確系統(tǒng)目標(biāo)；(2)撰寫需求分析文檔。3查閱資料，分組調(diào)研。12 單元2：概要設(shè)計(1) 確定開發(fā)模式和開發(fā)技術(shù)(2) 系統(tǒng)架構(gòu)設(shè)計(3) 模塊劃分(1)總體方案可行；(2)設(shè)計任務(wù)分解明確；(3)撰寫系統(tǒng)的概要設(shè)計報告；(4)熟悉相關(guān)開發(fā)技術(shù)、原理與方法，熟悉開發(fā)語言和環(huán)境。3小組學(xué)習(xí)、討論與交流，上機(jī)實驗。1、23單元3：搭建開發(fā)環(huán)境(1)開發(fā)環(huán)境搭建與調(diào)試(2)項目組成員分工(1)項目組成員任務(wù)明確；(2)深入掌握開發(fā)語言與環(huán)境。2上機(jī)調(diào)試34單元4：詳細(xì)設(shè)計與

5、編碼(1)各模塊詳細(xì)設(shè)計(2)編碼(1)項目組成員根據(jù)分工完成詳細(xì)設(shè)計；(2)確定任務(wù)的算法，能夠?qū)⒇?fù)責(zé)的任務(wù)編碼實現(xiàn)。12教師講解代碼規(guī)范性的一般要求；分組進(jìn)行詳細(xì)設(shè)計和編碼。26單元5：系統(tǒng)調(diào)試、運(yùn)行(1)系統(tǒng)調(diào)試、運(yùn)行(2)完善功能、進(jìn)行程序檢查(1)項目組統(tǒng)一進(jìn)行項目調(diào)試、運(yùn)行、演示；(2)團(tuán)隊協(xié)作，能夠基本完成項目的試運(yùn)行工作。5項目組完成項目的系統(tǒng)測試及運(yùn)行。2、37單元6：答辯及撰寫報告(1)系統(tǒng)演示及PPT講解(2)撰寫報告(1)以項目組為單位，進(jìn)行檢查。學(xué)生講解，答辯自己的項目任務(wù)及實現(xiàn)方法；(2)撰寫項目實驗報告。3教師講解實驗報告要求，項目組進(jìn)行成果展示及完成實驗報告2、

6、38單元6：總結(jié)(1) 完善報告(2)提交文檔與程序以項目組為單位進(jìn)行總結(jié)。2項目組對結(jié)果進(jìn)行分析和總結(jié)。32. 變更掌握程度較好的項目組，可在完成表1指定項目之后，可根據(jù)項目實驗結(jié)果的分析進(jìn)行進(jìn)一步的改進(jìn)實驗，但應(yīng)在變更前向指導(dǎo)教師申明。五、教學(xué)方法“大數(shù)據(jù)項目綜合實踐”采用案例教學(xué)的方法、分組協(xié)作的形式進(jìn)行教學(xué)。(1)以全文搜素引擎項目為背景，基于Hadoop大數(shù)據(jù)技術(shù)體系，引導(dǎo)學(xué)生進(jìn)行項目的分析和設(shè)計。(2) 按照企業(yè)項目的運(yùn)作方式，采用分組協(xié)作，實現(xiàn)系統(tǒng)的分析、設(shè)計及編碼、調(diào)試。(3) 指導(dǎo)教師對項目組的任務(wù)劃分情況進(jìn)行審核，對開發(fā)進(jìn)度進(jìn)行監(jiān)控，根據(jù)學(xué)生的項目進(jìn)展情況進(jìn)行輔導(dǎo)，對設(shè)計結(jié)

7、果進(jìn)行綜合測評。(4) 采用答辯和報告的形式分析、評價項目的設(shè)計成果。六、考核與成績評定1.成績及其組成總成績采取百分制，由平時表現(xiàn)、程序質(zhì)量、答辯成績和實驗報告四部分構(gòu)成。其中，階段考核成績占比10%，程序質(zhì)量30%，答辯成績占40%、實驗報告成績占比20%。2.評價形式與方法各部分基本考核形式及評價方法如下： (1)平時表現(xiàn)：進(jìn)行階段檢查，通過提問，代碼檢查的方式考查設(shè)計過程中能否按時完成階段設(shè)計任務(wù)。(2)程序質(zhì)量：主要考核系統(tǒng)功能、界面設(shè)計、運(yùn)行情況，著重考核算法設(shè)計是否正確合理，程序結(jié)構(gòu)是否清晰，編碼是否規(guī)范。附有課程設(shè)計電子版任務(wù)書與考核文檔，按要求進(jìn)行評定。(3)答辯成績：主要考核能否正確地描述項目分析、設(shè)計、實現(xiàn)中所涉及的問題，以及相應(yīng)的解決方案。要求回答問題思路清晰，敘述正確，語言流暢。(4)報告成績：主要考核報告撰寫是否規(guī)范正確，內(nèi)容是否完整。3. 說明(1)提倡充分討論、交流，但成果須獨(dú)立完成。應(yīng)用程序存在雷同時，所有雷同成果均不得分。(2)存在曠課、遲到早退、玩游戲等情況時，每次扣2分，6次以上總成績以50分計。七、教學(xué)資源1. 參考書1劉凡平大數(shù)據(jù)搜索引擎原理分析及編程實現(xiàn) HY