大數(shù)據(jù)教學(xué)與科研方案建議書.doc

1、大數(shù)據(jù)教學(xué)與科研方案建議書大數(shù)據(jù)實(shí)驗(yàn)室解決方案 1 、系統(tǒng)簡(jiǎn)述 1.1 、系統(tǒng)構(gòu)成 大數(shù)據(jù)實(shí)驗(yàn)實(shí)踐教學(xué)及科研平臺(tái)，主要由“實(shí)訓(xùn)系統(tǒng)”與“科研與實(shí)戰(zhàn)平臺(tái)”組成，平臺(tái)包括高清視頻課程、實(shí)驗(yàn)任務(wù)、實(shí)訓(xùn)操作及項(xiàng)目實(shí)戰(zhàn)等模塊；提供數(shù)量大、覆蓋知識(shí)面廣的實(shí)驗(yàn)任務(wù)，實(shí)現(xiàn)在線教學(xué)、實(shí)訓(xùn)操作、項(xiàng)目實(shí)戰(zhàn)完美結(jié)合； 平臺(tái)提供大數(shù)據(jù)集群管理功能，包含 Hadoop、Hive、HBase、Sqoop、Flume、Spark 等節(jié)點(diǎn)部屬及管理，提供實(shí)時(shí)監(jiān)控集群的 、內(nèi)存、硬盤等使用率及相關(guān)信息，可以對(duì)管理節(jié)點(diǎn)、計(jì)算節(jié)點(diǎn)進(jìn)行啟動(dòng)、停止等操作管理。提供覆蓋多個(gè)行業(yè)的大數(shù)據(jù)實(shí)戰(zhàn)案例以及數(shù)據(jù)，通過對(duì)這些行業(yè)案例的深入剖析，快速提

2、升學(xué)生的大數(shù)據(jù)實(shí)戰(zhàn)能力。通過大數(shù)據(jù)平臺(tái)的構(gòu)建，幫助高校實(shí)現(xiàn)了內(nèi)部數(shù)據(jù)和外部數(shù)據(jù)的快速融合，從而帶來極佳的數(shù)據(jù)計(jì)算和分析p 挖掘能力。通過基于 _86 架構(gòu)的大數(shù)據(jù)平臺(tái)構(gòu)建，在顯著降低系統(tǒng)建設(shè)成本的同時(shí)，可提供強(qiáng)大的橫向擴(kuò)展能力。幫助高校建立了一套可靠可信的數(shù)據(jù)管控機(jī)制，提供元數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)安全等功能。1.2 、技術(shù)特點(diǎn) 1.2.1 、基于云端實(shí)驗(yàn)的教學(xué)平臺(tái) 1 1 ）基于容器技術(shù)的云實(shí)驗(yàn)機(jī) 基于容器的輕量級(jí)虛擬化技術(shù)，相比傳統(tǒng) KVM 之類最明顯的特點(diǎn)就是啟動(dòng)快，資占用小。因此對(duì)于構(gòu)建隔離的標(biāo)準(zhǔn)化的運(yùn)行環(huán)境，輕量級(jí)的 PaaS(如 dokku), 構(gòu)建自動(dòng)化測(cè)試和持

3、續(xù)集成環(huán)境，以及一切可以橫向擴(kuò)展的應(yīng)用(尤其是需要快速啟停來應(yīng)對(duì)峰谷的 web 應(yīng)用)，具有巨大的優(yōu)勢(shì)。本技術(shù)可以在有限的物理資上創(chuàng)建多個(gè)虛擬化的實(shí)驗(yàn)機(jī)環(huán)境，學(xué)生可以快速啟動(dòng)專享的實(shí)驗(yàn)機(jī)。2 2 ）基于 S B/S 的遠(yuǎn)程桌面交互技術(shù) Y Y- - Desk Y-Desk 是一種 HTML5 和 JS 的 Web 應(yīng)用程序，可使用遠(yuǎn)程桌面協(xié)議（如 VNC 或RDP）訪問桌面環(huán)境。同時(shí)提供了一個(gè)驅(qū)動(dòng)它的 API。該 API 可用于為其他類似的應(yīng)用程序或服務(wù)提供服務(wù)。此 Web 應(yīng)用程序是提供協(xié)議無關(guān)的遠(yuǎn)程桌面網(wǎng)關(guān)的一部分。作為API，Y-Desk 提供了一種通過使用 或 WebSocket 的基

4、于 Script 的隧道流式傳輸文本數(shù)據(jù)的通用和有效的方法，以及支持 Y-Desk 協(xié)議的客戶端實(shí)現(xiàn)，并將遠(yuǎn)程顯示與 Y-Desk 協(xié)議流隧道。Y-Desk 使用 Script 及 HTML5 和其他標(biāo)準(zhǔn)，只需要一個(gè)主流的瀏覽器或啟用 Web 的設(shè)備，就可以訪問所提供的任何桌面。3 3 ）遠(yuǎn)程陪練技術(shù) 平臺(tái)可以在瀏覽器中實(shí)現(xiàn)桌面分享、共享的功能，助教可以遠(yuǎn)程通過桌面操作、文字和語音來協(xié)助、陪練生，猶如面對(duì)面、手把手地指導(dǎo)、學(xué)習(xí)。1.2 .2 、領(lǐng)先成熟的科研支撐平臺(tái) 1 1 ）全數(shù)據(jù)整合能力，快速匯聚各類數(shù)據(jù) 支持對(duì)多異構(gòu)數(shù)據(jù)的高效集成與關(guān)聯(lián)。包括結(jié)構(gòu)化、半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)類型的在線存儲(chǔ)。

5、平臺(tái)集成的高性能 ETL 組件，覆蓋 50 余種主流數(shù)據(jù)庫，滿足企業(yè)在復(fù)雜業(yè)務(wù)場(chǎng)景下的各類數(shù)據(jù)整合要求。2 2 ）極簡(jiǎn)可視化的數(shù)據(jù)開發(fā)套件，提升業(yè)務(wù)開發(fā)效率 平臺(tái)支持所見即所得的圖形化工作流開發(fā)模式。以一體化視圖的方式，實(shí)現(xiàn)了數(shù)據(jù)處理流程建模、流程表單建立、規(guī)則配置的一次性完成。任務(wù)生成和調(diào)度效率較傳統(tǒng)方式提升數(shù)倍。3 3 ）高性能數(shù)據(jù)存儲(chǔ)和計(jì)算平臺(tái)，快速處理與分析p 平臺(tái)集成了業(yè)界最先進(jìn)的批量、流式、實(shí)時(shí)計(jì)算技術(shù)，采用靈活、高擴(kuò)展性的數(shù)據(jù)處理架構(gòu)，支持通用 _86 平臺(tái)，同時(shí)面向 _86 服務(wù)器進(jìn)行了深度集成與優(yōu)化，實(shí)現(xiàn)了超高性能的大數(shù)據(jù)分析p 技術(shù)平臺(tái)。4 4 ）度數(shù)據(jù)分析p 引擎，挖掘數(shù)

6、據(jù)價(jià)值 平臺(tái)內(nèi)置深度優(yōu)化的機(jī)器學(xué)習(xí)框架及算法庫，實(shí)現(xiàn)了算法的分布式并行化，同時(shí)支持 R、Python、Scala、C+等主流開發(fā)語言，大幅提升了海量數(shù)據(jù)的分析p 挖掘能力。2 、系統(tǒng)功能 2.1 、實(shí)訓(xùn)教學(xué)平臺(tái) 平臺(tái)從功能上可分為“管理與控制模塊”、“教學(xué)管理模塊”、“教學(xué)模塊”、“實(shí)驗(yàn)?zāi)K”、“考試系統(tǒng)”、“教學(xué)資包”等部分組成，為學(xué)生提供多梯度、層次式的系列實(shí)驗(yàn)，助力學(xué)生知識(shí)點(diǎn)掌握和基礎(chǔ)技能培養(yǎng)；為教師和學(xué)生提供畢業(yè)設(shè)計(jì)、課程設(shè)計(jì)以及科研的基礎(chǔ)支撐，為教師學(xué)生提供良好的大數(shù)據(jù)真正的生產(chǎn)環(huán)境。2.1.1 、平臺(tái) 構(gòu)成 2.11 .11 .1 、管理模塊 1.軟件為整個(gè)系統(tǒng)提供管理功能，管理系

7、統(tǒng)各軟件，可對(duì)各軟件進(jìn)行開關(guān)機(jī)，恢復(fù)實(shí)驗(yàn)初始狀態(tài)等功能。1）圖形展示各軟件運(yùn)行狀況：2）軟件系統(tǒng)的啟動(dòng)與關(guān)閉：2.軟件提供云計(jì)算平臺(tái)配置功能，包括配置存儲(chǔ)限額、作業(yè)調(diào)度方式等。3.軟件提供云計(jì)算工具，包括 Hive、Spark、Pig 的配置功能，配置 Spark 的作業(yè)調(diào)度方式和內(nèi)存管理方式。4.軟件可以監(jiān)控整個(gè)云計(jì)算平臺(tái)的運(yùn)行狀況，包括可用資和已用資、作業(yè)的排隊(duì)狀況、正常和異常的作業(yè)運(yùn)行狀況，并提供干預(yù)功能，及時(shí)釋放異常占用資和終止異常作業(yè)。5.支持大數(shù)據(jù)查詢及分析p 功能，如聚集查詢、連接查詢、選擇操作、嵌套查詢、Like 查詢等功能。例 1 例 2 6.對(duì)執(zhí)行的工作任務(wù)運(yùn)行狀況、進(jìn)度、

8、流程，進(jìn)行實(shí)時(shí)圖形展示，使得各項(xiàng)指標(biāo)一目了然：2.11 .12 .2 、教學(xué)管理模塊 提供學(xué)生的權(quán)限、課程計(jì)劃、學(xué)習(xí)記錄、學(xué)習(xí)成績、實(shí)驗(yàn)報(bào)告等管理功能，主要功能如下：2.1.2.1 、專業(yè)管理 提供對(duì)專業(yè)信息的增加、刪除、修改、查詢功能。2.1.2.2 2 、班級(jí)管理 提供對(duì)專業(yè)下屬班級(jí)的增加、刪除、修改、查詢功能。2.1.2.3 3 、學(xué)生管理 提供對(duì)班級(jí)內(nèi)學(xué)生的管理，學(xué)生內(nèi)容包含姓名、學(xué)號(hào)、所屬班級(jí)、所屬專業(yè)、聯(lián)系手機(jī)、登錄次數(shù)等內(nèi)容。2.1.2.4 4 、交流日志查閱 對(duì)實(shí)驗(yàn)機(jī)分享交流的內(nèi)容進(jìn)行查詢，包含交流 IP、相關(guān)學(xué)員、相關(guān)老師、實(shí)驗(yàn)機(jī)編號(hào)、交流內(nèi)容等內(nèi)容。2.1.2.5 5 、成

9、績管理 對(duì)于學(xué)習(xí)中心在線學(xué)習(xí)的學(xué)習(xí)考核成績進(jìn)行管理，包含查詢及刪除等功能。2.1.2.6 6 、學(xué)習(xí)記錄 提供每個(gè)學(xué)生在學(xué)習(xí)中心平臺(tái)內(nèi)學(xué)習(xí)課程的學(xué)習(xí)記錄，包含日期、計(jì)劃、課程、章節(jié)、學(xué)習(xí) IP 等。2.1.2.7 7 、學(xué)習(xí)行為報(bào)表 對(duì)所有學(xué)生的課程學(xué)習(xí)記錄進(jìn)行統(tǒng)計(jì)，包含個(gè)體統(tǒng)計(jì)、班級(jí)統(tǒng)計(jì)、全體統(tǒng)計(jì)等。2.1.2.8 8 、課程管理 對(duì)學(xué)習(xí)課程進(jìn)行查詢、修改、刪除等操作。2.1.2.9 9 、開通課程計(jì)劃 對(duì)于學(xué)習(xí)開課計(jì)劃的字段內(nèi)容包含計(jì)劃名稱、授課講師、授課時(shí)間段、開通狀態(tài)、允許申請(qǐng)周期，允許申請(qǐng)人數(shù)等，功能提供綁定課程計(jì)劃相關(guān)實(shí)訓(xùn)平臺(tái)課程、授課助教、云實(shí)驗(yàn)機(jī)綁定、實(shí)驗(yàn)任務(wù)綁定等功能。2.1

10、.2.10 、課程測(cè)驗(yàn)習(xí)題管理 提供對(duì)課程相關(guān)的習(xí)題管理，題型包含單選、多選、判斷題等類型，對(duì)習(xí)題進(jìn)行增、冊(cè)、改、查操作。2.1.2.11 、分級(jí)權(quán)限功能 系統(tǒng)分為總管理員、助教等二級(jí)管理角色，總管理員進(jìn)行管理所有的功能點(diǎn)，助教可以進(jìn)行班級(jí)管理、學(xué)生管理、開課計(jì)劃制作、實(shí)驗(yàn)機(jī)遠(yuǎn)程協(xié)助等。2.1.2.12 、實(shí)訓(xùn)系統(tǒng)管理 提供學(xué)生根據(jù)姓名、學(xué)號(hào)、密碼登錄系統(tǒng)進(jìn)行實(shí)訓(xùn)操作，學(xué)生只需安裝瀏覽即可進(jìn)行實(shí)驗(yàn)任務(wù)操作；提供實(shí)訓(xùn)課程在線學(xué)習(xí)功能、實(shí)驗(yàn)機(jī)在線操作、實(shí)驗(yàn)報(bào)告提交、實(shí)驗(yàn)機(jī)界面截圖、記錄課程學(xué)習(xí)時(shí)長等。2.1.2.13 、實(shí)驗(yàn)機(jī)桌面管理 可管理系統(tǒng)提供的實(shí)驗(yàn)機(jī)桌面分享功能，如學(xué)生在學(xué)習(xí)、操作云實(shí)驗(yàn)機(jī)

11、的過程中，有問題可以向老師發(fā)起協(xié)助請(qǐng)求，助教在收到請(qǐng)求時(shí)，可以遠(yuǎn)程訪問學(xué)生的實(shí)驗(yàn)機(jī)，并指導(dǎo)如何操作 【教學(xué)管理系統(tǒng)界面】 2.11 .13 .3 、教學(xué)模塊 實(shí)訓(xùn)平臺(tái)是集教學(xué)管理、課程學(xué)習(xí)、在線實(shí)驗(yàn)操作的一個(gè)綜合平臺(tái)，系統(tǒng)基于 B/S架構(gòu)，擴(kuò)展性好，并發(fā)能力強(qiáng)，在很有限的硬件資下，輕松支持上千名學(xué)生同時(shí)學(xué)習(xí)、實(shí)驗(yàn)。主要特點(diǎn)如下：2.1.3.1 、用戶 登錄 打開瀏覽器，在地址欄中輸入學(xué)生端網(wǎng)址，通過注冊(cè)帳號(hào)、學(xué)生學(xué)號(hào)等方式授權(quán)進(jìn)入實(shí)訓(xùn)系統(tǒng)主頁，如下圖所示：登錄成功，進(jìn)入實(shí)訓(xùn)系統(tǒng)學(xué)生界面，如下圖所示：2.1.3.2 、 申請(qǐng)學(xué)習(xí) 功能描述：學(xué)生通過本功能申請(qǐng)參加由主講老師計(jì)劃開通的某些課程。學(xué)生

12、點(diǎn)擊左邊的功能菜單“申請(qǐng)學(xué)習(xí)”，打開申請(qǐng)學(xué)習(xí)界面，功能界面如下圖：此界面列出了所有允許申請(qǐng)參加學(xué)習(xí)的開課計(jì)劃，在列表中可查看授課開始日期、授課結(jié)束日期，申請(qǐng)狀態(tài)等，選中需要參加課程開課計(jì)劃，點(diǎn)擊“查看詳細(xì)”鏈接，可以查看開課計(jì)劃的詳細(xì)介紹。2.1.3.3 、 我的課程 功能描述：學(xué)生通過本功能可以在線學(xué)習(xí)已經(jīng)開通的大數(shù)據(jù)實(shí)訓(xùn)課程。如圖示：主要功能：1） 效果切換：視頻播放效果提供標(biāo)清、高清以及超清三種，為不同的網(wǎng)絡(luò)帶寬服務(wù)。2） 章節(jié)目錄：列出本課程已經(jīng)開通的章節(jié)，可以根據(jù)學(xué)習(xí)進(jìn)度，選擇章節(jié)進(jìn)行學(xué)習(xí)。3） 學(xué)習(xí)記錄：可以查詢本課程每個(gè)章節(jié)的學(xué)習(xí)完成情況。4） 學(xué)習(xí)筆記：提供學(xué)生在學(xué)習(xí)過程中，在

13、線記錄學(xué)習(xí)筆記，筆記可以多次保存。5） 打開實(shí)驗(yàn)機(jī)：學(xué)習(xí)在線視頻過程中直接打開與本課程配套的實(shí)驗(yàn)機(jī)。2.1.3.4 、 實(shí)驗(yàn)任務(wù) 功能描述：實(shí)驗(yàn)任務(wù)操作界面，學(xué)生在此界面上完成大數(shù)據(jù)相關(guān)作業(yè)實(shí)驗(yàn)。系統(tǒng)列出所有要求完成的實(shí)驗(yàn)任務(wù)內(nèi)容及簡(jiǎn)要介紹，功能如下圖所示：1、實(shí)驗(yàn)任務(wù)的要求，包含實(shí)驗(yàn)?zāi)康?、?shí)驗(yàn)環(huán)境、實(shí)驗(yàn)內(nèi)容、實(shí)驗(yàn)步驟等內(nèi)容。2、實(shí)驗(yàn)任務(wù)配套的實(shí)驗(yàn)機(jī)，實(shí)驗(yàn)機(jī)提供本次實(shí)驗(yàn)所需的所有環(huán)境。3、實(shí)驗(yàn)報(bào)告編輯功能，如下圖所示：3、實(shí)驗(yàn)過程載圖功能，如下圖所示：2.1.3.5 、 實(shí)驗(yàn)訓(xùn)練 功能描述：學(xué)生通過實(shí)驗(yàn)訓(xùn)練，可以直接進(jìn)入實(shí)驗(yàn)機(jī)。如下圖所示：2.1.3.6 、 集群安裝 功能描述：學(xué)生通過本功能

14、及任務(wù)要求，完成大數(shù)據(jù)集群的搭建。集群安裝實(shí)訓(xùn)平臺(tái)提供三臺(tái)實(shí)驗(yàn)機(jī)，一臺(tái)作為主節(jié)點(diǎn)，二臺(tái)作為從節(jié)點(diǎn)，按照實(shí)驗(yàn)步驟將三臺(tái)實(shí)驗(yàn)機(jī)安裝成為 Hadoop 完全分布式集群。功能如下圖所示：在完成主節(jié)點(diǎn)安裝任務(wù)后，依次完成二臺(tái)從節(jié)點(diǎn)的任務(wù)要求，最終達(dá)到集群安裝成功。2.1.3.7 、 學(xué)習(xí)記錄 功能描述：學(xué)生通過本功能，可以實(shí)時(shí)查詢自己所有課程學(xué)習(xí)情況。學(xué)習(xí)記錄功能，列出學(xué)生所有已經(jīng)開通的課程列表，可以查詢所有課程總學(xué)習(xí)時(shí)長、第一次學(xué)習(xí)時(shí)間、最后學(xué)習(xí)時(shí)間等，功能如下圖所示：還可根據(jù)需要，查詢某一課程詳細(xì)學(xué)習(xí)情況。2.1.3.8 、 選修課程 功能描述：學(xué)生通過本功能可以自學(xué)一些大數(shù)據(jù)相關(guān)的課程，提供視頻及

15、配套實(shí)驗(yàn)環(huán)境。如下圖所示：2.1.3.9 、在線習(xí)題測(cè)驗(yàn) 提供對(duì)課程相關(guān)的習(xí)題，題型包含單選、多選、判斷題等類型等，并根據(jù)課程進(jìn)度，可以進(jìn)行單元練習(xí)，完成課程后，系統(tǒng)會(huì)進(jìn)行綜合性的測(cè)驗(yàn)。2.1.3.10 、 在線的 代碼 判 斷 系統(tǒng) （ OJ ） 學(xué)生可以在線提交程序多種程序代碼，系統(tǒng)對(duì)代碼進(jìn)行編譯和執(zhí)行，并通過預(yù)先設(shè)計(jì)的測(cè)試數(shù)據(jù)來檢驗(yàn)程序代碼的正確性。支持 、Python 等語言。2.11 .14 .4 、實(shí)驗(yàn)?zāi)K “大數(shù)據(jù)實(shí)驗(yàn)實(shí)踐教學(xué)及科研平臺(tái)”完全滿足大數(shù)據(jù)實(shí)驗(yàn)、科研、教學(xué)的平臺(tái)支撐需求。2.1.3.1 、實(shí)驗(yàn)機(jī) 支撐 系統(tǒng) 1）、包含 HDFS、 Yarn、 Spark、 Hive、

16、 Hbase、 Zookeeper、 Storm、 Kafka、Solr 等常見的大數(shù)據(jù)生態(tài)組件。2）、采用新一代資管理框架，允許多個(gè)應(yīng)用同時(shí)高效地運(yùn)行在一個(gè)物理集群上。3）、靈活的資管理和調(diào)度機(jī)制，支持可拔插式的資調(diào)度策略，調(diào)度策略支持 FIFO、 Capacity Scheduler、 Fair Scheduler 和 Label BasedScheduler 等多種策略 4）、系統(tǒng)架構(gòu)具備高度的彈性，可滿足實(shí)驗(yàn)運(yùn)行平臺(tái)所需要的高度擴(kuò)展性，一旦有新的需求出現(xiàn)，即可向現(xiàn)有平臺(tái)上迅速加入新的服務(wù)對(duì)象。5）、分布式批處理框架，將輸入的數(shù)據(jù)集劃分為塊后并行處理、排序、再歸集，可處理 PB 級(jí)別的數(shù)

17、據(jù)。6）、系統(tǒng)中無單點(diǎn)故障，任何一個(gè)角色故障后都應(yīng)有備份機(jī)器承擔(dān)原失效節(jié)點(diǎn)工作，并在監(jiān)控頁面上對(duì)錯(cuò)誤狀態(tài)進(jìn)行顯示標(biāo)識(shí)。7）、系統(tǒng)的存儲(chǔ)容量能夠動(dòng)態(tài)不停機(jī)擴(kuò)容，擴(kuò)容時(shí)現(xiàn)有系統(tǒng)可以不間斷正常運(yùn)行，不受擴(kuò)容影響。擴(kuò)容時(shí)無需遷移數(shù)據(jù)，無需要求用戶對(duì)數(shù)據(jù)進(jìn)行重新分區(qū),避免硬盤和數(shù)據(jù)損壞。8）、發(fā)生硬件故障時(shí)，系統(tǒng)能夠自動(dòng)檢測(cè)錯(cuò)誤并修復(fù)數(shù)據(jù)，無需人工干預(yù)，即使機(jī)器未修復(fù)，系統(tǒng)仍然能夠不間斷正常運(yùn)行。9）、實(shí)驗(yàn)初始化、關(guān)停、刪除等功能：2.1.3.2 、云實(shí)驗(yàn)?zāi)K 1）基于 B/S 的 Web 實(shí)驗(yàn)機(jī)可視化操作 基于 Docker 容器技術(shù)，實(shí)驗(yàn)機(jī)界面采用 HTML5 顯示，操作終端無需安裝其它開發(fā)軟件即可

18、進(jìn)行實(shí)驗(yàn)操作，同時(shí)將實(shí)驗(yàn)任務(wù)指導(dǎo)書與實(shí)驗(yàn)機(jī)進(jìn)行同步顯示，提供 Web 在線代碼復(fù)制粘貼功能。2）云實(shí)驗(yàn)機(jī)集群管理功能 提供云實(shí)驗(yàn)機(jī)集群管理，對(duì)實(shí)驗(yàn)機(jī)所屬服務(wù)器進(jìn)行新增、刪除等操作，對(duì)云實(shí)驗(yàn)機(jī)可以根據(jù)學(xué)生編號(hào)、實(shí)驗(yàn)任務(wù)和環(huán)境要求自動(dòng)創(chuàng)建，無需管理人員參與實(shí)驗(yàn)機(jī)創(chuàng)建操作過程。管理平臺(tái)對(duì)云實(shí)驗(yàn)機(jī)可以進(jìn)行停止、銷毀操作。3）云實(shí)驗(yàn)機(jī)類型 包含: Hadoop 實(shí)驗(yàn)機(jī)、Hive 實(shí)驗(yàn)機(jī)、HBase 實(shí)驗(yàn)機(jī)、R 語言實(shí)驗(yàn)機(jī)、Scala 實(shí)驗(yàn)機(jī)、Spark 實(shí)驗(yàn)機(jī)、Kafka 實(shí)驗(yàn)機(jī)、Sqoop 實(shí)驗(yàn)機(jī)、Flume 實(shí)驗(yàn)機(jī)、Storm 實(shí)驗(yàn)機(jī)、SPSS 實(shí)驗(yàn)機(jī)、可視化實(shí)驗(yàn)機(jī)、Mongodb 等實(shí)驗(yàn)機(jī)等。4）實(shí)驗(yàn)任務(wù)指導(dǎo)書 提供類全面，數(shù)量龐大的實(shí)驗(yàn)任務(wù)指導(dǎo)書，內(nèi)容需要包含：Hadoop