大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)建設(shè)

1、大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)建設(shè)調(diào)研報告自黨的十八大以來，我國提出了實(shí)施國家大數(shù)據(jù)戰(zhàn)略的重大決策。國務(wù)院和相關(guān)部門先后印發(fā)了促進(jìn)大數(shù)據(jù)發(fā)展行動綱要、大數(shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)劃(2016(201620202020 年)等指導(dǎo)性文件。各部門、各地方高度重視，據(jù)不完全統(tǒng)計，我國已有2020 多個省級地方和 1010 余個部委出臺了本地區(qū)、本行業(yè)大數(shù)據(jù)發(fā)展規(guī)劃，我國大數(shù)據(jù)發(fā)展已經(jīng)正式駛?cè)肟燔嚨馈?0152015 年 9 9 月 5 5 日經(jīng)李克強(qiáng)總理簽批，國務(wù)院印發(fā)促進(jìn)大數(shù)據(jù)發(fā)展行動綱要(以下簡稱綱要)，系統(tǒng)指導(dǎo)我國大數(shù)據(jù)發(fā)展的國家頂層設(shè)計和總體部署大數(shù)據(jù)發(fā)展工作。綱要提出從政府大數(shù)據(jù)、新興產(chǎn)業(yè)大數(shù)據(jù)、安全保障體系三

2、個方面著手推進(jìn)大數(shù)據(jù)領(lǐng)域十大工程建設(shè)，將我國大數(shù)據(jù)發(fā)展推向了另一個制局點(diǎn)。職業(yè)教育服務(wù)經(jīng)濟(jì)與社會發(fā)展，必須緊跟產(chǎn)業(yè)發(fā)展步伐，隨著經(jīng)濟(jì)增長方式轉(zhuǎn)變而“動”，跟著產(chǎn)業(yè)結(jié)構(gòu)調(diào)整升級而“走”，圍著企業(yè)技能型人才需求而“轉(zhuǎn)”，適應(yīng)市場的需求而“變”。 在大數(shù)據(jù)技術(shù)飛速發(fā)展的今天， 職業(yè)教育必須緊跟大數(shù)據(jù)產(chǎn)業(yè)發(fā)展步伐。為了更好地了解相關(guān)行業(yè)企業(yè)對大數(shù)據(jù)人才的需求，促進(jìn)大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)教學(xué)及專業(yè)建設(shè)，大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)教學(xué)資源庫建設(shè)團(tuán)隊(duì)在國內(nèi)外針對大數(shù)據(jù)在行業(yè)企業(yè)的需求開展了調(diào)研。一、調(diào)研目的1 1、了解大數(shù)據(jù)行業(yè)企業(yè)對大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)人才的需求傾向、人才需求規(guī)格預(yù)測、就業(yè)預(yù)測、人才的市場定位等；

3、2 2、了解大數(shù)據(jù)行業(yè)企業(yè)對大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)人才培養(yǎng)模式、培養(yǎng)目標(biāo)的意見，以及對專業(yè)知識、崗位分工、職業(yè)技能等的要求；3 3、了解往屆相關(guān)專業(yè)畢業(yè)生在工作單位的表現(xiàn)及用人單位對往屆畢業(yè)生的工作、崗位能力評價；4 4、與相關(guān)企業(yè)建立校企合作模式，促進(jìn)教學(xué)與社會實(shí)踐的聯(lián)系，為大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)教學(xué)資源庫的專業(yè)建設(shè)、課程體系建設(shè)及培養(yǎng)模式尋找更完善的發(fā)展方向。二、調(diào)研方式1 1 .問卷調(diào)查：印制問卷涵寄或面交，請企業(yè)相關(guān)人員作答。2 2 . .實(shí)地調(diào)研：教師到企業(yè)和用人單位實(shí)地調(diào)研。3 3 . .座談?wù){(diào)研：邀請用人單位的技術(shù)人員、管理人員到系里開展座談交流4 4 . .網(wǎng)上調(diào)查：到網(wǎng)上搜索有關(guān)

4、人才需求、課程設(shè)計、教學(xué)計劃等信息。三、國內(nèi)外大數(shù)據(jù)發(fā)展現(xiàn)狀（一）大數(shù)據(jù)產(chǎn)業(yè)呈現(xiàn)爆炸式增長由IDCIDC和EMEM堂合發(fā)布的 TheDigitalUniverseofOpportunities:RichDataandtheIncreasingValueofInternetofTheDigitalUniverseofOpportunities:RichDataandtheIncreasingValueofInternetofThingsThings研究報告中指出，20112011 年全球數(shù)據(jù)總量已達(dá)到 1.8ZB,1.8ZB,并將以每兩年翻一番的速度增長，到 20202020 年，全球數(shù)據(jù)量將達(dá)

5、到 40ZB,40ZB,均攤到每個人身上達(dá)到 5200GBW5200GBW 上。圖2-12014-2020年中國大數(shù)據(jù)市場規(guī)模及增速在“20172017 年世界電信和信息化社會日大會”上，工信部總工程師張峰指出，我國的數(shù)據(jù)總量正在以年均 50%50%勺速度持續(xù)增長，預(yù)計到 20202020 年，我國數(shù)據(jù)總量在全球占比將達(dá)到 21%21%美國市場研究公司 IDCIDC 發(fā)布的報告稱，全球大數(shù)據(jù)技術(shù)和服務(wù)市場將在未來幾年保持 31.7%31.7%的年復(fù)合增長率，20162016 年總規(guī)模達(dá)到 238238 億美元。（二）大數(shù)據(jù)產(chǎn)業(yè)應(yīng)用需求擴(kuò)張大數(shù)據(jù)產(chǎn)業(yè)應(yīng)用包括了政府/公共事業(yè)、物流零售、文化娛樂、

6、能源/制造、金融/保險、旅游、ITIT 互聯(lián)網(wǎng)電信等行業(yè)，可以看出大數(shù)據(jù)已經(jīng)受到廣泛的行業(yè)關(guān)注E3中國大融掘市場蚊模及0速（單惶：億元）70070060045,0%60045,0%2014201520162014201520162017E2D18E2019E2020E2017E2D18E2019E2020E市場搦模增速感艇來源:中國值息逢情研究院圖2-2大數(shù)據(jù)在中國的行業(yè)分布參與大數(shù)據(jù)調(diào)查的行業(yè)中，來自能源/ /制造行業(yè)的最多，比例達(dá) 44.9%,44.9%,其次是政府與公共事業(yè)部，比例為 17%17%第三則是金融與保險行業(yè)，為 10.3%10.3%。接下來，分別是物流零售（8.7%8.7%）

7、、文化娛樂（6.3%6.3%）、IT/IT/互聯(lián)網(wǎng)/ /電信（5.8%5.8%）、旅游（3.36%3.36%）。與數(shù)據(jù)規(guī)模的調(diào)查數(shù)據(jù)相對比，我們發(fā)現(xiàn) 50TB50TB 以上的數(shù)據(jù)容量主要分布在能源/ /制造（47.8%47.8%）、金融/ /保險（20.5%20.5%）與政府/ /公共事業(yè)（15.9%15.9%）。從各個行業(yè)對大數(shù)據(jù)調(diào)研的參與程度其實(shí)已經(jīng)可以反映出各行業(yè)對大數(shù)據(jù)的關(guān)注程度，能源/制造行業(yè)對于市場行情的數(shù)據(jù)更為敏感，歷史的商品行情對于未來的產(chǎn)品設(shè)計、風(fēng)險評估以及市場導(dǎo)向都有較強(qiáng)的參考意義。而隨著政府與公共事業(yè)的服務(wù)意識的強(qiáng)加與轉(zhuǎn)變， 以及更智慧的執(zhí)政與管理理念的帶動， 對于數(shù)據(jù)的

8、管理與分析的需求也在日益加強(qiáng)。在金融與保險行業(yè)，則是傳統(tǒng)的數(shù)據(jù)量大戶，而在新時代更好更快的發(fā)現(xiàn)客戶金融習(xí)慣，將是金融與保險行業(yè)未來競爭必須要做的事情。 其次， 物流零售的數(shù)據(jù)價值也在日益顯現(xiàn)，成為排名第四的參與調(diào)查的行業(yè)，而新興的，數(shù)據(jù)積累（尤其是非結(jié)構(gòu)化數(shù)據(jù)）歷史尚淺的文化娛樂、IT/IT/互聯(lián)網(wǎng)/ /電信行業(yè)則分列第五和第六?？磥泶髷?shù)據(jù)已經(jīng)成為眾多行業(yè)關(guān)注和探討的話題，其影響力已經(jīng)覆蓋了從傳統(tǒng)的制造行業(yè)到新型的文化娛樂、ITIT、互聯(lián)網(wǎng)行業(yè)。（三）人才供不應(yīng)求美國人才招聘市場的數(shù)據(jù)分析領(lǐng)先者 WANTEDAnalyticsWANTEDAnalytics 和 ForbesForbes 對來自

9、 150150 個國家的 1010 億個崗位信息進(jìn)行了統(tǒng)計，基于“數(shù)據(jù)分析”、“數(shù)據(jù)采集”、“數(shù)據(jù)挖掘”和“數(shù)據(jù)結(jié)構(gòu)”四項(xiàng)技能的大數(shù)據(jù)專業(yè)人才市場需求分析，在對過去 1212 個月美國就業(yè)市場“大數(shù)據(jù)”相關(guān)崗位的分析中發(fā)現(xiàn)：需要“大數(shù)據(jù)”技能的崗位空缺呈現(xiàn)高速增長。麥肯錫全球研究所（MGDMGD 和麥肯錫商業(yè)技術(shù)辦公室在對醫(yī)療、公共、零售、制造業(yè)和個人定位等五個領(lǐng)域內(nèi)詳細(xì)研究了大數(shù)據(jù)發(fā)展趨勢后發(fā)布的研究報告預(yù)測：由于大數(shù)據(jù)的引入，會造成信息分析人才的缺乏，預(yù)計到 20182018 年，僅美國就需要14141919 萬信息分析專業(yè)人才以及 150150 萬懂得大數(shù)據(jù)的管理人員和分析師。 大數(shù)據(jù)不

10、僅提高了產(chǎn)業(yè)價值，還能夠大幅度的拉動就業(yè)。隨著各大公司紛紛上馬大數(shù)據(jù)業(yè)務(wù)，對大數(shù)據(jù)人才的需要，市場上正處于十分旺盛的階段。據(jù) GartnerGartner 預(yù)測，全球?qū)⑿略?440440 萬個與大數(shù)據(jù)相關(guān)的工作崗位。大數(shù)據(jù)的發(fā)展也會催生出一些新職業(yè)如大數(shù)據(jù)分析師、首席數(shù)據(jù)官等，然而人才供給的缺乏正是大數(shù)據(jù)發(fā)展面臨的一個瓶頸。 目前企業(yè)發(fā)展大數(shù)據(jù)已步入初級階段， 不論是拓展大數(shù)據(jù)業(yè)務(wù)的百度、阿里、奇虎 360360 等互聯(lián)網(wǎng)公司，還是專業(yè)提供數(shù)據(jù)服務(wù)的大數(shù)據(jù)服務(wù)商， 對專業(yè)的大數(shù)據(jù)人才均有較高的需求量。 而今年，這一“人才荒”的情況正在愈演愈烈，從一定程度上說，人才匱乏已經(jīng)成為制約大數(shù)據(jù)應(yīng)用產(chǎn)業(yè)

11、發(fā)展的重要因素。（四）大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)系統(tǒng)化課程資源匱乏就目前來看，在互聯(lián)網(wǎng)上已經(jīng)擁有了較多的單體資源，例如 JavaJava 程序設(shè)計、MapReduceMapReduce 程序設(shè)計、HadoopHadoop 體系框架等課程資源非常豐富，但是缺少資源的系統(tǒng)性，很多學(xué)習(xí)者不知如何去養(yǎng)成職業(yè)崗位能力要求。從目前來看，建設(shè)一個大數(shù)據(jù)技術(shù)與應(yīng)用領(lǐng)域的優(yōu)質(zhì)資源庫，同時為學(xué)習(xí)者提出科學(xué)合理的學(xué)習(xí)建議，是非常有必要的。四、典型工作崗位及能力分析由于我國大數(shù)據(jù)產(chǎn)品正處于起步階段，市場對技能型、操作性的人才需求相對較高，從統(tǒng)計數(shù)據(jù)上看，大數(shù)據(jù)行業(yè)求職者學(xué)歷與招聘需求出現(xiàn)錯位，主要表現(xiàn)為大專的招聘需求高于求

12、職者占比，而碩士以上的需求則正好相反。目前，大數(shù)據(jù)相關(guān)工作按照專業(yè)范圍和工作特點(diǎn)大致可分為如下1 1）、數(shù)據(jù)處理類：該類職位要求對數(shù)據(jù)存儲方式和數(shù)據(jù)存儲結(jié)構(gòu)有一定的理解，了解數(shù)據(jù)的定義，并且可以通過多種采集方式獲取原始數(shù)據(jù)，按特定要求處理數(shù)據(jù)。該職位應(yīng)了解基本的統(tǒng)計學(xué)方法，能應(yīng)用統(tǒng)計學(xué)的工具，同時掌握大數(shù)據(jù)平臺的相關(guān)操作技術(shù)，能將數(shù)據(jù)處理方法通過大數(shù)據(jù)平臺實(shí)現(xiàn)。對于企業(yè)來講，這部分人群在工作中對專業(yè)的熟練程度要求也是非常高的，例如能熟練做出因子分析，聚類等基礎(chǔ)技術(shù)處理，包括類似的各類數(shù)據(jù)統(tǒng)計處理技術(shù)。完成業(yè)務(wù)中數(shù)據(jù)的前期預(yù)處理和處理基礎(chǔ)工作，提供高質(zhì)量的數(shù)據(jù)供數(shù)據(jù)分析和解讀。2 2）、大數(shù)據(jù)運(yùn)

13、維類：該類職位要求具備大規(guī)模服務(wù)器集群的運(yùn)維能力，同時具備大型數(shù)據(jù)庫運(yùn)維能力。服務(wù)器運(yùn)維包括維護(hù)并確保服務(wù)器的可用性，不斷優(yōu)化系統(tǒng)架構(gòu)、提升部署效率和優(yōu)化資源利用率等。數(shù)據(jù)庫運(yùn)維包括具備軟件安裝、配置優(yōu)化、數(shù)據(jù)恢復(fù)和遷移、數(shù)據(jù)庫故障排除、預(yù)防性巡檢等一系列能力。運(yùn)維工程師面對的最大挑戰(zhàn)是大規(guī)模服務(wù)器集群的管理問題， 如何管理好幾十萬臺服務(wù)器上的服務(wù)，同時保障服務(wù)的高可用性，是運(yùn)維工程師面臨的最大難題。因此，作為運(yùn)維類工作，特別是大數(shù)據(jù)級的運(yùn)維工作，職位要求應(yīng)該具備扎實(shí)的基礎(chǔ)知識。包括掌握如Java/PythonJava/Python 等至少 2 2 種編程語言、熟練掌握常用的算法并能靈活運(yùn)用、

14、熟悉網(wǎng)絡(luò)基礎(chǔ)知識、深入理解 LinuxLinux 操作系統(tǒng)等。同時，在大數(shù)據(jù)環(huán)境下，還應(yīng)該掌握熟悉分布式計算或者存儲系統(tǒng)。3 3）、大數(shù)據(jù)技術(shù)支持類：大數(shù)據(jù)技術(shù)支持類包括售前技術(shù)支持和售后技術(shù)支持。 售前技術(shù)支持能夠在大數(shù)據(jù)應(yīng)用系統(tǒng)實(shí)施前遇到無法解決的問題時提供技術(shù)支持；售后技術(shù)支持能夠在大數(shù)據(jù)應(yīng)用系統(tǒng)部署完成后，為客戶提供售后服務(wù)，幫助工程師診斷并解決大數(shù)據(jù)應(yīng)用系統(tǒng)使用過程中出現(xiàn)的問題。該類職位需要掌握大規(guī)模服務(wù)器集群知識，以及大數(shù)據(jù)相關(guān)基礎(chǔ)。具體包括掌握至少1 1 門編程語言、掌握 LinuxLinux 操作系統(tǒng)、掌握分布式計算和存儲系統(tǒng)等。同時技術(shù)支持需要面對客戶，應(yīng)具備一定的溝通和團(tuán)隊(duì)

15、協(xié)作能力。校企專家通過對上述典型工作崗位的能力要求分析研討， 形成大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)崗位職業(yè)能力分析表。表3-4大數(shù)據(jù)技術(shù)與應(yīng)用主要工作任務(wù)描述典型工 作任務(wù)能力要求知識要求技能要求課程大數(shù)據(jù)平臺運(yùn)維通 過 系 統(tǒng) 監(jiān)控、集群配置等技術(shù)手段，保證大數(shù)據(jù)平臺能夠長期穩(wěn)定的支撐企業(yè)大數(shù)據(jù)業(yè)務(wù)的工作能力1、掌握計算機(jī)基礎(chǔ)知識；2、掌握網(wǎng)絡(luò)基礎(chǔ)知識、中小型局域網(wǎng)組建和運(yùn)維技術(shù)；3、 掌握服務(wù)器及存儲基礎(chǔ)知識，4、掌握主流操作系統(tǒng)（如Linux、Windows5、 掌握主流數(shù)據(jù)庫基礎(chǔ)技術(shù)（如oracle、MySQLNoSql等）6、掌握腳本編寫方法（如shell、Python等）1、 能夠配置和管理網(wǎng)

16、絡(luò)設(shè)備，完成網(wǎng)絡(luò)搭建2、 能夠配置和管理服務(wù)器和存儲，完成相關(guān)設(shè)備的維護(hù)3、 能夠完成操作系統(tǒng)的安裝和配置4、 能夠完成大數(shù)據(jù)平臺的日常維護(hù)數(shù)據(jù)處理技術(shù)（Python） 數(shù)據(jù)庫基礎(chǔ)Linux操作系統(tǒng)大數(shù)據(jù)概論網(wǎng)絡(luò)技術(shù)大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理Hadoop綜合實(shí)訓(xùn)云計算與虛擬化Spark綜合7、掌握Hadoop/Spark相關(guān)組件的基礎(chǔ)理論知識及運(yùn)維工具的使用；8、掌握HDFSHbasehiveyarn等組件的基本操作5、能夠使用工具完成大數(shù)據(jù)平臺的軟硬件平臺運(yùn)行狀態(tài)監(jiān)控6、能夠完成大數(shù)據(jù)平臺的故障應(yīng)急處理實(shí)訓(xùn)數(shù)據(jù)預(yù)處理通 過 數(shù) 據(jù) 抽取、整理、傳輸、加載、校驗(yàn) 等 技 術(shù) 手段，結(jié)合工具，

17、保證局效的為人數(shù)據(jù)分析提供高質(zhì)量的數(shù)據(jù)資源的工作能力1、掌握計算機(jī)基礎(chǔ)知識；2、 掌握主流數(shù)據(jù)庫基礎(chǔ)技術(shù)（如Oracle、MySQLNoSql等）3、掌握shell腳本編程，熟悉Java、Python4#發(fā)語百4、掌握Hadoop/Spark相關(guān)組件的基礎(chǔ)理論知識及運(yùn)維工具的使用；1、能夠使用工具從數(shù)據(jù)源抽取所需數(shù)據(jù)2、能夠使用工具對數(shù)據(jù)進(jìn)行指定操作，如轉(zhuǎn)換、清洗、校驗(yàn)等3、能夠使用工具完成數(shù)據(jù)加載，如傳輸、建庫、校驗(yàn)等4、具備分布式ETL過程調(diào)優(yōu)能力應(yīng)用程序開發(fā)基礎(chǔ)（Java）數(shù)據(jù)處理技術(shù)（Python） 數(shù)據(jù)庫基礎(chǔ)Hadoop綜合實(shí)訓(xùn)Spark綜合實(shí)訓(xùn)爬蟲技術(shù)實(shí)訓(xùn)云計算與虛擬化概率論與數(shù)理

18、統(tǒng)計數(shù)據(jù)清洗大數(shù)據(jù)平臺部署通過綜合運(yùn)用服務(wù)器、交換機(jī)、存儲、虛擬化、云計算、大數(shù)據(jù)等基礎(chǔ)知識，保證快速、局效的完成大數(shù)據(jù)平臺環(huán)境等搭建和部署的工作能力1、掌握計算機(jī)基礎(chǔ)知識；2、掌握網(wǎng)絡(luò)基礎(chǔ)知識、中小型局域網(wǎng)組建和運(yùn)維技術(shù)；3、 掌握服務(wù)器及存儲基礎(chǔ)知識，4、掌握主流操作系統(tǒng)（如Linux、Windows5、 掌握主流數(shù)據(jù)庫基礎(chǔ)技術(shù)（如Oracle、MySQLNoSql等）6、 了解大數(shù)據(jù)基礎(chǔ)知識和基本框架1、能夠配置和管理網(wǎng)絡(luò)設(shè)備，完成網(wǎng)絡(luò)搭建2、能夠配置和管理服務(wù)器和存儲，完成相關(guān)設(shè)備的維護(hù)3、能夠完成操作系統(tǒng)的安裝和配置4、能夠完成大數(shù)據(jù)平臺的搭建、測試及調(diào)優(yōu)數(shù)據(jù)庫基礎(chǔ)Linux操作系統(tǒng)

19、大數(shù)據(jù)概論網(wǎng)絡(luò)技術(shù)大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理大數(shù)據(jù)測試Hadoop綜合實(shí)訓(xùn)Spark綜合實(shí)訓(xùn)云計算與虛擬化可視化設(shè)計與開發(fā)通過數(shù)據(jù)可視化報表技術(shù)、商業(yè)智能報表工具、 常用Web開發(fā)框架以及程序開發(fā)語百，能夠進(jìn)行可視化應(yīng)用的設(shè)計、開發(fā)與展示，直觀的為客戶呈現(xiàn)大數(shù)據(jù)的價值1、掌握主流操作系統(tǒng)（如Linux、Windows2、掌握數(shù)據(jù)可視化報表技術(shù)，如Echarts、Highcharts等3、 掌握商業(yè)智能報表工具的設(shè)計和使用4、 掌握WebFF發(fā)框架和程序開發(fā)語言，如PHPJava、HTML5CSSJavaScript等5、掌握數(shù)據(jù)庫相關(guān)知識1、能夠使用Web開發(fā)框架進(jìn)行可視化應(yīng)用開發(fā)2、能夠根

20、據(jù)行業(yè)領(lǐng)域需求進(jìn)行口視化設(shè)計3、能夠使用BI工具進(jìn)行商業(yè)智能報表設(shè)計、開發(fā)與展示應(yīng)用程序開發(fā)基礎(chǔ)（Java）數(shù)據(jù)處理技術(shù)（Python） 數(shù)據(jù)庫基礎(chǔ)大數(shù)據(jù)概論數(shù)據(jù)結(jié)構(gòu)與算法軟件工程Web開發(fā)技術(shù)大數(shù)據(jù)可視化技術(shù)大數(shù)據(jù)分析流式計算技術(shù)實(shí)訓(xùn)大數(shù)據(jù)測試技術(shù)概率論與數(shù)理統(tǒng)計大數(shù)據(jù)后臺應(yīng)用開發(fā)實(shí)戰(zhàn)OLAP數(shù)據(jù)分析實(shí)戰(zhàn)大數(shù)據(jù)倉庫與數(shù)據(jù)挖掘大數(shù)據(jù)應(yīng)用開發(fā)通過對人數(shù)據(jù)進(jìn)行分析處理、結(jié)合軟件開發(fā)流程，按照業(yè)務(wù)需求完成大數(shù)據(jù)應(yīng)用開發(fā)的相關(guān)軟件設(shè)計與實(shí)現(xiàn)的工作能力1、 掌握軟件工程和軟件開發(fā)基礎(chǔ)知識2、 掌握數(shù)據(jù)庫開發(fā)基礎(chǔ)知識3、了解大數(shù)據(jù)開發(fā)平臺4、掌握開發(fā)環(huán)境的設(shè)置5、掌握HDFSC件存儲操作6、WMapRed

21、uce/Spark編程7、 了解專業(yè)領(lǐng)域的數(shù)據(jù)分析方法1、能夠搭建好大數(shù)據(jù)程序開發(fā)的環(huán)境2、能夠根據(jù)用戶需求利用開發(fā)語言進(jìn)行大數(shù)據(jù)分析和預(yù)處理3、能夠進(jìn)行大數(shù)據(jù)應(yīng)用程序開發(fā)4、能夠完成功能性測試應(yīng)用程序開發(fā)基礎(chǔ)（Java）數(shù)據(jù)處理技術(shù)（Python） 數(shù)據(jù)庫基礎(chǔ)大數(shù)據(jù)概論數(shù)據(jù)結(jié)構(gòu)與算法軟件工程Web開發(fā)技術(shù)大數(shù)據(jù)可視化技術(shù)大數(shù)據(jù)分析流式計算技術(shù)實(shí)訓(xùn)大數(shù)據(jù)測試技術(shù)概率論與數(shù)理統(tǒng)計大數(shù)據(jù)后臺應(yīng)用開發(fā)實(shí)戰(zhàn)OLAP數(shù)據(jù)分析實(shí)戰(zhàn)大數(shù)據(jù)倉庫與數(shù)據(jù)挖掘大數(shù)據(jù)售后技術(shù)支持具備綜合型的人數(shù)據(jù)相關(guān)基礎(chǔ)知識，快速故障分析AE位、基本日志閱讀理解的能力，結(jié)合項(xiàng)目文檔，對人數(shù)據(jù)平臺完成故障排查，采取相應(yīng)措施，保障大數(shù)據(jù)

22、平臺穩(wěn)定局效運(yùn)行1、掌握計算機(jī)基礎(chǔ)知識；2、掌握網(wǎng)絡(luò)基礎(chǔ)知識、中小型局域網(wǎng)組建和運(yùn)維技術(shù)；3、 掌握服務(wù)器及存儲基礎(chǔ)知識，4、了解主流操作系統(tǒng)（如Linux、Windows5、 了解主流數(shù)據(jù)庫基礎(chǔ)技術(shù)（如Oracle、MySQLNoSql等）6、掌握Hadoop/Spark相關(guān)組件的基礎(chǔ)理論知識及運(yùn)維工具的使用；7、了解大數(shù)據(jù)基礎(chǔ)知識和基本框架8、 項(xiàng)目實(shí)施文檔撰寫和項(xiàng)目管理知識1、能夠熟練使用HadoopSaprk等大數(shù)據(jù)組件和模塊的功能2、可以根據(jù)大數(shù)據(jù)常見組件安裝部署手冊進(jìn)行系統(tǒng)部署并解決安裝部署中的基礎(chǔ)問題；3、能夠根據(jù)項(xiàng)目售前技術(shù)方案與客戶溝通業(yè)務(wù)具體需求，撰寫項(xiàng)目實(shí)施方案和測試方不

23、；4、具有項(xiàng)目整體管理能力，能夠進(jìn)行項(xiàng)目整體規(guī)戈U、 執(zhí)行、風(fēng)險管理、項(xiàng)目驗(yàn)收等項(xiàng)目管理相關(guān)工作，熟練使用常見項(xiàng)目管理工具如project等；5、了解網(wǎng)絡(luò)的交換技術(shù)、路由技術(shù)以及出口技術(shù)等，可以完成中小型網(wǎng)絡(luò)的規(guī)劃與設(shè)計；6、能夠熟練使用Linux、Windows等常見操作系統(tǒng)7、 能夠使用Oracle、SqlServer、MySQLNoSQ邙主流數(shù)據(jù)庫數(shù)據(jù)處理技術(shù)（Python） 數(shù)據(jù)庫基礎(chǔ)Linux操作系統(tǒng)大數(shù)據(jù)概論網(wǎng)絡(luò)技術(shù)大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理Hadoop綜合實(shí)訓(xùn)云計算與虛擬化Spark綜合實(shí)訓(xùn)大數(shù)據(jù)文檔編寫參 匕 產(chǎn) 品 開發(fā)項(xiàng)目運(yùn)行全過程中，綜合運(yùn)用大數(shù)據(jù)相 關(guān) 技 術(shù) 知識，

24、按照正確格式和行業(yè)要求，完成大數(shù)據(jù)產(chǎn)品和相關(guān)項(xiàng)目文檔編寫的綜合職業(yè)能力1、掌握計算機(jī)基礎(chǔ)知識；2、掌握網(wǎng)絡(luò)基礎(chǔ)知識、中小型局域網(wǎng)組建和運(yùn)維技術(shù)；3、 掌握服務(wù)器及存儲基礎(chǔ)知識4、掌握主流操作系統(tǒng)（如Linux、Windows5、 掌握主流數(shù)據(jù)庫基礎(chǔ)技術(shù)（如Oracle、MySQLNoSql等）6、掌握腳本編寫方法（如shell、Python等）7、掌握Hadoop/Spark相關(guān)組件的基礎(chǔ)理論知識及運(yùn)維工具的使用；8、 掌握HDFSHbasaHive、Yarn等組件的基本操作能夠按照正確格式和行業(yè)要求書寫文檔數(shù)據(jù)處理技術(shù)（Python） 數(shù)據(jù)庫基礎(chǔ)大數(shù)據(jù)概論軟件工程大數(shù)據(jù)測試技術(shù)概率論與數(shù)理統(tǒng)

25、計通過大數(shù)據(jù)1、掌握主流操作系統(tǒng)，如Linux、Windows2、掌握主流數(shù)據(jù)庫基礎(chǔ)1、能夠完成測試文檔編寫（如測試用例、測試報土分、口寸）2、能夠完成測試腳本編寫，協(xié)助開發(fā)人員或系統(tǒng)維護(hù)人員完成bug修復(fù)與調(diào)優(yōu)3、 能夠使用自動化測試工具完成大數(shù)據(jù)系統(tǒng)相關(guān)測試工作應(yīng)用程序開發(fā)基礎(chǔ)大數(shù)據(jù)系統(tǒng)測試測試工具，實(shí)現(xiàn)對大數(shù)據(jù)應(yīng)用的功能、性能和可靠性的測試，輸出測試文檔，輔助分析并反饋測試結(jié)果技術(shù)，如Oracle、Mysql、Nosql等3、掌握測試腳本編寫方法，如shell、Python等4、掌握Hadoop/Spark相關(guān)組件的基礎(chǔ)理論知識5、掌握大數(shù)據(jù)相關(guān)測試力殺及流程6、熟悉自動化測試工具的使用

26、，如bigtop、hibench等（Java）數(shù)據(jù)處理技術(shù)（Python） 數(shù)據(jù)庫基礎(chǔ)大數(shù)據(jù)概論軟件工程大數(shù)據(jù)測試技術(shù)概率論與數(shù)理統(tǒng)計大通過數(shù)據(jù)安、掌握數(shù)據(jù)安全理論知1、能夠?qū)?shù)據(jù)進(jìn)應(yīng)用程序開數(shù)全相關(guān)技術(shù)識行細(xì)?；跈?quán)管發(fā)基礎(chǔ)據(jù)安手段和策略，保證大y/2、掌握主流操作系統(tǒng)和理與配置2、能夠熟練管理（Java）大數(shù)據(jù)概論全數(shù)據(jù)合理化系統(tǒng)安全保證技能，如系統(tǒng)認(rèn)證網(wǎng)絡(luò)技術(shù)管控的安全管理，避免惡意入侵、偽裝盜取和內(nèi)部越權(quán)訪問等行為造成任何數(shù)據(jù)損失，全方位保護(hù)大數(shù)據(jù)的安全Linux、Windows3、掌握HDFSHBaseYarnHive等人數(shù)據(jù)相關(guān)組件的基本操作4、掌握大數(shù)據(jù)安全功能使用，如數(shù)據(jù)授權(quán)、

27、安全策略制定、務(wù)-認(rèn)證功能、數(shù)據(jù)加密、數(shù)據(jù)審計等kerberos組件和通過LDAPAD對用戶進(jìn)行土認(rèn)證管理3、能夠?qū)Υ髷?shù)據(jù)系統(tǒng)進(jìn)行審計管理4、能夠?qū)DFS數(shù)據(jù)、元數(shù)據(jù)和其他敏感數(shù)據(jù)進(jìn)行加密操作5、能夠制定和實(shí)施大數(shù)據(jù)安全策略大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理大數(shù)據(jù)測試Hadoop綜合實(shí)訓(xùn)Spark綜合實(shí)訓(xùn)云計算與虛擬化五、調(diào)研總結(jié)綜上所述，市場對大數(shù)據(jù)人才的需求量日益加大，但是高校的專業(yè)培養(yǎng)卻供不應(yīng)求。為了適應(yīng)大數(shù)據(jù)產(chǎn)業(yè)的快速發(fā)展，20162016 年 9 9 月，教育部向普通高等學(xué)校、高等職業(yè)教育（?？疲I(yè)目錄增補(bǔ) 1313 個專業(yè)，其中就包括大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)，正式批準(zhǔn)“高職”大數(shù)據(jù)技術(shù)與

28、應(yīng)用專業(yè)作為普通高等學(xué)校高等職業(yè)教育（專科）專業(yè)目錄 20162016 年增補(bǔ)專業(yè)（專業(yè)代碼：610215610215）。經(jīng)過一輪探索后，國家開始加大力度，擴(kuò)大面積，積極尋找和催生大數(shù)據(jù)專業(yè)人才的培養(yǎng)方式來填補(bǔ)大量人才缺口，但仍不滿足需求。各大高職院校的大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)均處于起步階段，人才培養(yǎng)課程體系不夠完善，教學(xué)科研資源匱乏，專業(yè)師資力量不足。因此，建設(shè)大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)教學(xué)資源庫勢在必行。附件 1:1:關(guān)于大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)人才培養(yǎng)方案的調(diào)查問卷（院校版）尊敬的學(xué)校領(lǐng)導(dǎo)/老師：您好！我們現(xiàn)正在進(jìn)行高職學(xué)校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)教育教學(xué)情況的問卷調(diào)研，目的是要通過調(diào)研掌握大數(shù)據(jù)技術(shù)與應(yīng)

29、用專業(yè)人才培養(yǎng)的情況，用以指導(dǎo)今后工作，耽擱您一些時間請您填寫我們的問卷，希望了解您對這些問題的一些看法和評價。謝謝！學(xué)校名稱：學(xué)校聯(lián)系電話：一、大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)相關(guān)情況1 .貴校在開辦軟彳科支術(shù)專業(yè)/專業(yè)群的過程中遇到過哪些困難？（）（可多選），其中最大的困難是（）（單選）A.招生困難；B.實(shí)踐環(huán)節(jié)難以開展；C.學(xué)生就業(yè)困難；D.經(jīng)費(fèi)不足；E.沒有困難；F.其它（請注明）；2 .貴校軟件專業(yè)/專業(yè)群學(xué)生學(xué)習(xí)的積極性表現(xiàn)為（）A.非常積極；B.比較積極；C.一般；D.不愿學(xué)習(xí)；3 .貴校軟件專業(yè)/專業(yè)群學(xué)生對未來的就業(yè)前景的認(rèn)識是（）A.非常好；B.比較好；C.一般；D.不理想；4 .貴校

30、認(rèn)為在大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)人才培養(yǎng)模式中應(yīng)重點(diǎn)關(guān)注學(xué)生（）A.當(dāng)前就業(yè)；B.升學(xué)；C.兼顧就業(yè)和升學(xué)；D.中高職銜接班；E.多崗遷移就業(yè)；F.職業(yè)發(fā)展。5 .貴校在校企合作方面學(xué)生頂崗實(shí)習(xí)一般如何安排。A.校方安排；B.企業(yè)安排；C.學(xué)生自主選擇；D.其他。6 .貴校在校企合作方面學(xué)生頂崗實(shí)習(xí)一般如何安排在什么時間。A.第五學(xué)期；B.第六學(xué)期；C.根據(jù)學(xué)校需要安排；D.根據(jù)企業(yè)需要安排。5.貴校認(rèn)為大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)學(xué)生畢業(yè)后主要從事的崗位有（）（可多選，請在下表相應(yīng)位置打，）大數(shù)據(jù)大數(shù)據(jù)大數(shù)據(jù)云計算大數(shù)據(jù)大數(shù)據(jù)媒體數(shù)據(jù)數(shù)據(jù)測數(shù)據(jù)安苴運(yùn)維師處理工開發(fā)工運(yùn)維工廣告銷營銷工程師處理試工程全控制他

31、崗位程師程師程師售員師員二、大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)學(xué)生能力具備的職業(yè)能力請您對表格中所列能力項(xiàng)對大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)學(xué)生未來發(fā)展的重要程度作出評判，在相應(yīng)的內(nèi)容處打y序號類別能力項(xiàng)（請寫出您認(rèn)為的）非常重要比較重要/、重要1職業(yè)能力2專業(yè)能力大數(shù)據(jù)運(yùn)維師3大數(shù)據(jù)處理工程師序號類別能力項(xiàng)（請寫出您認(rèn)為的）非常重要比較重要/、重要4大數(shù)據(jù)開發(fā)工程師5云計算運(yùn)維工程師6大數(shù)據(jù)廣告銷售7數(shù)據(jù)處理員8數(shù)據(jù)測試工程師9其他能力（請說明）三、大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)課程以下是大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)的專業(yè)課，請您對其重要程度作出評判；此外，以下課程貴校是否都有開設(shè)，請在開設(shè)的課程后打未開設(shè)的課程可不做重要程度評判。序

32、號課程非常重要比較重要/、重要貴校是否已開設(shè)1Java程序設(shè)計2Linux操作系統(tǒng)3網(wǎng)絡(luò)與云計算基礎(chǔ)4數(shù)據(jù)庫基礎(chǔ)5大數(shù)據(jù)導(dǎo)論6Hadoop平臺配置實(shí)訓(xùn)7數(shù)據(jù)建模8數(shù)據(jù)分析9項(xiàng)目管理文檔編制技巧10可視化表達(dá)工具11Python程序設(shè)計12數(shù)據(jù)挖掘基礎(chǔ)13算法設(shè)計基礎(chǔ)14互聯(lián)網(wǎng)+創(chuàng)新創(chuàng)業(yè)案例分析15數(shù)據(jù)清洗除以上課程外，貴校還另外開設(shè)了或者您認(rèn)為還需要開設(shè)哪些專業(yè)課，主要作用（目的）為何？其它專業(yè)課主要作用（目的）123四、大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師對教學(xué)資源的獲取情況1.貴校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群建設(shè)和教學(xué)過程中，最希望得到哪些硬件教學(xué)資源？（）A.專業(yè)實(shí)訓(xùn)設(shè)備；B.圖書資料；C參

33、考文獻(xiàn)；D.場地。2 .貴校軟件技術(shù)應(yīng)用專業(yè)及專業(yè)群教師希望獲取哪些基本教學(xué)資源（）A.教材；B.電子教案；C.題庫；D.學(xué)生實(shí)訓(xùn)手冊；E.教學(xué)大綱；F.其他。3 .貴校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師想獲取哪些輔助教學(xué)資源（）A.教學(xué)軟件；B.視頻；C.案例；D.動畫；E.微課件；F.其他。五、大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師在自身提高方面的情況1 .貴校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教學(xué)中的最大困難是什么？（）A教學(xué)資源不足B缺少指導(dǎo)教師C學(xué)生學(xué)習(xí)興趣不足D其它2 .目前大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師提高自身專業(yè)水平的途徑主要（）A.學(xué)歷教育深造;D.參與企業(yè)實(shí)踐;G.各類資格考試;B.自

34、發(fā)科研活動；E.學(xué)校組織科研活動；H.國內(nèi)外校際訪問交流;C.參加學(xué)術(shù)會議；F.參加培訓(xùn)班；I.到企業(yè)掛職。）C.參加學(xué)術(shù)會議；F.參加培訓(xùn)班；I.到企業(yè)掛職。）D.專業(yè)技能。3.將來貴校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師應(yīng)如何提高自身專業(yè)水平（A.學(xué)歷教育深造;D.參與企業(yè)實(shí)踐;G.各類資格考試;B.自發(fā)科研活動；E.學(xué)校組織科研活動；H.國內(nèi)外校際訪問交流;4.目前貴校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師認(rèn)為最需提高自己的是（B.專業(yè)知識；C.職稱；A.教學(xué)方法；六、以下是貴校教學(xué)模式方面的情況，請?zhí)顚憽?、目前貴校在教學(xué)中，是否使用過以下的教學(xué)方法:：（單選）(1)演示法經(jīng)常用口B偶爾用口沒用

35、過口(2)講授法經(jīng)常用口B偶爾用口沒用過口(3)任務(wù)驅(qū)動教學(xué)法經(jīng)常用口B偶爾用口沒用過口(4)多媒體教學(xué)法經(jīng)常用口B偶爾用口沒用過口(5)實(shí)訓(xùn)操作教學(xué)法經(jīng)常用口B偶爾用口沒用過口(6)啟發(fā)式教學(xué)法經(jīng)常用口B偶爾用口沒用過口(7)案例教學(xué)法經(jīng)常用口B偶爾用口沒用過口(8)項(xiàng)目教學(xué)法經(jīng)常用口B偶爾用口沒用過口(9)情境教學(xué)法經(jīng)常用口B偶爾用口沒用過口(10）自學(xué)輔導(dǎo)法經(jīng)常用口B偶爾用口沒用過口2、從各類教學(xué)方法的課堂效果來看，哪種教學(xué)方法較受學(xué)生歡迎：（ :最多選五項(xiàng)）演示法口實(shí)訓(xùn)操作教學(xué)法口項(xiàng)目教學(xué)法口多媒體教學(xué)法口情境教學(xué)法講授法口任務(wù)驅(qū)動教學(xué)法口案例教學(xué)法口啟發(fā)式教學(xué)法口自學(xué)輔導(dǎo)法3 .貴校

36、軟件技術(shù)專業(yè)老師是否嘗試運(yùn)用新型教學(xué)模式：（單選）一直在嘗試摸索（嘗試的是教學(xué)模式）口；公開課時有所嘗試口已有構(gòu)思，暫未實(shí)施口；未考慮過口4.貴校教學(xué)模式對學(xué)生學(xué)習(xí)效果如何（）（單選）（1）對專業(yè)知識很有效口；較有效口；一般口；效果較小口；無效果口（2）對專業(yè)技能很有效口；較有效口；一般口；效果較小口；無效果口（3）對職業(yè)道德很有效口；較有效口；一般口；效果較小口；無效果口（4）對綜合能力很有效口；較有效口；一般口；效果較小口；無效果口七、以下是貴校評價模式方面的情況，請?zhí)顚憽?、目前貴校軟件技術(shù)專業(yè)教育教學(xué)主要采用的評價方式有哪些（）（最多選五項(xiàng)）紙筆考試或考查口；德育考核口；作業(yè)、作品實(shí)踐考核口；觀察記錄口；課堂表現(xiàn)口；實(shí)訓(xùn)考試或考查口；檔案袋評價口；企業(yè)對學(xué)生實(shí)習(xí)的反饋口；其他2、貴校目前的評價模式能否激發(fā)學(xué)生的學(xué)習(xí)激情和動力（）（單選）總是口；經(jīng)?？冢灰话憧?；極少口；不能口3、你認(rèn)為有效的評價模式對促進(jìn)學(xué)生專業(yè)學(xué)習(xí)的效果如何（）（單選）非常有用口；比較有用口；一般口；不太有用口；沒有用口。4、在軟件技術(shù)專業(yè)教育教