大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)建設(shè)

大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)建設(shè)調(diào)研報告自黨的十八大以來，我國提出了實施國家大數(shù)據(jù)戰(zhàn)略的重大決策。國務(wù)院和相關(guān)部門先后印發(fā)了《促進大數(shù)據(jù)發(fā)展行動綱要》、《大數(shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)劃（2016～2020年）》等指導(dǎo)性文件。各部門、各地方高度重視，據(jù)不完全統(tǒng)計，我國已有20多個省級地方和10余個部委出臺了本地區(qū)、本行業(yè)大數(shù)據(jù)發(fā)展規(guī)劃，我國大數(shù)據(jù)發(fā)展已經(jīng)正式駛?cè)肟燔嚨馈?015年9月5日經(jīng)李克強總理簽批，國務(wù)院印發(fā)《促進大數(shù)據(jù)發(fā)展行動綱要》（以下簡稱《綱要》），系統(tǒng)指導(dǎo)我國大數(shù)據(jù)發(fā)展的國家頂層設(shè)計和總體部署大數(shù)據(jù)發(fā)展工作?！毒V要》提出從政府大數(shù)據(jù)、新興產(chǎn)業(yè)大數(shù)據(jù)、安全保障體系三個方面著手推進大數(shù)據(jù)領(lǐng)域十大工程建設(shè)，將我國大數(shù)據(jù)發(fā)展推向了另一個制高點。職業(yè)教育服務(wù)經(jīng)濟與社會發(fā)展，必須緊跟產(chǎn)業(yè)發(fā)展步伐，隨著經(jīng)濟增長方式轉(zhuǎn)變而“動”，跟著產(chǎn)業(yè)結(jié)構(gòu)調(diào)整升級而“走”，圍著企業(yè)技能型人才需求而“轉(zhuǎn)”，適應(yīng)市場的需求而“變”。在大數(shù)據(jù)技術(shù)飛速發(fā)展的今天，職業(yè)教育必須緊跟大數(shù)據(jù)產(chǎn)業(yè)發(fā)展步伐。為了更好地了解相關(guān)行業(yè)企業(yè)對大數(shù)據(jù)人才的需求，促進大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)教學及專業(yè)建設(shè)，大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)教學資源庫建設(shè)團隊在國內(nèi)外針對大數(shù)據(jù)在行業(yè)企業(yè)的需求開展了調(diào)研。一、調(diào)研目的1、了解大數(shù)據(jù)行業(yè)企業(yè)對大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)人才的需求傾向、人才需求規(guī)格預(yù)測、就業(yè)預(yù)測、人才的市場定位等；2、了解大數(shù)據(jù)行業(yè)企業(yè)對大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)人才培養(yǎng)模式、培養(yǎng)目標的意見，以及對專業(yè)知識、崗位分工、職業(yè)技能等的要求；3、了解往屆相關(guān)專業(yè)畢業(yè)生在工作單位的表現(xiàn)及用人單位對往屆畢業(yè)生的工作、崗位能力評價；4、與相關(guān)企業(yè)建立校企合作模式，促進教學與社會實踐的聯(lián)系，為大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)教學資源庫的專業(yè)建設(shè)、課程體系建設(shè)及培養(yǎng)模式尋找更完善的發(fā)展方向。二、調(diào)研方式問卷調(diào)查：印制問卷涵寄或面交，請企業(yè)相關(guān)人員作答。實地調(diào)研：教師到企業(yè)和用人單位實地調(diào)研。座談?wù){(diào)研：邀請用人單位的技術(shù)人員、管理人員到系里開展座談交流。網(wǎng)上調(diào)查：到網(wǎng)上搜索有關(guān)人才需求、課程設(shè)計、教學計劃等信息。三、國內(nèi)外大數(shù)據(jù)發(fā)展現(xiàn)狀（一）大數(shù)據(jù)產(chǎn)業(yè)呈現(xiàn)爆炸式增長由IDC和EMC聯(lián)合發(fā)布的《TheDigitalUniverseofOpportunities:RichDataandtheIncreasingValueofInternetofThings》研究報告中指出，2011年全球數(shù)據(jù)總量已達到1.8ZB，并將以每兩年翻一番的速度增長，到2020年，全球數(shù)據(jù)量將達到40ZB，均攤到每個人身上達到5200GB以上。圖2-12014-2020年中國大數(shù)據(jù)市場規(guī)模及增速在“2017年世界電信和信息化社會日大會”上，工信部總工程師張峰指出，我國的數(shù)據(jù)總量正在以年均50%的速度持續(xù)增長，預(yù)計到2020年，我國數(shù)據(jù)總量在全球占比將達到21%。美國市場研究公司IDC發(fā)布的報告稱，全球大數(shù)據(jù)技術(shù)和服務(wù)市場將在未來幾年保持31.7%的年復(fù)合增長率，2016年總規(guī)模達到238億美元。（二）大數(shù)據(jù)產(chǎn)業(yè)應(yīng)用需求擴張大數(shù)據(jù)產(chǎn)業(yè)應(yīng)用包括了政府/公共事業(yè)、物流零售、文化娛樂、能源/制造、金融/保險、旅游、IT互聯(lián)網(wǎng)電信等行業(yè)，可以看出大數(shù)據(jù)已經(jīng)受到廣泛的行業(yè)關(guān)注。圖2-2大數(shù)據(jù)在中國的行業(yè)分布參與大數(shù)據(jù)調(diào)查的行業(yè)中，來自能源/制造行業(yè)的最多，比例達44.9%，其次是政府與公共事業(yè)部，比例為17%，第三則是金融與保險行業(yè)，為10.3%。接下來，分別是物流零售（8.7%）、文化娛樂（6.3%）、IT/互聯(lián)網(wǎng)/電信（5.8%）、旅游（3.36%）。與數(shù)據(jù)規(guī)模的調(diào)查數(shù)據(jù)相對比，我們發(fā)現(xiàn)50TB以上的數(shù)據(jù)容量主要分布在能源/制造（47.8%）、金融/保險（20.5%）與政府/公共事業(yè)（15.9%）。從各個行業(yè)對大數(shù)據(jù)調(diào)研的參與程度其實已經(jīng)可以反映出各行業(yè)對大數(shù)據(jù)的關(guān)注程度，能源/制造行業(yè)對于市場行情的數(shù)據(jù)更為敏感，歷史的商品行情對于未來的產(chǎn)品設(shè)計、風險評估以及市場導(dǎo)向都有較強的參考意義。而隨著政府與公共事業(yè)的服務(wù)意識的強加與轉(zhuǎn)變，以及更智慧的執(zhí)政與管理理念的帶動，對于數(shù)據(jù)的管理與分析的需求也在日益加強。在金融與保險行業(yè)，則是傳統(tǒng)的數(shù)據(jù)量大戶，而在新時代更好更快的發(fā)現(xiàn)客戶金融習慣，將是金融與保險行業(yè)未來競爭必須要做的事情。其次，物流零售的數(shù)據(jù)價值也在日益顯現(xiàn)，成為排名第四的參與調(diào)查的行業(yè)，而新興的，數(shù)據(jù)積累（尤其是非結(jié)構(gòu)化數(shù)據(jù)）歷史尚淺的文化娛樂、IT/互聯(lián)網(wǎng)/電信行業(yè)則分列第五和第六?？磥泶髷?shù)據(jù)已經(jīng)成為眾多行業(yè)關(guān)注和探討的話題，其影響力已經(jīng)覆蓋了從傳統(tǒng)的制造行業(yè)到新型的文化娛樂、IT、互聯(lián)網(wǎng)行業(yè)。（三）人才供不應(yīng)求美國人才招聘市場的數(shù)據(jù)分析領(lǐng)先者WANTEDAnalytics和Forbes對來自150個國家的10億個崗位信息進行了統(tǒng)計，基于“數(shù)據(jù)分析”、“數(shù)據(jù)采集”、“數(shù)據(jù)挖掘”和“數(shù)據(jù)結(jié)構(gòu)”四項技能的大數(shù)據(jù)專業(yè)人才市場需求分析，在對過去12個月美國就業(yè)市場“大數(shù)據(jù)”相關(guān)崗位的分析中發(fā)現(xiàn)：需要“大數(shù)據(jù)”技能的崗位空缺呈現(xiàn)高速增長。麥肯錫全球研究所（MGI）和麥肯錫商業(yè)技術(shù)辦公室在對醫(yī)療、公共、零售、制造業(yè)和個人定位等五個領(lǐng)域內(nèi)詳細研究了大數(shù)據(jù)發(fā)展趨勢后發(fā)布的研究報告預(yù)測：由于大數(shù)據(jù)的引入，會造成信息分析人才的缺乏，預(yù)計到2018年，僅美國就需要14～19萬信息分析專業(yè)人才以及150萬懂得大數(shù)據(jù)的管理人員和分析師。大數(shù)據(jù)不僅提高了產(chǎn)業(yè)價值，還能夠大幅度的拉動就業(yè)。隨著各大公司紛紛上馬大數(shù)據(jù)業(yè)務(wù)，對大數(shù)據(jù)人才的需要，市場上正處于十分旺盛的階段。據(jù)Gartner預(yù)測，全球?qū)⑿略?40萬個與大數(shù)據(jù)相關(guān)的工作崗位。大數(shù)據(jù)的發(fā)展也會催生出一些新職業(yè)如大數(shù)據(jù)分析師、首席數(shù)據(jù)官等，然而人才供給的缺乏正是大數(shù)據(jù)發(fā)展面臨的一個瓶頸。目前企業(yè)發(fā)展大數(shù)據(jù)已步入初級階段，不論是拓展大數(shù)據(jù)業(yè)務(wù)的百度、阿里、奇虎360等互聯(lián)網(wǎng)公司，還是專業(yè)提供數(shù)據(jù)服務(wù)的大數(shù)據(jù)服務(wù)商，對專業(yè)的大數(shù)據(jù)人才均有較高的需求量。而今年，這一“人才荒”的情況正在愈演愈烈，從一定程度上說，人才匱乏已經(jīng)成為制約大數(shù)據(jù)應(yīng)用產(chǎn)業(yè)發(fā)展的重要因素。圖2-3大數(shù)據(jù)人才市場需求分析（四）大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)系統(tǒng)化課程資源匱乏就目前來看，在互聯(lián)網(wǎng)上已經(jīng)擁有了較多的單體資源，例如Java程序設(shè)計、MapReduce程序設(shè)計、Hadoop體系框架等課程資源非常豐富，但是缺少資源的系統(tǒng)性，很多學習者不知如何去養(yǎng)成職業(yè)崗位能力要求。從目前來看，建設(shè)一個大數(shù)據(jù)技術(shù)與應(yīng)用領(lǐng)域的優(yōu)質(zhì)資源庫，同時為學習者提出科學合理的學習建議，是非常有必要的。四、典型工作崗位及能力分析由于我國大數(shù)據(jù)產(chǎn)品正處于起步階段，市場對技能型、操作性的人才需求相對較高，從統(tǒng)計數(shù)據(jù)上看，大數(shù)據(jù)行業(yè)求職者學歷與招聘需求出現(xiàn)錯位，主要表現(xiàn)為大專的招聘需求高于求職者占比，而碩士以上的需求則正好相反。目前，大數(shù)據(jù)相關(guān)工作按照專業(yè)范圍和工作特點大致可分為如下1)、數(shù)據(jù)處理類：該類職位要求對數(shù)據(jù)存儲方式和數(shù)據(jù)存儲結(jié)構(gòu)有一定的理解，了解數(shù)據(jù)的定義，并且可以通過多種采集方式獲取原始數(shù)據(jù)，按特定要求處理數(shù)據(jù)。該職位應(yīng)了解基本的統(tǒng)計學方法，能應(yīng)用統(tǒng)計學的工具，同時掌握大數(shù)據(jù)平臺的相關(guān)操作技術(shù)，能將數(shù)據(jù)處理方法通過大數(shù)據(jù)平臺實現(xiàn)。對于企業(yè)來講，這部分人群在工作中對專業(yè)的熟練程度要求也是非常高的，例如能熟練做出因子分析，聚類等基礎(chǔ)技術(shù)處理，包括類似的各類數(shù)據(jù)統(tǒng)計處理技術(shù)。完成業(yè)務(wù)中數(shù)據(jù)的前期預(yù)處理和處理基礎(chǔ)工作，提供高質(zhì)量的數(shù)據(jù)供數(shù)據(jù)分析和解讀。2)、大數(shù)據(jù)運維類：該類職位要求具備大規(guī)模服務(wù)器集群的運維能力，同時具備大型數(shù)據(jù)庫運維能力。服務(wù)器運維包括維護并確保服務(wù)器的可用性，不斷優(yōu)化系統(tǒng)架構(gòu)、提升部署效率和優(yōu)化資源利用率等。數(shù)據(jù)庫運維包括具備軟件安裝、配置優(yōu)化、數(shù)據(jù)恢復(fù)和遷移、數(shù)據(jù)庫故障排除、預(yù)防性巡檢等一系列能力。運維工程師面對的最大挑戰(zhàn)是大規(guī)模服務(wù)器集群的管理問題，如何管理好幾十萬臺服務(wù)器上的服務(wù)，同時保障服務(wù)的高可用性，是運維工程師面臨的最大難題。因此，作為運維類工作，特別是大數(shù)據(jù)級的運維工作，職位要求應(yīng)該具備扎實的基礎(chǔ)知識。包括掌握如Java/Python等至少2種編程語言、熟練掌握常用的算法并能靈活運用、熟悉網(wǎng)絡(luò)基礎(chǔ)知識、深入理解Linux操作系統(tǒng)等。同時，在大數(shù)據(jù)環(huán)境下，還應(yīng)該掌握熟悉分布式計算或者存儲系統(tǒng)。3)、大數(shù)據(jù)技術(shù)支持類：大數(shù)據(jù)技術(shù)支持類包括售前技術(shù)支持和售后技術(shù)支持。售前技術(shù)支持能夠在大數(shù)據(jù)應(yīng)用系統(tǒng)實施前遇到無法解決的問題時提供技術(shù)支持；售后技術(shù)支持能夠在大數(shù)據(jù)應(yīng)用系統(tǒng)部署完成后，為客戶提供售后服務(wù)，幫助工程師診斷并解決大數(shù)據(jù)應(yīng)用系統(tǒng)使用過程中出現(xiàn)的問題。該類職位需要掌握大規(guī)模服務(wù)器集群知識，以及大數(shù)據(jù)相關(guān)基礎(chǔ)。具體包括掌握至少1門編程語言、掌握Linux操作系統(tǒng)、掌握分布式計算和存儲系統(tǒng)等。同時技術(shù)支持需要面對客戶，應(yīng)具備一定的溝通和團隊協(xié)作能力。校企專家通過對上述典型工作崗位的能力要求分析研討，形成大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)崗位職業(yè)能力分析表。表3-4大數(shù)據(jù)技術(shù)與應(yīng)用主要工作任務(wù)描述典型工作任務(wù)能力要求知識要求技能要求課程大數(shù)據(jù)平臺運維通過系統(tǒng)監(jiān)控、集群配置等技術(shù)手段，保證大數(shù)據(jù)平臺能夠長期穩(wěn)定的支撐企業(yè)大數(shù)據(jù)業(yè)務(wù)的工作能力1、掌握計算機基礎(chǔ)知識；2、掌握網(wǎng)絡(luò)基礎(chǔ)知識、中小型局域網(wǎng)組建和運維技術(shù)；3、掌握服務(wù)器及存儲基礎(chǔ)知識，4、掌握主流操作系統(tǒng)（如Linux、Windows）5、掌握主流數(shù)據(jù)庫基礎(chǔ)技術(shù)（如oracle、MySQL、NoSql等）6、掌握腳本編寫方法（如shell、Python等）7、掌握Hadoop/Spark相關(guān)組件的基礎(chǔ)理論知識及運維工具的使用；8、掌握HDFS、Hbase、hive、yarn等組件的基本操作1、能夠配置和管理網(wǎng)絡(luò)設(shè)備，完成網(wǎng)絡(luò)搭建2、能夠配置和管理服務(wù)器和存儲，完成相關(guān)設(shè)備的維護3、能夠完成操作系統(tǒng)的安裝和配置4、能夠完成大數(shù)據(jù)平臺的日常維護5、能夠使用工具完成大數(shù)據(jù)平臺的軟硬件平臺運行狀態(tài)監(jiān)控6、能夠完成大數(shù)據(jù)平臺的故障應(yīng)急處理數(shù)據(jù)處理技術(shù)（Python）數(shù)據(jù)庫基礎(chǔ)Linux操作系統(tǒng)大數(shù)據(jù)概論網(wǎng)絡(luò)技術(shù)大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理Hadoop綜合實訓(xùn)云計算與虛擬化Spark綜合實訓(xùn)數(shù)據(jù)預(yù)處理通過數(shù)據(jù)抽取、整理、傳輸、加載、校驗等技術(shù)手段，結(jié)合工具，保證高效的為大數(shù)據(jù)分析提供高質(zhì)量的數(shù)據(jù)資源的工作能力1、掌握計算機基礎(chǔ)知識；2、掌握主流數(shù)據(jù)庫基礎(chǔ)技術(shù)（如Oracle、MySQL、NoSql等）3、掌握shell腳本編程，熟悉Java、Python等開發(fā)語言4、掌握Hadoop/Spark相關(guān)組件的基礎(chǔ)理論知識及運維工具的使用；1、能夠使用工具從數(shù)據(jù)源抽取所需數(shù)據(jù)2、能夠使用工具對數(shù)據(jù)進行指定操作，如轉(zhuǎn)換、清洗、校驗等3、能夠使用工具完成數(shù)據(jù)加載，如傳輸、建庫、校驗等4、具備分布式ETL過程調(diào)優(yōu)能力應(yīng)用程序開發(fā)基礎(chǔ)（Java）數(shù)據(jù)處理技術(shù)（Python）數(shù)據(jù)庫基礎(chǔ)Hadoop綜合實訓(xùn)Spark綜合實訓(xùn)爬蟲技術(shù)實訓(xùn)云計算與虛擬化概率論與數(shù)理統(tǒng)計數(shù)據(jù)清洗大數(shù)據(jù)平臺部署通過綜合運用服務(wù)器、交換機、存儲、虛擬化、云計算、大數(shù)據(jù)等基礎(chǔ)知識，保證快速、高效的完成大數(shù)據(jù)平臺環(huán)境等搭建和部署的工作能力1、掌握計算機基礎(chǔ)知識；2、掌握網(wǎng)絡(luò)基礎(chǔ)知識、中小型局域網(wǎng)組建和運維技術(shù)；3、掌握服務(wù)器及存儲基礎(chǔ)知識，4、掌握主流操作系統(tǒng)（如Linux、Windows）5、掌握主流數(shù)據(jù)庫基礎(chǔ)技術(shù)（如Oracle、MySQL、NoSql等）6、了解大數(shù)據(jù)基礎(chǔ)知識和基本框架1、能夠配置和管理網(wǎng)絡(luò)設(shè)備，完成網(wǎng)絡(luò)搭建2、能夠配置和管理服務(wù)器和存儲，完成相關(guān)設(shè)備的維護3、能夠完成操作系統(tǒng)的安裝和配置4、能夠完成大數(shù)據(jù)平臺的搭建、測試及調(diào)優(yōu)數(shù)據(jù)庫基礎(chǔ)Linux操作系統(tǒng)大數(shù)據(jù)概論網(wǎng)絡(luò)技術(shù)大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理大數(shù)據(jù)測試技術(shù)Hadoop綜合實訓(xùn)Spark綜合實訓(xùn)云計算與虛擬化可視化設(shè)計與開發(fā)通過數(shù)據(jù)可視化報表技術(shù)、商業(yè)智能報表工具、常用Web開發(fā)框架以及程序開發(fā)語言，能夠進行可視化應(yīng)用的設(shè)計、開發(fā)與展示，直觀的為客戶呈現(xiàn)大數(shù)據(jù)的價值1、掌握主流操作系統(tǒng)（如Linux、Windows）2、掌握數(shù)據(jù)可視化報表技術(shù)，如Echarts、Highcharts等3、掌握商業(yè)智能報表工具的設(shè)計和使用4、掌握Web開發(fā)框架和程序開發(fā)語言，如PHP、Java、HTML5、CSS、JavaScript等5、掌握數(shù)據(jù)庫相關(guān)知識1、能夠使用Web開發(fā)框架進行可視化應(yīng)用開發(fā)2、能夠根據(jù)行業(yè)領(lǐng)域需求進行可視化設(shè)計3、能夠使用BI工具進行商業(yè)智能報表設(shè)計、開發(fā)與展示應(yīng)用程序開發(fā)基礎(chǔ)（Java）數(shù)據(jù)處理技術(shù)（Python）數(shù)據(jù)庫基礎(chǔ)大數(shù)據(jù)概論數(shù)據(jù)結(jié)構(gòu)與算法軟件工程Web開發(fā)技術(shù)大數(shù)據(jù)可視化技術(shù)大數(shù)據(jù)分析技術(shù)流式計算技術(shù)實訓(xùn)大數(shù)據(jù)測試技術(shù)概率論與數(shù)理統(tǒng)計大數(shù)據(jù)后臺應(yīng)用開發(fā)實戰(zhàn)OLAP數(shù)據(jù)分析實戰(zhàn)大數(shù)據(jù)倉庫與數(shù)據(jù)挖掘大數(shù)據(jù)應(yīng)用開發(fā)通過對大數(shù)據(jù)進行分析處理、結(jié)合軟件開發(fā)流程，按照業(yè)務(wù)需求完成大數(shù)據(jù)應(yīng)用開發(fā)的相關(guān)軟件設(shè)計與實現(xiàn)的工作能力1、 掌握軟件工程和軟件開發(fā)基礎(chǔ)知識2、 掌握數(shù)據(jù)庫開發(fā)基礎(chǔ)知識3、 了解大數(shù)據(jù)開發(fā)平臺4、 掌握開發(fā)環(huán)境的設(shè)置5、 掌握HDFS文件存儲操作6、 掌握MapReduce/Spark編程7、 了解專業(yè)領(lǐng)域的數(shù)據(jù)分析方法1、 能夠搭建好大數(shù)據(jù)程序開發(fā)的環(huán)境2、 能夠根據(jù)用戶需求利用開發(fā)語言進行大數(shù)據(jù)分析和預(yù)處理3、 能夠進行大數(shù)據(jù)應(yīng)用程序開發(fā)4、能夠完成功能性測試應(yīng)用程序開發(fā)基礎(chǔ)（Java）數(shù)據(jù)處理技術(shù)（Python）數(shù)據(jù)庫基礎(chǔ)大數(shù)據(jù)概論數(shù)據(jù)結(jié)構(gòu)與算法軟件工程Web開發(fā)技術(shù)大數(shù)據(jù)可視化技術(shù)大數(shù)據(jù)分析技術(shù)流式計算技術(shù)實訓(xùn)大數(shù)據(jù)測試技術(shù)概率論與數(shù)理統(tǒng)計大數(shù)據(jù)后臺應(yīng)用開發(fā)實戰(zhàn)OLAP數(shù)據(jù)分析實戰(zhàn)大數(shù)據(jù)倉庫與數(shù)據(jù)挖掘大數(shù)據(jù)售后技術(shù)支持具備綜合型的大數(shù)據(jù)相關(guān)基礎(chǔ)知識，快速故障分析定位、基本日志閱讀理解的能力，結(jié)合項目文檔，對大數(shù)據(jù)平臺完成故障排查，采取相應(yīng)措施，保障大數(shù)據(jù)平臺穩(wěn)定高效運行1、掌握計算機基礎(chǔ)知識；2、掌握網(wǎng)絡(luò)基礎(chǔ)知識、中小型局域網(wǎng)組建和運維技術(shù)；3、掌握服務(wù)器及存儲基礎(chǔ)知識，4、了解主流操作系統(tǒng)（如Linux、Windows）5、了解主流數(shù)據(jù)庫基礎(chǔ)技術(shù)（如Oracle、MySQL、NoSql等）6、掌握Hadoop/Spark相關(guān)組件的基礎(chǔ)理論知識及運維工具的使用；7、了解大數(shù)據(jù)基礎(chǔ)知識和基本框架8、項目實施文檔撰寫和項目管理知識1、能夠熟練使用Hadoop、Saprk等大數(shù)據(jù)組件和模塊的功能2、可以根據(jù)大數(shù)據(jù)常見組件安裝部署手冊進行系統(tǒng)部署并解決安裝部署中的基礎(chǔ)問題；3、能夠根據(jù)項目售前技術(shù)方案與客戶溝通業(yè)務(wù)具體需求，撰寫項目實施方案和測試方案；4、具有項目整體管理能力，能夠進行項目整體規(guī)劃、執(zhí)行、風險管理、項目驗收等項目管理相關(guān)工作，熟練使用常見項目管理工具如project等；5、了解網(wǎng)絡(luò)的交換技術(shù)、路由技術(shù)以及出口技術(shù)等，可以完成中小型網(wǎng)絡(luò)的規(guī)劃與設(shè)計；6、能夠熟練使用Linux、Windows等常見操作系統(tǒng)7、能夠使用Oracle、SqlServer、MySQL、NoSQL等主流數(shù)據(jù)庫數(shù)據(jù)處理技術(shù)（Python）數(shù)據(jù)庫基礎(chǔ)Linux操作系統(tǒng)大數(shù)據(jù)概論網(wǎng)絡(luò)技術(shù)大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理Hadoop綜合實訓(xùn)云計算與虛擬化Spark綜合實訓(xùn)大數(shù)據(jù)文檔編寫參與產(chǎn)品開發(fā)和項目運行全過程中，綜合運用大數(shù)據(jù)相關(guān)技術(shù)知識，按照正確格式和行業(yè)要求，完成大數(shù)據(jù)產(chǎn)品和相關(guān)項目文檔編寫的綜合職業(yè)能力1、掌握計算機基礎(chǔ)知識；2、掌握網(wǎng)絡(luò)基礎(chǔ)知識、中小型局域網(wǎng)組建和運維技術(shù)；3、掌握服務(wù)器及存儲基礎(chǔ)知識4、掌握主流操作系統(tǒng)（如Linux、Windows）5、掌握主流數(shù)據(jù)庫基礎(chǔ)技術(shù)（如Oracle、MySQL、NoSql等）6、掌握腳本編寫方法（如shell、Python等）7、掌握Hadoop/Spark相關(guān)組件的基礎(chǔ)理論知識及運維工具的使用；8、掌握HDFS、Hbase、Hive、Yarn等組件的基本操作能夠按照正確格式和行業(yè)要求書寫文檔數(shù)據(jù)處理技術(shù)（Python）數(shù)據(jù)庫基礎(chǔ)大數(shù)據(jù)概論軟件工程大數(shù)據(jù)測試技術(shù)概率論與數(shù)理統(tǒng)計大數(shù)據(jù)系統(tǒng)測試通過大數(shù)據(jù)測試工具，實現(xiàn)對大數(shù)據(jù)應(yīng)用的功能、性能和可靠性的測試，輸出測試文檔，輔助分析并反饋測試結(jié)果1、掌握主流操作系統(tǒng)，如Linux、Windows2、掌握主流數(shù)據(jù)庫基礎(chǔ)技術(shù)，如Oracle、Mysql、Nosql等3、掌握測試腳本編寫方法，如shell、Python等4、掌握Hadoop/Spark相關(guān)組件的基礎(chǔ)理論知識5、掌握大數(shù)據(jù)相關(guān)測試方案及流程6、熟悉自動化測試工具的使用，如bigtop、hibench等1、能夠完成測試文檔編寫（如測試用例、測試報告等）2、能夠完成測試腳本編寫，協(xié)助開發(fā)人員或系統(tǒng)維護人員完成bug修復(fù)與調(diào)優(yōu)3、能夠使用自動化測試工具完成大數(shù)據(jù)系統(tǒng)相關(guān)測試工作應(yīng)用程序開發(fā)基礎(chǔ)（Java）數(shù)據(jù)處理技術(shù)（Python）數(shù)據(jù)庫基礎(chǔ)大數(shù)據(jù)概論軟件工程大數(shù)據(jù)測試技術(shù)概率論與數(shù)理統(tǒng)計大數(shù)據(jù)安全管控通過數(shù)據(jù)安全相關(guān)技術(shù)手段和策略，保證大數(shù)據(jù)合理化的安全管理，避免惡意入侵、偽裝盜取和內(nèi)部越權(quán)訪問等行為造成任何數(shù)據(jù)損失，全方位保護大數(shù)據(jù)的安全1、掌握數(shù)據(jù)安全理論知識2、掌握主流操作系統(tǒng)和系統(tǒng)安全保證技能，如Linux、Windows3、掌握HDFS、HBase、Yarn、Hive等大數(shù)據(jù)相關(guān)組件的基本操作4、掌握大數(shù)據(jù)安全功能使用，如數(shù)據(jù)授權(quán)、安全策略制定、統(tǒng)一認證功能、數(shù)據(jù)加密、數(shù)據(jù)審計等1、能夠?qū)?shù)據(jù)進行細粒化授權(quán)管理與配置2、能夠熟練管理系統(tǒng)認證kerberos組件和通過LDAP、AD對用戶進行統(tǒng)一認證管理3、能夠?qū)Υ髷?shù)據(jù)系統(tǒng)進行審計管理4、能夠?qū)DFS數(shù)據(jù)、元數(shù)據(jù)和其他敏感數(shù)據(jù)進行加密操作5、能夠制定和實施大數(shù)據(jù)安全策略應(yīng)用程序開發(fā)基礎(chǔ)（Java）大數(shù)據(jù)概論網(wǎng)絡(luò)技術(shù)大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理大數(shù)據(jù)測試技術(shù)Hadoop綜合實訓(xùn)Spark綜合實訓(xùn)云計算與虛擬化五、調(diào)研總結(jié)綜上所述，市場對大數(shù)據(jù)人才的需求量日益加大，但是高校的專業(yè)培養(yǎng)卻供不應(yīng)求。為了適應(yīng)大數(shù)據(jù)產(chǎn)業(yè)的快速發(fā)展，2016年9月，教育部向普通高等學校、高等職業(yè)教育（?？疲I(yè)目錄增補13個專業(yè)，其中就包括大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)，正式批準“高職”《大數(shù)據(jù)技術(shù)與應(yīng)用》專業(yè)作為《普通高等學校高等職業(yè)教育（專科）專業(yè)目錄2016年增補專業(yè)》（專業(yè)代碼：610215）。經(jīng)過一輪探索后，國家開始加大力度，擴大面積，積極尋找和催生大數(shù)據(jù)專業(yè)人才的培養(yǎng)方式來填補大量人才缺口，但仍不滿足需求。各大高職院校的大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)均處于起步階段，人才培養(yǎng)課程體系不夠完善，教學科研資源匱乏，專業(yè)師資力量不足。因此，建設(shè)大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)教學資源庫勢在必行。附件1：關(guān)于大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)人才培養(yǎng)方案的調(diào)查問卷（院校版）尊敬的學校領(lǐng)導(dǎo)/老師：您好！我們現(xiàn)正在進行高職學校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)教育教學情況的問卷調(diào)研，目的是要通過調(diào)研掌握大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)人才培養(yǎng)的情況，用以指導(dǎo)今后工作，耽擱您一些時間請您填寫我們的問卷，希望了解您對這些問題的一些看法和評價。謝謝！學校名稱:學校聯(lián)系電話:大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)相關(guān)情況1.貴校在開辦軟件技術(shù)專業(yè)/專業(yè)群的過程中遇到過哪些困難？（）（可多選），其中最大的困難是（）（單選）A．招生困難；B.實踐環(huán)節(jié)難以開展；C.學生就業(yè)困難；Ｄ.經(jīng)費不足；E.沒有困難；F.其它（請注明）；2.貴校軟件專業(yè)/專業(yè)群學生學習的積極性表現(xiàn)為（）A.非常積極；B.比較積極；C.一般;D.不愿學習；3.貴校軟件專業(yè)/專業(yè)群學生對未來的就業(yè)前景的認識是（）A．非常好；B.比較好；C.一般；D．不理想；4.貴校認為在大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)人才培養(yǎng)模式中應(yīng)重點關(guān)注學生（）A.當前就業(yè)；B.升學；C.兼顧就業(yè)和升學；D.中高職銜接班；E.多崗遷移就業(yè)；F.職業(yè)發(fā)展。5．貴校在校企合作方面學生頂崗實習一般如何安排。A．校方安排；B.企業(yè)安排；C.學生自主選擇;D.其他。6．貴校在校企合作方面學生頂崗實習一般如何安排在什么時間。A．第五學期；B．第六學期；C．根據(jù)學校需要安排;D.根據(jù)企業(yè)需要安排。5.貴校認為大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)學生畢業(yè)后主要從事的崗位有（）（可多選，請在下表相應(yīng)位置打√）崗位大數(shù)據(jù)運維師大數(shù)據(jù)處理工程師大數(shù)據(jù)開發(fā)工程師云計算運維工程師大數(shù)據(jù)廣告銷售大數(shù)據(jù)媒體營銷工程師數(shù)據(jù)處理員數(shù)據(jù)測試工程師數(shù)據(jù)安全控制員其他大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)學生能力具備的職業(yè)能力請您對表格中所列能力項對大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)學生未來發(fā)展的重要程度作出評判，在相應(yīng)的內(nèi)容處打“√”。序號類別能力項（請寫出您認為的）非常重要比較重要一般不重要1職業(yè)能力2專業(yè)能力大數(shù)據(jù)運維師3大數(shù)據(jù)處理工程師4大數(shù)據(jù)開發(fā)工程師5云計算運維工程師6大數(shù)據(jù)廣告銷售7數(shù)據(jù)處理員8數(shù)據(jù)測試工程師9其他能力

（請說明）大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)課程以下是大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)的專業(yè)課，請您對其重要程度作出評判；此外，以下課程貴校是否都有開設(shè)，請在開設(shè)的課程后打“√”，未開設(shè)的課程可不做重要程度評判。序號課程非常比較一般不重要貴校是否已開設(shè)重要重要1Java程序設(shè)計2Linux操作系統(tǒng)3網(wǎng)絡(luò)與云計算基礎(chǔ)4數(shù)據(jù)庫基礎(chǔ)5大數(shù)據(jù)導(dǎo)論6Hadoop平臺配置實訓(xùn)7數(shù)據(jù)建模8數(shù)據(jù)分析9項目管理文檔編制技巧10可視化表達工具11Python程序設(shè)計12數(shù)據(jù)挖掘基礎(chǔ)13算法設(shè)計基礎(chǔ)14互聯(lián)網(wǎng)+創(chuàng)新創(chuàng)業(yè)案例分析15數(shù)據(jù)清洗除以上課程外，貴校還另外開設(shè)了或者您認為還需要開設(shè)哪些專業(yè)課，主要作用（目的）為何？其它專業(yè)課主要作用（目的）123大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師對教學資源的獲取情況1．貴校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群建設(shè)和教學過程中，最希望得到哪些硬件教學資源？（）A．專業(yè)實訓(xùn)設(shè)備；B.圖書資料；C參考文獻；D.場地。2.貴校軟件技術(shù)應(yīng)用專業(yè)及專業(yè)群教師希望獲取哪些基本教學資源（）A．教材；B.電子教案；C.題庫；D.學生實訓(xùn)手冊；E.教學大綱；F.其他。3.貴校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師想獲取哪些輔助教學資源（）A．教學軟件；B.視頻；C.案例；D.動畫；E.微課件；F.其他。大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師在自身提高方面的情況1.貴校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教學中的最大困難是什么？（）A教學資源不足B缺少指導(dǎo)教師C學生學習興趣不足D其它2.目前大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師提高自身專業(yè)水平的途徑主要（）A．學歷教育深造；B．自發(fā)科研活動；C．參加學術(shù)會議；D．參與企業(yè)實踐；E．學校組織科研活動；F．參加培訓(xùn)班；G．各類資格考試；H．國內(nèi)外校際訪問交流；I．到企業(yè)掛職。3.將來貴校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師應(yīng)如何提高自身專業(yè)水平（）A．學歷教育深造；B．自發(fā)科研活動；C．參加學術(shù)會議；D．參與企業(yè)實踐；E．學校組織科研活動；F．參加培訓(xùn)班；G．各類資格考試；H．國內(nèi)外校際訪問交流；I．到企業(yè)掛職。4.目前貴校大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及專業(yè)群教師認為最需提高自己的是（）A．教學方法；B.專業(yè)知識；C.職稱；D.專業(yè)技能。六、以下是貴校教學模式方面的情況，請?zhí)顚憽?、目前貴校在教學中，是否使用過以下的教學方法：（單選）（1）演示法經(jīng)常用□B偶爾用□沒用過□（2）講授法經(jīng)常用□B偶爾用□沒用過□（3）任務(wù)驅(qū)動教學法經(jīng)常用□B偶爾用□沒用過□（4）多媒體教學法經(jīng)常用□B偶爾用□沒用過□（5）實訓(xùn)操作教學法經(jīng)常用□B偶爾用□沒用過□（6）啟發(fā)式教學法經(jīng)常用□B偶爾用□沒用過□（7）案例教學法經(jīng)常用□B偶爾用□沒用過□（8）項目教學法經(jīng)常用□B偶爾用□沒用過□（9）情境教學法經(jīng)常用□B偶爾用□沒用過□（10）自學輔導(dǎo)法經(jīng)常用□B偶爾用□沒用過□2、從各類教學方法的課堂效果來看，哪種教學方法較受學生歡迎：（最多選五項）演示法□實訓(xùn)操作教學法□項目教學法□多媒體教學法□情境教學法□講授法□任務(wù)驅(qū)動教學法□案例教學法□啟發(fā)式教學法□自學輔導(dǎo)法□3.貴校軟件技術(shù)專業(yè)老師是否嘗試運用新型教學模式：（單選）一直在嘗試摸索（嘗試的是教學模式）□；公開課時有所嘗試□已有構(gòu)思，暫未實施□；未考慮過□4.貴校教學模式對學生學習效果如何（）（單選）（1）對專業(yè)知識很有效□；較有效□；一般□；效果較小□；無效果□（2）對專業(yè)技能很有效□；較有效□；一般□；效果較小□；無效果□（3）對職業(yè)道德很有效□；較有效□；一般□；效果較小□；無效果□（4）對綜合能力很有效□；較有效□；一般□；效果較小□；無效果□七、以下是貴校評價模式方面的情況，請?zhí)顚憽?、目前貴校軟件技術(shù)專業(yè)教育教學主要采用的評價方式有哪些（）（最多選五項）紙筆考試或考查□；德育考核□；作業(yè)、作品實踐考核□；觀察記錄□；課堂表現(xiàn)□；實訓(xùn)考試或考查□；檔案袋評價□；企業(yè)對學生實習的反饋□；其他。2、貴校目前的評價模式能否激發(fā)學生的學習激情和動力（）（單選）總是□；經(jīng)?！酰灰话恪?；極少□；不能□3、你認為有效的評價模式對促進學生專業(yè)學習的效果如何（）（單選）非常有用□；比較有用□；一般□；不太有用□；沒有用□。4、在軟件技術(shù)專業(yè)教育教學中，你認為學生表現(xiàn)的評價主體應(yīng)包括哪些（）（最多選三項）教師評價□；學生自評□；小組互評□；行業(yè)評價□；企業(yè)評價□；家長評價□；其他5、貴?，F(xiàn)在常使用的教學評價內(nèi)容側(cè)重的是_________（可以多選）專業(yè)知識□；專業(yè)技能□；職業(yè)素質(zhì)□；綜合能力□；□其他____________6、貴校在教學評價中曾對哪些方面進行改革（可以多選）評價方法□；評價主體□；評價對象□；其他__________7、貴校在教學評價改革中，哪方面的改革最有效（單選）評價方法□；評價主體□；評價對象□；其他__________8、你認為在目前的軟件技術(shù)專業(yè)教育教學評價中最有待改進的是（）（最多選三項）參與評價的主體較單一□；評價的內(nèi)容范圍較窄□；評價的方法操作性不強□；評價的結(jié)果不夠客觀科學□；評價的內(nèi)容重知識技能輕職業(yè)道德素養(yǎng)□。八、以下是貴校校本教材方面的情況，請?zhí)顚憣I(yè)教育教學實訓(xùn)中，使用的教材情況是：A、傳統(tǒng)非課改系列教材為主；B、公開出版課改教材（非自己撰寫）為主；C、自己參與撰寫的課改校本教材為主；D、自己撰寫的公開出版課改教材為主；E、以上都不是

附件2：大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)人才需求調(diào)查問卷（企業(yè)版）尊敬的先生/女士:您好!衷心感謝您在百忙之中填寫這份問卷。本問卷旨在對大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)的人才需求進行調(diào)查，以便于本專業(yè)學生的核心競爭力。您的回答均不存在正確與否，也無好壞之分，結(jié)果只為了更好的促進我院人才培養(yǎng)方案的制定和抓專業(yè)申報材料編制，提升人才培養(yǎng)質(zhì)量。您的真實、準確的回答非常重要！再次衷心感謝您的大力支持!為能使我們的研究具有更為積極的現(xiàn)實意義，也方便向您請教，懇請您告知您的部分信息，不勝感謝！企業(yè)名稱：企業(yè)性質(zhì)：企業(yè)規(guī)模：聯(lián)系人：聯(lián)系電話：1、貴單位人員學歷結(jié)構(gòu)A本科及以上（人/%）B高職（人/%）C中職或高中（人/%）D初中（人/%）2、貴單位高職畢業(yè)生的工作層次主要集中在：3、您認為高職大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)（電子信息大類）的人才崗位需求為需求情況崗位群人才知識目標能力目標云計算運維工程師大數(shù)據(jù)運維工程師大數(shù)據(jù)開發(fā)工程師大數(shù)據(jù)處理工程師貴單位是否需要的其他崗位群人才？如有？請您提供：