2019-2020年度廣東省職業(yè)院校學(xué)生專業(yè)技能大賽 大數(shù)據(jù)技術(shù)與應(yīng)用賽項(xiàng)競(jìng)賽規(guī)程

附件7

2019-2020年度廣東省職業(yè)院校學(xué)生專業(yè)技能大賽

大數(shù)據(jù)技術(shù)與應(yīng)用賽項(xiàng)競(jìng)賽規(guī)程

一、賽項(xiàng)名稱

賽項(xiàng)編號(hào)：GZ23

賽項(xiàng)名稱：大數(shù)據(jù)技術(shù)與應(yīng)用

賽項(xiàng)組別：高職組

賽項(xiàng)歸屬產(chǎn)業(yè)：電子信息

二、競(jìng)賽目的

為貫徹落實(shí)國(guó)務(wù)院發(fā)布的《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要》和

工業(yè)和信息化部發(fā)布的《大數(shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)劃（2016-2020

年）》。加快實(shí)施國(guó)家大數(shù)據(jù)戰(zhàn)略，推動(dòng)大數(shù)據(jù)產(chǎn)業(yè)健康快

速發(fā)展，針對(duì)高職“大數(shù)據(jù)技術(shù)與應(yīng)用”專業(yè)建設(shè)和發(fā)展的需

求，通過引入大數(shù)據(jù)各個(gè)環(huán)節(jié)的實(shí)際應(yīng)用場(chǎng)景，全面考察高

職學(xué)生大數(shù)據(jù)技術(shù)基礎(chǔ)、軟件開發(fā)相關(guān)技術(shù)、Hadoop及其

生態(tài)組件部署與管理、數(shù)據(jù)采集、數(shù)據(jù)清洗、數(shù)據(jù)分析和數(shù)

據(jù)可視化等前沿的知識(shí)、技術(shù)技能以及職業(yè)素養(yǎng)和團(tuán)隊(duì)協(xié)作

能力。

賽項(xiàng)圍繞大數(shù)據(jù)產(chǎn)業(yè)各個(gè)崗位的實(shí)際需求和要求進(jìn)行設(shè)

計(jì)，通過大賽搭建校企合作的平臺(tái)，深化產(chǎn)教融合，推進(jìn)產(chǎn)

教融合人才培養(yǎng)模式，提升大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及其他相

關(guān)專業(yè)畢業(yè)生能力，推動(dòng)院校和企業(yè)聯(lián)合培養(yǎng)大數(shù)據(jù)人才，

1

加強(qiáng)學(xué)校教育與產(chǎn)業(yè)發(fā)展的有效銜接，促進(jìn)職業(yè)院校信息類

相關(guān)專業(yè)共同發(fā)展，為國(guó)家戰(zhàn)略規(guī)劃提供大數(shù)據(jù)領(lǐng)域的高素

質(zhì)技能型人才。

三、競(jìng)賽內(nèi)容

賽項(xiàng)以大數(shù)據(jù)技術(shù)與應(yīng)用為核心內(nèi)容，重點(diǎn)考查參賽選手

基于Hadoop平臺(tái)環(huán)境下，利用Hadoop技術(shù)生態(tài)組件，綜

合軟件開發(fā)相關(guān)技術(shù)，解決實(shí)際問題的能力，具體包括：

1.掌握按照項(xiàng)目需求配置管理Hadoop大數(shù)據(jù)平臺(tái)及相

關(guān)生態(tài)組件；

2.掌握企業(yè)常用采集工具和網(wǎng)絡(luò)爬蟲的相關(guān)技術(shù)，完成

指定數(shù)據(jù)的采集及處理能力；

3.綜合利用MapReduce、Spark等技術(shù)、分布式存儲(chǔ)

系統(tǒng)、數(shù)據(jù)倉(cāng)庫(kù)Hive等工具，使用Java、Python、

Scala等開發(fā)語言，完成數(shù)據(jù)清洗、存儲(chǔ)、轉(zhuǎn)化、分

析及數(shù)據(jù)推送等一系列大數(shù)據(jù)操作；

4.綜合運(yùn)用HTML、CSS、JavaScript、Python等開發(fā)

語言，對(duì)數(shù)據(jù)進(jìn)行可視化呈現(xiàn)；

5.根據(jù)數(shù)據(jù)可視化結(jié)果，完成數(shù)據(jù)分析報(bào)告的編寫；

競(jìng)賽內(nèi)容構(gòu)成如下：

考核環(huán)節(jié)考核知識(shí)點(diǎn)和技能點(diǎn)描述

任務(wù)Hadoop平Hadoop平臺(tái)安裝部署和基本配置考察Hadoop平臺(tái)及

臺(tái)及組件的部Hadoop集群節(jié)點(diǎn)的動(dòng)態(tài)增加與刪組件的部署能力，

署管理除掌握常用的基本配

2

Hadoop平臺(tái)相關(guān)組件部署與管理置和命令，能夠部

署和管理Hadoop高

Hadoop平臺(tái)的高可用

可用集群。

使用開發(fā)者工具查看網(wǎng)頁源碼，分

析網(wǎng)頁結(jié)構(gòu)，明確數(shù)據(jù)采集對(duì)象

構(gòu)建數(shù)據(jù)采集請(qǐng)求，抓取網(wǎng)絡(luò)數(shù)據(jù)考察學(xué)生多維度數(shù)

利用網(wǎng)絡(luò)爬蟲相關(guān)組件實(shí)現(xiàn)網(wǎng)絡(luò)據(jù)采集能力，包括

數(shù)據(jù)爬取對(duì)關(guān)系型數(shù)據(jù)庫(kù)、

數(shù)據(jù)采集

規(guī)則文件數(shù)據(jù)和關(guān)系型數(shù)據(jù)庫(kù)數(shù)非關(guān)系型數(shù)據(jù)庫(kù)和

據(jù)抓取以及數(shù)據(jù)同步網(wǎng)絡(luò)爬蟲技術(shù)的應(yīng)

非關(guān)系型數(shù)據(jù)庫(kù)數(shù)據(jù)抓取以及數(shù)用。

據(jù)同步

數(shù)據(jù)采集結(jié)果導(dǎo)出及數(shù)據(jù)庫(kù)推送

基于Hadoop平臺(tái)架構(gòu)組件和多維

度的數(shù)據(jù)采集，實(shí)現(xiàn)數(shù)據(jù)一致性檢

查、無效值和缺省值的處理考察對(duì)分布式計(jì)

多表數(shù)據(jù)合并和離群值處理算、分布式存儲(chǔ)系

通過常見的數(shù)據(jù)分析算法，對(duì)數(shù)據(jù)統(tǒng)、數(shù)據(jù)倉(cāng)庫(kù)等綜

進(jìn)行標(biāo)準(zhǔn)化、離散化和多元化分析合應(yīng)用能力，使用

掌握數(shù)據(jù)倉(cāng)庫(kù)導(dǎo)入、導(dǎo)出，利用數(shù)Java、Python、

數(shù)據(jù)清洗與分

據(jù)倉(cāng)庫(kù)相關(guān)命令或代碼實(shí)現(xiàn)數(shù)據(jù)Scala等開發(fā)語言，

析

多維度、多層次的分析完成數(shù)據(jù)清洗、數(shù)

對(duì)數(shù)據(jù)的查詢、整理和計(jì)算。進(jìn)行據(jù)存儲(chǔ)、數(shù)據(jù)轉(zhuǎn)化、

編譯、打包、發(fā)布，執(zhí)行程序，完數(shù)據(jù)分析、數(shù)據(jù)預(yù)

成數(shù)據(jù)處理、清洗。測(cè)及數(shù)據(jù)推送等一

實(shí)現(xiàn)不同數(shù)據(jù)庫(kù)間的文件傳輸及系列數(shù)據(jù)操作

轉(zhuǎn)換

數(shù)據(jù)預(yù)測(cè)分析

3

編寫后臺(tái)代碼實(shí)現(xiàn)數(shù)據(jù)庫(kù)訪問和通過常見的數(shù)據(jù)可

數(shù)據(jù)整理視化方法，將數(shù)據(jù)

分析結(jié)果以圖表的

形式進(jìn)行呈現(xiàn)，使

數(shù)據(jù)可視化

編寫Web前端代碼，對(duì)數(shù)據(jù)分析結(jié)用Python及Web前

果進(jìn)行呈現(xiàn)端等編程語言，實(shí)

現(xiàn)數(shù)據(jù)源分析結(jié)果

展現(xiàn)

考察學(xué)生對(duì)大數(shù)據(jù)

通過知識(shí)技能，根據(jù)數(shù)據(jù)分析、預(yù)

技術(shù)與分析的綜合

綜合分析測(cè)及可視化結(jié)果進(jìn)行分析，做出分

操作能力和業(yè)務(wù)分

析報(bào)告。

析能力

四、競(jìng)賽方式

比賽以團(tuán)隊(duì)方式進(jìn)行，每個(gè)參賽隊(duì)由1名領(lǐng)隊(duì)（可由指導(dǎo)

教師兼任）、2名指導(dǎo)教師、3名選手（其中隊(duì)長(zhǎng)1名）組

成，指導(dǎo)教師須為本校專職教師。

競(jìng)賽時(shí)長(zhǎng)4小時(shí)，競(jìng)賽連續(xù)進(jìn)行。

五、競(jìng)賽流程

根據(jù)競(jìng)賽任務(wù)要求，參賽隊(duì)伍在4小時(shí)競(jìng)賽時(shí)間內(nèi)須完成

競(jìng)賽任務(wù)，參賽隊(duì)伍須按順序完成各項(xiàng)任務(wù)，但每項(xiàng)任務(wù)用

時(shí)可自行掌握。

（一）競(jìng)賽時(shí)間安排

日期時(shí)間內(nèi)容

8:00-14:00報(bào)到

第一日15:00-16:00選手熟悉賽場(chǎng)

16:00-16:30領(lǐng)隊(duì)會(huì)、賽前說明會(huì)

4

7:30-8:00領(lǐng)隊(duì)抽取場(chǎng)次簽及檢錄順序號(hào)

8:00-8:20開賽儀式

8:20-8:35裁判長(zhǎng)在監(jiān)督長(zhǎng)監(jiān)督下，考試題目發(fā)布

賽場(chǎng)檢錄；競(jìng)賽選手抽簽、確定競(jìng)賽工位

8:35-8:50

第二日號(hào)

競(jìng)賽選手進(jìn)入賽位，檢查賽位設(shè)備；

8:50-9:00

現(xiàn)場(chǎng)裁判發(fā)放題目、宣布競(jìng)賽注意事項(xiàng)；

9:00-13:00競(jìng)賽選手完成競(jìng)賽任務(wù)

13:30-20:00競(jìng)賽成績(jī)?cè)u(píng)定，進(jìn)行成績(jī)匯總

（二）競(jìng)賽流程

六、賽卷說明

大數(shù)據(jù)技術(shù)與應(yīng)用賽項(xiàng)競(jìng)賽試題（樣卷）

近年來隨著IT產(chǎn)業(yè)的加速發(fā)展，全國(guó)各地對(duì)IT類的人才

需求也越來越多“ABC公司”為了明確今后IT產(chǎn)業(yè)人才培養(yǎng)

5

方向，在多地進(jìn)行IT公司崗位情況調(diào)研分析。你所在的小組

將承擔(dān)模擬調(diào)研分析的任務(wù)，通過在招聘網(wǎng)站進(jìn)行招聘信息

的爬取，獲取到公司名稱、工作地點(diǎn)、崗位名稱、招聘要求、

招聘人數(shù)等信息，并通過對(duì)數(shù)據(jù)的清洗和分析，得出各地域

招聘人數(shù)，“大數(shù)據(jù)”相關(guān)職位招聘數(shù)量，以繪制雷達(dá)圖展示

各地平均薪資情況。

為完成該項(xiàng)任務(wù)，你所在的小組計(jì)劃選用在業(yè)界廣泛應(yīng)用

的“Python和JAVA”語言，作為整個(gè)項(xiàng)目的基礎(chǔ)語言，并綜

合利用requests模塊、MapReduce、MySQL、Flask開源框

架、Jinja2模板引擎和ECharts組件提高開發(fā)效率并實(shí)現(xiàn)項(xiàng)

目要求，由于本次為模擬任務(wù)，總數(shù)據(jù)量不會(huì)過大，項(xiàng)目組

計(jì)劃使用分布式節(jié)點(diǎn)Hadoop模式，本次項(xiàng)目環(huán)境搭建采用

服務(wù)器集群方式，配置了小規(guī)模的技術(shù)演示環(huán)境，通過在招

聘網(wǎng)站上爬取到的相關(guān)信息，使用requests模塊、Hive、

Python、JAVA等手段對(duì)數(shù)據(jù)進(jìn)行爬取、清洗、整理、計(jì)算、

表達(dá)、分析，力求實(shí)現(xiàn)對(duì)IT人才就業(yè)信息擁有更清晰的掌握。

請(qǐng)按照下面步驟完成本次技術(shù)展示任務(wù)，并提交技術(shù)報(bào)告。

任務(wù)一：Hadoop相關(guān)組件安裝部署（15分）

當(dāng)前環(huán)境中已安裝Hadoop運(yùn)行環(huán)境和MySQL數(shù)據(jù)庫(kù)，

相關(guān)安裝信息如下表所示，請(qǐng)?jiān)诖谁h(huán)境基礎(chǔ)上按照相關(guān)操作

步驟安裝Hive組件。

1.將指定路徑下的Hive安裝包解壓并更名；

6

2.設(shè)置Hive環(huán)境變量；

3.編輯Hive相關(guān)配置文件；

4.初始化Hive元數(shù)據(jù)；

5.啟動(dòng)并保存輸出結(jié)果。

任務(wù)二：數(shù)據(jù)采集與數(shù)據(jù)預(yù)處理（20分）

1.從指定招聘網(wǎng)站中抓取數(shù)據(jù)，提取有效數(shù)據(jù)項(xiàng)，并保存

為json格式文件；

2.設(shè)置post請(qǐng)求參數(shù)并將信息返回給變量response；

3.將提取數(shù)據(jù)轉(zhuǎn)化成json格式，并賦值變量；

4.用with函數(shù)創(chuàng)建json文件，通過json方法，寫入json

數(shù)據(jù)；

5.爬取的數(shù)據(jù)需要導(dǎo)入hadoop平臺(tái)進(jìn)行數(shù)據(jù)清洗與分

析，在HDFS文件系統(tǒng)中創(chuàng)建文件夾，并將json文件

上傳到該文件夾下。

任務(wù)三：數(shù)據(jù)清洗與分析（25分）

1.為便于數(shù)據(jù)分析與可視化，需要對(duì)爬取出的數(shù)據(jù)進(jìn)行

清洗，使用Java語言編寫數(shù)據(jù)清洗的MapReduce程

序；

2.將清洗程序上傳至hadoop，并對(duì)HDFS的原始數(shù)據(jù)進(jìn)

行清洗；

3.將清洗后的數(shù)據(jù)加載到Hive數(shù)據(jù)倉(cāng)庫(kù)中；

4.通過運(yùn)行HQL命令完成數(shù)據(jù)分析統(tǒng)計(jì)；

7

5.在hive中執(zhí)行sql腳本，并查看表中大數(shù)據(jù)核心技能

的出現(xiàn)次數(shù)。

任務(wù)四：數(shù)據(jù)可視化（20分）

為更好的將數(shù)據(jù)分析結(jié)果表達(dá)出來，需要對(duì)數(shù)據(jù)分析的結(jié)

束進(jìn)行可視化呈現(xiàn)，可視化呈現(xiàn)，本次數(shù)據(jù)可視化需要呈現(xiàn)

三部分內(nèi)容：

1.按要求使用柱狀圖展示各城市招聘人數(shù)，并在前端顯

示。要求：

主標(biāo)題：各地域招聘人數(shù)

副標(biāo)題：（--招聘人數(shù)變化趨勢(shì)）

橫坐標(biāo)：城市信息，縱坐標(biāo)：招聘人數(shù)

輸出柱狀圖

2.按要求使用折線圖展示“大數(shù)據(jù)”相關(guān)職位招聘數(shù)量差

異，并在前端顯示。要求：

主標(biāo)題：大數(shù)據(jù)相關(guān)職位分析

副標(biāo)題：（--招聘數(shù)量變化趨勢(shì)）

橫坐標(biāo)：崗位名稱，縱坐標(biāo)：崗位數(shù)量

輸出折線圖

3.通過雷達(dá)圖展示各地平均薪資的情況。要求：

主標(biāo)題：各地平均薪資

輸出雷達(dá)圖

任務(wù)五：完成分析報(bào)告（15分）

8

請(qǐng)結(jié)合數(shù)據(jù)分析結(jié)果回答以下問題：

1.根據(jù)分析結(jié)果說明大數(shù)據(jù)崗位所需要的主要技能包含

哪些，為什么（4分）

2.根據(jù)分析結(jié)果說明各地大數(shù)據(jù)產(chǎn)業(yè)發(fā)展情況（4分）

3.根據(jù)市場(chǎng)需求分析，大數(shù)據(jù)行業(yè)的人才培養(yǎng)方向有哪

些，為什么（4分）

4.請(qǐng)簡(jiǎn)述，今后大數(shù)據(jù)產(chǎn)業(yè)地域發(fā)展方向在哪里（3分）

備注：競(jìng)賽結(jié)果提交要求：

1.任務(wù)成果需拷貝至提供的U盤中。在U盤中以XX工

位號(hào)建一個(gè)文件夾（例如01），將所有任務(wù)成果文檔

保存至該文件夾中。

2.競(jìng)賽提交的所有文檔中不能出現(xiàn)參賽隊(duì)信息和參賽選

手信息，競(jìng)賽文檔需要填寫參賽隊(duì)信息時(shí)以工位號(hào)代

替（XX代表工位號(hào)）。

七、競(jìng)賽規(guī)則

1.比賽時(shí)間為4個(gè)小時(shí)，比賽過程連續(xù)進(jìn)行。

2.參賽隊(duì)的競(jìng)賽工位號(hào)采用抽簽方式確定。賽題以任務(wù)

書形式發(fā)放，競(jìng)賽參考資料在賽前植入?yún)①愡x手的計(jì)

算機(jī)，參賽隊(duì)根據(jù)任務(wù)書要求完成競(jìng)賽任務(wù)。

3.組委會(huì)統(tǒng)一布置競(jìng)賽需要的軟硬件環(huán)境。選手不得私

自攜帶任何移動(dòng)存儲(chǔ)、輔助工具、移動(dòng)通信等進(jìn)入賽

場(chǎng)。

9

4.參賽選手報(bào)到當(dāng)天可預(yù)先熟悉比賽場(chǎng)地，但不得進(jìn)行

現(xiàn)場(chǎng)練習(xí)。參賽選手按規(guī)定時(shí)間到達(dá)指定地點(diǎn)，憑參

賽相關(guān)憑據(jù)進(jìn)入賽場(chǎng)。選手遲到10分鐘取消比賽資

格。

5.各隊(duì)領(lǐng)隊(duì)和指導(dǎo)教師，以及觀摩人員在賽場(chǎng)指定的觀

摩區(qū)觀摩比賽。

6.參賽選手不得攜帶通訊工具和其它未經(jīng)允許的資料、

物品進(jìn)入比賽場(chǎng)地，不得中途退場(chǎng)。如出現(xiàn)較嚴(yán)重的

違規(guī)、違紀(jì)、舞弊等現(xiàn)象，經(jīng)裁判組裁定取消比賽成

績(jī)。

7.新聞媒體在賽場(chǎng)設(shè)定的媒體采訪區(qū)工作，并且聽從現(xiàn)

場(chǎng)工作人員的安排和管理，不能影響比賽進(jìn)行。

8.在競(jìng)賽過程中，參賽選手如有疑問，應(yīng)舉手示意，考

場(chǎng)裁判長(zhǎng)應(yīng)按要求及時(shí)予以答疑。如遇設(shè)備或軟件等

故障，參賽選手應(yīng)舉手示意，考場(chǎng)裁判長(zhǎng)、技術(shù)人員

等應(yīng)及時(shí)予以解決。確因計(jì)算機(jī)軟件或硬件故障，致

使操作無法繼續(xù)的，經(jīng)考場(chǎng)裁判長(zhǎng)確認(rèn)，予以啟用備

用設(shè)備。

9.比賽過程中，參賽選手須嚴(yán)格遵守操作標(biāo)準(zhǔn)和規(guī)范，

保證自身安全，并接受裁判員的監(jiān)督和警示；若因設(shè)

備故障導(dǎo)致選手中斷或終止比賽，由大賽裁判長(zhǎng)視具

體情況做出裁決。

10

10.參賽選手不得因各種原因提前結(jié)束比賽。如確因不

可抗因素需要離開賽場(chǎng)的，須向現(xiàn)場(chǎng)裁判員舉手示

意，經(jīng)裁判員許可并完成記錄后，方可離開。凡在競(jìng)

賽期間內(nèi)提前離開的選手，不得返回賽場(chǎng)。

11.現(xiàn)場(chǎng)比賽結(jié)束，經(jīng)裁判員確認(rèn)后方可離開賽場(chǎng)。

12.各賽項(xiàng)由裁判員現(xiàn)場(chǎng)評(píng)分，經(jīng)裁判長(zhǎng)簽字確認(rèn)后予

以公布，如有異議請(qǐng)直接向大賽仲裁工作組申請(qǐng)復(fù)

核。

13.每個(gè)參賽隊(duì)必須參加所有專項(xiàng)的比賽。參賽選手應(yīng)

嚴(yán)格遵守賽場(chǎng)紀(jì)律，服從指揮，著裝整潔，儀表端

莊，講文明禮貌。各地代表隊(duì)之間應(yīng)團(tuán)結(jié)、友好、協(xié)

作，避免發(fā)生任何形式的矛盾。

14.其它未盡事宜，將在賽前向各領(lǐng)隊(duì)做詳細(xì)說明。

八、競(jìng)賽環(huán)境

1.競(jìng)賽現(xiàn)場(chǎng)設(shè)置場(chǎng)內(nèi)競(jìng)賽區(qū)、現(xiàn)場(chǎng)裁判工作區(qū)、技術(shù)支

持區(qū)等。

2.監(jiān)考人員協(xié)助裁判長(zhǎng)和現(xiàn)場(chǎng)裁判做好負(fù)責(zé)工位范圍內(nèi)

的秩序維持，監(jiān)考人員不得在考場(chǎng)內(nèi)隨意走動(dòng)。

3.技術(shù)支持保障人員在技術(shù)支持服務(wù)區(qū)候場(chǎng)，有需要時(shí)

在現(xiàn)場(chǎng)裁判的帶領(lǐng)下到相關(guān)的工位進(jìn)行賽場(chǎng)技術(shù)支持

保障，在條件具備時(shí)，技術(shù)支持區(qū)可不設(shè)置在考場(chǎng)

內(nèi)。

11

4.場(chǎng)內(nèi)競(jìng)賽區(qū)為參賽隊(duì)提供統(tǒng)一的競(jìng)賽設(shè)備；無需選手

自帶任何工具及附件。

5.競(jìng)賽現(xiàn)場(chǎng)符合消防安全規(guī)定，現(xiàn)場(chǎng)消防器材和消防栓

合格有效，應(yīng)急照明設(shè)施狀態(tài)合格，賽場(chǎng)明顯位置張

貼緊急疏散圖，賽場(chǎng)地面張貼熒光疏散指示箭頭，賽

場(chǎng)出入口專人負(fù)責(zé)，隨時(shí)保證安全通道的暢通無阻。

6.各工位分區(qū)供電，強(qiáng)電弱電分開布線，現(xiàn)場(chǎng)臨時(shí)用電

滿足《施工現(xiàn)場(chǎng)臨時(shí)用電安全技術(shù)規(guī)范》JGJ46-

2005的要求。競(jìng)賽現(xiàn)場(chǎng)通風(fēng)良好、照明需符合教室

采光規(guī)范。

九、技術(shù)規(guī)范

本賽項(xiàng)的技術(shù)規(guī)范將包括：相關(guān)專業(yè)的教育教學(xué)要求、

行業(yè)、職業(yè)技術(shù)標(biāo)準(zhǔn)，以及根據(jù)高職目錄修訂后的大數(shù)據(jù)

技術(shù)與應(yīng)用相關(guān)專業(yè)人才培養(yǎng)標(biāo)準(zhǔn)和規(guī)范，適時(shí)地修訂本

賽項(xiàng)遵循的技術(shù)規(guī)范。

（一）基礎(chǔ)標(biāo)準(zhǔn)

標(biāo)準(zhǔn)內(nèi)容

GB/T11457-2006信息技術(shù)、軟件工程術(shù)語

GB8566-88計(jì)算機(jī)軟件開發(fā)規(guī)范

GB/T12991-2008信息技術(shù)數(shù)據(jù)庫(kù)語言SQL第1部分：框架

GB/T21025-2007XML使用指南

GB/T20009-2005信息安全技術(shù)數(shù)據(jù)庫(kù)管理系統(tǒng)安全評(píng)估準(zhǔn)則已

12

發(fā)布

GB/T20273-2006信息安全技術(shù)數(shù)據(jù)庫(kù)管理系統(tǒng)安全技術(shù)要求

20100383-T-469信息技術(shù)安全技術(shù)信息安全管理體系實(shí)施指南

（二）軟件開發(fā)標(biāo)準(zhǔn)

標(biāo)準(zhǔn)內(nèi)容

GB/T8566-2001信息技術(shù)軟件生存周期過程

GB/T15853-

軟件支持環(huán)境

1995

GB/T14079-

軟件維護(hù)指南

1993

GB/T17544-1998信息技術(shù)軟件包質(zhì)量要求和測(cè)試

十、技術(shù)平臺(tái)

（一）競(jìng)賽設(shè)備

承辦學(xué)校提供比賽器材、技術(shù)平臺(tái)：新華三大數(shù)據(jù)競(jìng)賽管

理系統(tǒng)（合作企業(yè)：新華三技術(shù)有限公司；品牌：H3C），

技術(shù)平臺(tái)軟硬件設(shè)備組成如下：

序數(shù)

設(shè)備名稱備注

號(hào)量

支撐大數(shù)據(jù)競(jìng)賽管理系統(tǒng)運(yùn)行使用。內(nèi)嵌虛

擬化資源管理控制端，作為虛擬化資源管理

系統(tǒng)的計(jì)算資源、網(wǎng)絡(luò)資源和存儲(chǔ)資源的源

1超融合一體機(jī)1節(jié)點(diǎn)。

1、CPU模塊：不低于2*2.1GHz

2、內(nèi)存模塊：不低于8*32GB

13

3、硬盤模塊：不低于6*600GBSAS10K

4、網(wǎng)口：不少于4端口千兆電接口網(wǎng)卡

5、1+1冗余電源

系統(tǒng)基于kvm構(gòu)建，可模擬大數(shù)據(jù)環(huán)境搭建、

大數(shù)據(jù)采集、大數(shù)據(jù)預(yù)處理、大數(shù)據(jù)存儲(chǔ)及

管理、大數(shù)據(jù)分析及挖掘、大數(shù)據(jù)展現(xiàn)和應(yīng)

用等貫穿大數(shù)據(jù)技術(shù)的相關(guān)知識(shí)點(diǎn)，提供大

數(shù)據(jù)競(jìng)賽管理系統(tǒng)所需的虛擬服務(wù)器，結(jié)構(gòu)

化、半結(jié)構(gòu)化及非結(jié)構(gòu)化數(shù)據(jù)的數(shù)據(jù)庫(kù)等基

大數(shù)據(jù)競(jìng)賽平

礎(chǔ)支撐環(huán)境；涵蓋分布式虛擬存儲(chǔ)技術(shù)，大

2臺(tái)（H3C-1

數(shù)據(jù)獲取、存儲(chǔ)、組織、分析和決策操作的可

ADEkvm-DT）

視化技術(shù)。具體包括：Hadoop、HDFS、

Hbase、Hive、MapReduce、Kafka、Spark、

Storm、Mahout、MySQL、Echarts等，所涉

及開發(fā)語言包括Java、Python、Scala、

HTML、Javascript等。

競(jìng)賽選手比賽使用。性能相當(dāng)于i5處理器，

8G以上內(nèi)存，1TB以上硬盤（如條件允許，

3PC機(jī)3

建議使用256GSSD硬盤），顯示器要求

1024*768以上。

1.機(jī)架式交換機(jī)

2.端口：≥24個(gè)10/100/1000Base-TX以太網(wǎng)

4交換機(jī)1

端口；

3.速度：10/100/1000Base；

14

4.全千兆三層交換機(jī)，支持訪問控制。

備注：實(shí)際賽場(chǎng)需要的超融合一體機(jī)、PC機(jī)和交換機(jī)數(shù)量取

決于參賽隊(duì)伍數(shù)量。

（二）軟件環(huán)境

設(shè)備類型軟件類別軟件名稱、版本號(hào)

大數(shù)據(jù)集群操作

CentOS7.4

系統(tǒng)

Hadoop2.6.0

Yarn2.6.0

Zookeeper3.4.5

服務(wù)器集

大數(shù)據(jù)分析平臺(tái)Hive1.1.0

群

組件Flume1.6.0

Sqoop1.4

kafka1.0

Spark2.0

數(shù)據(jù)庫(kù)MySQL5.7

PC操作系統(tǒng)Windows1064位

瀏覽器Chrome

Python3.664bit

開發(fā)語言Java8

Scala12

開發(fā)客戶

Pycharm2019

端

（CommunityEdition）

開發(fā)工具

IDEA2019

（CommunityEdition）

Requests

數(shù)據(jù)采集組件

Scrapy

15

ECharts4.0.4

Flask

數(shù)據(jù)可視化組件

Jinja2

Matplotlib

Xshell免費(fèi)版

Xftp免費(fèi)版

文檔編輯器Office2007或以上

備注：因大數(shù)據(jù)技術(shù)采用開源框架，為確保穩(wěn)定性、兼容性

各軟件版本號(hào)均不低于上表所示。

(三)比賽條件說明

比賽條件由承辦單位根據(jù)本校實(shí)際情況確定，并向參賽

隊(duì)無償提供。如參賽隊(duì)不使用承辦單位所提供的比賽條件，

必須在正式比賽日15天前以學(xué)校正式公函形式向大賽執(zhí)委

會(huì)申請(qǐng)自備比賽條件，承辦院校提供力所能及的協(xié)助工作，

為此所發(fā)生的費(fèi)用均由該參賽院校自理，產(chǎn)生的不良影響由

該參賽院校承擔(dān)。

十一、成績(jī)?cè)u(píng)定

（一）評(píng)分標(biāo)準(zhǔn)制定原則

1.競(jìng)賽評(píng)分制定嚴(yán)格遵守公平、公正的原則，大數(shù)據(jù)技

術(shù)與應(yīng)用賽項(xiàng)評(píng)分采用賽項(xiàng)結(jié)果評(píng)分方法，始終貫徹

落實(shí)大賽一貫堅(jiān)持的公平、公正和公開原則。賽項(xiàng)合

作企業(yè)不得直接或者間接地參與賽項(xiàng)評(píng)分。

2.賽項(xiàng)評(píng)分依據(jù)選手固化在實(shí)操任務(wù)中的成果，通過評(píng)

分裁判對(duì)比賽成果再現(xiàn)的方法評(píng)分，并兼顧團(tuán)隊(duì)協(xié)作

16

精神和職業(yè)素養(yǎng)綜合評(píng)定。

3.參與大賽賽項(xiàng)成績(jī)管理的組織機(jī)構(gòu)包括裁判組、監(jiān)督

組和仲裁組等。裁判組實(shí)行“裁判長(zhǎng)負(fù)責(zé)制”，設(shè)裁判

長(zhǎng)1名，全面負(fù)責(zé)賽項(xiàng)的裁判與管理工作。

4.裁判員根據(jù)比賽工作需要分為檢錄裁判、加密裁判、

現(xiàn)場(chǎng)裁判和評(píng)分裁判。檢錄裁判負(fù)責(zé)對(duì)參賽隊(duì)伍（選

手）進(jìn)行點(diǎn)名登記、身份核對(duì)等工作；加密裁判負(fù)責(zé)

組織參賽隊(duì)伍（選手）抽簽并對(duì)參賽隊(duì)伍（選手）的

信息進(jìn)行加密、解密；現(xiàn)場(chǎng)裁判按規(guī)定做好賽場(chǎng)記

錄，維護(hù)賽場(chǎng)紀(jì)律；評(píng)分裁判負(fù)責(zé)對(duì)參賽隊(duì)伍（選

手）的技能展示、操作規(guī)范和競(jìng)賽成果等按賽項(xiàng)評(píng)分

標(biāo)準(zhǔn)進(jìn)行評(píng)定。

5.監(jiān)督組對(duì)裁判組的工作進(jìn)行全程監(jiān)督，并對(duì)競(jìng)賽成績(jī)

抽檢復(fù)核。

6.仲裁組負(fù)責(zé)接受由參賽隊(duì)領(lǐng)隊(duì)提出的對(duì)裁判結(jié)果的申

訴，組織復(fù)議并及時(shí)反饋復(fù)議結(jié)果。

（二）評(píng)分方法

1.選手在完成任務(wù)之后，將任務(wù)完成結(jié)果拷貝至U盤

中，由參賽選手隊(duì)長(zhǎng)簽字確認(rèn)（簽工位號(hào)）。

2.評(píng)分采取分步得分、錯(cuò)誤不傳遞、累計(jì)總分的計(jì)分方

式。

3.不計(jì)參賽選手的個(gè)人得分，只記錄團(tuán)體得分。

17

4.參賽隊(duì)提交比賽任務(wù)結(jié)束請(qǐng)求或者在比賽時(shí)間終止

后，不得再進(jìn)行任何操作。否則，視為比賽作弊，給

參賽隊(duì)記警告一次。

5.在競(jìng)賽過程中，選手如有不服從裁判判決、擾亂賽場(chǎng)

秩序、舞弊等不文明行為，由裁判按照規(guī)定扣減相應(yīng)

分?jǐn)?shù)并且給予警告，情節(jié)嚴(yán)重的取消競(jìng)賽資格，競(jìng)賽

成績(jī)記0分，隊(duì)員退出比賽現(xiàn)場(chǎng)。

（三）成績(jī)審核方法

競(jìng)賽結(jié)束后，由裁判長(zhǎng)向裁判員核實(shí)競(jìng)賽過程中有無

異常。如無異常，成績(jī)單由裁判長(zhǎng)簽字確認(rèn)并封存直至公

布成績(jī)時(shí)開啟。

如有異常，在裁判長(zhǎng)主持下，由專家組成員、裁判員、

仲裁員和監(jiān)督員共同處理。

（四）成績(jī)公布方法

競(jìng)賽成績(jī)經(jīng)復(fù)核無誤后，經(jīng)裁判長(zhǎng)審核簽字后，以賽項(xiàng)

組委會(huì)最終公布結(jié)果為準(zhǔn)

競(jìng)賽結(jié)束后，如參賽隊(duì)對(duì)比賽成績(jī)有異議，提出異議申

訴或仲裁，可按照相關(guān)規(guī)定進(jìn)行申訴和仲裁，按照仲裁結(jié)

果公布競(jìng)賽成績(jī)。

十二、獎(jiǎng)項(xiàng)設(shè)定

本賽項(xiàng)按照參賽團(tuán)隊(duì)總數(shù)比例設(shè)定獎(jiǎng)項(xiàng)：其中一等獎(jiǎng)

15%、二等獎(jiǎng)25%、三等獎(jiǎng)40%。

18

十三、賽項(xiàng)安全

賽事安全是技能競(jìng)賽一切工作順利開展的先決條件，

是賽事籌備和運(yùn)行工作必須考慮的核心問題。賽項(xiàng)執(zhí)委會(huì)

采取切實(shí)有效措施保證大賽期間參賽選手、指導(dǎo)教師、裁

判員、工作人員及觀眾的人身安全。

（一）比賽環(huán)境

1.執(zhí)委會(huì)須在賽前組織專人對(duì)比賽現(xiàn)場(chǎng)、住宿場(chǎng)所和交

通保障進(jìn)行考察，并對(duì)安全工作提出明確要求。賽場(chǎng)

的布置，賽場(chǎng)內(nèi)的器材、設(shè)備，應(yīng)符合國(guó)家有關(guān)安全

規(guī)定。如有必要，也可進(jìn)行賽場(chǎng)仿真模擬測(cè)試，以發(fā)

現(xiàn)可能出現(xiàn)的問題。承辦單位賽前須按照?qǐng)?zhí)委會(huì)要求

排除安全隱患。

2.嚴(yán)格控制與參賽無關(guān)的易燃易爆以及各類危險(xiǎn)品進(jìn)入

比賽場(chǎng)地，不許隨便攜帶書包進(jìn)入賽場(chǎng)。

3.配備先進(jìn)的儀器，防止有人利用電磁波干擾比賽秩

序。大賽現(xiàn)場(chǎng)需對(duì)賽場(chǎng)進(jìn)行網(wǎng)絡(luò)安全控制，以免場(chǎng)內(nèi)

外信息交互，充分體現(xiàn)大賽的嚴(yán)肅、公平和公正性。

4.大賽期間，承辦單位須在賽場(chǎng)管理的關(guān)鍵崗位，增加

力量，建立安全管理日志。

（二）生活條件

1.比賽期間，原則上由執(zhí)委會(huì)統(tǒng)一安排參賽選手和指導(dǎo)

教師食宿。承辦單位須尊重少數(shù)民族的信仰及文化，

19

根據(jù)國(guó)家相關(guān)的民族政策，安排好少數(shù)民族選手和教

師的飲食起居。

2.比賽期間安排的住宿地應(yīng)具有賓館/住宿經(jīng)營(yíng)許可資

質(zhì)。以學(xué)校宿舍作為住宿地的，大賽期間的住宿、衛(wèi)

生、飲食安全等由執(zhí)委會(huì)和提供宿舍的學(xué)校共同負(fù)

責(zé)。

3.各賽項(xiàng)的安全管理，除了可以采取必要的安全隔離措

施外，應(yīng)嚴(yán)格遵守國(guó)家相關(guān)法律法規(guī)，保護(hù)個(gè)人隱私

和人身自由。

（三）組隊(duì)責(zé)任

1.各學(xué)校組織代表隊(duì)時(shí)，須安排為參賽選手購(gòu)買大賽期

間的人身意外傷害保險(xiǎn)。

2.各學(xué)校代表隊(duì)組成后，須制定相關(guān)管理制度，并對(duì)所

有選手、指導(dǎo)教師進(jìn)行安全教育。

3.各參賽隊(duì)伍須加強(qiáng)對(duì)參與比賽人員的安全管理，實(shí)現(xiàn)

與賽場(chǎng)安全管理的對(duì)接。

（四）應(yīng)急處理

比賽期間發(fā)生意外事故，發(fā)現(xiàn)者應(yīng)第一時(shí)間報(bào)告賽項(xiàng)

執(zhí)委會(huì)，同時(shí)采取措施避免事態(tài)擴(kuò)大。賽項(xiàng)執(zhí)委會(huì)應(yīng)立即

啟動(dòng)預(yù)案予以解決并報(bào)告賽區(qū)執(zhí)委會(huì)。賽項(xiàng)出現(xiàn)重大安全

問題可以停賽，是否停賽由賽區(qū)執(zhí)委會(huì)決定。事后，賽區(qū)

執(zhí)委會(huì)應(yīng)向大賽執(zhí)委會(huì)報(bào)告詳細(xì)情況。

（五）處罰措施

20

1.因參賽隊(duì)伍原因造成重大安全事故的，取消其獲獎(jiǎng)資

格。

2.參賽隊(duì)伍有發(fā)生重大安全事故隱患，經(jīng)賽場(chǎng)工作人員

提示、警告無效的，可取消其繼續(xù)比賽的資格。

3.賽事工作人員違規(guī)的，按照相應(yīng)的制度追究責(zé)任。情

節(jié)惡劣并造成重大安全事故的，由司法機(jī)關(guān)追究相應(yīng)

法律責(zé)任。

十四、競(jìng)賽須知

（一）參賽隊(duì)須知

1.參賽隊(duì)名稱：統(tǒng)一使用規(guī)定的學(xué)校代表隊(duì)名稱，不使

用其他組織、團(tuán)體的名稱；

2.參賽隊(duì)組成：每支參賽隊(duì)由3名參賽選手組成，須為

同校在籍學(xué)生，其中隊(duì)長(zhǎng)1名。每支參賽隊(duì)可配2名

指導(dǎo)教師，指導(dǎo)教師須為本校專兼職教師。不接受跨

校組隊(duì)，同一學(xué)校可報(bào)名1支參賽隊(duì)伍；

3.各參賽院校應(yīng)指定1名負(fù)責(zé)人任賽項(xiàng)領(lǐng)隊(duì)，全權(quán)負(fù)責(zé)

該校參賽事務(wù)的組織、協(xié)調(diào)和領(lǐng)導(dǎo)工作。

4.參賽選手及指導(dǎo)教師在報(bào)名獲得確認(rèn)后，原則上不再

更換。如在籌備過程中，參賽選手和指導(dǎo)教師因故不

能參賽，須由其所在學(xué)校供職部門于賽項(xiàng)開賽前10

個(gè)工作日之前出具書面說明，經(jīng)大賽執(zhí)委會(huì)辦公室核

實(shí)后予以更換。允許隊(duì)員缺席比賽；允許指導(dǎo)教師缺

21

席比賽。

5.參賽隊(duì)按照大賽賽程安排，憑賽項(xiàng)執(zhí)委會(huì)頒發(fā)的參賽

證和有效身份證件參加比賽及相關(guān)活動(dòng)。

6.賽項(xiàng)執(zhí)委會(huì)統(tǒng)一安排各參賽隊(duì)在比賽前一天進(jìn)入賽場(chǎng)

熟悉環(huán)境和設(shè)施情況。

7.參賽隊(duì)選手、領(lǐng)隊(duì)和指導(dǎo)教師要有良好的職業(yè)道德，

嚴(yán)格遵守比賽規(guī)則和比賽紀(jì)律，服從裁判，尊重裁判

和賽場(chǎng)工作人員，自覺維護(hù)賽場(chǎng)秩序。

8.領(lǐng)隊(duì)?wèi)?yīng)負(fù)責(zé)賽事活動(dòng)期間本隊(duì)所有選手的人身及財(cái)產(chǎn)

安全，如發(fā)現(xiàn)意外事故，應(yīng)及時(shí)向賽項(xiàng)執(zhí)委會(huì)報(bào)告。

9.各學(xué)校組織代表隊(duì)時(shí)，須為參賽選手購(gòu)買大賽期間的

人身意外傷害保險(xiǎn)。

（二）領(lǐng)隊(duì)和指導(dǎo)教師須知

1.嚴(yán)格遵守賽場(chǎng)的各項(xiàng)規(guī)定，服從裁判，文明競(jìng)賽。如

發(fā)現(xiàn)弄虛作假者，取消參賽資格，名次無效。

2.領(lǐng)隊(duì)和指導(dǎo)教師務(wù)必帶好有效身份證件，在活動(dòng)過程

中佩戴“指導(dǎo)教師證”參加競(jìng)賽相關(guān)活動(dòng)。

3.各代表隊(duì)領(lǐng)隊(duì)要堅(jiān)決執(zhí)行競(jìng)賽的各項(xiàng)規(guī)定，加強(qiáng)對(duì)參

賽人員的管理，做好賽前準(zhǔn)備工作，督促選手帶好證

件等競(jìng)賽相關(guān)材料。

4.在比賽期間要嚴(yán)格遵守比賽規(guī)則，不得私自接觸裁判

人員。

22

5.競(jìng)賽過程中，未經(jīng)裁判許可，領(lǐng)隊(duì)、指導(dǎo)教師及其他

人員一律不得進(jìn)入競(jìng)賽現(xiàn)場(chǎng)。

6.如對(duì)競(jìng)賽過程有疑議，由領(lǐng)隊(duì)和指導(dǎo)教師負(fù)責(zé)以書面

形式向大賽仲裁委員會(huì)反映，但不得影響競(jìng)賽進(jìn)行。

7.對(duì)申訴的仲裁結(jié)果，領(lǐng)隊(duì)要帶頭服從和執(zhí)行，并做好

選手工作。參賽選手不得因申訴或?qū)μ幚硪庖姴环?/p>

停止競(jìng)賽，否則以棄權(quán)處理。

8.領(lǐng)隊(duì)和指導(dǎo)老師應(yīng)及時(shí)查看有關(guān)賽項(xiàng)的通知和內(nèi)容，

認(rèn)真研究和掌握本賽項(xiàng)競(jìng)賽的規(guī)程、技術(shù)規(guī)范和賽場(chǎng)

要求，指導(dǎo)選手做好賽前的一切技術(shù)準(zhǔn)備和競(jìng)賽準(zhǔn)

備。

（三）參賽選手須知

1.參賽選手應(yīng)嚴(yán)格遵守賽場(chǎng)規(guī)章、操作規(guī)程和工藝準(zhǔn)

則，保證人身及設(shè)備安全，接受裁判員的監(jiān)督和警

示，文明競(jìng)賽。

2.參賽選手應(yīng)按照規(guī)定時(shí)間抵達(dá)賽場(chǎng)，憑身份證、學(xué)生

證，以及統(tǒng)一發(fā)放的參賽證，完成入場(chǎng)檢錄、抽簽確

定競(jìng)賽工位號(hào)，不得遲到早退。

3.參賽選手憑競(jìng)賽工位號(hào)進(jìn)入賽場(chǎng)，不允許攜帶任何電

子設(shè)備及其他資料、用品。

4.參賽選手應(yīng)在規(guī)定的時(shí)間段進(jìn)入賽場(chǎng)，認(rèn)真核對(duì)競(jìng)賽

工位號(hào)，在指定位置就座。

23

5.參賽選手入場(chǎng)后，迅速確認(rèn)競(jìng)賽設(shè)備狀況，填寫相關(guān)

確認(rèn)文件，并由參賽隊(duì)長(zhǎng)確認(rèn)簽字（競(jìng)賽工位號(hào)）。

6.參賽選手在收到開賽信號(hào)前不得啟動(dòng)操作。在競(jìng)賽過

程中，確因計(jì)算機(jī)軟件或硬件故障，致使操作無法繼

續(xù)的，經(jīng)項(xiàng)目裁判長(zhǎng)確認(rèn)，予以啟用備用計(jì)算機(jī)。

7.賽項(xiàng)任務(wù)書及相關(guān)資料，均保存在競(jìng)賽環(huán)境的“大賽資

料”中。參賽選手應(yīng)在競(jìng)賽規(guī)定時(shí)間內(nèi)完成任務(wù)書內(nèi)

容，并按照要求，將相應(yīng)文檔上拷貝到U盤。

8.參賽選手需及時(shí)保存工作記錄。對(duì)于因各種原因造成

的數(shù)據(jù)丟失，由參賽選手自行負(fù)責(zé)。

9.參賽隊(duì)所提交的答卷采用競(jìng)賽工位號(hào)進(jìn)行標(biāo)識(shí)，不得

出現(xiàn)地名、校名、姓名、參賽證編號(hào)等信息，否則取

消競(jìng)賽成績(jī)。

10.競(jìng)賽過程中，因嚴(yán)重操作失誤或安全事故不能進(jìn)行

比賽的（例如因操作原因發(fā)生短路導(dǎo)致賽場(chǎng)斷電的、

造成設(shè)備不能正常工作的），現(xiàn)場(chǎng)裁判員有權(quán)中止該

隊(duì)比賽。

11.在比賽中如遇非人為因素造成的設(shè)備故障，經(jīng)裁判

確認(rèn)后，可向裁判長(zhǎng)申請(qǐng)補(bǔ)足排除故障的時(shí)間。

12.參賽選手不得因各種原因提前結(jié)束比賽。如確因不

可抗因素需要離開賽場(chǎng)的，須向現(xiàn)場(chǎng)裁判員舉手示

意，經(jīng)裁判員許可并完成記錄后，方可離開。凡在