“人工智能訓(xùn)練師”賽項(xiàng)競(jìng)賽職工組樣題

2021年xx省“人工智能訓(xùn)練師”賽項(xiàng)競(jìng)賽任務(wù)書(shū)-樣題24/332021年xx省“人工智能訓(xùn)練師”賽項(xiàng)競(jìng)賽任務(wù)書(shū)-樣題工位_______________●任務(wù)結(jié)果以競(jìng)賽答題卡結(jié)論為準(zhǔn)，寫(xiě)在任務(wù)書(shū)上無(wú)效。

示意，更換任務(wù)書(shū)。。并且提請(qǐng)大賽組委會(huì)進(jìn)行處罰。（）任務(wù)中要求提交的截圖/照片、視頻資料中都不允許出現(xiàn)本工位或者其他工位參賽選手圖像、選手姓名、校名或者其他任何識(shí)別性的標(biāo)記。一經(jīng)發(fā)現(xiàn)，競(jìng)賽試卷和作廢，比賽按零分處理，并且提請(qǐng)大賽組委會(huì)進(jìn)行處罰。（）競(jìng)賽任務(wù)書(shū)、競(jìng)賽答題卡、競(jìng)賽工具、競(jìng)賽器材及競(jìng)賽材料等不得帶進(jìn)行處罰。不予任何延時(shí)。（）競(jìng)賽過(guò)程中，參賽選手要遵守安全操作規(guī)程，確保人身及設(shè)備安全，并接（）在競(jìng)賽過(guò)程中，參賽選手如有舞弊、不服從裁判判決、擾亂賽場(chǎng)秩序?yàn)榱惴?。特別注意：

模塊一業(yè)務(wù)分析（5分）任務(wù)描述：現(xiàn)需要利用提供的數(shù)據(jù)集進(jìn)行訓(xùn)練，從而識(shí)別缺陷特征，篩選出不合格的產(chǎn)品。（一）業(yè)務(wù)框架梳理（2分）利用Xmind軟件繪制思維導(dǎo)圖進(jìn)行業(yè)務(wù)框架梳理，主要包括業(yè)務(wù)數(shù)據(jù)采集、標(biāo)注、訓(xùn)練、模型驗(yàn)證環(huán)節(jié)，并詳細(xì)列出各個(gè)環(huán)節(jié)的主要工作。將繪制的思維導(dǎo)圖導(dǎo)出為png格式。（二）業(yè)務(wù)流程梳理（3分）填寫(xiě)下表，完成數(shù)據(jù)采集、標(biāo)注、訓(xùn)練、模型驗(yàn)證這些環(huán)節(jié)的設(shè)計(jì)與梳理。（填寫(xiě)至任務(wù)書(shū)無(wú)效）序號(hào)任務(wù)步驟步驟描述預(yù)測(cè)出現(xiàn)的問(wèn)題處理預(yù)案1數(shù)據(jù)采集2標(biāo)注3模型訓(xùn)練4模型驗(yàn)證

模塊二平臺(tái)搭建與調(diào)試（5分）（一）平臺(tái)硬件搭建（3分）將工業(yè)相機(jī)安裝到支架上。選用合適的鏡頭和光源，調(diào)節(jié)合適的距離、焦距、亮度等參數(shù)，對(duì)打印好的樣例圖片進(jìn)行拍照。要求將編號(hào)1-3圖片依次進(jìn)行拍照，以“樣例01、樣例02…”的形式進(jìn)行保存。圖像采集要求：1、將圖片和對(duì)應(yīng)編號(hào)一并采集；2、圖片必須細(xì)節(jié)清晰，光線(xiàn)充足，無(wú)過(guò)曝、過(guò)暗、反光情況；3、無(wú)少拍、多拍、漏拍、殘缺、重復(fù)采集情況。（二）平臺(tái)開(kāi)發(fā)環(huán)境測(cè)試（2分）打開(kāi)cmd窗口，輸入相關(guān)指令，查看python、cuda、cudnn、anaconda版本號(hào)，將查到的版本號(hào)填寫(xiě)至表格中。（填寫(xiě)至任務(wù)書(shū)無(wú)效）表1.1開(kāi)發(fā)環(huán)境版本開(kāi)發(fā)環(huán)境PythonCudaCudnnAnaconda版本號(hào)

模塊三數(shù)據(jù)采集和處理（10分）（一）數(shù)據(jù)采集（8分）1.圖像采集需要采集打印好的x張樣例圖片。圖像采集要求：1、將圖片和對(duì)應(yīng)編號(hào)一并采集；2、圖片必須細(xì)節(jié)清晰，光線(xiàn)充足，無(wú)過(guò)曝、過(guò)暗、反光情況；3、無(wú)少拍、多拍、漏拍、殘缺、重復(fù)采集情況。2.圖像篩選打印好的缺陷有x張不符合條件的圖片（過(guò)曝、過(guò)暗、殘缺、模糊），需要將不符合條件的圖片編號(hào)填寫(xiě)至答題卡指定位置，并將對(duì)應(yīng)目錄中不符合條件的圖片刪除。（二）圖像預(yù)處理（2分）將（一）數(shù)據(jù)采集中獲取并篩選過(guò)的圖片進(jìn)行預(yù)處理。預(yù)處理包括圖片格式和大小操作。1.圖片格式將所有圖片更改為jpg格式，圖片名稱(chēng)不變。（注意：如果采集的原始圖片格式為jpg，也需要轉(zhuǎn)換）2.圖片大小將所有圖片像素更改為xxx*xxx，圖片名稱(chēng)不變，可以有所拉伸，但不能出現(xiàn)圖片殘缺、圖片編號(hào)模糊情況。（注意：原始圖像必須要保存，在更改大小之前必須要備份，由于選手未備份原始圖像造成的原始圖像丟失后果自行承擔(dān)）

模塊四數(shù)據(jù)標(biāo)注及圖像數(shù)據(jù)處理（35分）（一）視頻轉(zhuǎn)換及數(shù)據(jù)集補(bǔ)充（5分）1.視頻轉(zhuǎn)換將利用提供的python腳本，將提供的視頻轉(zhuǎn)換為圖片。2.圖像篩選將過(guò)暗、過(guò)曝、殘缺、無(wú)關(guān)、模糊的圖片挑出。3.更改大小并補(bǔ)充數(shù)據(jù)集把圖片像素更改為xxx*xxx，圖片名稱(chēng)不變，可以有所拉伸，但不能出現(xiàn)圖片殘缺、圖片編號(hào)模糊情況。（注意：原始圖像必須要保存，在更改大小之前必須要備份，由于選手未備份原始圖像造成的原始圖像丟失，后果自行承擔(dān)）（二）數(shù)據(jù)標(biāo)注（30分）將x張圖片進(jìn)行標(biāo)注。標(biāo)注文件為yolo格式。如果選手采用labelimg軟件進(jìn)行標(biāo)注，需將xml格式文件導(dǎo)入NBVisionMaster中，軟件會(huì)自動(dòng)將xml文件轉(zhuǎn)換為yolo格式的txt文件。圖像標(biāo)注有以下要求：（1）標(biāo)注框?qū)?shí)際缺陷點(diǎn)框出，不可多框或少框；（2）不多標(biāo)，即標(biāo)注數(shù)不可比實(shí)際缺陷數(shù)多；（3）不漏標(biāo)，即標(biāo)注數(shù)不可比實(shí)際缺陷數(shù)少；（4）不重標(biāo)，即同一缺陷點(diǎn)不可標(biāo)注兩個(gè)重復(fù)的框；（5）不錯(cuò)標(biāo)，即不可將不同類(lèi)型的缺陷錯(cuò)誤標(biāo)注。

模塊五構(gòu)建模型及訓(xùn)練模型（10分）（一）模型構(gòu)建（圖像識(shí)別）（3分）利用平臺(tái)提供的NBVisionMaster中相關(guān)功能，配置合適的參數(shù)，編譯生成模型。如果選手采用labelimg進(jìn)行標(biāo)注，需將標(biāo)注文件進(jìn)行導(dǎo)入再編譯生成模型。（二）模型訓(xùn)練（圖像識(shí)別）（3分）利用平臺(tái)提供的NBVisionMaster中相關(guān)功能，啟動(dòng)模型訓(xùn)練。訓(xùn)練之前需要檢查圖片、標(biāo)注信息是否正確。啟動(dòng)訓(xùn)練之后，彈出訓(xùn)練圖像，如下圖所示。其中currentavgloss為損失值，一般越小模型效果越好。iteration為訓(xùn)練次數(shù)，系統(tǒng)每隔1000次自動(dòng)保存一次weight后綴的權(quán)重文件，一般模型在訓(xùn)練正確的情況下，5000次效果趨于穩(wěn)定，超過(guò)這個(gè)次數(shù)的訓(xùn)練意義不大。approxtimeleft為預(yù)計(jì)訓(xùn)練時(shí)間，一般趨于穩(wěn)定或在某個(gè)數(shù)值上下波動(dòng)時(shí)，表示模型訓(xùn)練已經(jīng)趨于穩(wěn)定，再增加時(shí)間訓(xùn)練意義不大。訓(xùn)練趨于穩(wěn)定后，模型會(huì)呈現(xiàn)雙曲線(xiàn)樣式，如下圖所示。將模型訓(xùn)練趨于穩(wěn)定的圖像截屏，以“訓(xùn)練曲線(xiàn).png”命名。圖5.1開(kāi)始訓(xùn)練圖5.2模型訓(xùn)練趨于穩(wěn)定（三）模型構(gòu)建及預(yù)測(cè)（語(yǔ)音識(shí)別）（4分）語(yǔ)音識(shí)別模型可以將語(yǔ)音轉(zhuǎn)換成文字輸出。利用預(yù)先提供的模型及說(shuō)明文檔，進(jìn)行語(yǔ)音模型構(gòu)建并預(yù)測(cè)。將最終預(yù)測(cè)生成文字的界面進(jìn)行截圖，以“語(yǔ)音識(shí)別.png”命名。

模塊六智能系統(tǒng)應(yīng)用（15分）（一）推理驗(yàn)證（10分）1.相機(jī)添加打開(kāi)平臺(tái)提供的NBVisionMaster中推理驗(yàn)證功能，然后添加gige相機(jī)，調(diào)節(jié)相機(jī)相關(guān)參數(shù)，保證圖像采集質(zhì)量。2.深度識(shí)別添加深度識(shí)別插件，添加模塊五中訓(xùn)練好的圖像識(shí)別模型。3.模型驗(yàn)證點(diǎn)擊“運(yùn)行”按鈕，圖像會(huì)實(shí)時(shí)采集。事先提供一張A4大小的打印好的驗(yàn)證圖像，對(duì)驗(yàn)證圖像全部進(jìn)行識(shí)別，并將識(shí)別過(guò)程進(jìn)行錄屏。（二）測(cè)試報(bào)告（5分）模型驗(yàn)證過(guò)程中，難免會(huì)存在識(shí)別不準(zhǔn)、識(shí)別有誤、識(shí)別不出等問(wèn)題，請(qǐng)根據(jù)自己的模型情況填寫(xiě)一個(gè)測(cè)試報(bào)告，列出最主要的問(wèn)題，并填寫(xiě)問(wèn)題處理方法及處理結(jié)果。（在任務(wù)書(shū)上作答無(wú)效）出現(xiàn)問(wèn)題處理方法處理結(jié)果

模塊七提交項(xiàng)目總結(jié)報(bào)告（10分）（注意：需在U盤(pán)根目錄“提交資料\競(jìng)賽答題卡.docx”中填寫(xiě)，在任務(wù)書(shū)中填寫(xiě)無(wú)效）一、業(yè)務(wù)分析任務(wù)要求簡(jiǎn)單描述操作設(shè)置記錄實(shí)施結(jié)果（填寫(xiě)“任務(wù)完成”或“任務(wù)未完成”，注：任務(wù)未完成需描述原因）二、平臺(tái)搭建與調(diào)試任務(wù)要求簡(jiǎn)單描述操作設(shè)置記錄實(shí)施結(jié)果（填寫(xiě)“任務(wù)完成”或“任務(wù)未完成”，注：任務(wù)未完成需描述原因）三、數(shù)據(jù)采集和處理任務(wù)要求簡(jiǎn)單描述操作設(shè)置記錄實(shí)施結(jié)果（填寫(xiě)“任務(wù)完成”或“任務(wù)未完成”，注：任務(wù)未完成需描述原因）四、數(shù)據(jù)標(biāo)注及圖像數(shù)據(jù)處理任務(wù)要求簡(jiǎn)單描述操作設(shè)置記錄實(shí)施結(jié)果（填寫(xiě)“任務(wù)完成”或“任務(wù)未完成”，注：任務(wù)未完成需描述原因）五、構(gòu)建模型及訓(xùn)練模型任務(wù)要求簡(jiǎn)單描述操作設(shè)置記錄實(shí)施結(jié)果（填寫(xiě)“任務(wù)完成”或“任務(wù)未完成”，注：任務(wù)未完成需描述原因）六、智能系統(tǒng)應(yīng)用任務(wù)要求簡(jiǎn)單描述操作設(shè)置記錄實(shí)施結(jié)果（填寫(xiě)“任務(wù)完成”或“任務(wù)未完成”，注：任務(wù)未完成需描述原因）

附錄一錄屏軟件使用步驟1.雙擊打開(kāi)“oCam錄屏軟件”，軟件主界面如下圖所示。2.設(shè)定錄制路徑。點(diǎn)擊“菜單->選項(xiàng)”，在打開(kāi)的配置窗