智能行為識(shí)別系統(tǒng)在生產(chǎn)制造環(huán)節(jié)的應(yīng)用

隨著工業(yè)智能化數(shù)字化進(jìn)程的不斷推進(jìn)，制造業(yè)的智能化需求已經(jīng)不僅僅是生產(chǎn)線的智能化，對(duì)生產(chǎn)過程中生產(chǎn)線人員行為的智能化管理，也是制造業(yè)智能化進(jìn)程中重要的環(huán)節(jié)。雖然讓數(shù)字化智能化設(shè)備賦能傳統(tǒng)生產(chǎn)線，可以實(shí)現(xiàn)一定程度上的機(jī)器換人，但在很多關(guān)鍵生產(chǎn)環(huán)節(jié)，生產(chǎn)線人員是不能被機(jī)器所替代的。人的因素影響生產(chǎn)質(zhì)量和產(chǎn)品良品率在制造業(yè)中占比較大，因此，生產(chǎn)線管理中，生產(chǎn)線一線工作人員操作行為管理是制造企業(yè)生產(chǎn)管理過程中重難點(diǎn)。而目前工業(yè)市場(chǎng)環(huán)境下關(guān)于監(jiān)控人員操作步驟是否遺漏的技術(shù)仍處于發(fā)展階段，其中監(jiān)控的場(chǎng)景包括工作人員是否漏裝部件、漏打螺釘、遺漏通電測(cè)試、遺漏性能檢測(cè)、遺漏附件等。針對(duì)人員操作步驟的行為防錯(cuò)技術(shù)也依然存在技術(shù)困擾，如無(wú)法單純通過視覺拍照實(shí)現(xiàn)精準(zhǔn)檢測(cè)、操作步驟監(jiān)控困難、監(jiān)控?cái)?shù)據(jù)無(wú)溯源、企業(yè)管理困難等。以視覺檢測(cè)技術(shù)為例，通過視覺檢測(cè)采集數(shù)據(jù)的方式可分為圖像處理和視頻圖像處理，圖像處理技術(shù)發(fā)展成熟，但單幀圖像的目標(biāo)會(huì)因?yàn)樾螤畲笮∑娈惡筒糠终趽醯痊F(xiàn)象無(wú)法達(dá)到檢測(cè)的準(zhǔn)確度，而視頻圖像在時(shí)序上具有上下文一致性特征，可以根據(jù)臨近的高質(zhì)量圖像判別目標(biāo)類別和位置，提高檢測(cè)質(zhì)量，同時(shí)可以解決視頻中連續(xù)幀之間的大量冗余的情況，提高檢測(cè)速度。因此，將視頻目標(biāo)檢測(cè)技術(shù)應(yīng)用于復(fù)雜的制造領(lǐng)域是最佳的選擇。海研科技自研的智能行為識(shí)別系統(tǒng)是基于AI視覺的視頻目標(biāo)檢測(cè)技術(shù)，不僅能監(jiān)測(cè)產(chǎn)線工作人員操作異常，還能監(jiān)測(cè)產(chǎn)線異常、設(shè)備異常、物流輸送異常。01方案功能海研科技智能行為識(shí)別系統(tǒng)通過檢測(cè)人體關(guān)鍵部位骨骼點(diǎn)與關(guān)鍵動(dòng)作目標(biāo)點(diǎn)，采集人員、設(shè)備的運(yùn)動(dòng)軌跡并進(jìn)行數(shù)據(jù)統(tǒng)計(jì)分析，識(shí)別員工拿取動(dòng)作、運(yùn)動(dòng)軌跡、插裝位置、動(dòng)作順序，實(shí)現(xiàn)漏放、漏拿、漏打的檢測(cè)，達(dá)到防錯(cuò)目的。02方案設(shè)計(jì)1方案總布局以產(chǎn)品附件防漏行為識(shí)別為例，方案配置視覺檢測(cè)相機(jī)、工控機(jī)、報(bào)警指示燈、報(bào)警器控制按鈕。Part.1視覺檢測(cè)相機(jī)在工位的頂部安裝視覺檢測(cè)攝像機(jī)，垂直照攝工位上所有物料料框。Part.2工控機(jī)用來運(yùn)行業(yè)務(wù)管理系統(tǒng)，根據(jù)現(xiàn)場(chǎng)操作，來控制報(bào)警指示燈，接收?qǐng)?bào)警器按鈕信號(hào)。Part.3報(bào)警指示燈當(dāng)配料周期的起始物料框識(shí)別到抓取事件后開始識(shí)別，直至結(jié)束位置的物料框抓取結(jié)束此配料周期結(jié)束，若檢測(cè)到漏料事件發(fā)生則紅燈預(yù)警。Part.4報(bào)警器控制按鈕當(dāng)狀態(tài)指示紅燈預(yù)警后，操作人員檢測(cè)配料并確認(rèn)無(wú)誤后，可通過此按鈕解除報(bào)警。2工藝流程03方案亮點(diǎn)1技術(shù)亮點(diǎn)1.

算法精準(zhǔn)度高利用先沿的神經(jīng)網(wǎng)絡(luò)建模推理，類比腦神經(jīng)系統(tǒng)及腦認(rèn)知原理精準(zhǔn)分析，將人體關(guān)鍵部位骨骼點(diǎn)與關(guān)鍵動(dòng)作目標(biāo)點(diǎn)相結(jié)合進(jìn)行深度邏輯判定。2.

系統(tǒng)兼容性強(qiáng)在高計(jì)算能力的GPU上實(shí)時(shí)監(jiān)測(cè)及采集員工所做動(dòng)作是否合規(guī)。3.

支持邊端云架構(gòu)云邊協(xié)同收集存儲(chǔ)、分析數(shù)據(jù)便于產(chǎn)品追溯，端邊協(xié)同算法訓(xùn)練，便于遠(yuǎn)程軟件迭代。2方案優(yōu)勢(shì)1.

方案部署方案部署靈活，安裝調(diào)試周期短，區(qū)域限制影響極小，可根據(jù)現(xiàn)場(chǎng)環(huán)境靈活選擇合適的相機(jī)安裝高度和角度，以獲取操作員工連接動(dòng)作區(qū)域的圖像。2.

軟件設(shè)計(jì)軟件系統(tǒng)人機(jī)界面交互良好，操作流程簡(jiǎn)單易上手，降低工作人員學(xué)習(xí)成本。3.

行業(yè)地位制造行業(yè)首創(chuàng)針對(duì)產(chǎn)線工作人員的操作行為防錯(cuò)識(shí)別技術(shù)，廣泛適用于各個(gè)復(fù)雜的制造行業(yè)場(chǎng)景。目前行為識(shí)別系統(tǒng)方案已成功應(yīng)用于百余家家