基于雙目視覺的滅火動作檢測方法及滅火器安全實訓(xùn)系統(tǒng)與流程_第1頁
基于雙目視覺的滅火動作檢測方法及滅火器安全實訓(xùn)系統(tǒng)與流程_第2頁
基于雙目視覺的滅火動作檢測方法及滅火器安全實訓(xùn)系統(tǒng)與流程_第3頁
基于雙目視覺的滅火動作檢測方法及滅火器安全實訓(xùn)系統(tǒng)與流程_第4頁
基于雙目視覺的滅火動作檢測方法及滅火器安全實訓(xùn)系統(tǒng)與流程_第5頁
已閱讀5頁,還剩14頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)

文檔簡介

基于雙目的滅動作檢測及滅器安實訓(xùn)系統(tǒng)與1.本發(fā)明涉及防實訓(xùn)領(lǐng)域,具的說,涉及了一種于雙目視覺的滅動作檢測方法及滅火安全實訓(xùn)系統(tǒng)。背技:2.近些年來,著我國經(jīng)濟的不發(fā)展,各類化工產(chǎn)大量地應(yīng)用到人的生活和工業(yè)生產(chǎn)中這些化工產(chǎn)品在庭、寫字樓、出房及工廠車間等地普遍存在,而這些所普遍以高層建居多,由此也更易引發(fā)一系列火災(zāi)全隱患。3.因此,讓人了解火災(zāi)起因并會使用不同類型的火器進(jìn)行滅火,不可避免地發(fā)生火災(zāi)遇到可控火災(zāi)時夠及時對火災(zāi)進(jìn)控制,減少不必要損失,避免更大的患發(fā)生,這是很必要的。而針對同材質(zhì)引起的火災(zāi)型,能選擇合適滅火器來撲滅火就顯得尤為重要而常見的應(yīng)對火災(zāi)滅火劑種類有干粉火器、二氧化碳火器、水基型滅器、d類滅火器、泡沫滅火器等。4.在常規(guī)的滅教學(xué)中存在滅火使用次數(shù)有限且有效期限、布置場材料浪費和采用的火場景單調(diào)等現(xiàn)象5.為了解決以存在的問題,人一直在尋求一種理的技術(shù)解決方案技實要素:6.本發(fā)明的目是針對現(xiàn)有技術(shù)不足,從而提供了種基于雙目視覺滅火動作檢測方法及火器安全實訓(xùn)系,能夠更好地讓們了解火災(zāi)起因及練使用滅火器滅火7.為了實現(xiàn)上目的,本發(fā)明所用的技術(shù)方案是:種基于雙目視覺滅火動作檢測方法,括以下步驟:s1,獲取實深度攝像頭的一紅外信號發(fā)射器和一對深度傳器采集的實訓(xùn)場的紅外圖像,獲實感深度攝像頭的傳感器采集的實場景的彩色圖像s2,依據(jù)雙目立體視覺方對兩張紅外圖像進(jìn)行處理,重實訓(xùn)場景的三維息,獲得實訓(xùn)場的深度圖像;s3,利用預(yù)設(shè)深度學(xué)習(xí)模識別實訓(xùn)場景的色圖像中的仿真火器,并結(jié)合實訓(xùn)景的深度圖像獲得真滅火器中心位的三維坐標(biāo);s4,依據(jù)仿真滅火中心位置的三維坐標(biāo)進(jìn)作業(yè)人員上下風(fēng)位置準(zhǔn)確性判定s5,在實訓(xùn)場景的深度圖像中,搜索與真滅火器中心位的距離位于第一設(shè)深度范圍內(nèi)的目坐標(biāo)點,生成相應(yīng)人體輪廓二值圖,并依據(jù)所述人輪廓二值圖像進(jìn)行業(yè)人員側(cè)身動作規(guī)性判斷;s6,在實訓(xùn)場景深度圖像中,搜與仿真滅火器中心位置的距離于第二預(yù)設(shè)深度圍內(nèi)的目標(biāo)坐標(biāo),生成相應(yīng)的滅火噴頭輪廓二值圖像并結(jié)合實訓(xùn)場景彩色圖像獲取仿真滅器噴頭中心位置三維坐標(biāo),實時算仿真滅火器噴頭心位置相對仿真滅器中心位置的偏距離,實現(xiàn)仿真火器噴頭的實時追,以進(jìn)行滅火判斷8.本發(fā)明第二面提供一種基于目視覺與ai技術(shù)的滅火器安全實系統(tǒng),包括滅火器底座、類仿真滅火器和訓(xùn)設(shè)備,每個仿真滅火器內(nèi)置有觸發(fā)裝置,所述觸發(fā)裝用于在所述仿真火器被使用時向述實訓(xùn)設(shè)備發(fā)送觸信號;所述實訓(xùn)設(shè)包括柜體以及設(shè)在所述柜體上的機、身份證識別裝、觸摸式顯示屏和感深度攝像頭,述實感深度攝像包括一對深度傳感、一個rgb傳感器和個紅外信號發(fā)射;所述身份證識別置用于對作業(yè)人進(jìn)行身份認(rèn)證;述主機內(nèi)置有多3d模擬火災(zāi)實訓(xùn)場景和訓(xùn)軟件,所述主機用于在接收到述觸摸式顯示屏送的實訓(xùn)場景選指令后,在所述觸式顯示屏上顯示相的3d模擬火災(zāi)實訓(xùn)場景;所實訓(xùn)軟件包括知學(xué)習(xí)、操作演練和實訓(xùn)考核個模塊,所述知學(xué)習(xí)模塊用于進(jìn)火災(zāi)和滅火器的理知識學(xué)習(xí);所述操演練模塊,用于作業(yè)人員選擇的3d模擬火災(zāi)實場景下按照考核步驟,引學(xué)生完成滅火;述實訓(xùn)考核模塊置有前述的滅火動檢測方法,用于隨抽取3d模擬火災(zāi)實訓(xùn)場景,在接收到所述仿滅火器發(fā)送的觸發(fā)信號后,計滅火時長,控所述實感深度攝頭采集實訓(xùn)場景的外圖像和彩色圖像并基于內(nèi)置的滅動作檢測方法依進(jìn)行滅火器種類的別、作業(yè)人員上風(fēng)口位置準(zhǔn)確性定、作業(yè)人員側(cè)動作規(guī)范性判斷以仿真滅火器噴頭的時追蹤;在識別實訓(xùn)場景中有滅器時,判斷識別出滅火器種類與當(dāng)前3d?;馂?zāi)實訓(xùn)場景是匹配,若匹配,在當(dāng)前3d模擬火災(zāi)實訓(xùn)場景中進(jìn)滅火動作的3d動態(tài)顯示;在過仿真滅火器噴的實時追蹤獲得仿真滅火器頭的偏移量δx1和δy1后,將真滅火器噴頭的移量δx1和δy1乘預(yù)設(shè)系數(shù),得到仿滅火器噴頭在顯屏上的相對位移;述實訓(xùn)考核模塊基于滅火器種類當(dāng)前3d模擬火災(zāi)實訓(xùn)場景的匹結(jié)果、仿真滅火器噴頭在示屏上的相對位、累計滅火時長作業(yè)人員上下風(fēng)口置準(zhǔn)確性判定結(jié)果斷是否完成滅火并在所述觸摸式示屏上進(jìn)行滅火結(jié)的3d動態(tài)顯示。9.基于上述,述仿真滅火器包噴頭、壓把、保險、無線通信模塊鋰電池組和底座,所底座內(nèi)設(shè)置有無充電模塊,用于所述鋰電池組進(jìn)行線充電;所述底座還設(shè)置有提起觸裝置,所述提起發(fā)裝置用于在所述真滅火器離開所述火器底座時,通所述無線通信模發(fā)送提起觸發(fā)信號所述實訓(xùn)設(shè)備;所保險銷上設(shè)置有險銷觸發(fā)裝置,于在所述保險銷被起時通過所述無線信模塊發(fā)送拔起發(fā)信號給所述實設(shè)備;所述壓把上置有按壓觸發(fā)裝置用于在所述壓把按下后通過所述線通信模塊發(fā)送按觸發(fā)信號給所述實設(shè)備;所述實訓(xùn)備根據(jù)所述提起觸發(fā)信號、所述起觸發(fā)信號和所述按壓發(fā)信號判斷所述真滅火器的操作序是否正確,并在收到所述按壓觸發(fā)號后根據(jù)滅火器體內(nèi)滅火劑初始量、累計時長、預(yù)單位時間消耗值計滅火器腔體內(nèi)滅劑的剩余容量。10.基于上述,所滅火器底座上設(shè)有多個安放倉、無通信模塊、主控和電源板,每個安倉內(nèi)設(shè)置有智能線充電板和倉位測單元,所述智能無線充電板與所述無線充電模塊無線接,用于實現(xiàn)所電源板向所述仿滅火器的鋰電池組無線充電,并在充過程中實時檢測述鋰電池組的狀;所述倉位檢測單,用于檢測當(dāng)前安倉內(nèi)是否安裝有真滅火器以及安的仿真滅火器的種,并發(fā)送至所述主板;所述主控板據(jù)多個倉位檢測元的檢測結(jié)果判斷否存在滅火器種類失現(xiàn)象,以及用在仿真滅火器被入安放倉內(nèi)時通過述無線通信模塊向述實訓(xùn)設(shè)備發(fā)送真滅火器的種類及滅火器歸位信號以供所述實訓(xùn)設(shè)備相應(yīng)滅火器腔體滅火劑初始容量為滿值狀態(tài)。11.本發(fā)明相對現(xiàn)技術(shù)具有突出的質(zhì)性特點和顯著的步,具體的說,發(fā)明提出一種基于目視覺的滅火動檢測方法,基于目攝像頭可提供作人員的空間位置信,用于判斷作業(yè)員側(cè)身動作標(biāo)準(zhǔn)、距離火源距離及上下風(fēng)口位置;通內(nèi)嵌的深度學(xué)習(xí)塊,實現(xiàn)了復(fù)雜景中滅火器的定位識別,再根據(jù)雙目像頭測距功能進(jìn)計算出滅火器前噴嘴相對滅火器在軸與y軸方向的偏移離,實現(xiàn)滅火器頭的實時追蹤。12.本系統(tǒng)采用無通訊技術(shù)進(jìn)行滅器與上位機之間數(shù)的交互,并利用3d測量技術(shù)與深度習(xí)技術(shù)相結(jié)合的式從多方位來評作業(yè)人員滅火器使的規(guī)范性;該系統(tǒng)備身份驗證、滅計時、人員到場測、火源距離測量場景視角切換、下風(fēng)口判定、側(cè)檢測、滅火器識定位及噴頭實時追等功能。13.本發(fā)明提及的統(tǒng)可實現(xiàn)在多種擬真實場景中進(jìn)行火器的選擇與使演練作業(yè),從而提教學(xué)質(zhì)量。附圖說明14.圖1是本發(fā)明施例1的流程示意圖。15.圖2是本發(fā)明施例2的結(jié)構(gòu)示意圖。16.圖3是本發(fā)明施例2中實訓(xùn)軟件的實訓(xùn)程。17.圖4是本發(fā)明施例2中仿真滅火器的結(jié)示意圖。18.圖5是本發(fā)明施例2中滅火器底座的結(jié)示意圖。19.圖中,1.體;2.觸摸式顯示屏;3.幕升降裝置;4.實感度攝像頭;5.身份證識裝置;6.無線模塊;7.主;8.干粉滅火器;9.二氧化碳滅火器;10.水基滅器;11.滅火器底座;12.保險銷觸裝置;13.按壓監(jiān)測裝置;14鋰電組;15.提起觸發(fā)裝置;16.無線電模塊;17.無通信模塊;18.主控板;電源板;20.倉位檢測單;21.智能無線充電板具體實施方式20.下面通過具體施方式,對本發(fā)的技術(shù)方案做進(jìn)一的詳細(xì)描述。21.實施例1如圖1所示,本實施例一種基于目視覺的滅火動檢測方法,包括以下步驟:s1,獲實感深度攝像頭一個紅外信號發(fā)射和一對深度傳感器采集的實訓(xùn)場的紅外圖像,獲實感深度攝像頭rgb傳感器采集的實訓(xùn)場景的彩色圖像;,依據(jù)雙目立體視覺方法兩張紅外圖像進(jìn)行理,重構(gòu)實訓(xùn)場景的三維息,獲得實訓(xùn)場景的度圖像;s3,利用預(yù)設(shè)深學(xué)習(xí)模型識別實場景的彩色圖像中的仿真滅火,并結(jié)合實訓(xùn)場的深度圖像獲得真滅火器中心位置三維坐標(biāo);s4,據(jù)仿真滅火器中位置的三維坐標(biāo)進(jìn)作業(yè)人員上下風(fēng)位置準(zhǔn)確性判定;s5,在訓(xùn)場景的深度圖中,搜索與仿真滅器中心位置的距離位于第一預(yù)設(shè)度范圍內(nèi)的目標(biāo)標(biāo)點,生成相應(yīng)人體輪廓二值圖像并依據(jù)所述人體輪二值圖像進(jìn)行作人員側(cè)身動作規(guī)性判斷;s6,在實訓(xùn)場景的深度圖像中搜索與仿真滅火中心位置的距離于第二預(yù)設(shè)深度范內(nèi)的目標(biāo)坐標(biāo)點,成相應(yīng)的滅火器頭輪廓二值圖像并結(jié)合實訓(xùn)場景的色圖像獲取仿真滅器噴頭中心位置的三維坐,實時計算仿真火器噴頭中心位置相對仿真滅器中心位置的偏距離,實現(xiàn)仿真火器噴頭的實時追,以進(jìn)行滅火判斷22.本實施例利用目立體方法獲得訓(xùn)場景的深度圖像并利用預(yù)設(shè)深度習(xí)模型識別實訓(xùn)場中的仿真滅火器從而獲得仿真滅器的三維坐標(biāo),并用仿真滅火器的三坐標(biāo)進(jìn)行作業(yè)人上下風(fēng)口判定以作業(yè)人員側(cè)身動作范性判定;利用深圖像和彩色圖像合實現(xiàn)仿真滅火噴頭的實時追蹤;夠規(guī)范作業(yè)人員滅器的選擇與使用驟,提升教學(xué)質(zhì)。23.在具體實施時所述深度學(xué)習(xí)模的訓(xùn)練步驟如下:集作業(yè)人員手持同仿真滅火器在不方位以不同姿態(tài)行滅火的照片,為每張照片上的仿滅火器目標(biāo)打上類標(biāo)簽;將多張與火器顏色相近或狀相近的圖片作為擾背景,與采集的片一起作為數(shù)據(jù);基于yolov3的遷移學(xué)習(xí)方法對所述數(shù)據(jù)集進(jìn)行訓(xùn)練,得滅火器的深度習(xí)模型。24.在具體實施時由于作業(yè)人員在行滅火作業(yè)的過程,需要手持仿真火器,因此,仿真火器的位置即代著作業(yè)人員的位,因此可以利用仿滅火器的位置來判作業(yè)人員的上下口;具體的,s4的步驟如下:計算真滅火器中心位置的維坐標(biāo)中的x坐標(biāo)值與預(yù)火源點的x坐標(biāo)值的差,根據(jù)所述差值判斷仿滅火器是否位于設(shè)火源點的指定口方向,若位于指風(fēng)口方向,則判斷業(yè)人員處于上風(fēng),否則判斷作業(yè)員處于下風(fēng)口。25.在具體實施時s5的具體步驟如下:在實場景的深度圖像,搜索與仿真滅火器中心位的距離位于第一設(shè)深度范圍內(nèi)的標(biāo)坐標(biāo)點,生成第目標(biāo)輪廓二值圖像對所述第一目標(biāo)廓二值圖像進(jìn)行滑處理,選擇滿足積要求且面積最大輪廓,作為作業(yè)員的人體輪廓二圖像;根據(jù)所述人輪廓二值圖像中肩與頸部的位置差獲取作業(yè)人員左肩膀的二維坐標(biāo)位,并基于所述深度像分別獲得左右膀?qū)?yīng)的深度值具體的,由于肩膀頸部的寬度差異明,因此,在所述人體輪廓值圖像中,可選取寬度急劇變的一段輪廓內(nèi)的大寬度位置作為業(yè)人員的左右肩膀26.計算作業(yè)人員右肩膀的深度差,判斷所述深度差是否位于預(yù)設(shè)差范圍內(nèi),若位于,判定作業(yè)人員側(cè)動作規(guī)范,否則定作業(yè)人員側(cè)身動不規(guī)范。27.在具體實施時s6的具體步驟如下:在實場景的深度圖像,搜索與仿真滅火器中心位的距離位于第二設(shè)深度范圍內(nèi)的標(biāo)坐標(biāo)點,生成第目標(biāo)輪廓二值圖像對所述第二目標(biāo)廓二值圖像進(jìn)行滑處理,選擇滿足積要求且面積最大輪廓,作為仿真火器的輪廓二值像;根據(jù)彩色圖像像素點與深度圖像三維坐標(biāo)點的一對應(yīng)關(guān)系,獲取真滅火器的輪廓二圖像在彩色圖像上對應(yīng)目標(biāo)區(qū)域,基于仿真滅火器噴頭顏色在目標(biāo)區(qū)內(nèi)篩選出仿真滅火噴頭圖像;根據(jù)色圖像上像素點深度圖像上三維坐點的一一對應(yīng)關(guān)系獲得仿真滅火器頭中心位置的三坐標(biāo);將仿真滅火器噴頭中心位置與仿滅火器中心位置間的連線定義為z1軸,將互相直且與z1軸也垂直的軸分別定義為x1軸和y1軸實時計算出仿真滅器噴頭中心位置相對于z1在x1軸左右方向和y1軸上下向上的實際偏移δx1和δy1,完成仿滅火器噴頭實時蹤測量。28.實施例2本實例提供一種基于目視覺與ai技術(shù)的滅火器安全實系統(tǒng),如圖2所示,括滅火器底座11、多類仿滅火器和實訓(xùn)設(shè),每個仿真滅火器均內(nèi)置有發(fā)裝置,所述觸裝置用于在所述真滅火器被使用時所述實訓(xùn)設(shè)備發(fā)送發(fā)信號;本實施中選用的仿真滅器為市面上常見的粉滅火器8、二氧碳滅火器9以及水基滅火10;所述實訓(xùn)設(shè)備包括體1以及設(shè)置在所述柜1上的主機7、無線模塊6、身份證別裝置5、觸摸顯示屏2和實感深度攝頭4,所述實感深度攝像頭4包括對深度傳感器、一rgb傳感器和一紅外信號發(fā)射器;述身份證識別裝5用于對作業(yè)人員進(jìn)行身份認(rèn)證;所無線模塊6用于與所述仿滅火器進(jìn)行無線信;所述主機7內(nèi)置有多個3d?;馂?zāi)實訓(xùn)場景和實軟件,所述主機7用于在接收到所觸摸式顯示屏2發(fā)的實訓(xùn)場景選擇令后,在所述觸摸顯示屏2上顯示相應(yīng)的3d模擬火實訓(xùn)場景;在具實施時,所述觸摸顯示屏2安裝在自動升降裝置3上,以適用戶身高,方便員操作;如圖3所示,所述實訓(xùn)件包括知識學(xué)習(xí)、操演練和實訓(xùn)考核個模塊,所述知學(xué)習(xí)模塊用于進(jìn)行災(zāi)和滅火器的理論識學(xué)習(xí);具體的所述知識學(xué)習(xí)模包括火災(zāi)類型知識示、滅火器分類識展示、滅火器用流程顯示和滅器注意事項展示;述操作演練模塊,于在作業(yè)人員選的3d模擬火災(zāi)實訓(xùn)場景按照考核步驟,引導(dǎo)學(xué)生完成滅;具體的,所述作演練模塊按照核步驟,根據(jù)作業(yè)員選擇的3d模擬災(zāi)實訓(xùn)場景引導(dǎo)員選擇正確的滅火類型,檢查滅火壓力、鉛封等,趕火災(zāi)現(xiàn)場并選擇適的滅火位置,下安全環(huán),對準(zhǔn)著點消滅火災(zāi),最后查確認(rèn);所述實考核模塊中內(nèi)置實施例1所述的滅火動作檢測方法,用隨機抽取3d模擬火災(zāi)實訓(xùn)場,并在接收到所仿真滅火器發(fā)送的觸發(fā)信號,累計滅火時長控制所述實感深度攝像采集實訓(xùn)場景的外圖像和彩色圖,并基于內(nèi)置的滅動作檢測方法依次行滅火器種類的別、作業(yè)人員上風(fēng)口位置準(zhǔn)確性判、作業(yè)人員側(cè)身動規(guī)范性判斷以及真滅火器噴頭的時追蹤;在識別出訓(xùn)場景中有滅火器,判斷識別出的火器種類與當(dāng)前3d模擬火災(zāi)實場景是否匹配,若匹配,在當(dāng)前3d模擬火災(zāi)實訓(xùn)場景進(jìn)行滅火動作的3d動態(tài)顯示;在通過仿真火器噴頭的實時蹤獲得仿真滅火噴頭的偏移量δx1和δy1后,將仿滅火器噴頭的偏量δx1和δy1乘以預(yù)設(shè)系數(shù),得到真滅火器噴頭在顯示上的相對位移;述實訓(xùn)考核模塊基于滅火器種類與前3d模擬火災(zāi)實場景的匹配結(jié)果仿真滅火器噴頭顯示屏上的相對位、累計滅火時長和作人員上下風(fēng)口位準(zhǔn)確性判定結(jié)果斷是否完成滅火,在所述觸摸式顯示上進(jìn)行滅火結(jié)果3d動態(tài)顯示。29.具體的,當(dāng)作人員處于正確風(fēng)且噴頭對準(zhǔn)著火點著火點中心一定圍內(nèi),累計滅火時大于等于預(yù)設(shè)滅時長時,則可判學(xué)員完成正確完成火。30.在具體實施時所述3d模擬火災(zāi)實訓(xùn)場景括客廳取暖器著火汽車油管老化漏油著火、房天燃?xì)夤艿览现?、金屬鈉倉著火、電車充電線老化著火、廚房油著火6大類型火災(zāi)場景,進(jìn)行實訓(xùn)考核時則使用隨機抽取方式選擇考試景,當(dāng)作業(yè)人員入考試場景后,據(jù)火勢蔓延情況,擇合適的仿真滅火和合適的滅火點,進(jìn)行滅火。31.在具體實施時如圖4所示,所述仿真滅器包含噴頭、壓、保險銷、無線通信模塊17鋰電池組14和底座18,所底座18內(nèi)設(shè)置有無線電模塊16,用于向所鋰電池組14進(jìn)行無線充電所述底座18上還設(shè)置提起觸發(fā)裝置15,所述起觸發(fā)裝置15用于在所述真滅火器離開所滅火器底座11時,通過所述無通信模塊17發(fā)送提起觸發(fā)信給所述實訓(xùn)設(shè)備所述保險銷上設(shè)置有保險銷發(fā)裝置12,用于在所述保銷被拔起時通過所無線通信模塊17發(fā)送拔起發(fā)信號給所述實設(shè)備;所述壓把上置有按壓觸發(fā)裝13,用于在所壓把被按下后通所述無線通信模塊17發(fā)送按壓觸發(fā)信號給所述實訓(xùn)設(shè)備;所實訓(xùn)設(shè)備根據(jù)所提起觸發(fā)信號、述拔起觸發(fā)信號和述按壓觸發(fā)信號判所述仿真滅火器操作順序是否正。32.由于仿真滅火被提起后會向所實訓(xùn)設(shè)備發(fā)送提起發(fā)信號,所述實軟件記錄對應(yīng)的時表以計算作業(yè)人滅火過程所用時,從而實現(xiàn)滅火計的功能,并在接收所述按壓觸發(fā)信后根據(jù)滅火器腔內(nèi)滅火劑初始容量累計時長、預(yù)設(shè)單時間消耗值計算火器腔體內(nèi)滅火的剩余容量,以向員警示當(dāng)前滅火狀,學(xué)員若想要在定的時間內(nèi)完成火考核就不能在虛屏幕上無方向的胡噴射。33.所述仿真滅火的供電方式采用電池?zé)o線充電,使滅火器整體更加活輕便且續(xù)航持久所述無線通信模采用zigbee無線通信方式,使無線通訊協(xié)議和上位機交數(shù)據(jù)信息,脫離線的束縛,實現(xiàn)方位自由操作,最傳輸距離為800米,而確保數(shù)據(jù)的高和穩(wěn)定。34.為了讓仿真滅器做的更逼真,述仿真滅火器內(nèi)部裝有增重配件,而使得仿真滅火器重量上與真實滅器保持一致。35.在具體實施時如圖5所示,所述滅火器座11上設(shè)置有多個安放、無線通信模塊17主控板18和電源板19,每安放倉內(nèi)設(shè)置有能無線充電板21和倉位檢測元20,所述智能無線充電21與所述無線充電模塊16無線接,用于實現(xiàn)所電源板19向所述仿真火器的鋰電池組14的無線電,并在充電過中實時檢測所述鋰電池組14狀態(tài);所述倉位測單元20,用于檢測當(dāng)前安放倉是否安裝有仿真滅火器及安放的仿真滅器的種類,并發(fā)至所述主控板18;所述主控板18根據(jù)個倉位檢測單元20的檢測果判斷是否存在火器種類缺失現(xiàn)象,以及用于仿真滅火器被放安放倉內(nèi)時通過所述無線信模塊17向所述實訓(xùn)設(shè)備發(fā)送真滅火器的種類及滅火器歸位信,以供所述實訓(xùn)設(shè)將相應(yīng)滅火器腔體滅火劑初始容量為滿值狀態(tài)。36.上述設(shè)置使得真滅火器在放回火器底座11后,滅火器腔體內(nèi)滅劑剩余容量恢復(fù)到初滿值的狀態(tài),方新的學(xué)員進(jìn)行學(xué)與考核。37.在具體實施時所述主機還可以據(jù)仿真滅火器中心置的三維坐標(biāo)的x坐標(biāo)值和z坐標(biāo)值,算出仿真滅火器心位置的三維坐標(biāo)xz平面上相對于經(jīng)過圖像采集設(shè)備線的z平面的夾角,并根夾角實時旋轉(zhuǎn)3d滅火景視角,實現(xiàn)作業(yè)人員移時能實時旋轉(zhuǎn)3d滅火場景視的功能。38.為方便理解,發(fā)明給出了實訓(xùn)核的詳細(xì)過程:所實訓(xùn)考核模塊隨抽取火災(zāi)場景,學(xué)根據(jù)場景選擇合的滅火器并檢查火器狀況,然后根火災(zāi)的風(fēng)向在上下口選好滅火點位39.所述實訓(xùn)考核塊在接收到仿真火器發(fā)送的提起觸信號后,控制所實感深度攝像頭采實訓(xùn)場景的紅外像和彩色圖像;在學(xué)員選擇滅火點動的過程中,隨著員所站位置相對中心軸線的角度轉(zhuǎn)火災(zāi)三維場景視。40.在進(jìn)行滅火操的過程中,學(xué)員先拔掉插銷噴頭對火災(zāi)位置并按下把進(jìn)行滅火;這個程中所述實訓(xùn)設(shè)備根據(jù)所拔起觸發(fā)信號和述按壓觸發(fā)信號檢測學(xué)員是否掉插銷及按壓壓,以及判斷所述真滅火器的操作順是否正確;所述實考核模塊檢測到員在指定場地內(nèi)提有滅火器時噴頭會噴出滅火劑進(jìn)行火,否則,不在地內(nèi)的滅火動作效;并且在滅火過中,會實時顯“滅火器剩余容”,提醒學(xué)員剩余滅火器量。41.實訓(xùn)考核滅火成后會做出成績評并提醒學(xué)員恢復(fù)場,現(xiàn)場恢復(fù)后能順利提交成績,則語音提示“請將滅火器回原位”,三次提醒無,通知維護(hù)人員。42.最后應(yīng)當(dāng)說明是:以上實施例僅用以說明發(fā)明的技術(shù)方案而對其限制;盡管參照較實施例對本發(fā)明行了詳細(xì)的說明所屬領(lǐng)域的普通技人員應(yīng)當(dāng)理解:依可以對本發(fā)明的體實施方式進(jìn)行改或者對部分技術(shù)征進(jìn)行等同替換;不脫離本發(fā)明技方案的精神,其應(yīng)涵蓋在本發(fā)明請保護(hù)的技術(shù)方案范當(dāng)中。技特:1.一種基于雙視覺的滅火動作測方法,其特征在:s1,獲取實感深度攝像頭的一個紅外號發(fā)射器和一對度傳感器采集的訓(xùn)場景的紅外圖像獲取實感深度攝像的rgb傳感器采集的實訓(xùn)景的彩色圖像;s2,依雙目立體視覺方法對兩紅外圖像進(jìn)行處,重構(gòu)實訓(xùn)場景三維信息,獲得實場景的深度圖像s3,利用預(yù)設(shè)深學(xué)習(xí)模型識別實訓(xùn)景的彩色圖像中仿真滅火器,并結(jié)合訓(xùn)場景的深度圖獲得仿真滅火器心位置的三維坐標(biāo)s4,依據(jù)仿真火器中心位置的維坐標(biāo)進(jìn)行作業(yè)人上下風(fēng)口位置準(zhǔn)性判定;s5,在實場景的深度圖像,搜索與仿真滅火中心位置的距離于第一預(yù)設(shè)深度范圍的目標(biāo)坐標(biāo)點,成相應(yīng)的人體輪二值圖像,并依據(jù)述人體輪廓二值圖進(jìn)行作業(yè)人員側(cè)動作規(guī)范性判斷s6,在實訓(xùn)場景的深度圖像中,搜索與真滅火器中心位的距離位于第二設(shè)深度范圍內(nèi)的目坐標(biāo)點,生成相應(yīng)滅火器噴頭輪廓值圖像,并結(jié)合訓(xùn)場景的彩色圖像取仿真滅火器噴頭心位置的三維坐,實時計算仿真火器噴頭中心位置對仿真滅火器中心置的偏移距離,現(xiàn)仿真滅火器噴的實時追蹤,以進(jìn)滅火判斷。2.根權(quán)利要求1所述的基于雙視覺的滅火動作檢測方,其特征在于,所述深度習(xí)模型的訓(xùn)練步如下:采集作業(yè)員手持不同仿真滅器在不同方位以不姿態(tài)進(jìn)行滅火的片,并為每張照上的仿真滅火器目打上類型標(biāo)簽;將張與滅火器顏色近或形狀相近的片作為干擾背景,采集的照片一起作數(shù)據(jù)集;基于yolov3的遷移習(xí)方法,對所述據(jù)集進(jìn)行訓(xùn)練,獲得滅火器深度學(xué)習(xí)模型。3.根據(jù)權(quán)要求1所述的基于雙目覺的滅火動作檢測方法其特征在于,s4的具體步如下:計算仿真滅器中心位置的三維坐標(biāo)中的坐標(biāo)值與預(yù)設(shè)源點的x坐標(biāo)值的差值,根據(jù)所述值判斷仿真滅火器是否于預(yù)設(shè)火源點的定風(fēng)口方向,若于指定風(fēng)口方向,判斷作業(yè)人員處于風(fēng)口,否則判斷業(yè)人員處于下風(fēng)。4.根據(jù)權(quán)利要求1所述的基于雙目視的滅火動作檢測法,其特征在于s5的具體步驟如下:在實訓(xùn)場景的深度像中,搜索與仿滅火器中心位置距離位于第一預(yù)設(shè)度范圍內(nèi)的目標(biāo)坐點,生成第一目輪廓二值圖像;所述第一目標(biāo)輪廓值圖像進(jìn)行平滑處,選擇滿足面積求且面積最大的廓,作為作業(yè)人員人體輪廓二值圖像根據(jù)所述人體輪二值圖像中肩膀頸部的位置差異獲作業(yè)人員左右肩膀二維坐標(biāo)位置,基于所述深度圖像分別獲左右肩膀?qū)?yīng)的深度值;計算業(yè)人員左右肩膀深度差值,判斷述深度差值是否位預(yù)設(shè)差值范圍內(nèi),位于,則判定作人員側(cè)身動作規(guī),否則判定作業(yè)人側(cè)身動作不規(guī)范5.根據(jù)權(quán)利要求1所述的于雙目視覺的滅動作檢測方法,其特征在于,s6具體步驟如下:在實訓(xùn)場景的深圖像中,搜索與真滅火器中心位的距離位于第二預(yù)深度范圍內(nèi)的目標(biāo)標(biāo)點,生成第二標(biāo)輪廓二值圖像對所述第二目標(biāo)輪二值圖像進(jìn)行平滑理,選擇滿足面要求且面積最大輪廓,作為仿真滅器的輪廓二值圖像根據(jù)彩色圖像上素點與深度圖像三維坐標(biāo)點的一一應(yīng)關(guān)系,獲取仿真火器的輪廓二值像在彩色圖像上對應(yīng)目標(biāo)區(qū)域,并于仿真滅火器的噴顏色在目標(biāo)區(qū)域篩選出仿真滅火噴頭圖像;根據(jù)彩圖像上像素點與深圖像上三維坐標(biāo)的一一對應(yīng)關(guān)系獲得仿真滅火器噴中心位置的三維坐;將仿真滅火器頭中心位置與仿滅火器中心位置之的連線定義為z1,將互相垂直且z1軸也垂直的兩軸分別定為x1軸和y1軸;實時計算出真滅火器噴頭中位置相對于z1軸在x1軸左右方和y1軸上下方向上的實偏移量δx1和δy1,完仿真滅火器噴頭時追蹤測量。6.一種基于雙視覺與ai技術(shù)的滅火器安實訓(xùn)系統(tǒng),其特征于:包括滅火器底座、多類仿滅火器和實訓(xùn)設(shè),每個仿真滅火均內(nèi)置有多個觸發(fā)置,所述觸發(fā)裝用于在所述仿真火器被使用時向述實訓(xùn)設(shè)備發(fā)送觸信號;所述實訓(xùn)設(shè)包括柜體以及設(shè)在所述柜體上的機、無線模塊、身證識別裝置、觸摸顯示屏和實感深攝像頭,所述實深度攝像頭包括一深度傳感器、一個rgb傳器和一個紅外號發(fā)射器;所述份證識別裝置用對作業(yè)人員進(jìn)行份認(rèn)證;所述無模塊用于與所述真滅火器進(jìn)行無線信;所述主機內(nèi)有多個3d模擬火災(zāi)實訓(xùn)場景實訓(xùn)軟件,所述機用于在接收到所述觸摸式示屏發(fā)送的實訓(xùn)景選擇指令后,所述觸摸式顯示屏顯示相應(yīng)的3d?;馂?zāi)實訓(xùn)場景;述實訓(xùn)軟件包括知學(xué)習(xí)模塊、操作演練模塊和實訓(xùn)考核模,所述知識學(xué)習(xí)塊用于進(jìn)行火災(zāi)滅火器的理論知識習(xí);所述操作演模塊,用于在作人員選擇的3d模擬火災(zāi)實訓(xùn)場下按照考核步驟,引導(dǎo)學(xué)完成滅火;所述訓(xùn)考核模塊內(nèi)置權(quán)利要求1-5任一項所述的火動作檢測方法用于隨機抽取3d模擬火災(zāi)實訓(xùn)場景并在接收到所述仿真火器發(fā)送的觸發(fā)號后,累計滅火長,控制所述實感度攝像頭采集實訓(xùn)景的紅外圖像和色圖像,并基于置的滅火動作檢測法依次進(jìn)行滅火器類的識別、作業(yè)員上下風(fēng)口位置確性判定、作業(yè)人側(cè)身動作規(guī)范性判以及仿真滅火器頭的實時追蹤;識別出實訓(xùn)場景中滅火器時,判斷識出的滅火器種類當(dāng)前3d模擬火災(zāi)實訓(xùn)場景是否配,若匹配,則在當(dāng)前3d模擬災(zāi)實訓(xùn)場景中進(jìn)滅火動作的3d動態(tài)顯示;在通過真滅火器噴頭的時追蹤獲得仿真火器噴頭的偏移δx1和δy1后,將仿真滅火器噴頭的移量δx1和δy1乘以預(yù)系數(shù),得到仿真火器噴頭在顯示屏上的相對位;所述實訓(xùn)考核塊還基于滅火器類與當(dāng)前3d模擬火災(zāi)實訓(xùn)場景的匹配結(jié)、仿真滅火器噴在顯示屏上的相位移、累計滅火時和作業(yè)人員上下風(fēng)位置準(zhǔn)確性判定果判斷是否完成火,并在所述觸摸式顯示屏上進(jìn)行滅火果的3d動態(tài)顯示。7.根據(jù)權(quán)利要6所述的基于雙視覺與

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

最新文檔

評論

0/150

提交評論