AR智能運(yùn)檢終端機(jī)系統(tǒng)解決方案

AR智能運(yùn)檢終端機(jī)系統(tǒng)解決方案應(yīng)用背景客戶(hù)現(xiàn)狀1目錄CONTENTS解決方案23應(yīng)用案例4政策背景驅(qū)動(dòng)2016年，發(fā)改委印發(fā)《“互聯(lián)網(wǎng)+”人工智能三年行動(dòng)實(shí)施方案》2017年，國(guó)務(wù)院印發(fā)《新一代人工智能發(fā)展規(guī)劃》同年12月份《促進(jìn)新一代人工智能產(chǎn)業(yè)發(fā)展三年行動(dòng)計(jì)劃（2018-2020)》2018年政府工作報(bào)告中推進(jìn)人工智能的“產(chǎn)業(yè)化”、“應(yīng)用化”核心技術(shù)突破計(jì)算機(jī)視覺(jué)識(shí)別率超高95%人工智能技術(shù)取得重大進(jìn)展人工智能技術(shù)、計(jì)算機(jī)視覺(jué)技術(shù)的進(jìn)步和大數(shù)據(jù)的累積推動(dòng)增強(qiáng)現(xiàn)實(shí)技術(shù)取得突破性進(jìn)展行業(yè)技術(shù)應(yīng)用企業(yè)市場(chǎng)上，如軍事、安防、工業(yè)維修等領(lǐng)域，可以使用AR進(jìn)行遠(yuǎn)程的專(zhuān)家指導(dǎo)消費(fèi)級(jí)市場(chǎng)上，有AR+LBS游戲，增強(qiáng)現(xiàn)實(shí)技術(shù)將融合線(xiàn)上信息和線(xiàn)下物理操作市場(chǎng)潛力無(wú)限D(zhuǎn)igi-captical預(yù)測(cè)，到2020年，預(yù)計(jì)AR/VR市場(chǎng)規(guī)模達(dá)1500億美元。而AR將占據(jù)最大份額，為1200億美元。到目前為止，主要科技公司在AR/VR方向的投資總額達(dá)到20億美元。----------增強(qiáng)現(xiàn)實(shí)技術(shù)快速發(fā)展-------------應(yīng)用背景客戶(hù)現(xiàn)狀1目錄CONTENTS解決方案23應(yīng)用案例4工作人員手持外設(shè)，對(duì)準(zhǔn)設(shè)備溫度位置，顯示溫度數(shù)據(jù)，然后手動(dòng)記錄溫度信息，記錄完后，再上傳到系統(tǒng)后臺(tái)，由于圖像數(shù)據(jù)較多，并且是非結(jié)構(gòu)化數(shù)據(jù)，溫度數(shù)據(jù)與設(shè)備沒(méi)有準(zhǔn)確的空間定位關(guān)系，有時(shí)雖然設(shè)備溫度沒(méi)有達(dá)到預(yù)警，但已形成電阻增大，發(fā)熱增強(qiáng)，沒(méi)有保留現(xiàn)場(chǎng)第一手資料，造成安全隱患。設(shè)備溫度信息采集流程故障點(diǎn)定位流程一線(xiàn)人員在現(xiàn)場(chǎng)工作需要設(shè)備開(kāi)關(guān)連接作用信息時(shí)，需到主控室查找相關(guān)紙質(zhì)圖表數(shù)據(jù)或者電話(huà)咨詢(xún)相關(guān)人員,進(jìn)行多次核對(duì)，保證無(wú)誤后，才進(jìn)行操作，花費(fèi)大量時(shí)間。數(shù)據(jù)信息取用流程巡視：按著工作票記錄設(shè)備運(yùn)行情況，如發(fā)現(xiàn)故障點(diǎn)，記錄文字和圖片與設(shè)備沒(méi)有準(zhǔn)確的對(duì)應(yīng)關(guān)系，并且數(shù)據(jù)真實(shí)性有待考究。消缺：根據(jù)工作票內(nèi)容，按照記憶經(jīng)驗(yàn)或者固定路線(xiàn)尋找到設(shè)備，再目測(cè)設(shè)備故障點(diǎn)，進(jìn)行消缺工作，完成后，移動(dòng)端文字記錄。消缺結(jié)果難以鑒定。巡視、消缺流程流程：一線(xiàn)人員按照以往經(jīng)驗(yàn)，走到設(shè)備面前，目測(cè)尋找故障點(diǎn)情況、核對(duì)設(shè)備信息，如未找到，要電話(huà)多次咨詢(xún)溝通。缺點(diǎn)：故障點(diǎn)定位緩慢、故障信息掌握不全由于運(yùn)檢工作強(qiáng)度大，新員工流動(dòng)性較強(qiáng)，工作人員的維護(hù)經(jīng)驗(yàn)和記錄無(wú)法有效保留。另外歷史維護(hù)資料的保留完整性對(duì)設(shè)備的全生命周期的管理有著重大影響。設(shè)備歷史維護(hù)資料應(yīng)用背景客戶(hù)現(xiàn)狀1目錄CONTENTS解決方案23應(yīng)用案例4典型AR流程增強(qiáng)現(xiàn)實(shí)系統(tǒng)（AR）一般具有三個(gè)主要特征：虛實(shí)結(jié)合、實(shí)時(shí)交互和三維配準(zhǔn)（又稱(chēng)注冊(cè)、匹配或?qū)?zhǔn)）。上圖描繪了一個(gè)典型的AR系統(tǒng)的流程。從真實(shí)世界出發(fā)，經(jīng)過(guò)數(shù)字成像，然后系統(tǒng)通過(guò)影像數(shù)據(jù)和傳感器數(shù)據(jù)一起對(duì)三維世界進(jìn)行感知理解，同時(shí)得到對(duì)三維交互的理解。3D交互理解的目的是告知系統(tǒng)要“增強(qiáng)”的內(nèi)容。例如，在AR輔助檢修系統(tǒng)中，通過(guò)室內(nèi)定位技術(shù)，檢修人員可以將故障設(shè)備或缺陷直接定位在設(shè)備上，這樣下次檢修人員對(duì)設(shè)備進(jìn)行檢修操作的時(shí)候就可以通過(guò)增強(qiáng)現(xiàn)實(shí)輔助定位的方式，直接走到故障或缺陷設(shè)備附近開(kāi)始工作。相比之下，3D環(huán)境理解的目的就是告知系統(tǒng)要在哪里“增強(qiáng)”。這就要求系統(tǒng)實(shí)時(shí)對(duì)周?chē)恼鎸?shí)3D世界有精準(zhǔn)的理解。一旦系統(tǒng)知道了要增強(qiáng)的內(nèi)容和位置以后，就可以進(jìn)行虛實(shí)結(jié)合，這個(gè)一般是通過(guò)渲染模塊來(lái)完成。最后，合成的視頻被傳遞到用戶(hù)的視覺(jué)系統(tǒng)中，就達(dá)到了增強(qiáng)現(xiàn)實(shí)的效果。國(guó)網(wǎng)安全接入平臺(tái)前置機(jī)運(yùn)檢業(yè)務(wù)業(yè)務(wù)數(shù)據(jù)庫(kù)加密隧道應(yīng)用安裝安全應(yīng)用安全硬件安全通道安全業(yè)務(wù)后臺(tái)安全評(píng)估、應(yīng)用云端策略加密存儲(chǔ)、加密通信、設(shè)備及用戶(hù)認(rèn)證、策略管理、統(tǒng)計(jì)分析、消息推送加密算法數(shù)字證書(shū)專(zhuān)網(wǎng)APN、鏈路加密、安全平臺(tái)證書(shū)及算法安全前置機(jī)、用戶(hù)登錄鑒權(quán)、業(yè)務(wù)鑒權(quán)管控服務(wù)器策略下發(fā)終端認(rèn)證AR智能運(yùn)檢系統(tǒng)定位導(dǎo)航紅外識(shí)溫設(shè)備智能感知儀表數(shù)據(jù)識(shí)別其他設(shè)備管控-中國(guó)電力科學(xué)研究院檢測(cè)保障AR設(shè)備空間厘米級(jí)定位增強(qiáng)微機(jī)五防功能有效防止走錯(cuò)間隔快速定位缺陷設(shè)備移動(dòng)端巡查、檢修設(shè)備參數(shù)智能提示、圖紙資料速查歷史故障及缺陷查詢(xún)SLAM載體三維位置變電設(shè)備三維坐標(biāo)VIO算法計(jì)算IMU傳感器視覺(jué)傳感器深度傳感器AR室內(nèi)路徑導(dǎo)航專(zhuān)用AR終端APP應(yīng)用TangoAR手機(jī)屏幕：6.4英寸CPU：驍龍652器CPU核心數(shù)量：八核系統(tǒng)內(nèi)存：4GB存儲(chǔ)容量：64GB擴(kuò)展支持：MicroSD可擴(kuò)展容量：128GB后置攝像頭深度攝像頭1深度攝像頭2運(yùn)動(dòng)追蹤攝像頭設(shè)備位置數(shù)據(jù)整合VIO算法計(jì)算SLAM載體三維位置變電設(shè)備三維坐標(biāo)IMU傳感器視覺(jué)傳感器深度傳感器AR呈現(xiàn)算法計(jì)算設(shè)備參數(shù)特征設(shè)備檢修歷史與缺陷路線(xiàn)設(shè)計(jì)紅外識(shí)溫深度傳感器動(dòng)作傳感器三維空間色域交匯點(diǎn)特征采樣傳感器數(shù)據(jù)三維空間色域交匯點(diǎn)特征采樣通過(guò)基于類(lèi)似于人眼視網(wǎng)膜的特征點(diǎn)采樣模式，對(duì)周邊環(huán)境的視覺(jué)特征采樣。對(duì)畫(huà)面進(jìn)行精準(zhǔn)劃分，從而建立空間區(qū)域。空間三維建?；谝曈X(jué)特征的厘米級(jí)室內(nèi)定位技術(shù),通過(guò)該項(xiàng)技術(shù)我們可以確保AR內(nèi)容，如：運(yùn)檢人員或標(biāo)記設(shè)備的位置，可以每次分毫不差出現(xiàn)在特定的位置，而不需要無(wú)線(xiàn)、藍(lán)牙、二維碼或特殊圖像的識(shí)別輔助。室內(nèi)空間厘米級(jí)定位根據(jù)室內(nèi)環(huán)境高精度三維建模的結(jié)果，可幫助運(yùn)檢人員巡查、檢修、查找設(shè)備時(shí)，調(diào)用AR輔助模塊可通過(guò)手機(jī)屏幕上的導(dǎo)航路由可快速定位到設(shè)備故障點(diǎn)。移動(dòng)端故障點(diǎn)精準(zhǔn)路線(xiàn)設(shè)計(jì)功能變電站內(nèi)保護(hù)、自動(dòng)化、通訊設(shè)備布置緊密，不同部門(mén)維護(hù)的設(shè)備集中在同個(gè)主控室、繼保室的情況較為常見(jiàn)。將巡視卡電子化，軟件通過(guò)標(biāo)記設(shè)備調(diào)取該設(shè)備運(yùn)行記錄及巡視要點(diǎn)，支持異常狀況備注（可文本、語(yǔ)音輸入）及現(xiàn)場(chǎng)拍照存檔；每次巡視作業(yè)均會(huì)記錄并后臺(tái)備份。移動(dòng)端巡查功能檢修人員到達(dá)現(xiàn)場(chǎng)后通過(guò)軟件點(diǎn)擊設(shè)備標(biāo)記，可打開(kāi)一份基于該設(shè)備的維修卡，上面可詳細(xì)錄入作業(yè)人員、班組、外來(lái)人員、作業(yè)類(lèi)型及作業(yè)情況（文字、照片、錄音）；每次檢修作業(yè)均會(huì)記錄并后臺(tái)備份移動(dòng)端檢修功能運(yùn)行人員在檢修變電開(kāi)關(guān)站時(shí)，終端可以智能感知設(shè)備，自動(dòng)顯示設(shè)備更多信息，查看所需數(shù)據(jù)，實(shí)現(xiàn)將所有作業(yè)所需數(shù)據(jù)隨身攜帶，消滅遠(yuǎn)程數(shù)據(jù)獲取的流程，提升工作效率；設(shè)備參數(shù)智能提示設(shè)備歷史信息可查：設(shè)備巡查和檢修過(guò)程中，可查看設(shè)備信息，內(nèi)容可定制，如設(shè)備信息、歷史故障巡查記錄、設(shè)備缺陷記錄、設(shè)備檢修記錄等，這對(duì)于故障、缺陷的迅速判斷及消缺，事后原因分析有重要的指導(dǎo)意義。歷史故障及缺陷查詢(xún)通過(guò)紅外熱成像識(shí)別技術(shù)，可顯示設(shè)備目標(biāo)點(diǎn)溫度信息，并且自動(dòng)記錄在終端的電子巡視卡中，實(shí)現(xiàn)設(shè)備溫度及時(shí)捕捉并自動(dòng)記錄，無(wú)需手動(dòng)輸入，提升信息可靠性，保障設(shè)備安全。紅外識(shí)別溫度常用數(shù)據(jù)管理設(shè)備型號(hào)、設(shè)備；線(xiàn)纜型號(hào)、線(xiàn)纜、開(kāi)關(guān)型號(hào)、二次設(shè)備型號(hào)、缺陷記錄、線(xiàn)纜、巡視記錄、二次設(shè)備型號(hào)。設(shè)備型號(hào)管理類(lèi)型、名稱(chēng)、電壓等級(jí)，其他說(shuō)明等。設(shè)備銘牌信息額定電壓電流、額定短路開(kāi)斷電流、額定短時(shí)耐受電流、額定短路耐受電壓、防護(hù)等級(jí)外殼IP、生產(chǎn)廠商等。設(shè)備型號(hào)設(shè)備線(xiàn)纜型號(hào)線(xiàn)纜開(kāi)關(guān)型號(hào)開(kāi)關(guān)二次設(shè)備型號(hào)二次設(shè)備缺陷blueprint設(shè)備型號(hào)設(shè)備線(xiàn)纜型號(hào)線(xiàn)纜開(kāi)關(guān)型號(hào)開(kāi)關(guān)二次設(shè)備型號(hào)二次設(shè)備缺陷blueprint缺陷記錄：設(shè)備信息，缺陷文字描述、音頻、照片、缺陷等級(jí)，創(chuàng)建日期，完成時(shí)間，完成說(shuō)明記錄等常用數(shù)據(jù)管理設(shè)備位置信息location：三維位置rotation：標(biāo)記朝向設(shè)備型號(hào)設(shè)備線(xiàn)纜型號(hào)線(xiàn)纜開(kāi)關(guān)型號(hào)開(kāi)關(guān)二次設(shè)備型號(hào)二次設(shè)備缺陷blueprint設(shè)備型號(hào)設(shè)備線(xiàn)纜型號(hào)線(xiàn)纜開(kāi)關(guān)型號(hào)開(kāi)關(guān)二次設(shè)備型號(hào)二次設(shè)備缺陷blueprint前往主控室查找資料圖文記憶返回缺陷點(diǎn)完成時(shí)間智能終端調(diào)用圖紙5秒內(nèi)時(shí)效提升120倍以上原作業(yè)方式：現(xiàn)作業(yè)方式：?jiǎn)未卧O(shè)備資料速查時(shí)效對(duì)比1、按巡查路線(xiàn)，室內(nèi)巡查一圈，直至目標(biāo)設(shè)備原作業(yè)方式：2、依據(jù)經(jīng)驗(yàn)判斷，走到設(shè)備面前，校對(duì)是否為目標(biāo)設(shè)備，以及故障點(diǎn)確認(rèn)，一旦錯(cuò)誤，需要返工繼續(xù)尋找。時(shí)間固化，費(fèi)力需多年積累，才能一次定位，對(duì)員工素質(zhì)要求非常高。智能終端選取目標(biāo)1秒定位現(xiàn)作業(yè)方式：1秒定位時(shí)效保障單次設(shè)備定位時(shí)效對(duì)比10分鐘以上時(shí)效人員要求完成時(shí)效AR應(yīng)用AR應(yīng)用AR智能運(yùn)檢產(chǎn)品效果圖1設(shè)備信息自動(dòng)呈現(xiàn)作業(yè)人員能通過(guò)圖像識(shí)別和深度感知的AR技術(shù)，聯(lián)動(dòng)內(nèi)網(wǎng)信息系統(tǒng)實(shí)現(xiàn)設(shè)備數(shù)據(jù)在屏幕上的自動(dòng)呈現(xiàn)，無(wú)需手動(dòng)操作，提升企業(yè)生產(chǎn)力。2提升管理質(zhì)量為管理者提供了一個(gè)全面的多功能信息平臺(tái)。解決傳統(tǒng)巡檢作業(yè)存在巡檢效果不良，工作效果難以鑒定的缺陷。3智能化交互體驗(yàn)基于厘米級(jí)定位和自動(dòng)障礙物規(guī)避技術(shù)實(shí)現(xiàn)智能導(dǎo)航、定位，在幫助運(yùn)行人員工作快速消缺的同時(shí)，為企業(yè)增加豐富的行業(yè)應(yīng)用經(jīng)驗(yàn)。4安全、智能化作業(yè)通過(guò)信息化手段，將班組日常作業(yè)，工作軟件化、移動(dòng)化，實(shí)現(xiàn)安全生產(chǎn)作業(yè)并結(jié)合AR技術(shù)規(guī)范現(xiàn)場(chǎng)作業(yè)流程、實(shí)現(xiàn)智能化作業(yè)、優(yōu)化工作體驗(yàn)。5資產(chǎn)管理及時(shí)準(zhǔn)確拉通前端作業(yè)人員與后端資產(chǎn)管理人員的信息通道，保障資產(chǎn)變動(dòng)、設(shè)備檢修等信息的準(zhǔn)確、及時(shí)傳遞。應(yīng)用背景客戶(hù)現(xiàn)狀1目錄CONTENTS解決方案23應(yīng)用案例4案例項(xiàng)目實(shí)現(xiàn)功能移動(dòng)端故障點(diǎn)精準(zhǔn)路線(xiàn)設(shè)計(jì)功能移動(dòng)端巡查、檢修功能設(shè)備參數(shù)智能提示、歷史故障及缺陷查詢(xún)紅外識(shí)別溫度設(shè)備信息管理、常用數(shù)據(jù)、缺陷管理（后臺(tái)）Future嘗試實(shí)現(xiàn)AR智能運(yùn)檢終端機(jī)系統(tǒng)與PMS、設(shè)備狀態(tài)評(píng)價(jià)/缺陷模塊乃至技術(shù)監(jiān)督模塊的信息共享與聯(lián)動(dòng)。序號(hào)周期開(kāi)發(fā)內(nèi)容11個(gè)月簽訂項(xiàng)目合同，確定總體工作方案，開(kāi)展調(diào)研，進(jìn)行相關(guān)資料的查詢(xún)、分析以及收集。20.5個(gè)月制定詳細(xì)的項(xiàng)目實(shí)施計(jì)劃，建立組織體系，評(píng)估項(xiàng)目的實(shí)施計(jì)劃，設(shè)計(jì)系統(tǒng)總體框架，