DB23-T 3474-2023非煤智慧礦山信息系統(tǒng)技術(shù)規(guī)范

ICS35.240.5023CCSL6723黑 龍 江 省 地 方 標 準DB23/TXXXX—XXXX非煤智慧礦山信息系統(tǒng)技術(shù)規(guī)范XXXX-XX-XX發(fā)布 XXXX-XX-XX實施黑龍江省市場監(jiān)督管理局 發(fā)布DB23/XXXXXDB23/XXXXX—XXXXPAGE\*ROMANPAGE\*ROMANII目??次前言 II范圍 1規(guī)范性引用文件 1術(shù)語和定義 1縮略語 1一般要求 1基本流程 3技術(shù)評價 4附錄A（資料性）非煤智慧礦山信息系統(tǒng)框架設(shè)計示意圖 5參考文獻 6前 言本文件按照GB/T1.1-2020《標準化工作導(dǎo)則第1部分∶標準化文件的結(jié)構(gòu)和起草規(guī)則》的規(guī)定起草。請注意本文件的某些內(nèi)容可能涉及專利。本文件的發(fā)布機構(gòu)不承擔識別專利的責(zé)任。本文件由黑龍江省工業(yè)和信息化廳提出并歸口。本文件起草單位：黑龍江省工業(yè)信息化發(fā)展中心(黑龍江省電子技術(shù)研究所)、黑龍江創(chuàng)新推廣工業(yè)互聯(lián)網(wǎng)發(fā)展中心有限公司、黑龍江省標準化研究院。本文件主要起草人：鄭顯生、郭宇亮、王勝男、羅松、陳要武、王偉健、施曉林、董力、王丹丹、董震宇、王淼庚、車涵、李輝、姜欣、李寶才、王軍、左曉英、劉鵬林、曲鵬飛、劉昊、嚴悅、張顏遵。DB23/XXXXXDB23/XXXXX—XXXXPAGEPAGE1非煤智慧礦山信息系統(tǒng)技術(shù)規(guī)范范圍本文件給出了非煤智慧礦山信息系統(tǒng)建設(shè)的術(shù)語和定義、縮略語、一般要求、基本流程和技術(shù)評價。本文件適用于非煤（有色、鐵、石墨等）礦山的信息化、數(shù)字化、智慧化等信息系統(tǒng)大數(shù)據(jù)平臺的建設(shè)。規(guī)范性引用文下列文件中的內(nèi)容通過文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中，注日期的引用文件，僅該日期對應(yīng)的版本適用于本文件；不注日期的引用文件，其最新版本（包括所有的修改單）適用于本文件。GB/T34679-2017智慧礦山信息系統(tǒng)通用技術(shù)規(guī)范術(shù)語和定義GB/T34679-2017界定的術(shù)語和定義適用于本文件。3.1智慧礦山基于空間和時間的四維地理信息、泛在網(wǎng)、云計算、大數(shù)據(jù)、虛擬化、計算機軟件及各種網(wǎng)絡(luò),集成應(yīng)用各類傳感感知、數(shù)據(jù)通信、自動控制、智能決策等技術(shù),對礦山信息化、工業(yè)自動化深度融合,能夠完成礦山企業(yè)所有信息的精準適時采集、高可靠網(wǎng)絡(luò)化傳輸、規(guī)范化信息集成、實時可視化展現(xiàn)、生產(chǎn)環(huán)節(jié)自動化運行,能為各類決策提供智能化服務(wù)的數(shù)字化智慧體,并對人—機—環(huán)的隱患、故障和危險源提前預(yù)知和防治,使整個礦山具有自我學(xué)習(xí)、分析和決策能力。[來源：GB/T34679-2017,3.1]3.2大數(shù)據(jù)平臺是一種通過內(nèi)容共享、資源共用、渠道共建和數(shù)據(jù)共通等形式來進行服務(wù)的網(wǎng)絡(luò)平臺，是以處理海量數(shù)據(jù)存儲、計算及不間斷流數(shù)據(jù)實時計算等場景為主的基礎(chǔ)設(shè)施?？s略語下列縮略語適用于本文件。API應(yīng)用程序編程接口（ApplicationProgrammingInterface）ETL數(shù)據(jù)抽取轉(zhuǎn)換加載(ExtractTransformLoad)MDM主數(shù)據(jù)管理（MasterDataManagement）ODS操作數(shù)據(jù)存儲（OperationalDataStore）URL統(tǒng)一資源定位系統(tǒng)(UniformResourceLocator)一般要求建設(shè)目標平臺建設(shè)應(yīng)實現(xiàn)：對非煤智慧礦山信息化、自動化深度融合，完成非煤智慧礦山企業(yè)信息的精準適時采集、高可靠網(wǎng)絡(luò)化傳輸、規(guī)范化信息集成；實時可視化展現(xiàn)、生產(chǎn)環(huán)節(jié)自動化運行，實現(xiàn)非煤礦山生產(chǎn)的智慧化管理；為非煤智慧礦山生產(chǎn)各類決策提供智能化服務(wù)的數(shù)字化智慧體；對非煤智慧礦山生產(chǎn)的隱患、故障和危險源提前預(yù)知和防治；使整個礦山具有自我學(xué)習(xí)、分析和決策能力。主要功能平臺主要功能應(yīng)包括：通過梳理非煤智慧礦山建設(shè)中底層大數(shù)據(jù)平臺的設(shè)計和開發(fā)數(shù)據(jù)標準規(guī)范體系，實現(xiàn)非煤智慧礦山多系統(tǒng)數(shù)據(jù)互聯(lián)；構(gòu)建業(yè)務(wù)集約化管控大數(shù)據(jù)平臺，含數(shù)據(jù)倉庫、數(shù)據(jù)綜合采集平臺、各主題數(shù)據(jù)分析模型、多端數(shù)據(jù)圖表展示系統(tǒng)和數(shù)據(jù)運維全局監(jiān)控平臺；實現(xiàn)安全生產(chǎn)核心數(shù)據(jù)的互聯(lián)互通和資源共享，滿足非煤智慧礦山底層數(shù)據(jù)采集、存儲、分析、展示等多維應(yīng)用；提供創(chuàng)新性研究的數(shù)據(jù)基礎(chǔ)，提升安全生產(chǎn)綜合監(jiān)測風(fēng)險預(yù)警和生產(chǎn)智能化能力。建設(shè)原則平臺建設(shè)原則包括：安全性。大數(shù)據(jù)平臺應(yīng)采取安全性高的訪問認證機制，同時在平臺建設(shè)中應(yīng)充分重視系統(tǒng)自身的安全性，并保證數(shù)據(jù)的安全性；可擴展性。大數(shù)據(jù)平臺的設(shè)計和研發(fā)應(yīng)具有良好的擴展性，以滿足業(yè)務(wù)不斷發(fā)展變化的要求；靈活性。在大數(shù)據(jù)平臺的設(shè)計和實施中要考慮與其他應(yīng)用系統(tǒng)的整合，能夠?qū)崿F(xiàn)多種類型的接口，并可以靈活地接入其他系統(tǒng)中，拓展服務(wù)類型和服務(wù)能力?？蚣茉O(shè)計平臺整體框架設(shè)計應(yīng)根據(jù)數(shù)據(jù)的流向自底向上劃分為四層（見附錄A）：ETL數(shù)據(jù)計算層。實現(xiàn)離線數(shù)據(jù)計算、實時計算、ODSDM數(shù)據(jù)服務(wù)層。實現(xiàn)讀寫分離功能，將偏向應(yīng)用的查詢等能力與計算能力剝離，包括實時查詢、多維查詢、常規(guī)查詢、系統(tǒng)對接等應(yīng)用場景；數(shù)據(jù)產(chǎn)品層。實現(xiàn)不同場景的數(shù)據(jù)應(yīng)用功能，包括生產(chǎn)數(shù)據(jù)分析、安防數(shù)據(jù)分析，人員定位數(shù)據(jù)分析、各核心系統(tǒng)數(shù)據(jù)監(jiān)控、數(shù)據(jù)調(diào)度等應(yīng)用場景?；玖鞒虜?shù)據(jù)采集數(shù)據(jù)采集應(yīng)滿足：基于以太網(wǎng)模式的網(wǎng)絡(luò)鏈接；基于組態(tài)軟件的實時性；基于可視化的過程監(jiān)控；支持圍繞數(shù)據(jù)質(zhì)量做輕量清洗；支持數(shù)據(jù)轉(zhuǎn)換自動化；支持多種工業(yè)數(shù)據(jù)協(xié)議采集。數(shù)據(jù)交換數(shù)據(jù)交換過程應(yīng)滿足：URL請求數(shù)據(jù)：數(shù)據(jù)在消息傳輸過程中，通過表單或字符串參數(shù)提交；響應(yīng)數(shù)據(jù)：相應(yīng)數(shù)據(jù)直接放入請求響應(yīng)的數(shù)據(jù)流中，獲得相應(yīng)字符流按照數(shù)據(jù)格式解析為對應(yīng)的響應(yīng)數(shù)據(jù)；webservice，socket，http數(shù)據(jù)接口調(diào)用數(shù)據(jù)接口調(diào)用方式應(yīng)注意：業(yè)務(wù)系統(tǒng)對接應(yīng)掌握系統(tǒng)內(nèi)部數(shù)據(jù)計算邏輯，調(diào)用數(shù)據(jù)倉庫接口時統(tǒng)一調(diào)用接口報文轉(zhuǎn)換工APIAPI統(tǒng)一接口報文轉(zhuǎn)換工具的接口不關(guān)心業(yè)務(wù)規(guī)則與流程，應(yīng)關(guān)注接口調(diào)用的規(guī)則以及其他細節(jié)，同時高擴展性，如：加解密、簽名，報文封裝，報文轉(zhuǎn)換效率。API業(yè)務(wù)系統(tǒng)與數(shù)據(jù)倉庫的接口調(diào)用，與調(diào)用系統(tǒng)內(nèi)部其他模塊一樣，不需要專門約束和單獨的系統(tǒng)級接口開發(fā)。也滿足數(shù)據(jù)倉庫自身的數(shù)據(jù)質(zhì)量要求。主數(shù)據(jù)管理MDM建模。用靈活的數(shù)據(jù)模型定義任意類型的主數(shù)據(jù)；識別?？焖倨ヅ浜蜏蚀_識別重復(fù)項目；解決。合并以創(chuàng)建可靠、唯一的真實來源；聯(lián)系。揭示各類主數(shù)據(jù)之間的關(guān)系；治理。創(chuàng)建、使用、管理和監(jiān)控主數(shù)據(jù)。MDM數(shù)據(jù)分析建模數(shù)據(jù)分析建模應(yīng)滿足：能夠為數(shù)據(jù)分析師、業(yè)務(wù)人員提供更多的數(shù)據(jù)建模功能和數(shù)據(jù)的洞察，讓數(shù)據(jù)更加智能化；支持對數(shù)據(jù)進行多維度下鉆、單圖之間數(shù)據(jù)聯(lián)動、對數(shù)據(jù)異常點進行標注、指標異常檢測等功能。數(shù)據(jù)下鉆數(shù)據(jù)下鉆應(yīng)滿足：通過多維度數(shù)據(jù)下鉆，分析更為精確詳細的數(shù)據(jù)；通過查找數(shù)據(jù)異常的點，分析數(shù)據(jù)出現(xiàn)問題的點和原因。數(shù)據(jù)聯(lián)動平臺進行業(yè)務(wù)分析的時候，應(yīng)進行數(shù)據(jù)聯(lián)動，根據(jù)一個表的數(shù)據(jù)變化情況聯(lián)動展現(xiàn)其他相關(guān)表的數(shù)據(jù)。數(shù)據(jù)聯(lián)動宜將圖表作為篩選器，點擊一個數(shù)據(jù)項，與其關(guān)聯(lián)的圖表將會篩選出所選項的數(shù)據(jù)內(nèi)容。數(shù)據(jù)異常檢測通過分析海量數(shù)據(jù)，從中發(fā)現(xiàn)數(shù)據(jù)集中隱含的模式和規(guī)律。在海量數(shù)據(jù)中實時發(fā)現(xiàn)異常的數(shù)據(jù)，并把它們轉(zhuǎn)為有價值的商業(yè)信息，支持快速的商業(yè)決策。平臺應(yīng)能夠自動檢測指標異常，給出預(yù)警提示，及時發(fā)現(xiàn)業(yè)務(wù)的問題，起到保障作用。數(shù)據(jù)異常分析通過異常分析查找數(shù)據(jù)波動的原因，并根據(jù)日常運營工作和數(shù)據(jù)波動之間的相關(guān)性及影響程度，找到促進數(shù)據(jù)增長的途徑，改善數(shù)據(jù)結(jié)果。數(shù)據(jù)可視化數(shù)據(jù)可視化應(yīng)滿足：支持各種類型的數(shù)據(jù)源整合到一張報表中；將單元格和數(shù)據(jù)綁定，快速對數(shù)據(jù)進行清洗、計算和統(tǒng)計；PC、手機、大屏等進行瀏覽和分析；內(nèi)置多種圖表樣式，通過輸入數(shù)據(jù)維護對報表樣式進行推薦，打造出各種樣式的數(shù)據(jù)可視化效果。技術(shù)評價依據(jù)《工業(yè)和信息化部辦公廳關(guān)于印發(fā)<建材工業(yè)智能制造數(shù)字轉(zhuǎn)型行動計劃（2021-2023年）>的通知》、《黑龍江省人民政府關(guān)于印發(fā)推動“數(shù)字龍江”建設(shè)加快數(shù)字經(jīng)濟高質(zhì)量發(fā)展若干政策措施的通知》等文件開展評價工作。附錄A（資料性）非煤智慧礦山信息系統(tǒng)框架hive大數(shù)據(jù)處理Redis數(shù)據(jù)緩存Druid連接地管理Kafka流數(shù)據(jù)分發(fā)調(diào)度清洗實時計算hive大數(shù)據(jù)處理Redis數(shù)據(jù)緩存Druid連接地管理Kafka流數(shù)據(jù)分發(fā)調(diào)度清洗實時計算記錄數(shù)據(jù)計算層數(shù)據(jù)產(chǎn)品層數(shù)據(jù)服務(wù)層業(yè)務(wù)統(tǒng)計應(yīng)用監(jiān)控數(shù)據(jù)巴士數(shù)據(jù)地圖業(yè)務(wù)統(tǒng)計應(yīng)用監(jiān)控數(shù)據(jù)巴士數(shù)據(jù)地圖元數(shù)據(jù)管理數(shù)據(jù)建模大屏展示數(shù)據(jù)下站元數(shù)據(jù)管理數(shù)據(jù)建模大屏展示數(shù)據(jù)下站DM數(shù)據(jù)質(zhì)量管理DM數(shù)據(jù)質(zhì)量管理機器學(xué)習(xí)基礎(chǔ)數(shù)據(jù)緩存深度學(xué)習(xí)數(shù)據(jù)倉庫基礎(chǔ)數(shù)據(jù)緩存深度學(xué)習(xí)數(shù)據(jù)倉庫數(shù)據(jù)庫后臺服務(wù)日志采集報文轉(zhuǎn)換數(shù)據(jù)采