




版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)
文檔簡介
PAGEPAGE1湖南高創(chuàng)新能源公司智慧新能源生產(chǎn)運營平臺建設(shè)方案20202目錄智慧業(yè)層計 5智慧業(yè)涵 5智慧業(yè)力 6智慧業(yè)心征 6智慧業(yè)設(shè)的 7智慧業(yè)設(shè)務(wù) 7智慧業(yè)息規(guī)的殊性 8智慧業(yè)撐術(shù) 8智慧業(yè)撐具 9工業(yè)數(shù)平設(shè)理念 9平臺能成 9平臺點 10智慧業(yè)劃圖 10智慧業(yè)設(shè)目劃議 10智能能生運平建設(shè)目景 12湖南創(chuàng)能公司 12問題挑戰(zhàn) 13宏觀上 13微觀上 13發(fā)展念 13項目圍 14項目標(biāo) 15建設(shè)標(biāo) 15建設(shè)路 15“三大多”設(shè)路 15構(gòu)建“平、中心總體架 16項目設(shè)則 17項目體計 17智慧能生運平臺 17標(biāo)準(zhǔn)范 17總體構(gòu) 18方案構(gòu) 19功能構(gòu) 19數(shù)據(jù)構(gòu) 20技術(shù)構(gòu) 22部署構(gòu) 22網(wǎng)絡(luò)全 24建設(shè)案 25集中控統(tǒng) 25集控統(tǒng)構(gòu) 25數(shù)據(jù)集傳輸 26集中控統(tǒng)能 30數(shù)據(jù)口 38設(shè)備單 38系統(tǒng)圖 38一體工大據(jù)臺 44基礎(chǔ)臺 45公共務(wù)件 45數(shù)據(jù)臺 50可視開發(fā) 152大屏駛艙 1537.3.1 駕駛艙 153OA看板 157財務(wù)板 157運行視心 158實時視 158在線析 159告警理 161風(fēng)電效分析 162安全產(chǎn)心生管系統(tǒng)) 163設(shè)備賬 163值班行 165兩票理 166缺陷理 168班組訓(xùn)理 169技術(shù)理 170安全理 170巡檢理 170定期作理 170檢修理 170技術(shù)督 170備件資理 170智能動用 171決策析 171故障警心 171預(yù)測維護 171故障警 171健康估 174性能化 175智能策揮心 175智能產(chǎn)策 175智能表心 176日常表示 176生產(chǎn)標(biāo)理 179指標(biāo)析用 179智能防心 179安全護系 179設(shè)備全 179人員全 180環(huán)境全 180實施服務(wù) 182智慧企業(yè)頂層設(shè)計智慧企業(yè)內(nèi)涵智慧企業(yè)不是簡單的自動化、單純的數(shù)字化和孤立的信息化。智慧企業(yè)的內(nèi)涵是以“云大物移智”技術(shù)為驅(qū)動的企業(yè)系統(tǒng)性整體深度轉(zhuǎn)型,是企業(yè)技術(shù)創(chuàng)新、管理創(chuàng)新、模式創(chuàng)新融合的協(xié)同創(chuàng)新。技術(shù)創(chuàng)新:(融合特性新的智能發(fā)電基礎(chǔ)設(shè)施,為電力生產(chǎn)、經(jīng)營和管理全方位智慧賦能新技術(shù)必然帶來新的架構(gòu)、新的賦能、新的轉(zhuǎn)變架構(gòu):從傳統(tǒng)IT架構(gòu)走向智能云架構(gòu)電站:從工業(yè)控制走向工業(yè)智能+從單個智能設(shè)備走向群體協(xié)同智能;業(yè)務(wù):從流程管控走向數(shù)據(jù)驅(qū)動實現(xiàn)OT&管理的全面自動化管理創(chuàng)新:超越過去工業(yè)化時代大規(guī)模生產(chǎn)的層級制的線性組織管理思維;形成適應(yīng)動態(tài)敏捷、扁平化、平臺化生態(tài)的組織柔性和戰(zhàn)略應(yīng)變能力勢。模式創(chuàng)新:技術(shù)創(chuàng)新推動管理創(chuàng)新+技術(shù)和管理創(chuàng)新的融合會帶來模式創(chuàng)新;C(互聯(lián)網(wǎng)金融等諸多商業(yè)模式目前對B端傳統(tǒng)企業(yè)的數(shù)字科技深化應(yīng)用+必將變革企業(yè)現(xiàn)有業(yè)務(wù)模式。智慧企業(yè)能力智慧企業(yè)(IntelligentEnterprise),和數(shù)字化演進(jìn)基礎(chǔ)上更高的演進(jìn)形態(tài)。智慧企業(yè)核心特征智慧企業(yè)應(yīng)該具備五大核心特征:數(shù)據(jù)賦能、全局協(xié)同、人機協(xié)作、優(yōu)化配置、自動自主。數(shù)據(jù)賦能 將數(shù)據(jù)轉(zhuǎn)變?yōu)樯a(chǎn)力,數(shù)據(jù)驅(qū)動企業(yè)的優(yōu)化決策;全局協(xié)同 等,與公司生產(chǎn)、管理、經(jīng)營密切相關(guān)的外部因素;人機協(xié)作 深度交互迭代,共同提升企業(yè)整體智慧能力優(yōu)化配置 率自動自主分析、判斷、決策、執(zhí)行、控制,甚至是自主演進(jìn)智慧企業(yè)建設(shè)目的智慧企業(yè)建設(shè)目的是“價值創(chuàng)造、降本增效、產(chǎn)品(服務(wù))升級、安全生產(chǎn)”,進(jìn)而打造新的綜合競爭優(yōu)勢,實現(xiàn)高質(zhì)量轉(zhuǎn)型發(fā)展。智慧企業(yè)建設(shè)任務(wù)建立新型的智慧企業(yè)管理體系釋放技術(shù)革命帶來的動能轉(zhuǎn)換,完成企業(yè)結(jié)構(gòu)調(diào)整和轉(zhuǎn)型升級。構(gòu)建先進(jìn)的發(fā)電智能基礎(chǔ)設(shè)施5G形成一流的企業(yè)智慧管理能力 支持企業(yè)可持續(xù)、高質(zhì)量的戰(zhàn)略發(fā)展要求。智慧企業(yè)信息化規(guī)劃的特殊性一性、融合性、先進(jìn)性和實用性。IT/微服務(wù),作業(yè)分散/管理集中,穩(wěn)態(tài)/敏態(tài),協(xié)同/費/生產(chǎn),IT/OT智慧企業(yè)支撐技術(shù)業(yè),變傳統(tǒng)之結(jié)構(gòu),賦智慧之動能5G能+”時代的到來。圖技術(shù)變革周期智慧企業(yè)支撐工具工業(yè)大數(shù)據(jù)平臺設(shè)計理念性、多樣性、擾動進(jìn)行隔離并分階段自適應(yīng)提供快速構(gòu)建數(shù)據(jù)計算、數(shù)據(jù)展現(xiàn)的平臺和服務(wù)平臺功能組成數(shù)據(jù)中臺業(yè)務(wù)中臺可視化開發(fā)Avatar數(shù)據(jù)交換平臺(DDaaS)Avatar業(yè)務(wù)對象管理(BOMS)Avatar計算調(diào)度平臺(GICS)Avatar數(shù)據(jù)存儲平臺(HSS)Avatar場景構(gòu)造器(CBS)Avatar服務(wù)管理(SvrOPS)1010Avatar(SmartETL)平臺特點完整:完整支持從建模到數(shù)據(jù)采集、存儲和分析的服務(wù)。全面:高性能、高敏捷支持跨行業(yè)、跨領(lǐng)域、多樣化場景需求。專業(yè):內(nèi)置大量成熟數(shù)據(jù)算子、工業(yè)算子與電力算子,支持?jǐn)U展。靈活:平臺部署靈活,具有高擴展性,支持集群部署。易用:實現(xiàn)從前端交互到數(shù)據(jù)訪問的可配置化,使用方便。品種產(chǎn)品智慧企業(yè)規(guī)劃藍(lán)圖智慧企業(yè)建設(shè)項目規(guī)劃建議集中控制系統(tǒng)一體化數(shù)據(jù)服務(wù)平臺(工業(yè)大數(shù)據(jù)平臺)智能生產(chǎn)運營平臺智能市場營銷平臺智能黨建文化平臺智能財務(wù)平臺11PAGE1等。智能新能源生產(chǎn)運營平臺建設(shè)項目背景湖南高創(chuàng)新能源公司湖南高創(chuàng)新能源有限公司成立于20105月12日,注冊資本16.8121于湖南省新能源行業(yè)前列。80100推動公司健康、持續(xù)、高質(zhì)量的發(fā)展。問題與挑戰(zhàn)宏觀上全球新一輪技術(shù)和產(chǎn)業(yè)革命有力推進(jìn)國家能源發(fā)展戰(zhàn)略引領(lǐng)新能源發(fā)電行業(yè)向智能化發(fā)展公司智慧化變革發(fā)展需求公司信息化水平提升需要微觀上監(jiān)視、統(tǒng)一管控和資源共享,提升單位競爭力和效益。發(fā)展理念協(xié)同理念:應(yīng)用協(xié)同和管理協(xié)同安全理念:5G力、防范潛在風(fēng)險,提升安全生產(chǎn)水平共享理念:管理過程及知識模型共享。高效理念:智能理念:項目范圍能應(yīng)用。項目目標(biāo)建設(shè)目標(biāo)據(jù)處理、數(shù)據(jù)分析,建成智慧企業(yè)大數(shù)據(jù)基礎(chǔ)框架。建設(shè)涵蓋高創(chuàng)新能源公司旗下全部場站的集中控制系統(tǒng)。整合集控、OA實現(xiàn)領(lǐng)導(dǎo)駕駛艙展示。決策指揮中心,初步實現(xiàn)遠(yuǎn)程監(jiān)控、故障預(yù)警、無人值守、少人值班。建設(shè)思路“三大三多”建設(shè)思路基于大集控,大數(shù)據(jù),大平臺,實現(xiàn)多組件,多(模型)算法,多(應(yīng)用)運營平臺。構(gòu)建“一平臺、多中心”的總體框架心。構(gòu)成“一平臺、多中心”的總體功能架構(gòu)。項目建設(shè)原則項目總體設(shè)計智慧新能源生產(chǎn)運營平臺標(biāo)準(zhǔn)規(guī)范準(zhǔn)和規(guī)范?!段⑿陀嬎銠C通用規(guī)范》(GB/T9813-2000)《計算機軟件文檔編制規(guī)范》(GB/T8567-2006)(GB/T9385-2008)(GB/T9386-2008)《計算機軟件可靠性和可維護性管理》(GB/T14394-2008)《計算機軟件測試規(guī)范》(GB/T15532-2008)《基于J2EE的應(yīng)用服務(wù)器技術(shù)規(guī)范》(GB/T26232-2010)《計算機信息系統(tǒng)安全保護等級劃分準(zhǔn)則》(GB17859-1999)《信息安全技術(shù)術(shù)語》(GB/T25069-2010)《信息技術(shù)大數(shù)據(jù)術(shù)語》(GB/T35295-2017)《信息技術(shù)互操作性元模型框架(MFI)(GB/T32392.1-2015)(GB/T18391)(GB/T28821-2012)《關(guān)系數(shù)據(jù)庫管理系統(tǒng)檢測規(guī)范》(GB/T30994-2014)(GB/T32633-2016)(GB/T32630-2016)《信息安全技術(shù)信息系統(tǒng)安全等級保護實施指南》(GB/T25058-2010)《信息安全技術(shù)大數(shù)據(jù)服務(wù)安全能力要求》(GB∕T35274-2017)《信息安全技術(shù)數(shù)據(jù)庫管理系統(tǒng)安全評估準(zhǔn)則》(GB/T20009-2005)《信息安全技術(shù)數(shù)據(jù)庫管理系統(tǒng)安全技術(shù)》(GB/T20273-2006)《中華人民共和國公共安全行業(yè)標(biāo)準(zhǔn)》(GA/T74-94)計算機開放與系統(tǒng)互聯(lián)國家標(biāo)準(zhǔn)(GB)IEC國際電工委員會標(biāo)準(zhǔn):IEC60950信息技術(shù)設(shè)備的安全要求(91)其他相關(guān)的國家、行業(yè)及地方標(biāo)準(zhǔn)與規(guī)范等以上相關(guān)標(biāo)準(zhǔn)和規(guī)范中如有內(nèi)容不一致之處,則按如下優(yōu)先級順序使用:國家標(biāo)準(zhǔn)、規(guī)范國際標(biāo)準(zhǔn)、規(guī)范部頒標(biāo)準(zhǔn)、規(guī)范行業(yè)標(biāo)準(zhǔn)、規(guī)范地方標(biāo)準(zhǔn)、規(guī)范企業(yè)標(biāo)準(zhǔn)、規(guī)范制造商使用的標(biāo)準(zhǔn)、規(guī)范當(dāng)規(guī)范與本技術(shù)規(guī)格書要求之間發(fā)生沖突時,采用其中最為嚴(yán)格的要求。和標(biāo)準(zhǔn)都不低于所述規(guī)范和標(biāo)準(zhǔn)??傮w架構(gòu)方案架構(gòu)功能架構(gòu)2020數(shù)據(jù)架構(gòu)業(yè)務(wù)層面22PAGE1技術(shù)層面技術(shù)架構(gòu)部署架構(gòu)省內(nèi)省外網(wǎng)絡(luò)安全制等現(xiàn)有專業(yè)能力。理隔離。級別生成對應(yīng)的數(shù)據(jù)安全策略。數(shù)據(jù)存儲安全:支持?jǐn)?shù)據(jù)的加密存儲。持動態(tài)脫敏和靜態(tài)脫敏。RBAC用戶僅能在自己的權(quán)限范圍內(nèi)使用數(shù)據(jù)資產(chǎn)?;蚍欠ǖ臄?shù)據(jù)訪問行為。建設(shè)方案集中監(jiān)控系統(tǒng)集控系統(tǒng)架構(gòu)源電站側(cè)通過網(wǎng)絡(luò)通道完成數(shù)據(jù)傳輸。中心側(cè)安全Ⅲ區(qū)的管理區(qū)展示功能,并且進(jìn)行生產(chǎn)數(shù)據(jù)的統(tǒng)計分析。風(fēng)電場側(cè)場側(cè)視頻監(jiān)控信息。網(wǎng)絡(luò)通道網(wǎng)要求和實際情況為準(zhǔn)。網(wǎng)絡(luò)通道數(shù)據(jù)采集和傳輸據(jù)展現(xiàn)、統(tǒng)計分析提供數(shù)據(jù)基礎(chǔ)。數(shù)據(jù)采集接口支持多種接口程序如ModbusOPC、IEC-103IEC-104端的通訊。到一定的網(wǎng)絡(luò)冗余,以提高系統(tǒng)的可靠性和安全性。168統(tǒng)計數(shù)據(jù)的連續(xù)性和準(zhǔn)確性。風(fēng)電場數(shù)據(jù)采集風(fēng)力發(fā)電機組數(shù)據(jù)采集IEC61400-25規(guī)約、Modbus、TCP/IP、IEC-101/IEC-103/IEC-104廠家的通信協(xié)議采集風(fēng)力發(fā)電機組數(shù)據(jù)。準(zhǔn):風(fēng)電機組運行狀態(tài)信息。風(fēng)電機組運行數(shù)據(jù)風(fēng)電機組部件數(shù)據(jù)風(fēng)電機組所有故障信息事件代碼和事件發(fā)生時間。升壓站數(shù)據(jù)采集可能需要重新啟動遠(yuǎn)動通信裝置,需與電網(wǎng)部門提前溝通。升壓站采集數(shù)據(jù)點建議包括以下幾類,具體采集點表以現(xiàn)場實際情況為準(zhǔn):功功率、功率因數(shù)。遙信量:包括隔離開關(guān)、接地刀閘、斷路器、手車的開關(guān)狀態(tài)。遙控:主設(shè)備、主回路的斷路器分合指令。遙調(diào):主變、無功補償。箱變實時數(shù)據(jù)采集況確定。功率預(yù)測數(shù)據(jù)采集功率預(yù)測數(shù)據(jù)包括24小時短期預(yù)測數(shù)據(jù)、0~4系統(tǒng)采集風(fēng)電功率預(yù)測系統(tǒng)運行數(shù)據(jù)并上傳至中心側(cè)。功率預(yù)測采集數(shù)據(jù)點建議包括氣象數(shù)據(jù)、測風(fēng)塔和功率預(yù)測數(shù)據(jù)三部分,具體采集點表以現(xiàn)場實際情況為準(zhǔn).功率控制系統(tǒng)(AGC/AVC)數(shù)據(jù)采集(開放接口條件AGC/AVC(無功)(無功部署的功率控制系統(tǒng)實際情況為準(zhǔn)。電能量計量信息采集數(shù)據(jù)采集系統(tǒng)通過遠(yuǎn)動裝置或電能量計量裝置采集數(shù)據(jù)(具備開放接口條件,包括正向有功電度、正向無功電度、反向有功電度、反向無功電度。具體采集以現(xiàn)場實際情況為準(zhǔn)。數(shù)據(jù)預(yù)處理與融合數(shù)據(jù)預(yù)處理與融合包含數(shù)據(jù)格式標(biāo)準(zhǔn)化,模擬量預(yù)處理,狀態(tài)量預(yù)處理,電形成標(biāo)準(zhǔn)化格式,統(tǒng)一存儲與應(yīng)用。數(shù)據(jù)傳輸數(shù)據(jù)傳輸機制。數(shù)據(jù)安全性數(shù)據(jù)加密數(shù)據(jù)由電站側(cè)上傳到集控系統(tǒng),具備數(shù)據(jù)加密和安全隔離功能,以保證通過網(wǎng)絡(luò)遠(yuǎn)程傳輸?shù)臄?shù)據(jù)不會被惡意監(jiān)聽或破壞,保障系統(tǒng)的底層數(shù)據(jù)安全。數(shù)據(jù)采集接口的故障管理與數(shù)據(jù)緩存實時數(shù)據(jù)接口的故障管理與數(shù)據(jù)緩存包括如下功能:恢復(fù)正常運行。析使用。不丟失。3030數(shù)據(jù)計算和存儲數(shù)據(jù)計算系統(tǒng)的計算和統(tǒng)計模塊主要是針對電站生產(chǎn)數(shù)據(jù)的二次加工,對各層管理和檢修人員更直接的了解風(fēng)電機組設(shè)備的運行情況,對各層資源數(shù)據(jù)的有效梳理,便于更有效的管理、指導(dǎo)現(xiàn)場生產(chǎn)運行,提高經(jīng)濟效益。對所采集的所有量能進(jìn)行綜合計算和統(tǒng)計,以派生出新的模擬量、狀態(tài)量、計算量,派生計算量能像采集量一樣進(jìn)行數(shù)據(jù)庫定義、處理、存檔和計算等。數(shù)據(jù)存儲系統(tǒng)將采集的數(shù)據(jù)進(jìn)行處理后分別存儲到歷史數(shù)據(jù)庫和關(guān)系數(shù)據(jù)庫中。1)提供訪問歷史數(shù)據(jù)庫的接口并可隨時檢索和使用。具備備份管理功能具備歷史數(shù)據(jù)統(tǒng)計計算功能系統(tǒng)提供圖形界面的歷史數(shù)據(jù)檢索工具。在數(shù)據(jù)庫和應(yīng)用系統(tǒng)發(fā)生切換時不丟失任何采樣數(shù)據(jù)。具備歷史數(shù)據(jù)庫的鏡像機制。集中監(jiān)控系統(tǒng)功能實時監(jiān)視電場側(cè)設(shè)備采集并上傳至集控中心。集控系統(tǒng)能夠以列表方式或者電子地圖方式顯示系統(tǒng)內(nèi)所有風(fēng)電場的分布以圖形導(dǎo)航的方式進(jìn)入某個具體風(fēng)電場的集控界面。支持各種圖形、表格、曲線、棒圖、餅圖、系統(tǒng)工況圖等表示方式。33PAGE1針對每個風(fēng)電場,集控系統(tǒng)通過統(tǒng)一的風(fēng)格對設(shè)備進(jìn)行監(jiān)視。區(qū)域公司整體信息監(jiān)視集控系統(tǒng)能夠以列表方式或者電子地圖方式顯示系統(tǒng)內(nèi)所有風(fēng)電場的分布情況,并能夠顯示(包括但限于)總裝機容量、總發(fā)電量等信息。(包括但限于電量、月等效小時數(shù)、年等效小時數(shù)、風(fēng)機運行狀態(tài)的綜合展現(xiàn)。風(fēng)電場信息監(jiān)視情頁面。某臺風(fēng)電機組的矩陣圖標(biāo),可以查看該風(fēng)電機組的風(fēng)電機組詳情頁面。風(fēng)機信息監(jiān)視運行數(shù)據(jù)、風(fēng)力發(fā)電機組工作狀態(tài),數(shù)據(jù)能夠以圖形或者曲線的方式展現(xiàn)。風(fēng)機部件信息監(jiān)視風(fēng)機部件信息顯示的內(nèi)容包括:(不限于/輪箱(雙饋機組、偏航系統(tǒng)、液壓系統(tǒng)、電控系統(tǒng)。升壓站信息監(jiān)視(不限于壓棒圖、負(fù)荷曲線、實時數(shù)據(jù)、開關(guān)狀態(tài)等信息。功率預(yù)測信息監(jiān)視基于目前大部分風(fēng)電場現(xiàn)場已經(jīng)部署風(fēng)功率預(yù)測系統(tǒng)的情況下,集控系統(tǒng)可通過專有協(xié)議采集現(xiàn)場風(fēng)功率預(yù)測數(shù)據(jù)、氣象數(shù)據(jù),納入集控系統(tǒng)的數(shù)據(jù)庫中,并按照要求進(jìn)行展示、對比、分析,可進(jìn)行實際功率和預(yù)測功率的對比展示。測風(fēng)塔信息監(jiān)視系統(tǒng)對測風(fēng)塔進(jìn)行監(jiān)視,測風(fēng)塔信息顯示包括各層(10,30,5070功率控制信息監(jiān)視系統(tǒng)展示風(fēng)電場側(cè)AGC/AVC監(jiān)控系統(tǒng)采集的數(shù)據(jù)。電能量計量信息監(jiān)視進(jìn)行數(shù)據(jù)存儲和查詢等功能。遠(yuǎn)程控制(但不限于控制等操作功能(具體功能在具備可實施條件情況下執(zhí)行倒閘控制(依據(jù)實際的控制范圍和設(shè)備,以電網(wǎng)調(diào)度允許的范圍為準(zhǔn)。作。風(fēng)電機組遠(yuǎn)程控制風(fēng)電機組批量控制現(xiàn)整條線路、整場的批量啟停復(fù)位。報警系統(tǒng)報警信號。隔層單元的狀態(tài)異常等,報警功能如下:各種報警可以定義。對需要進(jìn)行越限告警監(jiān)視的每一個數(shù)據(jù),其上/下限值可人工設(shè)置或修改。有報警發(fā)生時,通過報警彈窗對用戶提醒。在發(fā)生報警之后,警信息的閃爍和聲音報警。提供語音告警的功能。根據(jù)報警的重要程度不同報警分為多個級別,不同級別采用不同的報警方式進(jìn)行提示,以提高操作人員事故處理效率。5%會自動提示監(jiān)控人員使之及時進(jìn)行及時調(diào)整。系統(tǒng)可提供全場通信中斷報警。自動報警來源集控中心各應(yīng)用系統(tǒng)的報警信號,含風(fēng)電機組和升壓站電氣設(shè)認(rèn)操作。序號參數(shù)序號參數(shù)1電壓不平衡11序號參數(shù)序號參數(shù)1電壓不平衡11變槳控制系統(tǒng)通訊錯誤2主軸超速12電池電壓低停機3剎車時間超時13變頻器故障4電流不對稱14齒輪箱油溫超限5變頻器故障15傳感器故障6軸承超速16液壓系統(tǒng)故障7安全鏈斷開17變槳系統(tǒng)故障8機艙柜緊急停止18開關(guān)斷路器跳閘9發(fā)電機超速19控制回路斷線10轉(zhuǎn)子超速20線路過負(fù)荷跳閘報警分級一般故障,例如變量值超過界限值。報警分類報警可分為綜自報警、風(fēng)機報警,報警信息的分類可靈活設(shè)置。能根據(jù)系統(tǒng)的提示信息或報警類型,自動歸入相應(yīng)頁面。報警限值對需要進(jìn)行越限告警監(jiān)視的每一個數(shù)據(jù),其上/下限值可人工設(shè)置或修改。報警方式系統(tǒng)報警方式分為:彈出報警、語音報警,具體內(nèi)容根據(jù)需求定義,如:報警記錄能,并能夠打印。事件記錄的信息記錄容量根據(jù)服務(wù)器儲存容量相關(guān),不少于10,000,000條。報警查詢與統(tǒng)計備的報警統(tǒng)計和故障統(tǒng)計,并能夠打印。響等信息。數(shù)據(jù)查詢查詢功能。歷史報警查詢開始時間、報警模塊、報警類型、持續(xù)時間等多種查詢條件進(jìn)行記錄的綜合查詢。歷史停機記錄查詢歷史停機記錄查詢主要是實現(xiàn)各場站每臺設(shè)備歷史停機記錄的存儲和綜合機記錄查詢里,所以停機記錄中的記錄和實時停機中的記錄不會重復(fù)。隨報警、持續(xù)時間等不同的檢索條件進(jìn)行歷史停機記錄的綜合查詢。歷史數(shù)據(jù)查詢圍內(nèi)的趨勢變化情況。操作記錄時間、指令、操作用戶和操作結(jié)果,操作記錄按照開始時間的倒序進(jìn)行排列。報表功能戶的各項需求。電站指標(biāo)計算風(fēng)電企業(yè)生產(chǎn)指標(biāo)體系基本統(tǒng)計指標(biāo)分為七類二十六項指標(biāo)。可靠性指標(biāo)、電機組經(jīng)濟性指標(biāo)。資源指標(biāo)包括:平均風(fēng)速、有效風(fēng)時數(shù)兩項指標(biāo);電量指標(biāo)包括:發(fā)電量、上網(wǎng)電量等兩項指標(biāo);能耗指標(biāo)包括:場用電量、場用電率、場損率等三項指標(biāo);用率、風(fēng)電場可利用率等三項指標(biāo);風(fēng)電機組經(jīng)濟性指標(biāo)包括:功率特性一致性系數(shù)、風(fēng)能利用系數(shù)等兩項指標(biāo)。統(tǒng)計分析故障的時長,為用戶的日常運維工作提供評價和決策依據(jù)。站指標(biāo)多維度對比。軟五防系統(tǒng)時鐘同步中心側(cè)配置GPS+北斗對時裝置,各應(yīng)用系統(tǒng)服務(wù)器采用網(wǎng)絡(luò)對時。配套提供成熟的高精度網(wǎng)絡(luò)對時報文轉(zhuǎn)發(fā)、接收模塊,同時配備的裝置具有守時功能,多重功能滿足現(xiàn)場需求以實現(xiàn)中心側(cè)設(shè)備對時要求。數(shù)據(jù)接口供與其他生產(chǎn)管理系統(tǒng)、信息系統(tǒng)、以及外界公共數(shù)據(jù)網(wǎng)的標(biāo)準(zhǔn)化應(yīng)用接口。設(shè)備清單詳見湖南高創(chuàng)項目集控中心中心建設(shè)設(shè)備清單2020.02.03系統(tǒng)附圖實時監(jiān)視風(fēng)電場監(jiān)視區(qū)域公司整體信息監(jiān)視公司整體信息風(fēng)電場信息監(jiān)視4040風(fēng)機信息監(jiān)視風(fēng)機狀態(tài)監(jiān)視圖風(fēng)機部件信息監(jiān)視風(fēng)機部件監(jiān)視圖44PAGE9升壓站信息監(jiān)視主接線圖功率預(yù)測信息監(jiān)視功率預(yù)測信息測風(fēng)塔信息監(jiān)視測風(fēng)塔信息功率控制信息監(jiān)視AGC/AVC信息電能量計量信息監(jiān)視電能量計量信息遠(yuǎn)程控制風(fēng)電機組遠(yuǎn)程控制風(fēng)電機組遠(yuǎn)程控制圖遠(yuǎn)程控制操作提示圖風(fēng)電機組批量控制風(fēng)電機組成組控制圖一體化工業(yè)大數(shù)據(jù)平臺基礎(chǔ)平臺圖FusionInsight系統(tǒng)的整體邏輯架構(gòu)圖公共服務(wù)組件通用計算與調(diào)度的容器特性:通用計算與調(diào)度的本質(zhì)是計算分析服務(wù)容器,其基本功能是執(zhí)行外部給定的以預(yù)定義的標(biāo)準(zhǔn)DAG個不同的應(yīng)用場景提供計算分析服務(wù)。每個場景的計算分析任務(wù)不同。DAG的計算任務(wù)數(shù)據(jù)源: 是采集流程中的起始節(jié)點,定義了采集流程從哪里提取數(shù)據(jù)。采集器: 細(xì)分類型的采集任務(wù)。實時清洗轉(zhuǎn)換: 性,刪除重復(fù)信息、糾正存在的錯誤,處理無效值和缺失值等。貼源數(shù)據(jù)存儲: 將后期持續(xù)進(jìn)行對數(shù)據(jù)資產(chǎn)識別與發(fā)現(xiàn)。據(jù)。數(shù)據(jù)資源定義 本平臺提供各種數(shù)據(jù)源的定義,涵蓋常見數(shù)據(jù)存儲引擎數(shù)據(jù)目錄管理 支持多個層級分類來管理數(shù)據(jù)對象定義DataSet 抽象統(tǒng)一訪問服務(wù)返回的數(shù)據(jù)對象的數(shù)據(jù)集為二維數(shù)組形式統(tǒng)一數(shù)據(jù)訪問服務(wù)(數(shù)據(jù)轉(zhuǎn)發(fā),數(shù)據(jù)訪問和數(shù)據(jù)回寫)統(tǒng)一數(shù)據(jù)訪問服務(wù)基于REST/HTTP協(xié)議,返回結(jié)果集合是統(tǒng)一的數(shù)據(jù)集定義DataSet,這樣就在訪問標(biāo)準(zhǔn)上和數(shù)據(jù)標(biāo)準(zhǔn)上達(dá)到統(tǒng)一。混合數(shù)據(jù)存儲管理核心是數(shù)據(jù)資源分層分區(qū)管理。數(shù)據(jù)存儲分層:按數(shù)據(jù)質(zhì)量等級、使用目的進(jìn)行劃分換的數(shù)據(jù)求的數(shù)據(jù)子集數(shù)據(jù)存儲分區(qū):按數(shù)據(jù)的安全受控,以及數(shù)據(jù)被訪問的時效性、訪問熱度,進(jìn)行區(qū)域劃分按照數(shù)據(jù)共享級別的要求,可以分為兩個子區(qū):共享數(shù)據(jù)區(qū),保密數(shù)據(jù)區(qū)據(jù)區(qū)全文檢索Word,PPT,Excel,PDF檔內(nèi)容進(jìn)行檢索(用戶可配置文件類型),并且能夠按照匹配度從高到低返回搜度規(guī)范。5050數(shù)據(jù)中臺數(shù)據(jù)標(biāo)準(zhǔn)管理則類、文件類等標(biāo)準(zhǔn)的納管。功能點包括支持標(biāo)準(zhǔn)的創(chuàng)建、上傳/下載、瀏覽、制錄入。數(shù)據(jù)標(biāo)準(zhǔn)管理功能,總體功能架構(gòu)圖如下數(shù)據(jù)字典必須遵循其記錄值的一類實體。數(shù)據(jù)字典分為基礎(chǔ)字典和行業(yè)字典兩類:基礎(chǔ)字典是指根據(jù)項目情況的字典,依據(jù)項目實際情況而有較大差異。行業(yè)字典,是指電力行業(yè)的規(guī)范性字典,因項目實際情況的差異較小。維度管理維度是觀察和分析數(shù)據(jù)的視角。本工具中維度基于數(shù)據(jù)對象提煉生成。55PAGE1基本維度:基于一個數(shù)據(jù)對象的屬性生成;復(fù)合維度:根據(jù)多個數(shù)據(jù)對象的屬性,關(guān)聯(lián)復(fù)合后生成。標(biāo)準(zhǔn)設(shè)備樹標(biāo)準(zhǔn)設(shè)備樹,提供對數(shù)據(jù)治理范圍內(nèi)所有數(shù)據(jù)實體的分類目錄的管理。數(shù)據(jù)類型管理:視圖等分類型的標(biāo)準(zhǔn)目錄樹:對每種類型的數(shù)據(jù),分別定制對應(yīng)的標(biāo)準(zhǔn)目錄要求。編碼規(guī)則則,并可綁定到不同的數(shù)據(jù)對象屬性中。標(biāo)準(zhǔn)文件本管理、下線等能力。標(biāo)準(zhǔn)應(yīng)用流程管理對于標(biāo)準(zhǔn)的管理,包括如下三個方面的管理標(biāo)準(zhǔn)內(nèi)容的管理;標(biāo)準(zhǔn)應(yīng)用范圍和方式的管理:標(biāo)準(zhǔn)應(yīng)用于哪些數(shù)據(jù)實體;標(biāo)準(zhǔn)應(yīng)用流程管理;主要指標(biāo)準(zhǔn)的版本管理、審批、發(fā)布、下線等。的應(yīng)用管理流程,具有公共統(tǒng)一的特點,適用于本文中各種不同類型的標(biāo)準(zhǔn)的。在本文中提及的各類標(biāo)準(zhǔn),無論在后續(xù)章節(jié)中是否明確提及,都遵循如下的標(biāo)準(zhǔn)應(yīng)用的統(tǒng)一管理流程。建議進(jìn)行在線標(biāo)準(zhǔn)稽核工作;數(shù)據(jù)標(biāo)準(zhǔn)的質(zhì)量,應(yīng)通過審核流程控制。所有標(biāo)準(zhǔn)都存在4個狀態(tài):建立任何一個標(biāo)準(zhǔn),完成新建動作保存后,都是建立狀態(tài);在建立狀態(tài)可以進(jìn)行編輯、刪除、提交審核等操作。待審核標(biāo)準(zhǔn)提交審核之后,就進(jìn)入待審核狀態(tài)。對行業(yè)標(biāo)準(zhǔn),審核的重點是該不該下發(fā),該下發(fā)給誰,不是審核內(nèi)容發(fā)布進(jìn)入待審核狀態(tài)的標(biāo)準(zhǔn),如果審核通過,就進(jìn)入發(fā)布狀態(tài)。只有發(fā)布狀態(tài)的標(biāo)準(zhǔn),才可以被引用。下線數(shù)據(jù)字典數(shù)據(jù)字典的業(yè)務(wù)覆蓋范圍如下圖:具備如下功能:1、分類(目錄)維護增刪改2、字典維護版本管理在線編輯、導(dǎo)入導(dǎo)出)/刪/改/描述字典的結(jié)構(gòu):編碼/屬性一/基礎(chǔ)字典??;從技術(shù)層面講:數(shù)據(jù)字典是LIST類型、TREE的數(shù)據(jù),對應(yīng)多屬性、多層級的數(shù)據(jù)。支持各個數(shù)據(jù)項之間,存在父子關(guān)系。基礎(chǔ)字典類數(shù)據(jù)的存儲結(jié)構(gòu),建議按照如下方式,進(jìn)行存儲:基礎(chǔ)字典的存儲結(jié)構(gòu),建議如下,即通用的tree數(shù)據(jù)結(jié)構(gòu)存儲方式;字段說明NodeId節(jié)點編號nodeName節(jié)點名稱Parentid父節(jié)點編號NodeParam1節(jié)點屬性1NodeParam2節(jié)點屬性2NodeParam3節(jié)點屬性3NodeParam4節(jié)點屬性4NodeParam5節(jié)點屬性5DicID字典編號DicName字典名稱KKS字典KKS字典包括兩部分:KKS字典的結(jié)構(gòu)和KKS字典的數(shù)值。KKS字典結(jié)構(gòu)維護通常用結(jié)構(gòu)描述KKS字典的內(nèi)容,典型如下圖KKS2層結(jié)構(gòu)數(shù)據(jù)構(gòu)成:編碼段:有編碼段名稱、編碼段字符類型KKS字典的結(jié)構(gòu),可以根據(jù)需要隨時擴展,支持不同的部署點KKS結(jié)構(gòu)不同建議按照如下方式存儲KKS字典結(jié)構(gòu)字段說明PartName編碼段名稱PartCharType編碼段字符類型可選LevelName分解層次名稱LevelNO分解層次序號DicNameKKS字典名稱KKS編碼段字典字段說明NodeNo序號NodeValue字段說明NodeNo序號NodeValue碼段取值PartName編碼段名稱PartCharType編碼段字符類型可選DicNameKKS字典名稱量測屬性字典量測屬性字典,是對標(biāo)準(zhǔn)量測名稱進(jìn)行規(guī)范的字典,按照邏輯設(shè)備樹結(jié)構(gòu)展現(xiàn)。字段說明序號(主鍵)序號(主鍵)屬性英文名稱英文名稱屬性中文名稱中文名稱邏輯節(jié)點所屬設(shè)備屬性類型MV、INS、CMD…來源來源與那個標(biāo)準(zhǔn)或自定義的備注備注創(chuàng)建人id創(chuàng)建人名稱修改人id修改人名稱創(chuàng)建時間創(chuàng)建時間修改時間修改時間圖量測屬性字典量測縮略語字典字段說明序號(主鍵)字段說明序號(主鍵)序號(主鍵)縮略語縮略語(英文大小寫)英文名稱英文名稱中文名稱中文名稱來源來源與那個標(biāo)準(zhǔn)或自定義的備注備注創(chuàng)建人id創(chuàng)建人名稱修改人id修改人名稱創(chuàng)建時間創(chuàng)建時間修改時間修改時間圖縮略語字典數(shù)據(jù)納管目錄標(biāo)準(zhǔn)數(shù)據(jù)納管目錄是管理數(shù)據(jù)資源的分類,作為標(biāo)準(zhǔn)執(zhí)行。數(shù)據(jù)資源實體類型管理工具中支持多種不同的實體類型數(shù)據(jù)類型構(gòu)成要素如下類型名稱:類型業(yè)務(wù)含義:類型對應(yīng)的系統(tǒng)字典表系統(tǒng)字典表提取字段(或提取標(biāo)準(zhǔn))系統(tǒng)字典表,用于存儲數(shù)據(jù)實體元信息典是數(shù)據(jù)記錄層面的字典。ORACLEuser_table,user_index,dba_table不同的數(shù)據(jù)資源實體類型,目錄體系不同。數(shù)據(jù)實體。目錄體系管理或者按業(yè)務(wù)領(lǐng)域劃分的目錄。一個目錄體系,就是一個維度。目錄體系的構(gòu)成要素:目錄體系編號目錄體系名稱目錄體系狀態(tài):生效、失效目錄體系對應(yīng)的數(shù)據(jù)類型本產(chǎn)品需要提供目錄體系的增刪改能力,容許存在多個同時生效的目錄體系。指定目錄體系的內(nèi)容管理對目錄體系的內(nèi)容管理,技術(shù)上就是對維度的值的管理。在線維護即目錄樹的維護方式自文件導(dǎo)入字段說明字段說明NOdeID節(jié)點編號(必填)NOdeName節(jié)點名稱,即維度的值(必填)ParentID父級節(jié)點名稱(必填)NodeParam1節(jié)點的屬性1(適用于多屬性情況)NodeParam2節(jié)點的屬性2(適用于多屬性情況)NodeParam3節(jié)點的屬性3(適用于多屬性情況)DicSystemName目錄體系名稱自某一數(shù)據(jù)表導(dǎo)入如果某數(shù)據(jù)表滿足導(dǎo)入結(jié)構(gòu)的必選字段要求,可以選擇從數(shù)據(jù)資源表導(dǎo)入。編碼規(guī)則段的特定業(yè)務(wù)含義。工具支持編碼的配置和管理功能。工具支持定制多個編碼規(guī)則,對每個編碼規(guī)則,提供構(gòu)建方式如下:碼段組序號即編碼有幾組構(gòu)成,必填字段碼段組名稱6060每組名稱,必填字段碼段名稱每個碼段組內(nèi)的碼段名稱,必填字段碼段位數(shù)碼段位數(shù),必填字段,支持區(qū)間,比如3~5位長度,NNN-NNNNN碼段類型一般用于指定是數(shù)字N,還是字母A碼段構(gòu)建方式來源于字典,需要指定引用字典的那個字段號和字母流水號兩種類型;正則表達(dá)式如:[0-9]{6}[\.][a-zA-Z0-9]{2,23}[\.][a-zA-Z0-9]{1,30}日期/時間,可以選擇年、月、日、時分秒等格式標(biāo)準(zhǔn)類文件該部分主要提供對文件類標(biāo)準(zhǔn)的管理能力。文件分類的管理支持對文件分類目錄的管理,使用者可以增刪改目錄結(jié)構(gòu)及調(diào)整位置。66PAGE5文件自身管理版本管理審核管理:提交、修改、審核、發(fā)布(生效、下線(失效;同步推送:通常與發(fā)送綁在一起,推送到應(yīng)用端上傳:導(dǎo)入,以文件方式導(dǎo)入到系統(tǒng)中數(shù)據(jù)元管理詳見“.1.1.3數(shù)據(jù)納管成數(shù)據(jù)資產(chǎn)。元數(shù)據(jù)稽核等。支持時序、結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)的元數(shù)據(jù)管理。CWM義稽核條件,并形成稽核報告。支持元數(shù)據(jù)版本管理及版本對比,支持元數(shù)據(jù)關(guān)系的版本對比。按照列和行進(jìn)行授權(quán)。支持元數(shù)據(jù)訂閱,并根據(jù)元數(shù)據(jù)變更情況進(jìn)行告警通知數(shù)據(jù)范圍。元數(shù)據(jù)的明細(xì)信息。4.1.1 數(shù)據(jù)資產(chǎn)管理看分析,了解到集團數(shù)據(jù)資產(chǎn)應(yīng)用模式和與其他的具體內(nèi)容,資源目錄、數(shù)據(jù)地圖等。速定位。支持資源目錄的編目、匯總、上報以及發(fā)布服務(wù)的功能。成,目錄的組織形式應(yīng)體現(xiàn)場站-設(shè)備-測點的邏輯關(guān)系。庫逐層下鉆。化數(shù)據(jù)庫、MPPSQL支持?jǐn)?shù)據(jù)標(biāo)簽的定義、變更和審核。元數(shù)據(jù)管理期等數(shù)據(jù)治理專題提供技術(shù)擴展支持。元數(shù)據(jù)按用途不同分為技術(shù)元數(shù)據(jù)、業(yè)務(wù)元數(shù)據(jù)和管理元數(shù)據(jù)。技術(shù)元數(shù)據(jù)echnialMada據(jù)的映射、數(shù)據(jù)轉(zhuǎn)換的描述;以及元數(shù)據(jù)變更的版本信息等;業(yè)務(wù)元數(shù)據(jù)BusinessMada系和規(guī)則的數(shù)據(jù);包括業(yè)務(wù)術(shù)語、信息分類、指標(biāo)、統(tǒng)計口徑等;ManaemetMada信息。元數(shù)據(jù)管理功能架構(gòu)元數(shù)據(jù)模型元數(shù)據(jù)類型定義:用戶可以自定義元數(shù)據(jù)類型,包括自定義元數(shù)據(jù)類型的據(jù)。系統(tǒng)內(nèi)置元數(shù)據(jù)類型:業(yè)務(wù)屬性定義對系統(tǒng)中的業(yè)務(wù)概念以業(yè)務(wù)屬性的形式進(jìn)行抽象和統(tǒng)一定義,實現(xiàn)業(yè)務(wù)術(shù)語的標(biāo)準(zhǔn)化。在業(yè)務(wù)屬性定義的基礎(chǔ)上,對業(yè)務(wù)屬性所關(guān)聯(lián)的通用業(yè)務(wù)規(guī)則進(jìn)行統(tǒng)一管理,主要包括業(yè)務(wù)屬性的質(zhì)量規(guī)則以及安全應(yīng)用規(guī)則。指標(biāo)統(tǒng)一管理企業(yè)各種結(jié)構(gòu)化業(yè)務(wù)指標(biāo)數(shù)據(jù)對象數(shù)據(jù)對象是系統(tǒng)中是對各種不同數(shù)據(jù)庫系統(tǒng)物理模型的統(tǒng)一抽象數(shù)據(jù)源記錄系統(tǒng)中物理數(shù)據(jù)資源元數(shù)據(jù)維護元數(shù)據(jù)目錄按照定義的元數(shù)據(jù)類型形成元數(shù)據(jù)目錄,并展示每個元數(shù)據(jù)實體的基本信息,并以該目錄作為元數(shù)據(jù)維護的操作入口。在元數(shù)據(jù)目錄中,基于元模型的所定義的元數(shù)據(jù)類型結(jié)構(gòu),利用關(guān)鍵詞進(jìn)行檢索查找關(guān)聯(lián)的元數(shù)據(jù)。元數(shù)據(jù)采集系統(tǒng)內(nèi)置各種元數(shù)據(jù)類型均支持元數(shù)據(jù)的手動創(chuàng)建,并支持符合CWM規(guī)范的元數(shù)據(jù)文件的導(dǎo)入和導(dǎo)出。元數(shù)據(jù)版本管理元數(shù)據(jù)版本管理:對元數(shù)據(jù)實體(市類元數(shù)據(jù)數(shù)據(jù)版本的差分對比。元數(shù)據(jù)權(quán)限元數(shù)據(jù)訪問權(quán)限控制:根據(jù)數(shù)據(jù)對象的結(jié)構(gòu),對列的訪問進(jìn)行授權(quán)以及脫敏訪問設(shè)置。血緣分析和影響分析元數(shù)據(jù)地圖按照分層分區(qū)、數(shù)據(jù)源逐級展示每部分所包含的技術(shù)元數(shù)據(jù)信息,并根據(jù)數(shù)據(jù)對象的溯源關(guān)系展示不同分層分區(qū)、不同數(shù)據(jù)源之間的數(shù)據(jù)處理信息。數(shù)據(jù)對象的溯源分析(血緣分析、影響分析、全鏈分析)元數(shù)據(jù)應(yīng)用元數(shù)據(jù)訂閱析,通過消息中心通知到相關(guān)聯(lián)的角色/用戶?;谠獢?shù)據(jù)的數(shù)據(jù)質(zhì)量稽核基于元數(shù)據(jù)數(shù)據(jù)結(jié)構(gòu),以及元數(shù)據(jù)所包含的業(yè)務(wù)約束,生成數(shù)據(jù)質(zhì)量稽核的規(guī)則。元數(shù)據(jù)模型系統(tǒng)提供自定義元數(shù)據(jù)類型的能力,主要用于對業(yè)務(wù)元數(shù)據(jù)的擴展。標(biāo)。這些元數(shù)據(jù)是系統(tǒng)提供數(shù)據(jù)服務(wù)的基礎(chǔ)。自定義元數(shù)據(jù)類型用戶可以自定義并管理元數(shù)據(jù)類型。一個自定義元數(shù)據(jù)類型包括:類型名稱類型含義描述元數(shù)據(jù)類型的結(jié)構(gòu)該元數(shù)據(jù)的存儲位置數(shù)據(jù)源管理ERPnoSQL數(shù)據(jù)源定義包括:數(shù)據(jù)源編碼ORACLE、MYSQL、HBASE、、HIVE、CSV、EXCEL、REDIS、MONGODB、INFLUXDBPOSTGRESQL、FILE數(shù)據(jù)源連接信息:用于連接該數(shù)據(jù)源所必須的數(shù)據(jù)源地址以及認(rèn)證信息數(shù)據(jù)源位置:數(shù)據(jù)源所對應(yīng)的數(shù)據(jù)架構(gòu)分層分區(qū)中的位置。創(chuàng)建時間創(chuàng)建用戶業(yè)務(wù)屬性定義理,主要包括業(yè)務(wù)屬性的質(zhì)量規(guī)則以及安全應(yīng)用規(guī)則。業(yè)務(wù)屬性的基本結(jié)構(gòu)包括:業(yè)務(wù)屬性標(biāo)識中文名英文名數(shù)據(jù)類型長度質(zhì)量規(guī)則:業(yè)務(wù)屬性所對應(yīng)的取值范圍(字典、值域、正則表達(dá)式格式規(guī)范(特定文本格式數(shù)據(jù)標(biāo)準(zhǔn)中對應(yīng)的字典、編碼規(guī)則標(biāo)準(zhǔn)。安全應(yīng)用規(guī)則:設(shè)定業(yè)務(wù)屬性的敏感級別以及脫敏訪問策略。數(shù)據(jù)對象管理IT接口,能夠同時支持結(jié)構(gòu)化數(shù)據(jù),半結(jié)構(gòu)化數(shù)據(jù),時序數(shù)據(jù)類型的訪問。數(shù)據(jù)對象的定義包括:數(shù)據(jù)對象編碼數(shù)據(jù)對象名稱英文名稱描述管理中定義和維護的業(yè)務(wù)屬性。數(shù)據(jù)對象和其他數(shù)據(jù)對象的關(guān)聯(lián)關(guān)系創(chuàng)建時間創(chuàng)建用戶創(chuàng)建數(shù)據(jù)集市提供數(shù)據(jù)服務(wù)。指標(biāo)管理一不間斷更新各個指標(biāo)。指標(biāo)管理定義包括:指標(biāo)編碼指標(biāo)名稱、指標(biāo)英文名稱指標(biāo)含義描述指標(biāo)的單位、計算方式、統(tǒng)計頻率置進(jìn)行劃分。因為指標(biāo)有時間屬性,通常采用時序庫來存儲。創(chuàng)建時間創(chuàng)建用戶元數(shù)據(jù)維護元數(shù)據(jù)瀏覽命周期信息等。對系統(tǒng)內(nèi)置數(shù)據(jù)對象,支持展示相關(guān)的元數(shù)據(jù)分析信息,如血緣分析、影響分析等。7070圍包含一個或多個元數(shù)據(jù)類型。元數(shù)據(jù)采集對自定義的元數(shù)據(jù)類型,支持按照對應(yīng)數(shù)據(jù)結(jié)構(gòu)組織的元數(shù)據(jù)文件的導(dǎo)入。該元數(shù)據(jù)文件按照符合CW(CommonaehouseMamodel)規(guī)范進(jìn)行結(jié)構(gòu)設(shè)計。CWMOMG對象管理組織定義的一套完整的元模型體系結(jié)構(gòu),用于數(shù)據(jù)倉庫構(gòu)建和應(yīng)用的元數(shù)據(jù)建模。CWMUMLCWMXMLCWMDTDCWMIDLXML文檔。對系統(tǒng)內(nèi)置的業(yè)務(wù)屬性定義、數(shù)據(jù)對象、視圖、數(shù)據(jù)集市等類型元數(shù)據(jù),除在系統(tǒng)中手動創(chuàng)建外,提供元數(shù)據(jù)的導(dǎo)出和導(dǎo)入功能。77PAGE1對最基礎(chǔ)的數(shù)據(jù)對象元數(shù)據(jù),包括結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、時序數(shù)據(jù),提供以下的元數(shù)據(jù)采集能力。統(tǒng)中讀取物理表對應(yīng)的元數(shù)據(jù)信息,并直接生成數(shù)據(jù)對象。非結(jié)構(gòu)化數(shù)據(jù)有相對統(tǒng)一的元數(shù)據(jù)結(jié)構(gòu),包括:文件名稱文件大小創(chuàng)建時間創(chuàng)建者文件位置非結(jié)構(gòu)文件采集進(jìn)入系統(tǒng)時,自動提取以及分析得到以上的元數(shù)據(jù)。時序數(shù)據(jù)時序數(shù)據(jù)對象支持手動創(chuàng)建和通過導(dǎo)入導(dǎo)出的方式創(chuàng)建。其邏輯數(shù)據(jù)結(jié)構(gòu)包括:設(shè)備信息測點信息量測時間量測值元數(shù)據(jù)版本分對比(原始值和新值)。數(shù)據(jù)對象版本針對數(shù)據(jù)對象的變更,以下內(nèi)容納入版本記錄:數(shù)據(jù)對象基本描述信息數(shù)據(jù)對象的內(nèi)部數(shù)據(jù)結(jié)構(gòu)及字段約束數(shù)據(jù)對象和其他數(shù)據(jù)對象的關(guān)聯(lián)關(guān)系數(shù)據(jù)對象的緩存設(shè)置、權(quán)限定義等信息,不納入數(shù)據(jù)對象版本。自定義類型元數(shù)據(jù)版本立新的版本。元數(shù)據(jù)權(quán)限支持對業(yè)務(wù)屬性以及數(shù)據(jù)對象進(jìn)行敏感級別定義。訪問該數(shù)據(jù)時的策略:拒絕訪問或者指定脫敏方式訪問。據(jù)時,拒絕訪問。對可以訪問的數(shù)據(jù)對象,執(zhí)行業(yè)務(wù)屬性的敏感級別檢查。血緣分析和影響分析支持圖形化的血緣/影響分析功能幫助用戶審視數(shù)據(jù)關(guān)系,溯源數(shù)據(jù)錯誤,預(yù)測改動影響。數(shù)據(jù)溯源架構(gòu)如下所示,一個典型的數(shù)據(jù)溯源架構(gòu)中包含兩個部分:數(shù)據(jù)對象
圖數(shù)據(jù)溯源架構(gòu)系統(tǒng)中包含的所有數(shù)據(jù)資產(chǎn),包括結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)等數(shù)據(jù)處理過程以及各種離線的數(shù)據(jù)處理任務(wù)等。系統(tǒng)中典型的數(shù)據(jù)處理過程包括:采集任務(wù)數(shù)據(jù)分析處理任務(wù)任務(wù)每個數(shù)據(jù)處理過程包括以下信息輸入數(shù)據(jù)對象輸出數(shù)據(jù)對象處理動作描述,包括輸入和輸出數(shù)據(jù)對象的屬性映射關(guān)系。集數(shù)據(jù)的處理信息。數(shù)據(jù)血緣分析據(jù)問題產(chǎn)生的業(yè)務(wù)風(fēng)險?;跀?shù)據(jù)血緣分析,用戶可以得到:一直追溯到外部數(shù)據(jù)來源據(jù)對象的哪一些字段經(jīng)數(shù)據(jù)處理得到任務(wù)名稱、任務(wù)創(chuàng)建時間、任務(wù)失效時間(狀態(tài))圖數(shù)據(jù)溯源-血緣分析圖數(shù)據(jù)影響分析數(shù)據(jù)價值、評估數(shù)據(jù)變動的影響,盡量控制系統(tǒng)變動的風(fēng)險。據(jù)對象進(jìn)行遞歸分析,直到?jīng)]有關(guān)聯(lián)任何數(shù)據(jù)處理過程。基于數(shù)據(jù)影響分析,用戶可以得到:一個數(shù)據(jù)對象影響到了系統(tǒng)中的哪些數(shù)據(jù)對象箱、數(shù)據(jù)集市。影響分析也可以從表級下鉆到字段級。圖數(shù)據(jù)溯源-影響分析圖元數(shù)據(jù)地圖元數(shù)據(jù)地圖在數(shù)據(jù)源分層分區(qū)的基礎(chǔ)上,展示各分層分區(qū)包含的基礎(chǔ)數(shù)據(jù)對象、視圖、數(shù)據(jù)集市信息。數(shù)據(jù)的層級關(guān)系由匯總到明細(xì)分別是數(shù)據(jù)層、數(shù)據(jù)區(qū)、數(shù)據(jù)源、數(shù)據(jù)對象、從而展示不同分層分區(qū)、不同數(shù)據(jù)源之間的數(shù)據(jù)處理信息。元數(shù)據(jù)地圖提供可視化展示以及分級瀏覽的功能,按照層次關(guān)系從數(shù)據(jù)層、數(shù)據(jù)區(qū)、數(shù)據(jù)源、數(shù)據(jù)對象、字段屬性可以逐級展開。支持在數(shù)據(jù)地圖中展示視圖、數(shù)據(jù)集市層次,從而可以查看視圖、數(shù)據(jù)集市所關(guān)聯(lián)的溯源信息。元數(shù)據(jù)地圖提供自動布局的功能,用戶可以手動變動布局,支持溯源分析結(jié)果的圖形導(dǎo)出。元數(shù)據(jù)應(yīng)用元數(shù)據(jù)訂閱用戶可以訂閱元數(shù)據(jù)變更信息,當(dāng)訂閱的元數(shù)據(jù)發(fā)生實質(zhì)性變更的時候通知用戶。及變更檢查的周期(避免過于頻繁的元數(shù)據(jù)變更提醒。當(dāng)一個基礎(chǔ)元數(shù)據(jù)發(fā)生變化時,根據(jù)元數(shù)據(jù)的溯源分析,同時觸發(fā)引用該基礎(chǔ)元數(shù)據(jù)的相關(guān)元數(shù)據(jù)變更提醒。通過消息中心通知到相關(guān)聯(lián)的角色/用戶。用戶可以集中查看訂閱的元數(shù)據(jù)變更信息。基于元數(shù)據(jù)的數(shù)據(jù)質(zhì)量稽核系統(tǒng)中包含的各種業(yè)務(wù)元數(shù)據(jù)和技術(shù)元數(shù)據(jù)及各種元數(shù)據(jù)之間的關(guān)系如下圖所示:8080自動形成對于數(shù)據(jù)質(zhì)量稽核的各種質(zhì)量規(guī)則??梢曰谶@些元數(shù)據(jù)生成數(shù)據(jù)準(zhǔn)確性稽核規(guī)則不可為空、取值唯一等,生成數(shù)據(jù)完整性和唯一性的稽核規(guī)則核規(guī)則數(shù)據(jù)資產(chǎn)管理時序數(shù)據(jù)管理時序數(shù)據(jù)管理的功能,包括兩部分:對場站及場站存儲路由的管理整體功能框圖,如下:88PAGE1場站存儲路由管理支持配置并管理場站基本信息以及與場站相關(guān)的數(shù)據(jù)路由信息;支持按場站類型、場站名稱、組織機構(gòu)識別碼篩選查看;場站設(shè)備測點信息管理的擴展定義。目錄的組織形式應(yīng)體現(xiàn)場站-設(shè)備-發(fā)的標(biāo)準(zhǔn)。等信息篩選查詢,支持表字段自定義顯示;支持選中場站測點按場站類型、測點原始名稱、測點原始編號、設(shè)備KKS編碼、設(shè)備名稱等信息篩選查詢,支持表字段自定義顯示;支持場站設(shè)備表、測點表的導(dǎo)出。數(shù)據(jù)生命周期管理數(shù)據(jù)生命周期管理流程大數(shù)據(jù)治理工具提供了對數(shù)據(jù)的全生命周期管理功能,全面服務(wù)于企業(yè)職能部門產(chǎn)生的各種業(yè)務(wù)數(shù)據(jù)在整個生命周期內(nèi)的流動,即:從創(chuàng)建、審核、發(fā)布,到它過時下線、被銷毀刪除整個過程。數(shù)據(jù)全生命周期管理流程,如下圖:數(shù)據(jù)各生命階段管理功能:創(chuàng)建階段完成新建動作保存后,都建立狀態(tài);在創(chuàng)建狀態(tài)可以進(jìn)行編輯、刪除、提交審核等操作。審核階段提交審核之后,就進(jìn)入待審核狀態(tài);可進(jìn)行任務(wù)審核操作。發(fā)布階段審核通過,即可進(jìn)入發(fā)布狀態(tài);標(biāo)準(zhǔn)發(fā)布后,才可以被引用。下線階段可對過時的標(biāo)準(zhǔn)進(jìn)行下線。銷毀階段數(shù)據(jù)標(biāo)準(zhǔn)失效后,保存一段時間可進(jìn)行銷毀。主數(shù)據(jù)管理主數(shù)據(jù)是指滿足業(yè)務(wù)協(xié)同需要的、反映核心業(yè)務(wù)實體狀態(tài)屬性的基礎(chǔ)信息。主數(shù)據(jù)是整個系統(tǒng)平臺的共享的標(biāo)準(zhǔn)數(shù)據(jù)。需要基于主數(shù)據(jù)管理的要求。主數(shù)據(jù)管理的整體能力及流程如下定義主數(shù)據(jù)源,并定義主數(shù)據(jù)的特征。主數(shù)據(jù)來源定義包括如下要素:主數(shù)據(jù)名稱主數(shù)據(jù)意義描述主數(shù)據(jù)結(jié)構(gòu)主數(shù)據(jù)來源系統(tǒng)、來源表、訪問方式主數(shù)據(jù)版本數(shù)據(jù)內(nèi)容導(dǎo)入到系統(tǒng)中,并提供在線查看、檢索、查詢能力。主數(shù)據(jù)維護管理主數(shù)據(jù)版本管理數(shù)據(jù)內(nèi)容發(fā)生變化時,可以存儲為不同的版本??梢园凑詹煌陌姹荆樵冎鲾?shù)據(jù)的內(nèi)容。數(shù)據(jù)內(nèi)容維護在線維護除、查看等操作;系統(tǒng)提供批量的主數(shù)據(jù)內(nèi)容追加容進(jìn)行合并處理。數(shù)據(jù)同步的增量數(shù)據(jù)經(jīng)分析比較去重后,同步更新至主數(shù)據(jù)內(nèi)容中。主數(shù)據(jù)審核所有的主數(shù)據(jù)在正式進(jìn)入使用流程前,必須經(jīng)過審核。提交審核的主數(shù)據(jù),必須帶有版本號。審核通過,表示對主數(shù)據(jù)全部內(nèi)容的認(rèn)可。審核不通過,需要修改后再次提交審核。主數(shù)據(jù)發(fā)布審核通過的主數(shù)據(jù),可以進(jìn)行發(fā)布。已經(jīng)發(fā)布的主數(shù)據(jù),如進(jìn)行更改或版本升級,需要先取消發(fā)布,再進(jìn)行更改。主數(shù)據(jù)使用共享服務(wù)已經(jīng)發(fā)布的主數(shù)據(jù),可通過標(biāo)準(zhǔn)接口對外提供訪問及共享服務(wù)。進(jìn)行檢索及使用。訂閱服務(wù)數(shù)據(jù)標(biāo)簽管理及使用,提供更加個性化、更加靈活的方式。系統(tǒng)提供兩種類型的標(biāo)簽方式:資源使用的標(biāo)簽。定制標(biāo)簽:用戶隨機為管理范圍內(nèi)的數(shù)據(jù)打的標(biāo)簽,只在用戶范圍內(nèi)可見。標(biāo)簽定義公共標(biāo)簽定義內(nèi)用戶引用的。審核進(jìn)入發(fā)布狀態(tài)。發(fā)布狀態(tài)的標(biāo)簽,可以供全系統(tǒng)內(nèi)用戶引用。定制化標(biāo)簽定義用戶為數(shù)據(jù)資產(chǎn)提供標(biāo)簽定義功能,數(shù)據(jù)資產(chǎn)可可以附加若干個數(shù)據(jù)標(biāo)簽,數(shù)據(jù)標(biāo)簽一經(jīng)確定附加到數(shù)據(jù)資產(chǎn)上,即為定義成功。標(biāo)簽的構(gòu)成:通常情況下,標(biāo)簽為一個有明確業(yè)務(wù)語義的字符串,建議不超過20個字符。更改標(biāo)簽及目標(biāo)資產(chǎn)對象之間的關(guān)系進(jìn)行解除、更改。標(biāo)簽審核管理人員可對公共標(biāo)簽進(jìn)行審核,審核通過的標(biāo)簽,即為發(fā)布狀態(tài),可以在系統(tǒng)內(nèi)共享使用。審核:對標(biāo)簽進(jìn)行審核。取消發(fā)布:對處于發(fā)布狀態(tài)的標(biāo)簽,撤銷發(fā)布。更刪除。審核不通過的標(biāo)簽,只能在本用戶范圍內(nèi)使用,其它用戶不可見。 定制化標(biāo)簽只在用戶范圍內(nèi)使用,無需審核。標(biāo)簽使用資源對象。檢索范圍可設(shè)置為為全局檢索、用戶范圍內(nèi)檢索等。數(shù)據(jù)資源目錄納管目錄功能,總體功能架構(gòu)圖如下:目錄構(gòu)建:構(gòu)建目錄體系。目錄體系,是指目錄的分類,比如按組織機構(gòu)劃分目錄,按項目劃分的目錄,或者按業(yè)務(wù)領(lǐng)域劃分的目錄。數(shù)據(jù)實體元信息:是數(shù)據(jù)實體的構(gòu)成要素,數(shù)據(jù)類型構(gòu)成要素如下:類型名稱:類型業(yè)務(wù)含義:類型對應(yīng)的系統(tǒng)字典表系統(tǒng)字典表提取字段(或提取標(biāo)準(zhǔn))對象和目錄的掛接:按照資源實體類型,將元數(shù)據(jù)與目錄體系里的目錄樹某節(jié)點進(jìn)行關(guān)聯(lián)。用戶資源權(quán)限:用戶資源的初始化及授權(quán)。數(shù)據(jù)查詢數(shù)據(jù)資源查詢工具能夠支持基于數(shù)據(jù)資源目錄的數(shù)據(jù)查詢,并支持下鉆至數(shù)據(jù)記錄級別。系統(tǒng)支持逐級下鉆瀏覽、關(guān)鍵字搜索、SQL語句、篩選條件可視化配置等多種方式。設(shè)備測點查詢工具支持測點數(shù)據(jù)的同類查詢服務(wù),基于設(shè)備類、測點類、設(shè)備名稱、屬性類型、測點編號等維度進(jìn)行查詢;并支持展示任意時間段的時序曲線。數(shù)據(jù)建模數(shù)據(jù)模型區(qū)分為邏輯數(shù)據(jù)模型和物理數(shù)據(jù)模型,邏輯模型只展現(xiàn)邏輯關(guān)系,發(fā)布之后變?yōu)槲锢頂?shù)據(jù)模型;一個邏輯數(shù)據(jù)模型,可以對應(yīng)多個物理數(shù)據(jù)模型9090數(shù)據(jù)模型是數(shù)據(jù)資產(chǎn)的前置狀態(tài),只有經(jīng)過建模的對象,才成為數(shù)據(jù)資產(chǎn);物理數(shù)據(jù)模型是真實的資產(chǎn)。模板管理構(gòu)建。功能點如下:從標(biāo)準(zhǔn)文件導(dǎo)入公共信息模型把公共信息模型進(jìn)行結(jié)構(gòu)化的信息描述,生成標(biāo)準(zhǔn)文件。標(biāo)準(zhǔn)文件能夠完整的反映模型中中的類、類關(guān)系,以及類圖信息。CIM詢展示。圖公共信息模型瀏覽中的對象和模型。99PAGE1圖引用公共信息模型構(gòu)建邏輯模型邏輯模型邏輯模型構(gòu)成要素邏輯數(shù)據(jù)模型:是一組設(shè)計好的互相有屬性關(guān)聯(lián)的邏輯對象的集合。邏輯模型包含如下要素:業(yè)務(wù)對象業(yè)務(wù)對象的屬性(屬性名稱、類型、引用字典、引用規(guī)則)業(yè)務(wù)對象之間的屬性關(guān)聯(lián)關(guān)系邏輯模型的管理流程和狀態(tài)控制邏輯模型功能概述導(dǎo)入導(dǎo)出對邏輯模型提供導(dǎo)入功能,從excel文件導(dǎo)入,模板結(jié)構(gòu)建議如下字段說明"數(shù)據(jù)對象名稱(必填)""業(yè)務(wù)字段名稱(必填)"關(guān)聯(lián)對象名稱與該對象有屬性關(guān)聯(lián)的數(shù)據(jù)對象名稱關(guān)聯(lián)字段名稱屬性關(guān)聯(lián)字段字段業(yè)務(wù)字段長度(必填)業(yè)務(wù)字段類型(必填)其它擴展字段對邏輯模型提供導(dǎo)出功能,導(dǎo)出為同樣結(jié)構(gòu)的excel文件編輯沒有提交審核發(fā)布之前的模型,可以反復(fù)編輯版本管理保存時,默認(rèn)不加版本號;(記,由系統(tǒng)生成,不由用戶管理。號無關(guān)。刪除邏輯模型,只有在新建即草稿狀態(tài)時可以刪除。模型合并兩個邏輯模型合并,其具體功能是:需要將兩個模型中的對象合并在一個模型中兩個模型間存在重疊的對象時,對象對外的屬性關(guān)聯(lián)疊加;個新的屬性關(guān)聯(lián)關(guān)系。兩個物理模型合并后,可以選擇:合并前、合并后的模型都存在;這是默認(rèn)選擇是否只存在合并后的模型,合并前的模型不再存在;實例化功能邏輯數(shù)據(jù)模型通過審核并發(fā)布后,可以通過實例化變成物理數(shù)據(jù)模型;一個邏輯模型,可以實例化為多個物理模型。實例化方式,滿足以下兩種情況,可以是新建數(shù)據(jù)對象可以是掛接已有數(shù)據(jù)對象查看關(guān)聯(lián)物理模型每次實例化,邏輯模型會管理一個物理模型;邏輯模型多次實例化,會形成多個物理模型;系統(tǒng)需要提供查看邏輯模型關(guān)聯(lián)的物理模型的能力。物理模型物理模型的構(gòu)成要素的模型。物理數(shù)據(jù)模型的字段建關(guān)聯(lián)關(guān)系從邏輯數(shù)據(jù)模型繼承。物理模型包含如下要素:業(yè)務(wù)對象對應(yīng)的數(shù)據(jù)對象和實體表業(yè)務(wù)對象的屬性(屬性名稱、類型、引用字典、引用規(guī)則從邏輯模型繼承業(yè)務(wù)對象之間的屬性關(guān)聯(lián)關(guān)系從邏輯模型繼承物模型功能要求刪除物理模型刪除時可以有以下兩種情況:刪除模型本身刪除模型及模型關(guān)聯(lián)的數(shù)據(jù)對象及物理存儲表以下情況不能刪除存在基于模型創(chuàng)建的多維分析視圖查看關(guān)聯(lián)邏輯模型維度管理維度是多維數(shù)據(jù)分析、數(shù)據(jù)集市建設(shè)等的基礎(chǔ)。維度的維護功能包括:新建維度名稱維度種類:基本維度關(guān)聯(lián)數(shù)據(jù)對象、維度主字段11關(guān)聯(lián)對象字段22關(guān)聯(lián)對象字段nn雪花維度維度名稱維度種類:雪花維度復(fù)合層級:11~n;11~nn1~n修改/刪除維度作為一個標(biāo)準(zhǔn)發(fā)布之后,不容許修改其結(jié)構(gòu)定義;也不容許刪除發(fā)布維度的狀態(tài)控制方式,發(fā)布后,可以在數(shù)據(jù)分析,構(gòu)建數(shù)據(jù)集市中使用。引用情況查詢維度關(guān)聯(lián)的對象:可以在全域范圍內(nèi),搜索引用該維度的數(shù)據(jù)對象;維度關(guān)聯(lián)的模型:可以在全域范圍內(nèi),搜索引用該維度的物理模型;數(shù)據(jù)質(zhì)量管理系統(tǒng)提供的清洗組件以及數(shù)據(jù)質(zhì)量問題處理流程為各系統(tǒng)數(shù)據(jù)質(zhì)量提升提供有效支撐。報告、問題數(shù)據(jù)工單管理等。支持對國內(nèi)外主流關(guān)系型數(shù)據(jù)庫、時序數(shù)據(jù)庫、非結(jié)構(gòu)化數(shù)據(jù)庫、數(shù)據(jù)庫的數(shù)據(jù)進(jìn)行質(zhì)量管理支持主流大數(shù)據(jù)平臺的數(shù)據(jù)質(zhì)量任務(wù)運行能力通過識別技術(shù)元數(shù)據(jù)與校驗。Flink同時識別標(biāo)準(zhǔn)點表未覆蓋的測點清單;支持時間斷面數(shù)據(jù)補齊。支持質(zhì)量規(guī)則的啟用、禁用,支持質(zhì)量問題責(zé)任人設(shè)置。支持跨數(shù)據(jù)庫的數(shù)據(jù)之間的校驗。支持?jǐn)?shù)據(jù)質(zhì)量任務(wù)到行/能力。支持質(zhì)量校驗流程的在線調(diào)試及數(shù)據(jù)預(yù)覽。支持質(zhì)量評估模型的構(gòu)建,按照評估模型計算出質(zhì)量評分結(jié)果。提供全量同步,增量同步,即時同步等多種模式校驗數(shù)據(jù)。word、pdf、html。工干預(yù)的批量數(shù)據(jù)校驗、同步等多種場景。實現(xiàn)問題工單的派發(fā)、作廢;實現(xiàn)問題工單的處理、退回和掛起。報告。復(fù)過程,獲得無質(zhì)量問題的數(shù)據(jù),再在數(shù)據(jù)中間層入庫。實際的系統(tǒng)數(shù)據(jù)接入過程中,可能存在數(shù)據(jù)直接采集進(jìn)入數(shù)據(jù)中間層的情況。因此,在本工具中,從實際情況的靈活性出發(fā),提供兩種質(zhì)量管理流程:情況下,該數(shù)據(jù)才寫入數(shù)據(jù)中間層。程。在構(gòu)建以上數(shù)據(jù)治理流程時,對數(shù)據(jù)接入層,以“數(shù)據(jù)庫表”為操作對象,建立每個數(shù)據(jù)對象的數(shù)據(jù)質(zhì)量規(guī)則。間的映射關(guān)系,從而支持進(jìn)行問題溯源。并由負(fù)責(zé)人進(jìn)行問題數(shù)據(jù)的修正。能是源端修正,此時,負(fù)責(zé)人可以在確認(rèn)問題不再存在后關(guān)閉工單。數(shù)據(jù)治理管理功能架構(gòu)如下:質(zhì)量規(guī)則概覽量規(guī)則部分需要引用數(shù)據(jù)標(biāo)準(zhǔn)。量規(guī)則度、編碼規(guī)則等。如:查找使用了某編碼規(guī)則的數(shù)據(jù)資源。100100數(shù)據(jù)質(zhì)量規(guī)則概覽質(zhì)量規(guī)則手動配置質(zhì)量任務(wù)管理功能描述限。1010PAGE1質(zhì)量任務(wù)的創(chuàng)建支持兩種質(zhì)量管理任務(wù):數(shù)據(jù)質(zhì)量治理任務(wù)(層、數(shù)據(jù)質(zhì)量稽核任務(wù)(對數(shù)據(jù)中間層的在庫數(shù)據(jù)進(jìn)行質(zhì)量稽核)提供可視化圖形界面,定制數(shù)據(jù)質(zhì)量流程。層的情況,對一個數(shù)據(jù)對象【源-目標(biāo)】對的情況,只能建立一個生效支持質(zhì)量規(guī)則映射到底層計算分析模型的參數(shù)并提供流程展示;常規(guī)的周期性任務(wù)調(diào)度以及任務(wù)的控制,包括:啟用、停用、運行。質(zhì)量任務(wù)構(gòu)建質(zhì)量任務(wù)管理數(shù)據(jù)質(zhì)量算子數(shù)據(jù)轉(zhuǎn)換RDB列映射轉(zhuǎn)換此規(guī)則不產(chǎn)生數(shù)據(jù)質(zhì)量問題,是質(zhì)量治理過程中包含的采集環(huán)節(jié)功能。SchemaSchema性映射表;源數(shù)據(jù):{“User_code”:”10001”,“Sex”:”0”,“Age”:28}輸出:{“UserId”:”10001”,“Gender”:”0”,“Age”:28}源表名源表屬性目的表名目標(biāo)數(shù)據(jù)表字段UserUser_codeUserUserIdSexGenderAgeAge…………數(shù)據(jù)類型轉(zhuǎn)換支持的數(shù)據(jù)類型轉(zhuǎn)換類型包括:字符串和數(shù)值互轉(zhuǎn)日期和字符串互轉(zhuǎn)業(yè)務(wù)屬性源類型目標(biāo)類型User_codestring業(yè)務(wù)屬性源類型目標(biāo)類型User_codestringinteger……源數(shù)據(jù):{“User_code”:”10001”,“Sex”:”0”,“Age”:28}輸出:{“UserId”:10001,“Gender”:”0”,“Age”:28}字典映射轉(zhuǎn)換域映射到符合平臺標(biāo)準(zhǔn)的值域。如。A來源系統(tǒng)的“性別”到目標(biāo)數(shù)據(jù)的字典映射表業(yè)務(wù)屬性描述源值目標(biāo)值Sex未知02男10女21……源數(shù)據(jù){“User_code”:”10001”,{“User_code”:”10002”,輸出{“User_code”:”10001”,“Sex”:”2”,“Age”:28}{“User_code”:”10002,單位轉(zhuǎn)換源單位標(biāo)準(zhǔn)單位源單位標(biāo)準(zhǔn)單位轉(zhuǎn)換公式VKV源值/1000AmA源值*1000……通用數(shù)據(jù)質(zhì)量稽核根據(jù)稽核數(shù)據(jù)對象不同,各種稽核算子可以分為單表稽核和多表稽核。單表稽核定義:數(shù)據(jù)稽核不考慮表之間的關(guān)系,稽核的數(shù)據(jù)來自單一的數(shù)據(jù)表。通過驗證稽核對象的記錄和屬性,校驗稽核表的數(shù)據(jù)是否滿足特定的規(guī)則。多表稽核定義:數(shù)據(jù)稽核校驗的依據(jù)是表之間的關(guān)系,稽核的數(shù)據(jù)來自多張數(shù)據(jù)表。通過驗證稽核表與參照表之間的關(guān)系,校驗稽核表的數(shù)據(jù)是否與參照表一致??罩禉z核【完整性規(guī)則】空值檢核對輸入的某行數(shù)據(jù)的一個或多個字段是否為空值進(jìn)行稽核。值域檢核【準(zhǔn)確性規(guī)則】值域檢核是對某一列數(shù)據(jù)的取值是否在一定范圍內(nèi),包括:枚舉值字典連續(xù)值域唯一性檢核【唯一性指標(biāo)】唯一性檢核是校驗?zāi)骋换肆袛?shù)據(jù)是否唯一。唯一性檢核過程接收輸入稽核數(shù)據(jù)表,并在稽核列上進(jìn)行列值的出現(xiàn)次數(shù)統(tǒng)計。編碼規(guī)則檢核【規(guī)范性指標(biāo)】檢核數(shù)據(jù)是否遵照了標(biāo)準(zhǔn)中制定的編碼規(guī)則。支持正則表達(dá)式校驗。數(shù)據(jù)格式檢核【規(guī)范性指標(biāo)】支持的格式檢核包括:文本值長度檢驗:數(shù)據(jù)格式檢驗:郵箱、身份證、電話、手機、自定義正則表達(dá)式格式校驗類型說明文本值長度檢驗校驗文本最大長度數(shù)據(jù)格式檢驗校驗輸入文本符合語義規(guī)范主外鍵檢核檢查表中的一個列的取值,其來源于另一個表的主鍵列。時序數(shù)據(jù)質(zhì)量稽核質(zhì)量稽核模型系統(tǒng)內(nèi)置固定的稽核模型,包含支持的全部質(zhì)量規(guī)則。模型處理“列級”和“表級”的數(shù)據(jù)質(zhì)量稽核,設(shè)置的質(zhì)量規(guī)則,映射為稽核模型中各算子的參數(shù)。通過質(zhì)量規(guī)則的參數(shù)化實現(xiàn)動態(tài)的數(shù)據(jù)稽核。任務(wù)監(jiān)視展示任務(wù)的執(zhí)行情況,包括當(dāng)前執(zhí)行情況,以及歷史執(zhí)行記錄。支持按任務(wù)類型、任務(wù)狀態(tài)、任務(wù)對象對任務(wù)進(jìn)行查詢篩選。及稽核數(shù)據(jù)的總量。質(zhì)量規(guī)則和質(zhì)量指標(biāo)的對應(yīng)是系統(tǒng)內(nèi)置的。總體的質(zhì)量稽核結(jié)果以質(zhì)量指標(biāo)體系基于數(shù)據(jù)行的度量。可下鉆到每一個質(zhì)量規(guī)則基于屬性列的分析結(jié)果。對每一個質(zhì)量任務(wù),查看歷史質(zhì)量稽核結(jié)果對每一個質(zhì)量任務(wù),查看目標(biāo)對象的質(zhì)量趨勢。實際的目標(biāo)對象的質(zhì)量趨勢,是該目標(biāo)對象的全量稽核任務(wù)所對應(yīng)的質(zhì)量趨勢。圖任務(wù)監(jiān)視質(zhì)量問題管理按數(shù)據(jù)資源展示出現(xiàn)問題的質(zhì)量稽核結(jié)果據(jù)和其第一次被稽核發(fā)現(xiàn)的任務(wù)關(guān)聯(lián)】并由負(fù)責(zé)人進(jìn)行問題數(shù)據(jù)的修正。能是源端修正,此時,負(fù)責(zé)人可以在確認(rèn)問題不再存在后關(guān)閉工單。對各工單包含的多批次問題的處理情況進(jìn)行跟蹤。問題處理流程如下:問題管理數(shù)據(jù)問題概覽生成工單110110工單處理質(zhì)量評估與報告數(shù)據(jù)質(zhì)量評價指標(biāo)完整性:數(shù)據(jù)值是否缺失,包括對一般關(guān)系型數(shù)據(jù):數(shù)據(jù)行中具有非空約束的屬性值是否缺失準(zhǔn)確性:數(shù)據(jù)值是否符合業(yè)務(wù)定義和相關(guān)的業(yè)務(wù)規(guī)則數(shù)據(jù)的類型是否符合定義,如是否是數(shù)值、日期/時間等數(shù)據(jù)的取值是否符合預(yù)定義的值域空間唯一性:應(yīng)該具有唯一特征的數(shù)據(jù)值是否出現(xiàn)重復(fù)主鍵重復(fù)一致性:數(shù)據(jù)值是否存在相互沖突的情況主外鍵關(guān)聯(lián)規(guī)則約束屬性計算關(guān)聯(lián)規(guī)則約束規(guī)范性:數(shù)據(jù)是否符合有關(guān)描述形式的要求文本類數(shù)據(jù)的長度是否符合要求具有特定業(yè)務(wù)含義的數(shù)據(jù),是否符合正確的業(yè)務(wù)規(guī)則,如電話1111PAGE1號碼、郵箱地址等個規(guī)則不符合時不重復(fù)計算。對每一個數(shù)據(jù)采集/質(zhì)量指標(biāo)的度量和數(shù)據(jù)采集//稽核任務(wù)所處理的數(shù)據(jù)范圍的質(zhì)量度量。用戶可以建立針對一個表全量數(shù)據(jù)的數(shù)據(jù)稽核任務(wù)。(1-X100。(1-X100%(1-X100兩種計算方式:總量:沒有重復(fù)的取值數(shù)量÷該字段所有取值次數(shù)的總和distinct量:沒有重復(fù)的取值數(shù)量÷該字段所有不重復(fù)的取值數(shù)量一致性:(1-數(shù)據(jù)不合格率)X100%。按規(guī)則統(tǒng)計,不按照表統(tǒng)計。(1-X100%按字段統(tǒng)計按表統(tǒng)計完整性√√準(zhǔn)確性√√唯一性√一致性√規(guī)范性√√數(shù)據(jù)質(zhì)量分析統(tǒng)計支持以下視角的質(zhì)量分析統(tǒng)計:按周期(年月日)的質(zhì)量分析任務(wù)統(tǒng)計按任務(wù)目錄的質(zhì)量分析任務(wù)統(tǒng)計執(zhí)行了質(zhì)量分析任務(wù)的數(shù)據(jù)資源數(shù)量執(zhí)行質(zhì)量分析任務(wù)的次數(shù)、數(shù)據(jù)量、問題數(shù)據(jù)量執(zhí)行質(zhì)量分析任務(wù)的問題數(shù)據(jù)量、解決狀態(tài)按時間點的數(shù)據(jù)資源質(zhì)量統(tǒng)計or最新】按問題等級對數(shù)據(jù)資源分類占比orTOPn()資源清單按周期(年月日)的數(shù)據(jù)資源質(zhì)量統(tǒng)計【按周期】系統(tǒng)整體的數(shù)據(jù)資源質(zhì)量改進(jìn)趨勢時序數(shù)據(jù)按場站做統(tǒng)計質(zhì)量任務(wù)報告數(shù)據(jù)資源質(zhì)量報告輔助工具工具主要包含以下幾部分:KKS編碼測點設(shè)備映射BCS編碼KKS編碼設(shè)備部件庫配置1、設(shè)備部件模板導(dǎo)航EXCEL設(shè)備樹狀結(jié)構(gòu)。2、設(shè)備部件節(jié)點信息維護可對樹狀結(jié)構(gòu)進(jìn)行編輯,主要包括:添加同級、添加子集、刪除、編輯、上下移動、展開全部、合并全部等等功能。3、設(shè)備基礎(chǔ)信息納管通過線下整理導(dǎo)入直接通過工具編輯可對設(shè)備每種型號的基礎(chǔ)性息進(jìn)行納管。以上3個功能描述如下圖所示:系統(tǒng)設(shè)備庫配置1、模板導(dǎo)航該功能通過模板導(dǎo)航的編輯功能實現(xiàn)對模板的添加、刪除、上移、下移。2、系統(tǒng)設(shè)備結(jié)構(gòu)樹狀結(jié)構(gòu)展示EXCEL設(shè)備樹狀結(jié)構(gòu)。3、對系統(tǒng)設(shè)備節(jié)點信息維護下移動、展開全部、合并全部等功能。設(shè)備基礎(chǔ)信息納管以上3個功能描述如下圖所示:KKS規(guī)則配置系統(tǒng)(KKS)KKSKKS編碼規(guī)范。該功能主界面如下圖所示,場站結(jié)構(gòu)建模場站結(jié)構(gòu)建模基本流程如下圖所示:場站結(jié)構(gòu)建模工具主界面如下圖所示,主要功能包括:1、選取場站2、加載系統(tǒng)設(shè)備模板3、實例化設(shè)備4、對實例化的設(shè)備節(jié)點維護KKSKKS編碼、生成拓?fù)鋱D等功能。5、對設(shè)備進(jìn)行屬性配置設(shè)備下的部件,連接下游設(shè)備的功能主要用于生成拓?fù)鋱D。測點設(shè)備映射能界面如下圖所示:原始測點信息管理該功能可實現(xiàn)對原始測點的導(dǎo)入、查詢、編輯等功能。手動映射映射,如下圖所示自動映射點與設(shè)備數(shù)據(jù)匹配的依賴。匹配規(guī)則支持3種模式:正則表達(dá)式、包含、等值。規(guī)則的查詢、編輯、刪除、導(dǎo)入、導(dǎo)出自動匹配規(guī)則列表如下圖所示BCS編碼BCS編碼管理主要包括包括編碼配置、縮略語字典維護,屬性字典維護等功能,功能主界面如下圖所示:編碼配置該功能主要包括自動自動匹配、手動匹配、匹配同類單元及生成全局編碼。手動匹配BCSBCS圖所示自動匹配根據(jù)原始測點名稱和BCS屬性字典中的同義詞字段或根據(jù)類似設(shè)備已經(jīng)做好的BCS的模板,對原始測點進(jìn)行BCS屬性匹配,如圖下圖所示匹配同類單元BCS配,如圖下圖所示縮略語字典維護DL/T860.74-200661400碼,如下圖所示BCS屬性字典維護在增加某BCS屬性時會以彈框的形式調(diào)出縮略語字典以保證屬性字典的詞都源于縮略語字典,如下圖所示120120基于工具的量測數(shù)據(jù)標(biāo)準(zhǔn)化路線標(biāo)準(zhǔn)概述1212PAGE5生成標(biāo)準(zhǔn)整體思路數(shù)據(jù)標(biāo)準(zhǔn)化最終生成的結(jié)果是唯一的全局編碼。整體思路如下圖所示。生成全局編碼步驟生成全局編碼規(guī)則是:場站編碼.KKS編碼.BCS編碼.序號。故在生成全局編碼之前需完成KKS編碼編制、KKS編碼映射、BCS屬性匹配這三部準(zhǔn)備工作。KKS編碼編制一、收集資料,梳理模板,導(dǎo)入模板示(注:此模板也可直接在工具進(jìn)行編輯生成。二、新建場站,場站結(jié)構(gòu)建模,生成KKS對場站實例化之前需先新建場站,如圖1所示。對新建的場站根據(jù)導(dǎo)入的模板進(jìn)行實例化,如圖2所示,最終生成KKS,如圖3所示。圖12圖3KKS.區(qū).15.BKKSPV001015WBA02GU1002G設(shè)備映射此處的映射指的是對原始測點的設(shè)備部分進(jìn)行KKS45、6、7所示圖456圖7BCS屬性匹配根據(jù)原始測點名稱和BCS屬性字典,對原始測點進(jìn)行BCS屬性匹配,如圖所示圖8數(shù)據(jù)編碼維護一、KKS-KKS字典KKS(導(dǎo)則、電廠標(biāo)識系統(tǒng)編碼標(biāo)準(zhǔn)等標(biāo)準(zhǔn)文檔,如圖所示圖二、BCS-縮略語字典維護DL/T860.74-2006、61400語行編碼,如圖所示圖三、BCS-屬性字典維護在增加屬性時縮略語字典會已彈框的型式調(diào)出來以保證屬性字典的詞都源于縮略語字典,如圖所示圖數(shù)據(jù)共享服務(wù)使用需求。數(shù)據(jù)服務(wù),是數(shù)據(jù)管理工具的核心能力。總體權(quán)限流程如下:數(shù)據(jù)應(yīng)用請求webswagger接口調(diào)用請求;功能權(quán)限主要指是否具備進(jìn)入相應(yīng)頁面,并使用功能菜單的權(quán)限;數(shù)據(jù)資源權(quán)限這里的數(shù)據(jù)資源包括如下部分分類數(shù)據(jù)資源類型原生數(shù)據(jù)對象業(yè)務(wù)模型衍生資源時序視圖結(jié)構(gòu)化視圖數(shù)據(jù)集市數(shù)據(jù)沙箱數(shù)據(jù)資源管理權(quán)限:對指定數(shù)據(jù)資源的定義進(jìn)行刪除、更改、添加的權(quán)限,130130是資源的元數(shù)據(jù)層面的管理權(quán)限;數(shù)據(jù)訪問權(quán)限:對指定數(shù)據(jù)資源的數(shù)據(jù)記錄進(jìn)行讀取的權(quán)限;數(shù)據(jù)維護權(quán)限:對指定數(shù)據(jù)資源的數(shù)據(jù)記錄進(jìn)行刪除、更改、添加的權(quán)限;數(shù)據(jù)交換權(quán)限:對指定數(shù)據(jù)資源的數(shù)據(jù)記錄提取后下載傳輸?shù)臋?quán)限。數(shù)據(jù)資源被引用后,管理操作被禁止箱,一旦被引用后,禁止修改其定義即元數(shù)據(jù)。如果需要修改,需要脫離所有引用關(guān)系后進(jìn)行操作。時序視圖物理設(shè)備樹引導(dǎo)模式時序視圖。流程如下圖所示:流程步驟:選擇場站范圍,根據(jù)不同場站,列出物理設(shè)備樹;根據(jù)物理設(shè)備樹,選擇對應(yīng)的設(shè)備;在選中的設(shè)備范圍內(nèi),列出每種設(shè)備的全部測點,再次進(jìn)行篩選;最后確定的測點,為時序視圖的測點范圍。1313PAGE1基于物理設(shè)備樹選擇測點標(biāo)準(zhǔn)量測模型引導(dǎo)模式選擇測點,構(gòu)建視圖。流程如下圖所示:流程步驟:根據(jù)標(biāo)準(zhǔn)量測模型,選擇對應(yīng)的邏輯設(shè)備;屬性范圍;選擇廠家型號,列出具有量測屬性及廠家型號的所有物理設(shè)備。在所有設(shè)備測點中,選擇期望的測點范圍,形成最終的時序視圖。基于標(biāo)準(zhǔn)量測模型選擇屬性系統(tǒng)自動篩選符合條件的測點選擇期望的測點范圍并生成視圖系統(tǒng)視圖引導(dǎo)模式定了用戶視圖中測點的邏輯屬性要求。建立視圖的過程,主要就是選擇測點的過程,選擇步驟如下:選擇基于的系統(tǒng)內(nèi)置視圖,得到量測屬性要求、邏輯設(shè)備要求;選擇需要的場站范圍;2表。在所有設(shè)備測點中,選擇期望的測點范圍,形成最終的時序視圖要求。結(jié)構(gòu)化視圖圖分為兩種構(gòu)建模式,分別是基于數(shù)據(jù)目錄和基于維度主題。結(jié)構(gòu)化視圖構(gòu)建一、基于數(shù)據(jù)目錄的構(gòu)建模式此模式下的結(jié)構(gòu)化視圖構(gòu)建需要配置信息如下:在數(shù)據(jù)目錄中瀏覽,選擇期望的數(shù)據(jù)對象;瀏覽數(shù)據(jù)對象的屬性,并勾選期望屬性,此處分為必選及可選;可預(yù)覽已選數(shù)據(jù)記錄,并進(jìn)行數(shù)據(jù)范圍調(diào)整;重復(fù)上述三個步驟,直到選中所有期望數(shù)據(jù)選擇數(shù)據(jù)并預(yù)覽二、基于維度主題的構(gòu)建模式此模式下的結(jié)構(gòu)化視圖構(gòu)建需要配置信息如下:目標(biāo)維度及維度條件需要通過【數(shù)據(jù)標(biāo)準(zhǔn)】部分所定義的功能準(zhǔn)備好可用的維度以及維度數(shù)據(jù)。存在多個維度,及一個維度內(nèi)多個篩選條件時,按照如下方式處理:多個維度之間,是“and”關(guān)系;一個維度內(nèi)的多個篩選條件,是“or”關(guān)系;事實表數(shù)據(jù)對象數(shù)據(jù)對象和維度的關(guān)聯(lián)依賴于業(yè)務(wù)對象建模工具。通過業(yè)務(wù)對象建模工具維護數(shù)據(jù)對象和維度的關(guān)聯(lián),從系統(tǒng)中建立的物理模型中挑選事實表數(shù)據(jù)對象視圖結(jié)構(gòu)視圖包括明細(xì)表和匯總表兩個部分。明細(xì)表:從所挑選的維度、事實表數(shù)據(jù)對象的屬性中挑選需要包含在視圖結(jié)構(gòu)中的屬性(默認(rèn)是全部字段。支持在相關(guān)字段上進(jìn)行基本轉(zhuǎn)換計算(通常為基本四則運算,并支持自定義包含多個字段的值之間的表達(dá)式計算)匯總表:支持對度量值基于維度匯總那么必須同時對其上包含的層級進(jìn)行匯總。對于簡單維度,由用戶指定進(jìn)行匯總的維度成員值,自動匯總該成員值所有子節(jié)點的數(shù)值;除了通常的求和、計數(shù)、求平均、最大值、最小值,還支持自定義表達(dá)式計算。明細(xì)表和匯總表中都包含來源于維度的那些字段。視圖的實例化配置視圖的實例化指的是對視圖周期性進(jìn)行物理存儲。視圖是否需要實例化根據(jù)用戶需求確定。視圖實例化所使用的存儲資源和視圖所關(guān)聯(lián)的事實表數(shù)據(jù)對象保持一致。視圖的實例化過程包括:根據(jù)結(jié)構(gòu)化定義,創(chuàng)建獨立物理存儲表根據(jù)數(shù)據(jù)抽取的調(diào)度策略,完成數(shù)據(jù)抽取;根據(jù)數(shù)據(jù)匯總的調(diào)度策略,完成數(shù)據(jù)匯總。結(jié)構(gòu)化視圖被其他實體(如數(shù)據(jù)集市)引用之后,不再允許對結(jié)構(gòu)化視圖的定義信息進(jìn)行變更。結(jié)構(gòu)化視圖查詢樹,從而確保用戶明白每一個查詢條件對結(jié)果的影響。結(jié)構(gòu)化視圖管理訪問。據(jù)的查詢權(quán)限,不需要在數(shù)據(jù)對象層次設(shè)置。數(shù)據(jù)集市邏輯上的定義,不對應(yīng)實際的物理實體。通過訂閱的方式對外提供數(shù)據(jù)共享。數(shù)據(jù)集市的建立基于數(shù)據(jù)對象目錄、結(jié)構(gòu)化視圖、時序視圖構(gòu)建。支持基于數(shù)據(jù)對象目錄、結(jié)構(gòu)化視圖、時序視圖挑選數(shù)據(jù)對象:篩選條件通過結(jié)構(gòu)化視圖挑選數(shù)據(jù)對象時,使用原視圖定義的篩選條件據(jù)時間區(qū)間條件。web三方使用者,可根據(jù)接口規(guī)范快速完成數(shù)據(jù)集市數(shù)據(jù)的調(diào)取。數(shù)據(jù)沙箱(另一個與原數(shù)據(jù)區(qū)隔離的物理區(qū)域復(fù)制后形成的隔離數(shù)據(jù)集合體成為數(shù)據(jù)沙箱。步應(yīng)周期性單向執(zhí)行。數(shù)據(jù)沙箱的建立數(shù)據(jù)對象。數(shù)據(jù)沙箱的同步支持對沙箱整體以及包含的每個對象設(shè)置同步邏輯。沙箱里的數(shù)據(jù)對象獨立的同步調(diào)度具有較高優(yōu)先級,沒有獨立調(diào)度設(shè)置時,使用沙箱整體的同步設(shè)置。每個數(shù)據(jù)對象的第一次數(shù)據(jù)同步時創(chuàng)建實際的數(shù)據(jù)對象存儲結(jié)構(gòu)。數(shù)據(jù)沙箱同步過程中,支持?jǐn)?shù)據(jù)的脫敏過程。支持以下脫敏方式,包括:掩碼替換字符串字段指定長度范圍內(nèi)容替換為指定字符偏移插入截斷保留字符串字段指定長度范圍內(nèi)容刪除系統(tǒng)后續(xù)更新所提供的脫敏方法140140數(shù)據(jù)訂閱(數(shù)據(jù)共享)店,供使用付費下載;根據(jù)以下為數(shù)據(jù)訂閱需要具備的能力:針對全域原生數(shù)據(jù)、衍生數(shù)據(jù)的篩選、打包;數(shù)據(jù)包發(fā)布到應(yīng)用商店(訂閱目錄;根據(jù)用戶訂閱請求,數(shù)據(jù)共享推送;被用戶訂閱之后的數(shù)據(jù)持續(xù)更新能力(可選項)基本流程數(shù)據(jù)打包源實體類型:數(shù)據(jù)對象時序視圖結(jié)構(gòu)化視圖1414PAGE5數(shù)據(jù)包基于數(shù)據(jù)集市建立,和一個數(shù)據(jù)集市完整對應(yīng)。性信息,即元信息。數(shù)據(jù)包的封裝信息包含ID發(fā)布包名稱發(fā)布包內(nèi)容描述等基本信息發(fā)布到應(yīng)用商店發(fā)布消息結(jié)構(gòu)中應(yīng)包含如下要素:ID、發(fā)布包名稱發(fā)布包的地址信息(地址內(nèi)容包含數(shù)據(jù)管理服務(wù)訪問接口參數(shù)要求,按地址可以直接提取數(shù)據(jù)包內(nèi)容3)發(fā)布目標(biāo)地址:默認(rèn)是內(nèi)部訂閱目錄,如果是應(yīng)用商店,選擇地址按訂閱請求交換數(shù)據(jù)包用戶按照應(yīng)用商店的目錄,提起請求;ID息,發(fā)往對應(yīng)的數(shù)據(jù)管理服務(wù)接口;數(shù)據(jù)管理服務(wù)接口,將數(shù)據(jù)包記錄內(nèi)容發(fā)送給訂閱者錄內(nèi)容。訂閱/審批流程如果用戶是訂閱,走訂閱審批流程;如果用戶是訂購,走訂購付費流程;對于一個具體的數(shù)據(jù)訂閱請求,其控制流程如下訂閱后的數(shù)據(jù)更新默認(rèn)不更新有數(shù)據(jù)記錄。這樣當(dāng)數(shù)據(jù)資源實體包含的數(shù)據(jù)記錄有更新時,訂閱數(shù)據(jù)不更新。定期更新選項化時,按照更新策略,向訂閱用戶推送最新時刻的全量數(shù)據(jù)包記錄內(nèi)容。全文檢索的檢索:針對結(jié)構(gòu)化數(shù)據(jù)對象存儲的全文檢索HDFS檢索關(guān)鍵字的規(guī)則定義:支持三個關(guān)鍵字輸入關(guān)鍵字支持中文,英文,數(shù)字64檢索范圍的指定:1)可以指定具體檢索范圍,結(jié)構(gòu)化數(shù)據(jù)對象可以在納管目錄里指定具體數(shù)據(jù)對象,此處的目錄需過濾非結(jié)構(gòu)化數(shù)據(jù)對象,只顯示結(jié)構(gòu)化數(shù)據(jù)對象。輸出結(jié)果的排序:顯示檢索結(jié)果的總數(shù)量100%->1%。開始排序。HDFS目錄檢索結(jié)果的信息結(jié)構(gòu):內(nèi)容(60字)HDFS目錄路徑創(chuàng)建時間文件大小創(chuàng)建者結(jié)構(gòu)化數(shù)據(jù)檢索結(jié)果的信息結(jié)構(gòu):包含關(guān)鍵字的數(shù)據(jù)值數(shù)據(jù)對象名稱數(shù)據(jù)大小數(shù)據(jù)源(庫表名)創(chuàng)建時間創(chuàng)建者數(shù)據(jù)門戶資產(chǎn)門戶、數(shù)據(jù)質(zhì)量門戶、數(shù)據(jù)服務(wù)門戶和系統(tǒng)監(jiān)視門戶。數(shù)據(jù)資產(chǎn)門戶數(shù)據(jù)資產(chǎn)門戶,主要展示工具內(nèi)所納管的數(shù)據(jù)資產(chǎn)相關(guān)指標(biāo),包括數(shù)據(jù)量、數(shù)據(jù)增量、多視角統(tǒng)計、數(shù)據(jù)分布、數(shù)據(jù)關(guān)聯(lián)等。表數(shù)據(jù)資產(chǎn)門戶核心指標(biāo)內(nèi)容分類模塊展示名稱展示內(nèi)容數(shù)據(jù)量展示存儲量截止當(dāng)前總數(shù)據(jù)存儲量(GB)表數(shù)量截止當(dāng)前表數(shù)量(個)資產(chǎn)數(shù)量截止當(dāng)前數(shù)據(jù)資產(chǎn)數(shù)量(個)磁盤監(jiān)視已用容量占比磁盤監(jiān)視總?cè)萘看疟P監(jiān)視上月增長數(shù)據(jù)變化趨勢資產(chǎn)概覽每月數(shù)據(jù)存儲量增長(GB/月)資產(chǎn)概覽截止當(dāng)前表數(shù)量增長(個/月)資產(chǎn)概覽截止當(dāng)前數(shù)據(jù)資產(chǎn)數(shù)量增長(個/月)數(shù)據(jù)多視角統(tǒng)計按數(shù)據(jù)來源分析按照來源系統(tǒng)統(tǒng)計數(shù)據(jù)量各個來源系統(tǒng)數(shù)據(jù)增長曲線按數(shù)據(jù)來源分析-結(jié)構(gòu)化數(shù)據(jù)TOP10各系統(tǒng)表數(shù)量排名按數(shù)據(jù)來源分析-時序數(shù)據(jù)TOP10各系統(tǒng)測點數(shù)量排名按數(shù)據(jù)來源分析-數(shù)據(jù)引用TOP5被使用數(shù)據(jù)最多的系統(tǒng)名稱按資產(chǎn)類別分析統(tǒng)計各個資產(chǎn)類別的數(shù)據(jù)量包括:數(shù)據(jù)對象、數(shù)據(jù)視圖、數(shù)據(jù)模型、指標(biāo)、數(shù)據(jù)集市各個類別資產(chǎn)的數(shù)量增長曲線按資產(chǎn)類別分析-業(yè)務(wù)領(lǐng)域分布展示每類資產(chǎn)在各個業(yè)務(wù)領(lǐng)域的分布按數(shù)據(jù)類型分析按照數(shù)據(jù)類型統(tǒng)計數(shù)據(jù)量數(shù)據(jù)分布數(shù)據(jù)地圖云邊節(jié)點分布圖數(shù)據(jù)地圖本節(jié)點數(shù)據(jù)分層分布圖(多個源系統(tǒng)、接入層、中間層、應(yīng)用層、前臺應(yīng)用)數(shù)據(jù)使用展示資產(chǎn)訂閱TOP10資產(chǎn)被訂閱次數(shù)排名數(shù)據(jù)引用TOP10數(shù)據(jù)被使用次數(shù)排名數(shù)據(jù)使用分布數(shù)據(jù)被引用數(shù)據(jù)分布統(tǒng)計(按節(jié)點分布/節(jié)點內(nèi)部按照系統(tǒng)分布)數(shù)據(jù)關(guān)聯(lián)分析數(shù)據(jù)關(guān)聯(lián)場景展示場景名稱及圖標(biāo)數(shù)據(jù)關(guān)聯(lián)圖展示某場景中的關(guān)聯(lián)數(shù)據(jù)數(shù)據(jù)資產(chǎn)門戶-首頁1數(shù)據(jù)資產(chǎn)門戶-首頁2數(shù)據(jù)資產(chǎn)門戶-數(shù)據(jù)關(guān)聯(lián)數(shù)據(jù)質(zhì)量門戶量問題、質(zhì)量處理的統(tǒng)計而分析。表數(shù)據(jù)質(zhì)量門戶核心指標(biāo)內(nèi)容分類模塊展示名稱展示內(nèi)容質(zhì)量任務(wù)展示任務(wù)數(shù)量任務(wù)數(shù)量任務(wù)類別分布任務(wù)類別分布(一致性、完整性、冗余性、合規(guī)性、合理性)任務(wù)狀態(tài)分布任務(wù)狀態(tài)分布(進(jìn)行中、排隊中、已停止、已完成)質(zhì)量問題展示問題數(shù)量問題數(shù)量:全部數(shù)據(jù)量、問題數(shù)據(jù)量、問題數(shù)據(jù)占比問題占比分布問題占比分布(一致性、完整性、冗余性、合規(guī)性、合理性)問題占比TOP10問題占比排名(節(jié)點內(nèi)按照數(shù)據(jù)來源排名)問題占比TOP10問題占比排名(云邊協(xié)同按照節(jié)點排名)問題數(shù)據(jù)展示問題數(shù)據(jù)滾動展示質(zhì)量處理展示待辦工單工單總計、待辦工單、占比待辦任務(wù)展示待辦任務(wù)詳情滾動展示圖數(shù)據(jù)質(zhì)量門戶數(shù)據(jù)服務(wù)門戶析。表數(shù)據(jù)服務(wù)門戶核心指標(biāo)內(nèi)容分類模塊展示名稱展示內(nèi)容數(shù)據(jù)視圖-數(shù)據(jù)量展示數(shù)據(jù)視圖分布概覽視圖總數(shù)時序視圖數(shù)量及占比150150結(jié)構(gòu)化視圖數(shù)量及占比數(shù)據(jù)集市-數(shù)據(jù)量展示數(shù)據(jù)集市類別分布前端應(yīng)用類、業(yè)務(wù)中臺類、算法分析類數(shù)量數(shù)據(jù)集市引用頻次Top5數(shù)據(jù)集市引用頻次排序數(shù)據(jù)沙箱-數(shù)據(jù)量展示數(shù)據(jù)沙箱使用次數(shù)Top5數(shù)據(jù)沙箱被使用次數(shù)排名數(shù)據(jù)沙箱資源分布沙箱資源分布(Oracle、MongoDB、Hbase)數(shù)量及占比數(shù)據(jù)訂閱-基本信息展示數(shù)據(jù)訂閱情況概覽發(fā)布數(shù)據(jù)包、訂閱數(shù)據(jù)包、有效數(shù)據(jù)包訂閱率、數(shù)據(jù)訂購收入數(shù)據(jù)訂閱-數(shù)據(jù)變化趨勢數(shù)據(jù)訂閱數(shù)量趨勢本期及去年同期每月訂閱數(shù)量趨勢數(shù)據(jù)訂閱審批狀態(tài)分布(待處理,審批中,已批準(zhǔn))數(shù)據(jù)訂閱-數(shù)據(jù)量展示訂閱數(shù)量Top5訂閱數(shù)量排名數(shù)據(jù)訂閱-數(shù)據(jù)多視角統(tǒng)計數(shù)據(jù)資源實體類型分布數(shù)據(jù)對象、時序視圖、結(jié)構(gòu)化視圖數(shù)量及占比數(shù)據(jù)訂閱領(lǐng)域分布對比風(fēng)電領(lǐng)域、光伏領(lǐng)域、水電領(lǐng)域、火電領(lǐng)域及綜合領(lǐng)域訂閱數(shù)量(本月Vs上月)全文檢索-數(shù)量統(tǒng)計檢索關(guān)鍵詞匯Top5檢索關(guān)鍵詞排名關(guān)鍵字匹配關(guān)聯(lián)結(jié)果展示1515PAGE1圖數(shù)據(jù)服務(wù)門戶系統(tǒng)監(jiān)視門戶系統(tǒng)監(jiān)視門戶,主要展示工具系統(tǒng)運行及任務(wù)執(zhí)行情況。表系統(tǒng)監(jiān)視門戶核心指標(biāo)內(nèi)容分類模塊展示名稱展示內(nèi)容系統(tǒng)任務(wù)分析執(zhí)行中的任務(wù)各任務(wù)名稱及對應(yīng)的占比情況系統(tǒng)問題監(jiān)視系統(tǒng)最新日志運行節(jié)點、進(jìn)程、日志級別、日志信息系統(tǒng)資源監(jiān)視內(nèi)存展示內(nèi)存的實時使用情況CPU展示CPU的實時使用情況群集網(wǎng)絡(luò)IO接收字節(jié)、讀取字節(jié)群集磁盤IO寫入字節(jié)和讀取字節(jié)接口丟包率丟失數(shù)量、接收數(shù)量、丟包率HDFSIO寫入和讀取字節(jié)系統(tǒng)用戶分析系統(tǒng)在線人數(shù)在線人數(shù)、總?cè)藬?shù)圖系統(tǒng)監(jiān)視門戶7.2.4可視化開發(fā)大屏駕駛艙駕駛艙各電廠年發(fā)電量完成率各電廠總安全運行天數(shù)各電廠發(fā)電量統(tǒng)計指標(biāo)公司所屬電廠運行信息實時監(jiān)視圖各電廠平均降雨量各電廠生產(chǎn)工程項目完成情況統(tǒng)計及明細(xì)各電廠缺陷完成情況統(tǒng)計及明細(xì)各電廠設(shè)備利用小時數(shù)分析各電廠年綜合廠用電率分析各電廠機組健康度各電廠近
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 地區(qū)經(jīng)濟發(fā)展規(guī)劃
- 電動汽車充電樁結(jié)構(gòu)
- 產(chǎn)品發(fā)布市場調(diào)研報告
- 民宿可行性報告
- 新能源汽車配送合作協(xié)議
- 技術(shù)交流平臺活躍度統(tǒng)計表
- 2025年度北京市房地產(chǎn)權(quán)證寄存與保管服務(wù)合同
- 新能源行業(yè)儲能技術(shù)與應(yīng)用推廣方案
- 生物質(zhì)顆粒燃料 河北
- 機械行業(yè)智能制造標(biāo)準(zhǔn)化與規(guī)范化方案
- 青島版科學(xué)(2017)六三制六年級下冊1-5《觸覺》課件
- 建筑用砂標(biāo)準(zhǔn)及特點-課件
- 部編版六年級語文下冊《語文園地三》優(yōu)秀課件
- 四年級數(shù)學(xué)思維訓(xùn)練社團活動(素質(zhì)拓展)電子教案
- 蒙古族文化課件
- 瀘州老窖股權(quán)激勵方案案例分析
- 火電廠廠用電系統(tǒng)與廠用電接線運行特點分析
- 部編版小學(xué)語文三年級(下冊)學(xué)期課程綱要
- _重大事故后果分析(精)
- 水泥攪拌樁施工監(jiān)理質(zhì)量控制要點
- 初級診斷師培訓(xùn)課程QC基礎(chǔ)知識
評論
0/150
提交評論