數(shù)據(jù)治理體系基礎(chǔ)知識

數(shù)據(jù)治理體系基礎(chǔ)知識大數(shù)據(jù)成為國家戰(zhàn)略：2016年，“十三五”規(guī)劃首次提出“實施國家大數(shù)據(jù)戰(zhàn)略”。2017年，習近平在中央政數(shù)據(jù)成為關(guān)鍵生產(chǎn)要素：十九屆四中全會首次公開提出“數(shù)據(jù)可作為生產(chǎn)要素按貢獻參與分配”，提出加快數(shù)據(jù)治理是數(shù)字化轉(zhuǎn)型的基礎(chǔ)：2020年8月19號國務院國資委頒布了《關(guān)于加快推進國有企業(yè)數(shù)字化轉(zhuǎn)型工作），?DataGovernanceInstitute?DataManagementAssociation?工信部下屬中國信息通信研究院?全國信息技術(shù)標準化數(shù)據(jù)治理研究所國際數(shù)據(jù)管理協(xié)會云計算與大數(shù)據(jù)研究所技術(shù)委員會DMBOK十一大數(shù)據(jù)管理職能DMBOK七個環(huán)境元素優(yōu)點優(yōu)點缺點11缺少實踐路徑，作為跨行業(yè)的通用框架，DMBOK對于企業(yè)如何在實際工作中落22缺少數(shù)據(jù)運營管理，關(guān)注對數(shù)據(jù)分析應用建設(shè)的方法，但對數(shù)據(jù)運營等233缺少數(shù)據(jù)標準建設(shè)，國內(nèi)企業(yè)普遍反映導致數(shù)據(jù)質(zhì)量的重要原因之作為治理的一項重要工作，但DMBOK并未對數(shù)據(jù)標準管理給以足夠344），數(shù)據(jù)管理能力成熟度模型（Datamanagementcapabilitymaturityassessmentmodel，簡稱DCMM）是由全國信息技術(shù)標），優(yōu)點優(yōu)點缺點11把“溝通機制”納入考核范圍。2332對某些相關(guān)數(shù)據(jù)管理能力如“元數(shù)據(jù)”、“主數(shù)據(jù)”重視不足。4455數(shù)據(jù)資產(chǎn)目錄就是水果的名稱、品種、價格；數(shù)據(jù)架構(gòu)就是要把水果擺放的有序、整齊、美觀、穩(wěn)定；數(shù)據(jù)標準就是水果分類與規(guī)格清晰、一致；數(shù)據(jù)質(zhì)量就是保證沒有爛水果；數(shù)據(jù)安全就是防止被人偷拿偷吃；數(shù)據(jù)生命周期就是采購、銷售、爛水果處置的計劃；數(shù)據(jù)認責就是明確采購員、貨物管理員、收銀員的責任；數(shù)據(jù)應用管理就是支持線上帶貨、移動渠道、送貨上門等創(chuàng)新業(yè)務數(shù)據(jù)標準企業(yè)數(shù)據(jù)模型數(shù)據(jù)標準業(yè)務數(shù)據(jù)質(zhì)量據(jù)業(yè)務數(shù)據(jù)質(zhì)量據(jù)元數(shù)據(jù)元數(shù)據(jù)數(shù)據(jù)數(shù)據(jù)明確集團數(shù)據(jù)戰(zhàn)略定位結(jié)合各項輸入內(nèi)容，根據(jù)需求分析、核心設(shè)計、支撐執(zhí)行、實施規(guī)劃設(shè)計方法結(jié)合行業(yè)對標設(shè)計數(shù)據(jù)治理藍圖 數(shù)據(jù)治理體系藍圖是組織開展數(shù)據(jù)工作的愿景、目的、目標和原則，包括數(shù)據(jù)戰(zhàn)略規(guī)劃、數(shù)據(jù)戰(zhàn)略實施和數(shù)據(jù)戰(zhàn)略評估，可以指導企業(yè)開展數(shù)據(jù)治理工作，指明數(shù)據(jù)應用的方向。數(shù)據(jù)治理流程體系設(shè)計數(shù)據(jù)治理制度體系設(shè)計數(shù)據(jù)治理組織架構(gòu)設(shè)計數(shù)據(jù)治理流程體系設(shè)計數(shù)據(jù)治理制度體系設(shè)計重點內(nèi)容重點內(nèi)容>結(jié)合數(shù)據(jù)管控模式，和企業(yè)組織架構(gòu)現(xiàn)狀，初步搭建本部數(shù)據(jù)管理虛擬及實體相關(guān)組織架針對成員單位，明確組織架構(gòu)和崗位職責，提供參考示例，為其搭建提供依據(jù)；結(jié)合數(shù)據(jù)管理現(xiàn)狀和數(shù)據(jù)治理體系架構(gòu)，搭建管理制度體系編制總體數(shù)據(jù)治理總則，結(jié)合成員單位產(chǎn)業(yè)特點和管理現(xiàn)狀，為其細化和后續(xù)完善提供指導意見，以示例形式提供參考；基于業(yè)務流程梳理搭建治理流程體系架構(gòu)；重點以本部流程為核心，根據(jù)前期梳理成果，完成一級數(shù)據(jù)治理流程；對成員單位，明確梳理方多行業(yè)領(lǐng)域的數(shù)據(jù)資產(chǎn)實踐表明：傳統(tǒng)的由“IT部門牽頭、業(yè)務部門配合”的模式，向“專門數(shù)據(jù)管理部門+CDO崗位”模式發(fā)展；傳統(tǒng)“手工表格”的工具應用，向“自動智能的平臺工具”應用升級；組織數(shù)據(jù)管理能力正在快速提升組織架構(gòu)組織架構(gòu)數(shù)據(jù)資產(chǎn)管理委員會數(shù)據(jù)資產(chǎn)管理中心數(shù)據(jù)資產(chǎn)管理委員會數(shù)據(jù)資產(chǎn)管理中心角色職責角色職責數(shù)據(jù)決策者數(shù)據(jù)決策者數(shù)據(jù)管理者數(shù)據(jù)管理者數(shù)據(jù)提供者數(shù)據(jù)消費者數(shù)據(jù)提供者數(shù)據(jù)消費者數(shù)據(jù)開發(fā)者數(shù)據(jù)開發(fā)者數(shù)據(jù)管理的組織架構(gòu)模式通常有三種：集中式、聯(lián)邦式、分散式現(xiàn)集中式聯(lián)邦式分散式），），以DCMM體系內(nèi)容作為指引，結(jié)合集團現(xiàn)有管理制度的編制模板、內(nèi)容參考和管理流程，借鑒和參考同業(yè)領(lǐng)先實踐，規(guī)劃和設(shè)計集團數(shù)據(jù)治理制度體系框架，明確集團數(shù)據(jù)治理制度的結(jié)構(gòu)、各類制度的基本含義、目標、制定組織、適用范圍、類別以及編制依據(jù)、原則和流程等。數(shù)據(jù)管理制度框架設(shè)計各領(lǐng)域數(shù)據(jù)政策、辦數(shù)據(jù)管理制度框架設(shè)計各領(lǐng)域數(shù)據(jù)政策、辦1233為保障數(shù)據(jù)治理工作的一致、有序和追溯可查，提高工作效率，降低風險，以數(shù)據(jù)治理建設(shè)內(nèi)容和技術(shù)支撐為基礎(chǔ)，結(jié)合流程框架體系的設(shè)計思路，針對數(shù)據(jù)治理過程的各個業(yè)務活動設(shè)計管理流程。數(shù)數(shù)據(jù)治理活動管理流程設(shè)計更數(shù)據(jù)模型注冊應數(shù)據(jù)資源目錄重大變更系管理增規(guī)劃與架構(gòu)檢查與考核數(shù)據(jù)安全與保密數(shù)據(jù)創(chuàng)建與維護數(shù)據(jù)共享管理檢查與考核數(shù)據(jù)安全與保密數(shù)據(jù)創(chuàng)建與維護檢查要素數(shù)據(jù)創(chuàng)建保護數(shù)據(jù)維護分級保護數(shù)據(jù)創(chuàng)建數(shù)據(jù)劃分數(shù)據(jù)應用中心化集中共享檢查要素數(shù)據(jù)創(chuàng)建保護數(shù)據(jù)維護分級保護數(shù)據(jù)創(chuàng)建數(shù)據(jù)歸集共享數(shù)據(jù)服務數(shù)據(jù)共享平臺通報機制訪問控制數(shù)據(jù)歸集共享數(shù)據(jù)服務數(shù)據(jù)共享平臺通報機制訪問控制數(shù)據(jù)存儲數(shù)據(jù)退役存儲與傳輸保護數(shù)據(jù)存儲數(shù)據(jù)退役共享使用授權(quán)數(shù)據(jù)保密追責數(shù)據(jù)質(zhì)量安全監(jiān)督主數(shù)據(jù)共享使用管控數(shù)據(jù)保密追責數(shù)據(jù)質(zhì)量安全監(jiān)督主數(shù)據(jù)組織與職責數(shù)據(jù)認責工作是一項長期、逐步細化、迭代完善的工作。需要按照業(yè)務負責、全員參與；層層管控、認責到崗、問題導向、循序漸進的原則開展工作原則一：全程參與原則二：原則二：認責到崗原則原則三：循序漸進數(shù)據(jù)認責是以數(shù)據(jù)資源目錄業(yè)務對象為認責對象，對源頭數(shù)據(jù)開展認責，明確相關(guān)的責任部門、崗位，以確保各項數(shù)據(jù)管理工作責任得到落實?運：即是維護，維持產(chǎn)品的正常運作?營：則是經(jīng)營，主動設(shè)法創(chuàng)造和增加盈利,把隱藏在海量數(shù)據(jù)中的信息、規(guī)律和知數(shù)據(jù)資產(chǎn)化數(shù)據(jù)資產(chǎn)化數(shù)據(jù)數(shù)據(jù)運營資產(chǎn)價值化業(yè)務數(shù)據(jù)化資產(chǎn)價值化業(yè)務數(shù)據(jù)化業(yè)務端數(shù)據(jù)消費者數(shù)據(jù)運營評估是對數(shù)據(jù)在運營期間效果的整體評價通過明確影響因子，選定評估方法，制定評估模型最終實施運營能力與運營收益整體評估1.明確影響因子需求滿足度2.選擇評估方法成本法收益法市場法收益法市場法3.制定評估模型評估價值……4.實施運營評估運營能力評估運營收益評估數(shù)據(jù)架構(gòu)參考DCMM數(shù)據(jù)架構(gòu)，結(jié)合集團現(xiàn)狀形成包括數(shù)據(jù)資源目錄、數(shù)據(jù)架構(gòu)、數(shù)據(jù)標準、數(shù)據(jù)質(zhì)量和數(shù)據(jù)安全。一級主題域二級主題域…非油品批發(fā)非油品外采…成品油批發(fā)成品油外采油品物流非油品零售一級主題域二級主題域…非油品批發(fā)非油品外采…成品油批發(fā)成品油外采油品物流非油品零售三級主題域業(yè)務對…業(yè)務對象數(shù)據(jù)模型數(shù)據(jù)分布據(jù)的產(chǎn)生源頭?當發(fā)生數(shù)據(jù)問題時，快速定位數(shù)據(jù)的來源、去向?在數(shù)據(jù)應用時快速找到可信數(shù)據(jù)源?實現(xiàn)對業(yè)務的規(guī)范、統(tǒng)一質(zhì)量評測體系準規(guī)則準規(guī)則數(shù)據(jù)可用性數(shù)數(shù)據(jù)時序性更更新時效性非非空符合度內(nèi)內(nèi)容唯一性取取值合理性類類型規(guī)范性精精度規(guī)范性長長度規(guī)范性格格式規(guī)范性設(shè)置保護屬性?不同等級設(shè)置不同的數(shù)據(jù)保護措施設(shè)置脫敏規(guī)則?建立數(shù)據(jù)質(zhì)量日常監(jiān)控體系，支撐質(zhì)量日常、自動化的監(jiān)控?在數(shù)據(jù)模型屬性上，提供質(zhì)量規(guī)則從數(shù)據(jù)資源的業(yè)務屬性、管理屬性、技術(shù)屬性三個維度梳理集團的結(jié)構(gòu)化和非結(jié)構(gòu)化的各專業(yè)數(shù)據(jù)資源，并按照能觸及的最細粒度梳理數(shù)據(jù)對象、數(shù)據(jù)權(quán)責、數(shù)據(jù)標準、數(shù)據(jù)安全、數(shù)據(jù)開放共享、數(shù)據(jù)存儲等方面內(nèi)容，形成完備的數(shù)據(jù)資產(chǎn)目錄框架勘查領(lǐng)域業(yè)務梳理L1主題域分組勘查領(lǐng)域業(yè)務梳理L1主題域分組L2主題域L3業(yè)務對象L4邏輯實體ITIT系統(tǒng)盤點數(shù)據(jù)對象數(shù)據(jù)對象數(shù)據(jù)權(quán)責數(shù)據(jù)標準數(shù)據(jù)安全數(shù)據(jù)共享數(shù)據(jù)存儲數(shù)據(jù)模型是指用于描述現(xiàn)實世界業(yè)務實體的屬性及實體之間關(guān)系的一種抽象。分為概念模型、邏輯模型和物理模型三層。概念模型經(jīng)過細化形成邏輯模型，企業(yè)邏輯模型指導信息系統(tǒng)物理模型的創(chuàng)建。企業(yè)級系統(tǒng)級邏輯模型物理模型概念模型型型企業(yè)級系統(tǒng)級邏輯模型物理模型概念模型型型為履行數(shù)據(jù)管理相關(guān)工作提供依據(jù)。數(shù)據(jù)分布管理包括數(shù)據(jù)分布數(shù)據(jù)分布關(guān)系梳理方法：門統(tǒng)陣陣數(shù)據(jù)流向梳理方法：1.識別核心數(shù)據(jù)內(nèi)容2.識別l數(shù)據(jù)標準管理體系：主要包含數(shù)據(jù)標準管理機制、數(shù)據(jù)標準設(shè)計制定、數(shù)據(jù)標準落地實施機制、數(shù)據(jù)標準管理維護等幾部分。l實現(xiàn)企業(yè)業(yè)務術(shù)語，元數(shù)據(jù)，參考數(shù)據(jù)，主數(shù)據(jù)，指標數(shù)據(jù)的規(guī)范定義、獲取原則、管理要求等。管理屬性(描述了數(shù)據(jù)標準與數(shù)據(jù)標準管理相關(guān)聯(lián)的特性)業(yè)務屬性管理屬性(描述了數(shù)據(jù)標準與數(shù)據(jù)標準管理相關(guān)聯(lián)的特性)業(yè)務屬性(描述數(shù)據(jù)與業(yè)務相關(guān)聯(lián)的特性)標準分類及屬性說明(描述了數(shù)據(jù)與信息技術(shù)實現(xiàn)相關(guān)聯(lián)標準分類及屬性說明業(yè)務術(shù)語業(yè)務術(shù)語數(shù)據(jù)元標準數(shù)據(jù)元標準主數(shù)據(jù)標準主數(shù)據(jù)標準參考數(shù)據(jù)標準參考數(shù)據(jù)標準述指標數(shù)據(jù)標準指標數(shù)據(jù)標準工作內(nèi)容工作內(nèi)容1、數(shù)據(jù)質(zhì)量評估過程模板項舉例評估范圍信息系統(tǒng)模板項舉例評估范圍信息系統(tǒng)數(shù)據(jù)集MDM_Materi評估規(guī)則評估屬性物料描述度量指標完整性度量規(guī)則非空管理信息評估基線評估周期1月/次質(zhì)量管控等級2、數(shù)據(jù)質(zhì)量改進過程（A）數(shù)據(jù)質(zhì)量持續(xù)優(yōu)化數(shù)據(jù)質(zhì)量改進方案數(shù)據(jù)質(zhì)量根因分析 數(shù)據(jù)安全治理體系制定數(shù)據(jù)分類分級規(guī)范，對數(shù)據(jù)進行安全級別管控 數(shù)據(jù)安全治理體系數(shù)據(jù)安全組織建設(shè)數(shù)據(jù)分類分級數(shù)據(jù)安全組織建設(shè)數(shù)據(jù)分類分級數(shù)據(jù)安全制度建設(shè)數(shù)據(jù)安全技術(shù)建設(shè)不同種類級別數(shù)據(jù)全生命周期的安全保護目數(shù)據(jù)安全培訓數(shù)據(jù)安全治理體系落地··部門信息ETL數(shù)據(jù)湖源數(shù)據(jù)庫數(shù)據(jù)倉庫應用…….業(yè)務系統(tǒng)獨立建設(shè)階段；存儲少量結(jié)果性數(shù)據(jù)，主要用于OLTP。少量數(shù)據(jù)少量數(shù)據(jù)多業(yè)務系統(tǒng)的數(shù)據(jù)融合分析和報表處理。整合內(nèi)部各業(yè)務系統(tǒng)數(shù)據(jù)，主要用于OLAP。較多數(shù)據(jù)較多數(shù)據(jù)支撐運營和決策；用于大數(shù)據(jù)分析。異構(gòu)數(shù)據(jù)經(jīng)過業(yè)務沉淀，形成有業(yè)務價值的數(shù)據(jù)服務；通過數(shù)據(jù)服務快速適應業(yè)務發(fā)展和賦能創(chuàng)新業(yè)務。數(shù)據(jù)業(yè)務化數(shù)據(jù)業(yè)務化數(shù)據(jù)中臺定義：“4化”持續(xù)賦能數(shù)據(jù)應用閉環(huán)“4化”持續(xù)賦能數(shù)據(jù)應用閉環(huán)業(yè)務u一套具備數(shù)據(jù)交換（數(shù)據(jù)接入、交換、流動業(yè)務業(yè)務數(shù)據(jù)業(yè)務數(shù)據(jù)服務數(shù)據(jù)交換價值呈現(xiàn)資產(chǎn)資產(chǎn) 數(shù)據(jù)沉淀數(shù)據(jù)沉淀可持續(xù)可見技術(shù)體系數(shù)據(jù)體系運營體系可持續(xù)可見技術(shù)體系數(shù)據(jù)體系運營體系服務體系轉(zhuǎn)型組織理現(xiàn)狀立架構(gòu)建資產(chǎn)用數(shù)據(jù)做運營可用我們希望這套數(shù)據(jù)中臺建設(shè)方法論可以起到指引作用，幫助企業(yè)結(jié)合自身特點，在戰(zhàn)略規(guī)劃牽引下，建立起一套可持續(xù)運行的中臺建設(shè)機制，從而加速企業(yè)在數(shù)字化轉(zhuǎn)型進展。一種戰(zhàn)略行動：把數(shù)據(jù)中臺驅(qū)動業(yè)務發(fā)展定位企業(yè)級戰(zhàn)略，全局謀劃兩項保障條件：通過宣導統(tǒng)一組織間的數(shù)據(jù)認知，通過流程加速組織變更協(xié)同三條目標準則：將核心原則貫穿中臺建設(shè)全過程，保障建設(shè)方向在正確軌道上四套建設(shè)內(nèi)容：通過技術(shù)、數(shù)據(jù)、服務和運營多角度保證中臺建設(shè)的全面性和可持續(xù)性五個關(guān)鍵步驟：通過5個關(guān)鍵行動控制中臺建設(shè)關(guān)鍵節(jié)點質(zhì)量業(yè)務&管理能業(yè)務&管理能力全維度體驗010302節(jié)約設(shè)備和時間成本技術(shù)棧遷移，節(jié)約人力成本策或業(yè)務優(yōu)化可被還原