數(shù)據(jù)治理建設(shè)方案

數(shù)據(jù)治理建設(shè)方案數(shù)據(jù)治理建設(shè)方案數(shù)據(jù)治理是對數(shù)據(jù)資產(chǎn)的管理行使權(quán)力和控制的活動集合（規(guī)劃、監(jiān)控和執(zhí)行），數(shù)據(jù)治理職能指導(dǎo)其他數(shù)據(jù)管理職數(shù)據(jù)治理是將數(shù)據(jù)轉(zhuǎn)化為智慧，挖掘出價值，最終服務(wù)于人的重要途徑。依托政務(wù)云平臺，從原始數(shù)據(jù)中提煉出有用、有價值的資產(chǎn)信息，通過深度整合形成多維多層的知識圖譜，將數(shù)據(jù)高度聚合，深度關(guān)聯(lián)。通過AI人工智能，將數(shù)據(jù)深度研判分析預(yù)測，從數(shù)據(jù)的可知、可用到數(shù)據(jù)的可測，形成智慧大腦。為各級政府AI大數(shù)據(jù)應(yīng)用奠定堅實的基礎(chǔ)。一、數(shù)據(jù)治理的建設(shè)背景1.1數(shù)據(jù)治理的現(xiàn)狀嚴(yán)重，建設(shè)系統(tǒng)多，數(shù)據(jù)分散，共享困難。(2）各單位機構(gòu)自建系統(tǒng)沒有統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)，數(shù)據(jù)質(zhì)量參差不齊和業(yè)務(wù)的關(guān)系是什么，雖然意識到了大數(shù)據(jù)的重要性，但不知道平臺中有沒有能解決自己所面臨業(yè)務(wù)問題的關(guān)鍵數(shù)據(jù)，數(shù)據(jù)不可控：指用戶不知道匯聚了哪些數(shù)據(jù)、處理了哪些數(shù)數(shù)據(jù)不可?。河脩艏词怪雷约簶I(yè)務(wù)所需要的是哪些數(shù)據(jù)，沒有把數(shù)據(jù)和知識體系關(guān)聯(lián)起來，使得難以做到數(shù)據(jù)與知識之間的快速轉(zhuǎn)換，不能對數(shù)據(jù)進行自主的的探索和挖掘，數(shù)據(jù)的深層價值難以體現(xiàn)，沒有形成知識圖譜。1.2數(shù)據(jù)治理勢在必行要解決這些問題，數(shù)據(jù)治理勢在必行。數(shù)據(jù)治理不單是一個方法、也不是一個功能、也不是一個工數(shù)據(jù)治理核心領(lǐng)域功能不再是人工處理，而是全流程平臺化，比如數(shù)據(jù)服務(wù)、數(shù)據(jù)質(zhì)量、模型、數(shù)據(jù)標(biāo)準(zhǔn)；同時配套相應(yīng)的組織架構(gòu)、人員方案，通過考核機制、管控辦法等制度章程予以約束和協(xié)調(diào)各部門在數(shù)據(jù)治理中的角色和要求；除了平臺工具、保障措施之外，還必須有實施流程和技術(shù)的支撐，比如政務(wù)云的資源設(shè)施及各單位數(shù)據(jù)接入流程等。所以數(shù)據(jù)治理是平臺工具、方法論和保障機制的有機體，不可分割。整個體系的重點、難點在于數(shù)據(jù)服務(wù)、數(shù)據(jù)模型和二、數(shù)據(jù)治理的建設(shè)目標(biāo)基于數(shù)據(jù)治理體系，可以提煉為六大建設(shè)目標(biāo)：多源頭采集、多種形態(tài)的數(shù)形式，同時數(shù)據(jù)對賬清晰明了，對賬不僅是源頭有多少、進了多少做一個對比，另外一個層面是應(yīng)該進多少，而進了多少的對比，通過設(shè)置預(yù)警閾值，對源頭的數(shù)據(jù)監(jiān)控，及時發(fā)現(xiàn)源頭采集問題。工具，以機器算法代替人力勞動，大大提高生產(chǎn)力。義多種接口規(guī)范，實現(xiàn)運維監(jiān)控的統(tǒng)一管理，短信、郵箱等數(shù)據(jù)，形成主數(shù)據(jù)模型。通過人、車、地址等主題域建模，掌握各主題的內(nèi)在關(guān)系，深度整合，形成以實體為單位的復(fù)(5）數(shù)據(jù)運行可視化：Etl工具、服務(wù)總線產(chǎn)品與數(shù)據(jù)治理平臺有機結(jié)合，將數(shù)據(jù)治理實施流程各環(huán)節(jié)通過平臺去實現(xiàn)，服務(wù)大廳，通過服務(wù)權(quán)限和數(shù)據(jù)權(quán)限控制，用戶可自助申三、數(shù)據(jù)治理的建設(shè)思路3.1形成數(shù)據(jù)治理體系大數(shù)據(jù)中心的建設(shè)需要通過數(shù)據(jù)治理體系來實施，主要包括五大部分：3.2構(gòu)建數(shù)據(jù)治理架構(gòu)數(shù)據(jù)治理平臺的總體架構(gòu)，設(shè)施和數(shù)據(jù)支撐層是基于政務(wù)云平臺和大數(shù)據(jù)平臺之上，主要是集中在數(shù)據(jù)資源層和資源服務(wù)層，包括數(shù)據(jù)中心、數(shù)據(jù)管理和數(shù)據(jù)服務(wù)。內(nèi)外部、以及互聯(lián)網(wǎng)結(jié)構(gòu)化、多媒體數(shù)據(jù)，例如目前個別地直接對接的是政務(wù)信息資源共享平臺，數(shù)據(jù)中心分為三層架構(gòu)緩沖庫、基礎(chǔ)資源庫、業(yè)務(wù)專題庫。數(shù)據(jù)中心通過ETL工具、日志復(fù)制工具對數(shù)據(jù)進行匯聚整合，數(shù)據(jù)整合其實是一種方法論和經(jīng)驗，比如哪些數(shù)據(jù)需要去重，哪些數(shù)據(jù)需要多表關(guān)聯(lián)，哪些數(shù)據(jù)需要冗余這些是需的根基，治理的目的是服務(wù)和共享，首先一點需要通過模型掌握數(shù)據(jù)所在業(yè)務(wù)域以及數(shù)據(jù)之間的關(guān)系，構(gòu)建全景數(shù)據(jù)視圖和知識圖譜、使使用者更直觀、更簡單的去使用數(shù)據(jù)治理3.3構(gòu)建數(shù)據(jù)中心架構(gòu)數(shù)據(jù)中心是按照三層架構(gòu)，包括緩沖區(qū)、基礎(chǔ)區(qū)和專題區(qū)：務(wù)數(shù)據(jù)，以結(jié)構(gòu)化數(shù)據(jù)為主體，也包括非結(jié)構(gòu)化數(shù)據(jù)和流式對數(shù)據(jù)治理治理過程中避免對各業(yè)務(wù)系統(tǒng)業(yè)務(wù)辦理產(chǎn)生影統(tǒng)一對標(biāo)、標(biāo)準(zhǔn)化處理之后的數(shù)據(jù)；業(yè)務(wù)整合區(qū)是從全局角度對所有數(shù)據(jù)建模、知識化的過程，其中模型主要包括主題域模型、主數(shù)據(jù)模型，以及將數(shù)據(jù)縱橫關(guān)聯(lián)的知識圖譜和標(biāo)庫、證照庫，以及各單位特有的專題庫，整個業(yè)務(wù)專題區(qū)是數(shù)據(jù)治理的前提是數(shù)據(jù)梳理，需要對數(shù)據(jù)資源情況進行摸底排查，掌握各系統(tǒng)的建設(shè)情況，包括數(shù)據(jù)調(diào)研、數(shù)據(jù)整理和數(shù)據(jù)反饋。數(shù)據(jù)梳理工作開展，流程如下：單位是最熟悉和了解，系統(tǒng)的建設(shè)由來，現(xiàn)狀等等，在此階要了解的是該系統(tǒng)的業(yè)務(wù)種類，業(yè)務(wù)域的劃分，實體之間的關(guān)系，主子表之間的關(guān)聯(lián)等，這是一個建模的過程，包括了理，并進行后續(xù)的緩沖庫入庫、數(shù)據(jù)標(biāo)準(zhǔn)化等一系列動作。數(shù)據(jù)治理成果展示：對數(shù)據(jù)治理的標(biāo)準(zhǔn)、數(shù)據(jù)、服務(wù)、模型ETL，是英文Extract-TransformETL產(chǎn)品含五大特點，可視化、集成化、管道化、集群化、模板化，同時支持多種數(shù)據(jù)類型，通過統(tǒng)一的運行和管理平臺進行管理、平臺為ETL工具提供元數(shù)據(jù)支撐；ETL工具為平臺提供作業(yè)運行監(jiān)控、數(shù)據(jù)對賬以及作業(yè)自動生成的能力。視化；(2）集成化：多數(shù)據(jù)源、統(tǒng)一管理調(diào)度、運維；四、總結(jié)與展望數(shù)據(jù)治理的目標(biāo)是提高數(shù)據(jù)的質(zhì)量（準(zhǔn)確性、及時性、完整性、唯一性、一致性，有效性），確保數(shù)據(jù)的安全性（保密性、完整性及可用性），實現(xiàn)數(shù)據(jù)資源在各組織機構(gòu)部門的共享，推進數(shù)據(jù)資源的整合、服務(wù)和共享，從而提升企事業(yè)單位信息化水平，充分發(fā)揮數(shù)據(jù)資產(chǎn)作用。通過實施數(shù)據(jù)治理工具，可以讓數(shù)據(jù)質(zhì)量變得更好，發(fā)掘數(shù)據(jù)資產(chǎn)的商業(yè)價值，實現(xiàn)如下目標(biāo)：對業(yè)務(wù)的支撐；降低經(jīng)營風(fēng)險、安全保障；對決策進行支持；滿足風(fēng)險控制和外部大數(shù)據(jù)時代，數(shù)據(jù)已經(jīng)成為一個組織最寶貴的財富之一，組織如果想要利用龐大且寶貴的數(shù)據(jù)資產(chǎn)來挖掘其中的商業(yè)價值，在數(shù)據(jù)挖掘之前就需要使用數(shù)據(jù)治理技術(shù)，提高數(shù)據(jù)質(zhì)量，減少實際挖掘所需要的時間，數(shù)據(jù)治理的核心目標(biāo)是在降低風(fēng)險的同時為企業(yè)增加價值，合理的數(shù)據(jù)治理能夠建立規(guī)范的數(shù)據(jù)應(yīng)用標(biāo)準(zhǔn)，消除數(shù)據(jù)的不一致性，