大數(shù)據(jù)平臺(tái)下的數(shù)據(jù)治理

1、大數(shù)據(jù)平臺(tái)下的數(shù)據(jù)治理解決12一數(shù)據(jù)管理的現(xiàn)狀二數(shù)據(jù)治理的概述TOC o 1-5 h z數(shù)據(jù)治理概念2數(shù)據(jù)治理目標(biāo)334三數(shù)據(jù)治理體系四數(shù)據(jù)治理核心領(lǐng)域數(shù)據(jù)模型4數(shù)據(jù)生命周期5數(shù)據(jù)標(biāo)準(zhǔn)6主數(shù)據(jù)8數(shù)據(jù)質(zhì)量9數(shù)據(jù)服務(wù)11數(shù)據(jù)安全1213五數(shù)據(jù)治理保障機(jī)制制度章程13規(guī)章制度13管控辦法13考核機(jī)制13數(shù)據(jù)治理組織15組織架構(gòu)15組織層次16組織職責(zé)17流程管理19IT技術(shù)應(yīng)用20支撐平臺(tái)20技術(shù)規(guī)范22234145附件A數(shù)據(jù)管理規(guī)范附件B數(shù)據(jù)質(zhì)量評(píng)估辦法.附件C數(shù)據(jù)質(zhì)量管理流程.大數(shù)據(jù)平臺(tái)下的數(shù)據(jù)治理解決方案V3.0第 頁(yè)關(guān)于數(shù)據(jù)治理的理解根據(jù)行業(yè)信息化發(fā)展的現(xiàn)狀，結(jié)合當(dāng)今行業(yè)數(shù)據(jù)治理的要求，大型

2、集團(tuán)或政務(wù)管理部門現(xiàn)階段數(shù)據(jù)管理方面存在以下的不足：數(shù)據(jù)多頭管理，缺少專門對(duì)數(shù)據(jù)管理進(jìn)行監(jiān)督和控制的組織。信息系統(tǒng)的建設(shè)和管理職能分散在各部門，致使數(shù)據(jù)管理的職責(zé)分散，權(quán)責(zé)不明確。組織機(jī)構(gòu)各部門關(guān)注數(shù)據(jù)的角度不一樣，缺少一個(gè)組織從全局的視角對(duì)數(shù)據(jù)進(jìn)行管理，導(dǎo)致無(wú)法建立統(tǒng)一的數(shù)據(jù)管理規(guī)程、標(biāo)準(zhǔn)等，相應(yīng)的數(shù)據(jù)管理監(jiān)督措施無(wú)法得到落實(shí)。組織機(jī)構(gòu)的數(shù)據(jù)考核體系也尚未建立，無(wú)法保障數(shù)據(jù)管理標(biāo)準(zhǔn)和規(guī)程的有效執(zhí)行。多系統(tǒng)分散建設(shè)，沒有規(guī)范統(tǒng)一的省級(jí)數(shù)據(jù)標(biāo)準(zhǔn)和數(shù)據(jù)模型。組織機(jī)構(gòu)為應(yīng)對(duì)迅速變化的市場(chǎng)和社會(huì)需求，逐步建立了各自的信息系統(tǒng)，各部門站在各自的立場(chǎng)生產(chǎn)、使用和管理數(shù)據(jù)，使得數(shù)據(jù)分散在不同的部門和信息系統(tǒng)

3、中，缺乏統(tǒng)一的數(shù)據(jù)規(guī)劃、可信的數(shù)據(jù)來(lái)源和數(shù)據(jù)標(biāo)準(zhǔn)，導(dǎo)致數(shù)據(jù)不規(guī)范、不一致、冗余、無(wú)法共享等問(wèn)題出現(xiàn)，組織機(jī)構(gòu)各部門對(duì)數(shù)據(jù)的理解難以應(yīng)用一致的語(yǔ)言來(lái)描述，導(dǎo)致理解不一致。缺少統(tǒng)一的主數(shù)據(jù)，組織機(jī)構(gòu)核心系統(tǒng)間的人員等主要信息并不是存儲(chǔ)在一個(gè)獨(dú)立的系統(tǒng)中，或者不是通過(guò)統(tǒng)一的業(yè)務(wù)管理流程在系統(tǒng)間維護(hù)。缺乏對(duì)集團(tuán)公司或政務(wù)單位主數(shù)據(jù)的管理，就無(wú)法保障主數(shù)據(jù)在整個(gè)業(yè)務(wù)范圍內(nèi)保持一致、完整和可控，導(dǎo)致業(yè)務(wù)數(shù)據(jù)正確性無(wú)法得到保障。缺乏統(tǒng)一的集團(tuán)型數(shù)據(jù)質(zhì)量管理流程體系。當(dāng)前現(xiàn)狀中數(shù)據(jù)質(zhì)量管理主要由各組織部門分頭進(jìn)行；跨局跨部門的數(shù)據(jù)質(zhì)量溝通機(jī)制不完善；缺乏清晰的跨局跨部門的數(shù)據(jù)質(zhì)量管控規(guī)范與標(biāo)準(zhǔn)，數(shù)據(jù)分析隨機(jī)性

4、強(qiáng)，存在業(yè)務(wù)需求不清的現(xiàn)象，影響數(shù)據(jù)質(zhì)量；數(shù)據(jù)的自動(dòng)采集尚未全面實(shí)現(xiàn)，處理過(guò)程存在人為干預(yù)問(wèn)題，很多部門存在數(shù)據(jù)質(zhì)量管理人員不足、知識(shí)與經(jīng)驗(yàn)不夠、監(jiān)管方式不全面等問(wèn)題；缺乏完善的數(shù)據(jù)質(zhì)量管控流程和系統(tǒng)支撐能力。數(shù)據(jù)全生命周期管理不完整。目前，大型集團(tuán)或政務(wù)單位，數(shù)據(jù)的產(chǎn)生、使用、維護(hù)、備份到過(guò)時(shí)被銷毀的數(shù)據(jù)生命周期管理規(guī)范和流程還不完善，不能確定過(guò)期和無(wú)效數(shù)據(jù)的識(shí)別條件，且非結(jié)構(gòu)化數(shù)據(jù)未納入數(shù)據(jù)生命周期的管理范疇；無(wú)信息化工具支撐數(shù)據(jù)生命周期狀態(tài)的查詢，未有效利用元數(shù)據(jù)管理。數(shù)據(jù)治理是指將數(shù)據(jù)作為組織資產(chǎn)而展開的一系列的具體化工作,是對(duì)數(shù)據(jù)的全生命周期管理。數(shù)據(jù)治理體系是指從組織架構(gòu)、管理制度

5、、操作規(guī)利了應(yīng)用技術(shù)、績(jī)效考核支持等多個(gè)維度對(duì)組織的數(shù)據(jù)模型、數(shù)據(jù)架構(gòu)、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全、數(shù)據(jù)生命周期等各方面進(jìn)行全面的梳理、建設(shè)以及持續(xù)改進(jìn)的體系。數(shù)據(jù)治理的目標(biāo)是提高數(shù)據(jù)的質(zhì)量（準(zhǔn)確性和完整性），保證數(shù)據(jù)的安全性（保密性、完整性及可用性），實(shí)現(xiàn)數(shù)據(jù)資源在各組織機(jī)構(gòu)部門的共享；推進(jìn)信息資源的整合、對(duì)接和共享，從而提升集團(tuán)公司或政務(wù)單位信息化水平，充分發(fā)揮信息化作用。數(shù)據(jù)治理體系包含兩個(gè)方面，一是數(shù)據(jù)質(zhì)量核心領(lǐng)域，二是數(shù)據(jù)質(zhì)量保障機(jī)制。具體兩者內(nèi)容及相互關(guān)系可以參見下圖：核心領(lǐng)域保障機(jī)制數(shù)據(jù)服務(wù)數(shù)據(jù)偵量制度靠程規(guī)章制度-管控辦法考核機(jī)制組織組織架構(gòu)組織層次組織職責(zé)數(shù)據(jù)安金數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)全生命周

6、期數(shù)據(jù)模型流程流程目標(biāo)流程任務(wù)*流程分級(jí)1T技術(shù)應(yīng)用技術(shù)規(guī)范實(shí)施辦法支撐平臺(tái)為了有效管理信息資源，必須構(gòu)集團(tuán)級(jí)數(shù)據(jù)治理體系。數(shù)據(jù)治理體系包含數(shù)據(jù)治理組織、數(shù)據(jù)構(gòu)架管理、主數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)服務(wù)管理及數(shù)據(jù)安全管理內(nèi)容，這些內(nèi)容既有機(jī)結(jié)合，又相互支撐。數(shù)據(jù)模型是數(shù)據(jù)構(gòu)架中重要一部分，包括概念數(shù)據(jù)模型和邏輯數(shù)據(jù)模型，是數(shù)據(jù)治理的關(guān)鍵、重點(diǎn)。理想的數(shù)據(jù)模型應(yīng)該具有非冗余、穩(wěn)定、一致、易用等特征。邏輯數(shù)據(jù)模型能涵蓋整個(gè)集團(tuán)的業(yè)務(wù)范圍，以一種清晰的表達(dá)方式記錄跟蹤集團(tuán)單位的重要數(shù)據(jù)元素及其變動(dòng)，并利用它們之間各種可能的限制條件和關(guān)系來(lái)表達(dá)重要的業(yè)務(wù)規(guī)則。數(shù)據(jù)模型必須在設(shè)計(jì)過(guò)程中保持統(tǒng)一的業(yè)務(wù)定義

7、。為了滿足將來(lái)不同的應(yīng)用分析需要，邏輯數(shù)據(jù)模型的設(shè)計(jì)應(yīng)該能夠支持最小粒度的詳細(xì)數(shù)據(jù)的存儲(chǔ)，以支持各種可能的分析查詢。同時(shí)保障邏輯數(shù)據(jù)模型能夠最大程度上減少冗余，并保障結(jié)構(gòu)具有足夠的靈活性和擴(kuò)展性一般包括數(shù)據(jù)生成及傳輸、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)處理及應(yīng)用、數(shù)據(jù)銷毀四個(gè)方面。（1）數(shù)據(jù)生成及傳輸數(shù)據(jù)應(yīng)該能夠按照數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)和發(fā)展需要產(chǎn)生，應(yīng)采取措施保證數(shù)據(jù)的準(zhǔn)確性和完整性，業(yè)務(wù)系統(tǒng)上線前應(yīng)該進(jìn)行必要的安全測(cè)試，以保證上述措施的有效性。對(duì)于手工流程中產(chǎn)生的數(shù)據(jù)在相關(guān)制度中明確要求，并通過(guò)事中復(fù)核、事后檢查等手段保證其準(zhǔn)確性和完整性。數(shù)據(jù)傳輸過(guò)程中需要考慮保密性和完整性的問(wèn)題，對(duì)不同種類的數(shù)據(jù)分別采取不同的措施

8、防止數(shù)據(jù)泄漏或數(shù)據(jù)被篡改。（2）數(shù)據(jù)存儲(chǔ)這個(gè)階段除了關(guān)注保密性、完整性之外，更要關(guān)心數(shù)據(jù)的可用性，對(duì)于大部分?jǐn)?shù)據(jù)應(yīng)采取分級(jí)存儲(chǔ)的方式，不僅存儲(chǔ)在本地磁盤上，還應(yīng)該在磁帶上，甚至遠(yuǎn)程復(fù)制到磁盤陣列中，或者采用光盤庫(kù)進(jìn)行存儲(chǔ)。對(duì)于存儲(chǔ)備份的數(shù)據(jù)要定期進(jìn)行測(cè)試，確保其可訪問(wèn)其數(shù)據(jù)完整。數(shù)據(jù)的備份恢復(fù)策略應(yīng)該由數(shù)據(jù)的責(zé)任部門或責(zé)任人負(fù)責(zé)制定，信息化管理部門可以給予相應(yīng)的支持。同時(shí)還需要注意因?yàn)椴块T需要或故障處理的需要，可能對(duì)數(shù)據(jù)進(jìn)行修改，必須在數(shù)據(jù)管理辦法中明確數(shù)據(jù)修改的申請(qǐng)審批流程，審慎對(duì)待后臺(tái)數(shù)據(jù)修改。（3）數(shù)據(jù)處理和應(yīng)用信息化相關(guān)部門需要對(duì)數(shù)據(jù)進(jìn)行分析處理，以挖掘出對(duì)于管理及業(yè)務(wù)開展有價(jià)值的信息

9、，為保證過(guò)程中數(shù)據(jù)的安全性，一般應(yīng)采用聯(lián)機(jī)處理，系統(tǒng)只輸出分析處理的結(jié)果。但是實(shí)際中，因?yàn)橄嚓P(guān)數(shù)據(jù)分析系統(tǒng)建設(shè)不到位，需要從數(shù)據(jù)庫(kù)中提取數(shù)據(jù)后再對(duì)數(shù)據(jù)進(jìn)行必要的分析處理，在這個(gè)過(guò)程中就需要關(guān)注數(shù)據(jù)提取操作是否可能對(duì)數(shù)據(jù)庫(kù)造成破壞、提取出的數(shù)據(jù)在交付給分析處理人員的過(guò)程中其安全性是否會(huì)降低、數(shù)據(jù)分析處理的環(huán)境安全性等等。（4）數(shù)據(jù)銷毀這個(gè)階段主要涉及數(shù)據(jù)的保密性。應(yīng)明確數(shù)據(jù)銷毀的流程，采用必要的工具，數(shù)據(jù)的銷毀應(yīng)該有完整的記錄。尤其是對(duì)于需要送出外部修理的存儲(chǔ)設(shè)備，送修之前應(yīng)該對(duì)數(shù)據(jù)進(jìn)行可靠的銷毀。數(shù)據(jù)標(biāo)準(zhǔn)是集團(tuán)單位建立的一套符合自身實(shí)際，涵蓋定義、操作、應(yīng)用多層次數(shù)據(jù)的標(biāo)準(zhǔn)化體系。數(shù)據(jù)標(biāo)準(zhǔn)的建

10、立是集團(tuán)單位信息化、數(shù)字化建設(shè)的一項(xiàng)重要工作，行業(yè)的各類數(shù)據(jù)必須遵循一個(gè)統(tǒng)一的標(biāo)準(zhǔn)進(jìn)行組織，才能構(gòu)成一個(gè)可流通、可共享的信息平臺(tái)。數(shù)據(jù)治理對(duì)標(biāo)準(zhǔn)的需求可以劃分為兩類，即基礎(chǔ)性標(biāo)準(zhǔn)和應(yīng)用性標(biāo)準(zhǔn)。前者主要用于在不同系統(tǒng)間，形成信息的一致理解和統(tǒng)一的坐標(biāo)參照系統(tǒng)，是信息匯集、交換以及應(yīng)用的基礎(chǔ)，包括數(shù)據(jù)分類與編碼、數(shù)據(jù)字典、數(shù)字地圖標(biāo)準(zhǔn)；后者是為平臺(tái)功能發(fā)揮所涉及的各個(gè)環(huán)節(jié)，提供一定的標(biāo)準(zhǔn)規(guī)范，以保證信息的高效匯集和交換，包括元數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)交換技術(shù)規(guī)范、數(shù)據(jù)傳輸協(xié)議、數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)等。（1）數(shù)據(jù)分類與編碼數(shù)據(jù)分類與編碼標(biāo)準(zhǔn)是信息化建設(shè)中標(biāo)準(zhǔn)化的一項(xiàng)基礎(chǔ)工作，該類標(biāo)準(zhǔn)規(guī)定平臺(tái)匯集、交換相關(guān)信息統(tǒng)一的分

11、類系統(tǒng)和排列順序以及編碼規(guī)則，目的是在不同系統(tǒng)和用戶之間建立交通數(shù)據(jù)的一致參照，對(duì)提高數(shù)據(jù)采集、處理和數(shù)據(jù)交換效率具有重要作用。數(shù)據(jù)分類與編碼標(biāo)準(zhǔn)的制定將有力推進(jìn)平臺(tái)標(biāo)準(zhǔn)化及交通信息化建設(shè)標(biāo)準(zhǔn)化的進(jìn)程。（2）數(shù)據(jù)字典針對(duì)實(shí)際需求，定義數(shù)據(jù)集，建立各個(gè)領(lǐng)域的數(shù)據(jù)字典，規(guī)范數(shù)據(jù)概念和數(shù)據(jù)定義。在此基礎(chǔ)上，形成完備的集團(tuán)單位數(shù)據(jù)集和數(shù)據(jù)字典。（3）元數(shù)據(jù)標(biāo)準(zhǔn)元數(shù)據(jù)標(biāo)準(zhǔn)是描述數(shù)據(jù)資源的具體對(duì)象時(shí)所有規(guī)則的集合，它包括了完整描述一個(gè)具體數(shù)據(jù)對(duì)象時(shí)所需要的數(shù)據(jù)項(xiàng)集合。針對(duì)各種信息資源分別制定適當(dāng)?shù)脑獢?shù)據(jù)標(biāo)準(zhǔn)，可為信息的管理、發(fā)現(xiàn)和獲取提供一種實(shí)際而簡(jiǎn)便的方法，從而提高數(shù)據(jù)交換效率。（4）數(shù)據(jù)交換標(biāo)準(zhǔn)為了保

12、證數(shù)據(jù)共享和交換的順利實(shí)現(xiàn)，必須明確定義和規(guī)范數(shù)據(jù)交換的相關(guān)標(biāo)準(zhǔn)。數(shù)據(jù)交換的標(biāo)準(zhǔn)規(guī)范是集團(tuán)單位綜合信息平臺(tái)的核心標(biāo)準(zhǔn)。其中應(yīng)當(dāng)包括數(shù)據(jù)交換內(nèi)容、數(shù)據(jù)交換格式、數(shù)據(jù)傳輸方式、各類中心間數(shù)據(jù)接口的標(biāo)準(zhǔn)化等方面。（5）數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)由于數(shù)據(jù)采集任務(wù)通常由其他二級(jí)平臺(tái)完成，數(shù)據(jù)治理平臺(tái)的標(biāo)準(zhǔn)方法主要集中在數(shù)據(jù)的加工和管理上。應(yīng)該重點(diǎn)開發(fā)的一個(gè)領(lǐng)域是數(shù)據(jù)質(zhì)量控制方法。應(yīng)當(dāng)從三個(gè)方面對(duì)數(shù)據(jù)質(zhì)量方法進(jìn)行研究：“壞數(shù)據(jù)”或“不可靠數(shù)據(jù)”的識(shí)別，錯(cuò)誤數(shù)據(jù)的編輯方法，以及缺少值的處理。主數(shù)據(jù)管理要做的就是從各部門的多個(gè)業(yè)務(wù)系統(tǒng)中整合最核心的、最需要共享的數(shù)據(jù)（主數(shù)據(jù)），集中進(jìn)行數(shù)據(jù)的清洗和豐富，并且以服務(wù)的方式把統(tǒng)

13、一的、完整的、準(zhǔn)確的、具有權(quán)威性的主數(shù)據(jù)傳送給集團(tuán)單位范圍內(nèi)需要使用這些數(shù)據(jù)的操作型應(yīng)用系統(tǒng)和分析型應(yīng)用系統(tǒng)。主數(shù)據(jù)管理的信息流應(yīng)為：某個(gè)業(yè)務(wù)系統(tǒng)觸發(fā)對(duì)主數(shù)據(jù)的改動(dòng)；主數(shù)據(jù)管理系統(tǒng)將整合之后完整、準(zhǔn)確的主數(shù)據(jù)傳送給所有有關(guān)的應(yīng)用系統(tǒng)主數(shù)據(jù)管理系統(tǒng)為決策支持和數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)提供準(zhǔn)確的數(shù)據(jù)源。因此對(duì)于主數(shù)據(jù)管理要考慮運(yùn)用主數(shù)據(jù)管理系統(tǒng)實(shí)現(xiàn)，主數(shù)據(jù)管理系統(tǒng)的建設(shè)，要從建設(shè)初期就考慮整體的平臺(tái)框架和技術(shù)實(shí)現(xiàn)。數(shù)據(jù)質(zhì)量不高將影響數(shù)據(jù)倉(cāng)庫(kù)應(yīng)用程度不高。低下的數(shù)據(jù)質(zhì)量往往造成開發(fā)出來(lái)的系統(tǒng)與用戶的預(yù)期大相徑庭，數(shù)據(jù)質(zhì)量關(guān)系建設(shè)有關(guān)分析型信息系統(tǒng)成敗，同時(shí)數(shù)據(jù)資源是集團(tuán)單位的戰(zhàn)略資源，合理有效的使用正確的數(shù)據(jù)能

14、指導(dǎo)集團(tuán)單位做出正確的決策，提高省綜合競(jìng)爭(zhēng)力。不合理的使用不正確的數(shù)據(jù)（即差的數(shù)據(jù)質(zhì)量）可導(dǎo)致決策的失敗，正可謂差之毫厘、謬以千里。數(shù)據(jù)質(zhì)量管理包含對(duì)數(shù)據(jù)的絕對(duì)質(zhì)量管理、過(guò)程質(zhì)量管理。絕對(duì)質(zhì)量即數(shù)據(jù)的真實(shí)性、完備性、自治性是數(shù)據(jù)本身應(yīng)具有的屬性。過(guò)程質(zhì)量即使用質(zhì)量、存儲(chǔ)質(zhì)量和傳輸質(zhì)量，數(shù)據(jù)的使用質(zhì)量是指數(shù)據(jù)被正確的使用。再正確的數(shù)據(jù)，如果被錯(cuò)誤的使用，就不可能得出正確的結(jié)論。數(shù)據(jù)的存貯質(zhì)量指數(shù)據(jù)被安全的存貯在適當(dāng)?shù)慕橘|(zhì)上。所謂存貯在適當(dāng)?shù)慕橘|(zhì)上是指當(dāng)需要數(shù)據(jù)的時(shí)候能及時(shí)方便的取出。數(shù)據(jù)的傳輸質(zhì)量是指數(shù)據(jù)在傳輸過(guò)程中的效率和正確性。高質(zhì)量的交通運(yùn)輸行業(yè)數(shù)據(jù)至少有如下幾項(xiàng)要求：一是正確性，在轉(zhuǎn)換、

15、分析、存儲(chǔ)、傳輸、應(yīng)用流程中不存在錯(cuò)誤；二是完整性，數(shù)據(jù)庫(kù)應(yīng)用或要求的所有記錄、字段都存在；三是一致性，體現(xiàn)在整個(gè)數(shù)據(jù)庫(kù)的定義和維護(hù)方面，確保數(shù)據(jù)在使用的整個(gè)過(guò)程中是一致的；四是時(shí)效性，衡量指標(biāo)是在指定的數(shù)據(jù)與真實(shí)的業(yè)務(wù)情況同步的時(shí)間容忍度內(nèi)，即指定的更新頻度內(nèi)，及時(shí)被刷新的數(shù)據(jù)的百分比；五是可靠性，提供數(shù)據(jù)的數(shù)據(jù)源必須能夠可靠穩(wěn)定地提供數(shù)據(jù)。數(shù)據(jù)質(zhì)量管理的規(guī)劃和實(shí)施包括以下內(nèi)容：一是數(shù)據(jù)質(zhì)量管控體系的建立，包括數(shù)據(jù)質(zhì)量的評(píng)估體系，定期評(píng)估數(shù)據(jù)質(zhì)量狀況；二是在部門各個(gè)應(yīng)用系統(tǒng)中的落實(shí)，包括每個(gè)應(yīng)用系統(tǒng)中的數(shù)據(jù)質(zhì)量檢查等；三是在最開始建立數(shù)據(jù)質(zhì)量管理系統(tǒng)的時(shí)候，借助數(shù)據(jù)治理平臺(tái)上，通過(guò)建立數(shù)據(jù)質(zhì)

16、量管理的規(guī)則來(lái)集中化地建立數(shù)據(jù)質(zhì)量管理系統(tǒng)，發(fā)現(xiàn)問(wèn)題并持續(xù)改進(jìn)；四是數(shù)據(jù)質(zhì)量管理與業(yè)務(wù)稽核的結(jié)合，通過(guò)業(yè)務(wù)規(guī)則的稽核來(lái)發(fā)現(xiàn)數(shù)據(jù)質(zhì)量深層次的問(wèn)題，將數(shù)據(jù)質(zhì)量與業(yè)務(wù)一線結(jié)合起來(lái)，使業(yè)務(wù)人員對(duì)數(shù)據(jù)質(zhì)量問(wèn)題有更加清晰和明確的認(rèn)識(shí)。完善的數(shù)據(jù)質(zhì)量管理是保障各項(xiàng)數(shù)據(jù)治理工作能夠得到有效落實(shí)，達(dá)到數(shù)據(jù)準(zhǔn)確、完整的目標(biāo)，并能夠提供有效的增值服務(wù)的重要基礎(chǔ)。數(shù)據(jù)整理最終目的就是要服務(wù)于各部門單位、人員等，能更準(zhǔn)確更快更方便的服務(wù)是數(shù)據(jù)服務(wù)管理的目標(biāo)。數(shù)據(jù)服務(wù)管理是指針對(duì)內(nèi)部積累多年的數(shù)據(jù)，研究如何能夠充分利用這些數(shù)據(jù)，分析行業(yè)業(yè)務(wù)流程優(yōu)化業(yè)務(wù)流程。數(shù)據(jù)使用的方式通常包括對(duì)數(shù)據(jù)的深度加工和分析，包括通過(guò)各種報(bào)表、

17、工具來(lái)分析運(yùn)營(yíng)層面的問(wèn)題，還包括通過(guò)數(shù)據(jù)挖掘等工具對(duì)數(shù)據(jù)進(jìn)行深度加工，從而更好的管理者服務(wù)。通過(guò)建立統(tǒng)一的數(shù)據(jù)服務(wù)平臺(tái)來(lái)滿足針對(duì)跨部門、跨系統(tǒng)的數(shù)據(jù)應(yīng)用。通過(guò)統(tǒng)一的數(shù)據(jù)服務(wù)平臺(tái)來(lái)統(tǒng)一數(shù)據(jù)源，變多源為單源，加快數(shù)據(jù)流轉(zhuǎn)速度，提升數(shù)據(jù)服務(wù)的效率。由于集團(tuán)單位的重要且敏感信息大部分集中在應(yīng)用系統(tǒng)中，數(shù)據(jù)安全更是至關(guān)重要。如何保障數(shù)據(jù)不被泄露和非法訪問(wèn)，是非常關(guān)鍵的問(wèn)題。數(shù)據(jù)安全管理主要解決的就是數(shù)據(jù)在保存、使用和交換過(guò)程中的安全問(wèn)題。數(shù)據(jù)安全管理主要體現(xiàn)在以下六個(gè)方面：一是數(shù)據(jù)使用的安全性，包括基礎(chǔ)數(shù)據(jù)的保存、訪問(wèn)和權(quán)限管理；二是數(shù)據(jù)隱私問(wèn)題，系統(tǒng)中采集的證件號(hào)碼、銀行賬號(hào)等信息在下游分析系統(tǒng)和內(nèi)部

18、管理系統(tǒng)中，是否要進(jìn)行加密，以避免數(shù)據(jù)被非法訪問(wèn)；三是訪問(wèn)權(quán)限統(tǒng)一管理，包括單點(diǎn)登錄問(wèn)題及用戶名、數(shù)據(jù)和應(yīng)用的訪問(wèn)授權(quán)統(tǒng)一管理；四是數(shù)據(jù)安全審計(jì)，為數(shù)據(jù)修改、使用等環(huán)節(jié)設(shè)置審計(jì)方法，事后進(jìn)行審計(jì)和責(zé)任追究；五是制度及流程建立，逐步建立數(shù)據(jù)安全性的管理辦法、系統(tǒng)開發(fā)規(guī)范、數(shù)據(jù)隱私管理辦法及相應(yīng)的應(yīng)用系統(tǒng)規(guī)范、在管理決策和分析類系統(tǒng)中的審計(jì)管理辦法等；六是應(yīng)用系統(tǒng)權(quán)限的訪問(wèn)控制，建立集團(tuán)級(jí)權(quán)限管理系統(tǒng)，增加數(shù)字水印等技術(shù)在應(yīng)用系統(tǒng)中的使用。規(guī)章制度數(shù)據(jù)治理章程類似于企業(yè)的公司條例。該章程闡明數(shù)據(jù)治理的主要目標(biāo)、相關(guān)工作人員、職責(zé)、決策權(quán)利和度量標(biāo)準(zhǔn)。具體可參見附件數(shù)據(jù)管理規(guī)范管控辦法管控辦法是基于

19、規(guī)章制度與工具的結(jié)合可，落地的操作的辦法。具體可參見附件數(shù)據(jù)質(zhì)量評(píng)估辦法考核機(jī)制考核是是保障制度落實(shí)的根本，建立明確的考核制度，實(shí)際操作中可根據(jù)集團(tuán)單位情況，建立相應(yīng)的針對(duì)數(shù)據(jù)治理方面的考核辦法，并與個(gè)人績(jī)效相關(guān)聯(lián)?？蓞⒖脊芾韺W(xué)中相關(guān)考核、績(jī)效管理相關(guān)部分。對(duì)于數(shù)據(jù)治理的考核，可見下圖進(jìn)行理解：執(zhí)行是聚落地的關(guān)群業(yè)者植理L朦效的手雕促進(jìn)數(shù)據(jù)質(zhì)量管理-將數(shù)據(jù)生產(chǎn)者、使用宵.管理者及擁有者關(guān)森起來(lái).形成一套可持轆有效執(zhí)行的執(zhí)行體系（保障持續(xù)的高數(shù)蛹質(zhì)量劃定戴典管壁指際（.數(shù)據(jù)施乾）以標(biāo)準(zhǔn)對(duì)數(shù)院進(jìn)行質(zhì)畫演、處理、斷揍規(guī)則對(duì)數(shù)據(jù)流蜘監(jiān)拴，帔誓集成高質(zhì)皴據(jù).形成期雌中心1安現(xiàn)共氧分潮挖lissmrff,

20、1JJ-L運(yùn)行問(wèn)跟預(yù)警、分耀者毆對(duì)象：數(shù)髀理員物麻：L福質(zhì)揄調(diào)時(shí),在現(xiàn)J鈿同段內(nèi)，及囪被罌并通油相關(guān)人艮處理,不舊融；否則，扣3分;組織架構(gòu)有效的組織機(jī)構(gòu)是項(xiàng)目成功的有力保證，為了達(dá)到項(xiàng)目預(yù)期目標(biāo)，在項(xiàng)目開始之前對(duì)于組織機(jī)構(gòu)及其責(zé)任分工做出規(guī)劃是非常必要的，數(shù)據(jù)治理項(xiàng)目管理組織建議宜采用如圖所示的組織結(jié)構(gòu)：數(shù)據(jù)治理組織架枸碗味i魚王布山領(lǐng)導(dǎo)小組/數(shù)據(jù)治理委員叁業(yè)飛部門njm5.2.2組織層次根據(jù)實(shí)際情況設(shè)立相應(yīng)小組如：A部門或子公司、日剖門或子公司數(shù)據(jù)治理委員會(huì)由集團(tuán)公司的高層領(lǐng)導(dǎo)者組成。委員會(huì)定義數(shù)據(jù)治理愿景和目標(biāo)；組織內(nèi)跨業(yè)務(wù)部門和IT部門進(jìn)行協(xié)調(diào)；設(shè)置數(shù)據(jù)治理計(jì)劃的總體方向；在發(fā)生策略分

21、歧時(shí)進(jìn)行協(xié)調(diào)。此委員會(huì)也將包含來(lái)自部門或子公司的領(lǐng)導(dǎo)代表，以及來(lái)自各單位視數(shù)據(jù)為機(jī)構(gòu)資產(chǎn)的信息科技部門的代表。這些高層管理人員是數(shù)據(jù)治理計(jì)劃的所有擁護(hù)者，確保在整個(gè)組織內(nèi)獲得支持。數(shù)據(jù)治理工作組是組織內(nèi)委員會(huì)下面的下一個(gè)級(jí)別。工作組執(zhí)行數(shù)據(jù)治理計(jì)劃。工作組負(fù)責(zé)監(jiān)督數(shù)據(jù)管理員工作。數(shù)據(jù)治理工作組由數(shù)據(jù)治理委員會(huì)中各局領(lǐng)導(dǎo)主持。每各業(yè)務(wù)部門有至少一位業(yè)務(wù)分析員，信息科技部門設(shè)置數(shù)據(jù)質(zhì)量分析員、數(shù)據(jù)管理員、集成開發(fā)人員。各工作人員負(fù)責(zé)本部門數(shù)據(jù)的質(zhì)量，履行職責(zé)，解決具體的問(wèn)題。組織職責(zé)根據(jù)數(shù)據(jù)管理工作的實(shí)際需要，在業(yè)務(wù)管理部門、技術(shù)管理部門和業(yè)務(wù)應(yīng)用部門確定各工作人員的職責(zé)。數(shù)據(jù)治理委員會(huì)的職責(zé)范圍

22、：1）從戰(zhàn)略角度來(lái)統(tǒng)籌和規(guī)劃，對(duì)數(shù)據(jù)資產(chǎn)和系統(tǒng)進(jìn)行清理，確定數(shù)據(jù)治理的范圍；明確數(shù)據(jù)源的出處、使用和管理的流程及職責(zé)；2）明確數(shù)據(jù)治理的組織、功能、角色和職責(zé)；3）負(fù)責(zé)各工作組成員的培訓(xùn)工作；4）負(fù)責(zé)審查各工作小組的目標(biāo)、原則，批準(zhǔn)數(shù)據(jù)管理的相關(guān)制度、標(biāo)準(zhǔn)及流程；5）負(fù)責(zé)確定數(shù)據(jù)治理的工具、技術(shù)和平臺(tái)；6）負(fù)責(zé)制定數(shù)據(jù)治理的評(píng)估指標(biāo)、方法。數(shù)據(jù)治理工作小組，其主要工作職責(zé)是：負(fù)責(zé)數(shù)據(jù)治理的牽頭，組織、指導(dǎo)和協(xié)調(diào)本單位的數(shù)據(jù)治理工作；綜合數(shù)據(jù)治理管控辦法、數(shù)據(jù)治理考核機(jī)制等有關(guān)規(guī)章制度的牽頭制定、修改等；負(fù)責(zé)數(shù)據(jù)的分析整理并出具數(shù)據(jù)指標(biāo)報(bào)告；負(fù)責(zé)數(shù)據(jù)的監(jiān)測(cè)預(yù)測(cè)工作；建立數(shù)據(jù)沖突的處理流程和數(shù)據(jù)變更控制流程。負(fù)責(zé)對(duì)基礎(chǔ)數(shù)據(jù)質(zhì)量的檢測(cè)、發(fā)布、考核和清理完善工作。工作組成員：業(yè)務(wù)分析員、數(shù)據(jù)質(zhì)量分析員、數(shù)據(jù)管理員、集成開發(fā)員這些不同的角色在數(shù)據(jù)治理過(guò)程中承擔(dān)著彼此不同，而又相輔相成的職責(zé)。其中集成開發(fā)人員在數(shù)據(jù)治理流程中需要肩負(fù)起數(shù)據(jù)訪問(wèn)、驗(yàn)證數(shù)據(jù)結(jié)構(gòu)、驗(yàn)證數(shù)據(jù)、交付數(shù)據(jù)以及數(shù)據(jù)庫(kù)/知識(shí)庫(kù)的構(gòu)建等角色，