數(shù)據(jù)資產(chǎn)管理技術(shù)白皮書

1、數(shù)據(jù)資產(chǎn)管理技術(shù)白皮書 PAGE * ROMAN VII前言黨的十九大報告提出要“推動互聯(lián)網(wǎng)、大數(shù)據(jù)、人工智能和實體經(jīng)濟深度融合”，進一步突出了大數(shù)據(jù)作為國家基礎(chǔ)性戰(zhàn)略性資源的重要地位，掌握豐富的高價值數(shù)據(jù)資源日益成為搶占未來發(fā)展主動權(quán)的前提和保障。數(shù)據(jù)是資產(chǎn)的概念已經(jīng)成為行業(yè)共識。然而現(xiàn)實中，對數(shù)據(jù)資產(chǎn)的管理和應用往往還處于摸索階段，數(shù)據(jù)資產(chǎn)管理面臨諸多挑戰(zhàn)。首先，大部分企業(yè)和政府部門的數(shù)據(jù)基礎(chǔ)還很薄弱，存在數(shù)據(jù)標準混亂、數(shù)據(jù)質(zhì)量層次不齊、各條塊之間數(shù)據(jù)孤島化嚴重等現(xiàn)象，阻礙了數(shù)據(jù)的共享應用。其次，受限于數(shù)據(jù)規(guī)模和數(shù)據(jù)源種類的豐富程度，多數(shù)企業(yè)的數(shù)據(jù)應用剛剛起步，主要集中在精準營銷，輿情感知

2、和風險控制等有限場景，應用深度不夠，應用空間亟待開拓。再次，由于數(shù)據(jù)的價值很難評估，企業(yè)難以對數(shù)據(jù)的成本以及其對業(yè)務的貢獻進行評估，從而難以像運營有形資產(chǎn)一樣管理數(shù)據(jù)資產(chǎn)。國際上，1990 年以來，以國際數(shù)據(jù)管理協(xié)會（DAMA，Data Management Association International）、能力成熟度模型集成（CMMI， Capability Maturity Model Integration）為代表的組織機構(gòu)長期從事數(shù)據(jù)管理的研究，形成了一定的理論成果。在這些理論的指導下，我國金融、電信、能源、互聯(lián)網(wǎng)等信息化較為先進的行業(yè)，已經(jīng)積累了豐富的數(shù)據(jù)資產(chǎn)管理經(jīng)驗。這些經(jīng)驗的

3、總結(jié)對于補充完善數(shù)據(jù)管理理論體系、推進數(shù)據(jù)資產(chǎn)管理在各個行業(yè)的普及和發(fā)展有著重要意義。為了促進數(shù)據(jù)資產(chǎn)管理的研究，我們組織編寫了數(shù)據(jù)資產(chǎn)管理實踐白皮書。本白皮書分為四大部分：第一部分介紹了數(shù)據(jù)資產(chǎn)管理的概述及變革中的數(shù)據(jù)資產(chǎn)管理呈現(xiàn)出來的特征趨勢；第二部分從實踐角度出發(fā)闡述了數(shù)據(jù)資產(chǎn)管理的主要內(nèi)容；第三部分重點介紹了數(shù)據(jù)資產(chǎn)管理的實施步驟、實踐模式、技術(shù)工具和成功要素；最后結(jié)合實踐經(jīng)驗，介紹了電信、金融、政務、醫(yī)療和工業(yè)等相關(guān)領(lǐng)域的數(shù)據(jù)資產(chǎn)管理案例。本白皮書在數(shù)據(jù)資產(chǎn)管理實踐白皮書 3.0的基礎(chǔ)上，以全面盤點數(shù)據(jù)資產(chǎn)、不斷提升數(shù)據(jù)質(zhì)量、實現(xiàn)數(shù)據(jù)互聯(lián)互通、提高數(shù)據(jù)獲取效率、保障數(shù)據(jù)安全合規(guī)、數(shù)據(jù)

4、價值持續(xù)釋放等角度， 通過權(quán)威數(shù)據(jù)和典型事件，生動剖析了數(shù)據(jù)資產(chǎn)管理的重點內(nèi)容和目標。在原有管理職能的介紹下，嘗試說明數(shù)據(jù)資產(chǎn)化管理的關(guān)鍵活動步驟，并在實施步驟方面，增加了各實施階段的具體輸出物，并增加了“數(shù)據(jù)價值管理工具”和“數(shù)據(jù)服務管理工具”，更好的指導企業(yè)搭建數(shù)據(jù)資產(chǎn)管理平臺，開展數(shù)據(jù)資產(chǎn)管理相關(guān)工作。本白皮書可以為政府和企業(yè)開展數(shù)據(jù)資產(chǎn)管理工作提供參考，也可以作為相關(guān)產(chǎn)品和服務提供商的參考依據(jù)。由于時間倉促，水平所限，我們的工作還有很多不足。下一步，我們還將廣泛采納各方面意見建議，進一步深化相關(guān)研究，持續(xù)完善白皮書內(nèi)容，在已有版本的基礎(chǔ)上，適時修訂發(fā)布新版。我們誠邀各界專家學者參與我們

5、的研究工作，積極獻言獻策，共同完善國內(nèi)數(shù)據(jù)資產(chǎn)管理理論和方法論體 系，為促進大數(shù)據(jù)與實體經(jīng)濟深度融合做出積極貢獻。目錄 HYPERLINK l _bookmark0 一、數(shù)據(jù)資產(chǎn)管理概述1 HYPERLINK l _bookmark1 (一) 數(shù)據(jù)資產(chǎn)管理的定義與內(nèi)涵1 HYPERLINK l _bookmark2 數(shù)據(jù)資產(chǎn)管理的概念1 HYPERLINK l _bookmark3 數(shù)據(jù)資產(chǎn)管理的內(nèi)涵2 HYPERLINK l _bookmark5 數(shù)據(jù)資產(chǎn)管理的演變3 HYPERLINK l _bookmark6 (二) 數(shù)據(jù)資產(chǎn)管理的重要性4 HYPERLINK l _bookmark7

6、數(shù)據(jù)價值難以有效發(fā)揮的原因5 HYPERLINK l _bookmark8 數(shù)據(jù)資產(chǎn)管理是充分發(fā)揮數(shù)據(jù)價值的必經(jīng)之路6 HYPERLINK l _bookmark9 (三) 數(shù)據(jù)資產(chǎn)管理是各方關(guān)注的重要議題8 HYPERLINK l _bookmark10 (四) 數(shù)據(jù)資產(chǎn)管理的現(xiàn)狀與發(fā)展10 HYPERLINK l _bookmark12 數(shù)據(jù)管理對象變化10 HYPERLINK l _bookmark13 處理架構(gòu)更新?lián)Q代11 HYPERLINK l _bookmark14 組織職能升級變遷12 HYPERLINK l _bookmark15 管理手段自動智能12 HYPERLINK l

7、_bookmark16 應用范圍不斷擴大13 HYPERLINK l _bookmark17 二、數(shù)據(jù)資產(chǎn)管理的主要內(nèi)容14 HYPERLINK l _bookmark19 (一) 管理職能14 HYPERLINK l _bookmark20 數(shù)據(jù)標準管理14 HYPERLINK l _bookmark21 數(shù)據(jù)模型管理15 HYPERLINK l _bookmark22 元數(shù)據(jù)管理17 HYPERLINK l _bookmark23 主數(shù)據(jù)管理19 HYPERLINK l _bookmark24 數(shù)據(jù)質(zhì)量管理20 HYPERLINK l _bookmark25 數(shù)據(jù)安全管理21 HYPERL

8、INK l _bookmark26 數(shù)據(jù)價值管理22 HYPERLINK l _bookmark29 數(shù)據(jù)共享管理25 HYPERLINK l _bookmark30 (二) 保障措施26 HYPERLINK l _bookmark31 制定戰(zhàn)略規(guī)劃27 HYPERLINK l _bookmark32 完善組織架構(gòu)27 HYPERLINK l _bookmark36 建立制度體系29 HYPERLINK l _bookmark38 設(shè)置審計機制31 HYPERLINK l _bookmark39 開展培訓宣貫31 HYPERLINK l _bookmark40 三、數(shù)據(jù)資產(chǎn)管理的實施要點33

9、HYPERLINK l _bookmark41 (一) 實施步驟33 HYPERLINK l _bookmark43 第一階段：統(tǒng)籌規(guī)劃34 HYPERLINK l _bookmark44 第二階段：管理實施35 HYPERLINK l _bookmark45 第三階段：稽核檢查37 HYPERLINK l _bookmark46 第四階段：資產(chǎn)運營38 HYPERLINK l _bookmark47 (二) 實踐模式40 HYPERLINK l _bookmark48 數(shù)據(jù)資產(chǎn)管理的建設(shè)策略40 HYPERLINK l _bookmark50 數(shù)據(jù)資產(chǎn)管理的切入方式42 HYPERLINK

10、l _bookmark52 (三) 軟件工具43 HYPERLINK l _bookmark53 數(shù)據(jù)標準管理工具44 HYPERLINK l _bookmark54 數(shù)據(jù)模型管理工具45 HYPERLINK l _bookmark55 元數(shù)據(jù)管理工具46 HYPERLINK l _bookmark56 主數(shù)據(jù)管理工具47 HYPERLINK l _bookmark57 數(shù)據(jù)質(zhì)量管理工具48 HYPERLINK l _bookmark58 數(shù)據(jù)安全管理工具49 HYPERLINK l _bookmark59 數(shù)據(jù)價值管理工具50 HYPERLINK l _bookmark60 數(shù)據(jù)服務管理工具

11、51 HYPERLINK l _bookmark61 (四) 成功要素52 HYPERLINK l _bookmark62 明確責權(quán)利標，有效推進管理52 HYPERLINK l _bookmark63 合理引進技術(shù)，提升治理能力53 HYPERLINK l _bookmark64 著眼業(yè)務應用，釋放數(shù)據(jù)價值54 HYPERLINK l _bookmark65 加強數(shù)據(jù)合規(guī)，注重風險風控54 HYPERLINK l _bookmark66 持續(xù)迭代完善，形成良性閉環(huán)55 HYPERLINK l _bookmark67 四、總結(jié)與展望56 HYPERLINK l _bookmark68 附錄：術(shù)

12、語58圖 表 目 錄 HYPERLINK l _bookmark27 表 1數(shù)據(jù)成本和價值評估的維度23 HYPERLINK l _bookmark28 表 2數(shù)據(jù)資產(chǎn)價值評估典型方法比較24 HYPERLINK l _bookmark34 表 3數(shù)據(jù)資產(chǎn)管理組織架構(gòu)角色職責28 HYPERLINK l _bookmark49 表 4數(shù)據(jù)資產(chǎn)管理的兩種建設(shè)策略40 HYPERLINK l _bookmark51 表 5數(shù)據(jù)資產(chǎn)管理的切入方式42 HYPERLINK l _bookmark4 圖 1數(shù)據(jù)資產(chǎn)管理在大數(shù)據(jù)體系中的定位2 HYPERLINK l _bookmark11 圖 2大數(shù)據(jù)背

13、景下的數(shù)據(jù)資產(chǎn)管理特點特征10 HYPERLINK l _bookmark18 圖 3數(shù)據(jù)資產(chǎn)管理體系架構(gòu)14 HYPERLINK l _bookmark33 圖 4數(shù)據(jù)資產(chǎn)管理保障措施組織架構(gòu)27 HYPERLINK l _bookmark35 圖 5數(shù)據(jù)認責機制29 HYPERLINK l _bookmark37 圖 6一種典型的制度體系架構(gòu)30 HYPERLINK l _bookmark42 圖 7數(shù)據(jù)資產(chǎn)管理實施步驟34 PAGE 6一、 數(shù)據(jù)資產(chǎn)管理概述眾所周知，數(shù)據(jù)是資源，伴隨著大數(shù)據(jù)時代支撐數(shù)據(jù)交換共享和數(shù)據(jù)服務應用的技術(shù)發(fā)展，不斷積淀的數(shù)據(jù)開始逐漸發(fā)揮它的價值， 因此，業(yè)界提出

14、可以將數(shù)據(jù)作為一項資產(chǎn)，“盤活”數(shù)據(jù)以充分釋放其附加價值。但是事實上，如果缺乏恰當有效的管理手段，數(shù)據(jù)也可能會成為一項負債。同時，相較于實物資產(chǎn)，數(shù)據(jù)資產(chǎn)的管理目前還處于初級階段，數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全、資產(chǎn)評估、資產(chǎn)交換交易等精細管理、價值挖掘和持續(xù)運營也較為薄弱。數(shù)據(jù)資產(chǎn)管理是現(xiàn)階段推動大數(shù)據(jù)與實體經(jīng)濟深度融合、新舊動 能轉(zhuǎn)換、經(jīng)濟轉(zhuǎn)向高質(zhì)量發(fā)展階段的重要工作內(nèi)容。本章將闡述數(shù)據(jù) 資產(chǎn)管理的定義與內(nèi)涵，分析數(shù)據(jù)資產(chǎn)管理在大數(shù)據(jù)領(lǐng)域的重要意義， 并對數(shù)據(jù)資產(chǎn)管理在大數(shù)據(jù)發(fā)展中的趨勢進行分析，探討數(shù)據(jù)資產(chǎn)管 理在企業(yè)中的實踐模式。(一) 數(shù)據(jù)資產(chǎn)管理的定義與內(nèi)涵數(shù)據(jù)資產(chǎn)管理的概念數(shù)據(jù)資產(chǎn)（Data

15、 Asset）是指由企業(yè)擁有或者控制的，能夠為企業(yè)帶來未來經(jīng)濟利益的，以物理或電子的方式記錄的數(shù)據(jù)資源，如文件資料、電子數(shù)據(jù)等。在企業(yè)中，并非所有的數(shù)據(jù)都構(gòu)成數(shù)據(jù)資產(chǎn)，數(shù)據(jù)資產(chǎn)是能夠為企業(yè)產(chǎn)生價值的數(shù)據(jù)資源。數(shù)據(jù)資產(chǎn)管理（DAM，Data Asset Management）是指規(guī)劃、控制和提供數(shù)據(jù)及信息資產(chǎn)的一組業(yè)務職能，包括開發(fā)、執(zhí)行和監(jiān)督有關(guān)數(shù)據(jù)的計劃、政策、方案、項目、流程、方法和程序，從而控制、保護、交付和提高數(shù)據(jù)資產(chǎn)的價值。數(shù)據(jù)資產(chǎn)管理需要充分融合業(yè)務、技術(shù)和管理，以確保數(shù)據(jù)資產(chǎn)保值增值。數(shù)據(jù)資產(chǎn)管理的內(nèi)涵數(shù)據(jù)資產(chǎn)管理在大數(shù)據(jù)體系中的定位如 HYPERLINK l _bookmark

16、4 圖 1 所示，它位于應用和底層平臺中間，處于承上啟下的重要地位。對上支持以價值創(chuàng)造為導向的數(shù)據(jù)應用開發(fā)，對下依托大數(shù)據(jù)平臺實現(xiàn)數(shù)據(jù)全生命周期的管理。數(shù)據(jù)資產(chǎn)管理包括兩個重要方面，一是數(shù)據(jù)資產(chǎn)管理的核心管理職能，二是確保這些管理職能落地實施的保障措施，包括戰(zhàn)略規(guī)劃、組織架構(gòu)、制度體系等。圖 1數(shù)據(jù)資產(chǎn)管理在大數(shù)據(jù)體系中的定位數(shù)據(jù)資產(chǎn)管理貫穿數(shù)據(jù)采集、存儲、應用和銷毀整個生命周期全過程。企業(yè)管理數(shù)據(jù)資產(chǎn)就是對數(shù)據(jù)進行全生命周期的資產(chǎn)化管理， 促進數(shù)據(jù)在“內(nèi)增值，外增效”兩方面的價值變現(xiàn)，同時控制數(shù)據(jù)在整個管理流程中的成本消耗。在數(shù)據(jù)的生命周期開始前，企業(yè)先期制定數(shù)據(jù)規(guī)劃、定義數(shù)據(jù)規(guī)范，以期獲得

17、實現(xiàn)數(shù)據(jù)采集、交付、存儲和控制所需的技術(shù)能力。數(shù)據(jù)資產(chǎn)管理一般來說包括統(tǒng)籌規(guī)劃、管理實施、稽核檢查和資產(chǎn)運營四個主要階段，詳見第三部分數(shù)據(jù)資產(chǎn)管理的實施要點。數(shù)據(jù)資產(chǎn)管理的演變數(shù)據(jù)管理的概念是伴隨上世紀八十年代數(shù)據(jù)隨機存儲技術(shù)和數(shù)據(jù)庫技術(shù)的使用，計算機系統(tǒng)中的數(shù)據(jù)可以方便地存儲和訪問而提出的。國際數(shù)據(jù)管理協(xié)會（ DAMA ， Data Management Association International）在 2009 年發(fā)布的數(shù)據(jù)管理知識體系 DMBOK1.0中， 將數(shù)據(jù)管理定義為規(guī)劃、控制和提供數(shù)據(jù)資產(chǎn)，發(fā)揮數(shù)據(jù)資產(chǎn)的價值。DAMA 數(shù)據(jù)管理體系將數(shù)據(jù)管理劃分為 10 個領(lǐng)域，分別是數(shù)據(jù)

18、治理、數(shù)據(jù)架構(gòu)管理、數(shù)據(jù)開發(fā)、數(shù)據(jù)操作管理、數(shù)據(jù)安全管理、參考數(shù)據(jù)和主數(shù)據(jù)管理、數(shù)據(jù)倉庫和商務智能管理、文檔和內(nèi)容管理、元數(shù)據(jù)管理和數(shù)據(jù)質(zhì)量管理。其中，數(shù)據(jù)治理是高層次的、規(guī)劃性的數(shù)據(jù)管理制度活動，其關(guān)鍵管理活動包括制定數(shù)據(jù)戰(zhàn)略、完善數(shù)據(jù)政策、建立數(shù)據(jù)架構(gòu)等，注重數(shù)據(jù)的使用者、使用方式、使用權(quán)限等合規(guī)性制定，強調(diào)開展數(shù)據(jù)資產(chǎn)全生命周期管理前的基礎(chǔ)工作，關(guān)注數(shù)據(jù)資產(chǎn)管理中的相關(guān)保障措施。2015 年，DAMA 在 DBMOK2.0 知識領(lǐng)域?qū)⑵鋽U展為 11 個管理 The DAMA Guide to the Data Management Body of Knowledge 職能，分別是數(shù)據(jù)架構(gòu)

19、、數(shù)據(jù)模型與設(shè)計、數(shù)據(jù)存儲與操作、數(shù)據(jù)安全、數(shù)據(jù)集成與互操作性、文件和內(nèi)容、參考數(shù)據(jù)和主數(shù)據(jù)、數(shù)據(jù)倉庫和商務智能（BI，Business Intelligence）、元數(shù)據(jù)、數(shù)據(jù)質(zhì)量等。在數(shù)據(jù)資產(chǎn)化背景下，數(shù)據(jù)資產(chǎn)管理是在數(shù)據(jù)管理基礎(chǔ)上的進一步發(fā)展，可以視作數(shù)據(jù)管理的升級版。主要區(qū)別可以從三方面看：一是數(shù)據(jù)管理的視角不同，數(shù)據(jù)資產(chǎn)管理強調(diào)數(shù)據(jù)是一種資產(chǎn)，基于數(shù)據(jù)資產(chǎn)的價值、成本、收益開展全生命周期的管理。二是管理職能有所不同，數(shù)據(jù)資產(chǎn)管理包含數(shù)據(jù)模型、元數(shù)據(jù)、數(shù)據(jù)質(zhì)量、參考數(shù)據(jù)和主數(shù)據(jù)、數(shù)據(jù)安全等傳統(tǒng)數(shù)據(jù)管理職能，同時整合數(shù)據(jù)架構(gòu)、數(shù)據(jù)存儲與操作等內(nèi)容，將數(shù)據(jù)標準管理納入管理職能，并針對當下應

20、用場景、平臺建設(shè)情況，增加了數(shù)據(jù)價值管理職能。三是管理要求有所升級，在“數(shù)據(jù)資源管理轉(zhuǎn)向數(shù)據(jù)資產(chǎn)管理”的理念影響下，相應的組織架構(gòu)和管理制度也有所變化，需要有更專業(yè)的管理隊伍和更細致的管理制度來確保數(shù)據(jù)資產(chǎn)管理的流程性、安全性和有效性。(二) 數(shù)據(jù)資產(chǎn)管理的重要性數(shù)據(jù)作為越來越重要的生產(chǎn)要素，將成為比土地、石油、煤礦等更為核心的生產(chǎn)資源，如何加工利用數(shù)據(jù)，釋放數(shù)據(jù)價值，實現(xiàn)企業(yè)的數(shù)字化轉(zhuǎn)型，是各企業(yè)面臨的重要課題。雖然充分有效挖掘數(shù)據(jù)價值的過程中充滿了障礙，但是數(shù)據(jù)資產(chǎn)管理逐步掃平了這些障礙。數(shù)據(jù)價值難以有效發(fā)揮的原因當前企業(yè)在數(shù)據(jù)資產(chǎn)管理中面臨諸多問題，這些問題阻礙了數(shù)據(jù)的互聯(lián)互通和高效利用

21、，成為了數(shù)據(jù)價值難以有效釋放的瓶頸，主要包括以下幾點：一是缺乏統(tǒng)一數(shù)據(jù)視圖。企業(yè)的數(shù)據(jù)資源散落在多個業(yè)務系統(tǒng)中， 企業(yè)主和業(yè)務人員無法及時感知到數(shù)據(jù)的分布與更新情況，無法快速 找到符合自己需求的數(shù)據(jù)，也無法發(fā)現(xiàn)和識別有價值的數(shù)據(jù)并納入數(shù) 據(jù)資產(chǎn)。二是數(shù)據(jù)孤島普遍存在。據(jù)統(tǒng)計，98%的企業(yè)都存在數(shù)據(jù)孤島問題。而造成數(shù)據(jù)孤島的原因既包括技術(shù)上的，也包括標準和管理制度上的，這阻礙了業(yè)務系統(tǒng)之間順暢的數(shù)據(jù)共享，降低了資源利用率和數(shù)據(jù)的可得性。三是數(shù)據(jù)質(zhì)量低下。糟糕的數(shù)據(jù)質(zhì)量常常意味著糟糕的業(yè)務決策， 將直接導致數(shù)據(jù)統(tǒng)計分析不準確、監(jiān)管業(yè)務難、高層領(lǐng)導難以決策等 問題。根據(jù)數(shù)據(jù)質(zhì)量專家 Larry En

22、glish 的統(tǒng)計，不良的數(shù)據(jù)質(zhì)量使企 業(yè)額外花費 15%到 25%的成本。而數(shù)據(jù)能夠被當作資產(chǎn)，并發(fā)揮越來越大的價值，其前提是數(shù)據(jù)質(zhì)量的不斷提升。四是缺乏安全的數(shù)據(jù)環(huán)境。數(shù)據(jù)安全造成的風險主要包括數(shù)據(jù)泄露與數(shù)據(jù)濫用等。根據(jù)數(shù)據(jù)泄露水平指數(shù)(Breach Level Index)監(jiān)測， /articles/data-silos-are-the-greatest-stumbling-block-to-an /podcast/Data-quality-trends-with-expert-Larry-English自 2013 年以來全球數(shù)據(jù)泄露高達 130 億條，其中很多都是由于管理制度不完善造

23、成。隨著各個機構(gòu)數(shù)據(jù)的快速累積，一旦發(fā)生數(shù)據(jù)安全事件，其對企業(yè)經(jīng)營和用戶利益的危害性將越來越大，束縛數(shù)據(jù)價值的釋放。五是缺乏數(shù)據(jù)價值管理體系。大部分企業(yè)還沒有建立起一個有效管理和應用數(shù)據(jù)的模式，包括數(shù)據(jù)價值評估、數(shù)據(jù)成本管理等，對數(shù)據(jù)服務和數(shù)據(jù)應用也缺乏合規(guī)性的指導，沒有找到一條釋放數(shù)據(jù)價值的“最優(yōu)路徑”。數(shù)據(jù)資產(chǎn)管理是充分發(fā)揮數(shù)據(jù)價值的必經(jīng)之路數(shù)據(jù)資產(chǎn)管理通過解決釋放數(shù)據(jù)價值過程中面臨的諸多問題，以體系化的方式實現(xiàn)數(shù)據(jù)的可得、可用、好用，用較小的數(shù)據(jù)成本獲得較大的數(shù)據(jù)收益，具體體現(xiàn)在以下六個方面：一是全面掌握數(shù)據(jù)資產(chǎn)現(xiàn)狀。數(shù)據(jù)資產(chǎn)管理的切入點是對數(shù)據(jù)家當進行全面盤點，形成數(shù)據(jù)地圖，為業(yè)務應用

24、和數(shù)據(jù)獲取夯實基礎(chǔ)。從資產(chǎn)化管理和展示數(shù)據(jù)的角度出發(fā)，數(shù)據(jù)地圖作為數(shù)據(jù)資產(chǎn)盤點的輸出物之一，不承載具體數(shù)據(jù)內(nèi)容，卻可以幫助業(yè)務人員快速精確查找他們想要的數(shù)據(jù)。其次，數(shù)據(jù)地圖作為企業(yè)數(shù)據(jù)的全盤映射，幫助數(shù)據(jù)開發(fā)者和數(shù)據(jù)使用者了解數(shù)據(jù)，并成為對數(shù)據(jù)資產(chǎn)管理進行有效監(jiān)控的手段。二是提升數(shù)據(jù)質(zhì)量。早在 1957 年的時候，計算機剛剛發(fā)明的時 http HYPERLINK / s:/ PAGE 64候，大家就意識到數(shù)據(jù)對于計算機決策的影響，提出 Garbage In Garbage Out的警示。2001 年，美國公布數(shù)據(jù)質(zhì)量法案（Data QualityAct），提出提升數(shù)據(jù)質(zhì)量的指導意見。2018

25、年，中國銀行保險監(jiān)督管理委員會發(fā)布銀行業(yè)金融機構(gòu)數(shù)據(jù)治理指引，強調(diào)高質(zhì)量的數(shù)據(jù)在發(fā)揮數(shù)據(jù)價值中的重要性。數(shù)據(jù)資產(chǎn)管理通過建立一套切實可行的數(shù)據(jù)質(zhì)量監(jiān)控體系，設(shè)計數(shù)據(jù)質(zhì)量稽核規(guī)則，加強從數(shù)據(jù)源頭控制數(shù)據(jù)質(zhì)量，形成覆蓋數(shù)據(jù)全生命周期的數(shù)據(jù)質(zhì)量管理，實現(xiàn)數(shù)據(jù)向優(yōu)質(zhì)資產(chǎn)的轉(zhuǎn)變。三是實現(xiàn)數(shù)據(jù)互聯(lián)互通。數(shù)據(jù)資產(chǎn)管理通過制定企業(yè)內(nèi)部統(tǒng)一的數(shù)據(jù)標準，建立數(shù)據(jù)共享制度，完善數(shù)據(jù)登記、數(shù)據(jù)申請、數(shù)據(jù)審批、數(shù)據(jù)傳輸、數(shù)據(jù)使用等數(shù)據(jù)共享相關(guān)流程規(guī)范，打破數(shù)據(jù)孤島，實現(xiàn)企業(yè)內(nèi)數(shù)據(jù)高效共享。同時搭建數(shù)據(jù)流通開放平臺，增強數(shù)據(jù)的可得性，促進數(shù)據(jù)的交換流通，提升數(shù)據(jù)的服務應用能力。四是提高數(shù)據(jù)獲取效率。Gartner 統(tǒng)計，

26、數(shù)據(jù)分析人員或數(shù)據(jù)科學家需要花費 70%到 80%的精力在數(shù)據(jù)準備上。數(shù)據(jù)資產(chǎn)管理通過搭建數(shù)據(jù)管理平臺，采取機器學習等相關(guān)自動化技術(shù)，將大量前期的數(shù)據(jù)準備時間和交付項目的時間縮短，提升數(shù)據(jù)的獲取和服務效率， 讓數(shù)據(jù)隨時快速有效就緒，縮短數(shù)據(jù)分析人員和數(shù)據(jù)科學家的數(shù)據(jù)準備時間，加快數(shù)據(jù)價值的釋放過程。五是保障數(shù)據(jù)安全合規(guī)。保障安全是數(shù)據(jù)資產(chǎn)管理的底線，數(shù)據(jù) /wiki/Garbage_in,_garbage_out資產(chǎn)管理通過制定完善的數(shù)據(jù)安全策略、建立體系化的數(shù)據(jù)安全措施、執(zhí)行數(shù)據(jù)安全審計，全方位進行安全管控，確保數(shù)據(jù)獲取和使用合法 合規(guī)，為數(shù)據(jù)價值的充分挖掘提供了安全可靠的環(huán)境。六是數(shù)據(jù)價值

27、持續(xù)釋放。存儲和管理數(shù)據(jù)的最終目的是實現(xiàn)數(shù)據(jù)的價值，數(shù)據(jù)資產(chǎn)管理將數(shù)據(jù)作為一項資產(chǎn)，并通過一個持續(xù)和動態(tài)的全生命周期管理過程，使數(shù)據(jù)資產(chǎn)能夠為企業(yè)數(shù)字化轉(zhuǎn)型提供源源不斷的動力。從企業(yè)高管到業(yè)務人員及技術(shù)人員，全員都要以持續(xù)釋放數(shù)據(jù)價值為理念來重視數(shù)據(jù)資源管理工作。管理方面，建立一套符合數(shù)據(jù)驅(qū)動的組織管理制度流程和價值評估體系。技術(shù)方面，建設(shè)現(xiàn)代化數(shù)據(jù)平臺、引入智能化技術(shù)，確保數(shù)據(jù)資產(chǎn)管理系統(tǒng)平臺持續(xù)、健康地為數(shù)據(jù)資產(chǎn)管理體系服務。(三) 數(shù)據(jù)資產(chǎn)管理是各方關(guān)注的重要議題數(shù)據(jù)資產(chǎn)管理不僅僅是單一機構(gòu)的課題。近年來，地方政府層面越來越重視數(shù)據(jù)資源的管理，開展了很多工作。在新一輪的政府機構(gòu)改革中，設(shè)

28、置專門的數(shù)據(jù)管理機構(gòu)成為熱點，已有貴州、山東、重慶、福建、廣東、浙江、吉林、廣西等省份設(shè)置了廳局級的大數(shù)據(jù)管理局， 統(tǒng)籌推動地方“數(shù)字政府”建設(shè)，促進政務信息資源共享協(xié)同應用。早在 2017 年 7 月，貴州省大數(shù)據(jù)發(fā)展領(lǐng)導小組辦公室印發(fā)實施了貴州省政府數(shù)據(jù)資產(chǎn)管理登記暫行辦法，成為全國首個出臺政府數(shù)據(jù)資產(chǎn)管理登記辦法的省份。行業(yè)層面，金融行業(yè)高度重視數(shù)據(jù)資產(chǎn)管理工作。2016 年 12 月30 日，中國證券業(yè)協(xié)會發(fā)布證券公司全面風險管理規(guī)范，明確指出證券公司應當建立健全數(shù)據(jù)治理和質(zhì)量控制機制。2018 年 5 月， 銀保監(jiān)會（原銀監(jiān)會）發(fā)布銀行業(yè)金融機構(gòu)數(shù)據(jù)治理指引，要求銀行業(yè)應該將數(shù)據(jù)治理

29、納入公司治理范疇。2018 年，中國支付清算協(xié)會針對非銀行支付機構(gòu)數(shù)據(jù)資產(chǎn)管理狀況開展了調(diào)研。醫(yī)療行業(yè)，2018 年 9 月，國家衛(wèi)生健康委員會印發(fā)國家健康醫(yī)療大數(shù)據(jù)標準、安全和服務管理辦法（試行）的通知，2019 年 4 月，國家衛(wèi)生健康委辦公廳印發(fā)全國醫(yī)院數(shù)據(jù)上報管理方案（試行）及全國醫(yī)院上報數(shù)據(jù)統(tǒng)計分析指標集（試行），充分發(fā)揮健康醫(yī)療大數(shù)據(jù)作為國家重要基礎(chǔ)性戰(zhàn)略資源的作用。在工業(yè)領(lǐng)域，在工業(yè)和信息化部信息化與軟件服務業(yè)司指導下，工業(yè)互聯(lián)網(wǎng)產(chǎn)業(yè)聯(lián)盟（AII）聯(lián)合中國信息通信研究院發(fā)布了中國工業(yè)企業(yè)數(shù)據(jù)資產(chǎn)管理調(diào)查報告（2018）。國家層面，數(shù)據(jù)合規(guī)性與數(shù)據(jù)跨境流動成為各國關(guān)注重點。2017

30、年 6 月 1 日正式生效的中華人民共和國網(wǎng)絡安全法第三十七條規(guī)定：“關(guān)鍵信息基礎(chǔ)設(shè)施的運營者在中華人民共和國境內(nèi)運營中收集和產(chǎn)生的個人信息和重要數(shù)據(jù)應當在境內(nèi)存儲。因業(yè)務需要，確需向境外提供的，應當按照國家網(wǎng)信部門會同國務院有關(guān)部門制定的辦法進行安全評估”。2018 年 5 月 25 日，一般數(shù)據(jù)保護條例(GDPR)正式在歐盟實施。各國對于數(shù)據(jù)跨境流動的關(guān)注則包含了數(shù)據(jù)主權(quán)、隱私保護、法律適用與管轄、乃至國際貿(mào)易規(guī)則等內(nèi)容。(四) 數(shù)據(jù)資產(chǎn)管理的現(xiàn)狀與發(fā)展隨著管理數(shù)據(jù)對象越發(fā)復雜，數(shù)據(jù)處理技術(shù)越發(fā)成熟，數(shù)據(jù)應用范圍越發(fā)廣泛，數(shù)據(jù)資產(chǎn)管理在數(shù)據(jù)處理架構(gòu)、組織職能、管理手段等方面逐漸呈現(xiàn)了一些新

31、的特點和發(fā)展趨勢。圖 2大數(shù)據(jù)背景下的數(shù)據(jù)資產(chǎn)管理特點特征數(shù)據(jù)管理對象變化數(shù)據(jù)作為數(shù)據(jù)資產(chǎn)管理的對象，在近些年體現(xiàn)出規(guī)模海量、來源多樣、格式繁雜、采集實時等特征。在數(shù)據(jù)量方面，單一機構(gòu)的數(shù)據(jù)規(guī)模由以前的 GB 級上升到 TB 級，甚至 PB 級、EB 級，數(shù)據(jù)增速快。在數(shù)據(jù)格式種類方面，除傳統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)之外，文本數(shù)據(jù)、圖像數(shù)據(jù)、語音數(shù)據(jù)、視頻數(shù)據(jù)等半結(jié)構(gòu)化數(shù)據(jù)或非結(jié)構(gòu)化數(shù)據(jù)占比越來越大，種類日益豐富。在數(shù)據(jù)來源方面，數(shù)據(jù)既包括內(nèi)部數(shù)據(jù)，也包括來自第三方的外部數(shù)據(jù)，既包括傳統(tǒng)業(yè)務處理采集的業(yè)務數(shù)據(jù)， 也包括手機終端、傳感器、機器設(shè)備、網(wǎng)站網(wǎng)絡、日志等技術(shù)產(chǎn)生的數(shù)據(jù)。同時，由于秒級或者毫秒級的響

32、應將幫助企業(yè)更快地洞察與分析數(shù)據(jù)，實時數(shù)據(jù)正在成為企業(yè)數(shù)據(jù)重要的管理對象，目前實時數(shù)據(jù)采集和處理已廣泛應用于互聯(lián)網(wǎng)、零售、電力、交通等多個行業(yè)，利用物聯(lián)網(wǎng)、實時數(shù)據(jù)庫等技術(shù)實現(xiàn)交易實時處理、生產(chǎn)實時監(jiān)控、交通實時調(diào)控等。處理架構(gòu)更新?lián)Q代處理架構(gòu)的更新?lián)Q代體現(xiàn)以下幾個方面。一是數(shù)據(jù)處理的底層架構(gòu)向云平臺和分布式系統(tǒng)遷移。Gartner 在 2018 年針對數(shù)據(jù)和分析采用方式的調(diào)查結(jié)果表明，63%企業(yè)目前使用最普遍的信息基礎(chǔ)架構(gòu)基技術(shù)為“基于云平臺的數(shù)據(jù)存儲”。同時以 Hadoop、Spark 等分布式技術(shù)和組件為核心的“計算&存儲混搭”的數(shù)據(jù)處理架構(gòu)，能夠支持批量和實時的數(shù)據(jù)加載以及靈活的業(yè)務需

33、求。二是數(shù)據(jù)的預處理流程正在從傳統(tǒng)的 ETL 結(jié)構(gòu)向 ELT 轉(zhuǎn)變。傳統(tǒng)的數(shù)據(jù)集成處理架構(gòu)是 ETL 結(jié)構(gòu)，這是構(gòu)建數(shù)據(jù)倉庫的重要一環(huán)，即用戶從數(shù)據(jù)源抽取出所需的數(shù)據(jù)，經(jīng)過數(shù)據(jù)清洗，將數(shù)據(jù)加載到數(shù)據(jù)倉庫中去。而大數(shù)據(jù)背景下的架構(gòu)體系是 ELT 結(jié)構(gòu)，其根據(jù)上層的應用需求，隨時從數(shù)據(jù)湖中抽 數(shù)據(jù)湖（Data Lake）：數(shù)據(jù)湖是以其自然格式存儲的數(shù)據(jù)的系統(tǒng)或存儲庫，通常是對象 blob 或文取想要的原始數(shù)據(jù)進行建模分析。組織職能升級變遷傳統(tǒng)的管理制度體系中，數(shù)據(jù)管理職能主要由 IT 部門來負責， 是 IT 部門的一項工作，業(yè)務部門配合 IT 部門執(zhí)行數(shù)據(jù)管理，提出需求。隨著數(shù)據(jù)分析與業(yè)務融合越來

34、越深入，業(yè)務部門逐步成為大數(shù)據(jù)應用的主角，因而數(shù)據(jù)資產(chǎn)管理在企業(yè)中扮演越來越重要的角色。出現(xiàn)了越來越多的企業(yè)設(shè)置專門的“數(shù)據(jù)管理”職能部門或首席數(shù)據(jù)官（CDO，Chief Data Officer）崗位。在這種變遷背景下，數(shù)據(jù)管理的組織架構(gòu)也面臨革新的需求。管理手段自動智能依靠“手工人力”的電子表格數(shù)據(jù)治理模式即將被“自動智能”的“專業(yè)工具”取代，越來越多的數(shù)據(jù)管理員、業(yè)務分析師和數(shù)據(jù)領(lǐng)導者采用“平臺工具”增強企業(yè)的數(shù)據(jù)管理能力，包括梳理元數(shù)據(jù)、管理主數(shù)據(jù)，優(yōu)化數(shù)據(jù)集成、提升數(shù)據(jù)質(zhì)量等。具體來說，機器學習和人工智能通過自動提取元數(shù)據(jù)，將不同的數(shù)據(jù)進行關(guān)聯(lián)并分析；通過配置和優(yōu)化主數(shù)據(jù)，使主數(shù)據(jù)的

35、管理更加便捷和準確；通過語義分析實現(xiàn)相同數(shù)據(jù)源的連接，簡化數(shù)據(jù)集成流程；通過增強數(shù)據(jù)的分析、清理件。 數(shù)據(jù)湖通常是企業(yè)所有數(shù)據(jù)的單一存儲，包括源系統(tǒng)數(shù)據(jù)的原始副本，以及用于報告、可視化、分析和機器學習等任務的轉(zhuǎn)換數(shù)據(jù)。 數(shù)據(jù)湖可以包括來自關(guān)系數(shù)據(jù)庫（行和列）的結(jié)構(gòu)化數(shù)據(jù)，半結(jié)構(gòu)化數(shù)據(jù)（CSV，日志，XML，JSON），非結(jié)構(gòu)化數(shù)據(jù)（電子郵件，文檔，PDF）和二進制數(shù)據(jù)（圖像，音頻，視頻）。來源：維基百科和識別，提升數(shù)據(jù)質(zhì)量。同時，隨著智能優(yōu)化技術(shù)不斷引入到數(shù)據(jù)管理活動中，數(shù)據(jù)間的多維關(guān)系將被自動化識別和可視化展現(xiàn)，幫助用戶高效探索數(shù)據(jù)和分析數(shù)據(jù)，降低數(shù)據(jù)使用門檻，有助于非專業(yè)人士成為數(shù)據(jù)科學家

36、，擴大數(shù)據(jù)的使用對象和應用范圍。應用范圍不斷擴大數(shù)據(jù)資產(chǎn)管理的使用不僅僅局限于擁有海量數(shù)據(jù)或強大數(shù)據(jù)處理能力的機構(gòu)，任何一個機構(gòu)都可以成為數(shù)據(jù)資產(chǎn)化管理的實踐者。選擇一個小型且效果明顯的項目實施數(shù)據(jù)資產(chǎn)管理，也可以成為逐步構(gòu)建完整數(shù)據(jù)資產(chǎn)管理體系的良好開端。此外，數(shù)據(jù)資產(chǎn)的應用范圍已經(jīng)從傳統(tǒng)的企業(yè)內(nèi)部應用為主發(fā)展為支撐內(nèi)部和服務外部并重，數(shù)據(jù)資產(chǎn)應用和服務范圍的擴大成為企業(yè)戰(zhàn)略發(fā)展的一部分，實現(xiàn)數(shù)據(jù)資產(chǎn)保值到增值的跨越。二、 數(shù)據(jù)資產(chǎn)管理的主要內(nèi)容數(shù)據(jù)資產(chǎn)管理框架 HYPERLINK l _bookmark18 如圖 3 所示，包含 8 個管理職能和 5 個保障措施。管理職能是指落實數(shù)據(jù)資產(chǎn)管

37、理的一系列具體行為，保障措施是為了支持管理職能實現(xiàn)的一些輔助的組織架構(gòu)和制度體系。本章主要描述具體的管理職能和保障措施的詳細內(nèi)容。圖 3數(shù)據(jù)資產(chǎn)管理體系架構(gòu)(一) 管理職能數(shù)據(jù)資產(chǎn)管理的管理職能包括數(shù)據(jù)標準管理、數(shù)據(jù)模型管理、元數(shù)據(jù)管理、主數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)安全管理、數(shù)據(jù)價值管理以及數(shù)據(jù)共享管理等 8 個方面，詳細闡述如下。數(shù)據(jù)標準管理數(shù)據(jù)標準是指保障數(shù)據(jù)的內(nèi)外部使用和交換的一致性和準確性的規(guī)范性約束，通?？煞譃榛A(chǔ)類數(shù)據(jù)標準和指標類數(shù)據(jù)標準?；A(chǔ)類數(shù)據(jù)標準一般包括參考數(shù)據(jù)和主數(shù)據(jù)標準、邏輯數(shù)據(jù)模型標準、物理數(shù)據(jù)模型標準、元數(shù)據(jù)標準、公共代碼和編碼標準等。指標類數(shù)據(jù)標準一般分為基礎(chǔ)指

38、標標準和計算指標（又稱組合指標）標準。基礎(chǔ)指標一般不含維度信息，且具有特定業(yè)務和經(jīng)濟含義，計算指標通常由兩個以上基礎(chǔ)指標計算得出。數(shù)據(jù)標準一般包含 3 個要素：標準分類、標準信息項（標準內(nèi)容） 和相關(guān)公共代碼和編碼（如國標、行標等）。其中標準分類指按照不同的特點或性質(zhì)區(qū)分數(shù)據(jù)概念；信息項是對標準對象的特點、性質(zhì)等的描述集合；公共代碼指某一標準所涉及對象屬性的編碼。數(shù)據(jù)標準管理是指數(shù)據(jù)標準的制定和實施的一系列活動，關(guān)鍵活動包括：理解數(shù)據(jù)標準化需求；構(gòu)建數(shù)據(jù)標準體系和規(guī)范；規(guī)劃制定數(shù)據(jù)標準化的實施路線和方案；制定數(shù)據(jù)標準管理辦法和實施流程要求；建設(shè)數(shù)據(jù)標準管理工具，推動數(shù)據(jù)標準的執(zhí)行落地；評估數(shù)據(jù)

39、標準化工作的開展情況。數(shù)據(jù)標準管理的目標是通過統(tǒng)一的數(shù)據(jù)標準制定和發(fā)布，結(jié)合制度約束、系統(tǒng)控制等手段，實現(xiàn)企業(yè)大數(shù)據(jù)平臺數(shù)據(jù)的完整性、有效性、一致性、規(guī)范性，推動數(shù)據(jù)的共享開放，構(gòu)建統(tǒng)一的數(shù)據(jù)資產(chǎn)地圖，為數(shù)據(jù)資產(chǎn)管理活動提供參考依據(jù)。數(shù)據(jù)模型管理數(shù)據(jù)模型是現(xiàn)實世界數(shù)據(jù)特征的抽象，用于描述一組數(shù)據(jù)的概念和定義。數(shù)據(jù)模型從抽象層次上描述了數(shù)據(jù)的靜態(tài)特征、動態(tài)行為和約束條件。數(shù)據(jù)模型所描述的內(nèi)容有三部分：數(shù)據(jù)結(jié)構(gòu)、數(shù)據(jù)操作（其中 ER 圖數(shù)據(jù)模型中無數(shù)據(jù)操作）和數(shù)據(jù)約束，形成數(shù)據(jù)結(jié)構(gòu)的基本藍圖，也是企業(yè)數(shù)據(jù)資產(chǎn)的戰(zhàn)略地圖。數(shù)據(jù)模型按不同的應用層次分成概念數(shù)據(jù)模型、邏輯數(shù)據(jù)模型、物理數(shù)據(jù)模型三種類型。

40、概念模型：是一種面向用戶、面向客觀世界的模型，主要用來描述現(xiàn)實世界的概念化結(jié)構(gòu)，與具體的數(shù)據(jù)庫管理系統(tǒng)（DBMS， Database Management System）無關(guān)；邏輯模型：是一種以概念模型的框架為基礎(chǔ)，根據(jù)業(yè)務條線、業(yè)務事項、業(yè)務流程、業(yè)務場景的需要，設(shè)計的面向業(yè)務實現(xiàn)的數(shù)據(jù)模型。邏輯模型可用于指導在不同的 DBMS 系統(tǒng)中實現(xiàn)。邏輯數(shù)據(jù)模型包括網(wǎng)狀數(shù)據(jù)模型、層次數(shù)據(jù)模型等；物理模型：是一種面向計算機物理表示的模型，描述了數(shù)據(jù)在儲存介質(zhì)上的組織結(jié)構(gòu)。物理模型的設(shè)計應基于邏輯模型的成果，以保證實現(xiàn)業(yè)務需求。它不但與具體的 DBMS 有關(guān)，而且還與操作系統(tǒng)和硬件有關(guān)，同時考慮系統(tǒng)性能

41、的相關(guān)要求。數(shù)據(jù)模型管理是指在信息系統(tǒng)設(shè)計時，參考業(yè)務模型，使用標準化用語、單詞等數(shù)據(jù)要素來設(shè)計企業(yè)數(shù)據(jù)模型，并在信息系統(tǒng)建設(shè)和運行維護過程中，嚴格按照數(shù)據(jù)模型管理制度，審核和管理新建數(shù)據(jù)模型，數(shù)據(jù)模型的標準化管理和統(tǒng)一管控，有利于指導企業(yè)數(shù)據(jù)整合， 提高信息系統(tǒng)數(shù)據(jù)質(zhì)量。數(shù)據(jù)模型管理包括對數(shù)據(jù)模型的設(shè)計、數(shù)據(jù)模型和數(shù)據(jù)標準詞典的同步、數(shù)據(jù)模型審核發(fā)布、數(shù)據(jù)模型差異對比、版本管理等。數(shù)據(jù)模型管理的關(guān)鍵活動包括：定義和分析企業(yè)數(shù)據(jù)需求；定義標準化的業(yè)務用語、單詞、域、編碼等；設(shè)計標準化數(shù)據(jù)模型，遵循數(shù)據(jù)設(shè)計規(guī)范；制定數(shù)據(jù)模型管理辦法和實施流程要求；建設(shè)數(shù)據(jù)模型管理工具，統(tǒng)一管控企業(yè)數(shù)據(jù)模型。數(shù)據(jù)

42、模型是數(shù)據(jù)資產(chǎn)管理的基礎(chǔ)，一個完整、可擴展、穩(wěn)定的數(shù)據(jù)模型對于數(shù)據(jù)資產(chǎn)管理的成功起著重要的作用。通過數(shù)據(jù)模型管理可以清楚地表達企業(yè)內(nèi)部各種業(yè)務主體之間的數(shù)據(jù)相關(guān)性，使不同部門的業(yè)務人員、應用開發(fā)人員和系統(tǒng)管理人員獲得關(guān)于企業(yè)內(nèi)部業(yè)務數(shù)據(jù)的統(tǒng)一完整視圖。元數(shù)據(jù)管理元數(shù)據(jù)（Metadata）是描述數(shù)據(jù)的數(shù)據(jù)。元數(shù)據(jù)按用途不同分為技術(shù)元數(shù)據(jù)、業(yè)務元數(shù)據(jù)和管理元數(shù)據(jù)。技術(shù)元數(shù)據(jù)（Technical Metadata）：描述數(shù)據(jù)系統(tǒng)中技術(shù)領(lǐng)域相關(guān)概念、關(guān)系和規(guī)則的數(shù)據(jù)；包括數(shù)據(jù)平臺內(nèi)對象和數(shù)據(jù)結(jié)構(gòu)的定義、源數(shù)據(jù)到目的數(shù)據(jù)的映射、數(shù)據(jù)轉(zhuǎn)換的描述等；業(yè)務元數(shù)據(jù)（Business Metadata）：描述數(shù)據(jù)

43、系統(tǒng)中業(yè)務領(lǐng)域相關(guān)概念、關(guān)系和規(guī)則的數(shù)據(jù)；包括業(yè)務術(shù)語、信息分類、指標、統(tǒng)計口徑等；管理元數(shù)據(jù)（Management Metadata）：描述數(shù)據(jù)系統(tǒng)中管理領(lǐng)域相關(guān)概念、關(guān)系、規(guī)則的數(shù)據(jù)，主要包括人員角色、崗位職責、管理流程等信息。元數(shù)據(jù)管理（Meta Data Management）是數(shù)據(jù)資產(chǎn)管理的重要基礎(chǔ)，是為獲得高質(zhì)量的、整合的元數(shù)據(jù)而進行的規(guī)劃、實施與控制行為。元數(shù)據(jù)管理的內(nèi)容可以從以下六個角度進行概括，即“向前看”：“我”是誰加工出來的；“向后看”：“我”又支持了誰的加工；“看歷史”： 過去的“我”長什么樣子；“看本體”：“我”的定義和格式是什么；“向上看”：“我”的父節(jié)點是誰；“向

44、下看”：“我”的子節(jié)點是誰。元數(shù)據(jù)管理的關(guān)鍵活動包括：理解企業(yè)元數(shù)據(jù)管理需求；開發(fā)和維護元數(shù)據(jù)標準；建設(shè)元數(shù)據(jù)管理工具；創(chuàng)建、采集、整合元數(shù)據(jù)；管理元數(shù)據(jù)存儲庫；分發(fā)和使用元數(shù)據(jù)；元數(shù)據(jù)分析（血緣分析、影響分析、數(shù)據(jù)地圖等）。元數(shù)據(jù)管理內(nèi)容描述了數(shù)據(jù)在使用流程中的信息，通過血緣分析可以實現(xiàn)關(guān)鍵信息的追蹤和記錄，影響分析幫助了解分析對象的下游數(shù)據(jù)信息，快速掌握元數(shù)據(jù)變更可能造成的影響，有效評估變化該元數(shù)據(jù)帶來的風險，逐漸成為數(shù)據(jù)資產(chǎn)管理發(fā)展的關(guān)鍵驅(qū)動力。主數(shù)據(jù)管理主數(shù)據(jù)（Master Data）是指用來描述企業(yè)核心業(yè)務實體的數(shù)據(jù)， 是企業(yè)核心業(yè)務對象、交易業(yè)務的執(zhí)行主體。是在整個價值鏈上被重復、

45、共享應用于多個業(yè)務流程的、跨越各個業(yè)務部門和系統(tǒng)的、高價值的基礎(chǔ)數(shù)據(jù)，是各業(yè)務應用和各系統(tǒng)之間進行數(shù)據(jù)交互的基礎(chǔ)。從業(yè)務角度，主數(shù)據(jù)是相對“固定”的，變化緩慢。主數(shù)據(jù)是企業(yè)信息系統(tǒng)的神經(jīng)中樞，是業(yè)務運行和決策分析的基礎(chǔ)。例如供應商、客戶、企業(yè)組織機構(gòu)和員工、產(chǎn)品、渠道、科目 COA、BOM 等。主數(shù)據(jù)管理（MDM ，Master Data Management）是一系列規(guī)則、應用和技術(shù)，用以協(xié)調(diào)和管理與企業(yè)的核心業(yè)務實體相關(guān)的系統(tǒng)記錄數(shù)據(jù)。主數(shù)據(jù)管理的關(guān)鍵活動包括：理解主數(shù)據(jù)的整合需求；識別主數(shù)據(jù)的來源；定義和維護數(shù)據(jù)整合架構(gòu)；實施主數(shù)據(jù)解決方案；定義和維護數(shù)據(jù)匹配規(guī)則；根據(jù)業(yè)務規(guī)則和數(shù)據(jù)質(zhì)量

46、標準對收集到的主數(shù)據(jù)進行加工清理；建立主數(shù)據(jù)創(chuàng)建、變更的流程審批機制；實現(xiàn)各個關(guān)聯(lián)系統(tǒng)與主數(shù)據(jù)存儲庫數(shù)據(jù)同步；方便修改、監(jiān)控、更新關(guān)聯(lián)系統(tǒng)主數(shù)據(jù)變化。主數(shù)據(jù)管理通過對主數(shù)據(jù)值進行控制，使得企業(yè)可以跨系統(tǒng)的使用一致的和共享的主數(shù)據(jù)，提供來自權(quán)威數(shù)據(jù)源的協(xié)調(diào)一致的高質(zhì)量主數(shù)據(jù)，降低成本和復雜度，從而支撐跨部門、跨系統(tǒng)數(shù)據(jù)融合應用。數(shù)據(jù)質(zhì)量管理數(shù)據(jù)質(zhì)量是保證數(shù)據(jù)應用效果的基礎(chǔ)。衡量數(shù)據(jù)質(zhì)量的指標體系有很多，幾個典型的指標有：完整性（數(shù)據(jù)是否缺失）、規(guī)范性（數(shù)據(jù)是否按照要求的規(guī)則存儲）、一致性（數(shù)據(jù)的值是否存在信息含義上的沖突）、準確性（數(shù)據(jù)是否錯誤）、唯一性（數(shù)據(jù)是否是重復的）、時效性（數(shù)據(jù)是否按照

47、時間的要求進行上傳）。數(shù)據(jù)質(zhì)量是描述數(shù)據(jù)價值含量的指標，就像鐵礦石的質(zhì)量，礦石的質(zhì)量高，則煉出來的鋼材就會多；反之，礦石的質(zhì)量低，不但練出來的鋼材少了，同時也增加了提煉的成本。數(shù)據(jù)質(zhì)量管理是指運用相關(guān)技術(shù)來衡量、提高和確保數(shù)據(jù)質(zhì)量的規(guī)劃、實施與控制等一系列活動。數(shù)據(jù)質(zhì)量管理工作中的關(guān)鍵活動包括：開發(fā)和提升數(shù)據(jù)質(zhì)量意識；定義數(shù)據(jù)質(zhì)量需求；剖析、分析和評估數(shù)據(jù)質(zhì)量；定義數(shù)據(jù)質(zhì)量測量指標；定義數(shù)據(jù)質(zhì)量業(yè)務規(guī)則；測試和驗證數(shù)據(jù)質(zhì)量需求；確定與評估數(shù)據(jù)質(zhì)量服務水平；持續(xù)測量和監(jiān)控數(shù)據(jù)質(zhì)量；管理數(shù)據(jù)質(zhì)量問題；分析產(chǎn)生數(shù)據(jù)質(zhì)量問題的根本原因；制定數(shù)據(jù)質(zhì)量改善方案；清洗和糾正數(shù)據(jù)質(zhì)量缺陷；設(shè)計并實施數(shù)據(jù)質(zhì)量管

48、理工具；監(jiān)控數(shù)據(jù)質(zhì)量管理操作程序和績效。通過開展數(shù)據(jù)質(zhì)量管理工作，企業(yè)可以獲得干凈、結(jié)構(gòu)清晰的數(shù)據(jù)，是企業(yè)開發(fā)大數(shù)據(jù)產(chǎn)品、提供對外數(shù)據(jù)服務、發(fā)揮大數(shù)據(jù)價值的必要前提，也是企業(yè)開展數(shù)據(jù)資產(chǎn)管理的重要目標。數(shù)據(jù)安全管理數(shù)據(jù)安全管理是指對數(shù)據(jù)設(shè)定安全等級，按照相應國家/組織相關(guān)法案及監(jiān)督要求，通過評估數(shù)據(jù)安全風險、制定數(shù)據(jù)安全管理制度規(guī)范、進行數(shù)據(jù)安全分級分類，完善數(shù)據(jù)安全管理相關(guān)技術(shù)規(guī)范，保證數(shù)據(jù)被合法合規(guī)、安全地采集、傳輸、存儲和使用。企業(yè)通過數(shù)據(jù)安全管理，規(guī)劃、開發(fā)和執(zhí)行安全政策與措施，提供適當?shù)纳矸菀源_認、授權(quán)、訪問與審計等功能。數(shù)據(jù)安全管理的關(guān)鍵活動包括：理解數(shù)據(jù)安全需求及監(jiān)管要求；定義數(shù)

49、據(jù)安全策略；定義數(shù)據(jù)安全標準；定義數(shù)據(jù)安全控制及措施；管理用戶、密碼和用戶組成員；管理數(shù)據(jù)訪問視圖與權(quán)限；監(jiān)控用戶身份認證和訪問行為；定義數(shù)據(jù)安全強度，劃分信息等級；部署數(shù)據(jù)安全防控系統(tǒng)或工具；審計數(shù)據(jù)安全。數(shù)據(jù)安全管理的目標是建立完善的體系化的安全策略措施，全方位進行安全管控，通過多種手段確保數(shù)據(jù)資產(chǎn)在“存、管、用”等各個環(huán)節(jié)中的安全，做到“事前可管、事中可控、事后可查”。數(shù)據(jù)價值管理數(shù)據(jù)價值管理是對數(shù)據(jù)內(nèi)在價值的度量，可以從數(shù)據(jù)成本和數(shù)據(jù)應用價值兩方面來開展。數(shù)據(jù)成本一般包括采集、存儲和計算的費用（人工費用、IT 設(shè)備等直接費用和間接費用等）和運維費用（業(yè)務操作費、技術(shù)操作費等）。數(shù)據(jù)成本

50、管理從度量成本的維度出發(fā)，通過定義數(shù)據(jù)成本核算指標、監(jiān)控數(shù)據(jù)成本產(chǎn)生等步驟，確定數(shù)據(jù)成本優(yōu)化方案，實現(xiàn)數(shù)據(jù)成本的有效控制。數(shù)據(jù)價值（收益）主要從數(shù)據(jù)資產(chǎn)的分類、使用頻次、使用對象、使用效果和共享流通等方面計量。數(shù)據(jù)價值（收益）管理從度量價值的維度出發(fā)，選擇各維度下有效的衡量指標，對針對數(shù)據(jù)連接度的活性評估、數(shù)據(jù)質(zhì)量價值評估、數(shù)據(jù)稀缺性和時效性評估、數(shù)據(jù)應用場景經(jīng)濟性評估，并優(yōu)化數(shù)據(jù)服務應用的方式，最大可能性的提高數(shù)據(jù)的應用價值。比如可以選擇數(shù)據(jù)熱度、廣度等作為數(shù)據(jù)價值的參考指標，通過 ROI 評估，高效管控和合理應用數(shù)據(jù)資產(chǎn)。表 1數(shù)據(jù)成本和價值評估的維度計量維度各維度描述數(shù)據(jù)成本評估采集、存

51、儲和計算成本評估主要包括計量人工費用、IT 設(shè)備等直接費用和間接費用等運維成本評估主要包括計量業(yè)務操作費、技術(shù)操作費等數(shù)據(jù)價值評估活性評估活性指標主要包括數(shù)據(jù)連接度、貢獻度等，數(shù)據(jù)的高連接度和貢獻度，意味著高活性和高數(shù)據(jù)價值。數(shù)據(jù)質(zhì)量評估數(shù)據(jù)質(zhì)量評估指標主要包括數(shù)據(jù)一致性、準確性、完整性、及時性等，高數(shù)據(jù)質(zhì)量意味著搞數(shù)據(jù)價值數(shù)據(jù)稀缺性評估數(shù)據(jù)稀缺性描述數(shù)據(jù)的供給數(shù)量及供給方數(shù)量的多寡，通過與最大供給方數(shù)量或數(shù)據(jù)供給豐富程度相比較，判斷數(shù)據(jù)稀缺性，高稀缺性數(shù)據(jù)意味著高數(shù)據(jù)價值數(shù)據(jù)時效性評估數(shù)據(jù)時效性描述數(shù)據(jù)的時間特性對應用的滿足程度，較高的滿足程度意味著高的數(shù)據(jù)時效性，即高數(shù)據(jù)價值數(shù)據(jù)應用場景經(jīng)

52、濟性評估數(shù)據(jù)應用場景經(jīng)濟型描述在具體場景下數(shù)據(jù)集的經(jīng)濟價值，由于不同行業(yè)的規(guī)模、數(shù)據(jù)應用程度等具有差異性，因而不同的場景下的數(shù)據(jù)集，其價值會相差很大。通過比較某場景下的經(jīng)濟價值與所有場景中的最大經(jīng)濟價值相比較，判斷數(shù)據(jù)應用場景經(jīng)濟性，高場景經(jīng)濟性意味著高數(shù)據(jù)價值。當前，對于數(shù)據(jù)資產(chǎn)評估的研究還處于早期階段，評估方法手段還不成熟?？赡艿姆椒òㄊ袌龇?、成本法和收益法三種，三種方法的優(yōu)缺點 HYPERLINK l _bookmark28 如表 所示。以收益法為例，將企業(yè)數(shù)據(jù)資產(chǎn)未來可能產(chǎn)生的收益折現(xiàn)為現(xiàn)金流進行計算。對數(shù)據(jù)資產(chǎn)價值的估算可以幫助企業(yè)更準確的掌握信息化投資收益，也是數(shù)據(jù)交易流通的前提

53、之一。表 2數(shù)據(jù)資產(chǎn)價值評估典型方法比較成本法收益法市場法優(yōu)點容易把握和操作考慮未來預期收益和貨幣時間價值因素，能真實反映價值，易被雙方接受能反映資產(chǎn)目前市場狀況，易被雙方接受缺點對價值的估算往往偏低預測難度大、偏主觀對市場環(huán)境要求高、評估難度大適用場景第三方機構(gòu)，不以交易為目的，如政務數(shù)據(jù)適合于數(shù)據(jù)買方較少進行數(shù)據(jù)價值管理的關(guān)鍵性活動包括：確定企業(yè)數(shù)據(jù)集成度水平；確定企業(yè)數(shù)據(jù)的應用場景；確定數(shù)據(jù)存儲、計算和運維的成本預算；明確數(shù)據(jù)成本和收益的具體計量指標；計算數(shù)據(jù)在不同應用場景下的成本和收益；計算企業(yè)數(shù)據(jù)資產(chǎn)的總體成本和收益；制定數(shù)據(jù)成本優(yōu)化方案和提升數(shù)據(jù)增值方案；審核、改進方案。數(shù)據(jù)共享管

54、理數(shù)據(jù)共享管理主要是指開展數(shù)據(jù)共享和交換，實現(xiàn)數(shù)據(jù)內(nèi)外部價值的一系列活動。數(shù)據(jù)共享管理包括數(shù)據(jù)內(nèi)部共享（企業(yè)內(nèi)部跨組織、部門的數(shù)據(jù)交換）、外部流通（企業(yè)之間的數(shù)據(jù)交換）、對外開放。數(shù)據(jù)內(nèi)部共享的關(guān)鍵步驟是打通企業(yè)內(nèi)部各部門間的數(shù)據(jù)共享瓶頸，建立統(tǒng)一規(guī)范的數(shù)據(jù)標準與數(shù)據(jù)共享制度，數(shù)據(jù)外部流通和對外開放可以通過數(shù)據(jù)直接交易與提供數(shù)據(jù)分析信息的兩種方式實現(xiàn)，將數(shù)據(jù)中符合共享開放層級的信息作為應用商品，以合規(guī)安全的形式完成共享交換或開放發(fā)布。目前來看，擁有海量數(shù)據(jù)是企業(yè)開展數(shù)據(jù)資產(chǎn)運營的前提條件，在數(shù)據(jù)流通環(huán)境下，數(shù)據(jù)資產(chǎn)運營流通職能的服務對象包括了數(shù)據(jù)提供者、數(shù)據(jù)消費者、數(shù)據(jù)服務者和數(shù)據(jù)運營者四類角

55、色。數(shù)據(jù)共享管理的關(guān)鍵活動包括：定義數(shù)據(jù)資產(chǎn)內(nèi)部共享和運營流通監(jiān)控指標；設(shè)計數(shù)據(jù)資產(chǎn)內(nèi)部共享和運營流通管理方案；制定數(shù)據(jù)資產(chǎn)內(nèi)部共享和運營流通管理辦法和實施流程要求；監(jiān)控數(shù)據(jù)資產(chǎn)內(nèi)部共享和運營實施；監(jiān)督落實數(shù)據(jù)內(nèi)部共享與外部流通等合規(guī)性管理要求；分析內(nèi)部共享與運營流通指標，評價運營效果并改進。重視數(shù)據(jù)資產(chǎn)管理、運營、流通可以為企業(yè)帶來未來經(jīng)濟利益， 同時這也是數(shù)據(jù)保值增值的重要手段。數(shù)據(jù)資產(chǎn)運營流通是使數(shù)據(jù)資產(chǎn)流動和發(fā)揮價值的核心，它將推動數(shù)據(jù)價值創(chuàng)造模式的不斷創(chuàng)新， 從根本上改變企業(yè)管理、社會管理和政府治理的發(fā)展趨勢。在數(shù)據(jù)資產(chǎn)管理的實踐中，各項管理職能所涉及的管理內(nèi)容之間往往存在著緊密的聯(lián)

56、系。數(shù)據(jù)資產(chǎn)管理的數(shù)據(jù)一般包括元數(shù)據(jù)、主數(shù)據(jù)和業(yè)務數(shù)據(jù)。數(shù)據(jù)模型管理為主數(shù)據(jù)、元數(shù)據(jù)和業(yè)務數(shù)據(jù)設(shè)計數(shù)據(jù)模型。數(shù)據(jù)質(zhì)量管理按照數(shù)據(jù)標準的規(guī)定稽核各部分數(shù)據(jù)內(nèi)容。元數(shù)據(jù)管理發(fā)揮承上啟下的作用，承接數(shù)據(jù)標準管理和數(shù)據(jù)模型管理的階段性成果，同時為主數(shù)據(jù)管理提供有力支撐。數(shù)據(jù)安全管理貫穿數(shù)據(jù)全生命周期，為數(shù)據(jù)資產(chǎn)管理各項管理職能提供了有力支撐。數(shù)據(jù)標準管理，顧名思義，就是定義數(shù)據(jù)模型、數(shù)據(jù)安全和數(shù)據(jù)質(zhì)量相關(guān)規(guī)范，一般以文件形式呈現(xiàn)。(二) 保障措施數(shù)據(jù)資產(chǎn)管理是體系化非常強的工作，需要充分考慮企業(yè)內(nèi)部 IT 系統(tǒng)、數(shù)據(jù)資源以及業(yè)務應用的開展現(xiàn)狀，同時也要考慮圍繞業(yè)務開展所設(shè)立的人員和組織機構(gòu)的情況，在此

57、基礎(chǔ)上設(shè)計一套有針對性的數(shù)據(jù)資產(chǎn)管理組織架構(gòu)、管理流程、管理機制和考核評估辦法，通過管理的手段明確“責權(quán)利”以保障數(shù)據(jù)資產(chǎn)管理工作有序開展。數(shù)據(jù)資產(chǎn)管理的保障措施可以從戰(zhàn)略規(guī)劃、組織架構(gòu)、制度體系、審計方式和培訓宣貫五方面進行展開，本章將進行詳細闡述。制定戰(zhàn)略規(guī)劃從管理層、領(lǐng)導層出發(fā)，從頂向下全局部署數(shù)據(jù)資產(chǎn)管理規(guī)范從而形成全面的標準規(guī)則體系和執(zhí)行調(diào)度流程。戰(zhàn)略規(guī)劃是數(shù)據(jù)資產(chǎn)管理成為企業(yè)戰(zhàn)略核心任務應用的重要部分，是數(shù)據(jù)資產(chǎn)得到一定程度內(nèi)外部應用的指導藍圖。值得一提的是，越來越多的企業(yè)單位在戰(zhàn)略規(guī)劃階段決議成立專門的數(shù)據(jù)管理部門，以連通 IT 部門和業(yè)務部門。完善組織架構(gòu)典型的組織架構(gòu)主要由數(shù)

58、據(jù)資產(chǎn)管理委員會、數(shù)據(jù)資產(chǎn)管理中心和各業(yè)務部門構(gòu)成。組織架構(gòu)劃分和角色設(shè)定如下圖所示：圖 4 數(shù)據(jù)資產(chǎn)管理保障措施組織架構(gòu)為了讓組織架構(gòu)中的各個角色相互配合，各司其職，還需要明確他們相應的職責，讓工作職責融入到日常的數(shù)據(jù)資產(chǎn)管理和使用工作中。與上述典型的數(shù)據(jù)資產(chǎn)管理架構(gòu)相適應的角色職責如下表。表 3數(shù)據(jù)資產(chǎn)管理組織架構(gòu)角色職責組織結(jié)構(gòu)角色角色描述角色主要職責人員能力要求由公 司主管負責領(lǐng)導數(shù)據(jù)資產(chǎn)管理工作；熟悉組織行為學、產(chǎn)品、財務知識，數(shù)據(jù)資產(chǎn)管領(lǐng)導 和各業(yè)決策數(shù)據(jù)資產(chǎn)管理重大工作內(nèi)具備團隊管理、商業(yè)分析與判斷、數(shù)數(shù)據(jù)決策者理委員會務部 門領(lǐng)導容和方向。在數(shù)據(jù)角色方出現(xiàn)據(jù)和戰(zhàn)略規(guī)劃能力。組成

59、問題時負責仲裁。負責牽頭制定數(shù)據(jù)資產(chǎn)管理的熟悉項目管理、關(guān)聯(lián)管理、質(zhì)量管理政策、標準、規(guī)則、流程，協(xié)調(diào)能力，具備項目規(guī)劃、跟蹤和控制、認責沖突；監(jiān)督各項數(shù)據(jù)規(guī)則風險識別與管控、敏捷項目管理、溝數(shù)據(jù) 管理中數(shù)據(jù)資產(chǎn)管和規(guī)范的約束的落實情況；負通與執(zhí)行和產(chǎn)品規(guī)劃能力。數(shù)據(jù)管理者心機 構(gòu)的平理中心責數(shù)據(jù)資產(chǎn)管理平臺中整體數(shù)臺運營人員據(jù)的管控流程制定和平臺功能系統(tǒng)支撐的實施；負責數(shù)據(jù)平臺的整體運營、組織、協(xié)調(diào)。配合制定相關(guān)數(shù)據(jù)標準、數(shù)據(jù)熟悉 ITIL 理論、業(yè)務能力、操作系統(tǒng)制度和規(guī)則；遵守和執(zhí)行數(shù)據(jù)技術(shù)、網(wǎng)絡、應用架構(gòu)，具備資源規(guī)相關(guān) 數(shù)據(jù)所標準管控相關(guān)的流程，根據(jù)數(shù)劃和成本控制、質(zhì)量管理、數(shù)據(jù)庫和

60、數(shù)據(jù)提供者有人 和權(quán)限據(jù)標準要求提供相關(guān)數(shù)據(jù)規(guī)過程/規(guī)范設(shè)計能力，同時具備一定的管理人員范。作為數(shù)據(jù)出現(xiàn)質(zhì)量問題時大數(shù)據(jù)平臺運營能力。的主要責任者。各業(yè)務/技熟悉行業(yè)系統(tǒng)和工具、組件，數(shù)據(jù)傳術(shù)部門負責數(shù)據(jù)開發(fā)，有責任執(zhí)行數(shù)輸、存儲、計算和分析，運營支持系據(jù)標準和數(shù)據(jù)質(zhì)量內(nèi)容，負責統(tǒng)，和運維效率和監(jiān)控的相關(guān)知識；數(shù)據(jù) 開發(fā)人數(shù)據(jù)開發(fā)者從技術(shù)角度解決數(shù)據(jù)質(zhì)量問具備系統(tǒng)規(guī)劃和設(shè)計、技術(shù)開發(fā)、數(shù)員題。作為數(shù)據(jù)出現(xiàn)質(zhì)量問題時據(jù)分析和建模、測試設(shè)計能力，具備的次要責任者。一定的 DevOps 與大數(shù)據(jù)平臺開發(fā)能力。數(shù)據(jù)消費者數(shù)據(jù) 使用人員，包含內(nèi)部用戶 和外部用戶作為數(shù)據(jù)資產(chǎn)管理平臺數(shù)據(jù)的使用者，負責反饋