數(shù)據(jù)資產(chǎn)管理解決方案

PAGE\*ROMANPAGE\*ROMANIII數(shù)據(jù)資產(chǎn)管理解決方案目 錄一、數(shù)據(jù)資產(chǎn)管理概述 1(一)數(shù)據(jù)資產(chǎn)管理的定義與內(nèi)涵 1數(shù)據(jù)資產(chǎn)管理的概念 1數(shù)據(jù)資產(chǎn)管理的內(nèi)涵 2數(shù)據(jù)資產(chǎn)管理的演變 3(二)數(shù)據(jù)資產(chǎn)管理的重要性 4數(shù)據(jù)價值難以有效發(fā)揮的原因 5數(shù)據(jù)資產(chǎn)管理是充分發(fā)揮數(shù)據(jù)價值的必經(jīng)之路 6(三)數(shù)據(jù)資產(chǎn)管理是各方關(guān)注的重要議題 8(四)數(shù)據(jù)資產(chǎn)管理的現(xiàn)狀與發(fā)展 10數(shù)據(jù)管理對象變化 10處理架構(gòu)更新?lián)Q代 組織職能升級變遷 12管理手段自動智能 12應(yīng)用范圍不斷擴大 13二、數(shù)據(jù)資產(chǎn)管理的主要內(nèi)容 14(一)管理職能 14數(shù)據(jù)標準管理 14數(shù)據(jù)模型管理 15元數(shù)據(jù)管理 17主數(shù)據(jù)管理 19數(shù)據(jù)質(zhì)量管理 20數(shù)據(jù)安全管理 21數(shù)據(jù)價值管理 22數(shù)據(jù)共享管理 25(二)保障措施 26制定戰(zhàn)略規(guī)劃 27完善組織架構(gòu) 27建立制度體系 29設(shè)置審計機制 31開展培訓(xùn)宣貫 31三、數(shù)據(jù)資產(chǎn)管理的實施要點 33(一)實施步驟 33第一階段：統(tǒng)籌規(guī)劃 34第二階段：管理實施 35第三階段：稽核檢查 37第四階段：資產(chǎn)運營 38(二)實踐模式 40數(shù)據(jù)資產(chǎn)管理的建設(shè)策略 40數(shù)據(jù)資產(chǎn)管理的切入方式 42(三)軟件工具 43數(shù)據(jù)標準管理工具 44數(shù)據(jù)模型管理工具 45元數(shù)據(jù)管理工具 46主數(shù)據(jù)管理工具 47數(shù)據(jù)質(zhì)量管理工具 48數(shù)據(jù)安全管理工具 49數(shù)據(jù)價值管理工具 50數(shù)據(jù)服務(wù)管理工具 51(四)成功要素 52明確責權(quán)利標，有效推進管理 52合理引進技術(shù)，提升治理能力 53著眼業(yè)務(wù)應(yīng)用，釋放數(shù)據(jù)價值 54加強數(shù)據(jù)合規(guī)，注重風險風控 54持續(xù)迭代完善，形成良性閉環(huán) 55PAGEPAGE6一、數(shù)據(jù)資產(chǎn)管理概述盤活(一)數(shù)據(jù)資產(chǎn)管理的定義與內(nèi)涵數(shù)據(jù)資產(chǎn)管理的概念（Data數(shù)據(jù)資產(chǎn)管理（DAM，DataAssetManagement）是指規(guī)劃、控制數(shù)據(jù)資產(chǎn)管理的內(nèi)涵數(shù)據(jù)資產(chǎn)管理在大數(shù)據(jù)體系中的定位如圖1所示，它位于應(yīng)用一是圖1 數(shù)據(jù)資產(chǎn)管理在大數(shù)據(jù)體系中的定位數(shù)據(jù)資產(chǎn)管理的演變數(shù)據(jù)管理的概念是伴隨上世紀八十年代數(shù)據(jù)隨機存儲技術(shù)和數(shù)的。國際數(shù)據(jù)管理協(xié)會（DAMADataManagementAssociationInternational）2009DMBOK1.0①中，DAMA102015年，DAMA在DBMOK2.0知識領(lǐng)域?qū)⑵鋽U展為11個管理①TheDAMAGuidetotheDataManagementBodyofKnowledge（，Bsnssteigce一是二是三是(二)數(shù)據(jù)資產(chǎn)管理的重要性數(shù)據(jù)價值難以有效發(fā)揮的原因一是缺乏統(tǒng)一數(shù)據(jù)視圖二是數(shù)據(jù)孤島普遍存在三是數(shù)據(jù)質(zhì)量低下LarryEnglish25%③四是缺乏安全的數(shù)據(jù)環(huán)境(BreachLevelIndex)監(jiān)測，②/articles/data-silos-are-the-greatest-stumbling-block-to-an③/podcast/Data-quality-trends-with-expert-Larry-English2013130五是缺乏數(shù)據(jù)價值管理體系的最優(yōu)路徑。數(shù)據(jù)資產(chǎn)管理是充分發(fā)揮數(shù)據(jù)價值的必經(jīng)之路二是提升數(shù)據(jù)質(zhì)量。早在1957年的時候，計算機剛剛發(fā)明的時④https:///PAGEPAGE58候，大家就意識到數(shù)據(jù)對于計算機決策的影響，提出GarbageInGarbageOut2001（DataQualityc08四是提高數(shù)據(jù)獲取效率。Gartner統(tǒng)計，數(shù)據(jù)分析人員或數(shù)據(jù)科70%到80%五是保障數(shù)據(jù)安全合規(guī)。保障安全是數(shù)據(jù)資產(chǎn)管理的底線，數(shù)據(jù)⑤/wiki/Garbage_in,_garbage_out(三)數(shù)據(jù)資產(chǎn)管理是各方關(guān)注的重要議題20177行業(yè)層面，金融行業(yè)高度重視數(shù)據(jù)資產(chǎn)管理工作。2016年12月3020185月，銀保監(jiān)會（原銀監(jiān)會）2018會針對非銀行支付機構(gòu)數(shù)據(jù)資產(chǎn)管理狀況開展了調(diào)研。醫(yī)療行業(yè)，20189（20194（通信研究院發(fā)布了《中國工業(yè)企業(yè)數(shù)據(jù)資產(chǎn)管理調(diào)查報告（8201761定：“。2018525(GDPR)正式(四)數(shù)據(jù)資產(chǎn)管理的現(xiàn)狀與發(fā)展圖2 大數(shù)據(jù)背景下的數(shù)據(jù)資產(chǎn)管理特點特征數(shù)據(jù)管理對象變化在數(shù)據(jù)量方面GBTBPB級、EB在數(shù)據(jù)格式種類方面在數(shù)據(jù)來源方面處理架構(gòu)更新?lián)Q代Gartner2018HadoopSpark計算存儲混搭ETLETL結(jié)架構(gòu)體系是⑥中抽⑥數(shù)據(jù)湖（Dtaaebob取想要的原始數(shù)據(jù)進行建模分析。組織職能升級變遷ITIT現(xiàn)了越來越多的企業(yè)設(shè)置專門的“數(shù)據(jù)管理”職能部門或首席數(shù)據(jù)官（CDO，ChiefDataOfficer）崗位。在這種變遷背景下，數(shù)據(jù)管理的組織架構(gòu)也面臨革新的需求。管理手段自動智能依靠“手工人力”的電子表格數(shù)據(jù)治理模式即將被“自動智能”的專業(yè)工具平臺工具”析和機器學(xué)習等任務(wù)的轉(zhuǎn)換數(shù)據(jù)。數(shù)據(jù)湖可以包括來自關(guān)系數(shù)據(jù)庫（行和列）數(shù)據(jù)CSVXM，JSO，非結(jié)構(gòu)化數(shù)據(jù)（電子郵件，文檔，PDF）（圖像，音頻，視頻。來源：維基百科應(yīng)用范圍不斷擴大數(shù)據(jù)資產(chǎn)管理的使用不僅僅局限于擁有海量數(shù)據(jù)或強大數(shù)據(jù)處理能力的機構(gòu)，任何一個機構(gòu)都可以成為數(shù)據(jù)資產(chǎn)化管理的實踐者。二、數(shù)據(jù)資產(chǎn)管理的主要內(nèi)容如圖385圖3 數(shù)據(jù)資產(chǎn)管理體系架構(gòu)(一)管理職能8數(shù)據(jù)標準管理數(shù)據(jù)標準是指保障數(shù)據(jù)的內(nèi)外部使用和交換的一致性和準確性的規(guī)范性約束，通常可分為基礎(chǔ)類數(shù)據(jù)標準和指標類數(shù)據(jù)標準?；A(chǔ)類數(shù)據(jù)標準指標類數(shù)據(jù)標準（3（和相關(guān)公共代碼和編碼（如國標、行標等數(shù)據(jù)標準管理動包括：數(shù)據(jù)模型管理數(shù)據(jù)模型是現(xiàn)實世界數(shù)據(jù)特征的抽象，用于描述一組數(shù)據(jù)的概念其ER述現(xiàn)實世界的概念化結(jié)構(gòu)，與具體的數(shù)據(jù)庫管理系統(tǒng)（DBMS，DatabaseManagementSystem）無關(guān)；DBMSDBMS數(shù)據(jù)模型管理模型和數(shù)據(jù)標準詞典的同步、數(shù)據(jù)模型審核發(fā)布、數(shù)據(jù)模型差異對比、版本管理等。數(shù)據(jù)模型管理的關(guān)鍵活動包括：元數(shù)據(jù)管理（encaletdt（uissMeadt管理元數(shù)據(jù)（MngeentMtdaa元數(shù)據(jù)管理（MetaDataManagement）向前看我”向后看我”看歷史”：過去的我看本體我向上看我向下看我元數(shù)據(jù)分析（血緣分析、影響分析、數(shù)據(jù)地圖等主數(shù)據(jù)管理主數(shù)據(jù)（MasterData）是指用來描述企業(yè)核心業(yè)務(wù)實體的數(shù)據(jù)，固定COA、BOM等。（MDMData數(shù)據(jù)質(zhì)量管理數(shù)據(jù)質(zhì)量（數(shù)據(jù)是否按照要求的規(guī)則存儲、一致性（（數(shù)據(jù)質(zhì)量管理括：數(shù)據(jù)安全管理數(shù)據(jù)安全管理是指對數(shù)據(jù)設(shè)定安全等級，按照相應(yīng)國家/組織相數(shù)據(jù)安全管理的關(guān)鍵活動包括：。數(shù)據(jù)價值管理數(shù)據(jù)價值管理數(shù)據(jù)成本（IT（。數(shù)據(jù)成本管理從度量成本的維度出發(fā)，通過（收益（收益管理ROI表1 數(shù)據(jù)成本和價值評估的維度計量維度各維度描述數(shù)據(jù)成本評估采集、存儲和計算成本評估IT等運維成本評估主要包括計量業(yè)務(wù)操作費、技術(shù)操作費等數(shù)據(jù)價值評估活性評估活性指標主要包括數(shù)據(jù)連接度、貢獻度等，數(shù)據(jù)的高連接度和貢獻度，意味著高活性和高數(shù)據(jù)價值。數(shù)據(jù)質(zhì)量評估數(shù)據(jù)質(zhì)量評估指標主要包括數(shù)據(jù)一致性、準確性、完整性、及時性等，高數(shù)據(jù)質(zhì)量意味著搞數(shù)據(jù)價值數(shù)據(jù)稀缺性評估數(shù)據(jù)稀缺性描述數(shù)據(jù)的供給數(shù)量及供給方數(shù)量的多寡，通過與最大供給方數(shù)量或數(shù)據(jù)供給豐富程度相比較，判斷數(shù)據(jù)稀缺性，高稀缺性數(shù)據(jù)意味著高數(shù)據(jù)價值數(shù)據(jù)時效性評估數(shù)據(jù)時效性描述數(shù)據(jù)的時間特性對應(yīng)用的滿足程度，較高的滿足程度意味著高的數(shù)據(jù)時效性，即高數(shù)據(jù)價值數(shù)據(jù)應(yīng)用場景經(jīng)濟性評估數(shù)據(jù)應(yīng)用場景經(jīng)濟型描述在具體場景下數(shù)據(jù)集的經(jīng)濟通過比較某場景下的經(jīng)濟價值與所有場景中的最大經(jīng)性意味著高數(shù)據(jù)價值。當前，對于數(shù)據(jù)資產(chǎn)評估的研究還處于早期階段，評估方法手段如表表2 數(shù)據(jù)資產(chǎn)價值評估典型方法比較成本法收益法市場法優(yōu)點容易把握和操作考慮未來預(yù)期收益和方接受能反映資產(chǎn)目前市場狀況，易被雙方接受缺點對價值的估算往往偏低預(yù)測難度大、偏主觀對市場環(huán)境要求高、評估難度大適用場景第三方機構(gòu)，不以交易為目的，如政務(wù)數(shù)據(jù)適合于數(shù)據(jù)買方較少進行數(shù)據(jù)價值管理的關(guān)鍵性活動包括：數(shù)據(jù)共享管理數(shù)據(jù)共享管理（數(shù)據(jù)共享管理的關(guān)鍵活動包括：求；進。(二)保障措施責權(quán)利制定戰(zhàn)略規(guī)劃IT完善組織架構(gòu)圖4數(shù)據(jù)資產(chǎn)管理保障措施組織架構(gòu)中。與上述典型的數(shù)據(jù)資產(chǎn)管理架構(gòu)相適應(yīng)的角色職責如下表。表3 數(shù)據(jù)資產(chǎn)管理組織架構(gòu)角色職責組織結(jié)構(gòu)角色角色描述角色主要職責人員能力要求由公司主管負責領(lǐng)導(dǎo)數(shù)據(jù)資產(chǎn)管理工作；熟悉組織行為學(xué)、產(chǎn)品、財務(wù)知識，數(shù)據(jù)資產(chǎn)管領(lǐng)導(dǎo)和各業(yè)決策數(shù)據(jù)資產(chǎn)管理重大工作內(nèi)具備團隊管理、商業(yè)分析與判斷、數(shù)數(shù)據(jù)決策者理委員會務(wù)部門領(lǐng)導(dǎo)容和方向。在數(shù)據(jù)角色方出現(xiàn)據(jù)和戰(zhàn)略規(guī)劃能力。組成問題時負責仲裁。負責牽頭制定數(shù)據(jù)資產(chǎn)管理的熟悉項目管理、關(guān)聯(lián)管理、質(zhì)量管理能力，具備項目規(guī)劃、跟蹤和控制、認責沖突；監(jiān)督各項數(shù)據(jù)規(guī)則風險識別與管控、敏捷項目管理、溝數(shù)據(jù)管理中數(shù)據(jù)資產(chǎn)管和規(guī)范的約束的落實情況；負通與執(zhí)行和產(chǎn)品規(guī)劃能力。數(shù)據(jù)管理者心機構(gòu)的平理中心責數(shù)據(jù)資產(chǎn)管理平臺中整體數(shù)臺運營人員據(jù)的管控流程制定和平臺功能系統(tǒng)支撐的實施；負責數(shù)據(jù)平臺的整體運營、組織、協(xié)調(diào)。配合制定相關(guān)數(shù)據(jù)標準、數(shù)據(jù)ITIL制度和規(guī)則；遵守和執(zhí)行數(shù)據(jù)技術(shù)、網(wǎng)絡(luò)、應(yīng)用架構(gòu)，具備資源規(guī)相關(guān)數(shù)據(jù)所標準管控相關(guān)的流程，根據(jù)數(shù)劃和成本控制、質(zhì)量管理、數(shù)據(jù)庫和數(shù)據(jù)提供者有人和權(quán)限據(jù)標準要求提供相關(guān)數(shù)據(jù)規(guī)過程/規(guī)范設(shè)計能力，同時具備一定的管理人員范。作為數(shù)據(jù)出現(xiàn)質(zhì)量問題時大數(shù)據(jù)平臺運營能力。的主要責任者。各業(yè)務(wù)/技熟悉行業(yè)系統(tǒng)和工具、組件，數(shù)據(jù)傳術(shù)部門負責數(shù)據(jù)開發(fā)，有責任執(zhí)行數(shù)輸、存儲、計算和分析，運營支持系據(jù)標準和數(shù)據(jù)質(zhì)量內(nèi)容，負責統(tǒng)，和運維效率和監(jiān)控的相關(guān)知識；數(shù)據(jù)開發(fā)人數(shù)據(jù)開發(fā)者從技術(shù)角度解決數(shù)據(jù)質(zhì)量問具備系統(tǒng)規(guī)劃和設(shè)計、技術(shù)開發(fā)、數(shù)員題。作為數(shù)據(jù)出現(xiàn)質(zhì)量問題時據(jù)分析和建模、測試設(shè)計能力，具備的次要責任者。一定的DevOps與大數(shù)據(jù)平臺開發(fā)能力。數(shù)據(jù)消費者數(shù)據(jù)使用人用戶和外部用戶作為數(shù)據(jù)資產(chǎn)管理平臺數(shù)據(jù)的為數(shù)據(jù)資產(chǎn)管理平臺數(shù)據(jù)閉環(huán)流程的發(fā)起人。熟悉數(shù)據(jù)處理、業(yè)務(wù)能力、技術(shù)知識(關(guān)聯(lián)知識)，具備數(shù)據(jù)規(guī)劃、產(chǎn)品應(yīng)程如圖5圖5數(shù)據(jù)認責機制建立制度體系數(shù)據(jù)資產(chǎn)管理規(guī)范包括元數(shù)據(jù)管理規(guī)范、生命周期管理規(guī)范、數(shù)據(jù)質(zhì)量管理規(guī)范以及數(shù)據(jù)安全管理規(guī)范等對應(yīng)管理職能的具體規(guī)范。圖6一種典型的制度體系架構(gòu)舉例。圖6一種典型的制度體系架構(gòu)設(shè)置審計機制開展培訓(xùn)宣貫規(guī)范化。等。三、數(shù)據(jù)資產(chǎn)管理的實施要點完整的企業(yè)或機構(gòu)大數(shù)據(jù)能力的構(gòu)建步驟一般是“建立組織架構(gòu)→應(yīng)用需求梳理→數(shù)據(jù)盤點梳理→引進平臺技術(shù)→匯聚多源數(shù)據(jù)治理數(shù)據(jù)數(shù)據(jù)運營(一)實施步驟數(shù)據(jù)資產(chǎn)管理可參考按照統(tǒng)籌規(guī)劃→管理實施→稽核檢查→資產(chǎn)運營”四個階段的方法策略執(zhí)行，每個階段對應(yīng)的管理職能如圖圖7數(shù)據(jù)資產(chǎn)管理實施步驟第一階段：統(tǒng)籌規(guī)劃第一步第二步第三步、第三步的主要交付物包括：《數(shù)據(jù)資產(chǎn)標準管理辦法》。第二階段：管理實施實首先其次再次平民化（。第二階段的工作目標主要是為企業(yè)打造核心的管理數(shù)據(jù)資產(chǎn)的（。第三階段：稽核檢查稽核檢查階段是保障數(shù)據(jù)資產(chǎn)管理實施階段涉及各管理職能有這個階段需要抓好三個“常態(tài)化”。首先要提升數(shù)段解決”的理念。盡可能從數(shù)據(jù)源頭提升數(shù)據(jù)質(zhì)量。其次價值，為企業(yè)帶來經(jīng)濟效益。20195》公開征求意見的通知。企業(yè)應(yīng)通過建立對第四階段：資產(chǎn)運營資產(chǎn)管理實現(xiàn)價值的最終階段，該階段包括開展數(shù)據(jù)資產(chǎn)價值評估、數(shù)據(jù)資產(chǎn)內(nèi)部共享和運營流通等。數(shù)據(jù)資產(chǎn)價值評估能夠以合理的方式管理內(nèi)部數(shù)據(jù)和提供對外計量應(yīng)當考慮市場參與者通過最佳使用資產(chǎn)或?qū)⑵涑鍪劢o最佳使用數(shù)據(jù)資產(chǎn)內(nèi)部共享和運營流通需要加強管理運營手段和方式方(二)實踐模式數(shù)據(jù)資產(chǎn)管理在“統(tǒng)籌規(guī)劃→管理實施→稽核檢查→資產(chǎn)運營”數(shù)據(jù)資產(chǎn)管理的建設(shè)策略企業(yè)數(shù)據(jù)資產(chǎn)管理的建設(shè)策略主要包括自上而下和自下而上兩見表4。表4 數(shù)據(jù)資產(chǎn)管理的兩種建設(shè)策略建設(shè)策略建設(shè)要點優(yōu)缺點自上而下模式時間和投入成本很大，見效慢。由下而上模式需求驅(qū)動，快速行動，見效快；自上而下建設(shè)策略調(diào)研數(shù)據(jù)資產(chǎn)分布現(xiàn)狀：數(shù)據(jù)資產(chǎn)現(xiàn)狀調(diào)研在數(shù)據(jù)評估數(shù)據(jù)資產(chǎn)管理水平：通過自評估或者專業(yè)機構(gòu)進行數(shù)據(jù)資產(chǎn)管理評估，將幫助企業(yè)在自上而下實施之前了解當前自身數(shù)據(jù)資產(chǎn)管理的現(xiàn)狀，明確存在的問題和潛在的建設(shè)數(shù)據(jù)資產(chǎn)管理體系：數(shù)據(jù)資產(chǎn)管理工作是一項數(shù)據(jù)資產(chǎn)管理自下而上建設(shè)策略的顯著特點是問題導(dǎo)向、系統(tǒng)建設(shè)先行、快速見效”產(chǎn)管理平臺，實現(xiàn)問題的逐個擊破，并逐漸探索出全面的解決方案。數(shù)據(jù)資產(chǎn)管理的切入方式系統(tǒng)入手的常用建設(shè)模式包括企業(yè)數(shù)據(jù)模型建設(shè)模式以及主數(shù)據(jù)建表5。表5 數(shù)據(jù)資產(chǎn)管理的切入方式切入方式細分方式切入要點生產(chǎn)系統(tǒng)入手大型生產(chǎn)系統(tǒng)開發(fā)建設(shè)模式和業(yè)務(wù)領(lǐng)域數(shù)據(jù)的企業(yè)級標準和質(zhì)量管控。企業(yè)數(shù)據(jù)模型建設(shè)模式的數(shù)據(jù)錄入，保證數(shù)據(jù)質(zhì)量。主數(shù)據(jù)建設(shè)模式從解決主數(shù)據(jù)的質(zhì)量和業(yè)務(wù)協(xié)同入手，推動生產(chǎn)環(huán)節(jié)在客戶、物料、組織機構(gòu)、產(chǎn)品、統(tǒng)一編碼。數(shù)據(jù)系統(tǒng)入手統(tǒng)一數(shù)據(jù)平臺模式量