大數(shù)據(jù)平臺數(shù)據(jù)治理與建設(shè)方案附下載

1、大數(shù)據(jù)平臺數(shù)據(jù)治理與建設(shè)方案第一部分?jǐn)?shù)據(jù)治理概述數(shù)據(jù)治理意義、作用和價值意義是構(gòu)建完善、共享、統(tǒng)一管理數(shù)據(jù)環(huán)境的基本保障和重要組成部分是把數(shù)據(jù)作為資產(chǎn)來管理的有效手段作用確定了一系列崗位角色和相應(yīng)的責(zé)任及管理流程保證了業(yè)務(wù)數(shù)據(jù)在采集、集中、轉(zhuǎn)換、存儲、應(yīng)用整個過程中的完整性、準(zhǔn)確性、一致性和時效性價值企業(yè)進(jìn)行數(shù)據(jù)治理的最大驅(qū)動力來自數(shù)據(jù)質(zhì)量，通過提高數(shù)據(jù)質(zhì)量實現(xiàn)更多的業(yè)務(wù)價值將實現(xiàn)業(yè)務(wù)目標(biāo)作為數(shù)據(jù)管理和服務(wù)的核心驅(qū)動力，優(yōu)化數(shù)據(jù)架構(gòu)，提升數(shù)據(jù)倉庫/信息化管理系統(tǒng)建設(shè)，支持管理能力的提高、精細(xì)化和決策的科學(xué)性一、應(yīng)用（需求）驅(qū)動主導(dǎo)數(shù)據(jù)平臺的實現(xiàn)，加強(qiáng)業(yè)務(wù)的關(guān)注和參與二、初期能夠快速見效并體現(xiàn)建

2、設(shè)價值，不盲目投入三、借鑒同業(yè)的成功經(jīng)驗和成果，選擇成熟技術(shù)架構(gòu)和解決方案四、重視內(nèi)部人員培養(yǎng)，建設(shè)配套運營制度和管理體系應(yīng)用是展現(xiàn)數(shù)據(jù)總線建設(shè)效果的門戶，因此需要建設(shè)業(yè)務(wù)人員最緊迫和最關(guān)注的需求和應(yīng)用，讓業(yè)務(wù)部門最快參與數(shù)據(jù)總線的建設(shè)當(dāng)中。實施周期不易過長，規(guī)模不易過大，能夠快速的見到數(shù)據(jù)總線帶來的效果和價值。盡量參考同行業(yè)、同規(guī)模、同類型企業(yè)行的建設(shè)經(jīng)驗，適當(dāng)創(chuàng)新。前期讓公司內(nèi)IT人員盡量更多、更深入的參與到數(shù)據(jù)總線的建設(shè)中，后期角色以管理為主，盡量與合作伙伴共同建設(shè)二期以上。配套的管理規(guī)范、技術(shù)規(guī)范、運營體系。數(shù)據(jù)平臺建設(shè)原則數(shù)據(jù)戰(zhàn)略數(shù)據(jù)應(yīng)用與服務(wù)數(shù)據(jù)管理保障機(jī)制促進(jìn)支撐實現(xiàn)支撐數(shù)據(jù)戰(zhàn)略

3、與規(guī)劃數(shù)據(jù)組織與職責(zé)數(shù)據(jù)制度與管理流程數(shù)據(jù)服務(wù)管理數(shù)據(jù)需求管理數(shù)據(jù)服務(wù)應(yīng)用系統(tǒng)建設(shè)數(shù)據(jù)架構(gòu)與模型管理數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)質(zhì)量管理元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)保留與歸檔管理數(shù)據(jù)安全管理內(nèi)容管理數(shù)據(jù)治理框架數(shù)據(jù)調(diào)度與處理大數(shù)據(jù)平臺數(shù)據(jù)結(jié)構(gòu)化轉(zhuǎn)換大數(shù)據(jù)分析計算分布式數(shù)據(jù)庫分布式文件系統(tǒng)數(shù)據(jù)生命周期管理數(shù)據(jù)平臺數(shù)據(jù)傳輸數(shù)據(jù)服務(wù)數(shù)據(jù)集市數(shù)據(jù)質(zhì)量檢核元數(shù)據(jù)管理數(shù)據(jù)管理平臺數(shù)據(jù)應(yīng)用統(tǒng)計報表基礎(chǔ)數(shù)據(jù)平臺貼源層整合層匯總層數(shù)據(jù)切分?jǐn)?shù)據(jù)源業(yè)務(wù)系統(tǒng)物聯(lián)網(wǎng)互聯(lián)網(wǎng)數(shù)據(jù)交換平臺內(nèi)部數(shù)據(jù)外部數(shù)據(jù)其他系統(tǒng)數(shù)據(jù)接口數(shù)據(jù)架構(gòu)數(shù)據(jù)挖掘高管駕駛艙第二部分某行數(shù)據(jù)現(xiàn)狀及問題數(shù)據(jù)應(yīng)用現(xiàn)狀分析-總體情況行領(lǐng)導(dǎo)綜合業(yè)務(wù)系統(tǒng)信貸管理國際業(yè)務(wù)系統(tǒng)債券管

4、理系統(tǒng)數(shù)據(jù)交換平臺綜合報表平臺財務(wù)會計部信貸管理部國際業(yè)務(wù)部資金計劃部.客戶信息.貸款余額客戶信息.貸款余額.客戶信息客戶信息.客戶信息.業(yè)務(wù)職能不清晰或相互重疊，觀察數(shù)據(jù)視角不盡相同，缺少數(shù)據(jù)標(biāo)準(zhǔn)與業(yè)務(wù)統(tǒng)一定義，語軌不一致IT架構(gòu)中中都是以部門級應(yīng)用為主（如計財、資金計劃部等），缺乏從大的管理職能（財務(wù)、風(fēng)險、運營等）綜合方面的數(shù)據(jù)整合、數(shù)據(jù)標(biāo)準(zhǔn)和統(tǒng)一業(yè)務(wù)定義業(yè)務(wù)人員X?567數(shù)據(jù)應(yīng)用現(xiàn)狀分析-數(shù)據(jù)架構(gòu)方面由于全行的數(shù)據(jù)散落在各個業(yè)務(wù)系統(tǒng)中，沒有進(jìn)行有效整合，形成豎井式架構(gòu)，造成多個信息孤島，整體架構(gòu)缺少一個穩(wěn)定的、抗源變化的保存最細(xì)粒度歷史數(shù)據(jù)的數(shù)據(jù)層。無法支撐未來共享性應(yīng)用。集市層客戶風(fēng)

5、險客戶一部中間業(yè)務(wù)匯總數(shù)據(jù)層主題層報表應(yīng)用共用主題數(shù)據(jù)客戶風(fēng)險報表客戶一部報表中間業(yè)務(wù)報表支付報表支付業(yè)務(wù)ODS層DEP層BDS層其它報表業(yè)務(wù)表現(xiàn)信息孤島數(shù)據(jù)冗余共享性差歷史數(shù)據(jù)缺失問題數(shù)據(jù)分散，難以管理沒有一個穩(wěn)定的，抗源變化的數(shù)據(jù)層源系統(tǒng)綜合業(yè)務(wù)信貸管理國際結(jié)算債券核算豎井式架構(gòu)，造成信息孤島缺少一個穩(wěn)定的、抗源變化的數(shù)據(jù)層客戶管理績效考核沒有進(jìn)行整合，無法共享，不能支持如客戶管理等共享性應(yīng)用數(shù)據(jù)應(yīng)用現(xiàn)狀分析-數(shù)據(jù)應(yīng)用難題業(yè)務(wù)表現(xiàn)各系統(tǒng)存在冗余數(shù)據(jù)各系統(tǒng)存在業(yè)務(wù)含義一致，名稱定義不一致的屬性各系統(tǒng)存在含義不一致，名稱定義一致的情況業(yè)務(wù)代碼定義混亂問題重復(fù)投入數(shù)據(jù)不一致、不準(zhǔn)確難以利用和管理

6、各系統(tǒng)數(shù)據(jù)難以共享缺少統(tǒng)一的基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)核心貸款分戶賬表貸款主檔代碼貸款余額。五級分類標(biāo)志計息方式信貸管理借據(jù)表貸款賬號貸款余額。5級分類標(biāo)志借據(jù)計息周期業(yè)務(wù)含義一致，名稱定義不一致數(shù)據(jù)冗余相同業(yè)務(wù)代碼定義不一致核心五級分類代碼信貸管理五級分類代碼1 正常01 正常2 關(guān)注02 關(guān)注3 次級（不良）03 次級4 可疑（不良）04 可疑5 損失（不良）05 損失數(shù)據(jù)應(yīng)用現(xiàn)狀分析-數(shù)據(jù)應(yīng)用難題業(yè)務(wù)表現(xiàn)各集市系統(tǒng)指標(biāo)存在重復(fù)各集市系統(tǒng)在保有存量的同時，不斷產(chǎn)生新的指標(biāo)（增量）集市指標(biāo)派生無法實現(xiàn)指標(biāo)邏輯視圖（指標(biāo)分類）不一致問題重復(fù)投入數(shù)據(jù)不一致指標(biāo)設(shè)計、口徑不一致指標(biāo)難以共享客戶風(fēng)險集市客戶一部集

7、市資金計劃部借據(jù)號期末余額。借據(jù)編號期末貸款余額總資產(chǎn)用戶我想看本期貸款余額，看哪個呢？主營業(yè)務(wù)收入負(fù)債總額。我想看客戶經(jīng)營情況信息，有哪些呢？用戶活期存款指標(biāo)數(shù)據(jù)怎么不一致呢？缺少統(tǒng)一的應(yīng)用分析標(biāo)準(zhǔn)數(shù)據(jù)應(yīng)用現(xiàn)狀分析-數(shù)據(jù)質(zhì)量方面沒有歸納并總結(jié)數(shù)據(jù)質(zhì)量問題，缺少反饋機(jī)制,導(dǎo)致長期存在各類數(shù)據(jù)質(zhì)量問題。業(yè)務(wù)表現(xiàn)指標(biāo)難以共享數(shù)據(jù)不一致、不準(zhǔn)確問題部分關(guān)鍵業(yè)務(wù)數(shù)據(jù)缺失源系統(tǒng)校驗關(guān)系缺失及業(yè)務(wù)人員操作隨意13由于信貸管理系統(tǒng)業(yè)務(wù)人員沒有填寫或填寫錯誤借據(jù)的五級分類信息，導(dǎo)致報表數(shù)據(jù)不準(zhǔn)確，需要手工補(bǔ)錄修改不同系統(tǒng)相同客戶號對應(yīng)的客戶簡稱不一致客戶號客戶簡稱75682839綜合廠97326762國鑫資產(chǎn)

8、客戶號客戶簡稱75682839糧食局糧油綜合97326762乳山市國鑫資產(chǎn)數(shù)據(jù)應(yīng)用現(xiàn)狀分析-總結(jié)隨著業(yè)務(wù)的不斷發(fā)展和信息化的不斷深入，需建設(shè)的業(yè)務(wù)系統(tǒng)越來越多，隨著業(yè)務(wù)系統(tǒng)的數(shù)據(jù)種類不斷豐富完善，數(shù)據(jù)量的不斷增大，如果不采取有效手段解決數(shù)據(jù)架構(gòu)、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量問題，隨著信息化建設(shè)的深入，這些問題將像雪球一樣越滾越大，越積越多。綜合報表平臺適應(yīng)性升級改造階段（問題增加為451個）綜合報表平臺建設(shè)階段（問題339個）第三部分?jǐn)?shù)據(jù)治理階段目標(biāo)數(shù)據(jù)平臺項目建設(shè)目標(biāo)1、發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題，推動數(shù)據(jù)治理工作的開展，建立數(shù)據(jù)質(zhì)量檢核系統(tǒng)對源系統(tǒng)進(jìn)行數(shù)據(jù)質(zhì)量檢核，發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題并統(tǒng)計影響到的報表對數(shù)據(jù)質(zhì)量

9、問題進(jìn)行歸類總結(jié)，分析成因和改進(jìn)建議建設(shè)數(shù)據(jù)質(zhì)量檢核系統(tǒng)2、分析、梳理業(yè)務(wù)系統(tǒng)，推動數(shù)據(jù)標(biāo)準(zhǔn)的建立，統(tǒng)一全行口徑建立基礎(chǔ)標(biāo)準(zhǔn)和指標(biāo)標(biāo)準(zhǔn)框架確定標(biāo)準(zhǔn)化范圍，對重要屬性進(jìn)行標(biāo)準(zhǔn)化3、建立數(shù)據(jù)倉庫模型框架，優(yōu)化我行數(shù)據(jù)架構(gòu)，建設(shè)穩(wěn)定、可擴(kuò)展的數(shù)據(jù)倉庫引進(jìn)業(yè)內(nèi)具有先進(jìn)水平的金融數(shù)據(jù)模型，進(jìn)行客戶化改造后，建成符合某行特點的數(shù)據(jù)倉庫模型框架覆蓋某行主要業(yè)務(wù)系統(tǒng)數(shù)據(jù)，以便快速高效的為應(yīng)用系統(tǒng)提供數(shù)據(jù)存儲歷史數(shù)據(jù)，解決新報表上線才有數(shù)的問題。匯總層建設(shè)（共性加工）數(shù)據(jù)平臺邏輯架構(gòu)數(shù)據(jù)調(diào)度與處理元數(shù)據(jù)管理數(shù)據(jù)傳輸數(shù)據(jù)生命周期管理非現(xiàn)場報表財會報表客戶風(fēng)險報表.機(jī)構(gòu)客戶賬戶.非現(xiàn)場監(jiān)管集市財會報表集市風(fēng)險報表集

10、市高管駕駛艙集市.源數(shù)據(jù)數(shù)據(jù)倉庫數(shù)據(jù)應(yīng)用貼源層整合層匯總層集市層數(shù)據(jù)管理系統(tǒng)綜合業(yè)務(wù)系統(tǒng)CM2006國際結(jié)算系統(tǒng)債券管理系統(tǒng)ETLETL數(shù)據(jù)切分?jǐn)?shù)據(jù)質(zhì)量檢查系統(tǒng)高管駕駛艙當(dāng)事人協(xié)議事件當(dāng)事人資產(chǎn).外匯資金系統(tǒng)報文清算系統(tǒng)報價引擎系統(tǒng)整合層作業(yè)調(diào)度作業(yè)調(diào)度作業(yè)調(diào)度ETLCBSCM2006EEBONDPEFESMCS數(shù)據(jù)平臺部署架構(gòu)新購置Web應(yīng)用負(fù)載均衡器三層交換機(jī)狀態(tài)線SAN FC SwitchFC 陣列SAN FC Switch已有應(yīng)用服務(wù)器（2臺）（188.1.6.107/188.1.6.108） ireport v4.3 BIreport v3.2 客戶一部報表應(yīng)用 中間業(yè)務(wù)報表應(yīng)用 心

11、跳心跳三層交換機(jī)新購置Web應(yīng)用負(fù)載均衡器新購置調(diào)度服務(wù)器（1臺） Red Hat Enterprise Linux server release 5.5MOIA4.4 server調(diào)度平臺主節(jié)點心跳心跳 省行數(shù)據(jù)庫服務(wù)器數(shù)據(jù)加載程序（完善后）數(shù)據(jù)傳輸平臺配置庫省行1：總行：省行應(yīng)用服務(wù)器ireport v4.3數(shù)據(jù)傳輸平臺應(yīng)用已有數(shù)據(jù)庫服務(wù)器（2臺）（188.1.6.105/188.1.6.106）集市物理模型數(shù)據(jù)傳輸平臺配置庫農(nóng)發(fā)行內(nèi)網(wǎng)網(wǎng)絡(luò)心跳新購置明細(xì)報表應(yīng)用服務(wù)器（6臺）Weblogic 11gireport v4.3BIreport v3.2新建客戶風(fēng)險報表應(yīng)用原有應(yīng)用節(jié)點擴(kuò)充數(shù)據(jù)切

12、分應(yīng)用（完善后）元數(shù)據(jù)管理應(yīng)用省行230已有ETL服務(wù)器（2臺）（188.1.6.109/188.1.6.110）MOIA4.4 agentDataStage 8.5 EE（內(nèi)置Websphere）調(diào)度平臺代理節(jié)點新購置數(shù)據(jù)傳輸服務(wù)器(2臺)Red Hat Enterprise Linux 5 (Advanced)Weblogic 11gIBM MQ 7.0.1數(shù)據(jù)傳輸平臺應(yīng)用新購置明細(xì)報表數(shù)據(jù)庫服務(wù)器（2臺）Oracle11g客戶風(fēng)險應(yīng)用數(shù)據(jù)庫元數(shù)據(jù)配置庫已有文件服務(wù)器（2臺）（188.1.6.111/188.1.6.112）Oracle10gDS8.5資料庫省行文件服務(wù)器IBM MQ 7.

13、0.1三層交換機(jī)三層交換機(jī)心跳心跳心跳新購置數(shù)據(jù)平臺ETL服務(wù)器(8臺)Red Hat Enterprise Linux 5 (Advanced)MOIA4.4 agentDataStage 8.5 EE（內(nèi)置Websphere）調(diào)度平臺代理節(jié)點新購置數(shù)據(jù)平臺數(shù)據(jù)庫服務(wù)器（2臺）Oracle11g數(shù)據(jù)整合層、匯總層目標(biāo)建設(shè)方法-發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題建設(shè)內(nèi)容分析源系統(tǒng)表數(shù)據(jù)，從及時性、完整性、準(zhǔn)確性、有效性、一致性方面對源系統(tǒng)數(shù)據(jù)進(jìn)行數(shù)據(jù)校驗，發(fā)現(xiàn)并記錄數(shù)據(jù)質(zhì)量問題，生成數(shù)據(jù)質(zhì)量問題報告建設(shè)數(shù)據(jù)質(zhì)量檢核系統(tǒng)，對源系統(tǒng)基礎(chǔ)業(yè)務(wù)數(shù)據(jù)的進(jìn)行全面的數(shù)據(jù)質(zhì)量檢查，并實現(xiàn)重要業(yè)務(wù)數(shù)據(jù)質(zhì)量的周期性動態(tài)檢查，對發(fā)現(xiàn)

14、的數(shù)據(jù)質(zhì)量問題生成數(shù)據(jù)質(zhì)量報告，反饋給業(yè)務(wù)部門目標(biāo)建設(shè)方法-發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題源系統(tǒng)分析階段全面分析主要源業(yè)務(wù)系統(tǒng)數(shù)據(jù)質(zhì)量問題檢查階段根據(jù)制定的檢查規(guī)則編寫程序，對源系統(tǒng)數(shù)據(jù)進(jìn)行檢查數(shù)據(jù)質(zhì)量問題分析階段分析有質(zhì)量問題數(shù)據(jù)對現(xiàn)有應(yīng)用的影響；提出解決措施123工作階段源系統(tǒng)分析階段1、工作內(nèi)容全面分析和消化主要源業(yè)務(wù)系統(tǒng)重點分析核心業(yè)務(wù)系統(tǒng)和信貸兩個系統(tǒng)2、工作依據(jù)源系統(tǒng)文檔：源系統(tǒng)操作手冊、源業(yè)務(wù)系統(tǒng)設(shè)計說明書、源系統(tǒng)數(shù)據(jù)字典源系統(tǒng)環(huán)境及調(diào)研數(shù)據(jù)3、工作重點系統(tǒng)內(nèi)：梳理業(yè)務(wù)流程、業(yè)務(wù)邏輯、業(yè)務(wù)關(guān)聯(lián)、數(shù)據(jù)庫表和字段的設(shè)計系統(tǒng)間：梳理業(yè)務(wù)關(guān)聯(lián)關(guān)系、數(shù)據(jù)關(guān)聯(lián)關(guān)系技術(shù)角度分析調(diào)研產(chǎn)出物源系統(tǒng)表結(jié)構(gòu)，包括主

15、鍵、外鍵、唯一性約束源系統(tǒng)表間關(guān)系源系統(tǒng)字段長度和類型業(yè)務(wù)角度分析調(diào)研源系統(tǒng)表和字段的業(yè)務(wù)含義源系統(tǒng)業(yè)務(wù)規(guī)則和流程數(shù)據(jù)質(zhì)量檢查階段1、工作內(nèi)容梳理和制定數(shù)據(jù)質(zhì)量檢查規(guī)則，定義標(biāo)準(zhǔn)模板依據(jù)數(shù)據(jù)檢查規(guī)則，編寫程序，對核心業(yè)務(wù)系統(tǒng)、信貸管理系統(tǒng)的進(jìn)行檢查2、工作依據(jù)系統(tǒng)調(diào)研和分析成果數(shù)據(jù)質(zhì)量檢查規(guī)則的依據(jù)調(diào)研成果的以下內(nèi)容進(jìn)行梳理：業(yè)務(wù)流程、業(yè)務(wù)邏輯數(shù)據(jù)邏輯設(shè)計報表數(shù)據(jù)應(yīng)用3、工作重點重點報表用到的表進(jìn)行分析數(shù)據(jù)質(zhì)量分析階段1、工作內(nèi)容分析有質(zhì)量問題數(shù)據(jù)對現(xiàn)有報表應(yīng)用的影響對數(shù)據(jù)質(zhì)量問題的成因進(jìn)行分析和總結(jié)對數(shù)據(jù)質(zhì)量問題的解決措施進(jìn)行分析和總結(jié)2、工作依據(jù)數(shù)據(jù)質(zhì)量檢查結(jié)果源數(shù)據(jù)與報表依賴關(guān)系3、工作

16、重點重點分析報表平臺的1104等報表存在的部分?jǐn)?shù)據(jù)質(zhì)量問題數(shù)據(jù)質(zhì)量反饋系統(tǒng)概述建設(shè)目標(biāo)對業(yè)務(wù)數(shù)據(jù)進(jìn)行數(shù)據(jù)質(zhì)量檢核，準(zhǔn)確掌握業(yè)務(wù)系統(tǒng)各種數(shù)據(jù)質(zhì)量問題，促進(jìn)基礎(chǔ)業(yè)務(wù)數(shù)據(jù)質(zhì)量的提高建設(shè)內(nèi)容質(zhì)量檢查規(guī)則定制實現(xiàn)質(zhì)量檢查規(guī)則的靈活定制數(shù)據(jù)質(zhì)量檢查系統(tǒng)按照預(yù)定義的數(shù)據(jù)質(zhì)量檢查規(guī)則，對數(shù)據(jù)的準(zhǔn)確性、有效性、關(guān)聯(lián)性、一致性、及時性進(jìn)行檢查，生成并保存的數(shù)據(jù)質(zhì)量檢查信息。數(shù)據(jù)質(zhì)量分析報告生成不同類型的數(shù)據(jù)質(zhì)量檢查報表，對不同的數(shù)據(jù)質(zhì)量問題進(jìn)行分析和展示架構(gòu)和功能系統(tǒng)架構(gòu)數(shù)據(jù)質(zhì)量檢核與反饋系統(tǒng)檢核對象管理導(dǎo)入、查詢、修改、刪除檢查對象檢核規(guī)則管理新增、刪除、修改檢核規(guī)則檢查頻度管理制定檢查周期和時間權(quán)限管理用戶建

17、立權(quán)限管理問題報告問題查詢規(guī)則查詢打包下載.問題管理維護(hù)并管理發(fā)現(xiàn)的數(shù)據(jù)質(zhì)量問題日志查詢報告管理功能分類功能名稱功能說明檢核對象管理對象編輯修改導(dǎo)入表，修改表和字段的相關(guān)屬性檢核規(guī)則管理有效性靈活定制自定義檢核規(guī)則，實現(xiàn)可視化規(guī)則配置和管理關(guān)聯(lián)性一致性準(zhǔn)確性及時性檢查頻度管理檢核頻度管理質(zhì)量監(jiān)控周期頻度，可按日、周、月、年等頻度制定檢核時間問題管理問題管理對發(fā)現(xiàn)的數(shù)據(jù)質(zhì)量問題進(jìn)行進(jìn)一步的描述和分析，并劃分問題歸屬業(yè)務(wù)分類報告管理報告管理質(zhì)量問題報告查詢，并可按照部門、系統(tǒng)、問題進(jìn)行匯總查詢系統(tǒng)管理權(quán)限管理管理員、操作員權(quán)限設(shè)置檢核對象配置管理需檢核的表系統(tǒng)功能調(diào)度管理整合層匯總層集市層貼源層數(shù)

18、據(jù)質(zhì)量檢查及反饋系統(tǒng)界面數(shù)據(jù)質(zhì)量管理建議通過逐套的解決報表數(shù)據(jù)質(zhì)量問題，以數(shù)據(jù)標(biāo)準(zhǔn)為依據(jù)，來切實解決基層手工修改報表的問題源頭負(fù)責(zé)制，誰錄入誰修改操作層面數(shù)據(jù)糾錯管理層面形成數(shù)據(jù)質(zhì)量管理的機(jī)制：發(fā)現(xiàn)問題，定位問題，解決問題的管理流程IT系統(tǒng)建設(shè)層面將數(shù)據(jù)質(zhì)量問題檢查規(guī)則固化到系統(tǒng)中，形成數(shù)據(jù)質(zhì)量臺賬，為解決數(shù)據(jù)質(zhì)量問題和考核提供依據(jù)數(shù)據(jù)平臺項目建設(shè)目標(biāo)1、發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題，推動數(shù)據(jù)治理工作的開展，建立數(shù)據(jù)質(zhì)量檢核系統(tǒng)對源系統(tǒng)進(jìn)行數(shù)據(jù)質(zhì)量檢核，發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題并統(tǒng)計影響到的報表對數(shù)據(jù)質(zhì)量問題進(jìn)行歸類總結(jié)，分析成因和改進(jìn)建議建設(shè)數(shù)據(jù)質(zhì)量檢核系統(tǒng)2、分析、梳理業(yè)務(wù)系統(tǒng)，推動數(shù)據(jù)標(biāo)準(zhǔn)的建立，統(tǒng)一全行口

19、徑建立基礎(chǔ)標(biāo)準(zhǔn)和指標(biāo)標(biāo)準(zhǔn)框架確定標(biāo)準(zhǔn)化范圍，對重要屬性進(jìn)行標(biāo)準(zhǔn)化3、建立數(shù)據(jù)倉庫模型框架，優(yōu)化我行數(shù)據(jù)架構(gòu)，建設(shè)穩(wěn)定、可擴(kuò)展的數(shù)據(jù)倉庫引進(jìn)業(yè)內(nèi)具有先進(jìn)水平的金融數(shù)據(jù)模型，進(jìn)行客戶化改造后，建成符合某行特點的數(shù)據(jù)倉庫模型框架覆蓋某行主要業(yè)務(wù)系統(tǒng)數(shù)據(jù)，以便快速高效的為應(yīng)用系統(tǒng)提供數(shù)據(jù)存儲歷史數(shù)據(jù)，解決新報表上線才有數(shù)的問題。匯總層建設(shè)（共性加工）數(shù)據(jù)標(biāo)準(zhǔn)梳理及歸納數(shù)據(jù)標(biāo)準(zhǔn)梳理及歸納對我行日常業(yè)務(wù)開展過程中所產(chǎn)生基礎(chǔ)性數(shù)據(jù)，從業(yè)務(wù)方面、技術(shù)方面、管理三個方面，對數(shù)據(jù)的業(yè)務(wù)表達(dá)、數(shù)據(jù)格式、數(shù)據(jù)關(guān)系等方面進(jìn)行一致約定，從而規(guī)范數(shù)據(jù)在全行內(nèi)外共享和使用中的一致性和準(zhǔn)確性對數(shù)據(jù)的管理、應(yīng)用過程進(jìn)行統(tǒng)一和規(guī)范

20、，明確數(shù)據(jù)的定義、格式、規(guī)則以及數(shù)據(jù)與數(shù)據(jù)間的關(guān)系為系統(tǒng)開發(fā)實施提供全行統(tǒng)一的規(guī)范準(zhǔn)則為數(shù)據(jù)加工和應(yīng)用提供統(tǒng)一來源和依據(jù)作用定義定義通過對我行經(jīng)營管理資料的分析，并參考同業(yè)的類似成果以及監(jiān)管部門要求，梳理和篩選出直接反映我行業(yè)務(wù)經(jīng)營管理狀態(tài)的重要指標(biāo)，并對指標(biāo)的業(yè)務(wù)含義、業(yè)務(wù)規(guī)則、統(tǒng)計口徑等內(nèi)容進(jìn)行標(biāo)準(zhǔn)化定義，形成全行一致的指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)作用統(tǒng)一全行對各項經(jīng)營指標(biāo)的理解和認(rèn)識，促進(jìn)各項經(jīng)營指標(biāo)在經(jīng)營管理決策中的運用；統(tǒng)一全行指標(biāo)標(biāo)準(zhǔn)的業(yè)務(wù)含義、計算口徑等內(nèi)容，從而解決我行取數(shù)口徑不一致、業(yè)務(wù)含義不清晰、指標(biāo)分類不清晰的情況，促進(jìn)部門間數(shù)據(jù)共享目標(biāo)建設(shè)方法-數(shù)據(jù)標(biāo)準(zhǔn)解決的問題數(shù)據(jù)孤島數(shù)據(jù)質(zhì)量制定了

21、全行統(tǒng)一的標(biāo)準(zhǔn)，實現(xiàn)了業(yè)務(wù)數(shù)據(jù)信息統(tǒng)一定義，統(tǒng)一命名、統(tǒng)一來源對于數(shù)據(jù)質(zhì)量造成的數(shù)據(jù)準(zhǔn)確性、一致性等問題，找出造成這些問題的原因，違背業(yè)務(wù)和約束的數(shù)據(jù)不進(jìn)入標(biāo)準(zhǔn)體系中舉例例如：在標(biāo)準(zhǔn)制定過程當(dāng)中，對于業(yè)務(wù)數(shù)據(jù)之間關(guān)聯(lián)不上的問題，首先要找出關(guān)聯(lián)不上的原因，之后通過和業(yè)務(wù)人員的有效溝通，制定出以哪一類數(shù)據(jù)為準(zhǔn)的標(biāo)準(zhǔn)，比如信貸管理系統(tǒng)的貸款余額和核心系統(tǒng)的貸款余額不一致，在制定“協(xié)議金額”標(biāo)準(zhǔn)的過程當(dāng)中，必須明確以那個系統(tǒng)的貸款余額為準(zhǔn)，且以此貸款余額制定全行標(biāo)準(zhǔn)，從而解決此類問題。例如：不同部門的貸款余額由于取數(shù)來源不同而造成差異，通過建立完整的分析數(shù)據(jù)標(biāo)準(zhǔn)體系后，統(tǒng)一了業(yè)務(wù)定義和取數(shù)口徑，有利于

22、全行范圍內(nèi)重復(fù)利用，杜絕出現(xiàn)各業(yè)務(wù)部門多次重復(fù)定義類似的指標(biāo)，并且因為標(biāo)準(zhǔn)的權(quán)威性和標(biāo)準(zhǔn)的嚴(yán)格管理，有效防止指標(biāo)定義和口徑的二義性。目標(biāo)建設(shè)方法-數(shù)據(jù)標(biāo)準(zhǔn)-建設(shè)步驟基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)分析數(shù)據(jù)標(biāo)準(zhǔn)發(fā)布執(zhí)行標(biāo)準(zhǔn)映射數(shù)據(jù)源和基礎(chǔ)標(biāo)準(zhǔn)數(shù)據(jù)映射數(shù)據(jù)源和分析標(biāo)準(zhǔn)數(shù)據(jù)映射標(biāo)準(zhǔn)執(zhí)行標(biāo)準(zhǔn)定義數(shù)據(jù)標(biāo)準(zhǔn)基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)發(fā)布執(zhí)行業(yè)務(wù)含義、業(yè)務(wù)規(guī)則、業(yè)務(wù)描述、數(shù)據(jù)來源業(yè)務(wù)定義、業(yè)務(wù)規(guī)則、業(yè)務(wù)含義、計算口徑目標(biāo)建設(shè)方法-數(shù)據(jù)標(biāo)準(zhǔn)-建設(shè)內(nèi)容1.現(xiàn)狀分析2.標(biāo)準(zhǔn)定義3.標(biāo)準(zhǔn)映射4.執(zhí)行建議目前存在問題業(yè)務(wù)訪談系統(tǒng)調(diào)研結(jié)合最佳實踐分析、診斷形成標(biāo)準(zhǔn)化定義初稿和框架對定義初稿征求意見和討論根據(jù)意見反饋和討論結(jié)果和修正并形成數(shù)據(jù)

23、標(biāo)準(zhǔn)確定映射的系統(tǒng)范圍制定源系統(tǒng)與標(biāo)準(zhǔn)的映射規(guī)則根據(jù)數(shù)據(jù)驗證映射規(guī)則提出標(biāo)準(zhǔn)在未來各影響面執(zhí)行的遵循原則就標(biāo)準(zhǔn)與現(xiàn)狀的實際差異給出具體的執(zhí)行建議目標(biāo)建設(shè)方法-數(shù)據(jù)標(biāo)準(zhǔn)-基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)框架梳理源系統(tǒng)表名字段名是否代碼.業(yè)務(wù)含義業(yè)務(wù)描述業(yè)務(wù)規(guī)則對應(yīng)主題對應(yīng)實體對應(yīng)屬性基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)框架梳理篩選保留整合合并重命名分類參考補(bǔ)充分析調(diào)研記錄協(xié)議xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx協(xié)議貸款貸款余額xxxxxxxxxxxxxx信貸管理xxxxxxxxxxx標(biāo)準(zhǔn)分類標(biāo)準(zhǔn)主題標(biāo)準(zhǔn)中文名稱標(biāo)準(zhǔn)英文名稱標(biāo)準(zhǔn)依據(jù)相關(guān)標(biāo)準(zhǔn)標(biāo)準(zhǔn)管理部門業(yè)務(wù)規(guī)則業(yè)務(wù)描述數(shù)據(jù)類型長度業(yè)務(wù)含義源系統(tǒng)數(shù)據(jù)格

24、式客戶對共客戶客戶名稱xxxxxxxxxx信貸管理xxxxxxxxx協(xié)議賬戶合同存款賬戶貸款賬戶目標(biāo)建設(shè)方法-數(shù)據(jù)標(biāo)準(zhǔn)-基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)定義及確認(rèn)xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx標(biāo)準(zhǔn)分類標(biāo)準(zhǔn)中文名稱標(biāo)準(zhǔn)信息類業(yè)務(wù)規(guī)則業(yè)務(wù)描述數(shù)據(jù)類型長度標(biāo)準(zhǔn)依據(jù)相關(guān)標(biāo)準(zhǔn)標(biāo)準(zhǔn)英文名稱業(yè)務(wù)含義源系統(tǒng)標(biāo)準(zhǔn)管理部門數(shù)據(jù)格式xxxxxxxxxxxxxxxxxxxxxxxxxxxxx代碼標(biāo)準(zhǔn)方案業(yè)務(wù)人員技術(shù)人員整合.定義補(bǔ)充.完善補(bǔ)充.完善溝通.確認(rèn)業(yè)務(wù)部分技術(shù)部分溝通.確認(rèn)基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)化方案目標(biāo)建設(shè)方法-

25、基礎(chǔ)標(biāo)準(zhǔn)-制定框架基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)框架屬性參考人民銀行標(biāo)準(zhǔn)規(guī)范文檔和他行標(biāo)準(zhǔn)，由3部分22個屬性項組成，分別為業(yè)務(wù)屬性、技術(shù)屬性、管理屬性。目標(biāo)建設(shè)方法-基礎(chǔ)標(biāo)準(zhǔn)-指標(biāo)標(biāo)準(zhǔn)建設(shè)思路3、制定指標(biāo)標(biāo)準(zhǔn)（1）指標(biāo)分析：分析指標(biāo)的定義、口徑、規(guī)則、數(shù)據(jù)來源等內(nèi)容（2）標(biāo)準(zhǔn)技術(shù)定義：技術(shù)部門逐項定義指標(biāo)標(biāo)準(zhǔn)化屬性（3）標(biāo)準(zhǔn)業(yè)務(wù)確認(rèn)：業(yè)務(wù)部門修訂、確認(rèn)指標(biāo)標(biāo)準(zhǔn)2、制定指標(biāo)標(biāo)準(zhǔn)框架（1）梳理、確定指標(biāo)分類體系（2）梳理、確定指標(biāo)標(biāo)準(zhǔn)屬性，形成指標(biāo)標(biāo)準(zhǔn)化定義模板1、篩選重要業(yè)務(wù)指標(biāo)（1）研讀經(jīng)營管理資料，梳理重要指標(biāo)列表（2）參考外部資料，補(bǔ)充完善指標(biāo)列表（3）討論指標(biāo)列表，篩選、確定指標(biāo)范圍目標(biāo)建設(shè)方法-基礎(chǔ)標(biāo)

26、準(zhǔn)-指標(biāo)標(biāo)準(zhǔn)篩選方法1、研讀經(jīng)營管理資料2、參考外部資料3、篩選、確定指標(biāo)范圍經(jīng)營管理資料：行領(lǐng)導(dǎo)講話我行各業(yè)務(wù)部門的業(yè)務(wù)經(jīng)營分析報告我行的各類管理報表篩選原則：反映我行規(guī)模、風(fēng)險、盈利、業(yè)務(wù)增長等各方面業(yè)務(wù)狀況的典型指標(biāo)口徑穩(wěn)定不易變化的指標(biāo)外部資料：同業(yè)相關(guān)建設(shè)資料城商行銀行國有銀行建設(shè)銀行人民銀行、銀監(jiān)會監(jiān)管指標(biāo)要求篩選原則：監(jiān)管部門有強(qiáng)制監(jiān)管要求的指標(biāo)同業(yè)用到，與我行業(yè)務(wù)有關(guān)的指標(biāo)篩選、確認(rèn)方式：項目組內(nèi)部討論篩選外部需求調(diào)研，進(jìn)行補(bǔ)充和確認(rèn)目標(biāo)建設(shè)方法-基礎(chǔ)標(biāo)準(zhǔn)-指標(biāo)標(biāo)準(zhǔn)框架制定方法1、梳理、設(shè)計指標(biāo)分類體系2、設(shè)計標(biāo)準(zhǔn)化屬性設(shè)計依據(jù)：指標(biāo)的業(yè)務(wù)共性的歸納及提煉參考行內(nèi)資料我行業(yè)務(wù)分

27、類源業(yè)務(wù)系統(tǒng)操作手冊及業(yè)務(wù)簡介文檔統(tǒng)計集中系統(tǒng)指標(biāo)分類參考外部資料監(jiān)管部門的管指標(biāo)及指標(biāo)分同業(yè)相關(guān)資料的指標(biāo)分類設(shè)計原則分類體系覆蓋篩選出的所有業(yè)務(wù)指標(biāo)，并能為每個指標(biāo)確定唯一的分類易于根據(jù)業(yè)務(wù)和指標(biāo)變化進(jìn)行擴(kuò)展設(shè)計依據(jù)：人民銀行JRT 0105-2014銀行數(shù)據(jù)標(biāo)準(zhǔn)定義規(guī)范外部資料設(shè)計原則：可以從業(yè)務(wù)、技術(shù)、管理不同角度對標(biāo)準(zhǔn)進(jìn)行全面定義對指標(biāo)標(biāo)準(zhǔn)必須清晰、明確滿足未來對滿足標(biāo)準(zhǔn)進(jìn)行管理的需要目標(biāo)建設(shè)方法-基礎(chǔ)標(biāo)準(zhǔn)-指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)框架指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)框架業(yè)務(wù)屬性技術(shù)屬性管理屬性指標(biāo)中文名稱指標(biāo)英文名稱指標(biāo)范圍類別計算公式業(yè)務(wù)規(guī)則相關(guān)指標(biāo)標(biāo)準(zhǔn)是否手工錄入顯示精度指標(biāo)落地系統(tǒng)數(shù)據(jù)來源系統(tǒng)數(shù)據(jù)源表數(shù)據(jù)格

28、式度量單位取值范圍歸口業(yè)務(wù)部門業(yè)務(wù)負(fù)責(zé)人技術(shù)負(fù)責(zé)人反饋結(jié)果描述指標(biāo)編碼指標(biāo)別名指標(biāo)定義指標(biāo)大類指標(biāo)小類指標(biāo)來源口徑明細(xì)取數(shù)口徑相關(guān)基礎(chǔ)類數(shù)據(jù)標(biāo)準(zhǔn)指標(biāo)生成頻度取值精度指標(biāo)應(yīng)用-高管駕駛艙指標(biāo)總覽主駕駛艙熱點地圖經(jīng)營概覽專項分析從經(jīng)營概況到具體指標(biāo)分析今日快報全行7項核心業(yè)務(wù)指標(biāo)的展現(xiàn)和分析最重要3項監(jiān)管指標(biāo)進(jìn)行展現(xiàn)和分析指標(biāo)總覽按分類展現(xiàn)全部指標(biāo)的本期值及與往期的比較值的列表經(jīng)營概覽對某一具體指標(biāo)進(jìn)行比較、結(jié)構(gòu)、趨勢等方面的分析專項分析從業(yè)務(wù)角度對一組反映類似業(yè)務(wù)的指標(biāo)進(jìn)行分析熱點地圖顯示全國地圖，可以展示各一級分行重要的經(jīng)營簡報數(shù)據(jù)我的指標(biāo)規(guī)模分析利潤分析風(fēng)險分析主駕駛艙選取13個行領(lǐng)導(dǎo)重點關(guān)

29、注的指標(biāo)展示我的指標(biāo)根據(jù)用戶對指標(biāo)的重視程度，實現(xiàn)指標(biāo)的個性化定制功能簡介數(shù)據(jù)平臺項目建設(shè)目標(biāo)1、發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題，推動數(shù)據(jù)治理工作的開展，建立數(shù)據(jù)質(zhì)量檢核系統(tǒng)對源系統(tǒng)進(jìn)行數(shù)據(jù)質(zhì)量檢核，發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題并統(tǒng)計影響到的報表對數(shù)據(jù)質(zhì)量問題進(jìn)行歸類總結(jié)，分析成因和改進(jìn)建議建設(shè)數(shù)據(jù)質(zhì)量檢核系統(tǒng)2、分析、梳理業(yè)務(wù)系統(tǒng)，推動數(shù)據(jù)標(biāo)準(zhǔn)的建立，統(tǒng)一全行口徑建立基礎(chǔ)標(biāo)準(zhǔn)和指標(biāo)標(biāo)準(zhǔn)框架確定標(biāo)準(zhǔn)化范圍，對重要屬性進(jìn)行標(biāo)準(zhǔn)化3、建立數(shù)據(jù)倉庫模型框架，優(yōu)化我行數(shù)據(jù)架構(gòu)，建設(shè)穩(wěn)定、可擴(kuò)展的數(shù)據(jù)倉庫引進(jìn)業(yè)內(nèi)具有先進(jìn)水平的金融數(shù)據(jù)模型，進(jìn)行客戶化改造后，建成符合某行特點的數(shù)據(jù)倉庫模型框架覆蓋某行主要業(yè)務(wù)系統(tǒng)數(shù)據(jù)，以便快速高效

30、的為應(yīng)用系統(tǒng)提供數(shù)據(jù)存儲歷史數(shù)據(jù)，解決新報表上線才有數(shù)的問題。匯總層建設(shè)（共性加工）數(shù)據(jù)倉庫層次架構(gòu)主題主題是模型按業(yè)務(wù)劃分的最頂層的分類根據(jù)我行業(yè)務(wù)實際，劃分10個業(yè)務(wù)主題邏輯視圖（子主題）邏輯視圖是根據(jù)實體涉及的業(yè)務(wù)，將實體劃分為不同子集同一實體可屬于不同邏輯視圖實體實體是一組具有業(yè)務(wù)相關(guān)性的屬性組成的集合，是描述和構(gòu)成業(yè)務(wù)邏輯、業(yè)務(wù)流程的基本單位一個實體可能涉及多類業(yè)務(wù)屬性模型最明細(xì)一級結(jié)構(gòu)對應(yīng)具體的業(yè)務(wù)數(shù)據(jù)項（字段）數(shù)據(jù)倉庫層次架構(gòu)風(fēng)險評級主題邏輯視圖實體屬性當(dāng)事人主題內(nèi)部機(jī)構(gòu)對公客戶對公客戶信息對公客戶管理信息不良貸款信息對公客戶領(lǐng)導(dǎo)信息對公客戶資本金構(gòu)成財務(wù)信息客戶名稱所屬領(lǐng)域注冊

31、資本企業(yè)規(guī)模法人代表基本賬戶開戶行機(jī)構(gòu)信息數(shù)據(jù)倉庫模型設(shè)計方法TD模型基礎(chǔ)模型邏輯模型物理模型TD模型業(yè)務(wù)剪裁保留與我行業(yè)務(wù)有關(guān)的主題、實體和屬性刪除與我行業(yè)務(wù)無關(guān)的主題、實體和屬性根據(jù)我行業(yè)務(wù)實際需求對主題進(jìn)行新增和合并邏輯模型設(shè)計復(fù)制：系統(tǒng)間業(yè)務(wù)含義、名稱均不重復(fù)的字段整合：系統(tǒng)間業(yè)務(wù)含義相同的多個字段拆分：系統(tǒng)間業(yè)務(wù)含義不同，名稱相同的多個字段物理模型設(shè)計當(dāng)前業(yè)務(wù)及數(shù)據(jù)都支持的實體進(jìn)行理化當(dāng)前業(yè)務(wù)不支持或數(shù)據(jù)不支持的不進(jìn)行物理化入倉源表及字段范圍模型映射邏輯模型設(shè)計-主題劃分當(dāng)事人資產(chǎn)渠道財務(wù)產(chǎn)品地域協(xié)議事件代碼當(dāng)事人邏輯模型設(shè)計-當(dāng)事人主題當(dāng)事人是一個獨立的人或者一組人組成的機(jī)構(gòu)、團(tuán)體

32、等，主要分為個人、機(jī)構(gòu)和家庭，他們是和我行有往來或者出于營銷、管理等各種需要希望關(guān)心和分析的個體或人群。從模型角度考慮，應(yīng)該包括以下當(dāng)事人信息：在我行登記注冊開立賬戶的對公普通客戶；我行擔(dān)?？蛻艉臀倚杏袠I(yè)務(wù)往來的其他金融機(jī)構(gòu)；機(jī)構(gòu)的內(nèi)部組織（如分支機(jī)構(gòu)、部門等）；機(jī)構(gòu)的員工（含我行柜員、員工等）；個人信息聯(lián)系信息關(guān)聯(lián)信息財務(wù)信息風(fēng)險信息評價信息集團(tuán)信息柜員信息公司信息內(nèi)部機(jī)構(gòu)外部機(jī)構(gòu)糧棉油對全行客戶進(jìn)行統(tǒng)一識別與數(shù)據(jù)整合當(dāng)事人個人當(dāng)事人家庭機(jī)構(gòu)內(nèi)部員工柜員外部組織機(jī)構(gòu)內(nèi)部機(jī)構(gòu)金融機(jī)構(gòu)（同業(yè)）對公客戶其它內(nèi)部組織金融機(jī)構(gòu)內(nèi)部組織協(xié)議地址產(chǎn)品當(dāng)事人渠道反饋域財務(wù)事件當(dāng)事人資產(chǎn)代碼邏輯模型邏輯模型設(shè)

33、計-協(xié)議主題協(xié)議地址產(chǎn)品當(dāng)事人渠道反饋域財務(wù)事件當(dāng)事人資產(chǎn)代碼協(xié)議是指金融機(jī)構(gòu)與當(dāng)事人之間針對某種特定產(chǎn)品或服務(wù)而簽立的契約關(guān)系，如賬戶、客戶和銀行簽訂的合同等。當(dāng)金融機(jī)構(gòu)與客戶之間針對某種產(chǎn)品或服務(wù)的條款和條件達(dá)成協(xié)議時，一個協(xié)議（Agreement）就會被開立，因此協(xié)議是客戶和銀行往來的重要載體，我行模型包括以下協(xié)議信息：我行涉及金額、期限、利率等的具體協(xié)議細(xì)項的金融賬戶我行與當(dāng)事人之間針對某種特定產(chǎn)品或服務(wù)而簽立的金融合約我行在支付結(jié)算業(yè)務(wù)中使用到的各種銀行票據(jù)：匯票貸款帳戶存款帳戶貸款合同抵押合同質(zhì)押合同貸款借據(jù)國際結(jié)算銀行本票銀行匯票其他信息銀行承兌匯票客戶理財簽約銀行與客戶之間針對

34、某種特定產(chǎn)品或服務(wù)而簽立的契約關(guān)系，將所有協(xié)議和關(guān)系，整合和歸并協(xié)議金融賬戶申請金融合約貸款賬戶銀行票據(jù)存款賬戶內(nèi)部賬戶貸款類合約邏輯模型抵質(zhì)押合同貸款借據(jù)項目額度申請貸款申請項目貸款貸款合同抵質(zhì)押合同押品信息借據(jù)還款計劃邏輯模型設(shè)計-代碼主題代碼：是指將源業(yè)務(wù)系統(tǒng)所涉及到的所有代碼進(jìn)行整合，在整合層模型中統(tǒng)一存儲，依據(jù)前端應(yīng)用需求的需要，將代碼主題的整合分為兩大類：簡單代碼表和復(fù)雜代碼表，簡單代碼表指的是只需要關(guān)注代碼值和代碼值業(yè)務(wù)含義描述；復(fù)雜代碼表指的應(yīng)用需求除關(guān)注代碼值和代碼值業(yè)務(wù)含義描述外，該代碼表的其他屬性也有應(yīng)用需求，同樣需要關(guān)注，這樣的碼表將作為普通的數(shù)據(jù)表對待；自定義代碼，是

35、屬于簡單碼表的一種。簡單碼表復(fù)雜碼表自定義代碼分類模式編碼表當(dāng)事人類代碼表公共類代碼表分類模式枚舉值編碼表協(xié)議類代碼表資產(chǎn)類代碼表源和目標(biāo)代碼映射關(guān)系表事件類代碼表財務(wù)類代碼表對全行業(yè)務(wù)代碼進(jìn)行統(tǒng)一識別代碼當(dāng)事人類代碼表事件類代碼表分類模式枚舉值編碼表源和目標(biāo)代碼映射關(guān)系表公共類代碼表協(xié)議類代碼表分類模式編碼表協(xié)議地址產(chǎn)品當(dāng)事人渠道反饋域財務(wù)事件當(dāng)事人資產(chǎn)代碼邏輯模型邏輯模型設(shè)計-財務(wù)主題財務(wù)：主要包括銀行的總賬信息，是描述科目組織、控制、內(nèi)部核算等銀行核心科目賬務(wù)以及預(yù)算管理有關(guān)的內(nèi)容。該主題抽象地描述了銀行內(nèi)部賬務(wù)的組織模式，能夠適應(yīng)不同的科目組織體系。我行模型包括以下財務(wù)信息：總賬（分戶

36、）總賬明細(xì)科目/科目組/科目類：對于科目的層次級別設(shè)置和管理財務(wù)預(yù)算總賬科目信貸總賬科目內(nèi)外科目對照關(guān)系總賬日旬余額日明細(xì)內(nèi)部科目余額科目與產(chǎn)品對照關(guān)系總賬月余額月明細(xì)內(nèi)部科目余額日明細(xì)外部科目余額外匯準(zhǔn)備金科目余額外匯科目損益余額日明細(xì)外部科目余額財務(wù)主題抽象地描述了銀行內(nèi)部賬務(wù)的組織模式，能夠適應(yīng)不同的科目組織體系，它側(cè)重于“財務(wù)管理”總賬科目總賬內(nèi)外科目對照關(guān)系科目產(chǎn)品對照關(guān)系信貸總賬科目總賬日旬余額總賬月余額協(xié)議地址產(chǎn)品當(dāng)事人渠道反饋域財務(wù)事件當(dāng)事人資產(chǎn)代碼邏輯模型邏輯模型設(shè)計-事件主題事件：可以記錄各種與銀行相關(guān)的活動的詳細(xì)情況。既可以與資金相關(guān)，也可以與資金無關(guān)；既可以有客戶參與，

37、也可以沒有客戶參與；既可以與帳戶相關(guān)，也可以與帳戶無關(guān)；可以由客戶發(fā)起，也可以由銀行發(fā)起?？傊梢杂涗浀姆秶浅V泛，包括交易數(shù)據(jù)，比如存款、提款、付款、收取信用卡年費、計算利息和費用、投訴、查詢產(chǎn)品、查詢地址、查詢余額、網(wǎng)上交易等。我行模型包括以下事件信息：存款信息、貸款信息；庫存管理、現(xiàn)金管理、賬戶管理、資產(chǎn)管理；資金調(diào)撥、支付結(jié)算、現(xiàn)代化支付；報文清算、國際業(yè)務(wù)；外匯、票據(jù)、市場交易、十二級分類、核心賬務(wù)。同業(yè)定期存款匯入貸款縮期事件新棉收購進(jìn)度采集同業(yè)定期存款匯出貸款展期事件商品棉貸款信息采集大額支付事件貸款轉(zhuǎn)移事件糧油庫存核查小額支付事件分段計息事件棉花農(nóng)資庫存變動該主題可以記錄各

38、種與銀行相關(guān)的活動的詳細(xì)情況，進(jìn)行客戶行為分析、重大事件偵測等，以便更好的進(jìn)行客戶細(xì)分、客戶關(guān)懷。事件貸款事件存款事件庫存管理事件貸款縮期貸款展期分段計息貸款轉(zhuǎn)移商品棉貸款信息采集糧油庫存核查同業(yè)定期存款匯入同業(yè)定期存款匯出新棉收購進(jìn)度采集棉花農(nóng)資庫存變動協(xié)議地址產(chǎn)品當(dāng)事人渠道反饋域財務(wù)事件當(dāng)事人資產(chǎn)代碼邏輯模型邏輯模型設(shè)計-當(dāng)事人資產(chǎn)主題當(dāng)事人資產(chǎn)：描述當(dāng)事人的所有資產(chǎn)，該主題包含兩大類的資產(chǎn)，既包含我行自有資產(chǎn)又包含客戶所擁有的資產(chǎn)。一個資產(chǎn)可以被多個當(dāng)事人所擁有，一個當(dāng)事人可以與多個資產(chǎn)有關(guān)。資產(chǎn)可分為實物資產(chǎn)、金融資產(chǎn)與無形資產(chǎn)。客戶資產(chǎn)信息的來源很多情況下是在客戶申請貸款時所提供的各

39、種擔(dān)保品信息、抵質(zhì)押品信息等。我行模型包括以下資產(chǎn)信息：銀行自有資產(chǎn)，具體又細(xì)分為：銀行自有無形資產(chǎn)、固定資產(chǎn)、經(jīng)營性租賃資產(chǎn)、其他資產(chǎn)等；客戶自有資產(chǎn)，具體又細(xì)分為：客戶抵債資產(chǎn)、客戶擔(dān)保資產(chǎn)、金融資產(chǎn)、實物資產(chǎn)、無形資產(chǎn)等。銀行自有資產(chǎn)客戶抵債資產(chǎn)客戶擔(dān)保資產(chǎn)經(jīng)營性租賃資產(chǎn)抵債資產(chǎn)房產(chǎn)抵質(zhì)押物銀行自有無形資產(chǎn)抵債資產(chǎn)設(shè)備押品外部評估信息銀行自有固定資產(chǎn)抵債資產(chǎn)地產(chǎn)押品內(nèi)部評估信息客戶資產(chǎn)信息的來源很多情況下是在客戶申請貸款時所提供的各種擔(dān)保品信息、抵質(zhì)押品信息等，將這種信息進(jìn)行整合和歸并資產(chǎn)銀行自有資產(chǎn)客戶自有資產(chǎn)固定資產(chǎn)無形資產(chǎn)其他資產(chǎn)租賃資產(chǎn)客戶擔(dān)保資產(chǎn)金融資產(chǎn)客戶抵債資產(chǎn)實物資產(chǎn)抵質(zhì)

40、資產(chǎn)房產(chǎn)信息交通運輸設(shè)備協(xié)議地址產(chǎn)品當(dāng)事人渠道反饋域財務(wù)事件當(dāng)事人資產(chǎn)代碼邏輯模型數(shù)據(jù)映射和ETL開發(fā)源表映射文件目標(biāo)表開發(fā)規(guī)范合并拆分復(fù)制ETL業(yè)務(wù)含義不同，名稱相同，進(jìn)行拆分業(yè)務(wù)含義相同、名稱不同，進(jìn)行合并業(yè)務(wù)含義相同、名稱相同，進(jìn)行合并轉(zhuǎn)換生成新鍵值代碼值轉(zhuǎn)換數(shù)據(jù)類型轉(zhuǎn)換值域轉(zhuǎn)換值轉(zhuǎn)換ETL開發(fā)人員按照映射文件中規(guī)定的映射邏輯要求，結(jié)合開發(fā)規(guī)范，編寫作業(yè)，通過數(shù)據(jù)源分析，制定加載策略，開發(fā)JOB調(diào)度直接拷貝加載策略數(shù)據(jù)源分析常量賦固定值1表間關(guān)聯(lián)/單表操作（LeftJoin,InnerJoin,FullJoin,Union）映射文件通過映射文件，確定表間關(guān)系數(shù)據(jù)映射和ETL開發(fā)定義源：配

41、置作業(yè)源表的表名、表結(jié)構(gòu)等信息創(chuàng)建映射：根據(jù)作業(yè)詳細(xì)設(shè)計中表與表之間及字段之間的映射關(guān)系，使用相應(yīng)的組件實現(xiàn)其數(shù)據(jù)轉(zhuǎn)換邏輯定義目標(biāo)：配置作業(yè)目標(biāo)表的表名、表結(jié)構(gòu)、加載方式等信息定義源創(chuàng)建映射定義目標(biāo)目標(biāo)的建設(shè)方法-數(shù)據(jù)倉庫模型框架（4）整合層模型建設(shè)對應(yīng)用的支撐整合層的穩(wěn)定性整合層提供全行統(tǒng)一的業(yè)務(wù)視圖整合層的數(shù)據(jù)全面性整合層提供明細(xì)的數(shù)據(jù)整合層保留完整的歷史數(shù)據(jù)保證模型對未來業(yè)務(wù)的業(yè)務(wù)支持的快速響應(yīng)，不需要隨業(yè)務(wù)的變化而頻繁調(diào)整整合層模型形成明確業(yè)務(wù)含義和數(shù)據(jù)來源，確保字段業(yè)務(wù)定義的唯一性，形成全行統(tǒng)一的業(yè)務(wù)視圖保留了業(yè)務(wù)系統(tǒng)中最細(xì)粒度的業(yè)務(wù)數(shù)據(jù)，保證整合層可以支持明細(xì)級的數(shù)據(jù)查詢和分析應(yīng)用

42、整合層涵蓋我行主要源業(yè)務(wù)系統(tǒng)的業(yè)務(wù)信息，提供全面的業(yè)務(wù)數(shù)據(jù)，可以為客戶、風(fēng)險、績效等各類分析應(yīng)整合層中可以完整保留業(yè)務(wù)系統(tǒng)的歷史數(shù)據(jù)，保證了對歷史類查詢分析的支持客戶360度統(tǒng)一視圖通過整合層模型落地ETL60貸款存款中間業(yè)務(wù)利潤貢獻(xiàn)關(guān)聯(lián)關(guān)系聯(lián)系人/關(guān)鍵人統(tǒng)一客戶關(guān)聯(lián)信息視圖客戶360度統(tǒng)一視圖客戶額度信息聯(lián)系人/關(guān)聯(lián)信息客戶大事記交易信息理財產(chǎn)品信息產(chǎn)品/賬戶信息國際結(jié)算信息資本構(gòu)成/股權(quán)投資客戶財務(wù)信息客戶基本信息客戶合作協(xié)議其它信息對公客戶統(tǒng)計與分析管理客戶基本信息客戶額度信息客戶財務(wù)信息客戶關(guān)聯(lián)信息客戶關(guān)鍵人信息客戶聯(lián)系人信息客戶上市信息客戶存款信息客戶貸款信息賬務(wù)交易信息賬戶日均余額

43、客戶考核利潤客戶管戶信息國際結(jié)算信息網(wǎng)銀交易信息機(jī)構(gòu)信息統(tǒng)計數(shù)據(jù)業(yè)務(wù)規(guī)模統(tǒng)計資金流向統(tǒng)計額度信息統(tǒng)計客戶分類統(tǒng)計授信客戶統(tǒng)計行業(yè)客戶統(tǒng)計 整合層模型對客戶營銷的支持當(dāng)事人主題協(xié)議主題事件主題CRM-客戶貢獻(xiàn)度分析核心信貸管理對公客戶表客戶表存款賬戶表存款交易明細(xì)表客戶號客戶名稱存款余額借據(jù)表貸款余額季度存款交易量。債項評級。五級分類同一客戶信息整合整合層模型營銷策略-客戶貢獻(xiàn)度分類：存款余額大于xx萬，貸款余額大于xxxx萬，并且屬于正常貸款，且季度存款交易量大于xxx條的為A客戶；存款余額大于xx萬，貸款余額大于xxxx萬，并且屬于正常貸款，且季度存款交易量大于xxx條的為B客戶；存款余額大

44、于xx萬，貸款余額大于xxxx萬，并且屬于次級貸款，且季度存款交易量大于xxx條的為C客戶；通過客戶貢獻(xiàn)度的分類，制定營銷策略，比如貢獻(xiàn)度為A的客戶，可進(jìn)行貸款利率上的優(yōu)惠或存款利率的上浮的方式穩(wěn)定此利潤點客戶貢獻(xiàn)度分類整合層模型對客戶營銷的支持當(dāng)事人主題協(xié)議主題事件主題核心信貸管理對公客戶表客戶表存款賬戶表存款交易明細(xì)表借據(jù)表。債項評級。同一客戶信息整合整合層模型營銷CRM-客戶忠誠度分析客戶號客戶名稱是否基本戶賬戶日均余額貸款期限貸款金額現(xiàn)金流量是否異常賬戶睡眠時間業(yè)務(wù)量是否異?？蛻糁艺\度分類營銷策略-客戶忠誠度分類：通過客戶忠誠度的分類，忠誠度越大、則是我行重點的目標(biāo)客戶，可作為戰(zhàn)略重點

45、客戶。如果忠誠度不大，則要進(jìn)行重點客戶關(guān)系維護(hù)，即精準(zhǔn)營銷匯總層目標(biāo)與定位作為整合層和集市層的銜接，從業(yè)務(wù)的視角出發(fā)，提煉出對數(shù)據(jù)倉庫具有共性的數(shù)據(jù)訪問需求，抽取出公共指標(biāo)，形成由維度和指標(biāo)組成的維度模型，對符合要求的數(shù)據(jù)進(jìn)行預(yù)匯總和預(yù)加工。為集市層統(tǒng)一提供規(guī)范的、準(zhǔn)確的數(shù)據(jù)。完成整個匯總層的邏輯模型、物理模型的設(shè)計并全部實現(xiàn)物理化。并根據(jù)業(yè)務(wù)性質(zhì)將業(yè)務(wù)數(shù)據(jù)，劃分為以下七大類主題分類存放和管理建設(shè)階段和步驟2.2參考模型到數(shù)據(jù)源的匹配2.1數(shù)據(jù)源到參考模型的匹配1.2當(dāng)前用到的屬性分析1.1參考模型設(shè)計3.1物理模型設(shè)計一、邏輯模型初步設(shè)計二、邏輯模型具體設(shè)計三、開發(fā)實現(xiàn)2.3應(yīng)用驅(qū)動模型完善

46、業(yè)務(wù)驅(qū)動循環(huán)邏輯模型設(shè)計客戶需求調(diào)研3.2數(shù)據(jù)映射3.3ETL個人、存款、貸款、貸款、信用卡建設(shè)重點1.協(xié)調(diào)業(yè)務(wù)系統(tǒng)開發(fā)商對系統(tǒng)進(jìn)行講解，了解具體的業(yè)務(wù)流程并對開發(fā)人員整理出的源業(yè)務(wù)系統(tǒng)調(diào)研提綱中所提出的問題進(jìn)行解答2.對源系統(tǒng)表對象調(diào)研3.對源系統(tǒng)表字段調(diào)研4.根據(jù)源系統(tǒng)數(shù)據(jù)驗證調(diào)研結(jié)果5.依據(jù)調(diào)研結(jié)果對模型進(jìn)行屬性的補(bǔ)充完善2.源表調(diào)研3.源表字段調(diào)研4.驗證調(diào)研結(jié)果1.源系統(tǒng)調(diào)研存儲策略設(shè)計思想將匯總層劃分為兩個存儲區(qū)域，數(shù)據(jù)集市應(yīng)用從歷史數(shù)據(jù)區(qū)和快照區(qū)獲取數(shù)據(jù)。歷史數(shù)據(jù)區(qū)數(shù)據(jù)集市數(shù)據(jù)集市快照區(qū)數(shù)據(jù)集市（T-1日，數(shù)據(jù)日期）應(yīng)用層數(shù)據(jù)存儲區(qū)ODS層、整合層月表歷史區(qū)流水類表第四部分成效和

47、特點項目成效-中長期價值進(jìn)一步擴(kuò)展了數(shù)據(jù)范圍，容納了新數(shù)據(jù)，實現(xiàn)對業(yè)務(wù)數(shù)據(jù)的全覆蓋，當(dāng)未來有新的業(yè)務(wù)需求時，保證了數(shù)據(jù)架構(gòu)的穩(wěn)定性支撐全行級的數(shù)據(jù)應(yīng)用，數(shù)據(jù)平臺可提供全行級的最細(xì)粒度數(shù)據(jù)，滿足未來建設(shè)決策支持系統(tǒng)如：客戶關(guān)系管理、資產(chǎn)負(fù)債管理、管理會計、信用風(fēng)險管理、管理駕駛艙等業(yè)務(wù)數(shù)據(jù)模型支撐數(shù)據(jù)挖掘，支持各業(yè)務(wù)部門進(jìn)行客戶價值分析、客戶行為分析、貨款償還預(yù)測分析、客戶信用政策分析、業(yè)務(wù)關(guān)聯(lián)分析等數(shù)據(jù)挖掘應(yīng)用項目建設(shè)特點-多方參與，字段級加工整合層模型業(yè)務(wù)字段業(yè)務(wù)答疑業(yè)務(wù)調(diào)研技術(shù)調(diào)研數(shù)據(jù)調(diào)研模型映射ETL加工結(jié)果驗證公司方源業(yè)務(wù)系統(tǒng)業(yè)務(wù)人員技術(shù)人員源系統(tǒng)廠商技術(shù)答疑技術(shù)講解業(yè)務(wù)相關(guān)標(biāo)準(zhǔn)定義業(yè)務(wù)相關(guān)標(biāo)準(zhǔn)確認(rèn)技術(shù)相關(guān)標(biāo)準(zhǔn)定義技術(shù)相關(guān)標(biāo)準(zhǔn)確認(rèn)模型驗證數(shù)據(jù)質(zhì)量檢查分析標(biāo)準(zhǔn)化分析標(biāo)準(zhǔn)映射源系統(tǒng)答疑源系統(tǒng)講解資料提供系統(tǒng)調(diào)研ETL數(shù)據(jù)質(zhì)量數(shù)據(jù)標(biāo)準(zhǔn)項目建設(shè)特點-分工協(xié)作，共同推動（1）本期項目建設(shè)實施過程遵循“技術(shù)先行，業(yè)務(wù)配合”的原則，需要技術(shù)部門主導(dǎo)、業(yè)務(wù)部門解決數(shù)據(jù)“如何整合”的問題，合作公司解決數(shù)據(jù)“是什么”的問題技術(shù)人員提交標(biāo)準(zhǔn)后，對應(yīng)的業(yè)務(wù)部門人員需確認(rèn)結(jié)果,對有異議的結(jié)果進(jìn)行修改和補(bǔ)充，這個過程可能需要經(jīng)過多次反復(fù)確認(rèn)，從而制定最終的標(biāo)準(zhǔn)化產(chǎn)物并發(fā)布，形成全行標(biāo)準(zhǔn)項目建設(shè)特點-分工協(xié)作，共同推動（1）業(yè)務(wù)部門解決數(shù)據(jù)“如何整合”的問題業(yè)務(wù)部門需要確認(rèn)技術(shù)部門提出的整合規(guī)則（