金融大數(shù)據(jù)平臺建設(shè)方案詳細(xì)

1、二、大數(shù)據(jù)平臺建設(shè)（一）大數(shù)據(jù)平臺框架概述大數(shù)據(jù)平臺建設(shè)充分整合信息化資源，打破行業(yè)、部門之 間的信息壁壘，運(yùn)用大數(shù)據(jù)技術(shù)進(jìn)行采集、加工、建模、分析，將數(shù) 據(jù)價(jià)值融入到金融之中，從而提升創(chuàng)新能力和產(chǎn)品服務(wù)能力。 主要包括以下三部分：1.大數(shù)據(jù)分析基礎(chǔ)平臺按照功能劃分?jǐn)?shù)據(jù)區(qū)，設(shè)計(jì)數(shù)據(jù)模型，在統(tǒng)一流程調(diào)度下，整合 各類數(shù)據(jù)，同現(xiàn)有的企業(yè)級數(shù)據(jù)倉庫和歷史數(shù)據(jù)存儲系統(tǒng)一起 形成基礎(chǔ)數(shù)據(jù)體系，提供支撐經(jīng)營管理的各類數(shù)據(jù)應(yīng)用，支撐 上層應(yīng)用。2 .大數(shù)據(jù)應(yīng)用系統(tǒng)基于基礎(chǔ)數(shù)據(jù)平臺，持續(xù)建設(shè)各類數(shù)據(jù)應(yīng)用系統(tǒng)，通過數(shù) 據(jù)挖掘、計(jì)量分析和機(jī)器學(xué)習(xí)等手段，對豐富的大數(shù)據(jù)資源進(jìn)行 開發(fā)使用，并將數(shù)據(jù)決策化過程結(jié)合到風(fēng)

2、控、營銷、營運(yùn)等經(jīng)營 管理活動,充分發(fā)揮大數(shù)據(jù)價(jià)值。3.大數(shù)據(jù)管控建立數(shù)據(jù)標(biāo)準(zhǔn)，提升數(shù)據(jù)質(zhì)量，加強(qiáng)元數(shù)據(jù)管理能力，為 平臺建設(shè)及安全提供保障（二）大數(shù)據(jù)平臺建設(shè)原則大數(shù)據(jù)平臺是大數(shù)據(jù)運(yùn)用的基礎(chǔ)實(shí)施，其設(shè)計(jì)、建設(shè)和系統(tǒng)實(shí)現(xiàn)過程中，應(yīng)遵循如下指導(dǎo)原則：經(jīng)濟(jì)性：基于現(xiàn)有場景分析，對數(shù)據(jù)量進(jìn)行合理評估 確定大數(shù)據(jù)平臺規(guī)模,后續(xù)根據(jù)實(shí)際情況再逐步優(yōu)化擴(kuò)學(xué)習(xí)參考容。可擴(kuò)展性：架構(gòu)設(shè)計(jì)與功能劃分模塊化，考慮各接口的開放性、可擴(kuò)展性，便于系統(tǒng)的快速擴(kuò)展與維護(hù)，便于第三方系統(tǒng)的快速接入?？煽啃裕合到y(tǒng)采用的系統(tǒng)結(jié)構(gòu) 、技術(shù)措施、開發(fā)手段 都應(yīng)建立在已經(jīng)相當(dāng)成熟的應(yīng)用基礎(chǔ)上，在技術(shù)服務(wù)和維護(hù)響應(yīng)上同用戶積極配合 ，

3、確保系統(tǒng)的可靠；對數(shù)據(jù)指標(biāo) 要保證完整性，準(zhǔn)確性。安全性：針對系統(tǒng)級、應(yīng)用級、網(wǎng)絡(luò)級，均提供合理 的安全手段和措施，為系統(tǒng)提供全方位的安全實(shí)施方案，確保企業(yè)內(nèi)部信息的安全。大數(shù)據(jù)技術(shù)必須自主可控。先進(jìn)性：涵蓋結(jié)構(gòu)化，半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)存儲 和分析的特點(diǎn)。借鑒互聯(lián)網(wǎng)大數(shù)據(jù)存儲及分析的實(shí)踐 ，使 平臺具有良好的先進(jìn)性和彈性。支撐當(dāng)前及未來數(shù)據(jù)應(yīng)用需求，引入對應(yīng)大數(shù)據(jù)相關(guān)技術(shù)。平臺性：歸納整理大數(shù)據(jù)需求 ，形成統(tǒng)一的大數(shù)據(jù)存 儲服務(wù)和大數(shù)據(jù)分析服務(wù)。利用多租戶，實(shí)現(xiàn)計(jì)算負(fù)荷和數(shù) 據(jù)訪問負(fù)荷隔離。多集群統(tǒng)一管理。分層解耦：大數(shù)據(jù)平臺提供開放的、標(biāo)準(zhǔn)的接口 ，實(shí)現(xiàn)與各應(yīng)用產(chǎn)品的無縫對接（三）基礎(chǔ)數(shù)據(jù)

4、來源1.銀行內(nèi)部大數(shù)據(jù)資源.學(xué)習(xí)參考客戶自身信息以及其金融交易行為，依照目前積累沉淀的數(shù)量資源情況，將數(shù)據(jù)主要分為三大類：第一類：客戶基礎(chǔ)數(shù)據(jù)客戶信息數(shù)據(jù)，即客戶基礎(chǔ)數(shù)據(jù)，主要是指描述客戶 自身特點(diǎn)的數(shù)據(jù)。個(gè)人客戶信息數(shù)據(jù)包括 ：個(gè)人姓名、性別、年齡、身 份信息、聯(lián)系方式、職業(yè)、生活城市、工作地點(diǎn)、家庭地 址、所屬行業(yè)、具體職業(yè)、婚姻狀況、教育情況、工作經(jīng) 歷、工作技能、賬戶信息、產(chǎn)品信息、個(gè)人愛好等等。企業(yè)客戶信息數(shù)據(jù)包括 ：企業(yè)名稱、關(guān)聯(lián)企業(yè)、所屬 行業(yè)、銷售金額、注冊資本、賬戶信息、企業(yè)規(guī)模、企業(yè) 地點(diǎn)、分公司情況、客戶和供應(yīng)商、信用評價(jià)、主營業(yè)務(wù)、 法人信息等等。將這些割裂的數(shù)據(jù)整合到

5、大數(shù)據(jù)平臺，形成全局?jǐn)?shù)據(jù)，再按照自身需要進(jìn)行歸類和打標(biāo)簽，由于都是結(jié)構(gòu)化數(shù)據(jù)因此將有利于數(shù)據(jù)分析。可以將這些信息集中在大數(shù)據(jù)管 理平臺，對客戶進(jìn)行分類，依據(jù)其他的交易數(shù)據(jù) ，進(jìn)行產(chǎn) 品開發(fā)和決策支持。第二類：支付信息交易信息數(shù)據(jù)，可以稱之為支付信息 ，主要是指客戶 通過渠道發(fā)生的交易以及現(xiàn)金流信息 。個(gè)人客戶交易信息：包括工資收入、個(gè)人消費(fèi)、公共事業(yè)繳費(fèi)、信貸還款、轉(zhuǎn)賬交易、委托扣款、購買理財(cái)產(chǎn) 品、購買保險(xiǎn)產(chǎn)品、信用卡還款等。企業(yè)客戶交易信息：包括供應(yīng)鏈應(yīng)收款項(xiàng)、供應(yīng)鏈應(yīng) 付款項(xiàng)、員工工資、企業(yè)運(yùn)營支出、同分公司之間交易、 同總公司之間交易、稅金支出、理財(cái)產(chǎn)品買賣、金融衍生 產(chǎn)品購買、公共費(fèi)

6、用支出、其他轉(zhuǎn)賬等。第三類：資產(chǎn)信息資產(chǎn)信息主要是指客戶在金融機(jī)構(gòu)端資產(chǎn)和負(fù)債信息，同時(shí)也包含金融機(jī)構(gòu)自身資產(chǎn)負(fù)債信息，其中數(shù)據(jù)大多來自銀行。個(gè)人客戶資產(chǎn)負(fù)債信息包括 ：購買的理財(cái)產(chǎn)品、定期 存款、活期存款、信用貸款、抵押貸款、信用卡負(fù)債、抵 押房產(chǎn)、企業(yè)年金等。企業(yè)客戶資產(chǎn)負(fù)債信息包括 ：企業(yè)定期存款、活期存 款、信用貸款、抵押貸款、擔(dān)保額度、應(yīng)收賬款、應(yīng)付賬 款、理財(cái)產(chǎn)品、票據(jù)、債券、固定資產(chǎn)等。銀行自身端資產(chǎn)負(fù)債信息包括：自身資產(chǎn)和負(fù)債例如活期存款、定期存款、借入負(fù)債、結(jié)算負(fù)債、現(xiàn)金資產(chǎn)、 固定資產(chǎn)貸款證券投資等。第四類：新型業(yè)務(wù)數(shù)據(jù)此類數(shù)據(jù)包括系統(tǒng)的運(yùn)行日志 、客服語音、視頻影像、 網(wǎng)

7、站日志等。.學(xué)習(xí)參考2 .外部大數(shù)據(jù)來源為了贏得差異化競爭 ，就必須考慮其他數(shù)據(jù)源的輸入,這些數(shù)據(jù)是自身不具有的，但是對其數(shù)據(jù)分析和決策起到 了很重要的作用。線上交易、電商平臺、社交網(wǎng)絡(luò)等互聯(lián)網(wǎng)數(shù)據(jù)來源 ， 司法、工商、財(cái)稅等政府部門依法公開的信息，主要包括：互聯(lián)網(wǎng)消費(fèi)行為數(shù)據(jù) ，了解客戶消費(fèi)能力和消費(fèi)偏好 等； 個(gè)人嚴(yán)重行政處罰記錄 （如行政拘留等）、刑事犯罪記錄、 涉訴情況（人身關(guān)系、財(cái)產(chǎn)關(guān)系）、交通嚴(yán)重違規(guī)違章記 錄等；客戶征信信息、客戶在其他銀行或金融機(jī)構(gòu)的貸款 記錄、信用記錄等信息等；客戶的第三方征信評級情況 ， 客戶的社保、納稅、公積金等信息，客戶的社會保障情況 及經(jīng)濟(jì)能力，工作單

8、位性質(zhì)，客戶社會身份等；客戶在 第三方催收機(jī)構(gòu)的 催收記錄、社會信息等；出入境記 錄，客戶出入境目的地、出入境頻率等；國內(nèi)出行記錄， 客戶出行習(xí)慣等 ；采用同大數(shù)據(jù)廠商合作的方式 ，通過自 身平臺來采集數(shù)據(jù)或購買第三方數(shù)據(jù) 。（四）大數(shù)據(jù)平臺實(shí)現(xiàn)功能經(jīng)1!優(yōu)倩曽理堤升f鳳翻制落堆屢靜利分桁中小丫種寧軟風(fēng)暗評估嚴(yán)品宦價(jià)實(shí)時(shí)橄詐交島分折EVA, RAROC 庫岳膜型中小企業(yè)征悟15型變里財(cái)?shù)谧『寄Ｐ托庞每ㄓ懫砟ｈb業(yè)務(wù)系統(tǒng)外音隘亞大數(shù)據(jù)平臺功能架構(gòu)圖(1 )批量實(shí)現(xiàn)較高水準(zhǔn)的個(gè)性化客戶產(chǎn)品服務(wù)，增加客戶粘性，推動業(yè)務(wù)創(chuàng)新。有效地將大數(shù)據(jù)分析系統(tǒng)夠構(gòu) 建客戶360度全方位視圖，設(shè)計(jì)更有競爭力的創(chuàng)新產(chǎn)品

9、。對 企業(yè)型客戶的財(cái)務(wù)狀況、相關(guān)產(chǎn)業(yè)鏈上下游數(shù)據(jù)分析，把握客現(xiàn)在的狀況，更可以通過數(shù)據(jù)的交換、映射對其進(jìn)行短期、中期預(yù)測未來發(fā)展?fàn)顩r。同時(shí)通過與同行業(yè)中的企業(yè)比較，以及利用公共平臺收集企業(yè)的上、游對其評價(jià)，取得多維度的評估，對中小企業(yè)風(fēng)險(xiǎn)進(jìn)行有效的識別，從而緩解銀行與中小企業(yè)信息不對稱問題，更好地推動中小企業(yè)市場業(yè)務(wù)創(chuàng)新。(2) 針對客戶需求，實(shí)現(xiàn)精準(zhǔn)營銷。銀行借助大數(shù)據(jù) 分析平臺，通過對客戶的瀏覽記錄、購買路徑、消費(fèi)數(shù)據(jù)， 進(jìn)行挖掘、追蹤、分析，將不同的客戶群體進(jìn)行聚類，根據(jù)不同的客戶特性打造個(gè)性化產(chǎn)品營銷服務(wù)，將最適合的產(chǎn)品服務(wù)推介給最需要的客戶。提高客戶對銀行服務(wù)的認(rèn)可程度以及客戶經(jīng)理在

10、營銷過程中的專業(yè)程度。（3） 增強(qiáng)風(fēng)險(xiǎn)管控能力。大數(shù)據(jù)分析幫助銀行摒棄原 來過度依靠貸款人提供財(cái)務(wù)報(bào)表獲取信息的業(yè)務(wù)方式，轉(zhuǎn)而對其資產(chǎn)價(jià)格、賬務(wù)流水、相關(guān)業(yè)務(wù)活動等流動性數(shù)據(jù) 進(jìn)行動態(tài)監(jiān)控，了解客戶的自然屬性和行為屬性 ，結(jié)合客 戶行為分析、客戶信用度分析、客戶風(fēng)險(xiǎn)分析以及客戶的 資產(chǎn)負(fù)債狀況，從而有效提升客戶信息透明度，建立完善的風(fēng)險(xiǎn)防范體系。（4） 促進(jìn)銀行內(nèi)部管理流程化，降低管理運(yùn)營成本。運(yùn)用大數(shù)據(jù)能夠增加銀行內(nèi)部的透明度，使企業(yè)上下級之間的信息流通更順暢；同時(shí)，基于大數(shù)據(jù)優(yōu)化企業(yè)內(nèi)部的各種流程，以及通過自己和社會信息歸集渠道，了解客戶真實(shí)反映，積極改進(jìn)和提高，大大縮短信息收集、反饋時(shí)

11、間，提高企業(yè)運(yùn)作效率。而通過大數(shù)據(jù)應(yīng)用和分析，能夠準(zhǔn)確定位內(nèi)部管理缺陷，制定有針對性的改進(jìn)措施，實(shí)行符合自身特點(diǎn)的管理模式，進(jìn)而降低管理運(yùn)營成本。（五）平臺的技術(shù)架構(gòu)為實(shí)現(xiàn)上述功能經(jīng)多方考察研討擬采用FusioninsightHD平臺作為大數(shù)據(jù)基礎(chǔ)平臺。Fusioninsight是企業(yè)級大數(shù) 據(jù)存儲、查詢和分析的統(tǒng)一平臺。它以海量數(shù)據(jù)處理引擎和實(shí)時(shí)數(shù)據(jù)處理引擎為核心 ,并針對金融、運(yùn)營商等數(shù)據(jù) 密集型行業(yè)的運(yùn)行維護(hù) 、應(yīng)用開發(fā)等需求，打造了敏捷、 智慧、可信的平臺軟件、建模中間件及0M系統(tǒng)，讓企業(yè)可 以更快、更準(zhǔn)、更穩(wěn)的從各類繁雜無序的海量數(shù)據(jù)中發(fā)現(xiàn) 全新價(jià)值點(diǎn)和企業(yè)商機(jī)。fusknun 對F

12、 HDSowetlll學(xué)習(xí)參考大數(shù)據(jù)平臺架構(gòu)圖忖三萬勰平臺:筲三萬開發(fā)平臺應(yīng)月系統(tǒng)第三方管理系統(tǒng)：I- « 丄北向接口Oczie她程M)HM已（統(tǒng)計(jì)分祈）HBasE（海重叢稠隨肝屈!：©蟹晉牛|槪庫-:Loader臥IWQ 加戟工具）<xMapReduce麴數(shù)握分析集養(yǎng)呂理丿壽HDF3（存儲海量結(jié)構(gòu)化數(shù)獗非結(jié)構(gòu)化自據(jù)）Fusion Insight Hidaop 平合> *W* V H V W W *v *W V V N F =W W "大數(shù)據(jù)平臺與其他相關(guān)系統(tǒng)接口描述圖（七）大數(shù)據(jù)平臺的網(wǎng)絡(luò)拓?fù)洌ò耍┐髷?shù)據(jù)平臺承載的應(yīng)用系統(tǒng)1. 客戶綜合服務(wù)平臺依托大

13、數(shù)據(jù)分析整合四大板塊銀行客戶信息，建設(shè)客戶綜合服務(wù)平臺，逐步建立客戶數(shù)據(jù)模型、數(shù)據(jù)標(biāo)準(zhǔn)以及統(tǒng)一的客戶信息視圖，將分散在各系統(tǒng)的客戶信息數(shù)據(jù)集 中整合、統(tǒng)一管理,支持客戶分類管理和差異化需求,提升服務(wù)質(zhì)量和服務(wù)效率；按照以客戶為中心的流程銀行”理念，推進(jìn)業(yè)務(wù)運(yùn)作流程化，推動流程革新，在流程各環(huán)節(jié)強(qiáng)化風(fēng)險(xiǎn)控制，落實(shí)合規(guī)要求；實(shí)現(xiàn)對客戶的價(jià)值分析與 評價(jià)，以科技手段引導(dǎo)產(chǎn)品創(chuàng)新、產(chǎn)品營銷和風(fēng)險(xiǎn)控制 ，通過差異化定價(jià)實(shí)現(xiàn)營銷服務(wù)戰(zhàn)略的轉(zhuǎn)變。2. 存貸產(chǎn)品利率定價(jià)與管理系統(tǒng)通過大數(shù)據(jù)分析，打造覆蓋事前報(bào)價(jià)、事中執(zhí)行及控 制、事后監(jiān)測管理的全流程利率定價(jià)及管理體系，使利率管理貫穿整個(gè)業(yè)務(wù)價(jià)值流程；建立適應(yīng)

14、未來變化的利率組 成結(jié)構(gòu)，支持靈活、差異化的產(chǎn)品利率，通過利息公共構(gòu) 件提供靈活多樣的多種計(jì)息方式，完善利率管理系統(tǒng)中利率審批、利率風(fēng)險(xiǎn)管理、利率定價(jià)分析功能，以提升我行 精細(xì)化利率管理及風(fēng)險(xiǎn)管控能力。3. 加強(qiáng)線上平臺整合（1）電商平臺整合通過與電商平臺的對接，將更多金融業(yè)務(wù)滲透到企業(yè)產(chǎn)業(yè)鏈條各環(huán)節(jié)，圍繞核心企業(yè)大數(shù)據(jù)探索上下游企業(yè)自 動化應(yīng)收賬款融資、綜合授信等產(chǎn)業(yè)鏈金融服務(wù)，從而實(shí)現(xiàn)信息流、資金流及物流的整合 ，提升金融服務(wù)的效率和 深度，為電商平臺提供有力的信用增級、安全的資金監(jiān)管豐富的交易場景、便捷的支付體系、健全的賬戶管理、特 色的會員服務(wù)、專業(yè)的融資貿(mào)易等金融服務(wù)(2)互聯(lián)網(wǎng)平臺整合用互聯(lián)網(wǎng)改造傳統(tǒng)金融業(yè)務(wù)流程,促進(jìn)金融走向數(shù)字化，推進(jìn)金融業(yè)務(wù)從以往的人工化融合轉(zhuǎn)向數(shù)字化牽引；通過移動支付、第三方支付、大數(shù)據(jù)、眾籌融資、網(wǎng)絡(luò)銀 行等方面的建設(shè)實(shí)現(xiàn)向 開放、共享、去中心化、平等、普 惠”的新型數(shù)字金融的轉(zhuǎn)變。4. 小微貸系統(tǒng)運(yùn)用大數(shù)據(jù)技術(shù)，解決小微企業(yè)及農(nóng)戶融資難問題；加強(qiáng)大數(shù)據(jù)風(fēng)控，更精確地評價(jià)客戶信用，提升風(fēng)險(xiǎn)決策 實(shí)時(shí)性，將內(nèi)控規(guī)則嵌入交易流程