醫(yī)養(yǎng)結(jié)合大數(shù)據(jù)平臺(tái)建設(shè)方案相關(guān)兩份資料

醫(yī)養(yǎng)結(jié)合大數(shù)據(jù)平臺(tái)建設(shè)方案目錄AGENDA0102需求分析信息化方案03項(xiàng)目頂層設(shè)計(jì)總覽0404智能化方案0405案例06進(jìn)度規(guī)劃和價(jià)格預(yù)估01需求分析01桃園頤養(yǎng)中心采用“互聯(lián)網(wǎng)+智慧養(yǎng)老”模式，基于“5G智能”和NB-IOT技術(shù)，融合云計(jì)算、大數(shù)據(jù)、移動(dòng)互聯(lián)網(wǎng)等最前沿信息技術(shù)產(chǎn)品，通過(guò)采集和分析人體體征、整合臨床數(shù)據(jù)、以及室內(nèi)外環(huán)境等數(shù)據(jù)，實(shí)現(xiàn)權(quán)威的體檢中心、健康管理中心、康復(fù)理療中心、養(yǎng)老服務(wù)中心之間的信息互聯(lián)互通和分析處理。為老人提供遠(yuǎn)程護(hù)理、遠(yuǎn)程會(huì)診、安全報(bào)警等智能化服務(wù)，真正實(shí)現(xiàn)數(shù)字化、網(wǎng)絡(luò)化、智能化健康養(yǎng)老。減少人員的投入，用技術(shù)手段實(shí)現(xiàn)智能化看護(hù)、養(yǎng)護(hù)服務(wù)。

建立一站式大健康管理全息體系，打造國(guó)家級(jí)醫(yī)養(yǎng)結(jié)合一體化養(yǎng)老示范基地。01項(xiàng)目目標(biāo)數(shù)據(jù)沉淀算法優(yōu)化01衛(wèi)建委對(duì)社區(qū)養(yǎng)老的定位幫助桃園頤養(yǎng)社區(qū)，打造人工智能的輔助診療平臺(tái)，提高基層醫(yī)生的診斷水平小病善治大病善辨急病善轉(zhuǎn)慢病善管智能醫(yī)養(yǎng)結(jié)合定位醫(yī)生診斷與當(dāng)?shù)卣献?，走訪專家，社區(qū)醫(yī)院的醫(yī)生，制定適合當(dāng)?shù)氐募膊》诸悩?biāo)準(zhǔn)對(duì)于不同的疾病分類，給予不同的輔助診療建議信息化和流程化管理，減少人工的干預(yù)和過(guò)多參與患者就診輔助診療平臺(tái)小病疾病診斷疾病診療建議大病疾病診斷急病與120打通，未入院提前診斷，應(yīng)對(duì)措施指南疾病診斷慢病長(zhǎng)期慢病管理轉(zhuǎn)診患者全生命周期管理和追蹤患者信息癥狀&病史01數(shù)據(jù)整合的云平臺(tái)打通各個(gè)合作單位的系統(tǒng)和數(shù)據(jù)平臺(tái)，形成統(tǒng)一的大數(shù)據(jù)中心通過(guò)系統(tǒng)的直接數(shù)據(jù)對(duì)接，或者用戶授權(quán)的方式來(lái)獲取個(gè)體和群體的健康數(shù)據(jù)和檔案利用中心平臺(tái)來(lái)實(shí)現(xiàn)各數(shù)據(jù)孤島的整合，建立全面的個(gè)體健康檔案管理和群體健康監(jiān)控系統(tǒng)123醫(yī)養(yǎng)一體化長(zhǎng)者公寓，康復(fù)中心、體檢中心、護(hù)理醫(yī)院、老年病?？漆t(yī)院的運(yùn)營(yíng)管理面向院內(nèi)及院外會(huì)員的慢病和健康管理高端外部醫(yī)療資源的協(xié)同及管理客戶關(guān)系管理會(huì)員制養(yǎng)老看護(hù)平臺(tái)高端體檢服務(wù)高端診療就診平臺(tái)45基于5G和物聯(lián)網(wǎng)的智慧醫(yī)療及老年看護(hù)綜合管控老人/親屬、醫(yī)生及機(jī)構(gòu)工作人員的溝通管理醫(yī)養(yǎng)結(jié)合云平臺(tái)01需求分析以體檢為基礎(chǔ)，健康管理為服務(wù)的醫(yī)養(yǎng)平臺(tái)互聯(lián)網(wǎng)醫(yī)療平臺(tái)智慧醫(yī)療大數(shù)據(jù)平臺(tái)01醫(yī)養(yǎng)社區(qū)運(yùn)營(yíng)的變革降低人力投入成本內(nèi)外部快速響應(yīng)提升人員工作效率通過(guò)技術(shù)優(yōu)勢(shì)，減少人員投入減少總的服務(wù)人員數(shù)量利用技術(shù)，提升人員更高效工作讓工作人員能夠充分了解在正確的時(shí)間、趕到正確的地點(diǎn)、提供正確的服務(wù)人機(jī)協(xié)同，形成和外部的整體快速響應(yīng)，實(shí)現(xiàn)全面的養(yǎng)老看護(hù)分級(jí)服務(wù)、分級(jí)響應(yīng)、有機(jī)協(xié)同02項(xiàng)目頂層設(shè)計(jì)總覽醫(yī)養(yǎng)結(jié)合的路徑021體制機(jī)制構(gòu)建以服務(wù)人群為導(dǎo)向以服務(wù)需求為基礎(chǔ)以服務(wù)內(nèi)容為支撐對(duì)服務(wù)人群進(jìn)行評(píng)估和分級(jí)管理對(duì)服務(wù)機(jī)構(gòu)加以實(shí)施監(jiān)管養(yǎng)老機(jī)構(gòu)和醫(yī)療機(jī)構(gòu)近距離規(guī)劃，簽訂合作協(xié)議推進(jìn)養(yǎng)老機(jī)構(gòu)建設(shè)醫(yī)療機(jī)構(gòu)，醫(yī)療水平至少達(dá)到一級(jí)醫(yī)院以上構(gòu)建智能養(yǎng)老信息化平臺(tái)建設(shè)老人信息數(shù)據(jù)庫(kù)智能健康、智能監(jiān)護(hù)構(gòu)建區(qū)域健康管理信息平臺(tái)高端醫(yī)療資源平臺(tái)對(duì)接遠(yuǎn)程醫(yī)療遠(yuǎn)程智能健康管理建立老人評(píng)估指標(biāo)體系建立服務(wù)質(zhì)量評(píng)價(jià)指標(biāo)系統(tǒng)2優(yōu)化模式構(gòu)建3信息構(gòu)建4評(píng)估、評(píng)價(jià)指標(biāo)體系醫(yī)療機(jī)構(gòu)的信息化建設(shè)在不斷升級(jí)02

實(shí)時(shí)地進(jìn)行

感知、分析、和行動(dòng)車聯(lián)網(wǎng)虛擬現(xiàn)實(shí)物聯(lián)網(wǎng)移動(dòng)互聯(lián)網(wǎng)自然語(yǔ)言處理HIS系統(tǒng)人工智能邊緣計(jì)算人臉識(shí)別物流流程管理智慧醫(yī)院醫(yī)療冷鏈應(yīng)急預(yù)案管理系統(tǒng)臨床系統(tǒng)醫(yī)養(yǎng)結(jié)合醫(yī)院的系統(tǒng)02醫(yī)養(yǎng)結(jié)合一體兩翼依托雙中心在管理上醫(yī)養(yǎng)一體化，建立緊密的醫(yī)療協(xié)作關(guān)系，從而實(shí)現(xiàn)醫(yī)療體系為養(yǎng)老體系提供包括診療、慢病防治等在內(nèi)的可靠的醫(yī)療服務(wù)支撐。自理老人半自理老人失能老人遠(yuǎn)程診療醫(yī)療/康復(fù)服務(wù)健康管理居家照護(hù)：服務(wù)延伸至社區(qū)

健康管理：醫(yī)療照護(hù)

養(yǎng)老基礎(chǔ)服務(wù)診療中心康復(fù)中心體檢中心長(zhǎng)者公寓醫(yī)養(yǎng)一體

膳食中心：營(yíng)養(yǎng)管理

快樂(lè)生活：幸福管理02醫(yī)養(yǎng)一體分級(jí)診療延伸社區(qū)02醫(yī)養(yǎng)數(shù)據(jù)的價(jià)值和發(fā)展人機(jī)學(xué)習(xí)+小數(shù)據(jù)開放云平臺(tái)+大數(shù)據(jù)全面健康智能平臺(tái)完成個(gè)人或家庭的健康“軌跡”報(bào)告通過(guò)數(shù)據(jù)累積，特征學(xué)習(xí)算法逐步清晰化個(gè)人的健康“畫像”，完成疾病預(yù)防的預(yù)測(cè)模型不斷豐富數(shù)據(jù)維度和精度，通過(guò)強(qiáng)化學(xué)習(xí)實(shí)現(xiàn)主動(dòng)、自我完善的智能平臺(tái)通過(guò)數(shù)據(jù)中心的病例庫(kù)對(duì)標(biāo)準(zhǔn)算法有精確地驗(yàn)證200+萬(wàn)病例，20億的事例和每個(gè)患者的4000數(shù)據(jù)點(diǎn)選取真實(shí)病例進(jìn)行驗(yàn)證02構(gòu)建基于桃園頤養(yǎng)社區(qū)的群體健康體系大數(shù)據(jù)存儲(chǔ)和管理平臺(tái)分布式文件系統(tǒng)HDFS表存儲(chǔ)HIVE列存儲(chǔ)HBASE非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)元數(shù)據(jù)Meta半結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)群體健康應(yīng)用平臺(tái)數(shù)據(jù)應(yīng)用Web前端應(yīng)用移動(dòng)端應(yīng)用客戶應(yīng)用個(gè)人客戶企業(yè)客戶愛(ài)康體系推薦引擎智能分析醫(yī)療知識(shí)圖譜構(gòu)建與智能分析平臺(tái)圖譜構(gòu)建實(shí)體抽取實(shí)體融合關(guān)系學(xué)習(xí)動(dòng)態(tài)更新圖譜存儲(chǔ)Neo4jNLP引擎ML引擎群組挖掘聚類分析預(yù)測(cè)模型語(yǔ)義理解智能問(wèn)答關(guān)系挖掘體系構(gòu)建03智慧醫(yī)療方案03信息化的目標(biāo)一體的管理體系支撐完整的服務(wù)體系支撐人工智能的專業(yè)業(yè)務(wù)體系支撐打造養(yǎng)老機(jī)構(gòu)、醫(yī)療機(jī)構(gòu)、服務(wù)機(jī)構(gòu)一體化的管理體系支撐涵蓋健康管理、養(yǎng)老、醫(yī)療、居家服務(wù)等全流程的服務(wù)體系專業(yè)化的養(yǎng)老、醫(yī)療業(yè)務(wù)體系03人工智能算法模型分析諸多健康相關(guān)的數(shù)據(jù)源（癥狀、疾病歷史、身體條件等），特征學(xué)習(xí)和權(quán)重分析這些數(shù)據(jù)的關(guān)聯(lián)性和影響程度。整合各類數(shù)據(jù)，精度和效率完全超越人類醫(yī)生，實(shí)現(xiàn)真正實(shí)時(shí)的健康關(guān)懷，未病先干預(yù)。數(shù)據(jù)源臨床數(shù)據(jù)運(yùn)動(dòng)數(shù)據(jù)飲食習(xí)慣體檢數(shù)據(jù)工作環(huán)境過(guò)敏源疫苗家庭病史體質(zhì)評(píng)估心理健康A(chǔ)I數(shù)據(jù)整合AI風(fēng)險(xiǎn)預(yù)測(cè)AI干預(yù)管理疾病風(fēng)險(xiǎn)提示專科檢查建議健康改善建議持續(xù)跟蹤評(píng)估03健康數(shù)據(jù)的關(guān)聯(lián)性運(yùn)算03利用人工智能手段快速給出診斷和治療建議數(shù)據(jù)層處理服務(wù)實(shí)體

養(yǎng)老公寓康復(fù)中心體檢中心診療中心健康管理中心統(tǒng)一的服務(wù)入口健康管理平臺(tái)健康檔案健康監(jiān)測(cè)健康評(píng)估健康指導(dǎo)設(shè)備管理數(shù)據(jù)采集養(yǎng)老服務(wù)平臺(tái)會(huì)員管理養(yǎng)老服務(wù)系統(tǒng)服務(wù)商管理預(yù)約受理工單評(píng)價(jià)安全監(jiān)護(hù)系統(tǒng)居家監(jiān)護(hù)移動(dòng)監(jiān)護(hù)養(yǎng)老公寓運(yùn)營(yíng)平臺(tái)基礎(chǔ)功能營(yíng)銷管理

入住管理

服務(wù)管理運(yùn)營(yíng)管理財(cái)務(wù)管理報(bào)表管理聯(lián)網(wǎng)報(bào)警管理平臺(tái)系統(tǒng)養(yǎng)老社區(qū)會(huì)員管理系統(tǒng)電子商務(wù)平臺(tái)客戶關(guān)系管理照護(hù)/康復(fù)服務(wù)照護(hù)/康復(fù)評(píng)估照護(hù)/康復(fù)計(jì)劃照護(hù)/康復(fù)任務(wù)工作計(jì)劃遠(yuǎn)程醫(yī)療系統(tǒng)遠(yuǎn)程醫(yī)療信息共享系統(tǒng)遠(yuǎn)程視頻通訊系統(tǒng)慢病管理慢病篩查系統(tǒng)糖尿病慢病管理睡眠管理系統(tǒng)慢病管理系統(tǒng)AI輔助診療系統(tǒng)展示中心指揮調(diào)度中心運(yùn)營(yíng)調(diào)度（呼叫中心座席）集中展示智慧養(yǎng)老樣板間專業(yè)的業(yè)務(wù)系統(tǒng)互聯(lián)網(wǎng)門戶微信/APP呼叫中心自助查詢機(jī)03系統(tǒng)架構(gòu)統(tǒng)一標(biāo)準(zhǔn)數(shù)據(jù)客戶信息數(shù)據(jù)庫(kù)

健康檔案數(shù)據(jù)庫(kù)

電子病歷志愿者數(shù)據(jù)庫(kù)

RESTAPI持續(xù)在線服務(wù)匹配和合并分布化流程關(guān)聯(lián)和聚合標(biāo)準(zhǔn)化/富集化排列/分類/集群趨勢(shì)和預(yù)測(cè)搜索/發(fā)現(xiàn)/協(xié)同03桃園頤養(yǎng)的會(huì)員服務(wù)體系利用人工智能提供精準(zhǔn)增值服務(wù)群體用戶個(gè)體用戶高端會(huì)員搭建智能體檢、問(wèn)診、導(dǎo)醫(yī)、健康管理、精準(zhǔn)營(yíng)銷平臺(tái)各分院健康服務(wù)產(chǎn)品的布局與優(yōu)化重大陽(yáng)性隨訪、熱線醫(yī)生、銷售等醫(yī)療管理協(xié)作平臺(tái)定制個(gè)體化的體檢項(xiàng)目/套餐，以及保險(xiǎn)與保費(fèi)方案推送個(gè)體化的健康管理信息（健康資訊、飲食方案、運(yùn)動(dòng)方案等）智能解讀體檢報(bào)告，疾病風(fēng)險(xiǎn)預(yù)測(cè)，全面升級(jí)優(yōu)化個(gè)檢報(bào)告銜接日常健康信息（生理指標(biāo)、睡眠、行為等）監(jiān)測(cè)，實(shí)現(xiàn)智能健康干預(yù)團(tuán)檢報(bào)告、HR平臺(tái)、行業(yè)白皮書的多維度自動(dòng)展示定制化的行業(yè)（大客戶）健康解決方案群體性的康健計(jì)劃和附加服務(wù)03健康云服務(wù)平臺(tái)健康管理服務(wù)自動(dòng)關(guān)聯(lián)算法自動(dòng)給出建議自動(dòng)輔助安排養(yǎng)護(hù)服務(wù)03慢病管理-慢病篩查系統(tǒng)健康管理信息平臺(tái)健康管理平臺(tái)醫(yī)療衛(wèi)生資源生活服務(wù)資源政府社區(qū)資源資源匯聚整合各類資源健康云服務(wù)平臺(tái)安康監(jiān)護(hù)系統(tǒng)健康服務(wù)系統(tǒng)大數(shù)據(jù)分析系統(tǒng)主動(dòng)關(guān)懷系統(tǒng)信息管理系統(tǒng)健康生活館醫(yī)療檢測(cè)設(shè)備運(yùn)動(dòng)康復(fù)設(shè)備按摩理療設(shè)備居家監(jiān)測(cè)設(shè)備獨(dú)居老人安全監(jiān)測(cè)慢病數(shù)據(jù)監(jiān)測(cè)睡眠數(shù)據(jù)監(jiān)測(cè)老人防走失設(shè)備呼叫中心養(yǎng)老信息化平臺(tái)老人信息數(shù)據(jù)庫(kù)基礎(chǔ)設(shè)施數(shù)據(jù)庫(kù)服務(wù)商管理系統(tǒng)服務(wù)管理系統(tǒng)統(tǒng)計(jì)報(bào)表系統(tǒng)0303護(hù)理院/衛(wèi)生服務(wù)中心信息平臺(tái)公共衛(wèi)生服務(wù)康復(fù)護(hù)理管理家庭醫(yī)生管理服務(wù)醫(yī)院基礎(chǔ)管理系統(tǒng)（HIS）智能化電子病歷實(shí)驗(yàn)室信息管理系統(tǒng)（LIS）醫(yī)學(xué)影像管理系統(tǒng)（PACS）03遠(yuǎn)程醫(yī)療管理平臺(tái)03公共服務(wù)平臺(tái)服務(wù)通過(guò)APP、互聯(lián)網(wǎng)門戶、自助查詢機(jī)等多種方式提供給居家或在院的老年人，以及老年人的家屬。WEB門戶APP微信公眾號(hào)自助查詢機(jī)手機(jī)端個(gè)性化報(bào)告03展示中心03大數(shù)據(jù)平臺(tái)-園區(qū)醫(yī)療管理03大數(shù)據(jù)平臺(tái)-個(gè)體健康分析03大數(shù)據(jù)平臺(tái)-專業(yè)疾病分析03大數(shù)據(jù)平臺(tái)-基因檢測(cè)報(bào)告03一體化的管理所有的業(yè)務(wù)運(yùn)行、運(yùn)營(yíng)狀況、基礎(chǔ)設(shè)施設(shè)備等均可以在一個(gè)入口進(jìn)行查看、管理，支持移動(dòng)端、網(wǎng)頁(yè)端、大屏等展現(xiàn)方式035G技術(shù)的支持和應(yīng)用遠(yuǎn)程醫(yī)療遠(yuǎn)程健康監(jiān)控遠(yuǎn)程問(wèn)診醫(yī)學(xué)傳感器醫(yī)學(xué)穿戴設(shè)備遠(yuǎn)程診療、專家會(huì)診醫(yī)療傳感器連接到多個(gè)節(jié)點(diǎn)，實(shí)現(xiàn)網(wǎng)絡(luò)連接高可靠性安全共享

生物特征數(shù)據(jù)03知識(shí)圖譜結(jié)構(gòu)病癥和病理關(guān)聯(lián)（1715條）癥狀表現(xiàn)（418條）臨床病種（72種）全科分類（12類）Calculator的功能Actions的功能Questions

的功能Module&Reports的功能Answers的功能知識(shí)結(jié)構(gòu)模型機(jī)器學(xué)習(xí)算法03實(shí)時(shí)的關(guān)聯(lián)性分析，指導(dǎo)性預(yù)測(cè)大數(shù)據(jù)分析和管理平臺(tái)數(shù)據(jù)可用性和可訪問(wèn)性：高級(jí)數(shù)據(jù)可視化直觀的最終用戶應(yīng)用程序洞察力和預(yù)測(cè)電子健康報(bào)告和疾病管理疾病預(yù)測(cè)和控制健康指導(dǎo)和運(yùn)動(dòng)建議慢病管理和實(shí)時(shí)監(jiān)控CompanyLogisticsConsultantsClientsSuppliersVendorsAgenciesEmployees現(xiàn)場(chǎng)用戶桃園養(yǎng)老管理平臺(tái)管理人員從各類系統(tǒng)收集的數(shù)據(jù)第三方的臨床數(shù)據(jù)或者體檢數(shù)據(jù)穿戴設(shè)備或者醫(yī)療設(shè)備數(shù)據(jù)即服務(wù)數(shù)據(jù)驅(qū)動(dòng)的應(yīng)用03基于實(shí)時(shí)數(shù)據(jù)的人工智能預(yù)診模型患者錄入基本屬性疾病信息歷史病例人工智能分析健康評(píng)估疾病預(yù)測(cè)治療建議就醫(yī)建議患者選擇就醫(yī)科室推薦就診時(shí)間確認(rèn)患者信息同步到EMR患者選擇自我管理可穿戴設(shè)備錄入日常健康指導(dǎo)日常健康記錄醫(yī)生工作準(zhǔn)備預(yù)知患者病情高效問(wèn)診醫(yī)生診斷結(jié)合綜合健康狀況評(píng)估結(jié)合病史診斷結(jié)果錄入EMR，并同步到分析平臺(tái)患者端分析平臺(tái)患者端醫(yī)生端患者端患者長(zhǎng)期健康管理幫助桃園頤養(yǎng)，打造人工智能的預(yù)診平臺(tái)，實(shí)現(xiàn)未病先防、預(yù)先干預(yù)04實(shí)時(shí)醫(yī)養(yǎng)管理方案04基于人工智能圖譜的醫(yī)養(yǎng)平臺(tái)04實(shí)時(shí)觸發(fā)快速響應(yīng)在邊緣設(shè)備上

進(jìn)行事件處理主平臺(tái)運(yùn)行在云端

或者本地服務(wù)器上對(duì)外部資源

進(jìn)行關(guān)聯(lián)整合自動(dòng)讓人或者

機(jī)器實(shí)時(shí)響應(yīng)智能交互平臺(tái)–讓系統(tǒng)和人無(wú)縫對(duì)接04技術(shù)上包括：視頻、手機(jī)、地理空間、云（電子病例）、傳統(tǒng)病例系統(tǒng)、報(bào)警和參與預(yù)警：病人的優(yōu)先級(jí)、藥物依賴性、120急救降低人員培訓(xùn)成本和看護(hù)頻次，實(shí)現(xiàn)人機(jī)互動(dòng)和醫(yī)護(hù)人員的實(shí)時(shí)響應(yīng)對(duì)老人情況的實(shí)時(shí)感知和響應(yīng)04更新實(shí)時(shí)的監(jiān)控儀表板一切正常痛苦的、

致命的征兆積極的警示和介入治療無(wú)明確征兆...利用預(yù)診模型，建立早期預(yù)防和干預(yù)系統(tǒng)自動(dòng)觸發(fā)，減少人工監(jiān)控04運(yùn)作流程實(shí)例心動(dòng)過(guò)速當(dāng)前病人的狀況從心跳感應(yīng)器獲取信息根據(jù)消息激活規(guī)則檢測(cè)病人警告手機(jī)應(yīng)用文字推送疾病預(yù)測(cè)模型Source源Rules規(guī)則Type態(tài)Rule規(guī)則Situation場(chǎng)景Rule規(guī)則Collaboration協(xié)作系統(tǒng)幫助人員來(lái)實(shí)現(xiàn)實(shí)時(shí)護(hù)理04實(shí)時(shí)的智能數(shù)據(jù)驅(qū)動(dòng)引擎移動(dòng)設(shè)備大數(shù)據(jù)本地部署的平臺(tái)云服務(wù)桌面端邊緣設(shè)備1：病人監(jiān)護(hù)監(jiān)測(cè)門診病人的健康狀況確定干預(yù)的要點(diǎn)減少重復(fù)入院率，避免財(cái)務(wù)影響2：精準(zhǔn)醫(yī)學(xué)持續(xù)評(píng)估病人的進(jìn)展使用真實(shí)世界證據(jù)對(duì)治療途徑進(jìn)行個(gè)性化修改3：庫(kù)存和供應(yīng)鏈管理管理和跟蹤高價(jià)值的醫(yī)療設(shè)備自動(dòng)庫(kù)存控制/需求預(yù)測(cè)設(shè)備供應(yīng)商使用實(shí)時(shí)使用數(shù)據(jù)來(lái)改進(jìn)產(chǎn)品-并提高交付到護(hù)理點(diǎn)的效率智能化支持現(xiàn)場(chǎng)及時(shí)診斷04醫(yī)療設(shè)備醫(yī)療設(shè)備

管理和連接臨床現(xiàn)場(chǎng)醫(yī)生管理用品和設(shè)備智能調(diào)度如：派單看護(hù)醫(yī)生增強(qiáng)現(xiàn)實(shí)情景型智能-醫(yī)療大數(shù)據(jù)平臺(tái)關(guān)聯(lián)性智能臨床服務(wù)

智能1、資產(chǎn)/病人警報(bào)-病例/工作單2、現(xiàn)場(chǎng)臨床醫(yī)師日程安排3、病例更新回饋系統(tǒng)和人員5.臨床醫(yī)生到達(dá)，攜帶平板電腦，同時(shí)獲得安裝支持6.給臨床醫(yī)師更新病例狀態(tài)背景，指示行動(dòng)/參與規(guī)劃患者4、現(xiàn)場(chǎng)臨床醫(yī)生到位時(shí)通知患者。HIS系統(tǒng)智慧分級(jí)服務(wù)–降低人工、提升效率04醫(yī)生專人服務(wù)?？浦笇?dǎo)/護(hù)理數(shù)據(jù)平臺(tái)專業(yè)看護(hù)/健康顧問(wèn)人機(jī)協(xié)作健康助理專家預(yù)約體檢提醒群體目標(biāo)回訪邀請(qǐng)醫(yī)護(hù)營(yíng)銷中心健康建議訂立時(shí)間手機(jī)端全自動(dòng)維護(hù)人機(jī)協(xié)作知識(shí)庫(kù)+AI算法自動(dòng)分類服務(wù)管理人員自動(dòng)篩查高服務(wù)級(jí)別低智慧分級(jí)服務(wù)方式服務(wù)類別控制人員規(guī)模健康管理平臺(tái)全智能模式05案例商業(yè)模式：

高端養(yǎng)老機(jī)構(gòu)+健康管理中心。

功能分區(qū)：

低區(qū)設(shè)立為康復(fù)，護(hù)理門診服務(wù)區(qū)域以及護(hù)理院；

中區(qū)長(zhǎng)者公寓；

頂層為高端老年有氧健身活動(dòng)區(qū)域及老年公寓配套服務(wù)區(qū)域；

入住對(duì)象：

養(yǎng)老剛需群體及以有養(yǎng)老需求的高凈值人群為目標(biāo)客群。

目標(biāo)：“醫(yī)康養(yǎng)”結(jié)合的養(yǎng)老、醫(yī)療、護(hù)理新模式特色：養(yǎng)老+專業(yè)護(hù)理養(yǎng)老+嵌入式高端醫(yī)療機(jī)構(gòu)：曙光鴻泰老年專科醫(yī)院養(yǎng)老地產(chǎn)類項(xiàng)目05醫(yī)養(yǎng)結(jié)合類項(xiàng)目國(guó)家級(jí)三級(jí)甲等醫(yī)院、四川省中醫(yī)藥科學(xué)院附屬醫(yī)院，是省、市、區(qū)基本醫(yī)療保險(xiǎn)及商業(yè)醫(yī)療保險(xiǎn)定點(diǎn)醫(yī)療機(jī)構(gòu)。四川省中西醫(yī)結(jié)合醫(yī)院四川省重點(diǎn)醫(yī)養(yǎng)結(jié)合試點(diǎn)項(xiàng)目。實(shí)現(xiàn)醫(yī)養(yǎng)結(jié)合的總體規(guī)劃目標(biāo)，充分發(fā)揮醫(yī)院在社會(huì)養(yǎng)老中的支柱保障作用，建設(shè)頤養(yǎng)中心、智慧養(yǎng)老、物聯(lián)網(wǎng)生理監(jiān)測(cè)終端3個(gè)軟件平臺(tái)。0505醫(yī)養(yǎng)結(jié)合類項(xiàng)目某地醫(yī)養(yǎng)結(jié)合老年健康社區(qū)正在規(guī)劃整個(gè)項(xiàng)目的頂層設(shè)計(jì)和運(yùn)營(yíng)模式，包括弱電智能化，健康云服務(wù)平臺(tái)、養(yǎng)老服務(wù)平臺(tái)、養(yǎng)老社區(qū)運(yùn)營(yíng)平臺(tái)、護(hù)理院/衛(wèi)生服務(wù)中心信息化平臺(tái)等醫(yī)養(yǎng)一體整體解決方案。國(guó)內(nèi)第一個(gè)通過(guò)綠色三星級(jí)認(rèn)證的醫(yī)院總建筑面積20885平方米，包括養(yǎng)老院和社區(qū)衛(wèi)生服務(wù)中心兩部分，其中養(yǎng)老院設(shè)置床位450床，為進(jìn)一步完善該地區(qū)配套養(yǎng)老、醫(yī)療設(shè)施，為社會(huì)居民、老齡人口提供可靠?jī)?yōu)質(zhì)的服務(wù)。05醫(yī)養(yǎng)結(jié)合類項(xiàng)目長(zhǎng)春養(yǎng)老服務(wù)整體建設(shè)主要包括市級(jí)醫(yī)養(yǎng)一體云服務(wù)平臺(tái)建設(shè)和護(hù)理院托管服務(wù)。預(yù)計(jì)投資9億元，基于“1+9+N”模式，在長(zhǎng)春建設(shè)1個(gè)市級(jí)養(yǎng)護(hù)一體機(jī)構(gòu)加9個(gè)區(qū)域性養(yǎng)護(hù)一體機(jī)構(gòu)，并將康復(fù)護(hù)理和五助服務(wù)延伸至379個(gè)社區(qū)日照中心！05養(yǎng)老服務(wù)商類項(xiàng)目泰州“德叔叔”社區(qū)居家養(yǎng)老包括智慧養(yǎng)老信息化管理平臺(tái)，52個(gè)日間照料中心健康管理，社區(qū)運(yùn)營(yíng)模式輸出。實(shí)現(xiàn)泰州某區(qū)域的社區(qū)居家智慧養(yǎng)老建設(shè)和運(yùn)營(yíng)。綠色智慧醫(yī)院0506進(jìn)度規(guī)劃及服務(wù)06項(xiàng)目進(jìn)度規(guī)劃項(xiàng)目的需求調(diào)研項(xiàng)目的具體項(xiàng)目規(guī)劃第三方系統(tǒng)和設(shè)備數(shù)據(jù)對(duì)接方案數(shù)據(jù)分析模型大數(shù)據(jù)監(jiān)控和呈現(xiàn)手機(jī)端的開發(fā)要求9月10月11月12月1月2月3月4月5月6月7月8月系統(tǒng)的設(shè)計(jì)和開發(fā)分析模型和知識(shí)庫(kù)的本地化和設(shè)計(jì)數(shù)據(jù)接口的標(biāo)準(zhǔn)化開發(fā)第三方服務(wù)接口的打通和準(zhǔn)備數(shù)據(jù)源的采集、對(duì)接、整理和結(jié)構(gòu)化數(shù)據(jù)分析的呈現(xiàn)設(shè)計(jì)、UI交互設(shè)計(jì)數(shù)據(jù)的生命周期管理和開發(fā)項(xiàng)目的開發(fā)、實(shí)施產(chǎn)品的初期驗(yàn)證和交付數(shù)據(jù)的標(biāo)準(zhǔn)化、協(xié)同和整合大數(shù)據(jù)平臺(tái)的原型驗(yàn)證大數(shù)據(jù)監(jiān)控管理平臺(tái)的功能驗(yàn)證整體數(shù)據(jù)平臺(tái)的交付使用和穩(wěn)定性人-機(jī)協(xié)同的場(chǎng)景測(cè)試和交付AI數(shù)據(jù)模型的驗(yàn)證和交付平臺(tái)的項(xiàng)目規(guī)劃

數(shù)據(jù)源的調(diào)研項(xiàng)目實(shí)施和開發(fā)項(xiàng)目的交付和驗(yàn)收06項(xiàng)目交付后服務(wù)本地化部署費(fèi)用：0中移動(dòng)云平臺(tái)云架構(gòu)部署分層數(shù)據(jù)管理系統(tǒng)升級(jí)費(fèi)用：0系統(tǒng)的升級(jí)數(shù)據(jù)庫(kù)+軟件升級(jí)數(shù)據(jù)接口升級(jí)維護(hù)保障支持費(fèi)用：1500元/人*天云平臺(tái)的維護(hù)系統(tǒng)運(yùn)行環(huán)境的維護(hù)數(shù)據(jù)的備份/容災(zāi)設(shè)備對(duì)接開發(fā)費(fèi)用：3500元/人*天硬件設(shè)備數(shù)據(jù)對(duì)接數(shù)據(jù)庫(kù)數(shù)據(jù)對(duì)接特殊一起設(shè)備的對(duì)接定制功能開發(fā)費(fèi)用：5000元/人*天定制功能的再開發(fā)功能/數(shù)據(jù)結(jié)構(gòu)的定制人員培訓(xùn)費(fèi)用：0系統(tǒng)的使用培訓(xùn)平臺(tái)的維護(hù)培訓(xùn)定制開發(fā)的指導(dǎo)培訓(xùn)Thankyou分享合作創(chuàng)造園區(qū)園區(qū)大數(shù)據(jù)治理解決方案目錄CONTENTS1園區(qū)大數(shù)據(jù)治理綜述2園區(qū)大數(shù)據(jù)治理總體架構(gòu)3園區(qū)大數(shù)據(jù)治理演進(jìn)路線4園區(qū)大數(shù)據(jù)治理建設(shè)實(shí)施5園區(qū)大數(shù)據(jù)治理治理目錄CONTENTS1園區(qū)大數(shù)據(jù)治理綜述智慧園區(qū)分析類應(yīng)用建設(shè)現(xiàn)狀基本分析智慧園區(qū)是綜合運(yùn)用以物聯(lián)網(wǎng)、云計(jì)算、大數(shù)據(jù)和移動(dòng)互聯(lián)網(wǎng)等為代表的現(xiàn)代科學(xué)技術(shù)和手段，是集高端發(fā)展的網(wǎng)絡(luò)化、信息化、智能化和現(xiàn)代化于一體的智慧園區(qū)，是以智慧管理、智慧產(chǎn)業(yè)、智慧民生等為重要內(nèi)容的園區(qū)發(fā)展的新模式。智慧管理、智慧產(chǎn)業(yè)、智慧民生三大工程助力智慧園區(qū)建設(shè)。智慧園區(qū)智慧園區(qū)分析類應(yīng)用建設(shè)現(xiàn)狀基本分析智慧園區(qū)分析類應(yīng)用建設(shè)現(xiàn)狀基本分析智慧園區(qū)分析類應(yīng)用建設(shè)現(xiàn)狀基本分析全面物聯(lián)充分整合協(xié)同運(yùn)作激勵(lì)創(chuàng)新即智能傳感設(shè)備將園區(qū)公共設(shè)施物聯(lián)成網(wǎng)。物聯(lián)網(wǎng)與互聯(lián)網(wǎng)系統(tǒng)完全對(duì)接融合。園區(qū)的各個(gè)關(guān)鍵系統(tǒng)和參與者進(jìn)行和諧高效地協(xié)作。園區(qū)、企業(yè)在智慧基礎(chǔ)設(shè)施之上進(jìn)行科技和業(yè)務(wù)的創(chuàng)新應(yīng)用。大數(shù)據(jù)服務(wù)內(nèi)容大數(shù)據(jù)全鏈路解決方案產(chǎn)業(yè)融合數(shù)據(jù)規(guī)劃硬件體系智慧運(yùn)營(yíng)數(shù)據(jù)中臺(tái)的開發(fā)與部署數(shù)據(jù)治理數(shù)據(jù)鏈接數(shù)據(jù)資產(chǎn)化數(shù)據(jù)挖掘大數(shù)據(jù)產(chǎn)品的開發(fā)及應(yīng)用智慧展廳智慧園區(qū)企業(yè)服務(wù)人工智能數(shù)據(jù)產(chǎn)業(yè)運(yùn)營(yíng)支持大數(shù)據(jù)產(chǎn)業(yè)研究傳統(tǒng)產(chǎn)業(yè)促進(jìn)人才培養(yǎng)技術(shù)創(chuàng)新邏輯關(guān)系感知層手機(jī)呼叫中心無(wú)線網(wǎng)絡(luò)攝像頭傳感器網(wǎng)絡(luò)internet平臺(tái)層系統(tǒng)層應(yīng)用層游客管理系統(tǒng)智慧展廳企業(yè)畫像園區(qū)管理企業(yè)服務(wù)行業(yè)監(jiān)測(cè)企業(yè)服務(wù)系統(tǒng)幸福園區(qū)APP一個(gè)數(shù)據(jù)平臺(tái)五大業(yè)務(wù)應(yīng)用三大工作步驟一套硬件體系數(shù)據(jù)治理數(shù)據(jù)資產(chǎn)化數(shù)據(jù)產(chǎn)品化一個(gè)數(shù)據(jù)平臺(tái)：數(shù)據(jù)中臺(tái)數(shù)據(jù)治理數(shù)據(jù)管理數(shù)據(jù)模型算法服務(wù)數(shù)據(jù)產(chǎn)品1、對(duì)于一個(gè)智慧園區(qū)或者產(chǎn)業(yè)園區(qū)來(lái)講，肯定包含了很多的系統(tǒng)，如：停車系統(tǒng)，企業(yè)服務(wù)系統(tǒng)、政務(wù)系統(tǒng)、網(wǎng)站、APP等等，這些系統(tǒng)所產(chǎn)生的數(shù)據(jù)需要有統(tǒng)一的數(shù)據(jù)中臺(tái)來(lái)進(jìn)行管理；2、通過(guò)業(yè)務(wù)對(duì)中臺(tái)的字滋養(yǎng)，可以培育產(chǎn)生新的業(yè)務(wù)，培養(yǎng)新的人才數(shù)據(jù)應(yīng)用架構(gòu)第三方數(shù)據(jù)各管理系統(tǒng)、園區(qū)APP等企業(yè)數(shù)據(jù)C端數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)管理后臺(tái)數(shù)據(jù)流動(dòng)數(shù)據(jù)過(guò)程數(shù)據(jù)數(shù)據(jù)Minpping數(shù)據(jù)清洗數(shù)據(jù)歸一智慧園區(qū)標(biāo)簽類目體系（初擬）服務(wù)引擎可視化組件項(xiàng)目信息智能設(shè)備物業(yè)公司入駐企業(yè)消費(fèi)者投資者物業(yè)服務(wù)企業(yè)服務(wù)員工服務(wù)投資者服務(wù)網(wǎng)絡(luò)輿情供應(yīng)鏈網(wǎng)絡(luò)數(shù)據(jù)………IBMS交通探針wifi安防通訊能耗管理建筑設(shè)備全壽命管理智慧交通智慧安防中央控制中心第三方應(yīng)用應(yīng)用1應(yīng)用2應(yīng)用3應(yīng)用n數(shù)據(jù)采集層數(shù)據(jù)中臺(tái)數(shù)據(jù)應(yīng)用層…企業(yè)監(jiān)管企業(yè)服務(wù)可視化應(yīng)用員工服務(wù)……能耗設(shè)施設(shè)備物聯(lián)網(wǎng)數(shù)據(jù)旅游數(shù)據(jù)政務(wù)數(shù)據(jù)文化體育產(chǎn)業(yè)服務(wù)企業(yè)服務(wù)智慧園區(qū)智慧生態(tài)鏈

執(zhí)法監(jiān)督智慧旅游行業(yè)發(fā)展信用融資智慧招商智慧教育設(shè)備預(yù)警智慧交通企業(yè)風(fēng)控智慧物管員工服務(wù)智慧展廳

創(chuàng)新引導(dǎo)智慧安防能耗管理智慧體育智慧園區(qū)智慧政務(wù)智慧管理智慧產(chǎn)業(yè)智慧服務(wù)大數(shù)據(jù)對(duì)園區(qū)的意義

實(shí)現(xiàn)由智能化到智慧化的轉(zhuǎn)變?yōu)閳@區(qū)園區(qū)提供大數(shù)據(jù)管理模式大數(shù)據(jù)為企業(yè)提供全生命周期的服務(wù)構(gòu)建園區(qū)與產(chǎn)業(yè)之間的大數(shù)據(jù)生態(tài)體系業(yè)務(wù)數(shù)據(jù)化：數(shù)據(jù)來(lái)源系統(tǒng)集成平臺(tái)數(shù)據(jù)門禁信息數(shù)據(jù)、車輛管理信息數(shù)據(jù)、探針數(shù)據(jù)、WIFI信息數(shù)據(jù)、攝像頭數(shù)據(jù)、電梯運(yùn)行數(shù)據(jù)、能耗數(shù)據(jù)、刷卡數(shù)據(jù)、設(shè)備使用數(shù)據(jù)、硬件設(shè)備日志、智能化數(shù)據(jù)等等平臺(tái)系統(tǒng)數(shù)據(jù)商務(wù)數(shù)據(jù)、企業(yè)基礎(chǔ)服務(wù)數(shù)據(jù)、繳費(fèi)數(shù)據(jù)、政策數(shù)據(jù)、商旅數(shù)據(jù)、接待數(shù)據(jù)、設(shè)備使用數(shù)據(jù)、企業(yè)活動(dòng)數(shù)據(jù)、企業(yè)裝修信息，園區(qū)消費(fèi)者信息、日常生活數(shù)據(jù)、通勤數(shù)據(jù)、招商數(shù)據(jù)、租金管理數(shù)據(jù)等等業(yè)態(tài)綜合數(shù)據(jù)酒店數(shù)據(jù)（酒店公司數(shù)據(jù)、客人數(shù)據(jù)、會(huì)員數(shù)據(jù)、交易數(shù)據(jù)、網(wǎng)絡(luò)數(shù)據(jù)等等）；商業(yè)數(shù)據(jù)（運(yùn)營(yíng)數(shù)據(jù)、管理數(shù)據(jù)、C端數(shù)據(jù)、交易數(shù)據(jù)、網(wǎng)絡(luò)數(shù)據(jù)、偏好信息）；體育中心數(shù)據(jù)（運(yùn)營(yíng)數(shù)據(jù)、管理數(shù)、活動(dòng)數(shù)據(jù)、比賽數(shù)據(jù)、會(huì)員數(shù)據(jù)，人流數(shù)據(jù)、運(yùn)動(dòng)數(shù)據(jù)）等等物業(yè)管理數(shù)據(jù)項(xiàng)目基礎(chǔ)信息，設(shè)備供應(yīng)商信息，服務(wù)商信息，物業(yè)公司信息、無(wú)關(guān)員工信息、物業(yè)歸屬信息、物業(yè)管理日志、物業(yè)服務(wù)日志、報(bào)修信息、工單信息、滿意度信息、投訴信息等等企業(yè)信息數(shù)據(jù)企業(yè)數(shù)量、企業(yè)名稱、企業(yè)類型、法人代表、企業(yè)規(guī)模、企業(yè)發(fā)展、業(yè)務(wù)業(yè)務(wù)、財(cái)務(wù)數(shù)據(jù)、稅務(wù)數(shù)據(jù)、員工信息、員工數(shù)量、員工結(jié)構(gòu)、人員流動(dòng)、薪資變動(dòng)等等第三方數(shù)據(jù)用電信息、用水信息、通信數(shù)據(jù)、銀行數(shù)據(jù)、工商數(shù)據(jù)、稅務(wù)數(shù)據(jù)、園區(qū)管委會(huì)數(shù)據(jù)、行政數(shù)據(jù)、執(zhí)法數(shù)據(jù)、質(zhì)監(jiān)質(zhì)檢數(shù)據(jù)、媒體信息、信用機(jī)構(gòu)數(shù)據(jù)、協(xié)會(huì)數(shù)據(jù)等等智慧智慧園區(qū)分析類應(yīng)用建設(shè)現(xiàn)狀基本分析關(guān)注的內(nèi)容存在的問(wèn)題基本的現(xiàn)狀園區(qū)大數(shù)據(jù)治理累積數(shù)據(jù)沒(méi)有充分利用缺乏面向整個(gè)園區(qū)的統(tǒng)一、完整的數(shù)據(jù)視圖；缺乏支撐園區(qū)日常應(yīng)急運(yùn)轉(zhuǎn)的風(fēng)險(xiǎn)評(píng)估體系；缺乏園區(qū)服務(wù)360度視圖，服務(wù)行為分析和預(yù)測(cè)無(wú)法實(shí)現(xiàn)；缺乏面向銀行應(yīng)急運(yùn)營(yíng)管理的關(guān)鍵績(jī)效指標(biāo)體系；……園區(qū)已建立面向整個(gè)園區(qū)服務(wù)的數(shù)據(jù)倉(cāng)庫(kù)，整合了前臺(tái)應(yīng)急運(yùn)營(yíng)數(shù)據(jù)和后臺(tái)管理數(shù)據(jù)，建立了面向園區(qū)服務(wù)的管理分析應(yīng)用；園區(qū)已開展服務(wù)民生等多種應(yīng)急，積累了一定量的應(yīng)急數(shù)據(jù)，同時(shí)應(yīng)急人員也從服務(wù)管理、風(fēng)險(xiǎn)評(píng)級(jí)和經(jīng)營(yíng)規(guī)模預(yù)測(cè)等方面，提出了大量分析預(yù)測(cè)需求；……數(shù)據(jù)平臺(tái)、數(shù)據(jù)應(yīng)用、數(shù)據(jù)管控……基礎(chǔ)數(shù)據(jù)平臺(tái)和BI應(yīng)用建設(shè)是未來(lái)一段時(shí)間的重點(diǎn)！數(shù)據(jù)平臺(tái)整體架構(gòu)；數(shù)據(jù)平臺(tái)各層建設(shè)的標(biāo)準(zhǔn)；較成熟的銀行業(yè)數(shù)據(jù)模型；數(shù)據(jù)質(zhì)量治理；元數(shù)據(jù)管理；

數(shù)據(jù)標(biāo)準(zhǔn)建設(shè)數(shù)據(jù)整合；

數(shù)據(jù)應(yīng)用建設(shè)；數(shù)據(jù)平臺(tái)的軟硬環(huán)境……園區(qū)大數(shù)據(jù)治理建設(shè)目標(biāo)外部非結(jié)構(gòu)化數(shù)據(jù)統(tǒng)一制定目標(biāo)和分析模型統(tǒng)一劃分分析主題統(tǒng)一設(shè)計(jì)數(shù)據(jù)模式統(tǒng)一規(guī)劃分析方法統(tǒng)一部署技術(shù)基礎(chǔ)統(tǒng)一定義BI應(yīng)用自定義報(bào)表工具行＋列的簡(jiǎn)單定義方式多種格式報(bào)表園區(qū)決策層園區(qū)職能管控層各級(jí)應(yīng)急操作層關(guān)注園區(qū)主要經(jīng)營(yíng)指標(biāo)應(yīng)急人員使用BI應(yīng)用實(shí)現(xiàn)應(yīng)急協(xié)作和創(chuàng)新BI分析工具供應(yīng)鏈銀行系統(tǒng)POP系統(tǒng)其他應(yīng)急系統(tǒng)云數(shù)據(jù)推送平臺(tái)已實(shí)現(xiàn)了主要園區(qū)服務(wù)及銀行應(yīng)急系統(tǒng)數(shù)據(jù)清洗、整合，為未來(lái)園區(qū)數(shù)據(jù)平臺(tái)提供了豐富的數(shù)據(jù)源。通過(guò)數(shù)據(jù)平臺(tái)和BI應(yīng)用建設(shè)，園區(qū)將搭建統(tǒng)一的大數(shù)據(jù)共享和分析平臺(tái)，對(duì)各類應(yīng)急進(jìn)行前瞻性預(yù)測(cè)及分析，為園區(qū)各層次用戶提供統(tǒng)一的決策分析支持，提升數(shù)據(jù)共享與流轉(zhuǎn)能力采購(gòu)管理系統(tǒng)查看職能單位的應(yīng)急經(jīng)營(yíng)情況智慧園區(qū)大數(shù)據(jù)治理頂層框架智慧園區(qū)大數(shù)據(jù)治理建設(shè)預(yù)期收益2.加強(qiáng)應(yīng)急協(xié)作實(shí)現(xiàn)分散在服務(wù)民生等各個(gè)應(yīng)急系統(tǒng)中的數(shù)據(jù)在數(shù)據(jù)平臺(tái)中的集中和整合，建立單一的產(chǎn)品、服務(wù)等數(shù)據(jù)的園區(qū)級(jí)視圖，有效促進(jìn)應(yīng)急的集成和協(xié)作，并為園區(qū)級(jí)分析、交叉銷售提供基礎(chǔ)3.促進(jìn)應(yīng)急創(chuàng)新園區(qū)應(yīng)急人員可以基于明細(xì)、可信的數(shù)據(jù)，進(jìn)行多維分析和數(shù)據(jù)挖掘，為銀行應(yīng)急創(chuàng)新（服務(wù)服務(wù)創(chuàng)新、產(chǎn)品創(chuàng)新等）創(chuàng)造了有利條件4.提升建設(shè)效率通過(guò)數(shù)據(jù)平臺(tái)對(duì)數(shù)據(jù)進(jìn)行集中，為管理分析、挖掘預(yù)測(cè)類等系統(tǒng)提供一致的數(shù)據(jù)基礎(chǔ)，改變現(xiàn)有系統(tǒng)數(shù)據(jù)來(lái)源多、數(shù)據(jù)處理復(fù)雜的現(xiàn)狀，實(shí)現(xiàn)應(yīng)用系統(tǒng)建設(shè)模式的轉(zhuǎn)變，提升相關(guān)IT系統(tǒng)的建設(shè)和運(yùn)行效率5.改善數(shù)據(jù)質(zhì)量從中長(zhǎng)期看，數(shù)據(jù)倉(cāng)庫(kù)對(duì)園區(qū)分散在各個(gè)應(yīng)急系統(tǒng)中的數(shù)據(jù)整合、清洗，有助于園區(qū)整體數(shù)據(jù)質(zhì)量的改善，提高的數(shù)據(jù)的實(shí)用性通過(guò)數(shù)據(jù)平臺(tái)實(shí)現(xiàn)數(shù)據(jù)集中，確保園區(qū)各級(jí)單位均可在保證數(shù)據(jù)隱私和安全的前提下使用數(shù)據(jù)，充分發(fā)揮數(shù)據(jù)作為園區(qū)重要資產(chǎn)的應(yīng)急價(jià)值1.實(shí)現(xiàn)數(shù)據(jù)共享智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)管控體系運(yùn)轉(zhuǎn)機(jī)制管控組織數(shù)據(jù)管控委員會(huì)數(shù)據(jù)所有人數(shù)據(jù)認(rèn)責(zé)人IT支持……管控流程數(shù)據(jù)接入流程數(shù)據(jù)變更流程數(shù)據(jù)授權(quán)流程數(shù)據(jù)退役流程標(biāo)準(zhǔn)/政策制定流程評(píng)價(jià)考核流程……評(píng)價(jià)與考核標(biāo)準(zhǔn)（數(shù)據(jù)標(biāo)準(zhǔn)、質(zhì)量要求、安全要求）遵守標(biāo)準(zhǔn)所需要的政策政策與標(biāo)準(zhǔn)遵從考評(píng)定義……數(shù)據(jù)產(chǎn)生者數(shù)據(jù)使用者………流程支撐流程支撐制定管控平臺(tái)工具支撐明確了數(shù)據(jù)管控過(guò)程中的組織結(jié)構(gòu)、角色、職責(zé)等。管控組織除了要負(fù)責(zé)制定數(shù)據(jù)標(biāo)準(zhǔn)、質(zhì)量、安全等要求外，還需要負(fù)責(zé)制定管控的相關(guān)流程和評(píng)價(jià)考核指標(biāo)等內(nèi)容?？荚u(píng)制定通過(guò)建立一些定性或定量的數(shù)據(jù)管控評(píng)價(jià)考核指標(biāo)，去評(píng)估及考核數(shù)據(jù)相關(guān)責(zé)任人職責(zé)履行情況、數(shù)據(jù)管控標(biāo)準(zhǔn)及數(shù)據(jù)政策的執(zhí)行情況等。規(guī)范了數(shù)據(jù)管控過(guò)程中，各個(gè)環(huán)節(jié)日常任務(wù)處理的運(yùn)作模式，例如數(shù)據(jù)定義如何變更、數(shù)據(jù)沖突如何協(xié)調(diào)等。采用專門的技術(shù)平臺(tái)支撐管控流程的自動(dòng)化，發(fā)布管控組織制定的一些相關(guān)標(biāo)準(zhǔn)和規(guī)范，及時(shí)反映管控過(guò)程中存在的一些問(wèn)題等。管控綜合管理標(biāo)準(zhǔn)/規(guī)范管理流程管理考核儀表盤……元數(shù)據(jù)管理應(yīng)急元數(shù)據(jù)管理技術(shù)元數(shù)據(jù)管理管理元數(shù)據(jù)分析……數(shù)據(jù)質(zhì)量管理稽核規(guī)則管理數(shù)據(jù)稽核質(zhì)量報(bào)告……工具支撐組織架構(gòu)、評(píng)價(jià)與考核、管控流程、管控工具這四個(gè)域相互作用、相互支撐，提供對(duì)各信息系統(tǒng)數(shù)據(jù)的管控。目錄CONTENTS2園區(qū)大數(shù)據(jù)治理總體架構(gòu)智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)歷史數(shù)據(jù)查詢數(shù)據(jù)交換平臺(tái)應(yīng)用集市數(shù)據(jù)區(qū)園區(qū)園區(qū)服務(wù)公檢法系統(tǒng)輿情控制系統(tǒng)金融系統(tǒng)……系統(tǒng)園區(qū)內(nèi)外部半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)大數(shù)據(jù)交換組件數(shù)據(jù)庫(kù)數(shù)據(jù)交換組件數(shù)據(jù)區(qū)數(shù)據(jù)交換組件數(shù)據(jù)計(jì)算層大數(shù)據(jù)區(qū)沙盤演練數(shù)據(jù)區(qū)數(shù)據(jù)應(yīng)用層實(shí)時(shí)數(shù)據(jù)區(qū)服務(wù)主題協(xié)議主題產(chǎn)品主題應(yīng)急沙盤演練數(shù)據(jù)增值產(chǎn)品園區(qū)服務(wù)數(shù)據(jù)供應(yīng)鏈數(shù)據(jù)增值產(chǎn)品數(shù)據(jù)區(qū)主題數(shù)據(jù)區(qū)……用戶訪問(wèn)層服務(wù)匯總賬戶匯總機(jī)構(gòu)匯總……社交媒體移動(dòng)互聯(lián)用戶評(píng)價(jià)訪問(wèn)日志處理后大數(shù)據(jù)待處理大數(shù)據(jù)流程調(diào)度監(jiān)控告警數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)質(zhì)量元數(shù)據(jù)數(shù)據(jù)安全流程調(diào)度平臺(tái)……數(shù)據(jù)管控平臺(tái)流程調(diào)度層數(shù)據(jù)管控層數(shù)據(jù)產(chǎn)生層數(shù)據(jù)交換層實(shí)時(shí)數(shù)據(jù)查詢服務(wù)管理財(cái)務(wù)管理……外部用戶貼源數(shù)據(jù)區(qū)……管理分析用戶歷史歸檔數(shù)據(jù)區(qū)IT人員風(fēng)險(xiǎn)管理智慧園區(qū)大數(shù)據(jù)治理總體產(chǎn)品框架非結(jié)構(gòu)化/半結(jié)構(gòu)化數(shù)據(jù)管理分析平臺(tái)（X86MPP集群）應(yīng)急系統(tǒng)結(jié)構(gòu)化數(shù)據(jù)基礎(chǔ)計(jì)算平臺(tái)（貼源數(shù)據(jù)區(qū)+主題數(shù)據(jù)區(qū)+大數(shù)據(jù)區(qū)）（Hadoop集群+Hive）數(shù)據(jù)交換平臺(tái)（自主開發(fā)交換組件+NAS存儲(chǔ)）實(shí)時(shí)分析平臺(tái)（內(nèi)存數(shù)據(jù)庫(kù)）沙盤演練平臺(tái)（Hadoop集群）數(shù)據(jù)大腦管控平臺(tái)FTPSFTP/HTTP/APICopyfromloalQueue云數(shù)據(jù)推送平臺(tái)增值產(chǎn)品平臺(tái)（Hadoop集群）歷史歸檔查詢平臺(tái)（Hadoop集群+Hive）Load（Hive）DistcpHQL+LoadDistcpDistcpHQL+LoadDistcpHQL+LoadSqoopSqoopSqoopMR流程調(diào)度平臺(tái)園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)產(chǎn)生層應(yīng)急系統(tǒng)產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù)園區(qū)日常園區(qū)服務(wù)處理過(guò)程中產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù)，存儲(chǔ)在關(guān)系型數(shù)據(jù)庫(kù)中，如：……園區(qū)日常應(yīng)急處理過(guò)程中產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù)，存儲(chǔ)在關(guān)系型數(shù)據(jù)庫(kù)中，如：……園區(qū)非結(jié)構(gòu)化數(shù)據(jù)日常應(yīng)急處理過(guò)程中產(chǎn)生的非結(jié)構(gòu)化數(shù)據(jù)，存儲(chǔ)形式多樣，主要包括用戶訪問(wèn)日志、用戶投訴、用戶點(diǎn)評(píng)……園區(qū)外部數(shù)據(jù)園區(qū)外部數(shù)據(jù)以非結(jié)構(gòu)化為主，主要包括國(guó)家政策法規(guī)、論壇等互聯(lián)網(wǎng)信息、地理位置等移動(dòng)信息、微博等社交媒體信息……

源數(shù)據(jù)內(nèi)容在本次項(xiàng)目實(shí)施中將采用以增量為主、全量為輔結(jié)合的方式獲取源數(shù)據(jù)園區(qū)和園區(qū)應(yīng)急系統(tǒng)的數(shù)據(jù)增量數(shù)據(jù)識(shí)別、獲取由云數(shù)據(jù)推送平臺(tái)負(fù)責(zé)，云數(shù)據(jù)推送平臺(tái)采用分析、對(duì)比源系統(tǒng)日志方式實(shí)現(xiàn)對(duì)于無(wú)法通過(guò)上述方式獲取增量的源系統(tǒng)數(shù)據(jù)，則采用某一個(gè)時(shí)間范圍內(nèi)的全部數(shù)據(jù)作為增量初始數(shù)據(jù)加載均采用全量模式源數(shù)據(jù)增量園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)交換層數(shù)據(jù)交換層設(shè)計(jì)目標(biāo)傳輸組件是根據(jù)數(shù)據(jù)源存儲(chǔ)的不同分類而設(shè)計(jì)的，本質(zhì)是通過(guò)分析數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)和數(shù)據(jù)存儲(chǔ)庫(kù)的特點(diǎn)來(lái)針對(duì)性的設(shè)計(jì)工具，以追求卓越的性能保證數(shù)據(jù)在平臺(tái)內(nèi)高速流轉(zhuǎn)保證數(shù)據(jù)交換過(guò)程中不失真保證數(shù)據(jù)交換過(guò)程中不丟失保證數(shù)據(jù)交換過(guò)程安全可靠數(shù)據(jù)區(qū)數(shù)據(jù)交換組件數(shù)據(jù)庫(kù)數(shù)據(jù)交換組件大數(shù)據(jù)交換組件園區(qū)系統(tǒng)數(shù)據(jù)服務(wù)層外部大數(shù)據(jù)園區(qū)系統(tǒng)Hadoop元數(shù)據(jù)云數(shù)據(jù)推送平臺(tái)數(shù)據(jù)平臺(tái)導(dǎo)入臨時(shí)區(qū)數(shù)據(jù)平臺(tái)導(dǎo)出臨時(shí)區(qū)NAS存儲(chǔ)ETL程序區(qū)園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)交換層NAS存儲(chǔ)Hadoop集群元數(shù)據(jù)區(qū)ETL數(shù)據(jù)處理程序區(qū)數(shù)據(jù)平臺(tái)臨時(shí)數(shù)據(jù)區(qū)存儲(chǔ)數(shù)據(jù)平臺(tái)各個(gè)Hadoop集群的元數(shù)據(jù)信息，如：HDFS文件系統(tǒng)元數(shù)據(jù)園區(qū)數(shù)據(jù)交換平臺(tái)每日獲取運(yùn)輸局推送平臺(tái)提供的應(yīng)急系統(tǒng)變化數(shù)據(jù)，暫存在NAS臨時(shí)數(shù)據(jù)區(qū)銀行數(shù)據(jù)平臺(tái)加工計(jì)算結(jié)果返回給應(yīng)急系統(tǒng)，暫存在NAS臨時(shí)數(shù)據(jù)區(qū)數(shù)據(jù)平臺(tái)ETL加工處理程序（數(shù)據(jù)壓縮、數(shù)據(jù)加載、各數(shù)據(jù)數(shù)據(jù)處理等）統(tǒng)一存儲(chǔ)在NAS集群指定目錄，各接口服務(wù)器通過(guò)文件系統(tǒng)Link建立映射園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)交換層大數(shù)據(jù)交換組件園區(qū)非結(jié)構(gòu)化、半結(jié)構(gòu)化數(shù)據(jù)，如：音頻、視頻、郵件、Office文檔、抵押品掃描件等園區(qū)外部非結(jié)構(gòu)化、半結(jié)構(gòu)化數(shù)據(jù)，如：微博、貼吧、論壇、用戶點(diǎn)擊流、用戶移動(dòng)位置等批量采集：大數(shù)據(jù)源以SFTP協(xié)議批量傳輸數(shù)據(jù)文件在線訪問(wèn)：開發(fā)Java或C應(yīng)用，調(diào)用大據(jù)源API，或以網(wǎng)絡(luò)平臺(tái)爬蟲方式抓取源系統(tǒng)非結(jié)構(gòu)化、半結(jié)構(gòu)化數(shù)據(jù)組件以實(shí)時(shí)和批量?jī)煞N模式實(shí)現(xiàn)下列功能：數(shù)據(jù)采集數(shù)據(jù)傳輸?shù)綌?shù)據(jù)交換平臺(tái)（接口服務(wù)器）NAS指定目錄存儲(chǔ)數(shù)據(jù)到數(shù)據(jù)平臺(tái)大數(shù)據(jù)區(qū)指定HDFS目錄定時(shí)抽取用戶訪問(wèn)日志，加載到數(shù)據(jù)平臺(tái)大數(shù)據(jù)區(qū)HDFS指定目錄，MR程序加工處理開發(fā)網(wǎng)絡(luò)爬蟲程序，掃描用戶微博，抓取用戶微博內(nèi)容，社交圈信息，存入大數(shù)據(jù)區(qū)處理對(duì)象實(shí)現(xiàn)技術(shù)實(shí)現(xiàn)功能應(yīng)用場(chǎng)景智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)交換層數(shù)據(jù)庫(kù)數(shù)據(jù)交換組件園區(qū)應(yīng)急系統(tǒng)產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù)，包括兩大來(lái)源：園區(qū)園區(qū)服務(wù)數(shù)據(jù)，數(shù)據(jù)存儲(chǔ)在Oracle、SQLServer、MySQL和MongoDB四類數(shù)據(jù)庫(kù)園區(qū)互聯(lián)網(wǎng)銀行應(yīng)急數(shù)據(jù)，數(shù)據(jù)存儲(chǔ)在MySQL數(shù)據(jù)庫(kù)Perl程序數(shù)據(jù)采集，調(diào)用Perl文件模塊相關(guān)函數(shù)，輪詢指定目錄，獲取數(shù)據(jù)文件數(shù)據(jù)核查，Perl執(zhí)行文件級(jí)數(shù)據(jù)質(zhì)量檢查數(shù)據(jù)加載，調(diào)用HiveLoad數(shù)據(jù)命令，加載到數(shù)據(jù)平臺(tái)臨時(shí)數(shù)據(jù)區(qū)的HiveTable組件以實(shí)時(shí)和批量模式實(shí)現(xiàn)下列功能：數(shù)據(jù)采集，輪詢NAS集群指定目錄，獲取數(shù)據(jù)文件（LZO壓縮）數(shù)據(jù)核查，對(duì)數(shù)據(jù)文件進(jìn)行質(zhì)量校驗(yàn)數(shù)據(jù)加載，加載數(shù)據(jù)到臨時(shí)數(shù)據(jù)區(qū)云數(shù)據(jù)推送平臺(tái)連接供應(yīng)鏈銀行系統(tǒng)數(shù)據(jù)庫(kù)，分析供應(yīng)鏈銀行MySQL數(shù)據(jù)庫(kù)日志，識(shí)別增量數(shù)據(jù)，存儲(chǔ)到銀行平臺(tái)NAS存儲(chǔ)的指定目錄，銀行平臺(tái)加載數(shù)據(jù)文件到數(shù)據(jù)平臺(tái)臨時(shí)區(qū)Hive表處理對(duì)象實(shí)現(xiàn)技術(shù)實(shí)現(xiàn)功能應(yīng)用場(chǎng)景園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)交換層數(shù)據(jù)區(qū)數(shù)據(jù)交換組件數(shù)據(jù)平臺(tái)計(jì)算層各數(shù)據(jù)區(qū)貼源數(shù)據(jù)區(qū)主題數(shù)據(jù)區(qū)集市數(shù)據(jù)區(qū)沙盤數(shù)據(jù)區(qū)大數(shù)據(jù)區(qū)歸檔數(shù)據(jù)區(qū)Sqoop實(shí)現(xiàn)集市數(shù)據(jù)區(qū)與數(shù)據(jù)平臺(tái)其他Hadoop數(shù)據(jù)區(qū)的數(shù)據(jù)交換Hadoop命令、Hive外部表、MR程序?qū)崿F(xiàn)數(shù)據(jù)平臺(tái)Hadoop數(shù)據(jù)區(qū)間的數(shù)據(jù)交換組件以批量方式實(shí)現(xiàn)下列數(shù)據(jù)交換功能：貼源數(shù)據(jù)區(qū)和主題數(shù)據(jù)區(qū)到集市數(shù)據(jù)區(qū)大數(shù)據(jù)區(qū)到主題數(shù)據(jù)區(qū)和集市數(shù)據(jù)區(qū)主題數(shù)據(jù)區(qū)、貼源數(shù)據(jù)區(qū)、集市數(shù)據(jù)區(qū)到沙盤數(shù)據(jù)區(qū)各個(gè)數(shù)據(jù)區(qū)數(shù)據(jù)歸檔數(shù)據(jù)集市的數(shù)據(jù)按照據(jù)生命周期規(guī)劃，統(tǒng)一將過(guò)期數(shù)據(jù)歸檔到歷史數(shù)據(jù)歸檔區(qū)處理對(duì)象實(shí)現(xiàn)技術(shù)實(shí)現(xiàn)功能應(yīng)用場(chǎng)景智慧園區(qū)大數(shù)據(jù)治理總體架構(gòu)——流程調(diào)度層批量處理流程批量數(shù)據(jù)處理由流程調(diào)度層部署的自定義開發(fā)WorkFlow組件調(diào)度運(yùn)行整個(gè)流程主要完成如下工作：獲取應(yīng)急系統(tǒng)結(jié)構(gòu)化數(shù)據(jù)，存入臨時(shí)數(shù)據(jù)區(qū)獲取園區(qū)內(nèi)外部非結(jié)構(gòu)化數(shù)據(jù)，并進(jìn)行結(jié)構(gòu)化處理，存入主題或集市數(shù)據(jù)區(qū)按照貼源數(shù)據(jù)模型整合數(shù)據(jù)（標(biāo)準(zhǔn)化、數(shù)據(jù)更新/追加）按照主題數(shù)據(jù)模型整合數(shù)據(jù)并生成匯總數(shù)據(jù)加工計(jì)算后，結(jié)果交付到數(shù)據(jù)集市，支持分析類應(yīng)用園區(qū)大數(shù)據(jù)治理總體架構(gòu)——流程調(diào)度層實(shí)時(shí)數(shù)據(jù)處理流程實(shí)時(shí)數(shù)據(jù)處理強(qiáng)調(diào)的是實(shí)時(shí)或準(zhǔn)實(shí)時(shí)獲取并處理數(shù)據(jù)，通常采取消息隊(duì)列等技術(shù)構(gòu)建“數(shù)據(jù)流”整個(gè)處理流程由流程調(diào)度層部署的自定義開發(fā)WorkFlow組件調(diào)度運(yùn)行整個(gè)流程主要完成如下工作：通過(guò)數(shù)據(jù)庫(kù)數(shù)據(jù)交換組件獲取增量數(shù)據(jù)，加載到實(shí)時(shí)數(shù)據(jù)區(qū)通過(guò)大數(shù)據(jù)交換組件獲取非結(jié)構(gòu)化數(shù)據(jù)，并利用Storm處理數(shù)據(jù)，加載到實(shí)時(shí)數(shù)據(jù)區(qū)針對(duì)實(shí)時(shí)數(shù)據(jù)區(qū)數(shù)據(jù)執(zhí)行標(biāo)準(zhǔn)化處理和貼源整合園區(qū)大數(shù)據(jù)治理總體架構(gòu)——流程調(diào)度層歸檔數(shù)據(jù)處理流程數(shù)據(jù)歸檔的對(duì)象包括應(yīng)急系統(tǒng)數(shù)據(jù)文件、貼源數(shù)據(jù)區(qū)數(shù)據(jù)、主題數(shù)據(jù)區(qū)數(shù)據(jù)、大數(shù)據(jù)區(qū)數(shù)據(jù)和集市數(shù)據(jù)區(qū)數(shù)據(jù)數(shù)據(jù)按照生命周期規(guī)劃存儲(chǔ)到歸檔區(qū)Hadoop集群，歸檔后原數(shù)據(jù)區(qū)刪除此數(shù)據(jù)整個(gè)處理流程由流程調(diào)度層部署的自定義開發(fā)WorkFlow組件調(diào)度運(yùn)行整個(gè)流程主要完成如下工作：數(shù)據(jù)文件通過(guò)HDFS命令行copyfromlocal進(jìn)行歸檔貼源、主題和大數(shù)據(jù)區(qū)通過(guò)HDFS命令行distcp或自定義開發(fā)的MR程序執(zhí)行歸檔集市數(shù)據(jù)區(qū)通過(guò)Sqoop或數(shù)據(jù)庫(kù)提供的Hadoop集成技術(shù)（如：外部表）執(zhí)行歸檔園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)存儲(chǔ)層應(yīng)急系統(tǒng)前日增量數(shù)據(jù)緩存數(shù)據(jù)，支持后續(xù)ELT數(shù)據(jù)處理數(shù)據(jù)內(nèi)容主要用途數(shù)據(jù)模型保留周期用戶

訪問(wèn)模式工作負(fù)載平臺(tái)要求貼源數(shù)據(jù)模型保存最近7天數(shù)據(jù)貼源數(shù)據(jù)區(qū)和主題數(shù)據(jù)區(qū)批量作業(yè)訪問(wèn)無(wú)最終用戶訪問(wèn)I/O敏感，連續(xù)小批量的數(shù)據(jù)抽取和加載少量量數(shù)據(jù)使用Hive的Load命令，大量數(shù)據(jù)使用MR程序與主題區(qū)/貼源區(qū)/集市區(qū)構(gòu)成一個(gè)Hadoop集群（Hive）無(wú)單點(diǎn)故障，7×24小時(shí)+非工作日有限停機(jī)主題數(shù)據(jù)區(qū)、集市數(shù)據(jù)區(qū)和沙盤演練數(shù)據(jù)區(qū)批量作業(yè)訪問(wèn)無(wú)最終用戶訪問(wèn)I/O敏感，日終批量ETL以ELT形式通過(guò)HiveSQL執(zhí)行與主題區(qū)/貼源區(qū)/集市區(qū)構(gòu)成一個(gè)Hadoop集群（Hive）無(wú)單點(diǎn)故障，7×24小時(shí)+非工作日有限停機(jī)貼源數(shù)據(jù)模型不保存歷史應(yīng)急系統(tǒng)前日快照數(shù)據(jù)和一段時(shí)間的流水?dāng)?shù)據(jù)數(shù)據(jù)標(biāo)準(zhǔn)化，為后續(xù)主題模型、集市和沙盤演練提供數(shù)據(jù)臨時(shí)數(shù)據(jù)區(qū)貼源數(shù)據(jù)區(qū)園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)存儲(chǔ)層（續(xù)）園區(qū)內(nèi)外部非結(jié)構(gòu)化、半結(jié)構(gòu)化數(shù)據(jù)采集并存儲(chǔ)數(shù)據(jù)，進(jìn)行結(jié)構(gòu)化處理，最終得到結(jié)構(gòu)化數(shù)據(jù)數(shù)據(jù)內(nèi)容主要用途數(shù)據(jù)模型保留周期用戶

訪問(wèn)模式工作負(fù)載平臺(tái)要求數(shù)據(jù)按照HDFS文件存儲(chǔ)建議保留1年集市區(qū)/沙盤區(qū)/增值產(chǎn)品區(qū)/主題區(qū)/歸檔區(qū)批量作業(yè)訪問(wèn)少量高級(jí)應(yīng)急人員進(jìn)行智慧園區(qū)大數(shù)據(jù)云MapReduce分布式計(jì)算，半/非結(jié)構(gòu)化數(shù)據(jù)的結(jié)構(gòu)化處理（包括文本檢索、語(yǔ)義分詞、圖像識(shí)別、音頻識(shí)別等）與主題區(qū)/貼源區(qū)構(gòu)成一個(gè)Hadoop集群（HDFS）無(wú)單點(diǎn)故障，7×24小時(shí)+非工作日有限停機(jī)集市區(qū)/沙盤區(qū)/增值產(chǎn)品區(qū)/主題區(qū)/高時(shí)效區(qū)批量作業(yè)訪問(wèn)應(yīng)急人員執(zhí)行歷史數(shù)據(jù)查詢MapReduce分布式計(jì)算，HDFS命令實(shí)現(xiàn)Hadoop集群內(nèi)歸檔，Sqoop實(shí)現(xiàn)數(shù)據(jù)庫(kù)歸檔，通過(guò)Hive提供歷史查詢獨(dú)立的Hadoop集群（HDFS+Hive）無(wú)單點(diǎn)故障，7×24小時(shí)+非工作日有限停機(jī)數(shù)據(jù)按照HDFS文件存儲(chǔ)數(shù)據(jù)文件按照數(shù)據(jù)區(qū)劃分目錄，建議保留7年其他各數(shù)據(jù)區(qū)歷史數(shù)據(jù)按數(shù)據(jù)生命周期規(guī)劃歸檔平臺(tái)過(guò)期數(shù)據(jù)，支撐歷史數(shù)據(jù)查詢大數(shù)據(jù)區(qū)歷史歸檔數(shù)據(jù)區(qū)園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)存儲(chǔ)層（續(xù)）應(yīng)急系統(tǒng)歷史明細(xì)數(shù)據(jù)打破應(yīng)急條線整合數(shù)據(jù)數(shù)據(jù)內(nèi)容主要用途數(shù)據(jù)模型保留周期用戶

訪問(wèn)模式工作負(fù)載可用性要求第三范式模型保留長(zhǎng)期歷史，需要根據(jù)主題細(xì)化主題區(qū)/集市區(qū)/沙盤區(qū)/增值產(chǎn)品區(qū)/歸檔區(qū)批量作業(yè)訪問(wèn)少量高級(jí)應(yīng)急人員進(jìn)行靈活查詢、挖掘預(yù)測(cè)I/O敏感，日終批量ETL（合并、拉鏈、關(guān)聯(lián)、匯總等等）以ELT形式通過(guò)HiveSQL執(zhí)行，復(fù)雜處理使用MR定制UDF與大數(shù)據(jù)區(qū)/貼源區(qū)構(gòu)成一個(gè)Hadoop集群（Hive）無(wú)單點(diǎn)故障，7×24小時(shí)+非工作日有限停機(jī)集市區(qū)/沙盤區(qū)/增值產(chǎn)品區(qū)/歸檔區(qū)批量作業(yè)訪問(wèn)少量高級(jí)應(yīng)急人員進(jìn)行靈活查詢、挖掘預(yù)測(cè)I/O敏感，日終批量ETL（連接、聚合、匯總等等）以ELT形式通過(guò)HiveSQL執(zhí)行，復(fù)雜處理使用MR定制UDF與大數(shù)據(jù)區(qū)/貼源區(qū)構(gòu)成一個(gè)Hadoop集群（Hive）無(wú)單點(diǎn)故障，7×24小時(shí)+非工作日有限停機(jī)逆范式寬表依賴于集市數(shù)據(jù)需求對(duì)主題數(shù)據(jù)預(yù)加工后的結(jié)果數(shù)據(jù)針對(duì)應(yīng)用需求進(jìn)行數(shù)據(jù)預(yù)連接、預(yù)匯總，為集市提供數(shù)據(jù)主題數(shù)據(jù)區(qū)—明細(xì)主題數(shù)據(jù)區(qū)—匯總園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)存儲(chǔ)層（續(xù)）按沙盤演練需求，準(zhǔn)備的明細(xì)或匯總應(yīng)急數(shù)據(jù)為數(shù)據(jù)科學(xué)家的挖掘預(yù)測(cè)操作提供數(shù)據(jù)服務(wù)數(shù)據(jù)內(nèi)容主要用途數(shù)據(jù)模型保留周期用戶

訪問(wèn)模式工作負(fù)載可用性要求模型依賴于沙盤演練需求在整個(gè)沙盤演練周期內(nèi)保留集市區(qū)/沙盤區(qū)/歸檔區(qū)批量作業(yè)訪問(wèn)少量高級(jí)應(yīng)急人員進(jìn)行靈活查詢、挖掘預(yù)測(cè)I/O敏感，終批量ETL（合并、拉鏈、關(guān)聯(lián)、匯總等等）以ELT形式通過(guò)HiveSQL執(zhí)行，復(fù)雜處理使用MR定制UDF獨(dú)立的Hadoop集群（HDFS）無(wú)單點(diǎn)故障，7×24小時(shí)+非工作日有限停機(jī)沙盤區(qū)/歸檔區(qū)批量作業(yè)訪問(wèn)決策人員、管理人員、應(yīng)急人員訪問(wèn)I/O敏感型，BI工具提交的報(bào)表、查詢、分析SQL命令和日終批量ETL（匯總、聚集等操作，以ELT形式通過(guò)SQL執(zhí)行）基于開放平臺(tái)的完全無(wú)共享

MPP數(shù)據(jù)庫(kù)集群+內(nèi)存數(shù)據(jù)庫(kù)無(wú)單點(diǎn)故障，7×24小時(shí)+非工作日有限停機(jī)維度數(shù)據(jù)模型依賴應(yīng)急需求面向園區(qū)管理分析類應(yīng)用需求的匯總數(shù)據(jù)為服務(wù)、運(yùn)營(yíng)等管理分析主題和數(shù)據(jù)增值產(chǎn)品提供數(shù)據(jù)服務(wù)沙盤演練數(shù)據(jù)區(qū)應(yīng)用集市數(shù)據(jù)區(qū)園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)存儲(chǔ)層（續(xù)）根據(jù)外部用戶的數(shù)據(jù)使用需求數(shù)據(jù)平臺(tái)加工計(jì)算的結(jié)果數(shù)據(jù)為部署在數(shù)據(jù)平臺(tái)上的園區(qū)內(nèi)外部增值產(chǎn)品提供數(shù)據(jù)支持?jǐn)?shù)據(jù)內(nèi)容主要用途數(shù)據(jù)模型保留周期用戶

訪問(wèn)模式工作負(fù)載可用性要求應(yīng)用模型，依賴于用戶應(yīng)急需求依賴于用戶應(yīng)急需求園區(qū)外部人員，如：服務(wù)通過(guò)自己部署在Paas平臺(tái)上的應(yīng)用訪問(wèn)I/O敏感型，BI工具提交的報(bào)表、查詢、分析SQL命令和日終批量ETL（匯總、聚集等操作，以ELT形式通過(guò)SQL執(zhí)行）獨(dú)立的Paas平臺(tái)，部署Hadoop集群無(wú)單點(diǎn)故障，7×24小時(shí)+非工作日有限停機(jī)園區(qū)應(yīng)急人員高時(shí)效、高并發(fā)、高可靠性的聯(lián)機(jī)交易類查詢CPU敏感，BI工具或應(yīng)急系統(tǒng)高并發(fā)、高時(shí)效查詢，以及準(zhǔn)實(shí)時(shí)連續(xù)ETL處理+SQL批量處理獨(dú)立的內(nèi)存數(shù)據(jù)庫(kù)集群無(wú)單點(diǎn)故障，365×24小時(shí)不停機(jī)貼源數(shù)據(jù)模型依賴用戶應(yīng)急需求面向應(yīng)用的應(yīng)急系統(tǒng)快照數(shù)據(jù)和一段時(shí)間的交易流水為實(shí)時(shí)獲準(zhǔn)實(shí)時(shí)分析應(yīng)用提供數(shù)據(jù)服務(wù)增值產(chǎn)品數(shù)據(jù)區(qū)實(shí)時(shí)數(shù)據(jù)區(qū)園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)存儲(chǔ)層數(shù)據(jù)流數(shù)據(jù)集成層操作型聚合數(shù)據(jù)臨時(shí)數(shù)據(jù)區(qū)實(shí)時(shí)數(shù)據(jù)區(qū)公共匯總數(shù)據(jù)主題明細(xì)數(shù)據(jù)結(jié)構(gòu)化數(shù)據(jù)非結(jié)構(gòu)化&半結(jié)構(gòu)化數(shù)據(jù)沙盤演練數(shù)據(jù)區(qū)實(shí)驗(yàn)室數(shù)據(jù)集市數(shù)據(jù)區(qū)POP自營(yíng)數(shù)據(jù)貼源數(shù)據(jù)區(qū)銀行應(yīng)急數(shù)據(jù)主題數(shù)據(jù)區(qū)智慧園區(qū)集市財(cái)務(wù)管理集市運(yùn)營(yíng)管理集市風(fēng)險(xiǎn)管理集市……集市大物流系統(tǒng)數(shù)據(jù)供應(yīng)鏈系統(tǒng)數(shù)據(jù)財(cái)務(wù)審計(jì)數(shù)據(jù)財(cái)務(wù)研發(fā)數(shù)據(jù)操作型明細(xì)據(jù)歸檔數(shù)據(jù)區(qū)大數(shù)據(jù)區(qū)源系統(tǒng)數(shù)據(jù)文件貼源數(shù)據(jù)主題數(shù)據(jù)集市數(shù)據(jù)高時(shí)效數(shù)據(jù)大數(shù)據(jù)增值產(chǎn)品數(shù)據(jù)區(qū)園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)應(yīng)用層大數(shù)據(jù)平臺(tái)應(yīng)用針對(duì)公檢法查詢需求、內(nèi)外部審計(jì)需求和最終用戶的歷史交易查詢需求，以貼源存儲(chǔ)的歸檔數(shù)據(jù)為基礎(chǔ)，實(shí)現(xiàn)的查詢類應(yīng)用歷史查詢類應(yīng)用通常使用BI工具或自主開發(fā)實(shí)現(xiàn)服務(wù)經(jīng)理等最終應(yīng)急人員針對(duì)當(dāng)前應(yīng)急的發(fā)生（如：用戶交易、用戶訪問(wèn)日志），進(jìn)行實(shí)時(shí)查詢、分析的應(yīng)用管理分析類應(yīng)用主要實(shí)現(xiàn)了園區(qū)服務(wù)管理、運(yùn)營(yíng)管理、財(cái)務(wù)管理、風(fēng)險(xiǎn)管理、監(jiān)管信息披露五大分析體系功能管理分析類應(yīng)用通常采用套裝軟件和BI工具（MicroStrategy等）實(shí)現(xiàn)應(yīng)急人員根據(jù)應(yīng)急需求或自己對(duì)應(yīng)急的理解，設(shè)計(jì)計(jì)算模型，準(zhǔn)備各類明細(xì)或匯總數(shù)據(jù)，導(dǎo)入模型運(yùn)算，驗(yàn)證應(yīng)急結(jié)果沙盤演練類應(yīng)用通常使用R語(yǔ)言在Hadoop分布式體系下實(shí)現(xiàn)園區(qū)數(shù)據(jù)科學(xué)家根據(jù)自己對(duì)應(yīng)急需求的理解或者對(duì)市場(chǎng)的判斷，設(shè)計(jì)并運(yùn)行模型，發(fā)掘數(shù)據(jù)價(jià)值，并封裝成商業(yè)產(chǎn)品數(shù)據(jù)增值產(chǎn)品通常采用R語(yǔ)言和BI工具實(shí)現(xiàn)，面向園區(qū)內(nèi)外部用戶管理分析類應(yīng)用1沙盤演練類應(yīng)用3歷史查詢類應(yīng)用4高時(shí)效類分析應(yīng)用5數(shù)據(jù)增值類產(chǎn)品2實(shí)時(shí)分析類應(yīng)用通常使用CEP、ESB等技術(shù)實(shí)現(xiàn)園區(qū)大數(shù)據(jù)治理總體架構(gòu)——平臺(tái)發(fā)展不同階段對(duì)應(yīng)應(yīng)用工作負(fù)載復(fù)雜度大數(shù)據(jù)平臺(tái)發(fā)展階段劃分操作為主階段什么正在發(fā)生？動(dòng)態(tài)數(shù)據(jù)倉(cāng)庫(kù)階段

讓正確的事情發(fā)生！分析為主階段為什么會(huì)發(fā)生報(bào)表為主階段發(fā)生了什么預(yù)測(cè)為主階段將會(huì)發(fā)生什么？批量隨機(jī)查詢數(shù)據(jù)分析持續(xù)更新加載/短查詢基于事件的動(dòng)態(tài)觸發(fā)數(shù)據(jù)量增長(zhǎng)用戶數(shù)增長(zhǎng)查詢復(fù)雜度增長(zhǎng)ETL處理復(fù)雜度增長(zhǎng)管理分析類應(yīng)用歷史查詢類應(yīng)用實(shí)時(shí)分析類應(yīng)用沙盤演練類應(yīng)用數(shù)據(jù)增值類產(chǎn)品園區(qū)大數(shù)據(jù)治理總體架構(gòu)——管理分析類應(yīng)用總賬分析資產(chǎn)負(fù)債表分析損益表分析現(xiàn)金流量表分析財(cái)務(wù)指標(biāo)分析盈利分析機(jī)構(gòu)貢獻(xiàn)度產(chǎn)品貢獻(xiàn)度服務(wù)細(xì)分貢獻(xiàn)度渠道績(jī)效資產(chǎn)負(fù)債分析主要指標(biāo)報(bào)告，如：凈利息收入、凈收入、凈現(xiàn)值、市場(chǎng)價(jià)值等頭寸報(bào)告現(xiàn)金流報(bào)告風(fēng)險(xiǎn)價(jià)值（VaR）計(jì)算財(cái)務(wù)預(yù)算與計(jì)劃財(cái)務(wù)預(yù)算財(cái)務(wù)計(jì)劃執(zhí)行監(jiān)控執(zhí)行過(guò)程分析年末財(cái)務(wù)計(jì)劃執(zhí)行分析預(yù)測(cè)與場(chǎng)景分析應(yīng)急規(guī)模預(yù)測(cè)收益預(yù)測(cè)……領(lǐng)導(dǎo)管理駕駛艙機(jī)構(gòu)績(jī)效考核服務(wù)經(jīng)理考核服務(wù)經(jīng)理工作量評(píng)估服務(wù)經(jīng)理服務(wù)服務(wù)收益評(píng)估產(chǎn)品績(jī)效考核應(yīng)急量考核供應(yīng)鏈銀行應(yīng)急人人貸應(yīng)急保理應(yīng)急基金應(yīng)急其它中間應(yīng)急……渠道成本與收益……風(fēng)險(xiǎn)監(jiān)控報(bào)表/信息披露流動(dòng)性報(bào)表利率敏感性報(bào)表資本充足率報(bào)表……市場(chǎng)風(fēng)險(xiǎn)市場(chǎng)風(fēng)險(xiǎn)暴露值流動(dòng)性管理、利率管理信用風(fēng)險(xiǎn)信用風(fēng)險(xiǎn)暴露值計(jì)算信用風(fēng)險(xiǎn)控制（貸前控制、貸中監(jiān)控、貸后分析）操作風(fēng)險(xiǎn)異常交易預(yù)警后督差錯(cuò)檢查……防欺詐/反洗錢定義欺詐交易模型可能性欺詐交易預(yù)警欺詐交易分布分析全面風(fēng)險(xiǎn)管理……目前監(jiān)管機(jī)構(gòu)沒(méi)有明確要求服務(wù)單一視圖園區(qū)服務(wù)信息管理個(gè)人服務(wù)信息管理同業(yè)服務(wù)信息管理目標(biāo)服務(wù)搜索重點(diǎn)服務(wù)關(guān)懷服務(wù)風(fēng)險(xiǎn)服務(wù)異動(dòng)服務(wù)服務(wù)細(xì)分個(gè)人服務(wù)細(xì)分園區(qū)服務(wù)細(xì)分服務(wù)行為分析服務(wù)輪廓分析產(chǎn)品交叉銷售分析百分比分析渠道偏好分析營(yíng)銷活動(dòng)管理營(yíng)銷活動(dòng)規(guī)劃營(yíng)銷活動(dòng)定義營(yíng)銷活動(dòng)執(zhí)行營(yíng)銷活動(dòng)蘋果營(yíng)銷活動(dòng)自動(dòng)化渠道接口與集成流程自動(dòng)化……服務(wù)管理運(yùn)營(yíng)管理財(cái)務(wù)管理風(fēng)險(xiǎn)管理監(jiān)管披露示例園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)訪問(wèn)層即席查詢：通過(guò)即席查詢工具或手工書寫SQL語(yǔ)句，完成應(yīng)急信息的即席查看多維分析：從多個(gè)維度靈活組合對(duì)目標(biāo)值進(jìn)行分析，常見功能包括上下鉆取、透明鉆取、旋轉(zhuǎn)、分頁(yè)、層鉆、跨維鉆取等主動(dòng)問(wèn)題發(fā)現(xiàn)：通過(guò)事件觸發(fā)、規(guī)則匹配等方式發(fā)現(xiàn)園區(qū)運(yùn)營(yíng)中的問(wèn)題，通過(guò)手機(jī)、郵件等方式報(bào)警決策層管理層應(yīng)急人員即席查詢靜態(tài)報(bào)表多維分析儀表盤挖掘預(yù)測(cè)儀表盤：通過(guò)儀表盤及其它展現(xiàn)方式對(duì)園區(qū)關(guān)鍵績(jī)效指標(biāo)進(jìn)行展示，為領(lǐng)導(dǎo)層決策提供直觀的數(shù)據(jù)支持靜態(tài)報(bào)表：按照預(yù)先定義格式，批處理報(bào)表，在線查詢報(bào)表等Office集成：將分析應(yīng)用嵌入到Office界面中，利用Office的方便、易用特性，降低用戶使用難度問(wèn)題發(fā)現(xiàn)Office集成Web服務(wù)挖掘預(yù)測(cè)：使用專業(yè)的軟件工具，通過(guò)數(shù)理統(tǒng)計(jì)等高級(jí)統(tǒng)計(jì)分析算法，分析結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)，通過(guò)數(shù)據(jù)模型去挖掘隱藏在數(shù)據(jù)中的價(jià)值數(shù)據(jù)科學(xué)家應(yīng)急系統(tǒng)Web服務(wù)：將分析應(yīng)用的功能發(fā)布為Web服務(wù)，注冊(cè)在園區(qū)服務(wù)總線上，供其它應(yīng)急系統(tǒng)或分析應(yīng)用調(diào)用，獲取分析結(jié)果多種展現(xiàn)形式滿足各層級(jí)用戶及應(yīng)用系統(tǒng)使用需求園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)管控層銀行數(shù)據(jù)管控體系涵蓋組織架構(gòu)、評(píng)價(jià)與考核、管控流程、管控平臺(tái)四個(gè)域。數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)質(zhì)量管理元數(shù)據(jù)管理工作流管理……組織數(shù)據(jù)與信息標(biāo)準(zhǔn)化委員會(huì)數(shù)據(jù)管理人數(shù)據(jù)所有人數(shù)據(jù)生產(chǎn)人數(shù)據(jù)使用人IT支持團(tuán)隊(duì)考核指標(biāo)責(zé)任評(píng)價(jià)標(biāo)準(zhǔn)執(zhí)行評(píng)價(jià)政策執(zhí)行評(píng)價(jià)評(píng)價(jià)標(biāo)準(zhǔn)數(shù)據(jù)類型數(shù)據(jù)格式應(yīng)急分類真實(shí)性定義及時(shí)性定義完整性定義技術(shù)元數(shù)據(jù)流程評(píng)價(jià)與考核流程考核指標(biāo)建立/維護(hù)流程標(biāo)準(zhǔn)建立/維護(hù)流程組織建立/維護(hù)流程評(píng)價(jià)與考核應(yīng)急含義一致性定義數(shù)據(jù)認(rèn)責(zé)平臺(tái)安全等級(jí)權(quán)限定義數(shù)據(jù)停用數(shù)據(jù)共享數(shù)據(jù)移動(dòng)數(shù)據(jù)存儲(chǔ)數(shù)據(jù)創(chuàng)建應(yīng)急元數(shù)據(jù)管理元數(shù)據(jù)數(shù)據(jù)全生命周期數(shù)據(jù)安全管理數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)質(zhì)量元數(shù)據(jù)數(shù)據(jù)安全…………審計(jì)定義保留策略……園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)管控體系運(yùn)轉(zhuǎn)機(jī)制管控組織數(shù)據(jù)管控委員會(huì)數(shù)據(jù)所有人數(shù)據(jù)認(rèn)責(zé)人IT支持……管控流程數(shù)據(jù)接入流程數(shù)據(jù)變更流程數(shù)據(jù)授權(quán)流程數(shù)據(jù)退役流程標(biāo)準(zhǔn)/政策制定流程評(píng)價(jià)考核流程……評(píng)價(jià)與考核標(biāo)準(zhǔn)（數(shù)據(jù)標(biāo)準(zhǔn)、質(zhì)量要求、安全要求）遵守標(biāo)準(zhǔn)所需要的政策政策與標(biāo)準(zhǔn)遵從考評(píng)定義……數(shù)據(jù)產(chǎn)生者數(shù)據(jù)使用者………流程支撐流程支撐制定管控平臺(tái)工具支撐明確了數(shù)據(jù)管控過(guò)程中的組織結(jié)構(gòu)、角色、職責(zé)等。管控組織除了要負(fù)責(zé)制定數(shù)據(jù)標(biāo)準(zhǔn)、質(zhì)量、安全等要求外，還需要負(fù)責(zé)制定管控的相關(guān)流程和評(píng)價(jià)考核指標(biāo)等內(nèi)容。考評(píng)制定通過(guò)建立一些定性或定量的數(shù)據(jù)管控評(píng)價(jià)考核指標(biāo)，去評(píng)估及考核數(shù)據(jù)相關(guān)責(zé)任人職責(zé)履行情況、數(shù)據(jù)管控標(biāo)準(zhǔn)及數(shù)據(jù)政策的執(zhí)行情況等。規(guī)范了數(shù)據(jù)管控過(guò)程中，各個(gè)環(huán)節(jié)日常任務(wù)處理的運(yùn)作模式，例如數(shù)據(jù)定義如何變更、數(shù)據(jù)沖突如何協(xié)調(diào)等。采用專門的技術(shù)平臺(tái)支撐管控流程的自動(dòng)化，發(fā)布管控組織制定的一些相關(guān)標(biāo)準(zhǔn)和規(guī)范，及時(shí)反映管控過(guò)程中存在的一些問(wèn)題等。管控綜合管理標(biāo)準(zhǔn)/規(guī)范管理流程管理考核儀表盤……元數(shù)據(jù)管理應(yīng)急元數(shù)據(jù)管理技術(shù)元數(shù)據(jù)管理管理元數(shù)據(jù)分析……數(shù)據(jù)質(zhì)量管理稽核規(guī)則管理數(shù)據(jù)稽核質(zhì)量報(bào)告……工具支撐組織架構(gòu)、評(píng)價(jià)與考核、管控流程、管控工具這四個(gè)域相互作用、相互支撐，提供對(duì)各信息系統(tǒng)數(shù)據(jù)的管控。園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)管控組織數(shù)據(jù)管控組織是數(shù)據(jù)管控體系中最重要的因素，它負(fù)責(zé)定義和管理應(yīng)急數(shù)據(jù)相關(guān)標(biāo)準(zhǔn)，制定遵尋標(biāo)準(zhǔn)所必須的政策，監(jiān)測(cè)正在進(jìn)行的數(shù)據(jù)管控行動(dòng)。數(shù)據(jù)管控組織是否有完整與合理的角色定義、是否有高層領(lǐng)導(dǎo)的參與，是整個(gè)數(shù)據(jù)管控的成敗的關(guān)鍵。典型的數(shù)據(jù)管控組織如下所示：數(shù)據(jù)管控負(fù)責(zé)單位崗位角色數(shù)據(jù)管控主導(dǎo)方信息管理委員會(huì)

數(shù)據(jù)標(biāo)準(zhǔn)管理員數(shù)據(jù)質(zhì)量管理員數(shù)據(jù)產(chǎn)生單位數(shù)據(jù)管控參與方應(yīng)急協(xié)調(diào)人數(shù)據(jù)分析員數(shù)據(jù)主管數(shù)據(jù)使用單位應(yīng)急協(xié)調(diào)人數(shù)據(jù)分析員數(shù)據(jù)主管數(shù)據(jù)擁有單位應(yīng)急協(xié)調(diào)人數(shù)據(jù)分析員數(shù)據(jù)主管數(shù)據(jù)管理單位運(yùn)維組織實(shí)施項(xiàng)目組數(shù)據(jù)安全管理員數(shù)據(jù)管控經(jīng)理元數(shù)據(jù)管理員園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)標(biāo)準(zhǔn)管理消除一數(shù)多義，提升數(shù)據(jù)的唯一性、一致性，將逐步形成的數(shù)據(jù)標(biāo)準(zhǔn)納入一個(gè)規(guī)范的管理流程中，進(jìn)行數(shù)據(jù)標(biāo)準(zhǔn)的更新、發(fā)布、使用監(jiān)督等工作。數(shù)據(jù)標(biāo)準(zhǔn)管理工作可以分為以下幾個(gè)部分：數(shù)據(jù)標(biāo)準(zhǔn)建立和維護(hù)、數(shù)據(jù)標(biāo)準(zhǔn)執(zhí)行、數(shù)據(jù)標(biāo)準(zhǔn)管理的考評(píng)。數(shù)據(jù)標(biāo)準(zhǔn)建立和維護(hù)數(shù)據(jù)分類數(shù)據(jù)結(jié)構(gòu)關(guān)鍵應(yīng)急對(duì)象關(guān)鍵代碼數(shù)據(jù)維度代碼映射服務(wù)類數(shù)據(jù)標(biāo)準(zhǔn)產(chǎn)品類數(shù)據(jù)標(biāo)準(zhǔn)。。。類數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)標(biāo)準(zhǔn)執(zhí)行數(shù)據(jù)標(biāo)準(zhǔn)管理的考評(píng)定性考評(píng)定量考評(píng)數(shù)據(jù)標(biāo)準(zhǔn)分析報(bào)告數(shù)據(jù)標(biāo)準(zhǔn)理念推廣歸檔系統(tǒng)……ODS園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)質(zhì)量管理數(shù)據(jù)質(zhì)量管理框架藍(lán)圖如下，其中數(shù)據(jù)質(zhì)量提升是改進(jìn)數(shù)據(jù)質(zhì)量的手段和質(zhì)量考評(píng)的目的：數(shù)據(jù)質(zhì)量要求確認(rèn)，根據(jù)應(yīng)急要求制定和明確數(shù)據(jù)質(zhì)量要求，同時(shí)也需要符合數(shù)據(jù)標(biāo)準(zhǔn)的要求；數(shù)據(jù)質(zhì)量考評(píng)，對(duì)數(shù)據(jù)質(zhì)量的量化評(píng)價(jià)制定數(shù)據(jù)質(zhì)量問(wèn)題解決方案，根據(jù)數(shù)據(jù)質(zhì)量考評(píng)和日常工作中發(fā)現(xiàn)的數(shù)據(jù)質(zhì)量問(wèn)題，實(shí)施相應(yīng)的措施，提升數(shù)據(jù)質(zhì)量數(shù)據(jù)質(zhì)量要求應(yīng)急規(guī)則數(shù)據(jù)一致性要求數(shù)據(jù)完整性要求數(shù)據(jù)唯一性要求數(shù)據(jù)準(zhǔn)確性要求數(shù)據(jù)及時(shí)性要求數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)數(shù)據(jù)質(zhì)量驗(yàn)證規(guī)則數(shù)據(jù)質(zhì)量考核指標(biāo)數(shù)據(jù)質(zhì)量提升數(shù)據(jù)補(bǔ)錄手工修正自動(dòng)修正數(shù)據(jù)質(zhì)量考評(píng)數(shù)據(jù)質(zhì)量監(jiān)控不定期數(shù)據(jù)質(zhì)量檢查數(shù)據(jù)質(zhì)量分析報(bào)告園區(qū)大數(shù)據(jù)治理總體架構(gòu)——元數(shù)據(jù)管理應(yīng)急元數(shù)據(jù)：面向應(yīng)急人員，從應(yīng)急術(shù)語(yǔ)、應(yīng)急描述、應(yīng)急指標(biāo)和應(yīng)急規(guī)則等幾個(gè)方面對(duì)數(shù)據(jù)進(jìn)行描述管理元數(shù)據(jù)：面向數(shù)據(jù)管理人員，從運(yùn)維管理的角度描述數(shù)據(jù)處理、數(shù)據(jù)質(zhì)量和數(shù)據(jù)安全的狀態(tài)信息技術(shù)元數(shù)據(jù)：面向技術(shù)人員，從數(shù)據(jù)結(jié)構(gòu)和數(shù)據(jù)處理細(xì)節(jié)方面對(duì)數(shù)據(jù)進(jìn)行技術(shù)化描述園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)安全管理數(shù)據(jù)安全管理可分為數(shù)據(jù)安全分級(jí)管理和數(shù)據(jù)訪問(wèn)授權(quán)管理兩個(gè)部分：數(shù)據(jù)安全分級(jí)：根據(jù)應(yīng)急要求，制定一系列的數(shù)據(jù)安全分級(jí)標(biāo)準(zhǔn)和政策，為數(shù)據(jù)應(yīng)用以及數(shù)據(jù)管理中實(shí)施數(shù)據(jù)安全保護(hù)和訪問(wèn)提供數(shù)據(jù)安全控制的基礎(chǔ)。數(shù)據(jù)訪問(wèn)授權(quán)：數(shù)據(jù)訪問(wèn)授權(quán)的主要工作是根據(jù)數(shù)據(jù)安全分級(jí)標(biāo)準(zhǔn)，定義數(shù)據(jù)訪問(wèn)的授權(quán)方法及流程，建立基于數(shù)據(jù)安全分級(jí)的數(shù)據(jù)使用授權(quán)機(jī)制，實(shí)現(xiàn)數(shù)據(jù)訪問(wèn)和信息披露的安全。數(shù)據(jù)安全分級(jí)數(shù)據(jù)敏感度數(shù)據(jù)安全等級(jí)定義數(shù)據(jù)訪問(wèn)授權(quán)數(shù)據(jù)重要性數(shù)據(jù)使用需求數(shù)據(jù)使用者權(quán)責(zé)數(shù)據(jù)訪問(wèn)授權(quán)規(guī)則安全技術(shù)園區(qū)大數(shù)據(jù)治理總體架構(gòu)——高階工作流程應(yīng)急數(shù)據(jù)規(guī)劃管理高階流程數(shù)據(jù)認(rèn)責(zé)流程數(shù)據(jù)治理考核體系數(shù)據(jù)治理考核流程數(shù)據(jù)治理考核指標(biāo)體系數(shù)據(jù)標(biāo)準(zhǔn)管理管理高階流程數(shù)據(jù)標(biāo)準(zhǔn)建立流程數(shù)據(jù)標(biāo)準(zhǔn)維護(hù)流程數(shù)據(jù)質(zhì)量管理管理高階流程數(shù)據(jù)質(zhì)量要求確定流程元數(shù)據(jù)管理高階流程元數(shù)據(jù)變更流程數(shù)據(jù)安全管理管理高階流程數(shù)據(jù)安全審批流程數(shù)據(jù)認(rèn)責(zé)流程數(shù)據(jù)標(biāo)準(zhǔn)、質(zhì)量、元數(shù)據(jù)、安全管理流程協(xié)調(diào)會(huì)議考核流程園區(qū)大數(shù)據(jù)治理總體架構(gòu)——數(shù)據(jù)管控平臺(tái)數(shù)據(jù)管控平臺(tái)從總體上來(lái)說(shuō)分為數(shù)據(jù)層、應(yīng)用層、展現(xiàn)層三個(gè)主要層面，以數(shù)據(jù)層的數(shù)據(jù)庫(kù)及相關(guān)基礎(chǔ)系統(tǒng)為主要信息來(lái)源，通過(guò)應(yīng)用層的運(yùn)算處理，以不同的形式，不同的功能在展現(xiàn)層提供用戶接口首頁(yè)標(biāo)準(zhǔn)管理主菜單指標(biāo)速遞待辦事項(xiàng)信息地圖標(biāo)準(zhǔn)瀏覽標(biāo)準(zhǔn)維護(hù)工作管理流程管理績(jī)效指標(biāo)系統(tǒng)管理用戶管理權(quán)限管理規(guī)范管理數(shù)據(jù)管控平臺(tái)統(tǒng)一用戶集成界面數(shù)據(jù)標(biāo)準(zhǔn)知識(shí)庫(kù)數(shù)據(jù)管控平臺(tái)知識(shí)庫(kù)……元數(shù)據(jù)管理元數(shù)據(jù)采集……元數(shù)據(jù)知識(shí)庫(kù)質(zhì)量管理規(guī)則配置……質(zhì)量稽核庫(kù)數(shù)據(jù)層應(yīng)用層展現(xiàn)層園區(qū)大數(shù)據(jù)治理總體產(chǎn)品框架非結(jié)構(gòu)化/半結(jié)構(gòu)化數(shù)據(jù)管理分析平臺(tái)（X86MPP集群）應(yīng)急系統(tǒng)結(jié)構(gòu)化數(shù)據(jù)基礎(chǔ)計(jì)算平臺(tái)（貼源數(shù)據(jù)區(qū)+主題數(shù)據(jù)區(qū)+大數(shù)據(jù)區(qū)）（Hadoop集群+Hive）數(shù)據(jù)交換平臺(tái)（自主開發(fā)交換組件+NAS存儲(chǔ)）實(shí)時(shí)分析平臺(tái)（內(nèi)存數(shù)據(jù)庫(kù)）沙盤演練平臺(tái)（Hadoop集群）數(shù)據(jù)管控平臺(tái)FTPSFTP/HTTP/APICopyfromloalQueue云數(shù)據(jù)推送平臺(tái)增值產(chǎn)品平臺(tái)（Hadoop集群）歷史歸檔查詢平臺(tái)（Hadoop集群+Hive）Load（Hive）DistcpHQL+LoadDistcpDistcpHQL+LoadDistcpHQL+LoadSqoopSqoopSqoopMR流程調(diào)度平臺(tái)目錄CONTENTS3園區(qū)大數(shù)據(jù)治理演進(jìn)路線園區(qū)大數(shù)據(jù)治理演進(jìn)路線以基礎(chǔ)平臺(tái)搭建為主，配合園區(qū)初期應(yīng)急開展，應(yīng)用建設(shè)從服務(wù)信息管理、風(fēng)險(xiǎn)管理和運(yùn)營(yíng)管理三方面開展搭建大數(shù)據(jù)處理平臺(tái)和實(shí)時(shí)分析平臺(tái)，應(yīng)用方面開展實(shí)時(shí)分析和數(shù)據(jù)產(chǎn)品封裝開展服務(wù)信息管理、信用風(fēng)險(xiǎn)評(píng)級(jí)和應(yīng)急統(tǒng)計(jì)分析三類應(yīng)用建設(shè)開展貼源數(shù)據(jù)整合，初步建立園區(qū)級(jí)數(shù)據(jù)視圖，實(shí)現(xiàn)對(duì)管理分析類應(yīng)用和實(shí)時(shí)分析類應(yīng)用的支撐規(guī)劃數(shù)據(jù)管控藍(lán)圖，初步實(shí)施數(shù)據(jù)質(zhì)量和技術(shù)元數(shù)據(jù)管理2013年2014年——2015年2015年以后對(duì)園區(qū)價(jià)值的創(chuàng)造應(yīng)管技應(yīng)急分析框架基礎(chǔ)數(shù)據(jù)平臺(tái)數(shù)據(jù)管控體系應(yīng)技管全面開展管理分析、實(shí)時(shí)分析和沙盤演練應(yīng)用建設(shè)，初步展開增值數(shù)據(jù)產(chǎn)品開發(fā)工作全面開展園區(qū)大數(shù)據(jù)治理建設(shè)，引入更多數(shù)據(jù)源，豐富并完善平臺(tái)數(shù)據(jù)區(qū)建設(shè)隨著應(yīng)用體系的搭建，完善數(shù)據(jù)質(zhì)量和元數(shù)據(jù)建設(shè)，開展數(shù)據(jù)標(biāo)準(zhǔn)化工作應(yīng)技管深化分析體系，形成深度智能化應(yīng)急分析性能持續(xù)優(yōu)化、數(shù)據(jù)平臺(tái)持續(xù)完善、持續(xù)深化數(shù)據(jù)管控體系，形成園區(qū)園區(qū)級(jí)的數(shù)據(jù)管控體系應(yīng)技管一期2013.10當(dāng)前位置未來(lái)持續(xù)優(yōu)化提升階段第一階段第二階段第三階段園區(qū)大數(shù)據(jù)治理演進(jìn)說(shuō)明——基礎(chǔ)數(shù)據(jù)平臺(tái)階段劃分建設(shè)內(nèi)容預(yù)期效果第一階段搭建數(shù)據(jù)交換平臺(tái)，部署NAS存儲(chǔ)集群，設(shè)計(jì)并實(shí)施數(shù)據(jù)庫(kù)交換組件和數(shù)據(jù)區(qū)交換組件搭建基礎(chǔ)計(jì)算平臺(tái)，設(shè)計(jì)并實(shí)施貼源數(shù)據(jù)區(qū)，以T+1頻率整合園區(qū)和銀行應(yīng)急數(shù)據(jù)搭建歷史歸檔查詢平臺(tái)，歸檔園區(qū)和銀行應(yīng)急數(shù)據(jù)文件搭建管理分析應(yīng)用平臺(tái)，部署MPP集群和BI分析應(yīng)用環(huán)境搭建實(shí)時(shí)分析平臺(tái)，部署內(nèi)存數(shù)據(jù)庫(kù)和實(shí)時(shí)BI分析環(huán)境實(shí)現(xiàn)了數(shù)據(jù)平臺(tái)個(gè)數(shù)據(jù)區(qū)之間、數(shù)據(jù)平臺(tái)與外部系統(tǒng)間的雙向數(shù)據(jù)傳輸實(shí)現(xiàn)了應(yīng)急數(shù)據(jù)按照貼源數(shù)據(jù)模整合實(shí)現(xiàn)了數(shù)據(jù)按照生命周期的歸檔管理實(shí)現(xiàn)了管理分析環(huán)境搭建實(shí)現(xiàn)實(shí)時(shí)分析環(huán)境搭建第二階段數(shù)據(jù)交換平臺(tái)增強(qiáng)和優(yōu)化，包括：大數(shù)據(jù)交換組件設(shè)計(jì)實(shí)施基礎(chǔ)計(jì)算平臺(tái)增強(qiáng)，包括：引入更多的數(shù)據(jù)源，增強(qiáng)貼源數(shù)據(jù)區(qū)；設(shè)計(jì)并實(shí)施主題數(shù)據(jù)區(qū)，打破應(yīng)急條線整合數(shù)據(jù)；設(shè)計(jì)并實(shí)施大數(shù)據(jù)區(qū)，實(shí)現(xiàn)園區(qū)內(nèi)外部非結(jié)構(gòu)化、半結(jié)構(gòu)化數(shù)據(jù)加工、處理搭建沙盤演練平臺(tái)實(shí)時(shí)分析平臺(tái)增強(qiáng)和優(yōu)化，包括：引入更多應(yīng)用及相關(guān)數(shù)據(jù)源實(shí)現(xiàn)了基礎(chǔ)數(shù)據(jù)一次存儲(chǔ)、一次計(jì)算、多次使用建立了數(shù)據(jù)分析人員的實(shí)驗(yàn)環(huán)境，實(shí)現(xiàn)了用戶自主用數(shù)為實(shí)時(shí)、準(zhǔn)實(shí)時(shí)類分析用提供平臺(tái)為封裝、銷售數(shù)據(jù)類產(chǎn)品提供了平臺(tái)第三階段基礎(chǔ)計(jì)算平臺(tái)持續(xù)增強(qiáng)和優(yōu)化，引入更多的數(shù)據(jù)源、優(yōu)化模型和ETL處理搭建增值產(chǎn)品平臺(tái)，設(shè)計(jì)并實(shí)施增值產(chǎn)品數(shù)據(jù)區(qū)數(shù)據(jù)交換平臺(tái)、沙盤演練平臺(tái)、實(shí)時(shí)分析平臺(tái)進(jìn)一步增強(qiáng)和優(yōu)化數(shù)據(jù)平臺(tái)納入盡可能多的園區(qū)內(nèi)外部數(shù)據(jù)數(shù)據(jù)平臺(tái)以最優(yōu)的性能支持各類數(shù)據(jù)應(yīng)用園區(qū)大數(shù)據(jù)治理演進(jìn)說(shuō)明——數(shù)據(jù)管控階段劃分建設(shè)內(nèi)容預(yù)期效果第一階段分析和梳理當(dāng)前數(shù)據(jù)管理方面的成果和現(xiàn)狀，數(shù)據(jù)管控藍(lán)圖和路線圖設(shè)計(jì)，數(shù)據(jù)管控工作的組織、技術(shù)和流程高階設(shè)計(jì)梳理園區(qū)大數(shù)據(jù)平臺(tái)ETL流程各環(huán)節(jié)的數(shù)據(jù)質(zhì)量要求，指定數(shù)據(jù)質(zhì)量檢查規(guī)則、評(píng)價(jià)指標(biāo)、管控流程，并落地實(shí)施數(shù)據(jù)質(zhì)量管理系統(tǒng)梳理園區(qū)大數(shù)據(jù)平臺(tái)包含的技術(shù)元數(shù)據(jù)，如：數(shù)據(jù)字典、ETL任務(wù)、ETL流程、BI語(yǔ)義層等，制定相應(yīng)的管控流程并落地實(shí)施元數(shù)據(jù)管理系統(tǒng)同步園區(qū)大數(shù)據(jù)治理ETL建設(shè)，實(shí)現(xiàn)了數(shù)據(jù)質(zhì)量管理系統(tǒng)收集并整合了園區(qū)所有技術(shù)元數(shù)據(jù)，實(shí)現(xiàn)了數(shù)據(jù)生命周管理、血緣分析和影響分析等功能第二階段隨著更多數(shù)據(jù)源的引入，進(jìn)一步增強(qiáng)數(shù)據(jù)質(zhì)量管理系統(tǒng)隨著更多數(shù)據(jù)源的引入、更多平臺(tái)的建立，梳理并整合更多技術(shù)元數(shù)據(jù)梳理園區(qū)大數(shù)據(jù)平臺(tái)包含的應(yīng)急和管理類元數(shù)據(jù)，如應(yīng)急術(shù)語(yǔ)、應(yīng)急指標(biāo)、應(yīng)急定義等，制定相應(yīng)的管控流程并落地實(shí)施元數(shù)據(jù)管理系統(tǒng)開展基礎(chǔ)類數(shù)據(jù)標(biāo)準(zhǔn)建設(shè)，基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)、管控流程、評(píng)價(jià)指標(biāo)、落地策略完善了數(shù)據(jù)質(zhì)量管理體系，實(shí)現(xiàn)了問(wèn)題及時(shí)發(fā)現(xiàn)、及時(shí)解決實(shí)現(xiàn)了園區(qū)全方位的元數(shù)據(jù)管理，打通了應(yīng)急和技術(shù)元數(shù)據(jù)關(guān)聯(lián)關(guān)系為園區(qū)數(shù)據(jù)平臺(tái)建設(shè)提供了基礎(chǔ)類數(shù)據(jù)標(biāo)準(zhǔn)第三階段數(shù)據(jù)質(zhì)量管理持續(xù)優(yōu)化并增強(qiáng)元數(shù)據(jù)管理持續(xù)優(yōu)化并增強(qiáng)基礎(chǔ)類數(shù)據(jù)標(biāo)準(zhǔn)逐步落地實(shí)施開展指標(biāo)類數(shù)據(jù)標(biāo)準(zhǔn)建設(shè)基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)、管控流程、評(píng)價(jià)指標(biāo)、落地策略通過(guò)完善的數(shù)據(jù)管控體系，提升數(shù)據(jù)質(zhì)量、避免數(shù)據(jù)二義性、建立數(shù)據(jù)間的血緣關(guān)系，使得應(yīng)急人員可以方便、有效的使用數(shù)據(jù)，提高數(shù)據(jù)實(shí)用性園區(qū)大數(shù)據(jù)治理演進(jìn)說(shuō)明——應(yīng)用體系階段劃分建設(shè)內(nèi)容預(yù)期效果第一階段開展服務(wù)信息管理建設(shè)，設(shè)計(jì)并實(shí)施個(gè)人服務(wù)和供應(yīng)商360°視圖、服務(wù)目標(biāo)搜索、服務(wù)細(xì)分等功能開展風(fēng)險(xiǎn)管理建設(shè)，設(shè)計(jì)并實(shí)施供應(yīng)商和個(gè)人服務(wù)風(fēng)險(xiǎn)評(píng)級(jí)模型開展運(yùn)營(yíng)管理建設(shè)，設(shè)計(jì)并實(shí)施服務(wù)民生等應(yīng)急條線應(yīng)急量統(tǒng)計(jì)分析初步梳理實(shí)時(shí)、準(zhǔn)實(shí)時(shí)分析需求，進(jìn)行高時(shí)效分析應(yīng)用試點(diǎn)可以方便的對(duì)個(gè)人服務(wù)和供應(yīng)商進(jìn)行分群，以及全方位信息查詢和展示供應(yīng)商和個(gè)人服務(wù)風(fēng)險(xiǎn)等級(jí)評(píng)定針對(duì)目前開展的應(yīng)急進(jìn)行經(jīng)營(yíng)情況統(tǒng)計(jì)分析搭建并驗(yàn)證高時(shí)效應(yīng)用體系第二階段隨著園區(qū)應(yīng)急的展開，逐步開展管理分析體系的建設(shè)，本階段重點(diǎn)為服務(wù)關(guān)系管理、運(yùn)營(yíng)管理等高級(jí)應(yīng)急人員利用沙盤演練平臺(tái)進(jìn)行數(shù)據(jù)挖掘、預(yù)測(cè)和科學(xué)試驗(yàn)進(jìn)一步樹立實(shí)時(shí)、準(zhǔn)實(shí)時(shí)分析需求，深化開展高時(shí)效分析應(yīng)用開始梳理市場(chǎng)上的數(shù)據(jù)應(yīng)用需求，嘗試封裝增值數(shù)據(jù)產(chǎn)品通過(guò)管理分析體系的建設(shè)、滿足了園區(qū)日常經(jīng)營(yíng)管理、決策分析和進(jìn)一步提高價(jià)值創(chuàng)造力的需要實(shí)現(xiàn)了應(yīng)急人員自主用數(shù)實(shí)現(xiàn)了高時(shí)效分析，與應(yīng)急流程的整合實(shí)現(xiàn)了數(shù)據(jù)產(chǎn)品的封裝，提升了數(shù)據(jù)價(jià)值第三階段隨著園區(qū)應(yīng)急的展開，進(jìn)一步完善管理分析體系的建設(shè)，包括：市場(chǎng)風(fēng)險(xiǎn)管理、操作風(fēng)險(xiǎn)管理、財(cái)務(wù)管理等收集實(shí)時(shí)分析需求，進(jìn)一步增強(qiáng)并優(yōu)化實(shí)時(shí)分析應(yīng)用體系增值數(shù)據(jù)產(chǎn)品設(shè)計(jì)逐漸成為重點(diǎn)，數(shù)據(jù)分析師收集園區(qū)內(nèi)外部數(shù)據(jù)需求，設(shè)計(jì)更完善的增值數(shù)據(jù)產(chǎn)品通過(guò)管理分析應(yīng)用體系建設(shè)進(jìn)一步實(shí)現(xiàn)數(shù)據(jù)共享、應(yīng)急協(xié)作與創(chuàng)新通過(guò)實(shí)時(shí)分析應(yīng)用體系建設(shè)，實(shí)現(xiàn)大數(shù)據(jù)平臺(tái)應(yīng)急系統(tǒng)的交互，與應(yīng)急流程的融合增值數(shù)據(jù)產(chǎn)品的開發(fā)進(jìn)一步發(fā)揮的數(shù)據(jù)平臺(tái)的數(shù)據(jù)價(jià)值目錄CONTENTS4園區(qū)大數(shù)據(jù)治理建設(shè)實(shí)施銀行園區(qū)大數(shù)據(jù)治理一期架構(gòu)基礎(chǔ)計(jì)算平臺(tái)：基于Hadoop集群構(gòu)建，按照應(yīng)急條線、以貼源數(shù)據(jù)模型存儲(chǔ)了應(yīng)急系統(tǒng)明細(xì)數(shù)據(jù)數(shù)據(jù)交換平臺(tái)：NAS集群實(shí)現(xiàn)了進(jìn)出數(shù)據(jù)平臺(tái)數(shù)據(jù)的暫存，應(yīng)急數(shù)據(jù)交換組件實(shí)現(xiàn)了應(yīng)急系統(tǒng)每日增量數(shù)據(jù)加載，數(shù)據(jù)區(qū)數(shù)據(jù)交換組件實(shí)現(xiàn)了基礎(chǔ)計(jì)算平臺(tái)與管理分析平臺(tái)間的數(shù)據(jù)交換流程調(diào)度平臺(tái)：自主開發(fā)的流程調(diào)度引擎實(shí)現(xiàn)整個(gè)數(shù)據(jù)平臺(tái)的數(shù)據(jù)處理任務(wù)調(diào)度和運(yùn)行管理分析平臺(tái)：由X86分析型數(shù)據(jù)庫(kù)集群、BI軟件1J2EE應(yīng)用構(gòu)成，實(shí)現(xiàn)了面向應(yīng)用的數(shù)據(jù)加工、管理、分析服務(wù)實(shí)時(shí)分析平臺(tái)：由高檔X86服務(wù)器組成的集群，實(shí)現(xiàn)高時(shí)效、高并發(fā)的實(shí)時(shí)、準(zhǔn)實(shí)時(shí)類管理分析需求數(shù)據(jù)交換平臺(tái)—平臺(tái)邏輯架構(gòu)云數(shù)據(jù)推送平臺(tái)實(shí)現(xiàn)源系統(tǒng)數(shù)據(jù)一次獲取獲、按需分發(fā)。平臺(tái)采用GoldenGate、JBUS、Flume等技術(shù)獲取增量數(shù)據(jù)，存儲(chǔ)在MySQL集群平臺(tái)按照接口規(guī)范生成文件，LZO壓縮后，通過(guò)FTP傳輸?shù)絅AS指定目錄POP銀行園區(qū)大數(shù)據(jù)治理NAS集群物流財(cái)務(wù)供應(yīng)鏈人人貸……云數(shù)據(jù)推送平臺(tái)數(shù)據(jù)交換平臺(tái)由FTP服務(wù)器、加載服務(wù)器和NAS存儲(chǔ)組成，完成應(yīng)急系統(tǒng)數(shù)據(jù)的獲取、加載和歸檔FTP服務(wù)器：利用LVS構(gòu)成的FTP集群，接收云數(shù)據(jù)推送平臺(tái)處理后的數(shù)據(jù)，存儲(chǔ)在NAS集群的指定目錄加載服務(wù)器：部署ETL任務(wù)，實(shí)現(xiàn)指定目錄的文件到達(dá)監(jiān)控、文件級(jí)檢核、數(shù)據(jù)加載（HiveLoad）到臨時(shí)數(shù)據(jù)區(qū)，同時(shí)歸檔（copyfromlocal）歷史數(shù)據(jù)區(qū)NAS集群：按照日期和源系統(tǒng)劃分目錄，緩存數(shù)據(jù)，支持日常數(shù)據(jù)交換和ETL…………LVS集群：FTP服務(wù)器#3加載服務(wù)器#1文件加載文件歸檔文件到達(dá)事件監(jiān)控文件級(jí)檢核加載服務(wù)器#4文件加載文件歸檔文件到達(dá)事件監(jiān)控文件級(jí)檢核LVS集群：FTP服務(wù)器#1LVS集群：負(fù)載均衡服務(wù)器…………數(shù)據(jù)交換平臺(tái)—參與方責(zé)任劃分設(shè)計(jì)并實(shí)施云數(shù)據(jù)推送平臺(tái)；按照?qǐng)@區(qū)接口定義，抽取應(yīng)急系統(tǒng)數(shù)據(jù)；按照?qǐng)@區(qū)接口規(guī)范要求，按時(shí)生成數(shù)據(jù)文件、控制文件和DDL文件，并通過(guò)FTP傳輸?shù)絅AS指定目錄；若源系統(tǒng)有變更，則要求在變更前提供變更內(nèi)容說(shuō)明，升級(jí)平臺(tái)版本，根據(jù)園區(qū)更新接口規(guī)范提供數(shù)據(jù)；應(yīng)及時(shí)解決接口數(shù)據(jù)提供過(guò)程中出現(xiàn)的問(wèn)題；對(duì)于未盡事宜，應(yīng)同園區(qū)協(xié)商解決。云計(jì)算安裝部署園區(qū)園區(qū)大數(shù)據(jù)治理物理環(huán)境、應(yīng)用軟件，并進(jìn)行基礎(chǔ)設(shè)施運(yùn)維；在應(yīng)急系統(tǒng)數(shù)據(jù)庫(kù)服務(wù)器安裝并部署云數(shù)據(jù)推送平臺(tái)服務(wù)端，并提供數(shù)據(jù)庫(kù)訪問(wèn)。運(yùn)維單位制定接口規(guī)范，并提交給云數(shù)據(jù)推送項(xiàng)目組；梳理應(yīng)急系統(tǒng)數(shù)據(jù)字典，制定接口定義，并提交給云數(shù)據(jù)推送項(xiàng)目組；開發(fā)數(shù)據(jù)交換組件，從NAS獲取數(shù)據(jù)并處理；對(duì)接收的數(shù)據(jù)提供驗(yàn)證功能，并返回驗(yàn)證結(jié)果到云數(shù)據(jù)推送平臺(tái)；根據(jù)云數(shù)據(jù)推送平臺(tái)提交的變更通知修改接口定義和數(shù)據(jù)交換組件；