版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)
文檔簡介
市級數(shù)字政府大數(shù)據(jù)管理中心大數(shù)據(jù)資源平臺建設(shè)和實施方案整理制作:郎豐利1519制作時間:2023年睿利而行整理制作:郎豐利1519制作時間:2023年睿利而行整理制作:郎豐利1519制作時間:2023年睿利而行2023年背景與需求分析總體架構(gòu)設(shè)計平臺功能設(shè)計平臺數(shù)據(jù)綜合應用2134項目實施方案5整理制作:郎豐利1519制作時間:2023年睿利而行整理制作:郎豐利1519制作時間:2023年睿利而行整理制作:郎豐利1519制作時間:2023年睿利而行大數(shù)據(jù)管理中心發(fā)展背景為建設(shè)卓越全球城市,實現(xiàn)政府治理能力現(xiàn)代化目標,由市大數(shù)據(jù)中心牽頭,在政務公共數(shù)據(jù)管理和互聯(lián)網(wǎng)政務服務方面采取了一系列的實踐工作。根據(jù)《市公共數(shù)據(jù)和一網(wǎng)通辦管理辦法》要求,前期已在“一網(wǎng)通辦”的政務服務領(lǐng)域進行了信息化項目建設(shè),在提升了政府治理能力和公共服務水平的同時,也產(chǎn)生了匯聚全市政務公共數(shù)據(jù),探索政務服務領(lǐng)域應用的需求。市大數(shù)據(jù)中心作為全市政務數(shù)據(jù)的主要管理單位,承擔著政策本地化落實、政務數(shù)據(jù)交換、大數(shù)據(jù)應用研究、信息化建設(shè)運維以及其他數(shù)據(jù)相關(guān)的工作職責,從中心成立之初便開始研究政務數(shù)據(jù)管理和應用的方法,去年年底探索了以政務數(shù)據(jù)交換共享為核心的實踐,但隨著對中心職能的理解加深,我們認為中心不僅作為全市政務數(shù)據(jù)的“樞紐中轉(zhuǎn)中心”,更應該成為各政務服務條線領(lǐng)域的“歸集管理中心”,為本市的經(jīng)濟活動、公共事業(yè)、社會關(guān)系、人員密度等各城市管理領(lǐng)域提供數(shù)據(jù)層面的最大支撐。規(guī)劃公共數(shù)據(jù)發(fā)展路線支撐城市服務能效提升精準城市服務整體共享協(xié)同數(shù)據(jù)科學管理公共數(shù)據(jù)共享社會數(shù)據(jù)協(xié)同條線業(yè)務協(xié)同數(shù)據(jù)服務開放社會治理宏觀經(jīng)濟市場監(jiān)管生態(tài)保護城市高效運行應急事件響應事件風險預防數(shù)據(jù)完整歸集數(shù)據(jù)實時同步資源目錄健全數(shù)據(jù)全面治理大數(shù)據(jù)共享交換平臺建設(shè)與使用情況大數(shù)據(jù)中心自去年開始,根據(jù)整體規(guī)劃啟動了市數(shù)據(jù)共享交換平臺項目的建設(shè),并于2019年1月開始正式進行全市范圍的試運行。平臺建設(shè)內(nèi)容包括:1、總集成及部分應用開發(fā):平臺集成門戶及整體平臺的基礎(chǔ)功能菜單級整合;2、數(shù)據(jù)治理子系統(tǒng):包含數(shù)據(jù)交換模塊和服務管理模塊,實現(xiàn)數(shù)據(jù)資源目錄及三清單的管理,并提供市級數(shù)據(jù)庫的對外發(fā)布利用;3、數(shù)據(jù)共享交換子系統(tǒng):實現(xiàn)數(shù)據(jù)交換引擎、統(tǒng)一調(diào)度引擎、任務管理、數(shù)據(jù)橋接等功能,以及數(shù)據(jù)湖數(shù)據(jù)的存儲管理、共享與交換;4、數(shù)據(jù)質(zhì)量監(jiān)管及支撐子系統(tǒng):實現(xiàn)數(shù)據(jù)質(zhì)量管理功能,包括數(shù)據(jù)質(zhì)量規(guī)則制定、數(shù)據(jù)質(zhì)量稽核、數(shù)據(jù)質(zhì)量問題閉環(huán)管理;5、大數(shù)據(jù)支撐管理子系統(tǒng):包含市級數(shù)據(jù)湖和市級數(shù)據(jù)庫,匯聚“四大基礎(chǔ)庫”、“市級統(tǒng)建系統(tǒng)”、“各市級委辦系統(tǒng)”、“各行政區(qū)系統(tǒng)”的經(jīng)過初始治理的原始數(shù)據(jù);并存放經(jīng)過一系列清洗、轉(zhuǎn)換、加載、治理步驟后的高質(zhì)量的政務數(shù)據(jù)資源,為城市管理、公共服務等提供數(shù)據(jù)來源;平臺接入52個委辦的公共數(shù)據(jù),每月16億條以上,數(shù)據(jù)總?cè)萘吭?76.0TB,人口庫預計46.75TB,法人庫預計1.78TB,空間地理庫預計7.99TB,電子證照庫預計91.05TB。前期平臺建設(shè)問題分析在數(shù)據(jù)共享交換平臺項目試運行期間,隨著數(shù)據(jù)存儲量的增長、數(shù)據(jù)交換共享需求量的增加,逐漸發(fā)現(xiàn)平臺存在一些問題。數(shù)據(jù)湖&數(shù)據(jù)庫缺乏統(tǒng)一規(guī)劃,數(shù)據(jù)標準需繼續(xù)制定完善現(xiàn)有平臺應用支撐能力較為薄弱,容易形成數(shù)據(jù)沼澤源端數(shù)據(jù)標準各異,加工存在技術(shù)壁壘數(shù)據(jù)共享和數(shù)據(jù)開放能力不全面,開放門戶使用價值不高未規(guī)劃主題/專題領(lǐng)域的數(shù)據(jù)綜合應用,應用創(chuàng)新動能不足,需進行補充完善城市管理數(shù)據(jù)缺乏,精準服務無法開展數(shù)據(jù)安全管控僅考慮部分安全應用,數(shù)據(jù)全生命周期的安全管控存在短板,需整體提升安全防護能力整理制作郎豐利1519全生命周期安全管控能力有待提升前期平臺未規(guī)劃數(shù)據(jù)實時采集技術(shù),無法支撐高效業(yè)務協(xié)同數(shù)據(jù)治理層面未考慮國家資源平臺建設(shè)要求,需重新設(shè)計系統(tǒng)功能實現(xiàn)數(shù)據(jù)共享時效性要求無法滿足業(yè)務需要本期平臺建設(shè)目標分析源端數(shù)據(jù)標準各異,加工存在技術(shù)壁壘城市管理數(shù)據(jù)缺乏,精準服務無法開展全生命周期安全管控能力有待提升缺乏實時歸集技術(shù),數(shù)據(jù)共享協(xié)同低效聚:推進人口、法人、空間地理庫數(shù)據(jù)源整合,促進電子證照庫對接利用。逐步推進社會數(shù)據(jù)、互聯(lián)網(wǎng)數(shù)據(jù)等采集匯聚管:構(gòu)建一站式數(shù)據(jù)資產(chǎn)可視化管理,通過對數(shù)據(jù)資產(chǎn)的血緣譜系和信息資源目錄的統(tǒng)一管理,實現(xiàn)數(shù)據(jù)的全過程管理,以及各環(huán)節(jié)安全監(jiān)管通:實現(xiàn)基于應用場景的數(shù)據(jù)資源授權(quán)管理機制,推動公共數(shù)據(jù)按需充分共享。實現(xiàn)數(shù)據(jù)分級分類開放管理,擴展共享交換平臺功能用:開展主題數(shù)據(jù)庫建設(shè),推動數(shù)據(jù)資源整合及數(shù)據(jù)分析應用。開展數(shù)據(jù)應用模型及算法研究,探索數(shù)據(jù)服務模式創(chuàng)新安:打造整體安全管控體系,保證平臺上政務數(shù)據(jù)在數(shù)據(jù)匯聚、數(shù)據(jù)管理、數(shù)據(jù)共享、數(shù)據(jù)開放等全生命周期中的安全防護能力建設(shè)目標本期平臺建設(shè)內(nèi)容分析結(jié)合項目的建設(shè)分項目標分析,認為本次大數(shù)據(jù)資源平臺的建設(shè)內(nèi)容應包括:數(shù)據(jù)管理子系統(tǒng)數(shù)據(jù)治理子系統(tǒng)平臺集成門戶聚管通用數(shù)據(jù)開放子系統(tǒng)市級數(shù)據(jù)庫大數(shù)據(jù)綜合應用安數(shù)據(jù)安全管理子系統(tǒng)本期平臺建設(shè)內(nèi)容分析數(shù)據(jù)開放子系統(tǒng)(含開放門戶)大數(shù)據(jù)綜合應用數(shù)據(jù)安全管理子系統(tǒng)通過宏觀經(jīng)濟、市場運行、民生幸福、城市立方體等專題應用的建設(shè),構(gòu)建大數(shù)據(jù)綜合應用示范輔助領(lǐng)導決策,構(gòu)建應用管理中心支撐數(shù)據(jù)應用,以為各部門提供優(yōu)質(zhì)的數(shù)據(jù)服務。主要實現(xiàn)數(shù)據(jù)應用方管理、開放清單管理(含開放清單維護、開放目錄關(guān)聯(lián)、開放數(shù)據(jù)集維護)、數(shù)據(jù)開放管理等功能。主要實現(xiàn)首頁、數(shù)據(jù)目錄、數(shù)據(jù)應用、數(shù)據(jù)圖譜、地圖數(shù)據(jù)、互動交流、數(shù)據(jù)開發(fā)者、輔助事項、個人管理等各項門戶的建設(shè)。主要實現(xiàn)安全基礎(chǔ)功能管理、數(shù)據(jù)安全審計、風險識別管理、數(shù)據(jù)安全管理、敏感數(shù)據(jù)管理、安全監(jiān)管中心、數(shù)據(jù)安全采集等功能,以及對大數(shù)據(jù)資源平臺各功能模塊的安全嵌入。主要實現(xiàn)公共基礎(chǔ)庫建設(shè)(含人口庫、法人庫、空間地理庫)、支持公共主題庫建設(shè)(含經(jīng)濟活動庫、公共事業(yè)庫、社會關(guān)系庫、人員密度庫)、支持公共專題庫建設(shè)(含經(jīng)濟運行監(jiān)測、宏觀經(jīng)濟預測等19個專題庫)。市級數(shù)據(jù)庫數(shù)據(jù)治理子系統(tǒng)平臺集成門戶數(shù)據(jù)管理子系統(tǒng)主要實現(xiàn)數(shù)據(jù)架構(gòu)管理、數(shù)據(jù)關(guān)系管理、數(shù)據(jù)分級分類管理、數(shù)據(jù)異常管理、數(shù)據(jù)分析管理、數(shù)據(jù)流程管理、流數(shù)據(jù)處理、知識圖譜、數(shù)據(jù)分層管理、數(shù)據(jù)運維管理、數(shù)據(jù)資產(chǎn)管理功能。通過國家資源管理子系統(tǒng)實現(xiàn)資源申請、撤銷、審核、查詢、消息、配置、應用及事項、使用單位對接、目錄對接、業(yè)務流程對接、通知、監(jiān)控模塊對接等功能。主要實現(xiàn)多租戶功能、運營中心、開發(fā)中心、消息推送、數(shù)據(jù)推送、個人信息管理、系統(tǒng)管理功能。背景與需求分析總體架構(gòu)設(shè)計平臺功能設(shè)計平臺數(shù)據(jù)綜合應用2134項目實施方案5總體架構(gòu)·大數(shù)據(jù)資源平臺功能架構(gòu)規(guī)劃市領(lǐng)導各委辦局分析人員區(qū)政府外部機構(gòu)公民開發(fā)者運維管理者數(shù)據(jù)中心層對外開放區(qū)對外數(shù)據(jù)開放脫敏區(qū)數(shù)據(jù)沙箱數(shù)據(jù)沙箱數(shù)據(jù)沙箱私有數(shù)據(jù)處理分布式數(shù)據(jù)存儲消息隊列RDB存儲數(shù)據(jù)安全身份訪問控制流量數(shù)據(jù)采集日志采集及存儲告警監(jiān)控管理及處理安全審計數(shù)據(jù)脫敏服務安全風險識別統(tǒng)一運維數(shù)據(jù)運維平臺運維門戶數(shù)據(jù)開放門戶平臺集成門戶存儲計算區(qū)批數(shù)據(jù)計算流數(shù)據(jù)計算數(shù)據(jù)采集政務數(shù)據(jù)(國家、市級、區(qū))公共事業(yè)數(shù)據(jù)行業(yè)數(shù)據(jù)(金融、電信)物聯(lián)網(wǎng)數(shù)據(jù)(氣象、攝像頭…)離線采集實時采集流媒體采集數(shù)據(jù)導入上報準實時采集圖數(shù)據(jù)庫應用層宏觀經(jīng)濟專題市場運行專題城市綜合體專題民生幸福專題大數(shù)據(jù)綜合應用采集數(shù)據(jù)源分布式文件存儲服務開放層數(shù)據(jù)共享服務服務列表下載數(shù)據(jù)分析和可視化服務數(shù)據(jù)可視化工具數(shù)據(jù)探索工具服務授權(quán)接口庫表數(shù)據(jù)開放管理服務數(shù)據(jù)地圖數(shù)據(jù)接口數(shù)據(jù)圖譜規(guī)則定義事件采集事件分發(fā)事件服務中心事件處理非結(jié)構(gòu)化數(shù)據(jù)區(qū)圖片數(shù)據(jù)離線數(shù)據(jù)區(qū)數(shù)據(jù)湖標準層(主題模型)共享層(標簽、指標)實時數(shù)據(jù)區(qū)應用租戶應用租戶應用租戶實時模型實時指標實時事件結(jié)構(gòu)化數(shù)據(jù)區(qū)文本數(shù)據(jù)數(shù)據(jù)處理層數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)開發(fā)調(diào)度管理數(shù)據(jù)資產(chǎn)資產(chǎn)總覽資產(chǎn)目錄資產(chǎn)地圖資產(chǎn)報告共享及運營門戶建設(shè)國家資源平臺級聯(lián)數(shù)據(jù)架構(gòu)管理數(shù)據(jù)管理管理數(shù)據(jù)異常管理數(shù)據(jù)流程管理數(shù)據(jù)分層管理數(shù)據(jù)運維管理待辦任務消息中心管理控制臺任務監(jiān)控通知公告資源申請模塊資源審核模塊消息管理模塊配置管理模塊通知管理模塊監(jiān)控對接模塊數(shù)字水印/簽名管理密鑰管理數(shù)據(jù)管理子系統(tǒng)數(shù)據(jù)治理子系統(tǒng)大數(shù)據(jù)綜合應用數(shù)據(jù)開放門戶平臺集成門戶數(shù)據(jù)開放子系統(tǒng)數(shù)據(jù)開放子系統(tǒng)市級數(shù)據(jù)庫數(shù)據(jù)安全管理子系統(tǒng)124674435數(shù)據(jù)管理子系統(tǒng)1總體架構(gòu)·大數(shù)據(jù)資源平臺功能架構(gòu)設(shè)計市領(lǐng)導各委辦局分析人員區(qū)政府外部機構(gòu)公民開發(fā)者運維管理者數(shù)據(jù)中心層對外開放區(qū)對外數(shù)據(jù)開放脫敏區(qū)數(shù)據(jù)沙箱數(shù)據(jù)沙箱數(shù)據(jù)沙箱私有數(shù)據(jù)處理分布式數(shù)據(jù)存儲消息隊列RDB存儲采集數(shù)據(jù)安全身份訪問控制流量數(shù)據(jù)采集數(shù)據(jù)脫敏數(shù)據(jù)加密/密鑰管理數(shù)字水印/簽名管理日志采集及存儲安全審計(安全風險接入識別)統(tǒng)一運維數(shù)據(jù)運維平臺運維門戶數(shù)據(jù)開放門戶平臺集成門戶存儲計算區(qū)批數(shù)據(jù)計算流數(shù)據(jù)計算數(shù)據(jù)采集政務數(shù)據(jù)(國家、市級、區(qū))公共事業(yè)數(shù)據(jù)行業(yè)數(shù)據(jù)(金融、電信)物聯(lián)網(wǎng)數(shù)據(jù)(氣象、攝像頭…)離線采集實時采集流媒體采集數(shù)據(jù)導入上報準實時采集圖數(shù)據(jù)庫應用層宏觀經(jīng)濟專題市場運行專題城市綜合體專題民生幸福專題大數(shù)據(jù)綜合應用數(shù)據(jù)源分布式文件存儲服務開放層數(shù)據(jù)共享服務服務列表數(shù)據(jù)分析及可視化數(shù)據(jù)可視化工具數(shù)據(jù)探索工具服務授權(quán)統(tǒng)計分析服務監(jiān)控數(shù)據(jù)開放管理數(shù)據(jù)地圖數(shù)據(jù)接口數(shù)據(jù)圖譜規(guī)則定義事件采集事件分發(fā)事件服務中心事件處理非結(jié)構(gòu)化數(shù)據(jù)區(qū)圖片數(shù)據(jù)離線數(shù)據(jù)區(qū)數(shù)據(jù)湖標準層(主題模型)共享層(標簽、指標)實時數(shù)據(jù)區(qū)應用租戶應用租戶應用租戶實時模型實時指標實時事件結(jié)構(gòu)化數(shù)據(jù)區(qū)文本數(shù)據(jù)數(shù)據(jù)處理層數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)開發(fā)調(diào)度管理數(shù)據(jù)資產(chǎn)資產(chǎn)總覽資產(chǎn)目錄資產(chǎn)地圖資產(chǎn)報告共享及運營門戶建設(shè)國家資源平臺級聯(lián)數(shù)據(jù)架構(gòu)管理數(shù)據(jù)關(guān)系管理數(shù)據(jù)異常管理數(shù)據(jù)流程管理數(shù)據(jù)分層管理數(shù)據(jù)運維管理待辦任務消息中心管理控制臺任務監(jiān)控通知公告資源申請模塊資源審核模塊消息管理模塊配置管理模塊通知管理模塊監(jiān)控對接模塊告警監(jiān)控管理及處理總體架構(gòu)——大數(shù)據(jù)資源平臺部署架構(gòu)本期項目設(shè)備部署如下圖所示,將在移動云(怒江機房)新增申請150臺虛擬機設(shè)備、80臺實體服務器用于本期軟件部署??傮w架構(gòu)·大數(shù)據(jù)資源平臺數(shù)據(jù)架構(gòu)大數(shù)據(jù)資源區(qū):包括市級數(shù)據(jù)湖和市級數(shù)據(jù)庫兩大數(shù)據(jù)資源數(shù)據(jù)湖:主要存放市級政府部門業(yè)務數(shù)據(jù)庫、未經(jīng)加工的原始業(yè)務數(shù)據(jù)庫,支持存儲結(jié)構(gòu)化、非結(jié)構(gòu)化等多種類型的數(shù)據(jù)。市級數(shù)據(jù)庫:主要用于存放經(jīng)過一系列清洗、轉(zhuǎn)換、加載、治理步驟后的高質(zhì)量的政務數(shù)據(jù)資源。對內(nèi)共享交換區(qū):主要用于存放全市各部門、各區(qū)政務數(shù)據(jù)資源匯集和共享交換過程中的數(shù)據(jù),包括直接共享交換的數(shù)據(jù)和來自市級數(shù)據(jù)庫加工后的數(shù)據(jù)。對外開放區(qū):主要用于存放對外開放的數(shù)據(jù),通過單獨的對外開發(fā)區(qū)與大數(shù)據(jù)資源區(qū)隔離,可以提供更高級別的數(shù)據(jù)安全保護。大數(shù)據(jù)資源平臺支撐數(shù)據(jù)共享交換(生產(chǎn)職能)、數(shù)據(jù)分析、數(shù)據(jù)開放三大核心數(shù)據(jù)服務,包括大數(shù)據(jù)資源區(qū)、對內(nèi)共享交換區(qū)和對外開放區(qū)三大數(shù)據(jù)區(qū)。共享交換數(shù)據(jù)對內(nèi)共享交換區(qū)大數(shù)據(jù)資源區(qū)離線數(shù)據(jù)區(qū)實時數(shù)據(jù)區(qū)結(jié)構(gòu)化數(shù)據(jù)市級數(shù)據(jù)湖市級數(shù)據(jù)庫非結(jié)構(gòu)化數(shù)據(jù)安全沙箱數(shù)據(jù)對外開放區(qū)對外開放脫敏數(shù)據(jù)中心租戶融合租戶基礎(chǔ)庫主題庫總體架構(gòu)·大數(shù)據(jù)資源平臺權(quán)限架構(gòu)單位用戶使用權(quán)權(quán)限管理員管理權(quán)管用權(quán)限審計員審計權(quán)審管用審管用審授權(quán)角色中心用戶角色角色授權(quán)委辦局下級單位三權(quán)分立:管用審角色分離分級授權(quán):中心租戶統(tǒng)一為牽頭單位進行管理權(quán)限的分配,單位權(quán)限設(shè)計由用戶支撐人機賬戶分離:人員賬號及機器賬號實現(xiàn)互斥分配分配角色權(quán)限綁定功能模塊人員賬號機器賬號管理員審計員用戶管用審背景與需求分析總體架構(gòu)設(shè)計平臺功能設(shè)計平臺數(shù)據(jù)綜合應用2134項目實施方案5整體對應關(guān)系平臺集成門戶共享及運營門戶3大數(shù)據(jù)綜合應用大數(shù)據(jù)綜合應用7數(shù)據(jù)安全管理子系統(tǒng)身份訪問控制流量數(shù)據(jù)采集數(shù)據(jù)脫敏數(shù)據(jù)加密/密鑰管理數(shù)字水印/簽名管理日志采集及存儲安全審計(安全風險接入識別)告警監(jiān)控管理及處理5數(shù)據(jù)開放子系統(tǒng)數(shù)據(jù)開放管理數(shù)據(jù)開放門戶4數(shù)據(jù)沙箱市級數(shù)據(jù)庫主題數(shù)據(jù)庫運營支撐6基礎(chǔ)數(shù)據(jù)庫數(shù)據(jù)管理子系統(tǒng)流數(shù)據(jù)接入數(shù)據(jù)支撐平臺數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)開發(fā)調(diào)度管理數(shù)據(jù)分析及可視化批數(shù)據(jù)接入數(shù)據(jù)共享服務1數(shù)據(jù)治理子系統(tǒng)國家資源平臺級聯(lián)21、數(shù)據(jù)管理子系統(tǒng)·批數(shù)據(jù)接入批數(shù)據(jù)處理通過數(shù)據(jù)采集平臺任務調(diào)度的方式,根據(jù)時間戳定時探查委辦局前置庫數(shù)據(jù)以及結(jié)構(gòu)化文件的變動,通過數(shù)據(jù)采集平臺的解析,抽取增量數(shù)據(jù)到數(shù)據(jù)湖。郎豐利整理制作。1、數(shù)據(jù)管理子系統(tǒng)·流數(shù)據(jù)接入流數(shù)據(jù)處理通過數(shù)據(jù)湖內(nèi)獨立部署kafka消息系統(tǒng),采用委辦局推送或自動拉取的方式,將流數(shù)據(jù)接入大數(shù)據(jù)支撐平臺。1、數(shù)據(jù)管理子系統(tǒng)·數(shù)據(jù)支撐平臺1、數(shù)據(jù)管理子系統(tǒng)·數(shù)據(jù)支撐平臺批數(shù)據(jù)處理:
各類批數(shù)據(jù)通過數(shù)據(jù)采集功能進入數(shù)據(jù)支撐平臺,經(jīng)過存儲、清洗、匯總和關(guān)聯(lián)匯總等,產(chǎn)生應用數(shù)據(jù),并實現(xiàn)數(shù)據(jù)共享或開放。流數(shù)據(jù)處理:流數(shù)據(jù)通過數(shù)據(jù)采集功能進入數(shù)據(jù)支撐平臺后,根據(jù)不同需求,可實現(xiàn)實時數(shù)據(jù)計算后的開放,也可實現(xiàn)通過實時數(shù)據(jù)分析后匯總產(chǎn)生應用數(shù)據(jù),進而實現(xiàn)數(shù)據(jù)共享或開放。1、數(shù)據(jù)管理子系統(tǒng)·數(shù)據(jù)資產(chǎn)管理邏輯資源層(計算、存儲、網(wǎng)絡(luò)資源)政務云管理存儲管理網(wǎng)絡(luò)管理資源調(diào)度系統(tǒng)管理應用層資源管理模型管理元數(shù)據(jù)存儲庫業(yè)務庫主題數(shù)據(jù)庫元數(shù)據(jù)數(shù)據(jù)資源層基礎(chǔ)設(shè)施層用戶管理目錄管理標準管理專題數(shù)據(jù)庫基礎(chǔ)數(shù)據(jù)庫模型維護關(guān)系關(guān)聯(lián)代碼關(guān)聯(lián)對標分析目錄維護資源編目目錄分類目錄標簽標準維護標準導入標準瀏覽落地檢核數(shù)據(jù)源管理資源注冊前置節(jié)點庫表資源資源發(fā)布資源審核文件資源接口資源…版本管理模型物化目錄瀏覽目錄級聯(lián)代碼映射版本管理指標…部門數(shù)據(jù)庫部門數(shù)據(jù)庫人口庫法人庫…互聯(lián)網(wǎng)+監(jiān)管健康衛(wèi)生…城市運行經(jīng)濟運行…1、根據(jù)提供方供數(shù)責任,對接入數(shù)據(jù)資源進行編目,維護其業(yè)務屬性和管理屬性,使其初步具備共享條件。2、參照數(shù)據(jù)標準設(shè)計數(shù)據(jù)模型結(jié)構(gòu)、業(yè)務代碼,通過建立變更管理和版本控制,實現(xiàn)數(shù)據(jù)模型管控。3、通過基礎(chǔ)元數(shù)據(jù)定義數(shù)據(jù)資產(chǎn)規(guī)格(如:庫表、文件、文件夾、接口等),并借助統(tǒng)一平臺實現(xiàn)資源接入。1、數(shù)據(jù)管理子系統(tǒng)·數(shù)據(jù)資產(chǎn)管理系統(tǒng)集成功能:與共享及運營門戶對接:實現(xiàn)統(tǒng)一授權(quán)、統(tǒng)一登錄以及任務工單同步與數(shù)據(jù)開放門戶對接:實現(xiàn)開放清單的編制發(fā)布與大數(shù)據(jù)支撐平臺對接:實現(xiàn)流數(shù)據(jù)接入以及支撐數(shù)據(jù)資產(chǎn)的管理與數(shù)據(jù)開發(fā)調(diào)度管理對接:實現(xiàn)資源目錄的雙向同步維護更新與批數(shù)據(jù)接入對接:實現(xiàn)數(shù)據(jù)的歸集與共享下發(fā)共享門戶、運營門戶數(shù)據(jù)資產(chǎn)管理模型管理目錄管理標準管理資源管理數(shù)據(jù)開放門戶數(shù)據(jù)開發(fā)調(diào)度平臺數(shù)據(jù)支撐平臺批數(shù)據(jù)接入…1、數(shù)據(jù)管理子系統(tǒng)·數(shù)據(jù)開發(fā)調(diào)度管理數(shù)據(jù)開發(fā)調(diào)度管理能夠支撐多種混搭數(shù)據(jù)庫環(huán)境的開發(fā)調(diào)度功能,實現(xiàn)數(shù)據(jù)從“采集→加工→對外應用服務”的全生命周期管理?;谠獢?shù)據(jù)以及日志數(shù)據(jù)提供端到端的全過程數(shù)據(jù)開發(fā)質(zhì)量管控能力。支撐數(shù)據(jù)架構(gòu)管理、數(shù)據(jù)關(guān)系管理、數(shù)據(jù)異常管理、數(shù)據(jù)分析管理、數(shù)據(jù)流程管理、流數(shù)據(jù)處理、知識圖譜、數(shù)據(jù)分層管理、數(shù)據(jù)運維管理、數(shù)據(jù)資產(chǎn)管理功能。1、數(shù)據(jù)管理子系統(tǒng)·數(shù)據(jù)開發(fā)調(diào)度管理1、數(shù)據(jù)管理子系統(tǒng)·數(shù)據(jù)開發(fā)調(diào)度管理
邊界集成說明:與數(shù)據(jù)采集平臺集成:數(shù)據(jù)采集平臺的采集任務完成后,通知開發(fā)調(diào)度管理平臺的庫內(nèi)處理程序進行調(diào)度任務的銜接與數(shù)據(jù)支撐平臺集成:數(shù)據(jù)支撐平臺提供JDBC接口,供開發(fā)調(diào)度管理平臺調(diào)用,實現(xiàn)數(shù)據(jù)庫操作的調(diào)度開發(fā)調(diào)度管理平臺對數(shù)據(jù)支撐平臺發(fā)布流數(shù)據(jù)處理任務與數(shù)據(jù)資產(chǎn)管理平臺集成:數(shù)據(jù)資產(chǎn)管理平臺提供元數(shù)據(jù)同步接口,把模型元數(shù)據(jù)同步給開發(fā)調(diào)度管理平臺做庫內(nèi)處理開發(fā)數(shù)據(jù)采集平臺調(diào)度對接開發(fā)調(diào)度管理平臺元數(shù)據(jù)同步數(shù)據(jù)資產(chǎn)管理平臺數(shù)據(jù)支撐平臺JDBC接口流數(shù)據(jù)處理1、數(shù)據(jù)管理子系統(tǒng)·數(shù)據(jù)分析及可視化用戶對擁有權(quán)限的數(shù)據(jù)資源進行數(shù)據(jù)探索及數(shù)據(jù)可視化分析。數(shù)據(jù)可視化工具:專題數(shù)據(jù),主題數(shù)據(jù)加工完成后,用戶可利用可視化工具開發(fā)可視化報表,經(jīng)過測試發(fā)布上線后,對外提供可視化服務;數(shù)據(jù)探索工具:用戶通過數(shù)據(jù)探索工具對擁有權(quán)限的數(shù)據(jù)進行在線自助數(shù)據(jù)查詢,工具記錄訪問日志。1、數(shù)據(jù)管理子系統(tǒng)·數(shù)據(jù)共享服務數(shù)據(jù)共享交換服務基于大數(shù)據(jù)區(qū)共享層的數(shù)據(jù)目錄,對各委辦局及其應用系統(tǒng)間進行數(shù)據(jù)共享、交換。數(shù)據(jù)運營管理服務檔案|授權(quán)管理|運行監(jiān)控|服務計量|平臺管理數(shù)據(jù)源數(shù)據(jù)安全安全策略|數(shù)據(jù)出口安全|請求控制|黑白名單管理|安全審計數(shù)據(jù)目錄(開放子集)資源定義資源展現(xiàn)…資源管理外部數(shù)據(jù)服務鑒權(quán)服務調(diào)用數(shù)據(jù)傳輸協(xié)議轉(zhuǎn)換數(shù)據(jù)目錄(全量)httphttpsftp推送用戶外部用戶應用外部應用服務管理數(shù)據(jù)服務目錄共享服務開發(fā)共享服務日志服務生命周期運行服務2、數(shù)據(jù)治理子系統(tǒng)·國家資源平臺級聯(lián)國家數(shù)據(jù)資源共享交換平臺體系由國家共享平臺、省級共享平臺、地市共享平臺等多級平臺組成。各級共享平臺橫向連通所轄區(qū)域政務部門的政務信息資源,縱向多級平臺對接,形成橫向聯(lián)動、縱向貫通的數(shù)據(jù)共享交換體系。其中國家資源管理子系統(tǒng)是國家與上海市兩級數(shù)據(jù)共享交換平臺的重要組成部分,通過國家資源管理子系統(tǒng)的上線運行,可以更加高效的實現(xiàn)國家與上海市的資源交換,更加快速滿足政務部門業(yè)務辦理的需要。2、數(shù)據(jù)治理子系統(tǒng)·國家資源平臺級聯(lián)國家資源平臺數(shù)據(jù)治理子系統(tǒng)(擴展功能)資源申請模塊資源撤銷模塊資源審核模塊查詢模塊消息管理模塊配置管理模塊應用及事項管理模塊使用單位對接模塊目標對接模塊資源對接模塊業(yè)務流程對接模塊通知管理對接監(jiān)控模塊資源申請功能資源申請管理資源撤銷功能資源撤銷管理資源審核功能資源申請的審核管理查詢已上線資源已發(fā)布的資源管理功能申請審核消息代辦消息預警消息配置庫表文件資源申請審核服務接口申請審核服務事項管理政務事項管理單位信息注冊與市數(shù)據(jù)交換共享目錄接口密鑰更新授權(quán)密鑰獲取注冊撤銷變更發(fā)布通知下發(fā)管理市數(shù)據(jù)共享交換平臺對接管理訂閱變更撤銷監(jiān)控目錄及資源對接3、平臺集成門戶·共享及運營門戶共享及運營門戶門戶集成數(shù)據(jù)治理子系統(tǒng)、數(shù)據(jù)管理子系統(tǒng)、事件中心、數(shù)據(jù)開發(fā)子系統(tǒng)等業(yè)務系統(tǒng)。提供統(tǒng)一的待辦工單流轉(zhuǎn)和個人消息提醒功能,通過門戶入口實現(xiàn)對業(yè)務的協(xié)同管理。門戶提供統(tǒng)一的權(quán)限管理并適配各管理子系統(tǒng)。提供角色互斥配置,實現(xiàn)權(quán)限的管、用、審分離。各用戶單位可自主管理用戶和授權(quán)。門戶實現(xiàn)CA認證、統(tǒng)一身份認證和單點登錄。門戶集成的各個系統(tǒng)界面風格上實現(xiàn)統(tǒng)一,包括列表樣式、頁面布局頁面顏色搭配、字體大小、按鈕風格等。3、平臺集成門戶·共享及運營門戶平臺集成門戶數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)治理管理數(shù)據(jù)共享管理事件中心管理可視化分析系統(tǒng)管理色彩字體控件布局統(tǒng)一登錄認證統(tǒng)一權(quán)限配置統(tǒng)一鑒權(quán)中心統(tǒng)一授權(quán)管理待辦任務通知公告消息推送數(shù)據(jù)推送統(tǒng)一風格統(tǒng)一功能統(tǒng)一認證統(tǒng)一推送4、數(shù)據(jù)開放子系統(tǒng)·數(shù)據(jù)開放管理數(shù)據(jù)開放門戶與數(shù)據(jù)開放管理關(guān)系示意圖數(shù)據(jù)開放管理架構(gòu)4、數(shù)據(jù)開放子系統(tǒng)·數(shù)據(jù)開放門戶開放門戶功能架構(gòu)4、數(shù)據(jù)開放子系統(tǒng)·數(shù)據(jù)沙箱數(shù)據(jù)開放主體可以把無條件開放數(shù)據(jù)或有條件開放的數(shù)據(jù)經(jīng)脫敏脫密處理后存放于安全沙箱中;數(shù)據(jù)利用主體基于允許開放的數(shù)據(jù),在沙箱安全隔離的計算環(huán)境中執(zhí)行計算任務,生成計算結(jié)果;用戶全生命周期使用日志可供監(jiān)管方審查。對于已經(jīng)通過數(shù)據(jù)開放主體審核的結(jié)果,數(shù)據(jù)利用主體可以按照約定的方式進行使用。5、數(shù)據(jù)安全管理子系統(tǒng)·全生命周期安全管理設(shè)計安全服務體系平臺基礎(chǔ)設(shè)備信息源身份認證信息數(shù)據(jù)授權(quán)信息安全服務信息數(shù)據(jù)流量信息大數(shù)據(jù)平臺數(shù)據(jù)流數(shù)據(jù)流安全運營中心安全服務信息導入安全運營中心服務流程平臺事前:身份訪問控制數(shù)據(jù)授權(quán)管理事中:流量數(shù)據(jù)采集數(shù)據(jù)脫敏數(shù)據(jù)加密/密鑰管理數(shù)字水印/簽名管理事后:日志采集及存儲安全審計(安全風險接入識別)告警監(jiān)控管理及處理整體:數(shù)據(jù)安全合規(guī)審查5、數(shù)據(jù)安全管理子系統(tǒng)·數(shù)據(jù)抽取流程安全設(shè)計平臺端,服務商執(zhí)行信息維護的權(quán)限,通過“鑒權(quán)中心”,“身份認證管理”和“數(shù)據(jù)授權(quán)管理”進行策略設(shè)置及下發(fā),確保訪問控制安全性和有效性;在采集數(shù)據(jù)入庫存儲時,進行數(shù)據(jù)加密處理,保障數(shù)據(jù)存儲安全;通過“數(shù)據(jù)流量采集”技術(shù)產(chǎn)品,采集主要數(shù)據(jù)節(jié)點的流量信息,解析流量中的有效信息,分析安全威脅,惡意活動等行為,為安全運營監(jiān)控中心提供數(shù)據(jù)來源在數(shù)據(jù)抽取的業(yè)務流程中5、數(shù)據(jù)安全管理子系統(tǒng)·共享交換流程安全設(shè)計平臺端,通過“鑒權(quán)中心”,“身份認證管理”和“數(shù)據(jù)授權(quán)管理”進行策略設(shè)置及下發(fā),控制委辦局申請共享和交換數(shù)據(jù)的權(quán)限,確保訪問控制安全性和有效性;委辦局端,根據(jù)身份認證管理和數(shù)據(jù)授權(quán)管理制定的策略,申請數(shù)據(jù)共享交換需求;在采集數(shù)據(jù)入庫存儲時,進行數(shù)據(jù)加密處理,保障數(shù)據(jù)存儲安全;封裝數(shù)據(jù),發(fā)布至共享交換平臺時,進行數(shù)字簽名/水印和脫敏,確保數(shù)據(jù)共享安全在數(shù)據(jù)共享交換的業(yè)務流程中5、數(shù)據(jù)安全管理子系統(tǒng)·主題庫建設(shè)流程安全設(shè)計委辦局端,根據(jù)身份認證管理和數(shù)據(jù)授權(quán)管理制定的策略,申請主題庫建設(shè)申請;平臺端,通過“鑒權(quán)中心”,“身份認證管理”和“數(shù)據(jù)授權(quán)管理”進行策略設(shè)置及下發(fā),控制委辦局申請主題庫建設(shè)的權(quán)限,確保訪問控制安全性和有效性;在主題庫建設(shè)的業(yè)務流程中5、數(shù)據(jù)安全管理子系統(tǒng)·身份認證控制(事前)身份管理服務統(tǒng)一認證服務集中授權(quán)服務集中鑒權(quán)服務審計服務場景:注冊、登錄場景:安全追溯場景:業(yè)務使用身份認證鑒權(quán)中心用戶管理認證管理認證方式認證策略授權(quán)管理集中授權(quán)鑒權(quán)管理審計管理用戶審計認證審計鑒權(quán)審計授權(quán)審計日志審計……分級管理金庫管理單點登錄信任傳遞身份管理組織機構(gòu)大數(shù)據(jù)中心管用審委辦局管用審區(qū)各單位管用審共享&運營門戶數(shù)據(jù)治理/共享/開發(fā)/…安全管理子系統(tǒng)…大數(shù)據(jù)中心、委辦局、區(qū)等各單位使用大數(shù)據(jù)資源平臺相關(guān)子系統(tǒng)時,根據(jù)總體數(shù)據(jù)權(quán)限管理方針,實現(xiàn)管、用、審三類角色權(quán)限分離,同時在遵循管、用、審分離原則情況下,各單位管理員可自行定義角色,并授予本單位其他用戶。身份認證鑒權(quán)中心,提供用戶管理、認證管理、授權(quán)管理及審計管理功能,實現(xiàn)統(tǒng)一身份管理。5、數(shù)據(jù)安全管理子系統(tǒng)·流量數(shù)據(jù)采集(事中)大數(shù)據(jù)安全分析系統(tǒng)通過采集全網(wǎng)流量及日志數(shù)據(jù),結(jié)合機器學習、數(shù)據(jù)建模、行為識別、關(guān)聯(lián)分析、人工智能等方法,對海量異構(gòu)的安全數(shù)據(jù)進行分析,以資產(chǎn)、威脅、脆弱性等維度進行安全態(tài)勢分析,并生成全方位的安全全景視圖,實現(xiàn)數(shù)據(jù)的長時間窗口存儲、全文檢索分析、異常行為檢測和安全合規(guī)要求,支撐安全決策和應急響應,幫助用戶建立安全預警機制,增強整體安全防護能力。核心功能:流量探測流量分析流量解析匯總及外發(fā)數(shù)據(jù)流量過濾預測告警
5、數(shù)據(jù)安全管理子系統(tǒng)·數(shù)據(jù)脫敏(事中)數(shù)據(jù)脫敏系統(tǒng)提供靜態(tài)脫敏、動態(tài)脫敏業(yè)務能力,可以對大數(shù)據(jù)平臺各種存儲環(huán)境中的數(shù)據(jù)進行靜態(tài)脫敏,將數(shù)據(jù)脫敏到結(jié)構(gòu)化、非結(jié)構(gòu)化文件或數(shù)據(jù)庫,對數(shù)據(jù)進行基于場景的動態(tài)脫敏,保護敏感信息確保數(shù)據(jù)在使用過程中的安全性。
5、數(shù)據(jù)安全管理子系統(tǒng)·數(shù)據(jù)加密/密鑰管理(事中)由密鑰管理系統(tǒng)(簡稱SecKMS)和國密算法SDK(簡稱:SecAPP)兩部分組成,兩部分既相互獨立又相互依存,前者為后者提供密鑰來源,后者為前者密碼運算能力。SecAPP提供應用層加密功能,業(yè)務系統(tǒng)通過調(diào)用SecAPP接口對存入的敏感數(shù)據(jù)進行加密保護,確保數(shù)據(jù)的安全存儲。SecAPP支持客戶端的本地加密(進程中)和密鑰服務器的集中加密。對本地加密,通過密鑰緩存模塊可提供安全的內(nèi)存密鑰緩存和持久密鑰緩存管理。通過完善的密鑰到期時間和密鑰保護策略機制,確保密鑰的安全性和易用性,有效保障業(yè)務系統(tǒng)敏感數(shù)據(jù)安全。5、數(shù)據(jù)安全管理子系統(tǒng)·數(shù)字水印/簽名管理(事中)數(shù)字簽名/水印通過在大數(shù)據(jù)平臺中使用數(shù)字水印技術(shù),在一定程度上成功的達到數(shù)據(jù)文件來源可跟蹤,確認內(nèi)容創(chuàng)建者、使用者、傳送隱秘信息或者判斷大數(shù)據(jù)平臺門戶頁面是否被篡改等目的。在網(wǎng)頁頁面上,打上用戶標識、訪問時間、應用功能號、訪問IP、訪問機器的MAC地址。網(wǎng)頁數(shù)字水印在導出的excel、txt文件上,打上用戶標識、訪問時間、應用功能號、訪問IP、訪問機器的MAC地址。文件數(shù)字水印在導出的word、pdf文件上,打上用戶標識、訪問時間、應用功能號、訪問IP、訪問機器的MAC地址。其他數(shù)字水印5、數(shù)據(jù)安全管理子系統(tǒng)·日志采集(事后)日志采集采集日志加載清洗過濾標準化關(guān)聯(lián)補齊數(shù)據(jù)標簽化日志存儲統(tǒng)一存儲
5、數(shù)據(jù)安全管理子系統(tǒng)·安全審計(事后)數(shù)據(jù)安全審計數(shù)據(jù)安全審計:實現(xiàn)對數(shù)據(jù)高危操作、敏感操作等審計。數(shù)據(jù)庫審計應用授權(quán)審計數(shù)據(jù)訪問權(quán)限審計綜合日志審計:實現(xiàn)對數(shù)據(jù)來源、系統(tǒng)日志進行審計,并對審計結(jié)果加以分析。安全風險識別:基于日志數(shù)據(jù)+流量數(shù)據(jù)的聚合、關(guān)聯(lián)分析,識別安全風險。5、數(shù)據(jù)安全管理子系統(tǒng)·告警管理(事后)告警管理告警觸發(fā):通過對日志的審計分析獲取數(shù)據(jù)安全異常告警信息告警觸達:根據(jù)告警規(guī)則配置的觸發(fā)人員+告警內(nèi)容下發(fā)至運營中心告警管理模塊,由告警管理模塊統(tǒng)一下發(fā)至責任人、對應工單,形成閉環(huán)處理機制5、數(shù)據(jù)安全管理子系統(tǒng)·安全合規(guī)性審查(整體)安全測評
合規(guī)代碼審計安全基線編制和漏掃系統(tǒng)漏掃和滲透測試風險分析報告等級保護三級數(shù)據(jù)安全能力成熟度三級安全保障能力EAL三級合規(guī)性審查背景與需求分析總體架構(gòu)設(shè)計平臺功能設(shè)計平臺數(shù)據(jù)綜合應用2134項目實施方案5構(gòu)建市級數(shù)據(jù)庫建立基礎(chǔ)庫和主題庫運營支撐體系主題庫/專題庫責任委辦局負責:主題庫需求、建設(shè)方案(業(yè)務方案)、開發(fā)和主題應用。大數(shù)據(jù)中心主要負責:制定標準(技術(shù)方案)、提供平臺、數(shù)據(jù)和工具,并負責建成后的服務開放和運行維護。委辦局市大數(shù)據(jù)中心共享數(shù)據(jù)委辦局提出主題庫建設(shè)申請開始編制建設(shè)方案提出需求清單明確建庫需求核實建設(shè)申請確認建設(shè)方案三清單管理確認責任清單和負面清單資源目錄編制分配資源并建庫共享數(shù)據(jù)推送提供建模工具和建庫資源建設(shè)主題庫設(shè)置主題庫管理規(guī)則提供數(shù)據(jù)服務開展主題應用提供主題庫監(jiān)測等管理服務結(jié)束市級數(shù)據(jù)湖市級數(shù)據(jù)庫基礎(chǔ)庫主題庫專題庫指標庫ODS數(shù)據(jù)倉庫數(shù)據(jù)集市委辦貼源數(shù)據(jù)人口庫法人庫經(jīng)濟活動公共事業(yè)社會關(guān)系人員密度數(shù)據(jù)建模數(shù)據(jù)抽取入數(shù)據(jù)庫市級數(shù)據(jù)庫·公共基礎(chǔ)庫市級數(shù)據(jù)庫·基礎(chǔ)庫運營支撐人口概況、人口查詢、人口統(tǒng)計、人口畫像、周期管理、模板管理、字段映射、執(zhí)行策略、入庫管理、異常告警、標簽管理、標簽映射和關(guān)系、圖形化分析……業(yè)務信息數(shù)據(jù)公安口人口出生、死亡及戶籍登記基本信息地理實體數(shù)據(jù)影像數(shù)據(jù)高程數(shù)據(jù)電子地圖數(shù)據(jù)地名地址數(shù)據(jù)三維數(shù)據(jù)人口庫建模元數(shù)據(jù)管理法人庫建模元數(shù)據(jù)管理空間地理庫建模元數(shù)據(jù)管理數(shù)據(jù)抽取/數(shù)據(jù)交換基礎(chǔ)數(shù)據(jù)庫基礎(chǔ)庫管理應用人口應用法人概況、法人查詢、法人統(tǒng)計、法人畫像、周期管理、模板管理、字段映射、執(zhí)行策略、入庫管理、異常告警、標簽管理、標簽映射和關(guān)系、圖形化分析……法人應用地圖服務、影像服務、地名地址服務、三維服務與坐標轉(zhuǎn)換等功能服務……空間地理應用人口數(shù)據(jù)法人數(shù)據(jù)空間地理數(shù)據(jù)民政口婚姻關(guān)系雙方人口信息人社口社會五險參保等人口信息衛(wèi)計口孕產(chǎn)婦及家屬信息工商口稅務口質(zhì)監(jiān)口民政口市級數(shù)據(jù)庫·主題庫運營支撐以民生幸福專題為應用場景,舉例主題數(shù)據(jù)庫的運營支撐:大數(shù)據(jù)資源平臺數(shù)據(jù)采集接入數(shù)據(jù)抽取運維數(shù)據(jù)標準服務作業(yè)調(diào)度運維數(shù)據(jù)質(zhì)量檢查及異常處置經(jīng)濟活動主題庫公共事業(yè)主題庫社會關(guān)系主題庫人員密度主題庫算力資源人口遷徙老齡化及養(yǎng)老流動人口公共安全食品安全政務服務委辦局數(shù)據(jù)模型專題應用更新迭代人口數(shù)據(jù)政務辦事數(shù)據(jù)交通安全數(shù)據(jù)食品衛(wèi)生數(shù)據(jù)社會保障數(shù)據(jù)運營支撐數(shù)據(jù)運營服務大數(shù)據(jù)綜合應用·示例通話攝像頭監(jiān)控傳感器110電話接受側(cè)翻事件傳感器采集液化氣有泄露情況掃描事件管理調(diào)用事故安全事件場景消息分發(fā)處理中心派發(fā)事件至各部委平臺事件處理流(可自定義順序)服務能力事件觸點事件中心衛(wèi)生局平臺1、通知環(huán)境檢測
2、提供相應信息衛(wèi)生局警務平臺1、通知警隊,派遣警察
2、提供地點,當時情況等信息警務處理刑警隊火警平臺1、通知消防隊,派遣消防車
2、提供地點,當時情況等信息警務處理消防隊醫(yī)療平臺1、通知救護車
2、提供相應信息救護處理醫(yī)療隊善后告知親人結(jié)案1234事件數(shù)據(jù)采集(kafka,流處理)事件觸點規(guī)則匹配委辦平臺對接油罐車發(fā)生側(cè)翻,造成人員傷亡以及液化氣泄露事件背景與需求分析總體架構(gòu)設(shè)計平臺功能設(shè)計平臺數(shù)據(jù)綜合應用2134項目實施方案5項目實施組織架構(gòu)大數(shù)據(jù)資源平臺項目PMO管理小組項目經(jīng)理(1名)系統(tǒng)架構(gòu)師(1名)項目經(jīng)理助理(3名)需求分析師(2名)實施工程師(4名+)功能建設(shè)團隊安全建設(shè)團隊數(shù)據(jù)運營團隊商務團隊質(zhì)量保證(2名)安全項目經(jīng)理(1名)安全架構(gòu)師(1名)配置管理(1名)技術(shù)支持(1名)……安全專員(1名)集成商項目組廠商A廠商E廠商B廠商F廠商C廠商H廠商D……廠商1廠商2廠商3……咨詢團隊大數(shù)據(jù)中心領(lǐng)導測評團隊監(jiān)理團隊謝謝聆聽數(shù)據(jù)治理大數(shù)據(jù)平臺設(shè)計??????
議程數(shù)據(jù)治理的背景和現(xiàn)狀數(shù)據(jù)治理策略元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理大數(shù)據(jù)平臺設(shè)計1
數(shù)據(jù)治理背景大數(shù)據(jù)時代凸現(xiàn)數(shù)據(jù)重要性數(shù)據(jù)治理是大數(shù)據(jù)的基礎(chǔ)2信息孤島現(xiàn)象嚴重數(shù)據(jù)質(zhì)量問題嚴重
345數(shù)據(jù)應用未得到有效管理6數(shù)據(jù)安全問題日益嚴峻數(shù)據(jù)治理意識到了問題的嚴重1數(shù)據(jù)治理現(xiàn)狀2
“維持”代替“管理”3
歷史“包袱”沉重4
相關(guān)方利益交織,協(xié)調(diào)困難5
方案規(guī)劃容易,落地困難6
過度依賴技術(shù)工具7
對于數(shù)據(jù)沒有明確區(qū)分??????
議程數(shù)據(jù)治理的背景和現(xiàn)狀數(shù)據(jù)治理策略元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理大數(shù)據(jù)平臺設(shè)計組織Organization流程、活動與機制Process&Activities&Mechanism計劃、制度與標準規(guī)范Plan&Rule&Standards技術(shù)平臺與工具Platform&Tools數(shù)據(jù)治理要素數(shù)據(jù)治理策略獲得支持引入外援找到“痛點”確定“起點”責任到人持之以恒績效評估實事求是確定方法做好績效標準先行使用工具獎懲機制經(jīng)驗總結(jié)
數(shù)據(jù)
治理實施建議
*數(shù)據(jù)質(zhì)量提升是目標*主數(shù)據(jù)管理是關(guān)鍵*元數(shù)據(jù)管理是基礎(chǔ)??????
議程數(shù)據(jù)治理的背景和現(xiàn)狀數(shù)據(jù)治理策略元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理大數(shù)據(jù)平臺設(shè)計什么是元數(shù)據(jù)?
元數(shù)據(jù)的定義–
技術(shù)元數(shù)據(jù)–
業(yè)務元數(shù)據(jù)–
操作元數(shù)據(jù)為什么要進行元數(shù)據(jù)管理Why?123456數(shù)據(jù)的參考框架解決數(shù)據(jù)模糊性可視化數(shù)據(jù)流動影響和血緣分析推進標準化建設(shè)規(guī)范化數(shù)據(jù)審計
1.2.3.4.5.6.經(jīng)驗分享
標準先行
全局治理
盡快見效
高層支持
業(yè)務參與
獎懲機制數(shù)據(jù)定義標準化數(shù)量月銷售量月銷售量++標準單詞對象詞素詞素詞素詞素分析原屬性名(標準化對象)
標準域數(shù)量類型:
數(shù)字型長度:
19,0
分類詞+
標準用語月度銷售數(shù)量類型:
數(shù)字型長度:
19,0
修飾詞標準單詞
月度標準單詞
銷售標準單詞
數(shù)量標準單詞
月度
銷售
數(shù)量
分類詞(域)標準體系數(shù)據(jù)定義標準體系
標準單詞標準域標準用語數(shù)據(jù)模型標準化結(jié)構(gòu)
實體、屬性、關(guān)系、主鍵,范式化等
命名規(guī)則、用語詞典、標準域等管理
數(shù)據(jù)管理政策、方針等
配置管理、版本管理等質(zhì)量
準確性
、完整性、實時性、一致性應用
查詢結(jié)果的準確性、使用便利性、查詢結(jié)果的迅速性模型設(shè)計
標準實施路線模型優(yōu)化模型診斷設(shè)計規(guī)范設(shè)計指南按照模型設(shè)計規(guī)范和指南統(tǒng)一設(shè)計企業(yè)數(shù)據(jù)模型元數(shù)據(jù)管理系統(tǒng)可使用可管理可控制模型要素關(guān)系定義規(guī)則應用系統(tǒng)注冊元數(shù)據(jù)庫腳本同步指導數(shù)據(jù)庫設(shè)計審核、評估、發(fā)布提交反饋元數(shù)據(jù)服務標準規(guī)范標準化體系(數(shù)據(jù)定義&模型設(shè)計)
制定
完善引用???????
元數(shù)據(jù)管理工具的選擇元模型易于擴展界面友好安全和系統(tǒng)管理配置管理發(fā)布、查詢、報表功能平臺開放提前試用??????
議程數(shù)據(jù)治理的背景和現(xiàn)狀數(shù)據(jù)治理策略元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理大數(shù)據(jù)平臺設(shè)計什么是主數(shù)據(jù)?
企業(yè)主數(shù)據(jù)分散存儲在企業(yè)各系統(tǒng)內(nèi),對企業(yè)至關(guān)重要的核心業(yè)務實體的數(shù)據(jù),比如客戶、合作伙
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 云計算與邊緣計算的報告-洞察分析
- 水資源生態(tài)系統(tǒng)服務分析-洞察分析
- 2024-2025學年福建省福寧古五校教學聯(lián)合體高一上學期期中質(zhì)量監(jiān)測生物試題(解析版)
- 施工現(xiàn)場降噪措施
- 油氣藏地球化學研究-洞察分析
- 2024-2025學年內(nèi)蒙古自治區(qū)錫林郭勒盟高二上學期11月期中物理試題(解析版)
- 2024年公司項目部負責人安全教育培訓試題含下載答案可打印
- 2023年-2024年企業(yè)主要負責人安全教育培訓試題帶答案(奪分金卷)
- 2023年項目部安全培訓考試題【必刷】
- 2023年-2024年項目部安全管理人員安全培訓考試題(完美)
- 2025年1月普通高等學校招生全國統(tǒng)一考試適應性測試(八省聯(lián)考)英語試題
- ISO 56001-2024《創(chuàng)新管理體系-要求》專業(yè)解讀與應用實踐指導材料之21:“7支持-7.5成文信息”(雷澤佳編制-2025B0)
- 2024年度大數(shù)據(jù)支撐下的B2B電子商務購銷服務合同3篇
- 廣東省廣州市2025屆高三上學期12月調(diào)研測試語文試卷(含答案)
- 2023-2024年電商直播行業(yè)現(xiàn)狀及發(fā)展趨勢研究報告
- 【9歷期末】安徽省利辛縣部分學校2023~2024學年九年級上學期期末考試歷史試卷
- GB/T 44949-2024智能熱沖壓成形生產(chǎn)線
- 阜陽市重點中學2025屆高考數(shù)學全真模擬密押卷含解析
- 房屋市政工程生產(chǎn)安全重大事故隱患判定標準(2024版)宣傳海報
- 2024-2025學年統(tǒng)編版七年級語文上學期期末真題復習 專題01 古詩文名篇名句默寫
- 2024-2030年中國企業(yè)大學建設(shè)行業(yè)轉(zhuǎn)型升級模式及投資規(guī)劃分析報告
評論
0/150
提交評論