市政府數(shù)據(jù)交換共享平臺深化設(shè)計方案_第1頁
市政府數(shù)據(jù)交換共享平臺深化設(shè)計方案_第2頁
市政府數(shù)據(jù)交換共享平臺深化設(shè)計方案_第3頁
市政府數(shù)據(jù)交換共享平臺深化設(shè)計方案_第4頁
市政府數(shù)據(jù)交換共享平臺深化設(shè)計方案_第5頁
已閱讀5頁,還剩161頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)

文檔簡介

XX市政府數(shù)據(jù)交換共享平臺

深化設(shè)計方案

2015年12月

貴陽市政府數(shù)據(jù)交換共享平臺深化設(shè)計方案

目錄

第1章項目概述...................................................2

1.1建設(shè)目標-------------------------------------------------------------------2

1.2建設(shè)內(nèi)容--------------------------------------------------錯誤!未定義書簽。

第2章深化設(shè)計思路................................................2

2.1項目總體思路---------------------------------------------------------------4

2.2項目特色-------------------------------------------------------------------4

第3章總體架構(gòu)設(shè)計...............................................9

3.1總體架構(gòu)設(shè)計---------------------------------------------------------------9

3.2項目技術(shù)架構(gòu)..............................................................12

3.3數(shù)據(jù)處理架構(gòu)設(shè)計----------------------------------------------------------13

第4章數(shù)據(jù)采集及數(shù)據(jù)開放架構(gòu)設(shè)計.................................16

4.1設(shè)計概述------------------------------------------------------------------16

4.2數(shù)據(jù)采集架構(gòu)設(shè)計------------------------------------------錯誤!未定義書簽。

4.3數(shù)據(jù)開放架構(gòu)設(shè)計------------------------------------------錯誤!未定義書簽。

第5章數(shù)據(jù)加工及脫敏脫密架構(gòu)設(shè)計.................................17

1.1架構(gòu)概述------------------------------------------------------------------93

1.2數(shù)據(jù)加工設(shè)計--------------------------------------------------------------17

1.3脫敏脫密設(shè)計--------------------------------------------------------------99

第6章數(shù)據(jù)服務(wù)平臺設(shè)計..........................................100

5.1概述----------------------------------------------------------------------100

5.2數(shù)據(jù)政府服務(wù)平臺設(shè)計--------------------------------------錯誤!未定義書簽。

5.3數(shù)據(jù)生態(tài)服務(wù)平臺設(shè)計--------------------------------------錯誤!未定義書簽。

第7章眾創(chuàng)眾包服務(wù)平臺設(shè)計.......................錯誤!未定義書簽。

6.1概述-------------------------------------------------------錯誤!未定義書簽。

第8章統(tǒng)一認證與訪問控制架構(gòu)設(shè)計--------------------------------124

第9章統(tǒng)一數(shù)據(jù)治理與管控架構(gòu)設(shè)計................................129

第10章系統(tǒng)部署架構(gòu)設(shè)計..........................................130

質(zhì)量方針:精益求精追求卓越i第n次修訂

修訂時間:

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

第1章項目概述

1.1項目名稱

貴陽市政府數(shù)據(jù)交換共享平臺(以下簡稱交換共享平臺)。

1.2項目建設(shè)單位

1.3建設(shè)目標及內(nèi)容

本期項目主要建設(shè)內(nèi)容概括為“12345”工程,即通過構(gòu)建1套體系(數(shù)據(jù)

采集及數(shù)據(jù)服務(wù)體系)、2類服務(wù)(政府內(nèi)部服務(wù)、互聯(lián)網(wǎng)服務(wù))、3大涵蓋(脫

敏脫密、數(shù)據(jù)開放、眾創(chuàng)眾包)、4個核心平臺(數(shù)據(jù)交換共享與監(jiān)督子平臺、

數(shù)據(jù)資源池子平臺、數(shù)據(jù)加工及脫敏脫密子平臺、數(shù)據(jù)內(nèi)外開放服務(wù)子平臺)、

5項標準(數(shù)據(jù)交換共享與監(jiān)督標準、數(shù)據(jù)加工與脫敏脫密標準、數(shù)據(jù)服務(wù)封裝

與開放標準、服務(wù)消費者資格核定標準、DaaS平臺技術(shù)標準),通過項目建設(shè),

推動我市以政府數(shù)據(jù)公開為核心的大數(shù)據(jù)產(chǎn)業(yè)生態(tài)的構(gòu)建。本期項目涉及市級

相關(guān)行政部門、企事業(yè)單位共63家。

政府數(shù)據(jù)文換

社會敷掘上傳

4t據(jù)工最沉淀

眾創(chuàng)眾包市場

App超市

數(shù)據(jù)

新創(chuàng)

創(chuàng)

業(yè)

引擎

創(chuàng)客自主創(chuàng)斷

應(yīng)用卻新眾包

DaaS超市

大數(shù)據(jù)交易所

2

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

解釋(內(nèi)容)

1.4建設(shè)規(guī)模

項目本期完成貴陽市市級相關(guān)行政部門、企事業(yè)單位共63家單位的數(shù)據(jù)采

集,并為市級相關(guān)部門及企事業(yè)單位、創(chuàng)客提供服務(wù)開放服務(wù)。推動我市以政

府數(shù)據(jù)公開為核心的大數(shù)據(jù)產(chǎn)業(yè)生態(tài)的構(gòu)建。

3

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

第2章深化設(shè)計思路

2.1項目總體設(shè)計思路

以“數(shù)據(jù)是資源、應(yīng)用是核心、產(chǎn)業(yè)是目的、安全是保障,開放是創(chuàng)新”

為原則,堅持信息化、市場化、產(chǎn)業(yè)化三化統(tǒng)籌,以政府數(shù)據(jù)資源的共享和開

放為核心驅(qū)動力,加速我市大數(shù)據(jù)創(chuàng)新發(fā)展和產(chǎn)業(yè)鏈的構(gòu)建,打造國家大數(shù)據(jù)

政府治理的地方典范,體現(xiàn)大數(shù)據(jù)國家戰(zhàn)略的貴陽實踐。

2.2項目設(shè)計特色

根據(jù)《大數(shù)據(jù)發(fā)展行動綱要》,本項目設(shè)計著眼于大數(shù)據(jù)政府治理、數(shù)據(jù)共

享而開放、創(chuàng)新創(chuàng)業(yè)的全面實踐。

1、構(gòu)建統(tǒng)一的數(shù)據(jù)采集體系,實現(xiàn)數(shù)據(jù)規(guī)范化匯聚沉淀。

堅持數(shù)據(jù)采集的物理和邏輯集中的統(tǒng)一,以數(shù)據(jù)采集和利用的全過程監(jiān)控

為基礎(chǔ),構(gòu)建標準采集數(shù)據(jù)網(wǎng)絡(luò),提供統(tǒng)一的按需采集通道,把各部門的數(shù)據(jù)

沉淀到平臺中,讓數(shù)據(jù)成為城市管理主體的基礎(chǔ)。同時隨著交換共享平臺的逐

步推廣,數(shù)據(jù)池的數(shù)據(jù)將越豐富,這不僅為政府可視化決策分析及政府內(nèi)部統(tǒng)

一數(shù)據(jù)服務(wù)提供了技術(shù)支撐,而且為全市構(gòu)建大數(shù)據(jù)產(chǎn)業(yè)生態(tài)奠定的堅實基礎(chǔ)。

4

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

據(jù)

分部

眾創(chuàng)

發(fā)

務(wù)

務(wù)

ft

統(tǒng)

統(tǒng)

數(shù)據(jù)數(shù)據(jù)交換數(shù)據(jù)交換異杓數(shù)據(jù)數(shù)據(jù)剖析數(shù)據(jù)共享數(shù)據(jù)共享

交換總控網(wǎng)關(guān)橋接清洗目錄特瞽

數(shù)據(jù)

2、全面借鑒國際領(lǐng)先的數(shù)據(jù)即服務(wù)(DaaS)的設(shè)計理念。

數(shù)據(jù)經(jīng)過清洗后進入數(shù)據(jù)池,再經(jīng)過數(shù)據(jù)加工和脫敏脫密后組織成塊數(shù)據(jù),

將塊數(shù)據(jù)封裝成各種服務(wù)供各部門使用,并將數(shù)據(jù)使用權(quán)封裝成一種商品對外

提供有償使用。同時,數(shù)據(jù)以“服務(wù)封裝”的模式對外提供服務(wù),而不是以“文

件下載”的模式,切實做到“數(shù)據(jù)不出門、應(yīng)用行千里不僅保證了平臺的使

用價值,還為“雙創(chuàng)”打下了堅實的基礎(chǔ)。

5

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

大數(shù)據(jù)生態(tài)服務(wù)

數(shù)

據(jù)

數(shù)

使

據(jù)

權(quán)

務(wù)

共享u督■務(wù)」*數(shù)據(jù)史軼、剖析、淆洗

3、脫敏脫密是數(shù)據(jù)開放服務(wù)的紅線

采用注冊制對服務(wù)消費者進行管理,實現(xiàn)數(shù)據(jù)流動過程的全過程監(jiān)控,針

對不同的服務(wù)消費者定義服務(wù)消費資格等級,根據(jù)服務(wù)消費者的資格等級和可

能造成的負面清單確定數(shù)據(jù)的脫敏脫密等級并建立相對應(yīng)的數(shù)據(jù)服務(wù)訪問控制

機制,確保數(shù)據(jù)對內(nèi)對外開放服務(wù)的安全影響降到最低。政府數(shù)據(jù)加工和脫敏

脫密建議由指定的機構(gòu)進行處理,社會資源的數(shù)據(jù)加工采用網(wǎng)上眾包方式。

6

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

1)服務(wù)消費者分類:政府機關(guān)、事業(yè)單位、

內(nèi)資企業(yè)、外資企業(yè)、港澳臺企業(yè)、社會

團隊、學術(shù)研究機構(gòu)、創(chuàng)客…

2)首先建立服務(wù)消費者資格核定標準與機

制,通過該機制核定服務(wù)消費者的資格等

級。

3)再根據(jù)服務(wù)消費者的資格等級,確定每

一類數(shù)據(jù)的脫敏脫密等級。

4)經(jīng)過脫敏脫密處理后,將數(shù)據(jù)集合封裝

成塊數(shù)據(jù)服務(wù)、并定義相對應(yīng)的數(shù)據(jù)服務(wù)

訪問級別。

4、引入眾創(chuàng)眾包模式推動雙創(chuàng)是本項目的特點

平臺設(shè)計了三種眾創(chuàng)眾包服務(wù)、二種交易模式、一個統(tǒng)一訂單管理及交易

結(jié)算平臺(詳見下圖),為“雙創(chuàng)”提供條件,平臺提供從三種眾創(chuàng)眾包服務(wù),

方便為各類創(chuàng)客個人、創(chuàng)客團隊參與數(shù)據(jù)加工、數(shù)據(jù)服務(wù)利用及應(yīng)用創(chuàng)新等大

數(shù)據(jù)產(chǎn)業(yè)環(huán)節(jié)中來,并提供網(wǎng)上個體交易模式,讓普通的創(chuàng)客個人、創(chuàng)客團隊

所創(chuàng)造的小成果能夠方便地進行網(wǎng)上交易,解決“萬眾創(chuàng)新、大眾創(chuàng)業(yè)”的最

后一公里問題,切實推動大數(shù)據(jù)產(chǎn)業(yè)發(fā)展。同時散戶交易模式,可對大數(shù)據(jù)交

易所的交易模式形成一種有機補充。

App應(yīng)用開發(fā)IApp應(yīng)用開發(fā)IDaaS數(shù)據(jù)加工

眾創(chuàng)服務(wù)I眾包服務(wù)I眾包服務(wù)

App超市DaaS超市眾包服務(wù)市場]大數(shù)據(jù)交易所

散戶交易[大宗交易

統(tǒng)一訂單管理、交易結(jié)算與支付(采用第三方支付)

7

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

5、跟蹤行業(yè)發(fā)展趨勢,制定標準搶占行業(yè)制高點

當前國內(nèi)許多機構(gòu)均在爭搶云計算、大數(shù)據(jù)、智慧城市等相關(guān)標準的制定,

現(xiàn)有的政府信息資源交換及目錄體系標準是10年前制定的,已經(jīng)不能滿足當前

DaaS平臺的建設(shè)要求,DaaS體系標準的制定尚處于空白。在推動項目建設(shè)的同

時,借助工信部電子標準研究院、工信部電子一所等國家級團隊的力量,啟動

DaaS體系標準的建設(shè),以標準的制定搶占領(lǐng)域的至高點,通過體系標準的制定

指導我市相關(guān)項目建設(shè),同時通推動標準的落地實踐,讓貴陽在數(shù)據(jù)開放領(lǐng)域

成為產(chǎn)業(yè)輸出地,推動產(chǎn)業(yè)的升級發(fā)展。下圖是項目標準的初步框架示意圖。

數(shù)據(jù)服務(wù)封裝及開放標準

服務(wù)

as

Da臺

平消費

構(gòu)

架者

數(shù)據(jù)加工及脫敏脫密標準

術(shù)資格

準凝

標準

數(shù)據(jù)共享及共享監(jiān)督標準

8

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

第3章總體架構(gòu)設(shè)計

3.1總體架構(gòu)設(shè)計

根據(jù)建設(shè)目標及內(nèi)容,遵循“數(shù)據(jù)不出門,應(yīng)用行千里”的設(shè)計思想,以

大數(shù)據(jù)采集、清洗、加工、開放為技術(shù)主線進行架構(gòu)設(shè)計。交換共享平臺的總

體架構(gòu)將按照“六橫兩縱”的總體框架進行建設(shè)。如下圖所示:

服務(wù)政務(wù)外網(wǎng)

門戶BDS超市

外部

眾創(chuàng)

據(jù)

據(jù)

數(shù)

據(jù)

內(nèi)部

數(shù)據(jù)

脫敏

務(wù)

務(wù)

務(wù)

務(wù)

務(wù)

務(wù)ETTL

ETTL務(wù)

務(wù)1M

統(tǒng)

統(tǒng)

數(shù)

據(jù)

監(jiān)

務(wù)

六橫是指自底向上的數(shù)據(jù)源,數(shù)據(jù)交換、數(shù)據(jù)池、數(shù)據(jù)加工、服務(wù)開放、

服務(wù)門戶:

一、數(shù)據(jù)源

數(shù)據(jù)源是數(shù)據(jù)交換共享的源頭,是委辦局產(chǎn)生的業(yè)務(wù)數(shù)據(jù),它們是數(shù)據(jù)交

換共享的主體,是政務(wù)信息共享與服務(wù)的基礎(chǔ)。各委辦局將按照貴陽市共享數(shù)

9

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

據(jù)目錄的要求,按照數(shù)據(jù)共享交換標準完成部門內(nèi)可共享數(shù)據(jù)的采集前的準備,

將數(shù)據(jù)放入各部門的數(shù)據(jù)交換網(wǎng)關(guān)中。

二、數(shù)據(jù)交換

根據(jù)實際情況,數(shù)據(jù)交換將提供多種方式滿足貴陽市政府各委辦局IT系統(tǒng)

的特點。主要采用成熟的數(shù)據(jù)交換平臺產(chǎn)品來構(gòu)建,產(chǎn)品包括數(shù)據(jù)交換總控設(shè)

備、數(shù)據(jù)交換網(wǎng)關(guān)設(shè)備和異構(gòu)云橋軟件組成,提供端到端的數(shù)據(jù)采集交換機制

和智能恢復機制。

將采集數(shù)據(jù)臨時放入數(shù)據(jù)交換平臺,同時將這些數(shù)據(jù)進行剖析清洗后,加

載到數(shù)據(jù)池中,按照元數(shù)據(jù)標準,共享數(shù)據(jù)目錄標準生成共享數(shù)據(jù)目錄。

三、數(shù)據(jù)池

數(shù)據(jù)池用于存放各部門采集數(shù)據(jù)清洗整理之后數(shù)據(jù)的按類存儲。包括人口

基礎(chǔ)信息庫、法人單位信息資源庫、自然資源和空間地理基礎(chǔ)信息庫、證照批

文庫等五大基礎(chǔ)庫,及就業(yè)、社保、能源、信用、統(tǒng)計、質(zhì)量、國土、農(nóng)業(yè)、

城鄉(xiāng)建設(shè)、企業(yè)登記監(jiān)管等領(lǐng)域數(shù)據(jù)庫及各委辦局所屬的委托加工庫;

同時,由各行業(yè)企業(yè)及相關(guān)單位構(gòu)成的資源庫組成了社會資源庫。

數(shù)據(jù)池中的數(shù)據(jù)為下一步數(shù)據(jù)加工及開放做好基礎(chǔ)準備。

四、數(shù)據(jù)加工

數(shù)據(jù)加工是數(shù)據(jù)池中數(shù)據(jù)開放的必經(jīng)之路。在數(shù)據(jù)池基礎(chǔ)上經(jīng)過脫敏脫密

等數(shù)據(jù)加工之后,將生成面向政府部門的各類主題庫,共享庫、共享服務(wù)目錄

庫及面向社會的數(shù)據(jù)商品庫及商品目錄庫,在互聯(lián)網(wǎng)對社會開放。

10

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

五、服務(wù)開放

服務(wù)開放指通過將數(shù)據(jù)根據(jù)具體需求封裝成服務(wù)(REST服務(wù))后對政府各

部門及社會進行共享開放。服務(wù)分為面向政府的大數(shù)據(jù)政府服務(wù)及面向社會的

大數(shù)據(jù)生態(tài)服務(wù)兩大類。

大數(shù)據(jù)政府服務(wù)包括脫敏脫密服務(wù)、數(shù)據(jù)ETL服務(wù)、數(shù)據(jù)分析服務(wù)及內(nèi)部開

放服務(wù);大數(shù)據(jù)生態(tài)服務(wù)包括數(shù)據(jù)ETL服務(wù)、數(shù)據(jù)分析服務(wù)、外部開放服務(wù)及眾

創(chuàng)眾包服務(wù)。

六、服務(wù)門戶

服務(wù)門戶是大數(shù)據(jù)服務(wù)開放的門戶,有政務(wù)外網(wǎng)門戶及互聯(lián)網(wǎng)門戶兩種:

政務(wù)外網(wǎng)門戶為政府各委辦局提供入口,主要大數(shù)據(jù)服務(wù)(BDS)超市,各

委辦局可以通過超市中的服務(wù)實現(xiàn)跨部門數(shù)據(jù)的共享;

互聯(lián)網(wǎng)門戶為社會大眾,包括創(chuàng)客、社會團體、大專院校、研究機構(gòu)等提

供入口,主要是大數(shù)據(jù)服務(wù)(BDS)超市、APP超市及眾包市場。

兩縱指統(tǒng)一數(shù)據(jù)治理與監(jiān)控服務(wù)及統(tǒng)一認證與訪問控制服務(wù),是交換共享

平臺順利實現(xiàn)數(shù)據(jù)采集數(shù)據(jù)交換、數(shù)據(jù)開放的保證,兩者貫穿于數(shù)據(jù)交換、數(shù)

據(jù)池、數(shù)據(jù)加工、服務(wù)開放。統(tǒng)一數(shù)據(jù)治理與監(jiān)控服務(wù)是對平臺中大數(shù)據(jù)的運

行狀態(tài)與情況的綜合的、實時的、集中的展現(xiàn),及時全面地將平臺數(shù)據(jù)與服務(wù)

的狀態(tài)展現(xiàn)在管理人員面前;統(tǒng)一認證與訪問控制服務(wù)是平臺對用戶提供統(tǒng)一

的認證和訪問控制服務(wù)。

11

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

3.2項目技術(shù)架構(gòu)

根據(jù)總體架構(gòu)及云計算、大數(shù)據(jù)技術(shù)特點,本項目技術(shù)架構(gòu)采用云計算架

構(gòu),從下至上分為基礎(chǔ)設(shè)施層、數(shù)據(jù)層、平臺層、服務(wù)層等四層,政務(wù)外網(wǎng)門

戶及互聯(lián)網(wǎng)門戶兩個門戶是服務(wù)入口。如下圖所示:

服務(wù)政務(wù)外網(wǎng)門戶

入口互聯(lián)網(wǎng)門戶

數(shù)

數(shù)

眾創(chuàng)

據(jù)

數(shù)據(jù)

據(jù)

務(wù)數(shù)據(jù)

大數(shù)據(jù)政府大數(shù)據(jù)生態(tài)開

ETL腹

務(wù)

務(wù)

務(wù)

務(wù)

務(wù)ETTL

務(wù)

層服務(wù)平臺?服務(wù)平臺M?

原務(wù)

臺基于MongoDBI基于MongoDB的

基于MongoDB的Map/ReduceIOpenAPl-RESTflg基于MongoDB的IMEAN全堆

層分布式搜索引擎I找開發(fā)框架

OLAP分析5母大數(shù)據(jù)計算引擎I務(wù)生成引擎

基司

設(shè)函政務(wù)外網(wǎng)云計算、大數(shù)據(jù)基礎(chǔ)設(shè)施平臺互聯(lián)網(wǎng)云計算、大數(shù)據(jù)基礎(chǔ)設(shè)施平臺

說明:

1、基礎(chǔ)設(shè)施層(laaS):

提供基礎(chǔ)設(shè)施云服務(wù),實現(xiàn)設(shè)備無關(guān)、品牌無關(guān)的虛擬化部署。由于平臺

服務(wù)對象分政府及社會兩部分,而兩者所使用的網(wǎng)絡(luò)是隔離的二個網(wǎng)絡(luò),所以

需要建設(shè)兩個基礎(chǔ)設(shè)計平臺,即政務(wù)外網(wǎng)云計算、大數(shù)據(jù)基礎(chǔ)設(shè)施平臺及互聯(lián)

網(wǎng)云計算、大數(shù)據(jù)基礎(chǔ)設(shè)施平臺。

2、數(shù)據(jù)層(DaaS):

數(shù)據(jù)層包括面向政府及面向社會的兩個數(shù)據(jù)池及由數(shù)據(jù)池加工產(chǎn)生的ODS

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

數(shù)據(jù)集群。

3、平臺層(PaaS):

平臺層提供數(shù)據(jù)加工、數(shù)據(jù)分析、數(shù)據(jù)搜索、大數(shù)據(jù)計算、數(shù)據(jù)封裝服務(wù)

等大數(shù)據(jù)處理公用的工具。主要包括以下:

基于MongoDB的OLAP分析引擎

基于MongoDB、Map/Reduce大數(shù)據(jù)計算引擎

基于MongoDB的OpenAPI-REST服務(wù)生成引擎

基于MongoDB的分布式搜索引擎

MEAN全堆棧開發(fā)框架

平臺層要具有開放性和擴展性,并能夠適應(yīng)業(yè)務(wù)需求的動態(tài)變化。

4、服務(wù)層(SaaS):

服務(wù)層提供給領(lǐng)導、各委辦局、企業(yè)、創(chuàng)客等用戶的數(shù)據(jù)服務(wù),包括面向

政府的大數(shù)據(jù)政府服務(wù)及面向社會的大數(shù)據(jù)生態(tài)服務(wù)兩大類。通過服務(wù)層將大

數(shù)據(jù)加工封裝成服務(wù)提供給政府用戶及社會用戶。

3.3數(shù)據(jù)處理架構(gòu)設(shè)計

數(shù)據(jù)處理架構(gòu)采用了大數(shù)據(jù)處理分析技術(shù)完成從數(shù)據(jù)采集到數(shù)據(jù)共享開放

的過程。數(shù)據(jù)處理分為兩條主線,兩條主線通過光盤傳導實現(xiàn)數(shù)據(jù)與服務(wù)的交

互c如下圖所示:

13

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

大數(shù)據(jù)政務(wù)服務(wù)平臺大數(shù)據(jù)生態(tài)服務(wù)平臺

數(shù)

數(shù)

據(jù)

據(jù)

省/審)-

務(wù)

匚亞也虹分

五大Qk球

共享童督及務(wù)據(jù)交換、剖析、清洗

期fl轉(zhuǎn)I釐I公司人社I工商I地稅I…I

主線1是面向政府的數(shù)據(jù)處理,主線2是面向社會企業(yè)、創(chuàng)客的數(shù)據(jù)處理,

兩者在ODS層進行數(shù)據(jù)的交換共享。如下表所示:

流程步驟處理成果

主線1流程數(shù)據(jù)從各委辦局采集進數(shù)據(jù)交換、剖析、五大基礎(chǔ)庫

入數(shù)據(jù)池清洗領(lǐng)域數(shù)據(jù)庫

共享監(jiān)督服務(wù)托管加工數(shù)據(jù)庫

數(shù)據(jù)池中數(shù)據(jù)經(jīng)過加工ETL服務(wù)主題庫

封裝成可開放的服務(wù)脫敏脫密服務(wù)共享庫

共享服務(wù)目錄庫

商品庫

數(shù)據(jù)服務(wù)進入大數(shù)據(jù)政ETL服務(wù)

府服務(wù)平臺脫敏脫密服務(wù)

內(nèi)部開放服務(wù)

數(shù)據(jù)分析服務(wù)

14

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

主線2流程數(shù)據(jù)從相關(guān)行業(yè)的企業(yè)數(shù)據(jù)上傳社會資源庫

或協(xié)會采集進入數(shù)據(jù)池

數(shù)據(jù)池中數(shù)據(jù)經(jīng)過加工ETL服務(wù)商品庫

封裝成可開放的服務(wù)商品目錄庫

數(shù)據(jù)服務(wù)進入大數(shù)據(jù)生ETL服務(wù)

態(tài)服務(wù)平臺眾創(chuàng)眾包服務(wù)

外部開放服務(wù)

數(shù)據(jù)分析服務(wù)

主線1與主線2主線1中政府數(shù)據(jù)可以數(shù)據(jù)傳導商品庫

交互對社會開放的形成商品

庫,通過光盤傳導進入主

線2的商品庫

主線2中社會數(shù)據(jù)商品據(jù)傳導商品庫

庫,通過光盤傳導進入主

線1的商品庫

15

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

第4章數(shù)據(jù)交換共享與監(jiān)督子平臺(李)

4.1設(shè)計概述

4.1.1總體架構(gòu)

4.2數(shù)據(jù)交換共享設(shè)計

數(shù)據(jù)交換共享流程

功能描述

4.3數(shù)據(jù)交換共享監(jiān)督設(shè)計

數(shù)據(jù)交換共享監(jiān)督流程

數(shù)據(jù)交換共享監(jiān)督功能描述

完整性、及時性、有效性和一致性等數(shù)據(jù)質(zhì)量方面的監(jiān)督

16

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

第5章數(shù)據(jù)資源池子平臺設(shè)計(鄧)

5.1設(shè)計概述

數(shù)據(jù)資源池的概念是以池化資源的形式處理、存儲和管理大數(shù)據(jù),尤其是

支持分析應(yīng)用。數(shù)據(jù)池架構(gòu)提供了一個更便宜的替代傳統(tǒng)數(shù)據(jù)倉庫的選項,能

夠處理結(jié)構(gòu)化、半結(jié)構(gòu)化以及非結(jié)構(gòu)化數(shù)據(jù)。針對貴陽市政府數(shù)據(jù)交換共享平

臺比項目的數(shù)據(jù)集中處理、分析、共享的基本原則,我們將五大基礎(chǔ)數(shù)據(jù)庫(人

口庫、法人庫、空間地理庫與非物質(zhì)文化遺產(chǎn)資源庫及證照批文庫)、領(lǐng)域數(shù)據(jù)

庫、委托加工數(shù)據(jù)庫以及社會資源庫放入資源池。通過數(shù)據(jù)資源池平臺將數(shù)據(jù)

提取到支持業(yè)務(wù)的正確的處理系統(tǒng)中。數(shù)據(jù)資源池的優(yōu)勢是把數(shù)據(jù)存儲在數(shù)據(jù)

產(chǎn)生的地方,然后把處理流程加在數(shù)據(jù)上,優(yōu)化數(shù)據(jù)調(diào)用流程。

5.2五大基礎(chǔ)數(shù)據(jù)庫

本項目中五大基礎(chǔ)信息庫包括:人口基礎(chǔ)數(shù)據(jù)庫、法人單位基礎(chǔ)數(shù)據(jù)庫、

自然資源和空間地理基礎(chǔ)數(shù)據(jù)庫、非物質(zhì)文化遺產(chǎn)資源數(shù)據(jù)庫以及證照批文數(shù)

據(jù)庫。這些基礎(chǔ)信息是政府重要的信息資源,但這些信息分散在各個部門,各

個單位獨立存儲,信息不全,也不具備權(quán)威性;比如,人口信息在公安、社保、

計生、民政等系統(tǒng)中都存在不同類型的人口基礎(chǔ)信息,要把這些信息進行匯總

和清洗,形成全面、權(quán)威的數(shù)據(jù)信息,為全市各單位使用,但這些數(shù)據(jù)分散在

不同系統(tǒng)中,各自保存的屬性和各式都不同,對信息的匯總、收集、比對、清

洗是一項任務(wù)巨大的工作,不可能通過人工完成,必須借助計算機實現(xiàn)。這也

可充分發(fā)揮數(shù)據(jù)交換平臺的作用。

17

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

5.2.1人口基礎(chǔ)數(shù)據(jù)庫

概述

人口信息是社會的基礎(chǔ)信息,是政府進行科學決策和公共行政管理的重要

依據(jù)。長期以來,我國人口管理建立在戶籍制度基礎(chǔ)上,隨著社會主義市場經(jīng)

濟體制改革的深入發(fā)展,人口流動性越來越大,舊的管理模式已經(jīng)不適應(yīng)社會

的發(fā)展需要。公安局、勞保局、建交委、社發(fā)局、工商局等部門都在實施對部

分人口的專門管理,其要求是對實際居住地人口的管理,取得一定成效。由于

各部門對人口管理和發(fā)展存在差異,統(tǒng)計口徑也不一致,造成人口管理、統(tǒng)計

的基礎(chǔ)和基數(shù)始終不能統(tǒng)一,致使不能得到準確的人口及其分布狀況信息。因

此,迫切需要建立一個以公安人口信息為基礎(chǔ),以公民身份號碼(境外人口為

護照號)為唯一代碼,以其他部門為補充和核準的,具有權(quán)威性、基礎(chǔ)性和戰(zhàn)

略性的人口基礎(chǔ)數(shù)據(jù)共享平臺,解決目前人口管理存在的問題,滿足有效實施

人口戰(zhàn)略和政府進行宏觀決策需要,全面提高各部門有針對性地進行人口管理

的信息支撐能力,這對維護社會穩(wěn)定,長治久安和在為經(jīng)濟建設(shè)服務(wù)等方面具

有長遠的、戰(zhàn)略性意義。

建設(shè)原則

依據(jù)國家相關(guān)標準,按照人口信息數(shù)據(jù)資源“誰產(chǎn)生、誰提供、誰負責”的

原則,以居民身份證號碼為唯一標識,建立貴陽市公安、民政、社保等單位為

18

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

基礎(chǔ)的“人口基礎(chǔ)信息庫”,主要針對衡量城市人口整體狀況的各項基本指標,

特別是人口結(jié)構(gòu)、人口動態(tài)變化、個人信用檔案、人的職業(yè)流動等,從宏觀管

理到微觀管理進行全面的記錄。并在人口基礎(chǔ)信息庫設(shè)計時,充分考慮到以下

因素:

(1)應(yīng)支持所有與人口信息相關(guān)的指標管理,覆蓋公安、民政、社保等部

門;

(2)確保人口信息的準確性、時效性,所有的人口信息都需要經(jīng)過多層加

工處理、確認;

(3)建立完善的人口信息管理機制,提供入庫、管理、發(fā)布等功能;

(4)要求能夠提供多種數(shù)據(jù)服務(wù)方式,滿足不同用戶、不同應(yīng)用的數(shù)據(jù)訪

問需要。

(5)對人口庫應(yīng)建立完善的備份機制,以保證數(shù)據(jù)安全。

信息需求

一、人口基礎(chǔ)信息的層次結(jié)構(gòu)

根據(jù)人口基礎(chǔ)信息的應(yīng)用目的、范圍和個人隱私敏感程度的不同,可分為

基本信息層、擴充信息層和應(yīng)用共享信息層。

1)基本信息層:存儲公民基礎(chǔ)的,相對變化頻率較小,使用范圍廣泛,且個人

隱私敏感度較低的信息。包括公民身份號碼、姓名、性別、出生年月日,出

生地、民族等。

19

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

2)擴充信息層:存儲應(yīng)用共享需求較為普遍,有一定的個人隱私敏感度的信息。

主要包括公民的戶籍住址、照片、居民身份證簽發(fā)信息、婚姻狀況等。

3)應(yīng)用共享信息層:存儲部門間由特定的共享應(yīng)用需求和個人隱私敏感度較高

的信息。包括公民現(xiàn)居住地、戶成員信息、工作單位、職業(yè)等。

二、人口基礎(chǔ)數(shù)據(jù)的建設(shè)

人口基礎(chǔ)數(shù)據(jù)庫建設(shè)是指人口基礎(chǔ)信息的獲取和維護。人口基礎(chǔ)數(shù)據(jù)是以

公安人口信息為基礎(chǔ),以電子政務(wù)外網(wǎng)為依托,整合衛(wèi)計委、民政、公安、勞

動保障等政府行政管理部門所掌握的相關(guān)信息,構(gòu)成人口信息庫,滿足貴陽市

及各區(qū)縣各級職能部門之間人口基礎(chǔ)信息的校驗、引用、共享與交換的需求,

也可為公民個人提供人口信息服務(wù)。該數(shù)據(jù)庫從邏輯上可以各區(qū)縣為單位進行

劃分,實現(xiàn)區(qū)縣級范圍內(nèi)的人口信息應(yīng)用,允許對人口基礎(chǔ)信息中的應(yīng)用進行

拓展,滿足本地區(qū)的數(shù)據(jù)交換及應(yīng)用需求。

建設(shè)模式為單一職能部門提供來源和維護,其他部門協(xié)助該部門補充、核

準c例如,人口基本信息、戶籍地址、照片和居民身份證簽發(fā)信息等是由公安

部門提供信息來源和數(shù)據(jù)維護,民政、勞動保障、等各部門進行補充和核準。

功能需求

人口基礎(chǔ)數(shù)據(jù)庫共享需要以多種方式向政府部門、個人提供各種形式的人

口信息應(yīng)用服務(wù)。應(yīng)用服務(wù)的功能需求主要是:

一、統(tǒng)計分析與輔助決策

20

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

根據(jù)業(yè)務(wù)部門和決策機構(gòu)的要求,將人口基礎(chǔ)數(shù)據(jù)按照人口統(tǒng)計指標體系

進行統(tǒng)計分析,為業(yè)務(wù)部門提供不同主題的信息產(chǎn)品和應(yīng)用服務(wù),為政府領(lǐng)導

和管理部門提供科學的決策支持。

1)核驗

通過與人口基礎(chǔ)數(shù)據(jù)庫比較,對公民身份信息的存在性、真實性予以確認。

2)比對

將相關(guān)部門業(yè)務(wù)應(yīng)用系統(tǒng)提交的信息與人口基礎(chǔ)數(shù)據(jù)庫中對應(yīng)信息進行比較核

對,并將相關(guān)結(jié)果予以返回。一次性比對的信息可以是批量的,即批量比對;

比對時間是可以設(shè)定的,即定時比對;比對的時間也可以是即時的,即實時比

對C

人口基礎(chǔ)數(shù)據(jù)庫設(shè)計架構(gòu)

人口基礎(chǔ)數(shù)據(jù)資源池

人口基砒數(shù)據(jù)制人口基礎(chǔ)敷據(jù)戶籍基礎(chǔ)數(shù)據(jù)—-

翔居采集

一、基礎(chǔ)運行層

21

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

基礎(chǔ)運行層主要為整體提供硬件支撐環(huán)境,主要是支撐上層軟件運行的硬

件及網(wǎng)絡(luò)設(shè)備,包括網(wǎng)絡(luò)系統(tǒng)、主機系統(tǒng)、存儲系統(tǒng)、備份系統(tǒng)、信息安全系

統(tǒng)、IT運維系統(tǒng)等多個部分,針對服務(wù)器平臺完成相應(yīng)的指標分析、方案規(guī)劃

和設(shè)備選型建議。

二、數(shù)據(jù)采集層

數(shù)據(jù)采集層采用多種方法和數(shù)據(jù)接口,將從市公安局、人口和計劃生育委

員會、民政局、勞動和社會保障局等參建部門采集的人口基礎(chǔ)信息進行篩選、

清洗等,保證人口基礎(chǔ)數(shù)據(jù)的可靠性,準確性。

人口信息資源模型

22

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

涉及資源

單位共享信息指標項

勞動和社保信息(10姓名,公民身份號碼,所屬機構(gòu),單位編

社會保項)號,養(yǎng)老保險狀態(tài),醫(yī)療保險狀態(tài),工

障局傷保險狀態(tài),生育保險狀態(tài),失業(yè)保險

狀態(tài)

老齡辦困難老人信息姓名,公民身份號碼,年齡,性別,獨

(18項)居,地址,電話,身體狀態(tài),配偶姓名,

配偶年齡,夫妻人均月收入,子女享受

低保姓名,低保證號,戶籍類別,殘疾

等級,夫妻80歲以上,子女殘疾等級,

所屬區(qū)。

老年優(yōu)待證信姓名,區(qū)域,性別,出生年月,身份證號,

息(7項)登記日期。

人口和育齡婦女基本姓名,錄入日期,注銷、未婚、流動標記,

計劃生信息(34項)門牌號,進入系統(tǒng)日期,女方姓名,女

育委員方出生日期,女方工作單位,女方民族

會狀況,女方身份證號碼,女方戶口性質(zhì),

女方戶籍所在地,女方婚姻狀況,男方姓

23

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

名,男方出生日期,男方工作單位,男方

民族狀況,男方身份證號碼,男方戶口性

質(zhì),男方戶籍所在地,男方婚姻狀況,結(jié)

婚日期,保險種類,保險金額,入保年

月,管理類型,女方文化程度,男方文

化程度,女方政治面貌,男方政治面貌,

女方職業(yè),男方職業(yè),備注,女方戶籍

所在地代碼,男方戶籍所在地代碼。

育齡婦女生育育齡編碼,孩次,小孩姓名,出生日期,

信息(19項)性別,計劃內(nèi)外,子女屬性,遺傳病和

病殘,死亡日期,領(lǐng)獨生證日期,錄入

日期,失效類型,往年漏報補報,新生

兒體重,新生兒畸形,新生兒窒息,月

報單年度,月報單月份。

衛(wèi)生局新生兒出生登編號,父親身份證,父親姓名,父親出生

記信息(10項)日期,母親身份證,母親姓名,母親出

生日期,新生兒姓名,出生日期,性別。

體檢信息身份證號、體檢時間、體檢結(jié)果、體檢說

公安局人口基本信息姓名,公民身份號碼,出生日期,性別,

24

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

(9項)民族,地址,曾用名,人員代碼狀態(tài),

照片(二代證)

死亡信息(3項)姓名,公民身份號碼,死亡日期

戶籍信息(9項)姓名,性別,身份證號,出生時間,戶

主姓名,與戶主關(guān)系,申報(監(jiān)護)人姓

名,戶籍地詳細地址,何時何地遷入

民政局低保救助信息低保證號、公民身份號碼、姓名、所屬居

(8項)委、所屬街道、救助方式、救助金額、救

助對象類型

死亡人口上報姓名,公民身份號碼,死亡日期,上報單

信息(4項)位

教育教育情況身份證號、畢業(yè)學校、學歷、學位、專業(yè)、

入校時間、出校時間

稅務(wù)繳稅信息身份證號、繳稅日期、繳稅基數(shù)、應(yīng)繳金

額、實繳金額、時間

欠稅情況身份證號、應(yīng)繳金額、時間、欠繳金額

涉及部門

人口業(yè)務(wù)數(shù)據(jù)來源包括:人口基礎(chǔ)共享數(shù)據(jù)、流動人口信息、人口婚姻信息、

25

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

新生兒信息、戶籍信息等業(yè)務(wù)數(shù)據(jù)。涉及公安、民政等多個部門。

公安:戶籍人口信息、流動人口信息、戶口申報信息、人口遷出信息、人口

遷入信息、死亡人口信息、駕駛證信息、行駛證信息以及旅館入住信息等。

計生:育齡婦女信息、生育子女信息、流入流出人口信息、避孕史信息、生

殖健康信息等。

人社:社會保險信息、醫(yī)療保險信息、養(yǎng)老保險信息、工傷保險信息、生育

保險信息、勞動就業(yè)信息、失業(yè)人員信息、公務(wù)員信息、專家信息以及資格考

試信息等。

民政:婚姻登記信息、離婚登記信息和撫養(yǎng)權(quán)變更信息、收養(yǎng)信息、殯葬火

花人員信息、救助人員信息、社會福利人員信息、五保戶信息、社會團體信息、

福利彩票信息、慈善捐贈信息以及軍屬信息等。

衛(wèi)生:醫(yī)院接生信息、嬰兒出生醫(yī)學證明辦理、婦女取放環(huán)信息、引流產(chǎn)信

息、患者就診信息、出生缺陷、住院信息、醫(yī)務(wù)人員信息、免疫規(guī)劃信息、接

種疫苗人員信息以及獻血人員信息等。

住建:住房擁有信息、房屋租賃信息等。

組織部門:黨員信息、干部信息以及人才信息等。

統(tǒng)計部門:人口普查信息等。

其他相關(guān)部門信息。

26

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

數(shù)據(jù)模型

抽取/交換

人口基本信息

戶籍信息

流動人口信息

社保信息

婚姻信息

救助信息

死亡信息—

新生兒信息

5.2.1.9.1人口基本信息

人口基本信息(公安)

RK_RKJBXX

是是否

序字段類型及

字段漢字名字段名否允許注釋

號精度

主為空

27

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

1姓名XMVARCHAR否

公民身份號VARCHAR

2GMSFZH是否

3出生日期CSRQDATE否

4性另IJXBVARCHAR否

民族VARCHAR標準

庫中

5MZ否

的類

型表

6地址DZVARCHAR否

7曾用名CYMVARCHAR

人員代碼狀VARCHAR

8RYDMZT

態(tài)

照片(二代

Q2ZPBLOB

證)

5.2.L9.2死亡人口信息

死亡人口信息(公安)

28

貴陽市政府數(shù)據(jù)交換共享平臺項目投標文件一一武漢達夢數(shù)據(jù)庫有限公司

RK_SWRKXX

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
  • 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論