疫情數(shù)據(jù)治理及防控系統(tǒng)建設方案

疫情數(shù)據(jù)治理及防控系統(tǒng)

建設方案

目錄

1.1.項目背景................................................4

1.2.項目現(xiàn)狀................................................4

1.3.建設目標................................................5

1.3.1.提升疫情防控工作效率...............................5

1.3.2.及時掌握防疫工作情況................................5

1.3.3.通過信息化手段為基層減負............................6

1.3.4,夯實數(shù)字政府支撐數(shù)據(jù).................................6

1.4.需求分析.................................................6

1.4.1,應用需求分析.........................................6

1.4.2.用戶需求分析.........................................7

1.4.3.功能需求分析.........................................9

1.4.4.性能需求分析........................................10

1.4.5.網(wǎng)絡安全需求分析....................................11

1.5.建設內(nèi)容................................................12

1.5.1.建設內(nèi)容一覽表.....................................12

1.5.2.社會數(shù)據(jù)采集........................................14

1.5.3.疫情數(shù)據(jù)治理........................................32

1.5.4.疫情防控輔助........................................49

1.5.5.展示屏幕系統(tǒng)........................................62

1.5.6.對接服務...........................................68

1.6.安全設計...............................................73

1.6.1.信息系統(tǒng)安全等級定級...............................73

1.6.2.信息系統(tǒng)安全技術(shù)方案................................75

1.6.3.用戶管理...........................................93

1.6.4.登錄安全要求........................................94

1.6.5.安全評估服務.......................................95

1.7.項目管理需求...........................................97

1.7.1.項目實施進度計劃....................................98

1.7.2.組織機構(gòu)和人員管理方案..............................99

1.7.3.風險分析與對策需求.................................101

1.7.4.質(zhì)量保障需求.......................................110

1.1.項目背景

為進一步健全完善常態(tài)化新冠肺炎疫情防控和應急處置工作的

信息化支撐，有效保障新冠肺炎疫情防控工作反應及時、指揮順暢、

高效運轉(zhuǎn)，根據(jù)市委辦公室、市人民政府辦公室印發(fā)的《新型冠狀病

毒肺炎疫情防控領(lǐng)導小組（指揮部）及辦公室工作方案（第4版）》

“由政務服務數(shù)據(jù)管理局負責統(tǒng)籌做好全區(qū)疫情防控信息系統(tǒng)規(guī)劃

建設”的工作要求，結(jié)合我區(qū)實際，亟需建設科學、統(tǒng)一、高效的疫

情防控系統(tǒng)，全面推進政務大數(shù)據(jù)協(xié)助精準防疫，利用在線填表報數(shù)

實現(xiàn)高效排查，為基層減負提供應用工具，利用疫情防控大屏為防疫

指揮部門提供疫情數(shù)據(jù)看板，強化實戰(zhàn)協(xié)同能力，提高應急時態(tài)的指

揮調(diào)度效率。

1.2.項目現(xiàn)狀

自從2019年新冠疫情爆發(fā)，新冠疫情防控工作變得極為重要，

隨著病毒傳播的能力的增強，傳統(tǒng)依靠人工摸查、統(tǒng)計、分析的方式，

從效率上已經(jīng)越來越不能滿足疫情防控工作的需要，防控基層人員工

作量和工作壓力越來越大，容易發(fā)生工作出錯。另因區(qū)數(shù)據(jù)中心建設

時，流數(shù)據(jù)處理技術(shù)并未成熟，所以未納入當時項目的建設，無法實

時數(shù)據(jù)處理的需求。為進一步健全完善常態(tài)化新冠肺炎疫情防控和應

急處置工作的信息化支撐，有效保障新冠肺炎疫情防控工作反應及時、

指揮順暢、高效運轉(zhuǎn)，根據(jù)市委辦公室、市人民政府辦公室印發(fā)的《新

型冠狀病毒肺炎疫情防控領(lǐng)導小組（指揮部）及辦公室工作方案（第

4版）》“由政務服務數(shù)據(jù)管理局負責統(tǒng)籌做好全區(qū)疫情防控信息系

統(tǒng)規(guī)劃建設”的工作要求，結(jié)合我區(qū)實際，亟需建設科學、統(tǒng)一、高

效的疫情防控系統(tǒng)，全面推進政務大數(shù)據(jù)協(xié)助精準防疫，利用在線填

表報數(shù)實現(xiàn)高效排查，為基層減負提供應用工具，利用疫情防控大屏

為防疫指揮部門提供疫情數(shù)據(jù)看板，強化實戰(zhàn)協(xié)同能力，提高應急時

態(tài)的指揮調(diào)度效率。

1.3.建設目標

1.3.1.提升疫情防控工作效率

通過大數(shù)據(jù)技術(shù)手段，提升防控精準度和快速響應能力。搭建流

數(shù)據(jù)處理和近實時分析中臺，實現(xiàn)疫情數(shù)據(jù)的實時處理，輸出“高、

中、低風險區(qū)”內(nèi)的人口情況，對疫情、人口、運營商等數(shù)據(jù)進行實

時分析，夯實實有活躍人口，快速計算出人員軌跡和設防范圍。

1.3.2.及時掌握防疫工作情況

通過疫情數(shù)字座艙，讓區(qū)領(lǐng)導及防疫指揮部門實時掌握疫情數(shù)據(jù),

強化實戰(zhàn)協(xié)同能力，提高應急時態(tài)指揮調(diào)度效率。圍繞大屏（指揮中

心）和中屏（個人電腦）使用場景，建設疫情防控數(shù)字座艙，領(lǐng)導可

以隨時查看核酸檢測、疫苗接種、重點人員監(jiān)控等疫情防控的實時數(shù)

據(jù)。

1.3.3.通過信息化手段為基層減負

通過信息化技術(shù)手段，實現(xiàn)高效排查，為基層防疫工作減負。利

用智能分析、靶向短信、基站掃描等信息化手段，結(jié)合移動端填表報

數(shù)工具，實現(xiàn)任務錄入、任務下發(fā)、任務分派等功能，減輕基層在“疫

苗接種、核酸排查、來花核查等”工作的排查量、話務量和統(tǒng)計工作

量。

1.3.4,夯實數(shù)字政府支撐數(shù)據(jù)

夯實我區(qū)人房數(shù)據(jù)，為各種數(shù)字政府應用打下基礎。以“四標四

實、七普、四圖一檔”數(shù)據(jù)為基礎，結(jié)合社保、醫(yī)療、交通、物業(yè)、

疫情等現(xiàn)有數(shù)據(jù)，摸清“實有人口”，為將來各類數(shù)字政府應用打下

基礎。

1.4.需求分析

1.4.1.應用需求分析

1.4.1.1.完善數(shù)字政府運行底座

完善數(shù)字政府運行底座，更好地支撐數(shù)字政府應用建設。建設流

數(shù)據(jù)處理、實時分析計算、視頻接入、視頻結(jié)構(gòu)化等支撐能力，夯實

實有人口，為疫情防控、指揮調(diào)度、流調(diào)追蹤、社區(qū)排查等提供精準

的數(shù)據(jù)支撐。

1.4.1.2.建設疫情防控日常工作輔助功能

圍繞疫情防控日常工作，建設自動化輔助功能，為基層減負。建

設內(nèi)容包括：重點人員核酸監(jiān)控、測溫哨點掃碼量檢測、核酸漏檢排

查、接種到期提醒、來花登記提醒、離花情況檢測、返花情況登記等。

通過靶向短信、基站檢測等各種手段，讓防控工作實現(xiàn)精準化、自動

化、高效化。

1.4.1.3.建設防疫戰(zhàn)時指揮輔助功能

建設能實時處理疫情數(shù)據(jù)的分析引擎，在出現(xiàn)疫情時，輔助領(lǐng)導

對疫情的傳播、管控及后勤進行分析研判。通過完善的地圖、地址和

人房數(shù)據(jù)，結(jié)合病歷、孕產(chǎn)檢、通行碼等數(shù)據(jù)，實現(xiàn)“高、中、低風

險區(qū)”的人口、商戶、房屋、分析報告，輔助防控辦開展相關(guān)工作。

1.4.2.用戶需求分析

1.4.2.1.衛(wèi)健部門、防疫指揮辦

通過對重點人員的精細化管理，結(jié)合人員基本信息、健康碼數(shù)據(jù)、

人房數(shù)據(jù)和公安、衛(wèi)健委、社區(qū)網(wǎng)格的填報數(shù)據(jù)，利用數(shù)據(jù)系統(tǒng)及時

更新各類重點人群的檢測周期與頻率，再結(jié)合核酸檢測全流程系統(tǒng)庫

及每日核酸檢測數(shù)據(jù)進行數(shù)據(jù)分析，精確統(tǒng)計分析每日應檢未檢的情

況，形成督辦交辦機制，并能實現(xiàn)與短信平臺的對接，精準通知該居

民進行核酸檢測。助區(qū)衛(wèi)健部門、防疫指揮辦等單位及時準確的獲取

人員的各類信息，快速掌握區(qū)域內(nèi)重點防控人員的變化動態(tài)。

1.4.2.2.基層工作人員

面向基層工作人員提供任務排查專項排查服務，運用粵政易移動

端精準快速排查，解決以往紙質(zhì)填報、重復填寫、手工匯總困難問題，

縮短任務分派時長，切實為基層減負，提高疫情排查效率。利用數(shù)據(jù)

賦能，移動端便捷查詢需排查人口數(shù)據(jù)，高效防疫、提高社區(qū)治理效

率。有效支撐管理精細化，支撐疫情防控，針對防疫提供人口信息服

務，解決公安、衛(wèi)健及社區(qū)排查難的情況。

1.4.2.3.居民群眾

居民群眾可通過政府小程序填報防疫相關(guān)報表，數(shù)據(jù)及時回流到

數(shù)據(jù)中心進行治理，完善居民群眾個人檔案，減少居民重復填報。通

過大數(shù)據(jù)中心對人口防疫數(shù)據(jù)的清洗比對，對于已做核酸、已接種疫

苗的群眾，減少重復發(fā)送核酸檢測、疫苗接種的電話或短信提醒，避

免對群眾造成困擾和麻煩。止匕外，對于疫控區(qū)內(nèi)的居民群眾提供求助

上報服務，減少出現(xiàn)身體不適或生活困難而無法及時獲得幫助的情況

出現(xiàn)。

1.4.3.功能需求分析

本項目建設內(nèi)容是結(jié)合疫情防控需求，包括社會數(shù)據(jù)采集、疫情

數(shù)據(jù)治理、疫情防控輔助、展示屏幕系統(tǒng)，利用填表報數(shù)系統(tǒng)面向基

層工作人員及群眾采集防疫數(shù)據(jù)，并結(jié)合省核酸及疫苗數(shù)據(jù)，通過實

時計算平臺和實時數(shù)倉實現(xiàn)實時采集、實時計算和處理，實現(xiàn)人口數(shù)

據(jù)的標準化清洗處理，數(shù)據(jù)建模的在線定義，最終針對已標準化的數(shù)

據(jù)資源，構(gòu)建出防疫綜合監(jiān)控的展示面板。

社會數(shù)據(jù)采集由集成在粵政易的填表報數(shù)系統(tǒng)實現(xiàn)，功能需求包

括為業(yè)務單位提供表格配置、任務下發(fā)、任務未辦提醒等功能，經(jīng)填

表報數(shù)系統(tǒng)下發(fā)到各鎮(zhèn)街、村居的基層工作人員，基層工作人員使用

該系統(tǒng)核查防疫或四圖一檔任務，核查時支持任務按鎮(zhèn)街-村居兩級

分派，支持任務移交、任務結(jié)果導出、工作統(tǒng)計等功能，任務核查完

成后的排查數(shù)據(jù)回流到數(shù)據(jù)中心。

疫情數(shù)據(jù)治理需將現(xiàn)有疫情相關(guān)數(shù)據(jù)、人口相關(guān)數(shù)據(jù)等進行數(shù)據(jù)

集成、數(shù)據(jù)標準化、數(shù)據(jù)建模、數(shù)據(jù)開發(fā)等內(nèi)容，支持高性能的復雜

查詢，支持多級并行技術(shù)，并行高速數(shù)據(jù)加載等大規(guī)模數(shù)據(jù)分析需求

場景。通過實時計算平臺、實時數(shù)據(jù)倉庫實現(xiàn)實有人口測算、人屋數(shù)

據(jù)治理、人企數(shù)據(jù)治理。

疫情防控輔助需提供用戶身份管理、訪問權(quán)限控制及審查日志等

系統(tǒng)管理功能。支持對疫情監(jiān)測人群、疫情監(jiān)測任務進行配置，滿足

核酸檢測調(diào)度、疫苗接種監(jiān)測、個人形成排查、通行碼監(jiān)測、封控區(qū)

指揮調(diào)度及疫區(qū)求助服務等場景。

展示屏幕系統(tǒng)需適配數(shù)字政府運營中心大屏分辨率32：9的

8K(7680*2160)分辨率自適應進行布局設計。個人電腦中屏分辨率為

16：9的4K(3840*2160)分辨率自適應進行布局設計。展示內(nèi)容包

括日常及戰(zhàn)時兩種狀態(tài)，展示指標需根據(jù)疫情及用戶需求動態(tài)變化。

1.4.4.性能需求分析

系統(tǒng)應滿足采購人的要求，穩(wěn)定、可靠、實用。人機界面友好,

輸出、輸入方便，圖表生成靈活美觀，檢索、查詢簡單快捷。

1.4.4.1.基層填表報數(shù)服務性能需求分析

基層填表報數(shù)服務需支撐3500人同時在線使用。

1.4.4.2.群眾填表報數(shù)服務性能需求分析

群眾填表報數(shù)服務需支撐全區(qū)200萬人在24小時內(nèi)完成填報任

務，為達到相關(guān)性能要求，所需服務器、網(wǎng)絡、出口以及加速服務等

由采購人統(tǒng)籌提供。

1.4.4.3.疫情防控業(yè)務性能需求分析

根據(jù)疫情防控業(yè)務處理類型的不同，把作業(yè)劃分為交互類業(yè)務、

查詢類業(yè)務和統(tǒng)計分析類業(yè)務，分別給出響應時間要求的參考值，包

括峰值響應時間和平均響應時間。

1、交互類業(yè)務

交互類業(yè)務是指平時工作中在系統(tǒng)中進行的業(yè)務處理，如錄入,

修改或刪除一條記錄等操作。

平均響應時間：1（秒）

峰值響應時間：1-3（秒）

2、查詢類業(yè)務

如信息查詢、統(tǒng)計報表生成或決策支持的信息查詢等。查詢業(yè)務

由于受到查詢的復雜程度、查詢的數(shù)據(jù)量大小等因素的影響，需要根

據(jù)具體情況而定，在此給出三個參考范圍。

簡單查詢平均響應時間：1（秒）

復雜查詢平均響應時間：1-5（秒）

極限數(shù)據(jù)查詢時間：最大樣本量時數(shù)據(jù)查詢時間不超過10秒。

3、統(tǒng)計分析類業(yè)務

一般統(tǒng)計分析時間：不超過3秒

0LAP大數(shù)據(jù)量分析時間：不超過10分鐘

1.4.5.網(wǎng)絡安全需求分析

按照信息系統(tǒng)安全等級保護二級進行設計建設。

1.5.建設內(nèi)容

1.5.1.建設內(nèi)容一覽表

建設模塊功能概述

1、面向基層人員提供疫情專項排查功能，實現(xiàn)表

格配置、疫情任務分派、疫情任務排查、疫情任務移

交、疫情任務無法落地管理、疫情任務對接線索人員

核酸檢測信息、疫情任務對接新冠疫苗接種信息、疫

情任務審核管理、涉疫人員納管信息登記、疫情任務

退回服務、疫情任務狀態(tài)更新服務、疫情任務變更歸

屬地服務、疫情任務超時未辦提醒、疫情任務排查結(jié)

果導出、疫情任務排查工作統(tǒng)計等。提供相關(guān)技術(shù)服

社會數(shù)據(jù)

務支撐及系統(tǒng)工作培訓。

采集

2、基層填表報數(shù)服務在本期項目中提供包含全

區(qū)不超過100種復雜表格定制服務，普通單向填報表

格的定制由系統(tǒng)用戶自行在系統(tǒng)進行配置。提供區(qū)縣

表格梳理分析、簡單或復雜表格制表、培訓與咨詢服

務。

3、支持排查后的數(shù)據(jù)回落到數(shù)據(jù)中心

4、對接政務服務移動端級實名認證平臺，為市民

提供填報服務；生成移動端H5頁面支撐用戶完成信

息填報和提交等操作；與政務服務移動端進行聯(lián)調(diào)測

試。

1、提供可視化數(shù)據(jù)開發(fā)IDE,實現(xiàn)實時流式數(shù)據(jù)

采集、實時計算及任務的監(jiān)控預警一體化作業(yè)。

2、通過完全對等無共享（share-nothing）的MPP

架構(gòu)，實現(xiàn)SQL的并行處理；通過對數(shù)據(jù)的自動化分

疫情數(shù)據(jù)

區(qū)數(shù)據(jù)，實現(xiàn)數(shù)據(jù)的并行10;通過數(shù)據(jù)裝載工具，實

治理

現(xiàn)并行的數(shù)據(jù)裝載。

3、通過科學可行的算法，對群眾產(chǎn)生的數(shù)據(jù)軌跡

進行活躍度測算，判斷在我區(qū)居住的群眾，作為疫情

防控監(jiān)控人群的基數(shù)。

用于維護疫情防控相關(guān)的監(jiān)測規(guī)則，包括疫情監(jiān)

測人群配置、監(jiān)測任務設立（包括核酸檢測規(guī)則、疫

苗接種規(guī)則、通行限制規(guī)則），根據(jù)規(guī)則可對核酸檢

疫情防控

測調(diào)度、疫苗接種監(jiān)測、場所碼監(jiān)測、疫情指揮調(diào)度

輔助

等提供支撐?；谑〗y(tǒng)一身份認證進行統(tǒng)一身份認證

管理，提供用戶身份管理、權(quán)限管理、日志審查等系

統(tǒng)管理功能。

展示屏幕1、適配數(shù)字政府運營中心大屏及個人電腦（中

系統(tǒng)屏）進行設計

2、與區(qū)視頻匯聚平臺進行SDK對接，實現(xiàn)一、

二、三類視頻調(diào)看、控制和錄像翻查等功能。

3、包括日常狀態(tài)及戰(zhàn)時狀態(tài)兩種維度的展示指

標，可根據(jù)區(qū)級、鎮(zhèn)街、部門分級展示。

1.5.2.社會數(shù)據(jù)采集

填表報數(shù)服務分為面向群眾的小程序部分和面向工作人員的粵

政易（含PC版）部分，兩個服務應分開部署，所需計算、存儲、網(wǎng)

絡、出口等資源由甲方提供，兩者任務可以相互調(diào)度分派。

1.5.2.1.涉疫人員核查納管

基于填表報數(shù)系統(tǒng)基礎服務功能，提供公安CAT疫情任務排查專

項基礎服務，包含表格填報組件配置服務，組織機構(gòu)進駐、賬號角色

開通等，支撐市公安CAT疫情任務排查專項快速上線，通過粵政易移

動端進行應用。

1.5.2.1.1.專項排查應用服務

1.5.2.1.1.1.疫情任務分派管理

支持公安CAT涉疫排查線索、疫情防控排查線索等交換至到填表

報數(shù)系統(tǒng)，對接數(shù)據(jù)中心清洗補充鎮(zhèn)街社區(qū)信息，再通過填表報數(shù)系

統(tǒng)自動按任務線索歸屬鎮(zhèn)街社區(qū)，直達分派到村社區(qū)三人小組，不能

識別分派的部分，提供手動分派服務，縮短任務分派時長，提高分派

精準度，有效提升疫情排查效率，亦可自動按照數(shù)量平均分派到指定

群組人員。另外數(shù)據(jù)導入后，需先與區(qū)數(shù)據(jù)中心的數(shù)據(jù)進行比對，補

充核查任務的缺陷數(shù)據(jù)。另外需與之前核查的數(shù)據(jù)進行比對，避免造

成基層重復工作，多次擾民。

1.5.2.1.1.2.疫情任務排查登記

提供涉疫人員核查登記服務，支持鎮(zhèn)街派出所、鎮(zhèn)街三人小組、

村社區(qū)三人小組，通過粵政易移動端和PC端，按權(quán)限快速填寫對應

的核查內(nèi)容。支持多人協(xié)作排查模式，即同一批清單由多人共同同時

排查，或由群眾端填表報數(shù)、語音外呼、智能機器人等多種輔助手段

實現(xiàn)協(xié)作排查，輔助核查服務提供實時數(shù)據(jù)訪問接口，可得知輔助任

務的實時進展。支持排查任務按條件掛起重啟功能，即群眾答復稍晚

前去做核酸，系統(tǒng)能將任務暫時掛起，到約定時間發(fā)現(xiàn)群眾未有響應,

提醒核查人員重打電話確認。支持多批次查詢，如按照多個任務批次

下達的核查人員清單，如存在人員重復的，可查詢該人是否在歷史批

次已核查過，并填入對應內(nèi)容。

1.5.2.1.1.3.疫情任務移交管理

提供涉疫人員任務移交管理服務，為鎮(zhèn)街派出所、鎮(zhèn)街三人小組、

村社區(qū)三人小組提供對非本轄區(qū)排查的任務，便捷移交給其他轄區(qū)跟

進。

1.5.2.1.1.4.疫情任務無法落地管理

提供涉疫人員疫情任務無法落地管理服務，支持排查發(fā)現(xiàn)多次聯(lián)

系不上，線索質(zhì)量等問題無法落地排查的情況，可進行登記備注，為

后續(xù)跟進提供更好的信息支撐。

1.5.2.1.1.5.疫情任務對接線索人員核酸檢測信息

在涉疫線索排查時提供線索人員核酸檢測信息，支持通過核酸檢

測接口自動獲取涉疫線索人員的最新核酸檢測信息，并自動關(guān)聯(lián)回填

支撐排查登記，數(shù)據(jù)賦能。

1.5.2.1.1.6.疫情任務對接新冠疫苗接種信息

在涉疫線索排查提供線索人員新冠疫苗接種信息服務，包括接種

針次、最近接種時間等，支持通過對接新冠疫苗接種接口按身份證自

動獲取涉疫線索人員的新冠疫苗接種信息展示，并在排查時候自動關(guān)

聯(lián)回填，支撐排查登記。

1.5.2.1.1.7.疫情任務審核管理

面向防疫管理人員提供對涉疫線索排查任務審核功能，支持管理

員對防疫工作進行檢查，對排查上報任務存在問題的線索退回重新排

查。通過采購人提供的數(shù)字話務系統(tǒng)，核對核查人員是否有通過電話

核查相關(guān)信息。

1.5.2.1.1.8.涉疫人員納管信息登記

面向村居，在涉疫人員落地到村居后，按照其來源地及疾控要求,

按照相關(guān)規(guī)范（建設單位提供納管標準）進行納管（包括上封條，裝

門禁，簽承諾書，每天走訪檢查），對接短信平臺，每天通過短信提

醒納管群眾更新進行穗康自我健康監(jiān)測申報，收運垃圾，轉(zhuǎn)送生活物

資等工作情況的登記。（部分工作是多次進行，需要多次錄入，直至

納管期結(jié)束）并通過區(qū)數(shù)據(jù)中心查詢納管人員穗康自我健康監(jiān)測更新

情況，如果仍未有更新的，在納管列表的標簽內(nèi)進行標記，提醒村居

人員電話聯(lián)系。村居工作人員的納管操作通過市防疫通實現(xiàn)，本系統(tǒng)

需與市防疫通做好數(shù)據(jù)對接。

1.5.2.1.1.9.疫情任務退回服務

提供公安CAT疫情任務回退服務,支持村社區(qū)三人小組根據(jù)疫情

任務實際情況，判斷是否疫情任務出現(xiàn)特殊情況，退回給鎮(zhèn)街三人小

組進行研判；

1.5.2.1.1.10.疫情任務狀態(tài)更新服務

提供疫情任務狀態(tài)更新服務，支撐公安CAT涉疫排查線索，根據(jù)

上級要求修改疫情任務狀態(tài)，進行加急、撤銷，滿足疫情任務的臨時

改動。

1.5.2.1.1.11.疫情任務變更歸屬地服務

提供疫情任務變更歸屬地服務，支持鎮(zhèn)街三人小組、村社區(qū)三人

小組，在排查登記時，根據(jù)核查情況，變更疫情任務納管的歸屬地。

1.5.2.1.1.12.疫情任務超時未辦提醒

面向防疫管理人員提供對涉疫線索排查任務辦理超時提醒功能,

在排查任務列表可以提醒超時未辦，超時時間，提升排查效率。

1.5.2.1.1.13.疫情任務排查結(jié)果導出

面向公安，提供涉疫人員線索排查結(jié)果數(shù)據(jù)導出服務，支撐按模

板需求、增量導出、按批次導出等要求，提供數(shù)據(jù)導出服務。

1.5.2.1.1.14.疫情任務排查工作統(tǒng)計

面向防疫管理人員，提供統(tǒng)計服務，根據(jù)統(tǒng)計指標需求，根據(jù)涉

疫人員核查任務分派和排查數(shù)據(jù)，提供對應統(tǒng)計服務，以便防疫管理

人員了解涉疫人員核查進展，監(jiān)督防疫排查工作。

1.5.2.1.2.保障服務

1.5.2.1.2.1.服務支撐

在大規(guī)模人員排查期間，提供7*24小時保障服務，檢測及排除

bug現(xiàn)場修復，即時響應及排除故障，保障系統(tǒng)的整體平穩(wěn)運行服務,

并提供1人在線遠程對系統(tǒng)操作問題等提供客服答疑。

1.5.2.1.2.2.工作培訓

面向全區(qū)涉疫線索應用排查提供系統(tǒng)操作培訓I。提供1場集中培

訓I。培訓內(nèi)容包括：如何開展賬號權(quán)限自助開通、如何排查分派、登

記、導出數(shù)據(jù)等操作。

1.5.2.2.基層填表報數(shù)服務

基層填表報數(shù)服務在本期項目中提供包含全區(qū)不超過100種復

雜表格定制服務，普通單向填報表格的定制由系統(tǒng)用戶自行在系統(tǒng)進

行配置，不納入100種表格內(nèi)，可配置的組件要求可參考“表單自定

義功能需求”的描述。

1.5.2.2.1.區(qū)縣表格梳理分析

1.5.2.2.1.1.表格信息清單收集匯總

與主管部門溝通，并協(xié)助制定實施步驟并溝通了解、分析、選取

的優(yōu)先調(diào)研的部門；協(xié)助部門按計劃收集表格，并編制形成表格清單

（包括來源部門、表格名稱、表格來源、填報頻率、填報層級、填報方

式、填報對象等信息）。

1.5.2.2.1.2.表格清單信息內(nèi)容梳理與校正

根據(jù)匯總清單按表格逐個基本信息（包括來源部門、表格名稱、

表格來源、填報頻率、填報層級、填報方式、填報對象等信息）進行

完整性、準確性等檢查；把存在問題分別給相應部門進行修改完善,

并根據(jù)部門完善的結(jié)果，重新整理匯總到表格信息清單里；與部門最

終確認表格清單信息，并輸出確認后的表格信息清單。支持將填表報

數(shù)清單初始化至填表報數(shù)系統(tǒng)。

1.5.2.2.1.3.表格壓減分析設計服務

在項目建設期內(nèi)，組織協(xié)助部門進行表格的取消、合并：分析表

格清單信息，對表格的每個數(shù)據(jù)項進行梳理分析(分析表格收集的信

息是否必要，是否相似或重復，比對相似的表格收集的信息重合度等);

對分析結(jié)果與部門溝通討論，并支撐部門對該停未停、作用意義不大

的存量表格進行取消；協(xié)助部門對表格數(shù)據(jù)項重合度高的表格進行合

并，減少基層填報的表格數(shù)量。

1.5.2.2.2.表格制表

1.5.2.2.2.1.規(guī)范簡易表格填報標準

對部門涉及的表格填報樣式進行收集，掌握各表格的填報業(yè)務屬

性，并且進行填報標準化規(guī)范化如規(guī)范填報組件下拉單選多選，選項

值、是否必填等，提升填報數(shù)據(jù)質(zhì)量。

工作內(nèi)容：

(1)根據(jù)部門表格信息清單，分別對把每個表格的填報表格樣

式含示例數(shù)據(jù)進行收集；

(2)跟進各部門表格樣式的收集進度，并對部門在收集過程中

提出的疑問進行解答;

(3)對各部門提交過來的表格樣式進行分類整理、匯總(收集

的表格如果是有樣例數(shù)據(jù)需清空，調(diào)整表格的格式、字體、行高等)

再進行在線填報表格制表；

(4)協(xié)助部門對表格樣式進行分析，并對表格的填報樣式、數(shù)

據(jù)標準(數(shù)據(jù)項、數(shù)據(jù)項類型、數(shù)據(jù)項長度、是否必填項等)進行規(guī)范，

統(tǒng)一每種表格樣式和填報標準。

1.5.2.2.2.2.規(guī)范簡易表格匯總樣式

對部門涉及的簡易表格數(shù)據(jù)匯總樣式進行收集，掌握各表格的匯

總樣式，特別是層層轉(zhuǎn)發(fā)下級填報，匯總數(shù)據(jù)上報的需求。

工作內(nèi)容：

(1)根據(jù)部門簡易表格信息清單，分別對把每個簡易表格的匯

總表格樣式進行收集；

(2)跟進各部門簡易表格樣式的收集進度，并對部門在收集過

程中提出的疑問進行解答；

(3)對各部門提交過來的簡易表格匯總樣式進行整理、并與填

報樣式數(shù)據(jù)項進行比對匯總樣式是否可行，確認最終表格匯總樣式。

1.5.2.2.2.3,簡易復雜表格錄入服務

針對部門提出需協(xié)助的部門提供協(xié)助，包括引導和指引錄入、協(xié)

助錄入、處理錄入過程中的表格問題等。

1.5.2.2.2.4.簡易表格移動端上線

提供基礎表格數(shù)據(jù)處理配置服務，提供上線移動端技術(shù)支撐服務,

支持表格在粵政易進行上線填報。

1.5.2.2.2.5.規(guī)范復雜表格填報標準

對部門涉及的表格填報樣式進行收集，掌握各表格的填報樣式，

并且進行填報標準化規(guī)范化如規(guī)范填報組件下拉單選多選，選項值、

是否必填等，提升填報數(shù)據(jù)質(zhì)量。

工作內(nèi)容：

(1)根據(jù)部門表格信息清單，分別對把每個表格的填報表格樣

式含示例數(shù)據(jù)進行收集；

(2)跟進各部門表格樣式的收集進度，并對部門在收集過程中

提出的疑問進行解答；

(3)對各部門提交過來的表格樣式進行分類整理、匯總(收集

的表格如果是有樣例數(shù)據(jù)需清空，調(diào)整表格的格式、字體、行高等)

再進行在線填報表格制表；

(4)協(xié)助部門對表格樣式進行分析，并對表格的填報樣式、數(shù)

據(jù)標準(數(shù)據(jù)項、數(shù)據(jù)項類型、數(shù)據(jù)項長度、是否必填項等)進行規(guī)范,

統(tǒng)一每種表格樣式和填報標準。

1.5.2.2.2.6.規(guī)范復雜表格匯總樣式

對部門涉及的復雜表格數(shù)據(jù)匯總樣式進行收集，掌握各表格的匯

總樣式，特別是層層轉(zhuǎn)發(fā)下級填報，匯總數(shù)據(jù)上報的需求。

工作內(nèi)容：

（1）根據(jù)部門復雜表格信息清單，分別對把每個復雜表格的匯

總表格樣式進行收集；

（2）跟進各部門復雜表格樣式的收集進度，并對部門在收集過

程中提出的疑問進行解答；

（3）對各部門提交過來的表格匯總樣式進行整理、并與填報樣

式數(shù)據(jù)項進行比對匯總樣式是否可行，確認最終表格匯總樣式。

1.5.2.2.2.7.復雜表格配置

因業(yè)務復雜，表格樣式、數(shù)據(jù)項關(guān)聯(lián)邏輯等復雜度高，需對部門

難以配置的表格梳理表格數(shù)據(jù)項配置模板，實現(xiàn)表格的快速配置并在

系統(tǒng)應用。

工作內(nèi)容：

（1）根據(jù)部門提出的需求，完成對復雜表格（具有復雜計算的表

格、填報結(jié)構(gòu)動態(tài)變化的表格等）的數(shù)據(jù)項配置模板整理、配置實施

等工作。

（2）對需要進行數(shù)據(jù)處理的表格開發(fā)處理腳本，包括源頭數(shù)據(jù)、

對象臺賬、業(yè)務臺賬、表格匯總、表格生成等數(shù)據(jù)處理。

1.5.2.2.2.8.復雜表格移動端上線

提供基礎表格數(shù)據(jù)處理配置服務，提供上線移動端技術(shù)支撐服務,

支持表格在粵政易進行上線填報。

1.5.2.2.3.表格優(yōu)化服務

1.5.2.2.3.1.表格數(shù)據(jù)項計算公式規(guī)則分析

(1)分析表格填報樣式，拆解數(shù)據(jù)項及數(shù)據(jù)規(guī)格；

(2)加減乘除、求和、計數(shù)、平均值、絕對值、取小數(shù)位數(shù)、使

用上周期數(shù)據(jù)累計等運算法則，并與部門進行確認。

(3)編制每種表格自動計算的公式需求。

1.5.2.2.3.2.表格數(shù)據(jù)項計算公式配置

根據(jù)表格數(shù)據(jù)項自動計算公式需求，對每個數(shù)據(jù)項進行在線填報

公式配置實施。

1.5.2.2.3.3.單表格填報數(shù)據(jù)項自動填充默認值數(shù)據(jù)分析

(1)分析表格填報樣式，拆解數(shù)據(jù)項及數(shù)據(jù)規(guī)格；

(2)分析表格數(shù)據(jù)項語義，整理可帶出的默認值比如填報日期、

填報人聯(lián)系電話、填報單位、填報所屬區(qū)劃等，可默認使用當前時間，

默認使用操作賬號所屬的聯(lián)系電話，所屬單位名稱，所屬單位所在區(qū)

劃名稱等填充，還有其他默認規(guī)則等，如健康碼默認為綠碼等。

1.5.2.2.3.4.單表格填報數(shù)據(jù)項自動填充默認值配置

根據(jù)表格自動填充默認值建議的數(shù)據(jù)項清單，默認規(guī)則，對每個

數(shù)據(jù)項進行配置實施。

1.5.2.2.3.5.單表格填報復用歷史數(shù)據(jù)分析

梳理、分析表格填報數(shù)據(jù)項，包括：涉及使用往期歷史數(shù)據(jù)累計

運算填充、使用往期歷史數(shù)據(jù)直接填充部分字段的，分析自動填充和

數(shù)據(jù)處理方式及規(guī)則。

1.5.2.2.3.6.自動填報歷史數(shù)據(jù)配置

根據(jù)表格復用歷史數(shù)據(jù)的數(shù)據(jù)項清單，填充規(guī)則，對每個數(shù)據(jù)項

進行配置實施，配置每個數(shù)據(jù)項匯總統(tǒng)計規(guī)則。

1.5.2.2.3.7.表格數(shù)據(jù)一鍵收取優(yōu)化分析

(1)分析表格填報樣式、數(shù)據(jù)項關(guān)系，匯總樣式，對每個數(shù)據(jù)

項梳理匯總統(tǒng)計數(shù)據(jù)上報邏輯，并與部門進行確認。

(2)根據(jù)上述優(yōu)化措施，整理每種表格一鍵收取數(shù)據(jù)處理規(guī)則

文檔(即表格收取匯總規(guī)則)。

1.5.2.2.3.8.表格數(shù)據(jù)收取匯總上報優(yōu)化分析

(1)分析表格填報樣式；

(2)對每個數(shù)據(jù)項梳理匯總統(tǒng)計數(shù)據(jù)上報邏輯，并與部門進行

確認;

(3)根據(jù)上述優(yōu)化措施，整理每種表格導入收取數(shù)據(jù)處理規(guī)則

文檔(包含表格即收取匯總規(guī)則、導入收取數(shù)據(jù)規(guī)則等)。

1.5.2.2.3.9.表格數(shù)據(jù)匯總上報優(yōu)化配置

(1)根據(jù)表格一鍵收取數(shù)據(jù)處理規(guī)則(即表格收取匯總規(guī)則)

進行配置實施，配置每個數(shù)據(jù)項導入已收取數(shù)據(jù)自動填報規(guī)則。

(2)對復雜難以簡單配置的，定制數(shù)據(jù)處理腳本進行定制。

1.5.2.2.3.10.周期性表格臺賬化分析

(1)制定周期性報表生成臺賬方案：結(jié)合表格的業(yè)務以及部門

表格臺賬的建立情況，分析表格數(shù)據(jù)是否具備建立臺賬的條件、周期

性報表數(shù)據(jù)項與臺賬數(shù)據(jù)的關(guān)系規(guī)則等，并制定該表格利用臺賬生成

周期性報表的實現(xiàn)方式；

(2)與部門確定基層單位臺賬。

1.5.2.2.3.11.周期性報表臺賬數(shù)據(jù)處理

(1)制定周期性報表生成臺賬，并應用臺賬按周期生成周期性

報表數(shù)據(jù)的處理方案：結(jié)合表格的業(yè)務以及部門表格臺賬的建立情況,

分析表格數(shù)據(jù)是否具備建立臺賬的條件、周期性報表數(shù)據(jù)項與臺賬數(shù)

據(jù)的關(guān)系規(guī)則等，并制定該表格利用臺賬生成周期性報表的實現(xiàn)方式。

(2)編制數(shù)據(jù)處理腳本：根據(jù)制定的實現(xiàn)方式，編制數(shù)據(jù)處理

腳本，建立表格臺賬數(shù)據(jù)與表格數(shù)據(jù)的對應關(guān)系，并建立臺賬與周期

性報表數(shù)據(jù)模型。

(3)對表格數(shù)據(jù)進行配置：對建立的臺賬與表格對應關(guān)系在系

統(tǒng)中配置臺賬。

(4)對表格進行測試：對配置好后的臺賬數(shù)據(jù)和周期性報表數(shù)

據(jù)在測試環(huán)境進行試測。

(5)對測試后存在問題的表格進行調(diào)整、處理和上線。

1.5.2.2.3.12.表格填報共享數(shù)據(jù)需求分析

(1)梳理分析表格填報數(shù)據(jù)來源和數(shù)據(jù)項，分析可通過共享數(shù)

據(jù)減少表格填報的表格；

(2)表格填報數(shù)據(jù)項可以使用共享主題數(shù)據(jù)優(yōu)化少填的，提供

實施服務協(xié)助部門進行優(yōu)化需求方案梳理，包括需要資源名稱，來源,

更新頻次、共享對接方式、可填充數(shù)據(jù)項等。

1.5.2.2.3.13.表格填報共享數(shù)據(jù)清洗和質(zhì)量檢查

(1)對于獲取的共享數(shù)據(jù)，進行數(shù)據(jù)質(zhì)量檢查，反饋給數(shù)據(jù)來

源修改；

(2)對于獲取的共享數(shù)據(jù)，不能直接使用的，需進行數(shù)據(jù)清洗，

如對批量獲取的共享資源按轄區(qū)返回給對于鎮(zhèn)街社區(qū)部門使用。

1.5.2.2.3.14.表格填報共享數(shù)據(jù)配置

(1)按表格填報使用共享數(shù)據(jù)方案進行實施，如配置實施表格

填報取數(shù)回填，配置填報數(shù)據(jù)使用共享數(shù)據(jù)初始化實施。

(2)對于復雜難以直接實施的，提供定制數(shù)據(jù)處理腳本程序。

1.5.2.2.4.培訓與咨詢服務

1.5.2.2.4.1.減少基層填表報數(shù)工作培訓

面向區(qū)縣部門提供基層填表報數(shù)服務培訓工作。提供1場集中培

訓。培訓內(nèi)容包括：如何開展基層基層填表報數(shù)服務梳理與優(yōu)化；結(jié)

合不同的業(yè)務場景，講解如何應用填表報數(shù)系統(tǒng)進行減少填表報數(shù)工

作；其他相關(guān)規(guī)范及要求等。

1.5.2.2.4.2.客服答疑及技術(shù)支撐服務

在項目建設期內(nèi)，面向區(qū)縣提供基層填表報數(shù)服務開展客服服務,

支撐各類問題解答，保障減少填表報數(shù)工作在區(qū)縣范圍內(nèi)推廣。工作

內(nèi)容：基層填表報數(shù)服務各類問題的解答和遠程協(xié)助；部門制表的問

題的解答和遠程協(xié)助；其他問題的答疑；對問題的總結(jié)和歸納。如果

遠程無法處理的緊急問題，4小時內(nèi)派人到現(xiàn)場處理。

1.5.2.2.5.基層填表報數(shù)應用服務（以四圖一檔數(shù)據(jù)核查支撐為例）

1.5.2.2.5.1.本地戶籍人員核查任務表格定制

面向村居，通過區(qū)數(shù)據(jù)中心（數(shù)據(jù)中心對公安提供的戶籍人口是

否在本地工作、居住進行數(shù)據(jù)比對）獲取本地戶籍核查人員名單，定

制本地戶籍人員核查任務表格生成核查線索，通過填表報數(shù)系統(tǒng)進行

線索核查確認，并將核查結(jié)果返回數(shù)據(jù)中心。

1.5.2.2.5.2.來穗來花人員核查任務表格定制

面向村居，通過區(qū)數(shù)據(jù)中心獲取在來穗系統(tǒng)有登記的非本地戶籍

人口名單，定制來穗人員核查任務表格生成核查線索，通過填表報數(shù)

系統(tǒng)進行線索核查確認，并將核查結(jié)果返回數(shù)據(jù)中心。

面向村居，通過區(qū)數(shù)據(jù)中心（數(shù)據(jù)中心通過出租屋門禁、通行碼、

學籍、孕產(chǎn)檢、預約掛號、社保、工商、核酸、疫苗、職工名冊等數(shù)

據(jù)進行測算）獲取其他未登記的來花人員名單，定制來花人員核查任

務表格生成核查線索，通過填表報數(shù)系統(tǒng)進行線索核查確認，并將核

查結(jié)果返回數(shù)據(jù)中心。

1.5.2.3.填報數(shù)據(jù)回落至本地

1.5.2.3.1.數(shù)據(jù)回落模塊部署、聯(lián)調(diào)

數(shù)據(jù)回落服務器數(shù)據(jù)庫部署、運維，并進行數(shù)據(jù)回落模塊部署、

迭代更新、調(diào)試，支撐省填表報數(shù)系統(tǒng)中屬于本地的數(shù)據(jù)信息能按時、

按期、穩(wěn)定、準確回落至本地數(shù)據(jù)庫，支撐本地部門更好掌握數(shù)據(jù)內(nèi)

容。

1.5.2.3.2.數(shù)據(jù)回落表格目錄同步程序配置實施

數(shù)據(jù)回落表格目錄同步程序及其定時器配置實施，實現(xiàn)定期獲取

本地的表格目錄數(shù)據(jù)表用于后續(xù)存儲填報數(shù)據(jù)，并進行巡檢保障定時

任務運行。

1.5.2.3.3.數(shù)據(jù)回落表格填報數(shù)據(jù)同步程序配置實施

據(jù)回落表格填報數(shù)據(jù)同步程序及其定時器配置實施，實現(xiàn)定期獲

取屬于本地表格目錄所填報數(shù)據(jù)，并進行巡檢保障定時任務運行。

1.5.2.4.群眾填表報數(shù)服務

1.5.2.4.1.生成移動端H5頁面

根據(jù)對應業(yè)務配置好相關(guān)表格，并生成在政務服務網(wǎng)移動端對應

填報的頁面，支撐用戶通過政務服務移動端完成信息填報、信息提交

等操作，協(xié)助拓寬政務服務信息獲取渠道，提升政務服務信息獲取效

率，加強政務整體服務能力。

1.5.2.4.1.1.表單自定義功能需求

除滿足參考“問卷星”的自定義表單組件功能基礎上，本項目的

表單自定義功能需提供可多級關(guān)聯(lián)的下拉菜單、定位發(fā)送、二維碼識

別等功能。

1.5.2.4.1.2.表單接口調(diào)用需求

除了甲方的地址服務外，群眾填表報數(shù)表單還支持自定義配置區(qū)

數(shù)據(jù)中心數(shù)據(jù)接口調(diào)用，便于調(diào)取疫苗、核酸及其他填報任務的輔助

數(shù)據(jù)。

1.5.2.4.1.3.表單數(shù)據(jù)加密需求

群眾填表報數(shù)功能應支持顯示數(shù)據(jù)明文加密，按照區(qū)數(shù)據(jù)中心的

加密規(guī)則，提供存儲數(shù)據(jù)單項和雙向加密。

1.5.2.4.2.移動服務測試聯(lián)調(diào)

與本地政務服務移動端進行填報服務聯(lián)調(diào)，實現(xiàn)系統(tǒng)服務運作的

可用性、有效性、穩(wěn)定性，對填報移動服務進行聯(lián)調(diào)測試，使經(jīng)調(diào)測

后的填表報數(shù)服務能有效匹配本地政務服務需求，解決聯(lián)調(diào)中出現(xiàn)的

問題，保障填表報數(shù)移動服務能在移動端正常運行。

1.5.2.4.3.地址填報內(nèi)容模糊匹配

甲方提供地址服務，乙方負責調(diào)用，支撐用戶輸入地址關(guān)鍵詞后,

系統(tǒng)根據(jù)關(guān)鍵詞內(nèi)容從數(shù)據(jù)庫查詢完整的地址，供用戶選擇補全，減

少群眾填報量，提升填報信息準確度，填表報數(shù)系統(tǒng)內(nèi)所有與區(qū)內(nèi)地

址相關(guān)的，都必須調(diào)用此地址服務接口。

1.5.3.疫情數(shù)據(jù)治理

1.5.3.1.實時計算平臺

1.5.3.1.1.概要描述

針對實時數(shù)據(jù)提供采集、計算、監(jiān)控預警一站式開發(fā)平臺。支持

對流式數(shù)據(jù)通過SQL代碼進行處理，簡化開發(fā)人員對流計算的學習

門檻，提供基于Web的可視化操作界面，提高流式數(shù)據(jù)開發(fā)效率。

1.5.3.1.2.總體架構(gòu)

面向數(shù)據(jù)開發(fā)人員提供可視化數(shù)據(jù)開發(fā)IDE,實現(xiàn)實時流式數(shù)據(jù)

采集、實時計算及任務的監(jiān)控預警一體化作業(yè)。內(nèi)置實時數(shù)據(jù)采集、

實時數(shù)據(jù)計算雙引擎，支持對OracleLogMiner、MysqlBinLog等

常見數(shù)據(jù)庫日志及業(yè)務系統(tǒng)日志的實時采集，支持通過SQL/DAG等模

式對接入實時數(shù)據(jù)流進行可視化開發(fā)作業(yè)。同時提供圖形化的監(jiān)控預

警業(yè)務對實時數(shù)據(jù)開發(fā)全流程進行實時監(jiān)控預警。

1.5.3.1.3.場景特點

■在線開發(fā)

屏蔽底層復雜的分布式計算引擎，基于Web界面的開發(fā)平臺，提

高數(shù)據(jù)開發(fā)效率。

■廣泛的采集模式

集成Logstash、ogg-plugin等多款實時數(shù)據(jù)采集插件實現(xiàn)數(shù)據(jù)

庫日志、業(yè)務系統(tǒng)日志及物聯(lián)網(wǎng)網(wǎng)關(guān)數(shù)據(jù)的實時采集。

■多模式多流關(guān)聯(lián)計算

基于Flink源碼擴展，支持維表關(guān)聯(lián)、多流關(guān)聯(lián)。提供可視化、

FlinkSQL、Flink原生腳本三種實時計算模式，滿足數(shù)據(jù)開發(fā)人員不

同編碼習慣不同業(yè)務場景需要。

■監(jiān)控預警

基于運維監(jiān)控組件Prometheus封裝并深度優(yōu)化，構(gòu)建實時計算

全鏈路的實時任務監(jiān)控與告警，支持多告警渠道(郵件、消息、微信

等)消息傳達。

1.5.3.1.4.重點功能概述

(1)項目空間管理

支持對不同的組織、人員分配獨立的計算資源來實現(xiàn)安全隔離,

通過成員管理實現(xiàn)對角色權(quán)限的控制。支持對任務并行度及上傳文件

大小進行配置。

(2)實時采集

支持可視化配置通過數(shù)據(jù)庫日志方式實時采集MySQL等數(shù)據(jù)，并

將數(shù)據(jù)寫入kafka,能設置作業(yè)速率上限及作業(yè)并發(fā)數(shù)。

(3)實時計算

支持FlinkSQL創(chuàng)建實時計算任務。

(4)可視化計算任務配置

封裝常用算子，如數(shù)據(jù)源表，數(shù)據(jù)維表包括但不限于MySQL等，

數(shù)據(jù)處理節(jié)點如表連接、過濾、聚合、集合、字段轉(zhuǎn)換，結(jié)果表如MySQL、

ElasticSearch等，用戶只需要輕松拖拽節(jié)點便可實現(xiàn)實時數(shù)據(jù)處理。

(5)運維管理

支持按照時間維度查看運行狀態(tài)，可查看任務(流)數(shù)、失敗數(shù)、

運行中、已停止、待運行數(shù)等。

(6)預警監(jiān)控

支持監(jiān)控單個實時采集任務或?qū)崟r計算任務，并對異常進行告警,

告警方式包括但不限于郵件、系統(tǒng)消息、短信等。

(7)消息隊列管理

支持可視化界面創(chuàng)建topic,并對topic授權(quán)、管理等。支持連

接鑒權(quán)，安全性更高，用戶需要有指定topic的生產(chǎn)或者消費權(quán)限，

通過賬號、密碼方可連接。

(8)自定義函數(shù)

支持Flink原生函數(shù)，并內(nèi)置10多種常用的哈希函數(shù)、時間和

字符串處理函數(shù)等。

1.5.3.2.實時數(shù)據(jù)倉庫

1.5.3.2.1.系統(tǒng)架構(gòu)

具備優(yōu)秀的分析查詢性能，通過完全對等無共享(share-nothing)

的MPP架構(gòu)，能夠?qū)崿F(xiàn)SQL的并行處理；通過對數(shù)據(jù)的自動化分區(qū)

數(shù)據(jù)，可以實現(xiàn)數(shù)據(jù)的并行10;通過數(shù)據(jù)裝載工具，可以實現(xiàn)并行的

數(shù)據(jù)裝載。因此基于MPP規(guī)模的不斷擴展，能夠?qū)崿F(xiàn)近線性的性能提

升。

集群架構(gòu)如下圖所示：

每一個數(shù)據(jù)庫服務器實例作為一個執(zhí)行節(jié)點，簡稱EPo采購人

端可連接任意一個EP節(jié)點進行操作，所有EP對用戶來說都是對

等的。

每個EP只負責自身部分數(shù)據(jù)的讀寫，執(zhí)行計劃在所有EP并

行執(zhí)行，能充分利用各EP的計算能力及發(fā)揮各EP獨立存儲的優(yōu)

勢。數(shù)據(jù)只在必要時通過數(shù)據(jù)庫的高速郵件MAL系統(tǒng)在EP間傳

遞。當通信代價占整體執(zhí)行代價的比例較小時，更能體現(xiàn)大規(guī)模并行

處理的優(yōu)勢，隨著系統(tǒng)規(guī)模的擴大，并行支路越多，優(yōu)勢越明顯。

1.5.3.2.2.系統(tǒng)架構(gòu)先進性

本方案建設的數(shù)據(jù)倉庫采用完全對等無共享體系架構(gòu)，通過軟件

提升處理能力，各個節(jié)點完全對等，更進一步簡化了體系的實現(xiàn)，也

消除了系統(tǒng)可能存在的主節(jié)點瓶頸問題。各主流架構(gòu)特點比較如下。

1.5.3.2.3.復雜查詢支持

每個站點只負責自身部分數(shù)據(jù)的讀寫，執(zhí)行計劃是完全并行執(zhí)行

的，完全無I/O沖突，充分利用硬件資源，只是額外增加了數(shù)據(jù)在節(jié)

點間移動的通信時間，在高速局域網(wǎng)內(nèi)，通信時間大大縮短，更能體

現(xiàn)大規(guī)模并行處理的優(yōu)勢，隨著系統(tǒng)規(guī)模的擴大，并行支路越多，優(yōu)

勢越明顯。

用戶登錄任意一個節(jié)點,此時這個節(jié)點對于用戶來說就是主EP,

主EP接受用戶的SQL請求并生成并行執(zhí)行計劃，將此計劃打包分發(fā)

數(shù)據(jù)收集

數(shù)據(jù)分發(fā)

給各從EP并行執(zhí)行，并將所有EP的執(zhí)行結(jié)果匯總后返回給用戶。

圖：數(shù)據(jù)收集與分發(fā)過程主從EP示意圖

優(yōu)化器生成的是扁平的并行執(zhí)行計劃，僅比單節(jié)點的執(zhí)行計劃增

加了節(jié)點間通訊操作。各EP之間使用高速郵件系統(tǒng)形成網(wǎng)狀連接，

多條通信鏈路并行，并使用流式數(shù)據(jù)處理，能充分發(fā)揮以太網(wǎng)交換機

的性能。

扁平并行執(zhí)行計劃和高速郵件系統(tǒng)，能充分利用單節(jié)點的各種查

詢優(yōu)化技術(shù)，并在節(jié)點間高速傳遞計劃和中間執(zhí)行結(jié)果，提供了強大

的復雜查詢支持能力。

高

速

郵

件

系

統(tǒng)

持

詢支

雜查

圖：復

高可用

4.

3.2.

1.5.

能。

保護功

據(jù)鏡像

提供數(shù)

護，

數(shù)據(jù)守

置交叉

P配

每個E

方案

守護

數(shù)據(jù)

交叉

節(jié)點

圖：

系

整個

影響

不會

，也

故障