版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
目編號(hào):某市公共大數(shù)據(jù)運(yùn)營(yíng)服務(wù)項(xiàng)目實(shí)施技術(shù)方案目錄1 項(xiàng)目的需求理解 71.1 項(xiàng)目技術(shù)背景 71.2 項(xiàng)目總體需求 81.2.1 數(shù)據(jù)運(yùn)營(yíng)服務(wù)總體需求 81.2.2 項(xiàng)目考核及責(zé)罰要求 91.2.3 項(xiàng)目退出機(jī)制要求 101.3 項(xiàng)目技術(shù)需求 111.3.1 項(xiàng)目服務(wù)內(nèi)容范圍 111.3.2 數(shù)據(jù)治理和數(shù)據(jù)開放運(yùn)營(yíng)服務(wù)需求 121.3.3 數(shù)據(jù)安全管理運(yùn)營(yíng)服務(wù)要求 201.3.4 政務(wù)云管理運(yùn)營(yíng)服務(wù)需求 281.3.5 數(shù)據(jù)運(yùn)營(yíng)服務(wù)202X年重點(diǎn)工作需求 291.4 運(yùn)營(yíng)服務(wù)管理需求 311.4.1 運(yùn)營(yíng)服務(wù)要求 311.4.2 服務(wù)團(tuán)隊(duì)要求 331.4.3 管理經(jīng)費(fèi)要求 341.4.4 培訓(xùn)要求 342 項(xiàng)目服務(wù)技術(shù)方案 342.1 整體運(yùn)營(yíng)服務(wù)方案 342.1.1 服務(wù)目標(biāo) 342.1.2 服務(wù)工期 352.1.3 服務(wù)目錄 352.1.4 服務(wù)內(nèi)容 372.1.5 202X重點(diǎn)工作規(guī)劃 1072.2 運(yùn)營(yíng)服務(wù)管理辦法及措施 1092.2.1 運(yùn)營(yíng)服務(wù)管理 1092.2.2 服務(wù)實(shí)施管理 1122.2.3 服務(wù)工作管理 1152.2.4 服務(wù)廠商管理 1162.3 項(xiàng)目培訓(xùn)方案 1182.3.1 培訓(xùn)目標(biāo) 1182.3.2 培訓(xùn)對(duì)象 1192.3.3 培訓(xùn)形式 1202.3.4 培訓(xùn)計(jì)劃 1212.3.5 培訓(xùn)組織實(shí)施 1222.3.6 培訓(xùn)考核 1232.3.7 培訓(xùn)師資 1242.4 項(xiàng)目考核方案 1242.4.1 總體考核辦法 1242.4.2 項(xiàng)目考核及責(zé)罰方案 1252.5 驗(yàn)收標(biāo)準(zhǔn)方案 1262.5.1 系統(tǒng)驗(yàn)收流程 1262.5.2 提交技術(shù)文件 1262.5.3 驗(yàn)收合格條件 1272.5.4 驗(yàn)收方法 1272.6 管理經(jīng)費(fèi)方案 1282.6.1 經(jīng)費(fèi)預(yù)算管理 1282.6.2 服務(wù)計(jì)量管理 1282.6.3 服務(wù)計(jì)費(fèi)管理 1282.6.4 服務(wù)結(jié)算管理 1292.6.5 服務(wù)財(cái)務(wù)管理 1293 項(xiàng)目實(shí)施管理方案 1303.1 項(xiàng)目實(shí)施原則 1303.2 項(xiàng)目實(shí)施策略 1313.3 項(xiàng)目組織管理 1323.3.1 項(xiàng)目人力資源管理機(jī)制 1323.3.2 項(xiàng)目人員組織結(jié)構(gòu) 1333.3.3 機(jī)構(gòu)中人員構(gòu)成與職責(zé) 1333.4 項(xiàng)目服務(wù)團(tuán)隊(duì) 1363.4.1 服務(wù)團(tuán)隊(duì)配置 1363.4.2 團(tuán)隊(duì)組織架構(gòu) 1373.5 實(shí)施過(guò)程管理 1383.5.1 項(xiàng)目啟動(dòng)階段 1383.5.2 需求分析階段 1383.5.3 需求規(guī)格階段 1393.5.4 設(shè)計(jì)階段 1393.5.5 開發(fā)階段 1403.5.6 測(cè)試階段 1413.5.7 試運(yùn)行階段 1413.5.8 驗(yàn)收階段 1423.5.9 項(xiàng)目維護(hù)階段 1423.6 項(xiàng)目質(zhì)量保障 1423.6.1 質(zhì)量管理體系標(biāo)準(zhǔn) 1433.6.2 質(zhì)量控制過(guò)程 1433.6.3 質(zhì)量評(píng)定計(jì)劃 1433.6.4 質(zhì)量管理措施 1433.6.5 軟件質(zhì)量控制 1443.7 項(xiàng)目風(fēng)險(xiǎn)管理 1473.7.1 風(fēng)險(xiǎn)定義 1473.7.2 風(fēng)險(xiǎn)管理 1483.8 項(xiàng)目后勤保障 1513.9 項(xiàng)目文檔管理 1513.9.1 項(xiàng)目技術(shù)文檔 1513.9.2 項(xiàng)目管理文檔 1524 售后服務(wù)計(jì)劃 1534.1 技術(shù)服務(wù)方案 1534.1.1 項(xiàng)目規(guī)劃階段 1534.1.2 項(xiàng)目實(shí)施階段 1544.1.3 項(xiàng)目驗(yàn)收階段 1554.1.4 項(xiàng)目維護(hù)階段 1554.1.5 長(zhǎng)期技術(shù)支持 1554.2 售后服務(wù)方案 1564.2.1 維護(hù)工具配備 1564.2.2 服務(wù)管理體制 1564.2.3 售后服務(wù)方式 1584.2.4 服務(wù)響應(yīng)時(shí)間 1604.2.5 保修期內(nèi)服務(wù) 1604.2.6 保修期后服務(wù) 1614.3 應(yīng)急響應(yīng)措施 1614.3.1 應(yīng)急基本流程 1624.3.2 預(yù)防措施 1624.3.3 突發(fā)事件應(yīng)急策略 163
項(xiàng)目的需求理解項(xiàng)目技術(shù)背景依托以數(shù)據(jù)湖+市級(jí)數(shù)據(jù)庫(kù)為數(shù)據(jù)存儲(chǔ)架構(gòu)的市級(jí)大數(shù)據(jù)資源平臺(tái)。數(shù)據(jù)湖與市級(jí)數(shù)據(jù)庫(kù)依托于大數(shù)據(jù)支撐平臺(tái)建設(shè)。以政府購(gòu)買服務(wù)的方式,統(tǒng)一為各部門提供公共數(shù)據(jù)運(yùn)營(yíng)服務(wù)。1.市級(jí)數(shù)據(jù)湖市級(jí)數(shù)據(jù)湖是所有從外部數(shù)據(jù)源落地到招標(biāo)方的統(tǒng)一數(shù)據(jù)存儲(chǔ)空間。是屬于大數(shù)據(jù)資源平臺(tái)的采集模塊。市級(jí)數(shù)據(jù)湖基于政務(wù)云提供的云數(shù)據(jù)庫(kù)和云存儲(chǔ)服務(wù)進(jìn)行搭建(通常包括關(guān)系型數(shù)據(jù)庫(kù)、NoSQL數(shù)據(jù)庫(kù)、列數(shù)據(jù)庫(kù)、分布式文件存儲(chǔ)等),主要存放市級(jí)政府部門業(yè)務(wù)數(shù)據(jù)庫(kù)、未經(jīng)加工的原始業(yè)務(wù)數(shù)據(jù)庫(kù),支持存儲(chǔ)結(jié)構(gòu)化、非結(jié)構(gòu)化等多種類型的數(shù)據(jù)。通過(guò)市大數(shù)據(jù)資源平臺(tái)與市級(jí)各部門業(yè)務(wù)應(yīng)用系統(tǒng)、區(qū)級(jí)各部門或區(qū)數(shù)據(jù)管理部門的前置節(jié)點(diǎn)進(jìn)行交換。數(shù)據(jù)湖中的共享數(shù)據(jù)依據(jù)元數(shù)據(jù)進(jìn)行編目,并建立動(dòng)態(tài)更新的資源目錄。市級(jí)數(shù)據(jù)湖的數(shù)據(jù)存儲(chǔ)規(guī)模極其龐大,需要支持存儲(chǔ)擴(kuò)展和橫向、縱向遷移,直接用于分析的平均價(jià)值密度較低,通常需經(jīng)過(guò)預(yù)處理、集成后,形成高質(zhì)量的公共數(shù)據(jù)資源。2.市級(jí)數(shù)據(jù)庫(kù)市級(jí)數(shù)據(jù)庫(kù),用于存放經(jīng)過(guò)一系列清洗、轉(zhuǎn)換、加載、治理步驟后的高質(zhì)量的公共數(shù)據(jù)資源,其數(shù)據(jù)來(lái)源主要來(lái)自于市級(jí)數(shù)據(jù)湖。對(duì)于如一網(wǎng)通辦等特殊應(yīng)用,平臺(tái)支持各部門政務(wù)應(yīng)用系統(tǒng)與數(shù)據(jù)資源池的直接雙向交互,無(wú)需通過(guò)數(shù)據(jù)湖進(jìn)行中轉(zhuǎn),通過(guò)平臺(tái)的調(diào)度引擎可進(jìn)行交換鏈路的靈活設(shè)置。市級(jí)數(shù)據(jù)庫(kù)以面向不同數(shù)據(jù)應(yīng)用、行業(yè)領(lǐng)域及主題進(jìn)行劃分(如:綜合業(yè)務(wù)協(xié)同、公共基礎(chǔ)庫(kù)、公共主題庫(kù)、擴(kuò)展主題庫(kù)等),并為業(yè)務(wù)應(yīng)用和終端用戶提供業(yè)務(wù)對(duì)象訪問(wèn)、數(shù)據(jù)集訪問(wèn)、數(shù)據(jù)融合加工等數(shù)據(jù)類服務(wù),支撐業(yè)務(wù)協(xié)同、輔助決策、數(shù)據(jù)可視化、數(shù)據(jù)開放、數(shù)據(jù)建模分析等不同政務(wù)數(shù)據(jù)應(yīng)用場(chǎng)景。通過(guò)數(shù)據(jù)共享交換平臺(tái)提供的數(shù)據(jù)集成總線,對(duì)數(shù)據(jù)湖數(shù)據(jù)進(jìn)行批量離線處理或?qū)崟r(shí)處理,并將處理結(jié)果落地到數(shù)據(jù)資源池。數(shù)據(jù)資源池中的共享數(shù)據(jù)也需要依據(jù)元數(shù)據(jù)進(jìn)行編目,并建立動(dòng)態(tài)更新的資源目錄。依托大數(shù)據(jù)資源平臺(tái)所提供的工具對(duì)明細(xì)數(shù)據(jù)和匯總數(shù)據(jù)進(jìn)行存儲(chǔ)計(jì)算,計(jì)算結(jié)果可以使用分布式文件存儲(chǔ)或關(guān)系型數(shù)據(jù)庫(kù),用于應(yīng)用訪問(wèn)或直接展現(xiàn)。安全服務(wù):數(shù)據(jù)運(yùn)營(yíng)服務(wù)的實(shí)施需符合信息安全等級(jí)保護(hù)三級(jí)標(biāo)準(zhǔn)要求。運(yùn)行監(jiān)管要求:滿足用戶數(shù)據(jù)運(yùn)營(yíng)服務(wù)使用、管理和技術(shù)措施進(jìn)行監(jiān)管的需求,以保障用戶信息安全和持續(xù)地獲得數(shù)據(jù)服務(wù)。具體包括:確保合同規(guī)定的責(zé)任義務(wù)和相關(guān)政策規(guī)定、技術(shù)標(biāo)準(zhǔn)得到了有效實(shí)施;了解服務(wù)質(zhì)量是否達(dá)到合同的要求;確保發(fā)生重大變更時(shí)的用戶信息和業(yè)務(wù)安全;確保及時(shí)有效地響應(yīng)安全事件。項(xiàng)目總體需求數(shù)據(jù)運(yùn)營(yíng)服務(wù)總體需求數(shù)據(jù)運(yùn)營(yíng)服務(wù)的過(guò)程中涉及的所有數(shù)據(jù)的擁有權(quán)及使用權(quán)均屬于采購(gòu)人,未經(jīng)許可,投標(biāo)人無(wú)權(quán)對(duì)其進(jìn)行支配,所有與數(shù)據(jù)相關(guān)設(shè)備的維修、報(bào)廢等處理需經(jīng)采購(gòu)人同意,并在監(jiān)管下進(jìn)行。若發(fā)現(xiàn)投標(biāo)人未經(jīng)許可對(duì)數(shù)據(jù)進(jìn)行支配,采購(gòu)人將對(duì)投標(biāo)人采取懲罰措施并追究其法律責(zé)任。中標(biāo)人為服務(wù)本項(xiàng)目而采購(gòu)的場(chǎng)地、環(huán)境、鏈路等硬件資源及各類軟件資源,構(gòu)成專門為采購(gòu)人提供數(shù)據(jù)運(yùn)營(yíng)服務(wù)的設(shè)施資源,其擁有權(quán)屬于中標(biāo)人,使用權(quán)屬于采購(gòu)人。投標(biāo)人嚴(yán)格執(zhí)行國(guó)家、地方、行業(yè)各項(xiàng)有關(guān)本項(xiàng)目業(yè)務(wù)管理和安全作業(yè)的法律、法規(guī)和制度,積極主動(dòng)加強(qiáng)和服務(wù)業(yè)務(wù)及安全等有關(guān)的管理工作,并按規(guī)定承擔(dān)相應(yīng)的費(fèi)用。投標(biāo)人因違反規(guī)定等原因造成的一切損失和責(zé)任由投標(biāo)人承擔(dān)。投標(biāo)人在中標(biāo)后履行數(shù)據(jù)運(yùn)營(yíng)服務(wù)的過(guò)程中,需遵守《H市數(shù)據(jù)運(yùn)營(yíng)服務(wù)管理辦法(試行)》、《H市數(shù)據(jù)運(yùn)營(yíng)服務(wù)考核評(píng)估辦法(試行)》等的管理要求,若違反文件相關(guān)規(guī)定,按照合同違約處理。投標(biāo)人在服務(wù)期內(nèi)每年通過(guò)簽署補(bǔ)充協(xié)議對(duì)當(dāng)年度的數(shù)據(jù)運(yùn)營(yíng)服務(wù)績(jī)效目標(biāo)、SLA服務(wù)要求、用戶滿意率目標(biāo)以及服務(wù)目錄細(xì)則予以確認(rèn)和約定。投標(biāo)人確認(rèn)的項(xiàng)目運(yùn)營(yíng)服務(wù)團(tuán)隊(duì)人員及數(shù)量,與投標(biāo)文件承諾一致,未經(jīng)采購(gòu)人書面批準(zhǔn)不得隨意調(diào)換或撤離,若自行更換或撤離,按照合同違約處理。投標(biāo)人明確數(shù)據(jù)運(yùn)營(yíng)安全管理方案,承擔(dān)運(yùn)營(yíng)過(guò)程中環(huán)境安全、人員安全、信息安全、數(shù)據(jù)合規(guī)使用等相關(guān)各類安全責(zé)任。投標(biāo)人按照采購(gòu)人提出相關(guān)要求提供與數(shù)據(jù)運(yùn)營(yíng)服務(wù)相關(guān)管理制度,相關(guān)內(nèi)容需得到采購(gòu)人的認(rèn)可。投標(biāo)人保證本項(xiàng)目所涉及的軟件授權(quán)足量合規(guī),滿足知識(shí)產(chǎn)權(quán)方面的有關(guān)規(guī)定和要求。項(xiàng)目考核及責(zé)罰要求采購(gòu)人會(huì)同投標(biāo)人明確考核實(shí)施細(xì)則和評(píng)分要素,并在補(bǔ)充協(xié)議中予以明確,考核內(nèi)容包含但不限于質(zhì)量考評(píng)、安全考評(píng)、資金保障考評(píng)、制度保障考評(píng)和后勤保障考評(píng)等。依據(jù)《大數(shù)據(jù)中心數(shù)據(jù)運(yùn)營(yíng)服務(wù)考核評(píng)估方法(試行)》進(jìn)行評(píng)分,考核總體得分=服務(wù)質(zhì)量評(píng)分*55%(暫定)+服務(wù)使用滿意率評(píng)分*45%(暫定)。數(shù)據(jù)運(yùn)營(yíng)服務(wù)考核處罰比例總體得分處罰說(shuō)明<60分向中標(biāo)人扣除考核期內(nèi)有效的所有服務(wù)費(fèi)總額的15%≥60分,<80分向中標(biāo)人扣除考核期內(nèi)有效的所有服務(wù)費(fèi)總額的10%≥80分,<90分向中標(biāo)人扣除考核期內(nèi)有效的所有服務(wù)費(fèi)總額的5%投標(biāo)人履行數(shù)據(jù)運(yùn)營(yíng)服務(wù)過(guò)程中出現(xiàn)重大事故時(shí),由第三方界定責(zé)任邊界和嚴(yán)重程度,采購(gòu)人將依據(jù)問(wèn)題嚴(yán)重程度對(duì)投標(biāo)人給予罰款、中止合同或?qū)⒃撏稑?biāo)人報(bào)財(cái)政部門備案。數(shù)據(jù)運(yùn)營(yíng)服務(wù)重大事故責(zé)罰序號(hào)問(wèn)題描述罰款金額1因數(shù)據(jù)運(yùn)營(yíng)人為失誤導(dǎo)致數(shù)據(jù)服務(wù)中斷10萬(wàn)元2依據(jù)本招標(biāo)要求未能履行具體條款20萬(wàn)元3因數(shù)據(jù)運(yùn)營(yíng)的責(zé)任事故導(dǎo)致數(shù)據(jù)服務(wù)中斷20萬(wàn)元4因數(shù)據(jù)運(yùn)營(yíng)的責(zé)任事故導(dǎo)致數(shù)據(jù)丟失50萬(wàn)元5因數(shù)據(jù)運(yùn)營(yíng)的責(zé)任事故導(dǎo)致數(shù)據(jù)泄露50萬(wàn)元6因數(shù)據(jù)運(yùn)營(yíng)重大責(zé)任事故導(dǎo)致數(shù)據(jù)無(wú)法使用100萬(wàn)元★投標(biāo)人應(yīng)響應(yīng)本項(xiàng)要求并提供無(wú)條件響應(yīng)承諾。項(xiàng)目退出機(jī)制要求發(fā)生以下情況,啟動(dòng)退出機(jī)制:服務(wù)期內(nèi),如中標(biāo)方提出退出要求,需至少提前6個(gè)月向招標(biāo)方提出退出申請(qǐng),經(jīng)批準(zhǔn)后需提供6個(gè)月的延續(xù)服務(wù)。服務(wù)期滿后,若雙方不再續(xù)約,中標(biāo)方無(wú)條件免費(fèi)配合各方完成服務(wù)交接工作,服務(wù)交接期一般延續(xù)6個(gè)月。服務(wù)期內(nèi),若由于中標(biāo)方服務(wù)能力不能滿足約定要求,例如:考核分?jǐn)?shù)<60分,招標(biāo)方有權(quán)終止合同,責(zé)令其退出,并由中標(biāo)方向招標(biāo)方支付賠償費(fèi)用,相關(guān)賠償費(fèi)用雙方另行協(xié)商。退出機(jī)制啟動(dòng)后,中標(biāo)方無(wú)條件協(xié)助招標(biāo)方完成大數(shù)據(jù)運(yùn)營(yíng)相關(guān)系統(tǒng)的遷移和退出。從系統(tǒng)遷移出的數(shù)據(jù),包括但不限于招標(biāo)方移交給中標(biāo)方的數(shù)據(jù)和資料,數(shù)據(jù)運(yùn)營(yíng)系統(tǒng)運(yùn)行期間產(chǎn)生、收集的數(shù)據(jù)以及相關(guān)文檔資料等。中標(biāo)方不得自行保留數(shù)據(jù)運(yùn)營(yíng)期間產(chǎn)生、收集的數(shù)據(jù)及相關(guān)文檔資料,并不能以商業(yè)市場(chǎng)的技術(shù)手段恢復(fù)相關(guān)數(shù)據(jù)和文檔資料。項(xiàng)目技術(shù)需求項(xiàng)目服務(wù)內(nèi)容范圍本項(xiàng)目數(shù)據(jù)運(yùn)營(yíng)服務(wù)內(nèi)容主要包括以下服務(wù)目錄:服務(wù)類別服務(wù)子類服務(wù)項(xiàng)計(jì)量單位數(shù)據(jù)治理和數(shù)據(jù)開放運(yùn)營(yíng)服務(wù)數(shù)據(jù)治理服務(wù)數(shù)據(jù)采集接入萬(wàn)條數(shù)據(jù)抽取運(yùn)維萬(wàn)條數(shù)據(jù)標(biāo)注服務(wù)萬(wàn)條作業(yè)調(diào)度運(yùn)維個(gè)數(shù)據(jù)質(zhì)量檢查及異常處置萬(wàn)條數(shù)據(jù)開放與應(yīng)用數(shù)據(jù)開放服務(wù)個(gè)數(shù)據(jù)開放運(yùn)營(yíng)個(gè)數(shù)據(jù)分析應(yīng)用服務(wù)數(shù)據(jù)共享服務(wù)個(gè)數(shù)據(jù)融合加工個(gè)應(yīng)用建模服務(wù)個(gè)可視化展現(xiàn)服務(wù)頁(yè)面數(shù)數(shù)據(jù)安全服務(wù)市政務(wù)云安全監(jiān)控服務(wù)云基礎(chǔ)安全監(jiān)測(cè)服務(wù)臺(tái)云基礎(chǔ)安全管理服務(wù)臺(tái)市政務(wù)云上應(yīng)用安全監(jiān)控服務(wù)政務(wù)云上應(yīng)用安全監(jiān)測(cè)分析服務(wù)臺(tái)政務(wù)云上應(yīng)用安全檢查評(píng)估服務(wù)臺(tái)政務(wù)云上應(yīng)用安全滲透測(cè)試服務(wù)臺(tái)政務(wù)云上應(yīng)用安全基礎(chǔ)管理服務(wù)臺(tái)威脅情報(bào)服務(wù)臺(tái)政務(wù)云上應(yīng)用安全重保管理服務(wù)臺(tái)公共數(shù)據(jù)安全服務(wù)數(shù)據(jù)安全評(píng)估服務(wù)萬(wàn)條數(shù)據(jù)安全審核服務(wù)萬(wàn)條數(shù)據(jù)安全控制服務(wù)萬(wàn)條數(shù)據(jù)歷史歸檔及銷毀服務(wù)萬(wàn)條政務(wù)云運(yùn)營(yíng)管理服務(wù)云納管服務(wù)分中心云納管個(gè)區(qū)云納管個(gè)數(shù)據(jù)治理和數(shù)據(jù)開放運(yùn)營(yíng)服務(wù)建設(shè)內(nèi)容主要包括數(shù)據(jù)治理服務(wù)、數(shù)據(jù)開放應(yīng)用和數(shù)據(jù)分析應(yīng)用服務(wù)三大內(nèi)容,實(shí)現(xiàn)公共數(shù)據(jù)采集與梳理、數(shù)據(jù)資源編目與管理、數(shù)據(jù)質(zhì)量監(jiān)管與優(yōu)化、基礎(chǔ)庫(kù)升級(jí)優(yōu)化與融合加工、數(shù)據(jù)分析應(yīng)用、數(shù)據(jù)共享服務(wù)發(fā)布、數(shù)據(jù)開放服務(wù)監(jiān)管與支撐、業(yè)務(wù)制度規(guī)范制定與完善等工作,通過(guò)構(gòu)建完善的數(shù)據(jù)運(yùn)營(yíng)服務(wù)體系,有效支撐數(shù)據(jù)資源共享與開發(fā)利用,充分發(fā)揮數(shù)據(jù)價(jià)值。數(shù)據(jù)安全管理運(yùn)營(yíng)服務(wù)需建立數(shù)據(jù)安全管理運(yùn)營(yíng)服務(wù)體系和長(zhǎng)效工作機(jī)制,開展持續(xù)的安全運(yùn)營(yíng)服務(wù),加強(qiáng)對(duì)重要信息系統(tǒng)的安全保障,憑借云資源連續(xù)性服務(wù)等質(zhì)量管理、滲透測(cè)試、第三方風(fēng)險(xiǎn)評(píng)估、重保和應(yīng)急響應(yīng)、威脅情報(bào)、數(shù)據(jù)安全審計(jì)及合規(guī)性審查等服務(wù)保障數(shù)據(jù)的安全運(yùn)營(yíng)能力,實(shí)現(xiàn)全網(wǎng)信息安全。政務(wù)云管理運(yùn)營(yíng)服務(wù)為提高全市電子政務(wù)云的管理效能,優(yōu)化其運(yùn)營(yíng)監(jiān)控服務(wù)體系,并建立長(zhǎng)效管理機(jī)制,實(shí)現(xiàn)對(duì)市云分中心以及區(qū)云的常規(guī)監(jiān)測(cè)管理。數(shù)據(jù)治理和數(shù)據(jù)開放運(yùn)營(yíng)服務(wù)需求建設(shè)內(nèi)容主要包括數(shù)據(jù)治理服務(wù)、數(shù)據(jù)開放與應(yīng)用、數(shù)據(jù)分析應(yīng)用服務(wù)三大類服務(wù)類別,實(shí)現(xiàn)推進(jìn)公共數(shù)據(jù)梳理與歸集、數(shù)據(jù)資源管理與編目、數(shù)據(jù)質(zhì)量監(jiān)管與優(yōu)化、基礎(chǔ)數(shù)據(jù)庫(kù)運(yùn)營(yíng)、主題庫(kù)和專題庫(kù)運(yùn)營(yíng)、數(shù)據(jù)分析服務(wù)、數(shù)據(jù)共享開放服務(wù)接口發(fā)布、數(shù)據(jù)開放服務(wù)運(yùn)營(yíng)監(jiān)管與支撐、業(yè)務(wù)制度規(guī)范制定與完善等工作,通過(guò)構(gòu)建完善的數(shù)據(jù)運(yùn)營(yíng)服務(wù)體系,有效支撐數(shù)據(jù)資源共享與利用全生命周期管理,充分發(fā)揮公共數(shù)據(jù)價(jià)值。數(shù)據(jù)治理服務(wù)需求負(fù)責(zé)市級(jí)數(shù)據(jù)湖、市級(jí)數(shù)據(jù)庫(kù)中各類基礎(chǔ)庫(kù)、主題庫(kù)、專題庫(kù)的數(shù)據(jù)資源治理工作,按照SLA標(biāo)準(zhǔn)提供數(shù)據(jù)共享服務(wù)、數(shù)據(jù)開放與應(yīng)用,以及數(shù)據(jù)分析應(yīng)用的支撐服務(wù)。梳理對(duì)象與范圍覆蓋廣,內(nèi)容豐富,數(shù)據(jù)治理工作涉及數(shù)據(jù)采集接入、數(shù)據(jù)抽取運(yùn)維、數(shù)據(jù)標(biāo)注、作業(yè)調(diào)度運(yùn)維、數(shù)據(jù)質(zhì)量檢查及異常處置等內(nèi)容。主要內(nèi)容如下:數(shù)據(jù)采集接入數(shù)據(jù)采集接入是指為了保證市大數(shù)據(jù)中心自有業(yè)務(wù)(如一網(wǎng)通辦,一網(wǎng)統(tǒng)管等)的數(shù)據(jù)接入工作,保障接入數(shù)據(jù)的實(shí)時(shí)性、有效性和完整性。數(shù)據(jù)采集接入工作分為數(shù)據(jù)編目和數(shù)據(jù)接入兩部分。數(shù)據(jù)編目首先要對(duì)需要采集接入的數(shù)據(jù)進(jìn)行業(yè)務(wù)理解和數(shù)據(jù)理解,然后再按照編目規(guī)范標(biāo)準(zhǔn)在編目系統(tǒng)中進(jìn)行編目。數(shù)據(jù)接入工作包括了從協(xié)議適配,接口開發(fā),數(shù)據(jù)清洗,資源掛載等一系列將數(shù)據(jù)通過(guò)ETL匯集到大數(shù)據(jù)中心數(shù)據(jù)湖的過(guò)程。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括但不限于:輸出物輸出物標(biāo)準(zhǔn)數(shù)據(jù)資源目錄目錄符合編目規(guī)范、符合系統(tǒng)校驗(yàn)規(guī)則;評(píng)審?fù)ㄟ^(guò)并附評(píng)審報(bào)告。數(shù)據(jù)資源編目變更記錄附相關(guān)記錄材料。采集數(shù)據(jù)日志日志包含但不限于以下字段:庫(kù)表位置、運(yùn)行狀態(tài)、實(shí)際數(shù)量等。數(shù)據(jù)抽取運(yùn)維數(shù)據(jù)抽取運(yùn)維是指日常數(shù)據(jù)抽取任務(wù)維護(hù),保障各信息系統(tǒng)數(shù)據(jù)及時(shí)準(zhǔn)確地匯聚,對(duì)于問(wèn)題抽取任務(wù)的進(jìn)行處置調(diào)整。該項(xiàng)工作的進(jìn)行按照應(yīng)用需求進(jìn)行集中統(tǒng)一管理,并根據(jù)抽取數(shù)據(jù)對(duì)象的不同數(shù)據(jù)屬性、不同業(yè)務(wù)領(lǐng)域、不同授權(quán)場(chǎng)景抽從源數(shù)據(jù)庫(kù)取數(shù)據(jù)到指定目標(biāo)庫(kù)中,并完成數(shù)據(jù)清洗加工等工作。數(shù)據(jù)抽取任務(wù)定時(shí)運(yùn)行,保障數(shù)據(jù)準(zhǔn)確無(wú)誤進(jìn)去數(shù)據(jù)湖中,能夠?yàn)楹罄m(xù)數(shù)據(jù)應(yīng)用分析、主題庫(kù)建設(shè)和數(shù)據(jù)共享環(huán)節(jié)提供數(shù)據(jù)支撐。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括但不限于:輸出物輸出物標(biāo)準(zhǔn)抽取流程設(shè)計(jì)符合數(shù)據(jù)運(yùn)營(yíng)工作實(shí)際需求,符合數(shù)據(jù)抽取相關(guān)規(guī)范,并評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。抽取流程變更記錄附相關(guān)記錄材料。優(yōu)化分析報(bào)告(如有)符合優(yōu)化分析報(bào)告模板,附相關(guān)記錄材料。抽取數(shù)據(jù)日志日志包含但不限于以下信息:庫(kù)表位置、運(yùn)行狀態(tài)、實(shí)際數(shù)量等。月總結(jié)報(bào)告月匯總報(bào)告內(nèi)容至少包含下述績(jī)效指標(biāo):及時(shí)率=要求的時(shí)間內(nèi)抽取次數(shù)/計(jì)劃抽取次數(shù)、準(zhǔn)確率=入湖數(shù)據(jù)量/源頭數(shù)據(jù)量評(píng)審?fù)ㄟ^(guò),附相關(guān)記錄材料。數(shù)據(jù)標(biāo)注服務(wù)數(shù)據(jù)標(biāo)準(zhǔn)服務(wù)包括對(duì)結(jié)構(gòu)化數(shù)據(jù)、文本數(shù)據(jù)、音頻數(shù)據(jù)、視頻數(shù)據(jù)、流媒體等格式進(jìn)行內(nèi)容釋義,并對(duì)內(nèi)容進(jìn)行分級(jí)分類管理。根據(jù)已定義內(nèi)容分級(jí)分類標(biāo)準(zhǔn)、數(shù)據(jù)標(biāo)識(shí)的需求場(chǎng)景、需要標(biāo)識(shí)的數(shù)據(jù)業(yè)務(wù)分類、需要標(biāo)識(shí)的數(shù)據(jù)安全分類、需標(biāo)注的數(shù)據(jù)范圍,以挖掘數(shù)據(jù)資產(chǎn)價(jià)值,提升數(shù)據(jù)資產(chǎn)復(fù)用性和數(shù)據(jù)管理精細(xì)化程度,為服務(wù)目標(biāo)進(jìn)行。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括但不限于:輸出物輸出物標(biāo)準(zhǔn)數(shù)據(jù)標(biāo)注規(guī)則評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。數(shù)據(jù)標(biāo)注日志/記錄日志包含但不限于以下字段,含標(biāo)注內(nèi)容、標(biāo)注數(shù)量等。作業(yè)調(diào)度運(yùn)維作業(yè)調(diào)度運(yùn)維服務(wù)是指為了能夠滿足市大數(shù)據(jù)中心及各委辦局對(duì)于數(shù)據(jù)及時(shí)性及穩(wěn)定性的要求,通過(guò)作業(yè)調(diào)度工具對(duì)日常數(shù)據(jù)加工、數(shù)據(jù)開放作業(yè)、分發(fā)作業(yè)的調(diào)度管理進(jìn)行監(jiān)控,對(duì)中斷,失敗,卡死,執(zhí)行時(shí)間過(guò)長(zhǎng)的作業(yè)進(jìn)行問(wèn)題分析、定位、處理和記錄。并通過(guò)事后的分析,明確問(wèn)題緣由,及時(shí)修復(fù),以便后續(xù)能夠避免同類問(wèn)題發(fā)生的一系列技術(shù)服務(wù)工作。其工作內(nèi)容包含但不限于:日常數(shù)據(jù)加工、開放類任務(wù)調(diào),分發(fā)作業(yè)的調(diào)度管理,檢查是否及時(shí)完成,對(duì)于中斷作業(yè)進(jìn)行處置。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括但不限于:輸出物輸出物標(biāo)準(zhǔn)作業(yè)監(jiān)控?cái)?shù)據(jù)匯總報(bào)告(含異常作業(yè)分析)作業(yè)監(jiān)控?cái)?shù)據(jù)匯總報(bào)告,包含但不限于作業(yè)運(yùn)行情況、作業(yè)異常分析等,并評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。月總結(jié)報(bào)告符合運(yùn)維報(bào)告模板,并包含以下績(jī)效指標(biāo):作業(yè)規(guī)模數(shù)據(jù)及變化記錄(作業(yè)映射到目錄數(shù))、作業(yè)可用率=(月實(shí)際及時(shí)完成作業(yè)量/每月計(jì)劃執(zhí)行作業(yè)量)附相關(guān)記錄材料。數(shù)據(jù)質(zhì)量檢查及異常處置數(shù)據(jù)質(zhì)量檢查及異常處置是指為了能夠滿足市大數(shù)據(jù)中心及各委辦局對(duì)于數(shù)據(jù)正確性及合理性的要求,依照數(shù)據(jù)稽核需求,設(shè)計(jì)稽核規(guī)則,通過(guò)稽核規(guī)則對(duì)日常數(shù)據(jù)質(zhì)量的規(guī)范性,合理性,完整性,準(zhǔn)確性等進(jìn)行處理、檢查、定位、修復(fù)和記錄,并通過(guò)事后的分析,明確問(wèn)題緣由,及時(shí)修復(fù),生成對(duì)應(yīng)綜合質(zhì)量報(bào)告,以便業(yè)務(wù)部門能夠正確,高效的應(yīng)用數(shù)據(jù)及分析的一系列過(guò)程。數(shù)據(jù)質(zhì)量檢查及異常處置的目標(biāo)是保證數(shù)據(jù)的準(zhǔn)確性,需要根據(jù)數(shù)據(jù)特定的內(nèi)涵和外延,基于不用場(chǎng)景的不同使用要求進(jìn)行質(zhì)量檢查、校驗(yàn),并對(duì)異常數(shù)據(jù)進(jìn)行反饋及處置。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括但不限于:輸出物輸出物標(biāo)準(zhǔn)質(zhì)量規(guī)則設(shè)計(jì)及變更記錄符合數(shù)據(jù)運(yùn)營(yíng)工作實(shí)際需求,符合數(shù)據(jù)標(biāo)準(zhǔn)和公共數(shù)據(jù)模型設(shè)計(jì)規(guī)范,并評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。數(shù)據(jù)質(zhì)量檢查日志日志包括但不限于以下字段:庫(kù)表名稱、檢查規(guī)則、實(shí)際檢測(cè)數(shù)量、異常數(shù)據(jù)量等。異常數(shù)據(jù)清單異常數(shù)據(jù)清單,包含數(shù)據(jù)信息和判定異常原因,附相關(guān)記錄材料。數(shù)據(jù)質(zhì)量報(bào)告符合數(shù)據(jù)質(zhì)量報(bào)告模板,并評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。綜合數(shù)據(jù)質(zhì)量評(píng)價(jià)報(bào)告符合綜合質(zhì)量檢查評(píng)價(jià)報(bào)告模板,附相關(guān)記錄材料。異常數(shù)據(jù)修復(fù)方案(如有)符合方案模板要求,附相關(guān)記錄材料。異常數(shù)據(jù)處置及修復(fù)測(cè)試報(bào)告(如有)測(cè)試報(bào)告,二次驗(yàn)證通過(guò)后的記錄材料。數(shù)據(jù)開放與應(yīng)用需求推進(jìn)數(shù)據(jù)開放應(yīng)用,開通數(shù)據(jù)對(duì)外開放的渠道,推動(dòng)委辦局各自業(yè)務(wù)應(yīng)用的發(fā)展。包括數(shù)據(jù)開放服務(wù)、數(shù)據(jù)開放運(yùn)營(yíng)工作。數(shù)據(jù)開放服務(wù)數(shù)據(jù)共享開放是指為促進(jìn)公共數(shù)據(jù)共享和開放,通過(guò)需求調(diào)研,接口開發(fā),接口聯(lián)調(diào)等過(guò)程最終完成各個(gè)政府單位和事業(yè)單位之間信息共享,與民生緊密相關(guān)、社會(huì)迫切需要、商業(yè)增值潛力顯著的公共數(shù)據(jù)向社會(huì)開放的一系列服務(wù)工作。數(shù)據(jù)共享開放工作需要支撐不同的數(shù)據(jù)開放業(yè)務(wù)場(chǎng)景、服務(wù)類型達(dá)。服務(wù)接口文檔完整、有調(diào)用示例,經(jīng)過(guò)測(cè)試注冊(cè)到資源交換平臺(tái)發(fā)布至資源目錄。需求方通過(guò)接口能夠及時(shí)進(jìn)行數(shù)據(jù)查詢,提升數(shù)據(jù)利用效率和能力。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括但不限于:輸出物輸出物標(biāo)準(zhǔn)數(shù)據(jù)模型設(shè)計(jì)評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。API接口列表符合業(yè)務(wù)需求和性能要求,并評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。接口測(cè)試報(bào)告測(cè)試報(bào)告需包括參數(shù)名稱、類型、取值范圍,附相關(guān)記錄材料。作業(yè)上線記錄作業(yè)上線記錄,評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。數(shù)據(jù)開放運(yùn)營(yíng)數(shù)據(jù)開放運(yùn)營(yíng)服務(wù)是指在數(shù)據(jù)開放門戶網(wǎng)站運(yùn)行過(guò)程中產(chǎn)生的一系列服務(wù)工作,包括:數(shù)據(jù)開放門戶內(nèi)容維護(hù),數(shù)據(jù)開放運(yùn)營(yíng)活動(dòng)策劃,運(yùn)營(yíng)數(shù)據(jù)統(tǒng)計(jì)分析,需求審核,咨詢解答,報(bào)障處理等服務(wù)內(nèi)容,旨在通過(guò)對(duì)用戶使用數(shù)據(jù)開放的全流程提供服務(wù),提升用戶對(duì)數(shù)據(jù)開放平臺(tái)的使用體驗(yàn),策劃數(shù)據(jù)開放平臺(tái)推廣方案,促進(jìn)數(shù)據(jù)開放平臺(tái)良性發(fā)展。數(shù)據(jù)開放運(yùn)營(yíng)的目標(biāo)是使得數(shù)據(jù)利用主體根據(jù)數(shù)據(jù)開放平臺(tái)的資源目錄,提出數(shù)據(jù)資源需求,通過(guò)流程服務(wù)人員的服務(wù),使得數(shù)據(jù)利用主體獲取資源。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括但不限于:輸出物輸出物標(biāo)準(zhǔn)內(nèi)容發(fā)布記錄符合內(nèi)容發(fā)布記錄模板,評(píng)審?fù)ㄟ^(guò),并附評(píng)審報(bào)告。運(yùn)營(yíng)策劃方案(如有)符合數(shù)據(jù)運(yùn)營(yíng)需求附相關(guān)記錄材料。運(yùn)營(yíng)統(tǒng)計(jì)報(bào)告包含運(yùn)營(yíng)數(shù)據(jù)統(tǒng)計(jì)相關(guān)數(shù)據(jù),附相關(guān)記錄材料。問(wèn)題回復(fù)記錄符合問(wèn)題回復(fù)記錄模板,并包括回復(fù)數(shù)量,回復(fù)及時(shí)率,用戶滿意度,附相關(guān)記錄材料。知識(shí)庫(kù)補(bǔ)充記錄符合知識(shí)庫(kù)補(bǔ)充記錄模板,評(píng)審?fù)ㄟ^(guò),并附評(píng)審報(bào)告需求審核記錄包含需求審核數(shù)量及需求審核結(jié)果,評(píng)審?fù)ㄟ^(guò),并附評(píng)審報(bào)告數(shù)據(jù)分析應(yīng)用服務(wù)需求推進(jìn)數(shù)據(jù)分析應(yīng)用,挖掘數(shù)據(jù)內(nèi)在價(jià)值。包括數(shù)據(jù)共享服務(wù)、數(shù)據(jù)融合加工、應(yīng)用建模服務(wù)和可視化展現(xiàn)服務(wù)。數(shù)據(jù)共享服務(wù)數(shù)據(jù)共享服務(wù)是以促進(jìn)公共數(shù)據(jù)共享和交換為目標(biāo),根據(jù)不同用戶角色、使用場(chǎng)景的需求滿足不同SLA的數(shù)據(jù)共享需求,完善數(shù)據(jù)交換機(jī)制的服務(wù)。其服務(wù)內(nèi)容至少包括:需求調(diào)研,接口開發(fā),接口聯(lián)調(diào)等過(guò)程形成API接口、庫(kù)表交換、文件訂閱等。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括但不限于:輸出物輸出物標(biāo)準(zhǔn)數(shù)據(jù)模型設(shè)計(jì)符合數(shù)據(jù)運(yùn)營(yíng)工作實(shí)際需求,符合數(shù)據(jù)標(biāo)準(zhǔn)和公共數(shù)據(jù)模型設(shè)計(jì)規(guī)范,評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。API接口列表符合業(yè)務(wù)需求和性能要求,并評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。接口測(cè)試報(bào)告測(cè)試報(bào)告需包括參數(shù)名稱、類型、取值范圍附相關(guān)記錄材料。作業(yè)上線記錄作業(yè)上線記錄,評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。數(shù)據(jù)融合加工數(shù)據(jù)融合加工是按需通過(guò)綜合運(yùn)營(yíng)指標(biāo)、報(bào)表、多維分析、即席查詢等統(tǒng)計(jì)手段,對(duì)跨域跨部門的數(shù)據(jù)進(jìn)行匯總分析跨層級(jí)、跨區(qū)域、跨部門、跨領(lǐng)域數(shù)據(jù)的融合加工,包括數(shù)據(jù)標(biāo)準(zhǔn)化、轉(zhuǎn)譯等服務(wù)工作。通過(guò)數(shù)據(jù)融合加工服務(wù)需要能促進(jìn)對(duì)數(shù)據(jù)指標(biāo)的提煉,對(duì)實(shí)際的數(shù)據(jù)融合的數(shù)據(jù)價(jià)值挖掘產(chǎn)生積極影響。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括但不限于:輸出物輸出物標(biāo)準(zhǔn)需求文檔符合需求文檔模板,并評(píng)審?fù)ㄟ^(guò)。設(shè)計(jì)文檔(含指標(biāo)設(shè)計(jì))符合數(shù)據(jù)運(yùn)營(yíng)工作實(shí)際需求,符合數(shù)據(jù)標(biāo)準(zhǔn)和公共數(shù)據(jù)模型設(shè)計(jì)規(guī)范,并評(píng)審?fù)ㄟ^(guò)。應(yīng)用建模服務(wù)應(yīng)用建模是指對(duì)不同的業(yè)務(wù)場(chǎng)景、分析目標(biāo)、觀測(cè)目的等各類需求,按需通過(guò)數(shù)據(jù)挖掘、算法建模、人工智能等手段對(duì)跨域跨部門的數(shù)據(jù)進(jìn)行匯總分析,并提供分析報(bào)告或行動(dòng)建議的一系列過(guò)程。其服務(wù)步驟至少包括對(duì)不同業(yè)務(wù)問(wèn)題進(jìn)行數(shù)學(xué)模型的建立,包括參數(shù)調(diào)整、測(cè)試集驗(yàn)證等。通過(guò)應(yīng)用建模服務(wù)需要能促進(jìn)對(duì)業(yè)務(wù)分析判斷,對(duì)實(shí)際的業(yè)務(wù)服務(wù)產(chǎn)生積極影響,通過(guò)準(zhǔn)確的數(shù)據(jù)分析能夠更好的輔助業(yè)務(wù)決策。同時(shí),應(yīng)具有一定的可跟蹤和可固化的服務(wù)需求。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括:輸出物輸出物標(biāo)準(zhǔn)需求文檔符合需求文檔模板,評(píng)審?fù)ㄟ^(guò),附評(píng)審文檔。設(shè)計(jì)文檔(含指標(biāo)設(shè)計(jì))符合數(shù)據(jù)運(yùn)營(yíng)工作實(shí)際需求,符合數(shù)據(jù)標(biāo)準(zhǔn)和公共數(shù)據(jù)模型設(shè)計(jì)規(guī)范,評(píng)審?fù)ㄟ^(guò),附評(píng)審文檔。模型驗(yàn)證報(bào)告符合數(shù)據(jù)運(yùn)營(yíng)工作實(shí)際需求,符合模型驗(yàn)證基本要求,并評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。分析報(bào)告(如有)符合分析報(bào)告模板,評(píng)審?fù)ㄟ^(guò),附評(píng)審文檔。可視化展現(xiàn)服務(wù)可視化展現(xiàn)服務(wù)主要是圍繞公共數(shù)據(jù)治理及相關(guān)應(yīng)用需求,借助圖形化手段更加直觀、清晰、全面地展現(xiàn)數(shù)據(jù)治理各環(huán)節(jié)的工作方法和工作手段,同時(shí)完成對(duì)外展示的服務(wù)支撐。數(shù)據(jù)可視化展現(xiàn)的服務(wù),包括但不限于圖表、數(shù)據(jù)、APP、小程序、PC端、大屏等服務(wù)形式。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括:輸出物輸出物標(biāo)準(zhǔn)需求說(shuō)明書需求說(shuō)明書符合模板要求,評(píng)審?fù)ㄟ^(guò),并附評(píng)審報(bào)告。原型設(shè)計(jì)圖(含高保真原型)包括度量頁(yè)面數(shù)量,評(píng)審?fù)ㄟ^(guò),并附評(píng)審報(bào)告。數(shù)據(jù)指標(biāo)設(shè)計(jì)文檔(可選)符合指標(biāo)設(shè)計(jì)文檔模板,評(píng)審?fù)ㄟ^(guò),并附評(píng)審報(bào)告。數(shù)據(jù)庫(kù)設(shè)計(jì)文檔(可選)符合數(shù)據(jù)庫(kù)設(shè)計(jì)文檔模板,評(píng)審?fù)ㄟ^(guò),并附評(píng)審報(bào)告。接口設(shè)計(jì)文檔(可選)符合接口設(shè)計(jì)文檔模板,評(píng)審?fù)ㄟ^(guò),并附評(píng)審報(bào)告。測(cè)試文檔測(cè)試通過(guò),符合測(cè)試報(bào)告模板,并評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告??梢暬桓段锟梢暬桓段锊渴鸩⒄_\(yùn)行,評(píng)審?fù)ㄟ^(guò),并附評(píng)審報(bào)告。數(shù)據(jù)安全管理運(yùn)營(yíng)服務(wù)要求需建立數(shù)據(jù)安全管理運(yùn)營(yíng)服務(wù)體系和長(zhǎng)效工作機(jī)制,開展持續(xù)的安全運(yùn)營(yíng)服務(wù),加強(qiáng)對(duì)重要信息系統(tǒng)的安全保障,憑借云資源連續(xù)性服務(wù)等質(zhì)量管理、滲透測(cè)試、安全檢查評(píng)估、重保和應(yīng)急響應(yīng)、威脅情報(bào)、數(shù)據(jù)安全審計(jì)及合規(guī)性審查等服務(wù)保障數(shù)據(jù)的安全運(yùn)營(yíng)能力,實(shí)現(xiàn)全網(wǎng)信息安全。市電子政務(wù)云安全監(jiān)控服務(wù)需求針對(duì)市電子政務(wù)云基礎(chǔ)平臺(tái)提供云基礎(chǔ)安全監(jiān)測(cè)服務(wù)和云基礎(chǔ)安全管理服務(wù)兩類服務(wù)內(nèi)容。云基礎(chǔ)安全監(jiān)測(cè)服務(wù)云基礎(chǔ)安全監(jiān)測(cè)服務(wù)是一項(xiàng)安全服務(wù),通過(guò)安裝至客戶端主機(jī),與服務(wù)端網(wǎng)絡(luò)打通之后,可在web端管控相關(guān)安全設(shè)備。云基礎(chǔ)安全監(jiān)測(cè)服務(wù)的目的是為了提高市政云的平臺(tái)整體安全性,加強(qiáng)安全設(shè)備管理效能。主要工作包括針對(duì)政務(wù)云實(shí)時(shí)開展服務(wù)器設(shè)備、存儲(chǔ)設(shè)備、網(wǎng)絡(luò)設(shè)備、安全設(shè)備、平臺(tái)系統(tǒng)監(jiān)測(cè)分析等。該項(xiàng)服務(wù)的輸出和標(biāo)準(zhǔn)應(yīng)該至少包括:輸出物輸出物標(biāo)準(zhǔn)安全監(jiān)控頁(yè)面符合安全監(jiān)控頁(yè)面模板,評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。監(jiān)控分析報(bào)告符合監(jiān)控分析報(bào)告模板,評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。性能日志報(bào)告符合日志報(bào)告模板,并且日志包含但不限于以下內(nèi)容:性能概況,性能分析等,評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。云基礎(chǔ)安全管理服務(wù)針對(duì)政務(wù)云實(shí)時(shí)開展云服務(wù)資源、廠商、可用性、連續(xù)性、規(guī)劃、優(yōu)化、SLA等質(zhì)量管理。主要服務(wù)工作包括業(yè)務(wù)調(diào)研、詳細(xì)設(shè)計(jì)、原型開發(fā)、數(shù)據(jù)對(duì)接、測(cè)試上線、監(jiān)控保障等。該項(xiàng)服務(wù)的輸出和標(biāo)準(zhǔn)應(yīng)該至少包括:工作描述編寫規(guī)范文檔定制云基礎(chǔ)安全管理服務(wù)的相關(guān)方案研發(fā)功能針對(duì)功能需求開發(fā)人員進(jìn)行相應(yīng)研發(fā)部署版本部署相關(guān)資源版本,試運(yùn)行啟動(dòng)測(cè)試功能是否正常QA人員測(cè)試相應(yīng)版本的功能有無(wú)bug修復(fù)相關(guān)問(wèn)題針對(duì)測(cè)試/反饋的相應(yīng)問(wèn)題進(jìn)行修復(fù)工作正式上線針對(duì)測(cè)試通過(guò)的版本,運(yùn)維人員部署到生產(chǎn)環(huán)境持續(xù)跟進(jìn)需求根據(jù)客戶使用過(guò)程中所提出的相關(guān)需求及建議進(jìn)行相關(guān)開發(fā)更新工作,推動(dòng)過(guò)程實(shí)施,以解決相關(guān)問(wèn)題持續(xù)版本迭代針對(duì)已修復(fù)問(wèn)題的新版本,運(yùn)維人員持續(xù)保持版本更新持續(xù)保證軟件質(zhì)量在項(xiàng)目服務(wù)周期中,QA人員持續(xù)保障軟件的服務(wù)質(zhì)量市電子政務(wù)云上應(yīng)用安全監(jiān)控服務(wù)需求針對(duì)招標(biāo)方指定的信息系統(tǒng)提供應(yīng)用安全的監(jiān)控分析、檢查評(píng)估、滲透測(cè)試、基礎(chǔ)管理、威脅情報(bào)以及重保管理等服務(wù)。針對(duì)招標(biāo)方重要信息系統(tǒng)的軟件安全質(zhì)量進(jìn)行評(píng)測(cè)并跟蹤驗(yàn)證軟件安全質(zhì)量問(wèn)題直至閉環(huán)。政務(wù)云上應(yīng)用安全監(jiān)測(cè)分析服務(wù)針對(duì)政務(wù)云上發(fā)布應(yīng)用,實(shí)時(shí)開展網(wǎng)絡(luò)流量收集、分析、展示和預(yù)警,按要求提供使用統(tǒng)計(jì)報(bào)告,以滿足對(duì)政務(wù)云上整體網(wǎng)絡(luò)安全監(jiān)控保障需要。該服務(wù)需要對(duì)政務(wù)云上應(yīng)用安全監(jiān)測(cè)分析服務(wù)中所需要提供的從流量接入、分析、場(chǎng)景事件到告警與交付輸出的整個(gè)過(guò)程,達(dá)到流量實(shí)時(shí)監(jiān)控與安全事件第一時(shí)間響應(yīng)的目標(biāo)。該項(xiàng)服務(wù)的輸出和標(biāo)準(zhǔn)應(yīng)該至少包括:輸出物輸出物標(biāo)準(zhǔn)《安全監(jiān)測(cè)分析日?qǐng)?bào)》包含值班時(shí)間、值班地點(diǎn)、值班人員、平臺(tái)防護(hù)情況、平臺(tái)攻擊源top摘要、可能出現(xiàn)的攻擊成功的安全事件?!栋踩O(jiān)測(cè)分析月報(bào)》包含分析事件、告警top摘要、受攻擊站點(diǎn)top摘要、攻擊者top摘要、當(dāng)月安全事件匯總。《需求確認(rèn)與跟蹤列表》對(duì)服務(wù)過(guò)程中產(chǎn)生的需求進(jìn)行分析與執(zhí)行,并對(duì)執(zhí)行完成情況進(jìn)行跟蹤及說(shuō)明?!栋踩羰录R總》包含大量攻擊事件、明顯攻擊事件、攻擊成功的安全事件?!栋踩O(jiān)測(cè)在線報(bào)告》對(duì)大屏實(shí)時(shí)展現(xiàn)的內(nèi)容進(jìn)行報(bào)告拉取、編輯匯總。《安全監(jiān)控告警處置類單據(jù)》安全事件均錄入平臺(tái)工單系統(tǒng)可根據(jù)平臺(tái)記錄情況記錄安全事件閉環(huán)結(jié)果,包含事件發(fā)生時(shí)間、發(fā)現(xiàn)人員、事件描述、處置時(shí)間、處置人員。《模型設(shè)計(jì)與評(píng)估報(bào)告》符合模型設(shè)計(jì)與評(píng)估報(bào)告模板?!栋踩O(jiān)測(cè)分析專項(xiàng)工作報(bào)告》符合安全監(jiān)測(cè)分析專項(xiàng)工作報(bào)告模板。政務(wù)云上應(yīng)用安全檢查評(píng)估服務(wù)針對(duì)政務(wù)云上發(fā)布應(yīng)用,定期開展應(yīng)用安全脆弱性檢查和應(yīng)急預(yù)案評(píng)估,以滿足對(duì)政務(wù)云上整體應(yīng)用安全檢查需要的目標(biāo)。該服務(wù)需結(jié)合具體安全檢查的需要,在規(guī)定時(shí)間節(jié)點(diǎn)上,定期組織脆弱性安全評(píng)估工作,以滿足防止網(wǎng)絡(luò)數(shù)據(jù)泄露或者被竊取、篡改以及制定網(wǎng)絡(luò)安全事件應(yīng)急預(yù)案的要求。該項(xiàng)服務(wù)的輸出和標(biāo)準(zhǔn)應(yīng)該至少包括:輸出物輸出物標(biāo)準(zhǔn)應(yīng)用安全檢查評(píng)估服務(wù)申請(qǐng)單包含本次安全檢查評(píng)估的對(duì)象范圍、時(shí)間要求、評(píng)估方式(脆弱性檢查或應(yīng)急演練)。安全脆弱性檢查報(bào)告包含本次脆弱性檢查所使用的工具、對(duì)象、漏洞清單(漏洞漏報(bào)率小于1~3%)以及漏洞整改建議。安全脆弱項(xiàng)處置類單據(jù)符合安全脆弱項(xiàng)處置類單據(jù)模板,通過(guò)驗(yàn)收。安全應(yīng)急管理評(píng)估報(bào)告包含本次應(yīng)急演練的過(guò)程記錄和需整改的問(wèn)題清單。安全應(yīng)急管理缺失項(xiàng)處置類單據(jù)記錄安全應(yīng)急管理缺失項(xiàng)的處置過(guò)程。安全檢查評(píng)估專項(xiàng)總結(jié)報(bào)告包含脆弱性檢查和應(yīng)急預(yù)案評(píng)估結(jié)論匯總、問(wèn)題清單以及整改優(yōu)化建議。政務(wù)云上應(yīng)用安全滲透測(cè)試服務(wù)該服務(wù)對(duì)目標(biāo)系統(tǒng)的安全做深入的探測(cè),發(fā)現(xiàn)系統(tǒng)最脆弱的環(huán)節(jié),采用可控制、非破壞性質(zhì)的方法和手段發(fā)現(xiàn)目標(biāo)和網(wǎng)絡(luò)設(shè)備中存在弱點(diǎn),同時(shí)提供安全加固意見(jiàn)以提升系統(tǒng)的安全性。該項(xiàng)服務(wù)的輸出和標(biāo)準(zhǔn)應(yīng)該至少包括:輸出物輸出物標(biāo)準(zhǔn)《滲透測(cè)試報(bào)告》包含本次測(cè)試系統(tǒng)檢查所使用的工具、對(duì)象、漏洞清單(漏洞漏報(bào)率小于1~3%)以及漏洞整改建議?!稇?yīng)用系統(tǒng)漏洞匯總表》包含各系統(tǒng)的滲透測(cè)試漏洞匯總,漏洞分類情況及修復(fù)建議?!痘貧w測(cè)試報(bào)告》根據(jù)之前滲透測(cè)試發(fā)現(xiàn)的漏洞進(jìn)行二次驗(yàn)證,檢驗(yàn)是否完成所有漏洞的修復(fù),符合回歸測(cè)試報(bào)告模板?!稇?yīng)用系統(tǒng)與映射主機(jī)對(duì)應(yīng)清單表》包含本次滲透測(cè)試服務(wù)中應(yīng)用系統(tǒng)所對(duì)應(yīng)的所有應(yīng)用主機(jī)清單,便于后續(xù)的核算?!栋踩嗳蹴?xiàng)處置類單據(jù)》包含發(fā)現(xiàn)的漏洞名稱、類型潛在威脅及當(dāng)前處置情況并及時(shí)下發(fā)?!稘B透測(cè)試專項(xiàng)總結(jié)報(bào)告》包含本次滲透測(cè)試發(fā)現(xiàn)的所有漏洞清單及相關(guān)明細(xì)。政務(wù)云上應(yīng)用安全基礎(chǔ)管理服務(wù)政務(wù)云上應(yīng)用安全基礎(chǔ)管理服務(wù)提供的整改需求接入、安全復(fù)測(cè)、問(wèn)題跟蹤與交付輸出的整個(gè)過(guò)程,以滿足對(duì)政務(wù)云上整體應(yīng)用安全管理需要的目標(biāo)。結(jié)合安全基礎(chǔ)管理服務(wù)的需要,在規(guī)定時(shí)間節(jié)點(diǎn)上,周期性組織應(yīng)用安全基礎(chǔ)管理工作,以滿足防止網(wǎng)絡(luò)數(shù)據(jù)被竊取、篡改和安全事件管理的要求。該項(xiàng)服務(wù)的輸出和標(biāo)準(zhǔn)應(yīng)該至少包括:輸出物輸出物標(biāo)準(zhǔn)安全問(wèn)題整改需求清單包含應(yīng)用對(duì)象、問(wèn)題來(lái)源、問(wèn)題描述、發(fā)生時(shí)間、復(fù)測(cè)時(shí)間要求。安全整改驗(yàn)證處置類單據(jù)記錄安全問(wèn)題整改過(guò)程,符合安全整改驗(yàn)證處置類單據(jù)模板。安全問(wèn)題跟蹤表包含應(yīng)用對(duì)象、問(wèn)題來(lái)源、問(wèn)題描述、發(fā)生時(shí)間、復(fù)測(cè)時(shí)間、復(fù)測(cè)結(jié)果、復(fù)測(cè)人員。安全基礎(chǔ)管理工作報(bào)告包含復(fù)測(cè)結(jié)果以及未整改完成項(xiàng)的整改建議。威脅情報(bào)服務(wù)針對(duì)政務(wù)云上發(fā)布的引用收集威脅情報(bào),以輔助識(shí)別外部威脅、確認(rèn)攻擊源頭、預(yù)警安全威脅、發(fā)現(xiàn)未知風(fēng)險(xiǎn)等。需要提供的從安全社區(qū)公布、分析、威脅確認(rèn)到告警與交付輸出的整個(gè)過(guò)程,達(dá)到安全威脅情報(bào)監(jiān)控分析與第一時(shí)間上報(bào)響應(yīng)的目標(biāo)。該項(xiàng)服務(wù)的輸出和標(biāo)準(zhǔn)應(yīng)該至少包括:輸出物輸出物標(biāo)準(zhǔn)《安全威脅分析日?qǐng)?bào)》包含攻擊類型、方式、影響范圍、漏洞詳情、緩解措施等威脅情報(bào)?!栋踩{分析月報(bào)》包含當(dāng)月威脅情報(bào)的分析時(shí)間、攻擊類型、安全事件、分析說(shuō)明、處理建議等匯總?!栋踩{分析匯總》包含安全威脅的發(fā)現(xiàn)時(shí)間、名稱、攻擊類型、威脅詳情、風(fēng)險(xiǎn)級(jí)別、潛在影響、處置措施等信息的匯總。《安全威脅分析專項(xiàng)工作報(bào)告》符合安全威脅情報(bào)專項(xiàng)工作報(bào)告模板。政務(wù)云上應(yīng)用安全重保管理服務(wù)政務(wù)云上應(yīng)用安全重保管理服務(wù)是指針對(duì)政務(wù)云上發(fā)布的應(yīng)用,在政務(wù)云上應(yīng)用安全重點(diǎn)保障期間,對(duì)風(fēng)險(xiǎn)進(jìn)行分析,制定并執(zhí)行相應(yīng)的安全保障方案,從技術(shù)、管理、人員等方面提出安全保障要求,確保信息系統(tǒng)的保密性、完整性和可用性,降低安全風(fēng)險(xiǎn)到可接受的程度,以滿足對(duì)政務(wù)云上應(yīng)用安全重保需要。該項(xiàng)服務(wù)的輸出和標(biāo)準(zhǔn)應(yīng)該至少包括:輸出物輸出物標(biāo)準(zhǔn)《安全重保實(shí)施方案》需在其中明確保障工作要求及流程機(jī)制、系統(tǒng)相關(guān)部門工作職責(zé)和內(nèi)容和要求。經(jīng)客戶評(píng)審得到通過(guò)后方可生效?!栋踩乇G捌跍?zhǔn)備工作專項(xiàng)報(bào)告》需根據(jù)大數(shù)據(jù)中心網(wǎng)絡(luò)安全管理體系,要求各部門提供應(yīng)急預(yù)案。《安全重保期間值守工作報(bào)告》以日?qǐng)?bào)形式,每日編制安全重保期間值守工作報(bào)告,匯報(bào)當(dāng)天安全保障情況,包含當(dāng)天總體情況、值班情況、安全防護(hù)情況等。報(bào)告格式需符合采購(gòu)人的要求。《重保安全風(fēng)險(xiǎn)處置單》服務(wù)商需對(duì)所保障各業(yè)務(wù)系統(tǒng)的網(wǎng)絡(luò)安全監(jiān)測(cè)預(yù)警,及時(shí)發(fā)現(xiàn)告警,第一時(shí)間通報(bào)至保障領(lǐng)導(dǎo)小組,提交對(duì)應(yīng)事件的網(wǎng)絡(luò)安全事件通報(bào),并收集處置結(jié)果。需產(chǎn)生總結(jié)的完整告警處理記錄。《安全重保專項(xiàng)總結(jié)報(bào)告》需要記錄保障期間工作實(shí)施情況,需要對(duì)整個(gè)重保期間所有檢測(cè)到的安全事件以及告警進(jìn)行統(tǒng)計(jì)。要求做到對(duì)中高級(jí)告警100%及時(shí)處理,并在報(bào)告中完整體現(xiàn)。公共數(shù)據(jù)安全管理運(yùn)營(yíng)服務(wù)需求數(shù)據(jù)安全評(píng)估服務(wù)數(shù)據(jù)安全評(píng)估服務(wù)是指針對(duì)數(shù)據(jù)資源平臺(tái)數(shù)據(jù)定期開展存儲(chǔ)分布、應(yīng)用場(chǎng)景和安全策略評(píng)估,深入分析數(shù)據(jù)資源數(shù)據(jù)存儲(chǔ)過(guò)程安全風(fēng)險(xiǎn),對(duì)所發(fā)現(xiàn)問(wèn)題閉環(huán)管理,并構(gòu)建數(shù)據(jù)安全數(shù)據(jù)評(píng)估服務(wù)技術(shù)合規(guī)評(píng)測(cè)體系。該項(xiàng)服務(wù)的輸出和標(biāo)準(zhǔn)應(yīng)該至少包括:輸出物輸出物標(biāo)準(zhǔn)《數(shù)據(jù)安全評(píng)估服務(wù)評(píng)估報(bào)告》包含本次數(shù)據(jù)安全評(píng)估服務(wù)所使用的對(duì)象、存儲(chǔ)分布、應(yīng)用場(chǎng)景和安全策略評(píng)估以及深入分析數(shù)據(jù)資源數(shù)據(jù)存儲(chǔ)過(guò)程安全風(fēng)險(xiǎn)?!稊?shù)據(jù)安全評(píng)估服務(wù)問(wèn)題列表》包含本次數(shù)據(jù)安全評(píng)估服務(wù)需整改的問(wèn)題清單?!稊?shù)據(jù)安全評(píng)估服務(wù)問(wèn)題整改單》記錄了一個(gè)需要整改問(wèn)題的發(fā)現(xiàn)、整改、二次驗(yàn)證以及確認(rèn)全生命周期的文檔。數(shù)據(jù)安全審核服務(wù)數(shù)據(jù)安全審核服務(wù)是針對(duì)數(shù)據(jù)資源平臺(tái)的數(shù)據(jù)開展處理日志審計(jì)、賬戶權(quán)限審計(jì)和訪問(wèn)行為分析等工作,深入分析數(shù)據(jù)資源平臺(tái)在數(shù)據(jù)處理過(guò)程中的安全風(fēng)險(xiǎn),對(duì)所發(fā)現(xiàn)問(wèn)題進(jìn)行閉環(huán)管理。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括但不限于:輸出物輸出物標(biāo)準(zhǔn)審核日志包含但不限于審核規(guī)則、審核內(nèi)容、審核數(shù)量、審核結(jié)果。審核報(bào)告通過(guò)評(píng)審,附評(píng)審報(bào)告。審核規(guī)則及變更通過(guò)評(píng)審,附評(píng)審報(bào)告。數(shù)據(jù)安全控制服務(wù)數(shù)據(jù)安全控制服務(wù)是針對(duì)數(shù)據(jù)匯集、數(shù)據(jù)構(gòu)建、數(shù)據(jù)開發(fā)、數(shù)據(jù)開放、數(shù)據(jù)共享、后臺(tái)運(yùn)維等數(shù)據(jù)流轉(zhuǎn)場(chǎng)景,提升數(shù)據(jù)防護(hù)能力的建設(shè),在滿足業(yè)務(wù)需求正常開展的前提下,最大限度的對(duì)敏感數(shù)據(jù)進(jìn)行保護(hù),防止敏感數(shù)據(jù)泄露事件的發(fā)生,通過(guò)數(shù)據(jù)安全控制服務(wù)進(jìn)行持續(xù)保障數(shù)據(jù)安全控制相應(yīng)的應(yīng)用系統(tǒng)安全、穩(wěn)定運(yùn)行。該服務(wù)需要做到針對(duì)不對(duì)數(shù)據(jù)使用場(chǎng)景下配置化、全覆蓋的服務(wù)要求,同時(shí)需要支撐該服務(wù)的靈活性和操作友好性需求。根據(jù)數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作要求,輸出物及標(biāo)準(zhǔn)包括但不限于:輸出物以及過(guò)程輸出物標(biāo)準(zhǔn)安全控制配置化規(guī)則評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。安全控制執(zhí)行日志包含安全控制策略、控制記錄數(shù)等信息。數(shù)據(jù)安全控制服務(wù)報(bào)告(如有)包含脫敏、加密、加水印后安全控制服務(wù)的分析報(bào)告數(shù)據(jù)歷史歸檔及銷毀服務(wù)數(shù)據(jù)歷史歸檔及銷毀服務(wù)是針對(duì)數(shù)據(jù)運(yùn)營(yíng)服務(wù)的要求,開展日常數(shù)據(jù)歸檔、恢復(fù)、銷毀等工作的服務(wù)。該服務(wù)需要做到針對(duì)不對(duì)數(shù)據(jù)使用場(chǎng)景下的各類數(shù)據(jù)按需、配置化、全覆蓋的服務(wù)要求,同時(shí)需要支撐該服務(wù)的可逆性和可視化需求。該項(xiàng)服務(wù)的輸出和標(biāo)準(zhǔn)應(yīng)該至少包括:輸出物以及過(guò)程輸出物標(biāo)準(zhǔn)歸檔/銷毀方案符合歸檔或者銷毀的運(yùn)營(yíng)需求,評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。歸檔/銷毀執(zhí)行日志包含庫(kù)表位置、運(yùn)行狀態(tài)、實(shí)際數(shù)量等。數(shù)據(jù)歸檔/銷毀服務(wù)報(bào)告報(bào)告期內(nèi)各業(yè)務(wù)系統(tǒng)使用數(shù)據(jù)歸檔情況、數(shù)據(jù)銷毀情況。政務(wù)云管理運(yùn)營(yíng)服務(wù)需求為提高全市電子政務(wù)云的管理效能,優(yōu)化其運(yùn)營(yíng)監(jiān)控服務(wù)體系,并建立長(zhǎng)效管理機(jī)制,實(shí)現(xiàn)對(duì)市分中心及區(qū)云分中心進(jìn)行常規(guī)監(jiān)測(cè)管理。分中心云納管需求分中心云納管服務(wù)是指對(duì)政務(wù)云的分中心進(jìn)行常規(guī)監(jiān)測(cè)管理服務(wù)。分中心云納管服務(wù)的目的是為了提高對(duì)分中心整體業(yè)務(wù)的整合水平和管理能力,對(duì)分中心進(jìn)行有效的常規(guī)監(jiān)測(cè)管理等納管服務(wù)。該項(xiàng)服務(wù)的輸出和標(biāo)準(zhǔn)應(yīng)該至少包括:輸出物輸出物標(biāo)準(zhǔn)區(qū)中心云對(duì)接方案依據(jù)《H市政務(wù)云建設(shè)指南》完成《區(qū)中心云對(duì)接方案》并提交,符合專家評(píng)審要求,并附相關(guān)評(píng)審文檔。區(qū)中心云數(shù)據(jù)對(duì)接標(biāo)準(zhǔn)依據(jù)《H市政務(wù)云建設(shè)指南》完成《區(qū)中心云數(shù)據(jù)對(duì)接標(biāo)準(zhǔn)》并提交,符合專家評(píng)審要求,并附相關(guān)評(píng)審文檔。區(qū)中心云基礎(chǔ)設(shè)施監(jiān)測(cè)管理頁(yè)面依據(jù)《H市政務(wù)云建設(shè)指南》完成《區(qū)中心云基礎(chǔ)設(shè)施檢測(cè)管理頁(yè)面》并提交,符合區(qū)中心納管功能設(shè)計(jì)指標(biāo),并評(píng)審?fù)ㄟ^(guò),附評(píng)審報(bào)告。區(qū)云納管需求區(qū)云納管服務(wù)是指大數(shù)據(jù)中心對(duì)政務(wù)云的區(qū)云平臺(tái)進(jìn)行常規(guī)監(jiān)測(cè)管理服務(wù)。區(qū)云納管服務(wù)的目的是為了提高H市大數(shù)據(jù)中心對(duì)區(qū)云平臺(tái)整體業(yè)務(wù)的整合水平和管理能力,對(duì)區(qū)云平臺(tái)進(jìn)行有效的常規(guī)監(jiān)測(cè)管理等納管服務(wù)。工作描述確認(rèn)區(qū)云納管目標(biāo)定義區(qū)云的概念,明確分中心職責(zé)。編寫規(guī)范文檔定制適合分中心的納管方案,各分中心統(tǒng)一標(biāo)準(zhǔn)化。編寫規(guī)范文檔定制云基礎(chǔ)安全管理服務(wù)的相關(guān)方案研發(fā)功能針對(duì)功能需求開發(fā)人員進(jìn)行相應(yīng)研發(fā)部署版本部署相關(guān)資源版本,試運(yùn)行啟動(dòng)測(cè)試功能是否正常QA人員測(cè)試相應(yīng)版本的功能有無(wú)bug修復(fù)相關(guān)問(wèn)題針對(duì)測(cè)試/反饋的相應(yīng)問(wèn)題進(jìn)行修復(fù)工作正式上線針對(duì)測(cè)試通過(guò)的版本,運(yùn)維人員部署到生產(chǎn)環(huán)境持續(xù)跟進(jìn)需求根據(jù)客戶使用過(guò)程中所提出的相關(guān)需求及建議進(jìn)行相關(guān)開發(fā)更新工作,推動(dòng)過(guò)程實(shí)施,以解決相關(guān)問(wèn)題持續(xù)版本迭代針對(duì)已修復(fù)問(wèn)題的新版本,運(yùn)維人員持續(xù)保持版本更新持續(xù)保證軟件質(zhì)量在項(xiàng)目服務(wù)周期中,QA人員持續(xù)保障軟件的服務(wù)質(zhì)量數(shù)據(jù)運(yùn)營(yíng)服務(wù)202X年重點(diǎn)工作需求202X年度數(shù)據(jù)運(yùn)營(yíng)重點(diǎn)工作任務(wù)如下:(1)上云系統(tǒng)的數(shù)據(jù)采集:落實(shí)預(yù)算系統(tǒng)運(yùn)行狀況、數(shù)據(jù)情況、庫(kù)表結(jié)構(gòu)、資源目錄等數(shù)據(jù)采集標(biāo)準(zhǔn)。制定上云系統(tǒng)運(yùn)行狀況、數(shù)據(jù)產(chǎn)生及更新、數(shù)據(jù)庫(kù)表結(jié)構(gòu)等數(shù)據(jù)采集技術(shù)要求;(2)各區(qū)、各部門數(shù)據(jù)歸集和整合:開展各部門數(shù)據(jù)完成歸集和整合,持續(xù)完成納入預(yù)算信息化系統(tǒng)的數(shù)據(jù)完整歸集;制定各區(qū)基層業(yè)務(wù)數(shù)據(jù)、視頻數(shù)據(jù)和物聯(lián)數(shù)據(jù)的采集、存儲(chǔ)及結(jié)構(gòu)化處理的技術(shù)要求,實(shí)現(xiàn)各區(qū)與大數(shù)據(jù)資源平臺(tái)級(jí)聯(lián),滿足數(shù)據(jù)歸集和分析應(yīng)用的要求;(3)行業(yè)及社會(huì)數(shù)據(jù)歸集:拓展交通、口岸等行業(yè)的存量及新增數(shù)據(jù)歸集,滿足與社會(huì)數(shù)據(jù)的對(duì)接的需求,例如物流、快遞數(shù)據(jù)等;(4)深化綜合庫(kù)、主題庫(kù)以及專題庫(kù)建設(shè)及應(yīng)用:梳理自然人、法人、空間地理相關(guān)數(shù)據(jù)項(xiàng),并建立自然人綜合庫(kù)、法人綜合庫(kù)和空間地理綜合庫(kù);完成主題庫(kù)深化建設(shè),配合業(yè)務(wù)部門建立分析應(yīng)用場(chǎng)景,形成主題庫(kù)的服務(wù)能力;深化路名門牌、自然人婚姻狀態(tài)、死亡狀態(tài)核驗(yàn)等專題庫(kù)建設(shè)與應(yīng)用,形成權(quán)威數(shù)據(jù)清單,完成數(shù)據(jù)項(xiàng)的標(biāo)準(zhǔn)化工作,實(shí)現(xiàn)場(chǎng)景化的跨部門融合;(5)優(yōu)化數(shù)據(jù)安全管控能力:推進(jìn)數(shù)據(jù)分級(jí)分類,實(shí)現(xiàn)敏感數(shù)據(jù)識(shí)別及管理;(6)端到端的數(shù)據(jù)運(yùn)營(yíng)管理:實(shí)現(xiàn)在線上數(shù)據(jù)加工流程的監(jiān)控,支撐基于數(shù)據(jù)應(yīng)用場(chǎng)景的監(jiān)控及管理;提供滿足業(yè)務(wù)協(xié)同的要求的數(shù)據(jù)服務(wù);(7)加強(qiáng)數(shù)據(jù)質(zhì)量跟蹤監(jiān)測(cè):完善公共數(shù)據(jù)質(zhì)量監(jiān)測(cè)機(jī)制,實(shí)現(xiàn)市區(qū)兩級(jí)數(shù)據(jù)質(zhì)量報(bào)告覆蓋,提升全市公共數(shù)據(jù)質(zhì)量。實(shí)現(xiàn)數(shù)據(jù)服務(wù)的數(shù)據(jù)校驗(yàn)工作。(8)拓展數(shù)據(jù)開放服務(wù)能力:推進(jìn)普惠金融、交通出行、醫(yī)療健康、文化旅游等領(lǐng)域的數(shù)據(jù)開放;(9)開展“數(shù)據(jù)月月講”:以公共數(shù)據(jù)開發(fā)利用為目標(biāo),對(duì)跨層級(jí)、跨區(qū)域、跨部門、跨領(lǐng)域數(shù)據(jù)的融合加工;建設(shè)與“數(shù)據(jù)月月講”主題相關(guān)分析及可視化應(yīng)用,促進(jìn)和委辦局重點(diǎn)核心業(yè)務(wù)相關(guān)的數(shù)據(jù)歸集;(10)支撐安全運(yùn)營(yíng)中心運(yùn)營(yíng)工作,保障IT服務(wù)管理、網(wǎng)絡(luò)安全防護(hù)等各方面運(yùn)營(yíng)能力,借助標(biāo)準(zhǔn)化的流程管理實(shí)現(xiàn)持續(xù)的城市級(jí)安全運(yùn)營(yíng)。根據(jù)市委市政府和領(lǐng)導(dǎo)專題工作會(huì)的要求,招標(biāo)方會(huì)同中標(biāo)方對(duì)數(shù)據(jù)運(yùn)營(yíng)服務(wù)工作目標(biāo)進(jìn)行動(dòng)態(tài)新增及修改。運(yùn)營(yíng)服務(wù)管理需求運(yùn)營(yíng)服務(wù)要求投標(biāo)方向招標(biāo)方提供響應(yīng)文件中采購(gòu)的所有內(nèi)容的培訓(xùn)和維護(hù)服務(wù),提供H市數(shù)據(jù)運(yùn)營(yíng)資源租賃服務(wù),并負(fù)責(zé)數(shù)據(jù)運(yùn)營(yíng)服務(wù)所需要涉及的硬件安裝、軟件集成、運(yùn)維管理工作。若招標(biāo)文件中所采購(gòu)的服務(wù)等方面的配置或要求中出現(xiàn)不合理或不完整的問(wèn)題時(shí),投標(biāo)方有責(zé)任和義務(wù)在響應(yīng)文件中提出補(bǔ)充修改方案并征得本項(xiàng)目單位同意后付諸實(shí)施,所產(chǎn)生的費(fèi)用由投標(biāo)方負(fù)責(zé)。投標(biāo)方需按照服務(wù)質(zhì)量保證的服務(wù)標(biāo)準(zhǔn)要求提供各種售后服務(wù),負(fù)責(zé)對(duì)其提供的服務(wù)進(jìn)行維護(hù)或升級(jí)。為保證服務(wù)響應(yīng)效率,投標(biāo)方可提供距市大數(shù)據(jù)在3公里以內(nèi),至少可容納300個(gè)駐場(chǎng)工程師的辦公場(chǎng)所,建設(shè)安全保障的設(shè)施和安全管理規(guī)范,滿足招標(biāo)方的安全監(jiān)管要求。投標(biāo)方需提供專職7*24小時(shí)的駐場(chǎng)服務(wù),確保重點(diǎn)公共數(shù)據(jù)服務(wù)可用性不低于98%。投標(biāo)方應(yīng)根據(jù)不同的數(shù)據(jù)運(yùn)營(yíng)服務(wù)任務(wù)的范圍和要求,提出相應(yīng)運(yùn)營(yíng)服務(wù)方案,包括但不僅限于處理流程、響應(yīng)時(shí)間、管理體制、維護(hù)人員和工具配備等。投標(biāo)方需按照方案中的事項(xiàng)安排相關(guān)團(tuán)隊(duì)制定詳細(xì)的作業(yè)計(jì)劃并執(zhí)行。未經(jīng)許可不允許使用大規(guī)模自動(dòng)化掃描工具及滲透工具,禁止上傳木馬、執(zhí)行高危payload等影響系統(tǒng)運(yùn)行的操作。故障響應(yīng):處理數(shù)據(jù)運(yùn)營(yíng)過(guò)程中發(fā)生的由數(shù)據(jù)及時(shí)性、一致性、準(zhǔn)確性等引起的問(wèn)題,確保業(yè)務(wù)系統(tǒng)能夠及時(shí)、準(zhǔn)確地進(jìn)行數(shù)據(jù)共享開放和數(shù)據(jù)分析應(yīng)用相關(guān)的業(yè)務(wù)協(xié)同。其中故障響應(yīng)流程需要電子化并規(guī)定處理時(shí)限及當(dāng)前處理環(huán)節(jié)的責(zé)任部門和責(zé)任人。投標(biāo)方應(yīng)提供詳細(xì)的故障響應(yīng)方案,該方案需經(jīng)招標(biāo)方評(píng)審?fù)ㄟ^(guò)。故障處理方案需針對(duì)不同故障等級(jí)分別制定,故障等級(jí)劃分包括但不限于:緊急故障:系統(tǒng)核心業(yè)務(wù)癱瘓,無(wú)法提供服務(wù);嚴(yán)重故障:系統(tǒng)核心業(yè)務(wù)仍能提供服務(wù),但是性能受到嚴(yán)重影響;一般故障:系統(tǒng)核心業(yè)務(wù)不受影響;在緊急故障發(fā)生時(shí),投標(biāo)方應(yīng)在15分鐘內(nèi)響應(yīng),1小時(shí)內(nèi)對(duì)故障進(jìn)行緊急處理,恢復(fù)業(yè)務(wù)基本運(yùn)行或完成信息安全事故的影響。因不可抗力致使投標(biāo)方未按時(shí)到達(dá)現(xiàn)場(chǎng)除外。因信息安全事故所產(chǎn)生的社會(huì)、經(jīng)濟(jì)影響,按照投標(biāo)方相關(guān)安全管理辦法處置。在嚴(yán)重故障發(fā)生時(shí),投標(biāo)方應(yīng)在30分鐘內(nèi)響應(yīng),2小時(shí)內(nèi)對(duì)故障進(jìn)行緊急處理,恢復(fù)業(yè)務(wù)基本運(yùn)行。因不可抗力致使投標(biāo)方未按時(shí)到達(dá)現(xiàn)場(chǎng)除外。在一般故障發(fā)生時(shí),投標(biāo)方應(yīng)在60分鐘內(nèi)響應(yīng),24小時(shí)之內(nèi)恢復(fù)。投標(biāo)方應(yīng)提供7x24小時(shí)的故障接受渠道,方式包括但不限于熱線電話、傳真、電子郵件方式。對(duì)于上述方式,投標(biāo)方都應(yīng)該在規(guī)定的服務(wù)和響應(yīng)時(shí)間內(nèi)提供相應(yīng)的技術(shù)支持服務(wù)。在系統(tǒng)頻繁出現(xiàn)故障、或遇重大節(jié)假日等保障,需要提高系統(tǒng)維護(hù)等級(jí)的情況下,應(yīng)招標(biāo)方要求,投標(biāo)方應(yīng)提供技術(shù)人員提供現(xiàn)場(chǎng)技術(shù)支持,及時(shí)處理各類故障。以上工作所產(chǎn)生的費(fèi)用都由投標(biāo)方承擔(dān)。投標(biāo)方應(yīng)有專門的數(shù)據(jù)記錄方式,記錄和整理招標(biāo)方的各類技術(shù)故障分析、技術(shù)咨詢問(wèn)題和答復(fù)、網(wǎng)絡(luò)分析報(bào)告等等。遷移及升級(jí)割接:因數(shù)據(jù)運(yùn)營(yíng)需要,開展業(yè)務(wù)系統(tǒng)遷移割接和數(shù)據(jù)運(yùn)營(yíng)相關(guān)系統(tǒng)軟硬件升級(jí)割接;中標(biāo)人在升級(jí)前制定完善的操作實(shí)施方案,在方案中盡量降低對(duì)上層業(yè)務(wù)系統(tǒng)的影響;對(duì)于可能影響上層業(yè)務(wù)系統(tǒng)的各類操作,應(yīng)全面評(píng)估操作影響,并提前通知招標(biāo)方具體操作計(jì)劃安排,在招標(biāo)方的相關(guān)業(yè)務(wù)部門同意后方可執(zhí)行操作。根據(jù)招標(biāo)方要求提供業(yè)務(wù)開通報(bào)告及驗(yàn)收測(cè)試報(bào)告。系統(tǒng)中斷:投標(biāo)方在中標(biāo)后由于維護(hù)原因,需中斷系統(tǒng)進(jìn)行平臺(tái)升級(jí)操作時(shí),提前至少72小時(shí)(重大自然災(zāi)害除外)通知招標(biāo)方做好相關(guān)準(zhǔn)備工作,征得招標(biāo)方同意方可實(shí)施。應(yīng)急演練與應(yīng)急響應(yīng):根據(jù)數(shù)據(jù)運(yùn)營(yíng)所涉及高可用需要和系統(tǒng)各模塊的重要性進(jìn)行針對(duì)性演練,制訂應(yīng)急預(yù)案,每年組織至少2次應(yīng)急演練。當(dāng)發(fā)生重大應(yīng)急事件時(shí),招標(biāo)方需在中標(biāo)人的牽頭下實(shí)施應(yīng)急響應(yīng)操作,并在事后制定重大事件報(bào)告。配置實(shí)施及管理:進(jìn)行數(shù)據(jù)運(yùn)營(yíng)所涉及的各軟硬件設(shè)備的基礎(chǔ)配置、IP配置、角色用途、賬號(hào)密碼等的統(tǒng)一配置實(shí)施及配置管理;重大活動(dòng)、節(jié)假日保障:需制定強(qiáng)化保障措施,需確保業(yè)務(wù)骨干、管理人員到場(chǎng)并提前制訂預(yù)案,確保公共數(shù)據(jù)生產(chǎn)工作安全、穩(wěn)定運(yùn)行,涉及數(shù)據(jù)運(yùn)營(yíng)相關(guān)的信息安全提供重點(diǎn)保障;服務(wù)團(tuán)隊(duì)要求投標(biāo)方應(yīng)為H市大數(shù)據(jù)運(yùn)營(yíng)單獨(dú)建立管理組織,配置相應(yīng)團(tuán)隊(duì)。服務(wù)團(tuán)隊(duì)不少于300人,其中保證核心服務(wù)人員不少于20人(具備高級(jí)工程師(數(shù)據(jù)庫(kù)應(yīng)用或計(jì)算機(jī)信息管理方向),ITIL認(rèn)證服務(wù)工程師,信息安全保障人員認(rèn)證(包含風(fēng)險(xiǎn)管理和安全集成方向)證書,提供最近一個(gè)季度依法繳納社保費(fèi)的證明,原件彩色掃描件),客戶響應(yīng)及運(yùn)營(yíng)人員不少于20人(提供最近一個(gè)季度依法繳納社保費(fèi)的證明,原件彩色掃描件)。項(xiàng)目經(jīng)理具有相關(guān)管理資質(zhì)(提供資質(zhì)證書原件彩色掃描件)。提供主要技術(shù)管理人員資質(zhì)情況(資質(zhì)證書原件彩色掃描件)。投標(biāo)方在中標(biāo)后遵照招標(biāo)方《大數(shù)據(jù)中心數(shù)據(jù)運(yùn)營(yíng)服務(wù)外包人員管理細(xì)則(試行)》的管理要求,實(shí)施對(duì)服務(wù)供應(yīng)商的監(jiān)管要求、履行對(duì)進(jìn)場(chǎng)服務(wù)的外包服務(wù)人員管理責(zé)任。落實(shí)現(xiàn)場(chǎng)服務(wù)廠商簽訂《保密承諾協(xié)議》等協(xié)議及工作規(guī)范,確保進(jìn)場(chǎng)的外包服務(wù)人員的知情、認(rèn)可招標(biāo)方的各項(xiàng)管理流程制度及工作規(guī)范,并在服務(wù)過(guò)程中嚴(yán)格遵守。外包人員在招標(biāo)方的駐場(chǎng)辦公地點(diǎn)工作期間需遵守招標(biāo)方的出入管理、行為規(guī)范、安全管理、出勤管理等相關(guān)規(guī)定。投標(biāo)方需實(shí)施定期考核評(píng)估工作。若外包人員因違反保密義務(wù)、工作規(guī)范或有其他重大違規(guī)行為而被要求退場(chǎng)的,則不得再次使用。若因能力上不符合要求,而被要求退場(chǎng)的外包人員則兩年內(nèi)不再使用。管理經(jīng)費(fèi)要求投標(biāo)方針對(duì)數(shù)據(jù)運(yùn)營(yíng)服務(wù)擬定相應(yīng)的運(yùn)營(yíng)管理經(jīng)費(fèi)管理辦法。需要明確運(yùn)營(yíng)管理經(jīng)費(fèi)的構(gòu)成、經(jīng)費(fèi)預(yù)算制定以及經(jīng)費(fèi)使用流程等內(nèi)容。培訓(xùn)要求投標(biāo)方具備提供大型專業(yè)培訓(xùn)服務(wù)的能力,能夠根據(jù)數(shù)據(jù)運(yùn)營(yíng)服務(wù)的特點(diǎn)制定培訓(xùn)方案并提供培訓(xùn),使相關(guān)人員在培訓(xùn)后能夠獨(dú)立開展工作,而不必依賴投標(biāo)方現(xiàn)場(chǎng)指導(dǎo)。培訓(xùn)課程涵蓋數(shù)據(jù)運(yùn)營(yíng)服務(wù)所涉及的系統(tǒng)使用、數(shù)據(jù)運(yùn)營(yíng)管理等培訓(xùn),中標(biāo)人負(fù)責(zé)安排專業(yè)培訓(xùn)講師授課,并提供全套培訓(xùn)教材和培訓(xùn)課程計(jì)劃表。培訓(xùn)總則投標(biāo)方至少滿足本章要求的培訓(xùn)服務(wù)。所提供的培訓(xùn)課程表隨響應(yīng)文件一起提交。培訓(xùn)授課人是經(jīng)過(guò)廠家認(rèn)證的工程師。投標(biāo)方為所有被培訓(xùn)人員提供培訓(xùn)用文字資料和講義等相關(guān)用品。所有的資料是中文書寫。培訓(xùn)工作在合同生效后安排。每年安排不少于3次針對(duì)各委辦局?jǐn)?shù)據(jù)治理和開放運(yùn)營(yíng)、數(shù)據(jù)安全運(yùn)營(yíng)、政務(wù)云運(yùn)營(yíng)等內(nèi)容的培訓(xùn)服務(wù),規(guī)模不少于200人天。培訓(xùn)內(nèi)容與課程要求投標(biāo)方對(duì)項(xiàng)目中所有產(chǎn)品的基本知識(shí)、系統(tǒng)或參數(shù)配置、管理維護(hù)等提供相應(yīng)的培訓(xùn)。投標(biāo)方詳細(xì)列明相應(yīng)的培訓(xùn)課程內(nèi)容、人數(shù)和時(shí)間安排。
項(xiàng)目服務(wù)技術(shù)方案整體運(yùn)營(yíng)服務(wù)方案服務(wù)目標(biāo)服務(wù)目標(biāo)是為客戶方的政務(wù)數(shù)據(jù)的管理與運(yùn)營(yíng)工作打造體系化的運(yùn)營(yíng)服務(wù)體系,從數(shù)據(jù)治理、安全、政務(wù)云納管幾個(gè)方面實(shí)現(xiàn)對(duì)于數(shù)據(jù)平臺(tái)建設(shè)的有效補(bǔ)充。數(shù)據(jù)治理和數(shù)據(jù)開放運(yùn)營(yíng)目標(biāo)提供數(shù)據(jù)治理服務(wù)、數(shù)據(jù)開放應(yīng)用和數(shù)據(jù)分析應(yīng)用三大服務(wù)內(nèi)容,實(shí)現(xiàn)公共數(shù)據(jù)采集與梳理、數(shù)據(jù)資源編目與管理、數(shù)據(jù)質(zhì)量監(jiān)管與優(yōu)化、基礎(chǔ)庫(kù)升級(jí)優(yōu)化與融合加工、數(shù)據(jù)分析應(yīng)用、數(shù)據(jù)共享服務(wù)發(fā)布、數(shù)據(jù)開放服務(wù)監(jiān)管與支撐、業(yè)務(wù)制度規(guī)范制定與完善等工作,通過(guò)構(gòu)建完善的數(shù)據(jù)運(yùn)營(yíng)服務(wù)體系,有效支撐數(shù)據(jù)資源共享與開發(fā)利用,充分發(fā)揮數(shù)據(jù)價(jià)值。數(shù)據(jù)安全管理運(yùn)營(yíng)目標(biāo)建立數(shù)據(jù)安全管理運(yùn)營(yíng)服務(wù)體系和長(zhǎng)效工作機(jī)制,開展持續(xù)的安全運(yùn)營(yíng)服務(wù),加強(qiáng)對(duì)重要信息系統(tǒng)的安全保障,憑借云資源連續(xù)性服務(wù)等質(zhì)量管理、滲透測(cè)試、第三方風(fēng)險(xiǎn)評(píng)估、重保和應(yīng)急響應(yīng)、威脅情報(bào)、數(shù)據(jù)安全審計(jì)及合規(guī)性審查等服務(wù)保障數(shù)據(jù)的安全運(yùn)營(yíng)能力,實(shí)現(xiàn)全網(wǎng)信息安全。云管理運(yùn)營(yíng)目標(biāo)實(shí)現(xiàn)對(duì)市云分中心以及區(qū)云的常規(guī)、統(tǒng)一的納管,提高全市電子政務(wù)云的管理效能,優(yōu)化其運(yùn)營(yíng)監(jiān)控服務(wù)體系,并建立長(zhǎng)效管理機(jī)制。服務(wù)工期本項(xiàng)目的服務(wù)周期為自合同簽訂之日,期限為三年。服務(wù)目錄本期項(xiàng)目服務(wù)目錄按照服務(wù)類別、服務(wù)子類、服務(wù)項(xiàng)進(jìn)行三級(jí)劃分,覆蓋了數(shù)據(jù)治理和數(shù)據(jù)開放運(yùn)營(yíng)服務(wù)、數(shù)據(jù)安全服務(wù)、政務(wù)云運(yùn)營(yíng)管理服務(wù)3個(gè)方面。本項(xiàng)目數(shù)據(jù)運(yùn)營(yíng)服務(wù)內(nèi)容主要包括以下服務(wù)目錄:服務(wù)類別服務(wù)子類服務(wù)項(xiàng)計(jì)量單位數(shù)據(jù)治理和數(shù)據(jù)開放運(yùn)營(yíng)服務(wù)數(shù)據(jù)治理服務(wù)數(shù)據(jù)采集接入萬(wàn)條數(shù)據(jù)抽取運(yùn)維萬(wàn)條數(shù)據(jù)標(biāo)注服務(wù)萬(wàn)條作業(yè)調(diào)度運(yùn)維個(gè)數(shù)據(jù)質(zhì)量檢查及異常處置萬(wàn)條數(shù)據(jù)開放與應(yīng)用數(shù)據(jù)開放服務(wù)個(gè)數(shù)據(jù)開放運(yùn)營(yíng)個(gè)數(shù)據(jù)分析應(yīng)用服務(wù)數(shù)據(jù)共享服務(wù)個(gè)數(shù)據(jù)融合加工個(gè)應(yīng)用建模服務(wù)個(gè)可視化展現(xiàn)服務(wù)頁(yè)面數(shù)數(shù)據(jù)安全服務(wù)市政務(wù)云安全監(jiān)控服務(wù)云基礎(chǔ)安全監(jiān)測(cè)服務(wù)臺(tái)云基礎(chǔ)安全管理服務(wù)臺(tái)市政務(wù)云上應(yīng)用安全監(jiān)控服務(wù)政務(wù)云上應(yīng)用安全監(jiān)測(cè)分析服務(wù)臺(tái)政務(wù)云上應(yīng)用安全檢查評(píng)估服務(wù)臺(tái)政務(wù)云上應(yīng)用安全滲透測(cè)試服務(wù)臺(tái)政務(wù)云上應(yīng)用安全基礎(chǔ)管理服務(wù)臺(tái)威脅情報(bào)服務(wù)臺(tái)政務(wù)云上應(yīng)用安全重保管理服務(wù)臺(tái)公共數(shù)據(jù)安全服務(wù)數(shù)據(jù)安全評(píng)估服務(wù)萬(wàn)條數(shù)據(jù)安全審核服務(wù)萬(wàn)條數(shù)據(jù)安全控制服務(wù)萬(wàn)條數(shù)據(jù)歷史歸檔及銷毀服務(wù)萬(wàn)條政務(wù)云運(yùn)營(yíng)管理服務(wù)云納管服務(wù)分中心云納管個(gè)區(qū)云納管個(gè)服務(wù)內(nèi)容數(shù)據(jù)治理和數(shù)據(jù)開放運(yùn)營(yíng)服務(wù)數(shù)據(jù)治理服務(wù)數(shù)據(jù)采集接入數(shù)據(jù)采集模塊主要提供了數(shù)據(jù)源管理、數(shù)據(jù)接入、數(shù)據(jù)接入控制等功能,以及數(shù)據(jù)格式工具等。數(shù)據(jù)源管理1、數(shù)據(jù)源狀態(tài)管理2、平臺(tái)根據(jù)需要提供不同的數(shù)據(jù)傳輸調(diào)度機(jī)制,主要分為定時(shí)和實(shí)時(shí)兩種任務(wù)調(diào)度模式。3、流程管理用來(lái)管理數(shù)據(jù)在多個(gè)節(jié)點(diǎn)之間的流轉(zhuǎn)。4、數(shù)據(jù)源日志用來(lái)管理服務(wù)器中的日志。數(shù)據(jù)采集前置服務(wù)1、適配器前置子系統(tǒng)通過(guò)接入適配器提供給應(yīng)用系統(tǒng)接入。圖:適配器技術(shù)協(xié)議適配圖:技術(shù)協(xié)議適配框架數(shù)據(jù)庫(kù)適配圖:數(shù)據(jù)庫(kù)適配文件適配圖:文件適配數(shù)據(jù)適配圖:數(shù)據(jù)適配格式轉(zhuǎn)換流程圖:數(shù)據(jù)適配格式轉(zhuǎn)換配置工具空間適配器設(shè)計(jì)在線視頻適配器設(shè)計(jì)業(yè)務(wù)應(yīng)用適配器2、橋接管理前置子系統(tǒng)對(duì)外提供了WebServices、WMQ、TLQ、JMS、SMTP、FTP、文件等橋接服務(wù)。被動(dòng)橋接方式中應(yīng)用系統(tǒng)與前置子系統(tǒng)的橋接機(jī)制如下圖所示:圖:被動(dòng)橋接方式主動(dòng)橋接方式如圖:圖:主動(dòng)橋接方式3、增量數(shù)據(jù)抽取對(duì)于業(yè)務(wù)系統(tǒng)增量數(shù)據(jù)的抽取,平臺(tái)的前置子系統(tǒng)提供了基于業(yè)務(wù)標(biāo)識(shí)、變化日志等多種解決方案?;跇I(yè)務(wù)標(biāo)識(shí)方案是根據(jù)業(yè)務(wù)系統(tǒng)數(shù)據(jù)的特性,如交換日期、交換標(biāo)識(shí)等,從而識(shí)別出本次所需要交換的增量數(shù)據(jù)。4、數(shù)據(jù)轉(zhuǎn)換處理數(shù)據(jù)轉(zhuǎn)換處理的設(shè)計(jì)主要是為將來(lái)整個(gè)系統(tǒng)的擴(kuò)展而考慮設(shè)計(jì)的。在這一層定義了應(yīng)用系統(tǒng)之間進(jìn)行交換數(shù)據(jù)的格式標(biāo)準(zhǔn),該格式標(biāo)準(zhǔn)將遵循通行的工業(yè)標(biāo)準(zhǔn)XML,利用XML來(lái)定義和描述各應(yīng)用系統(tǒng)之間以及應(yīng)用系統(tǒng)和底層架構(gòu)之間的交互信息。消息轉(zhuǎn)換技術(shù)基于XML的交換數(shù)據(jù)格式基于標(biāo)準(zhǔn)的數(shù)據(jù)轉(zhuǎn)換數(shù)據(jù)采集管理數(shù)據(jù)采集管理是系統(tǒng)提供的基于WEB的管理模塊,集中對(duì)平臺(tái)、交換節(jié)點(diǎn)、資源統(tǒng)一管理,是交換體系的控制中樞。監(jiān)控管理負(fù)責(zé)進(jìn)行平臺(tái)運(yùn)行參數(shù)的配置及對(duì)數(shù)據(jù)交換過(guò)程的實(shí)時(shí)監(jiān)控。根據(jù)監(jiān)控對(duì)象的不同,監(jiān)控管理主要分為業(yè)務(wù)監(jiān)控、服務(wù)監(jiān)控、節(jié)點(diǎn)監(jiān)控和故障監(jiān)控四個(gè)監(jiān)控模塊,同時(shí)為了支撐這些模塊的運(yùn)行,監(jiān)控管理還包括安全中心、對(duì)外接口和基礎(chǔ)構(gòu)件這些基礎(chǔ)模塊。1、節(jié)點(diǎn)注冊(cè)管理在平臺(tái)上注冊(cè)各級(jí)的交換節(jié)點(diǎn),然后進(jìn)行交換節(jié)點(diǎn)的部署。2、節(jié)點(diǎn)部署管理只有擁有安裝注冊(cè)號(hào)才能進(jìn)行節(jié)點(diǎn)安裝。安裝注冊(cè)號(hào)與節(jié)點(diǎn)前置機(jī)MAC地址綁定,有且只能安裝在指定節(jié)點(diǎn)服務(wù)器上。3、用戶權(quán)限管理對(duì)用戶及其權(quán)限的管理。使用此功能來(lái)完成對(duì)管理控制臺(tái)登錄賬號(hào)的維護(hù)管理以及權(quán)限控制。每一種類型的賬號(hào)對(duì)應(yīng)著一組可訪問(wèn)的資源。4、配置管理配置管理器用于管理交換中心的相關(guān)配置,包括性能限制、用戶選項(xiàng)等。有了配置管理器,用戶可以動(dòng)態(tài)調(diào)整服務(wù)器的配置,而不需要重新啟動(dòng)服務(wù)器才能使新的配置生效。5、節(jié)點(diǎn)運(yùn)行監(jiān)控管理對(duì)交換節(jié)點(diǎn)的運(yùn)行進(jìn)行遠(yuǎn)程控制,主要包括啟動(dòng)、終止、掛起、關(guān)閉服務(wù)。對(duì)交換節(jié)點(diǎn)的運(yùn)行狀態(tài)進(jìn)行查詢。提供當(dāng)前交換節(jié)點(diǎn)下所有連接(包括應(yīng)用客戶端連接類型和消息中間件連接類型)狀態(tài)、消息數(shù)據(jù)采集輸出流量的查詢,并對(duì)查詢結(jié)果進(jìn)行分析。數(shù)據(jù)抽取運(yùn)維抽取抽取步驟負(fù)責(zé)將大數(shù)據(jù)處理平臺(tái)所需的數(shù)據(jù)從各個(gè)業(yè)務(wù)系統(tǒng)數(shù)據(jù)源中提取出來(lái),由于各個(gè)數(shù)據(jù)源內(nèi)的數(shù)據(jù)及其質(zhì)量各不相同,因此針對(duì)每個(gè)數(shù)據(jù)源可能需要建立各自獨(dú)立的抽取流程。抽取流程的目的在于將數(shù)據(jù)源抽出并通過(guò)一組通用接口傳送給數(shù)據(jù)存儲(chǔ)模型中的清洗與轉(zhuǎn)換步驟。具體功能要求包括:1、批處理任務(wù)啟動(dòng)批處理任務(wù)啟動(dòng)負(fù)責(zé)開始抽取流程,這一程序應(yīng)該包括以下幾項(xiàng)功能:任務(wù)調(diào)度監(jiān)控,通常由ETL工具或者第三方任務(wù)調(diào)度工具負(fù)責(zé)執(zhí)行,此程序能夠按照預(yù)先定義的啟動(dòng)時(shí)間自動(dòng)開始或者重啟抽取功能,并且對(duì)批處理程序運(yùn)行進(jìn)行完善的監(jiān)控。觸發(fā)監(jiān)控,負(fù)責(zé)在抽取過(guò)程中不停檢查各個(gè)觸發(fā)器的運(yùn)行情況。變更數(shù)據(jù)捕獲,通過(guò)讀取系統(tǒng)審核日志或者比較大數(shù)據(jù)平臺(tái)與源系統(tǒng)間的數(shù)據(jù)值來(lái)識(shí)別數(shù)據(jù)發(fā)生的變化,并且在發(fā)生數(shù)據(jù)變更的情況下為其他抽取步驟發(fā)出提示。2、源數(shù)據(jù)適配器數(shù)據(jù)抽取應(yīng)該提供源數(shù)據(jù)適配器使得抽取流程可以與業(yè)務(wù)系統(tǒng)數(shù)據(jù)源相連接。數(shù)據(jù)適配器應(yīng)該能夠支持通過(guò)JDBC、ODBC或者XML等方式與業(yè)務(wù)數(shù)據(jù)庫(kù)取得連接。應(yīng)該注意的是,源數(shù)據(jù)適配器主要用于大數(shù)據(jù)平臺(tái)與同級(jí)業(yè)務(wù)系統(tǒng)進(jìn)行橫向數(shù)據(jù)庫(kù)連接,而大數(shù)據(jù)平臺(tái)與下級(jí)業(yè)務(wù)數(shù)據(jù)系統(tǒng)之間的縱向連接應(yīng)該由數(shù)據(jù)訪問(wèn)平臺(tái)提供支持。3、過(guò)濾與排序在與業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫(kù)獲得連接后,抽取流程應(yīng)該考慮根據(jù)需要對(duì)所獲得的數(shù)據(jù)進(jìn)行排序和過(guò)濾。例如,將不能對(duì)外界披露的信息加以排除等。一般來(lái)說(shuō),數(shù)據(jù)過(guò)濾任務(wù)應(yīng)該由電子政務(wù)系統(tǒng)所有者(即相關(guān)委辦局)完成。當(dāng)然,這是理想情況,根據(jù)朝陽(yáng)區(qū)政府和各個(gè)委辦局的實(shí)際情況,并不是說(shuō)有電子政務(wù)系統(tǒng)都有能力自行完成數(shù)據(jù)過(guò)濾和排序工作,因此,抽取服務(wù)應(yīng)該能夠在滿足一下要求的前提下幫助電子政務(wù)系統(tǒng)完成數(shù)據(jù)過(guò)濾和排序工作:僅提取大數(shù)據(jù)處理平臺(tái)需要的數(shù)據(jù)盡快進(jìn)行數(shù)據(jù)過(guò)濾能夠支持操作系統(tǒng)級(jí)數(shù)據(jù)過(guò)濾與排序,因?yàn)轭愃朴赨nix等操作系統(tǒng)提供的系統(tǒng)函數(shù)對(duì)于文本文件的處理效率要高于抽取過(guò)程。4、數(shù)據(jù)類型標(biāo)準(zhǔn)化通常而言,數(shù)據(jù)元素存放在各個(gè)源系統(tǒng)內(nèi),并且與大數(shù)據(jù)處理平臺(tái)的數(shù)據(jù)標(biāo)準(zhǔn)并不相同。例如:日期類型的數(shù)據(jù)在不同電子政務(wù)系統(tǒng)中存儲(chǔ)的形式可能各不相同(可能是“yyyy-mm-dd”或者是“yy-mm-dd”等)。這樣一來(lái),抽取過(guò)程就應(yīng)該負(fù)責(zé)將不同格式的數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化。在進(jìn)行標(biāo)準(zhǔn)化的過(guò)程中,程序應(yīng)該特別注意,因?yàn)閿?shù)據(jù)類型轉(zhuǎn)換而可能導(dǎo)致的數(shù)據(jù)丟失問(wèn)題。例如,將數(shù)據(jù)類型為浮點(diǎn)數(shù)的數(shù)據(jù)轉(zhuǎn)換為整數(shù)類型時(shí),會(huì)丟失小數(shù)點(diǎn)以后的數(shù)據(jù)。清洗清洗流程負(fù)責(zé)對(duì)數(shù)據(jù)進(jìn)行清洗與確認(rèn),使之與大數(shù)據(jù)處理平臺(tái)所要求的數(shù)據(jù)標(biāo)準(zhǔn)與質(zhì)量符合。數(shù)據(jù)清洗流程的設(shè)計(jì)可以劃分為兩類:一類是針對(duì)特定業(yè)務(wù)源系統(tǒng)編寫的專用清洗程序,另一類是適用于各類業(yè)務(wù)源系統(tǒng)以及大數(shù)據(jù)平臺(tái)清洗需求的通用程序。由于從源系統(tǒng)抽取的數(shù)據(jù)都存在不同程度的不一致,因此,可以通過(guò)使用相關(guān)規(guī)則來(lái)監(jiān)察和改善數(shù)據(jù)質(zhì)量。此外,由于很多電子政務(wù)系統(tǒng)的清洗規(guī)則和處理流程基本相同,因此應(yīng)該講關(guān)鍵的清洗功能設(shè)計(jì)為通用函數(shù)(通過(guò)變化參數(shù)來(lái)滿足不同電子政務(wù)源系統(tǒng)的清洗需求),以提高其可重用性。清洗流程的目的在于動(dòng)態(tài)監(jiān)控?cái)?shù)據(jù)質(zhì)量問(wèn)題,并且根據(jù)工作人員制定的規(guī)則來(lái)清洗其中已知的不一致性問(wèn)題。由于電子政務(wù)系統(tǒng)源數(shù)據(jù)經(jīng)常會(huì)發(fā)生變化,因此審核日志是編寫清洗流程最重要的參考。通過(guò)分析這些日志,開發(fā)人員可以建立新的業(yè)務(wù)邏輯以此來(lái)提高大數(shù)據(jù)處理平臺(tái)的數(shù)據(jù)質(zhì)量。數(shù)據(jù)清洗流程一般應(yīng)具備如下功能:解析:通過(guò)從數(shù)據(jù)記錄、文檔或者數(shù)據(jù)條目表中抽取單獨(dú)元素來(lái)確定每個(gè)數(shù)據(jù)域的結(jié)構(gòu)域內(nèi)容的過(guò)程。更正:使用成熟的算法以及附加數(shù)據(jù)源來(lái)更改數(shù)據(jù)以檢查和驗(yàn)證信息的程序。標(biāo)準(zhǔn)化:將信息按照一致的性質(zhì)進(jìn)行重組,例如:抽取電話號(hào)碼中的“.”或者“-”等符號(hào)。匹配:完成以上幾步之后,清洗流程還需要取出所抽取數(shù)據(jù)中存在的重復(fù),如使用匹配標(biāo)準(zhǔn)和特定規(guī)則來(lái)識(shí)別某些記錄是否表示同一名用戶。合并:將匹配過(guò)程中發(fā)現(xiàn)的重復(fù)數(shù)據(jù)進(jìn)行合并,并形成單獨(dú)的整合數(shù)據(jù)視圖。在清洗的過(guò)程中,應(yīng)注意一下問(wèn)題:解決空數(shù)據(jù)問(wèn)題對(duì)于那些需要清洗的數(shù)據(jù),必須為其設(shè)置默認(rèn)值以避免在源系統(tǒng)數(shù)據(jù)不可用時(shí)出現(xiàn)空值的情況。2、數(shù)據(jù)管控除非經(jīng)過(guò)各委辦局容許,業(yè)務(wù)數(shù)據(jù)均應(yīng)該置于源系統(tǒng)內(nèi),而數(shù)據(jù)清洗工作應(yīng)由相應(yīng)所有者負(fù)責(zé)完成,使之能夠控制數(shù)據(jù)清洗的業(yè)務(wù)規(guī)則。轉(zhuǎn)換轉(zhuǎn)換步驟負(fù)責(zé)對(duì)源電子政務(wù)系統(tǒng)所抽取數(shù)據(jù)進(jìn)行操作或者放大。轉(zhuǎn)換流程是數(shù)據(jù)在進(jìn)入大數(shù)據(jù)處理平臺(tái)前的最后一次進(jìn)行修改的環(huán)節(jié)。事實(shí)表的聚合以及關(guān)鍵指標(biāo)的計(jì)算都在這一步完成。數(shù)據(jù)轉(zhuǎn)換流程通常需要完成兩方面任務(wù):對(duì)數(shù)據(jù)進(jìn)行算術(shù)運(yùn)算以及通過(guò)加入外部源系統(tǒng)和各種文本操作對(duì)數(shù)據(jù)進(jìn)行放大。其中,數(shù)據(jù)放大可以根據(jù)實(shí)際需求選擇是否在轉(zhuǎn)換步驟中提供此功能,以此容許系統(tǒng)為數(shù)據(jù)集合加入額外事實(shí)與描述。為了保障進(jìn)入大數(shù)據(jù)處理平臺(tái)數(shù)據(jù)的正確性,整個(gè)ETL流程都應(yīng)該建立審核系統(tǒng)來(lái)記錄所有發(fā)生的數(shù)據(jù)變更。此外,不論是在清洗還是在轉(zhuǎn)化流程中發(fā)生的數(shù)據(jù)變更,系統(tǒng)都應(yīng)該保存原始數(shù)據(jù)以供系統(tǒng)審核使用。在下一次加載以前,轉(zhuǎn)換流程非常需要設(shè)置緩沖區(qū)來(lái)存放數(shù)據(jù)快照。在轉(zhuǎn)換的過(guò)程中應(yīng)該注意如下問(wèn)題:1、錯(cuò)誤/審核日志所有數(shù)據(jù)鍵都應(yīng)該被數(shù)據(jù)日志詳細(xì)記錄,此外,在大數(shù)據(jù)處理平臺(tái)中還應(yīng)該使用自然鍵,并且只有在加載過(guò)程中才使用代理鍵替換自然鍵,否則會(huì)引起主鍵重復(fù)問(wèn)題。2、映射設(shè)計(jì)模式由于在每一次轉(zhuǎn)換的過(guò)程中,進(jìn)行映射的數(shù)據(jù)往往都存放在系統(tǒng)內(nèi)存中,因此僅僅選擇需要的數(shù)據(jù)域而不要在轉(zhuǎn)換過(guò)程中把整張數(shù)據(jù)表均提取出來(lái),以此降低對(duì)系統(tǒng)內(nèi)存的損耗。例如,在計(jì)算公務(wù)員平均年齡的轉(zhuǎn)換過(guò)程中,最好僅提取人員信息表中人員的年齡以供計(jì)算使用,而非將人員信息表整個(gè)提取之后再計(jì)算。加載作為ETL流程的最后一步,加載流程負(fù)責(zé)將數(shù)據(jù)加載到最終的數(shù)據(jù)結(jié)構(gòu)中,這些結(jié)構(gòu)可以是維度表,也可以是事實(shí)表或者事物表等。加載步驟中的關(guān)鍵組件式代理鍵管道,代理鍵管道主要用于將加載完成的數(shù)據(jù)表內(nèi)自然鍵替換成代理鍵。在代理鍵管道內(nèi),維度表的主鍵與外鍵仍然得到保留,但是為了提升系統(tǒng)性能,在加載結(jié)束之后,一些約束條件將被去除而僅保留自然鍵進(jìn)行。數(shù)據(jù)在經(jīng)過(guò)清洗與轉(zhuǎn)換流程之后即可進(jìn)行加載。加載流程最重要的職責(zé)在于按照數(shù)據(jù)的邏輯關(guān)系進(jìn)行組織,經(jīng)過(guò)重新組織,所抽取數(shù)據(jù)即可加載到目標(biāo)表中,并且使用所生成的代理鍵替換其中的全部自然鍵、主鍵和外鍵。對(duì)于缺失或者無(wú)效的自然鍵,加載流程應(yīng)該以“不可用”或者“不適用”作為該記錄在維度表內(nèi)的代理鍵。此外,加載流程應(yīng)該具備容錯(cuò)和審核日志功能,同時(shí)能夠在出現(xiàn)問(wèn)題后繼續(xù)執(zhí)行其他程序。鍵替換應(yīng)該在數(shù)據(jù)寫入表前按照步驟進(jìn)行。由于性能的原因,代理鍵是不能再數(shù)據(jù)寫入數(shù)據(jù)表后再產(chǎn)生的。在加載過(guò)程中應(yīng)該注意一下問(wèn)題:數(shù)據(jù)鍵生成策略由于在各個(gè)特定數(shù)據(jù)庫(kù)管理系統(tǒng)內(nèi)數(shù)字序列的產(chǎn)生方法各不相同,因此數(shù)據(jù)鍵不應(yīng)該使用數(shù)據(jù)庫(kù)提供的數(shù)字序列,而應(yīng)該由ETL提供專用的鍵值生成程序。為了滿足數(shù)據(jù)鍵生成策略的需要,可以再數(shù)據(jù)庫(kù)中維護(hù)應(yīng)急使用過(guò)的最新數(shù)據(jù)鍵列表,而在產(chǎn)生新的代理鍵以前均通過(guò)查詢此列表來(lái)確定新的數(shù)據(jù)鍵值。當(dāng)然,隨著代理鍵生成的不斷增加,存放已生成鍵值的列表將會(huì)逐漸增大。因此,在掃描較大的數(shù)據(jù)表時(shí),鍵值生成的效率可能會(huì)因此受到影響。此外,大數(shù)據(jù)處理平臺(tái)還應(yīng)該提供數(shù)字序列生成器,可以讓各個(gè)服務(wù)器使用。2、數(shù)據(jù)庫(kù)性能建議為了保障ETL流程的效率,應(yīng)該在數(shù)據(jù)加載前將目標(biāo)數(shù)據(jù)表索引和回滾日志等功能禁用,直至ETL流程結(jié)束。數(shù)據(jù)庫(kù)向一張具備索引的表插入數(shù)據(jù)的過(guò)程是非常耗時(shí)的,這種情況應(yīng)該避免。此外,由于大多數(shù)數(shù)據(jù)庫(kù)管理系統(tǒng)都會(huì)預(yù)設(shè)最大事務(wù)處理數(shù),因此,ETL流程一般不需要記錄回滾操作日志。而當(dāng)偶然事件發(fā)生時(shí),將由失敗回復(fù)流程負(fù)責(zé)處理,而此服務(wù)由ETL加以控制。緩存點(diǎn)在ETL抽取過(guò)程中,緩存點(diǎn)的功能主要在于設(shè)定任務(wù)重啟點(diǎn)以及分析數(shù)據(jù)前后沿襲關(guān)系。數(shù)據(jù)緩存既可以使用平面文件實(shí)現(xiàn)也可以使用數(shù)據(jù)表存放,但是通常不直接鏡像目標(biāo)數(shù)據(jù)表的數(shù)據(jù)結(jié)構(gòu)。設(shè)置緩存點(diǎn)時(shí)應(yīng)該注意,至少應(yīng)該在數(shù)據(jù)抽取和加載兩個(gè)環(huán)節(jié)任務(wù)完成后放置數(shù)據(jù)緩存。當(dāng)然,是否建立緩存點(diǎn)還依賴于ETL架構(gòu),在綜合性的大型數(shù)據(jù)處理平臺(tái)建設(shè)時(shí),設(shè)立獨(dú)立的數(shù)據(jù)緩存點(diǎn)是整個(gè)大數(shù)據(jù)處理平臺(tái)的性能和可用性都是非常重要的,而對(duì)于那些為滿足專門需求而建立的小型數(shù)據(jù)處理平臺(tái)則不必建立緩存點(diǎn)。當(dāng)然,是否建立緩存點(diǎn)應(yīng)該由設(shè)計(jì)和開發(fā)人員決定,而非取決于業(yè)務(wù)需求。在數(shù)據(jù)ETL的過(guò)程中,如果要進(jìn)行以下工作,則應(yīng)考慮建立緩存區(qū):預(yù)提交點(diǎn)實(shí)時(shí)ETL選項(xiàng)ETL斷點(diǎn)回復(fù)數(shù)據(jù)沿襲分析輔助調(diào)試工具增量分析全過(guò)程跟蹤數(shù)據(jù)測(cè)試ETL流程在緩存點(diǎn)設(shè)計(jì)的過(guò)程中應(yīng)該注意以下問(wèn)題:使用平面文件還是數(shù)據(jù)表緩存數(shù)據(jù)將緩存寫入平面文件具備一定的優(yōu)勢(shì),但通常來(lái)說(shuō),為了保障大數(shù)據(jù)處理平臺(tái)的效率,應(yīng)該盡量減少系統(tǒng)I/O。最新的分布式數(shù)據(jù)庫(kù)技術(shù)已經(jīng)能夠高效操作大數(shù)據(jù)表。同時(shí),盡管將數(shù)據(jù)寫入平面文件的效率非常高,但是更新平面文件內(nèi)的數(shù)據(jù)卻非常困難,甚至是不能實(shí)現(xiàn)的任務(wù)。然而,對(duì)數(shù)據(jù)庫(kù)表進(jìn)行相應(yīng)修改操作卻效率高很多。另外一個(gè)需要考慮的因素是緩存點(diǎn)開發(fā)測(cè)試和審核的便捷性,從這方面考慮,從數(shù)據(jù)庫(kù)中查詢某些數(shù)據(jù)要遠(yuǎn)遠(yuǎn)簡(jiǎn)單于解析整個(gè)緩存文件。緩存點(diǎn)設(shè)計(jì)盡量簡(jiǎn)單緩存表和文件必須保持格式一致,并盡量保持簡(jiǎn)單。數(shù)據(jù)標(biāo)注服務(wù)利用標(biāo)簽管理功能,按照標(biāo)注要求對(duì)于數(shù)據(jù)進(jìn)行標(biāo)注服務(wù)?;A(chǔ)標(biāo)簽管理以列表形式和智能推薦形式將平臺(tái)中設(shè)置的基礎(chǔ)標(biāo)簽進(jìn)行呈現(xiàn)。列表形式是將所有的基礎(chǔ)標(biāo)簽一一列出,并可以按照熱度進(jìn)行排序。智能推薦形式是指根據(jù)最近時(shí)間段內(nèi)的標(biāo)簽的訪問(wèn)頻率、搜索頻率等,以輪播的形式循環(huán)展現(xiàn)熱門標(biāo)簽。另外,提供標(biāo)簽收藏功能,用戶可以將自己感興趣的標(biāo)簽加入到收藏夾。標(biāo)簽關(guān)系展現(xiàn)指按標(biāo)簽類編制的圖集,采用JavaScript結(jié)合Html5技術(shù),通過(guò)標(biāo)簽將相關(guān)聯(lián)的數(shù)據(jù)目錄關(guān)聯(lián)在動(dòng)圖中展現(xiàn)給用戶,形成豐富數(shù)據(jù)盛筵的展示效果,做到通過(guò)一張圖就可以將某一條數(shù)據(jù)的關(guān)聯(lián)數(shù)據(jù)、以及數(shù)據(jù)之間的關(guān)系全部展示出來(lái)。在此功能中,用戶可以任意選擇基礎(chǔ)標(biāo)簽庫(kù)中的標(biāo)簽,與此相關(guān)聯(lián)的數(shù)據(jù)目錄會(huì)以立體圖的形式展現(xiàn)出來(lái)。標(biāo)簽云標(biāo)簽云模塊通過(guò)標(biāo)簽訪問(wèn)次數(shù)統(tǒng)計(jì)出熱門標(biāo)簽,讓平臺(tái)運(yùn)維人員了解哪些標(biāo)簽是訪問(wèn)頻率高的、是符合用戶訪問(wèn)習(xí)慣的,并結(jié)合用戶的搜索記錄,優(yōu)化標(biāo)簽設(shè)置,使之更通用和人性化。通過(guò)對(duì)市級(jí)數(shù)據(jù)庫(kù)共享數(shù)據(jù)訪問(wèn)指數(shù)的綜合分析,可以得出哪些部門的哪些類型的數(shù)據(jù)是數(shù)量豐富、是質(zhì)量良好的,也可以得出哪些部門共享開放的哪類數(shù)據(jù)是使用率較低的。通過(guò)將政府部門共享開放數(shù)據(jù)指數(shù)公開化和部門之間的對(duì)比分析,推動(dòng)政府各部門主動(dòng)的、積極的開放更多的、更優(yōu)質(zhì)的數(shù)據(jù)資源。作業(yè)調(diào)度運(yùn)維運(yùn)維概覽主要用來(lái)展示調(diào)度任務(wù)的指標(biāo)數(shù)據(jù)情況,目前包括任務(wù)完成情況、任務(wù)運(yùn)行情況、任務(wù)執(zhí)行時(shí)長(zhǎng)排行、調(diào)度任務(wù)數(shù)量趨勢(shì)、近一月出錯(cuò)排行、任務(wù)類型分布、30天基線破線次數(shù)排行。數(shù)據(jù)運(yùn)維監(jiān)控監(jiān)控運(yùn)維為數(shù)據(jù)開發(fā)者和維護(hù)者提供一站式的數(shù)據(jù)運(yùn)維管控能力,可自主管理作業(yè)的部署、作業(yè)優(yōu)先級(jí)、以及生產(chǎn)監(jiān)控運(yùn)維平臺(tái)提供數(shù)據(jù)監(jiān)控運(yùn)維、任務(wù)運(yùn)行情況監(jiān)控、異常情況告警、日常運(yùn)維數(shù)據(jù)統(tǒng)計(jì)等功能。運(yùn)維任務(wù)管理可視化展示調(diào)度任務(wù)DAG圖,極大地方便運(yùn)維管理;1)支持任務(wù)運(yùn)行狀態(tài)監(jiān)控告警;2)支持單任務(wù)重跑、多任務(wù)重跑、kill、置成功、暫停等操作;3)支持列表和DAG兩種模式;4)可以針對(duì)周期運(yùn)行。數(shù)據(jù)質(zhì)量檢查及異常處置數(shù)據(jù)質(zhì)量檢查針對(duì)實(shí)時(shí)流數(shù)據(jù)需要提供數(shù)據(jù)質(zhì)量管理功能,即提供對(duì)實(shí)時(shí)流的數(shù)據(jù)質(zhì)量規(guī)則的設(shè)置、維護(hù)、調(diào)度、優(yōu)化等規(guī)則的管理功能,以及對(duì)實(shí)時(shí)流數(shù)據(jù)源接口關(guān)鍵數(shù)據(jù)、數(shù)據(jù)實(shí)體和處理過(guò)程的監(jiān)控告警,輔助數(shù)據(jù)質(zhì)量管理人員快速定位問(wèn)題的原因及處理方案,并定期生成針對(duì)實(shí)時(shí)流數(shù)據(jù)的數(shù)據(jù)質(zhì)量評(píng)估報(bào)告的功能。數(shù)據(jù)質(zhì)量定制化開發(fā)通過(guò)自定義擴(kuò)展規(guī)則能力,靈活方便的自定義擴(kuò)展能力,可以靈活定制質(zhì)量監(jiān)控的規(guī)則、問(wèn)題數(shù)據(jù)的檢測(cè)規(guī)則和問(wèn)題數(shù)據(jù)的清洗回收的方式。數(shù)據(jù)異常管理主要針對(duì)在市級(jí)數(shù)據(jù)庫(kù)在形成和使用過(guò)程中,每個(gè)數(shù)據(jù)處理環(huán)節(jié)出現(xiàn)的技術(shù)異常問(wèn)題發(fā)現(xiàn)及處理的功能。主要包括異常規(guī)則管理、異常問(wèn)題列表、人工處理管理、系統(tǒng)處理管理、異常處理統(tǒng)計(jì)分析等功能。異常對(duì)接管理對(duì)接數(shù)據(jù)交換總線、數(shù)據(jù)集成總線、數(shù)據(jù)服務(wù)總線系統(tǒng)中異常日志模塊,對(duì)各子系統(tǒng)相關(guān)異常管理信息進(jìn)行集成,異常對(duì)接管理對(duì)相關(guān)子系統(tǒng)接口進(jìn)行管理維護(hù)。異常問(wèn)題列表展示異常問(wèn)題信息,按等級(jí)進(jìn)行分類或主動(dòng)推送,同時(shí)對(duì)異常問(wèn)題進(jìn)行歸類整理,并定義規(guī)則進(jìn)行選擇性忽略或提醒。人工處理管理人工處理管理是記錄針對(duì)異常信息,人工處理所登記的臺(tái)賬信息,可按照異常分類進(jìn)行分類授權(quán),實(shí)現(xiàn)指定問(wèn)題的指定人員處理,同時(shí),構(gòu)建臺(tái)賬信息也為未來(lái)實(shí)現(xiàn)統(tǒng)一的運(yùn)營(yíng)管理平臺(tái)預(yù)留相關(guān)服務(wù)接口。系統(tǒng)處理管理系統(tǒng)處理管理是針對(duì)異常信息集成的各子平臺(tái)系統(tǒng)處理結(jié)果的收集,該類信息往往不需要人工干預(yù),比如數(shù)據(jù)自動(dòng)重發(fā)等。異常處理統(tǒng)計(jì)分析按照異常分類、處理情況、時(shí)間、等級(jí)等維度進(jìn)行分類統(tǒng)計(jì),以圖表的形式展現(xiàn)便于管理人員匯總分析。數(shù)據(jù)分析應(yīng)用服務(wù)數(shù)據(jù)共享開放服務(wù)資源訂閱和訂閱審批資源訂閱是指用戶可以訂閱某個(gè)目錄下的所有資源,并對(duì)已經(jīng)產(chǎn)生的訂閱申請(qǐng)單具有查看,編輯和撤消操作。申請(qǐng)訂閱審批通過(guò)后,點(diǎn)擊目錄后,出現(xiàn)“查看數(shù)據(jù)實(shí)體”按紐,可以查看該目錄資源的數(shù)據(jù)實(shí)體。資源訂閱審批功能主要實(shí)現(xiàn)訂閱申請(qǐng)單審批狀態(tài)的查看、查詢和資源訂閱申請(qǐng)審批功能。平臺(tái)管理員可以進(jìn)行的審批操作包括:受理、駁回。審批用戶可以進(jìn)行的審批操作包括:通過(guò)、未通過(guò)。具有權(quán)限的訂閱用戶只能夠查看自己訂閱資源的審批狀態(tài)。實(shí)體資源查看資源實(shí)體查看是指平臺(tái)管理員和具有查看權(quán)限的用戶,對(duì)數(shù)據(jù)資源實(shí)體進(jìn)行查看的功能。平臺(tái)管理員用戶可以查看所有已發(fā)布的資源實(shí)體數(shù)據(jù)。其他用戶必須通過(guò)授權(quán)或?qū)υ撚脩粲嗛喦彝ㄟ^(guò)審批的數(shù)據(jù)資源進(jìn)行查看。資源實(shí)體查看的顯示內(nèi)容,根據(jù)用戶選擇的資源目錄提供相應(yīng)的數(shù)據(jù)資源實(shí)體信息列表查看功能,同時(shí)資源實(shí)體查看具有查詢功能。共享目錄管理交換目錄中關(guān)聯(lián)元數(shù)據(jù)和接口服務(wù),便于目錄數(shù)據(jù)的管理和查看。具體包括:交換單位新增、修改、刪除、排序;業(yè)務(wù)系統(tǒng)分類新增、修改、刪除、排序;業(yè)務(wù)系統(tǒng)新增、修改、刪除、排序;元數(shù)據(jù)的建立、排序;接口服務(wù)新增、修改、刪除、排序共享接口服務(wù)管理接口管理功能對(duì)平臺(tái)中涉及到各種數(shù)據(jù)交換接口進(jìn)行管理,提供數(shù)據(jù)接口的維護(hù)功能,提供靈活的數(shù)據(jù)接口定義,方便系統(tǒng)擴(kuò)展。用戶根據(jù)自己?jiǎn)挝坏慕粨Q業(yè)務(wù)進(jìn)行分類,然后在相應(yīng)分類中注冊(cè)交換業(yè)務(wù)系統(tǒng),交換業(yè)務(wù)系統(tǒng)根據(jù)定義的元數(shù)據(jù),發(fā)布接口服務(wù),在接口服務(wù)中確定接口類型和接口地址。在收集已建和待建的眾多應(yīng)用系統(tǒng)的數(shù)據(jù)交換接口信息后,提供面向應(yīng)用系統(tǒng)開發(fā)接口,制定數(shù)據(jù)交換接口規(guī)范,已有或是待建的應(yīng)用系統(tǒng)可根據(jù)接口規(guī)范把接口信息加入到接口管理中。系統(tǒng)整合的開發(fā)總的原則:對(duì)于接入到數(shù)據(jù)交換平臺(tái)需要進(jìn)行數(shù)據(jù)交換的系統(tǒng),一方的程序不直接操作另一方的數(shù)據(jù)庫(kù),而是調(diào)用另一方的提供的標(biāo)準(zhǔn)數(shù)據(jù)接口。被整合的業(yè)務(wù)系統(tǒng)要提供的接口和開發(fā)的程序:共享目錄的接收地址;業(yè)務(wù)類型接口配置地址;消息通知接口;調(diào)用并解析數(shù)據(jù)的程序;狀態(tài)返回程序;中間狀態(tài)返回接口。數(shù)據(jù)落地?cái)?shù)據(jù)落地需要進(jìn)行數(shù)據(jù)交換的數(shù)據(jù),根據(jù)數(shù)據(jù)形態(tài)不同,容量不同,會(huì)有不同的存儲(chǔ)需求。從中心平臺(tái)的角度,數(shù)據(jù)量較大的數(shù)據(jù),從數(shù)據(jù)提供者處獲取到中心平臺(tái)后,應(yīng)該進(jìn)行落地存儲(chǔ),這樣可以保證同時(shí)為多個(gè)數(shù)據(jù)使用
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 新能源汽車智能化駕駛技術(shù)研究-洞察分析
- 糖耐量異?;颊叩娘嬍掣深A(yù)研究-洞察分析
- 圖像隱私保護(hù)與安全-洞察分析
- 異常值識(shí)別與處理-洞察分析
- 投資咨詢行業(yè)市場(chǎng)細(xì)分研究-洞察分析
- 油氣田加工協(xié)同-洞察分析
- 物聯(lián)網(wǎng)與人工智能融合應(yīng)用-洞察分析
- 有線電視網(wǎng)絡(luò)IPv6升級(jí)改造過(guò)程中的技術(shù)創(chuàng)新研究-洞察分析
- 新型隧道襯砌材料研究-洞察分析
- 水資源管理與地理信息-洞察分析
- 2024年7月國(guó)家開放大學(xué)法律事務(wù)??啤斗勺稍兣c調(diào)解》期末紙質(zhì)考試試題及答案
- 護(hù)士條例解讀
- 醫(yī)務(wù)人員崗前培訓(xùn)課件
- 檢修工(題庫(kù))附答案
- 2025屆高考語(yǔ)文一輪復(fù)習(xí):小說(shuō)情節(jié)結(jié)構(gòu)之伏筆 練習(xí)題(含答案)
- 《化學(xué)實(shí)驗(yàn)室安全》課程教學(xué)大綱
- 2024年人教版初二地理上冊(cè)期末考試卷(附答案)
- 《一元一次方程》復(fù)習(xí)學(xué)案
- 三甲醫(yī)院面試自我介紹課件
- 單招鐵路基礎(chǔ)知識(shí)題庫(kù)單選題100道及答案解析
- 高低壓供配電設(shè)備檢查和檢修保養(yǎng)合同3篇
評(píng)論
0/150
提交評(píng)論