集團大數(shù)據(jù)平臺項目實施整體方案

1、集團大數(shù)據(jù)平臺工程實施整體方案1.1 工程實施總體目標我方承諾根據(jù)集團集團公司對工程建設的要求,認真研 究調(diào)研,制定切實有效的實施方案,并根據(jù)實際情況,提交 相應實施方案文檔,其中技術文檔內(nèi)容主要包括工程需求分 析文檔、系統(tǒng)設計及技術文檔、開發(fā)測試及部署規(guī)劃、試點 及系統(tǒng)上線規(guī)劃及具體內(nèi)容等.治理文檔主要包括人員及組 織治理、環(huán)境及資源需求方案、設備規(guī)劃及使用、工程進度 方案及里程碑治理、過程質(zhì)量及風險限制方案以及培訓交接 方案等.我方將根據(jù)工程進度,及時分配調(diào)度充足人員入場,在 甲方監(jiān)督下,在符合相關監(jiān)管部門的審計制度和集團內(nèi)控審 計要求的前提下,根據(jù)甲方工程實施方案及進度要求,完成 大數(shù)據(jù)

2、平臺的搭建、應用開發(fā)、聯(lián)調(diào)測試、集成部署和培訓 等方面的工作.1.2 工程治理工程治理由我方工程經(jīng)理以及集團工程經(jīng)理在所方案實施的工程過程中執(zhí)行.工作范圍確定工程方案、進行工程方案限制；監(jiān)控工程狀態(tài)、產(chǎn)生定期的工程狀態(tài)報告；負責工程期間的溝通治理,召集并主持定期的工程狀況會議；對工程范圍、本錢、風險、人力、干系人等進行全過程的管控；其它與工程相關的事務.我方的責任負責與本公司內(nèi)部有關的協(xié)調(diào)工作；負責與集團的工程經(jīng)理合作,共同負責工程中的協(xié)調(diào)工作；與集團的工程經(jīng)理協(xié)調(diào)配合, 完成以上工程治理工作.集團的責任負責與本公司內(nèi)部有關的協(xié)調(diào)工作；負責與我方的工程經(jīng)理合作,共同負責工程中的協(xié)調(diào)工作；與我方

3、的工程經(jīng)理協(xié)調(diào)配合, 完成以上工程治理工作.1.3 業(yè)務確認工作范圍業(yè)務需求確認,對大數(shù)據(jù)平臺的業(yè)務需求結(jié)合當前實 際業(yè)務情況進行確認.工作完成后需提交的結(jié)果集團大數(shù)據(jù)平臺需求列表我方的責任指定相關業(yè)務/技術參謀和用戶的相關業(yè)務部門進行 業(yè)務確認、分析執(zhí)行以上陳述的工作,并提交階段性工作結(jié)果集團的責任指定參與業(yè)務需求確認的工程組和業(yè)務部門的相關人 員協(xié)調(diào)業(yè)務需求確認確認過程中的業(yè)務人員、時間安排 等有關事項對集團大數(shù)據(jù)平臺業(yè)務需求列表進行確認1.4 數(shù)據(jù)調(diào)研工作范圍分析集團大數(shù)據(jù)平臺需求列表,調(diào)查集團該期工程相 關數(shù)據(jù)源情況,確定功能需求列表并編制功能規(guī)格說 明書,分析數(shù)據(jù)工作完成后需提交的結(jié)

4、果集團大數(shù)據(jù)平臺功能列表集團大數(shù)據(jù)平臺需求功能規(guī)格說明書我方的責任進行集團大數(shù)據(jù)平臺系統(tǒng)需求說明書和數(shù)據(jù)源信息的 分析,確定功能需求列表,編制需求功能規(guī)格說明書提交功能需求列表、需求功能規(guī)格說明書集團的責任指定參與需求分析、數(shù)據(jù)源分析的工程組和業(yè)務部門 的相關人員協(xié)調(diào)需求分析與數(shù)據(jù)調(diào)研過程中的業(yè)務人員、時間安 排等有關事項提供進行數(shù)據(jù)源分析的相關信息簽署最后形成的功能需求列表 根據(jù)需要,決定是否進行并組織評審?集團大數(shù)據(jù)平臺需求功能規(guī)格說明書?1.5系統(tǒng)設計階段我方將配合甲方完成系統(tǒng)設計階段的調(diào)研、座談及總結(jié) 工作,根據(jù)甲方要求認真做好需求分析工作、系統(tǒng)設計工作、模型設計工作等,尤其對于量收系

5、統(tǒng)進行權(quán)限細致的摸查和 匯總,梳理系統(tǒng)各項應用及與其它系統(tǒng)接口,編寫應用說明 及接口標準,形成完整可行的遷移方案,將各方面工作內(nèi)容 形成文檔或標準,提交甲方.工作范圍：對量收系統(tǒng)進行詳細摸查梳理；制定量收系統(tǒng)遷移部署方案；根據(jù)甲方業(yè)務需求和以往的經(jīng)驗,設計邏輯數(shù)據(jù)模型(LDM );提交系統(tǒng)邏輯數(shù)據(jù)模型 Erwin文件；進行邏輯數(shù)據(jù)模型的維護治理；基于所設計的邏輯數(shù)據(jù)模型,對物理數(shù)據(jù)模型進行設計；提交系統(tǒng)物理數(shù)據(jù)模型 Erwin文件；進行相關知識、技術的轉(zhuǎn)移；進行物理數(shù)據(jù)模型維護；根據(jù)業(yè)務需求,進行系統(tǒng)功能概要設計和詳細設計；提交概要設計說明書；提交詳細設計說明書;1.6 集成部署階段我方將根據(jù)

6、需求及實際情況,完成軟硬件集成方案的編 寫并完成實施部署工作.工作范圍：提供軟硬件必要的選型測試及選型方案建議；編寫軟硬件集成及網(wǎng)絡配置方案；對甲方采購的系統(tǒng)軟硬件提供現(xiàn)場安裝調(diào)試效勞；對自有軟件提供安裝介質(zhì)和授權(quán)許可證；1.7 ETL過程設計工作范圍1本期工程所涉及的來自各業(yè)務系統(tǒng)的數(shù)據(jù)抽取由各業(yè)務系統(tǒng)開發(fā)方負責之后、為進行數(shù)據(jù)清洗、 轉(zhuǎn)換、質(zhì)量檢查、數(shù)據(jù)歸并、加載等所必需的技術設計.2大數(shù)據(jù)平臺數(shù)據(jù)加工規(guī)那么整理與確認3進行源數(shù)據(jù)到物理表的映射4設計數(shù)據(jù)轉(zhuǎn)換與加載的標準,包括加載流程.5設計ETL治理過程工作完成后需提交的結(jié)果ETL設計文檔包括數(shù)據(jù)清洗、轉(zhuǎn)換、加載流程與加 載程序設計等內(nèi)容

7、我方的責任大數(shù)據(jù)平臺數(shù)據(jù)加工規(guī)那么整理與確認設計來自各業(yè)務系統(tǒng)、其它數(shù)據(jù)源的數(shù)據(jù)的轉(zhuǎn)換與加 載標準,包括加載流程.設計ETL治理過程集團的責任協(xié)助設計數(shù)據(jù)的轉(zhuǎn)換與加載標準,包括加載流程協(xié)助設計ETL治理過程1.8 ETL開發(fā)與測試工作范圍1本期工程所涉及的、來自各業(yè)務系統(tǒng)的業(yè)務數(shù)據(jù)從數(shù)據(jù) 源系統(tǒng)抽取之后、經(jīng)過清洗、轉(zhuǎn)換、質(zhì)量檢查、數(shù)據(jù)歸并、 加載所需要的開發(fā),以及其它數(shù)據(jù)加工和全國中央、省中央 功能所需要的后臺開發(fā)2加載治理流程開發(fā)3修改、調(diào)整和測試 ETL腳本工作完成后需提交的結(jié)果1全部ETL程序/腳本文件2加載有樣本數(shù)據(jù)的數(shù)據(jù)庫3 ETL流程治理限制我方的責任1執(zhí)行以上陳述的工作,提交階段

8、性工作結(jié)果2進行有關ETL的知識轉(zhuǎn)移集團的責任1按工程進度要求負責從各數(shù)據(jù)源系統(tǒng)抽取并提供樣本數(shù)據(jù)ASCII代碼文本文件2協(xié)助并參與各業(yè)務系統(tǒng)抽取數(shù)據(jù)的質(zhì)量檢查3協(xié)助并參與對數(shù)據(jù)的轉(zhuǎn)換、加載標準的設計4協(xié)助并參與對數(shù)據(jù)的轉(zhuǎn)換、加載程序/腳本的開發(fā)5協(xié)助并參與對加載了樣本數(shù)據(jù)的數(shù)據(jù)庫進行測試6配合進行有關ETL的知識轉(zhuǎn)移7簽署工程實施文件1.9系統(tǒng)開發(fā)階段我方在工程實施中將依據(jù)需求及功能原型,采取快速迭 代開發(fā)法進行系統(tǒng)開發(fā).并在甲方參與情況下,依據(jù)開發(fā)計 劃及里程碑節(jié)點,對階段交付成果進行審核和測試,識別由 與進度方案及質(zhì)量方案的偏差并加以修改.開發(fā)過程及開發(fā)環(huán)境全程向甲方開放,便于雙方溝通交

9、 流,也便于工程技術、方法及成果向甲方人員移交工作范圍1根據(jù)系統(tǒng)功能需求列表、需求功能規(guī)格說明書開發(fā)相關 功能2定期審核、修改、調(diào)整和測試功能3提交全部功能的源代碼和可執(zhí)行代碼4進行大數(shù)據(jù)平臺全部功能的開發(fā)和測試1.10系統(tǒng)測試階段在系統(tǒng)開發(fā)階段,我方將根據(jù)方案及實際進度,合理安 排各階段軟件測試工作,包括功能測試、性能測試、集成測 試及驗收測試等.在設計及實施和階段對于相應測試提交測 試方案,規(guī)劃好測試范圍、參數(shù)、工具、測試方法、方案以 及異常處理方法等內(nèi)容,并在測試結(jié)束后提交包括測試方 法、時間、過程、結(jié)果及結(jié)論等在內(nèi)的測試報告.我方將根據(jù)ISO9000的相關標準向甲方提供以下系統(tǒng) 測試相

10、關文檔測試方案:測試方案由甲方和我方共同制定.包括：測試范圍、參數(shù)、測試方法、方案以及異常處理方法等.?系統(tǒng)測試方案?得到甲方同意方可執(zhí)行；測試設計：測試設計說明由測試員提供,為在工程設計階段定義的 軟件需求規(guī)定測試方法和步驟,規(guī)定測試采用的工具.?系 統(tǒng)測試方案?得到甲方同意方可執(zhí)行.測試實例及說明：測試實例及說明由測試員提供,主要是對每一個測試實 例規(guī)定輸入、預期結(jié)果和實施條件；測試報告：?測試報告?由測試員提供,包括測試方法、時間、過程、結(jié)果及結(jié)論等內(nèi)容,并要得到甲方確實認；止匕外,整個系統(tǒng)測試過程中遵守以下規(guī)定：測試員按測試標準進行測試,并把結(jié)果記錄在系統(tǒng)測試結(jié)果表中；當修改軟件以解決

11、遇到的問題時,應遵照變更限制的流程進行；任何軟件問題被修改后,測試員和開發(fā)者合作制定下一輪測試方案,并確定哪些實例和規(guī)程將被重復； 當所有的軟件問題均被解決后,對測試的結(jié)果進行評審.1.11系統(tǒng)上線及驗收由甲方和我方共同參與,組成工程驗收小組,制定驗 收細那么和驗收方式,建立驗收檔案,主要內(nèi)容包括驗收內(nèi) 容、功能、測試結(jié)果、工程負責人、驗收人等.如果奧項 功能或設備驗收通過,工程負責人和驗收人應簽字認可. 如果莫項功能或設備驗收未通過,應記錄下原因并且提由 整改舉措.依據(jù)合同的有關規(guī)定,對系統(tǒng)根據(jù)如下的步驟 實施驗收：1我方自行組織完成功能、性能和壓力測試并通過.2我方提由系統(tǒng)驗收申請.3制定

12、系統(tǒng)驗收方案.4雙方成立系統(tǒng)驗收小組.5進行系統(tǒng)驗收測試.6進行系統(tǒng)初驗評審.7形成系統(tǒng)初驗報告.8產(chǎn)品移交.9試運行.10進行系統(tǒng)終驗評審.系統(tǒng)驗收:根據(jù)工程的方案要求,完成以下工作并經(jīng)過正式的系 統(tǒng)測試后,由我方向甲方遞交由甲方最終用戶簽字的上線 運行證書,經(jīng)甲方認可后,甲方即組織工程初步驗收,并 形成初步驗收報告,驗收合格甲方提供系統(tǒng)初驗合格證書:系統(tǒng)初驗前的系統(tǒng)軟、非本合同相關硬件設施應滿足 如下條件：1所有相關硬件設備包括：效勞器、存儲、網(wǎng)絡設備 安裝到位并投入使用.2所有軟件平臺安裝并運行正常.3系統(tǒng)各物理模塊和邏輯模塊經(jīng)過測試運行正常.4系統(tǒng)經(jīng)過集成測試并運行正常.5系統(tǒng)經(jīng)過壓力

13、測試并運行正常.6業(yè)務軟件和業(yè)務處理流程經(jīng)過用戶認可.在系統(tǒng)進行驗收前,應保證先提交以下文檔：7系統(tǒng)實施方案8業(yè)務需求列表9系統(tǒng)設計說明書11 物理模型12前端應用設計說明書概要設計和詳細設計13工程模塊測試、集成測試、壓力測試報告14應用系統(tǒng)測試報告15用戶手冊16培訓手冊17工程治理文檔18用戶認可報告.進行驗收主要觀察系統(tǒng)和應用是否到達以下目標或滿足下列標準：檢查工程是否到達合同及附件的各項指標要求；根據(jù)技術標準、建設標準,檢查各項技術指標是否達到要求；對系統(tǒng)或設備進行測試是否到達設計要求.1.12 提交物我方在本工程實施建議方案中所指明的效勞工程的提交件為:1.規(guī)劃階段大數(shù)據(jù)平臺工程實

14、施方案2.規(guī)劃階段大數(shù)據(jù)平臺工程人員名單3.規(guī)劃階段大數(shù)據(jù)平臺工程建設方案4.需求階段大數(shù)據(jù)平臺業(yè)務需求列表5.需求階段大數(shù)據(jù)平臺功能需求列表6.需求階段大數(shù)據(jù)平臺業(yè)務需求功能規(guī)格說明書7.需求階段大數(shù)據(jù)平臺業(yè)務系統(tǒng)功能列表FRL8.系統(tǒng)設計階段大數(shù)據(jù)平臺環(huán)境部署方案9.系統(tǒng)設計階段大數(shù)據(jù)平臺邏輯數(shù)據(jù)模型10.系統(tǒng)設計階段大數(shù)據(jù)平臺物理模型11.系統(tǒng)設計階段大數(shù)據(jù)平臺數(shù)據(jù)庫詳細設計說明書12.系統(tǒng)設計階段大數(shù)據(jù)平臺ETL設計說明書概要設計和詳細設計13.系統(tǒng)設計階段大數(shù)據(jù)平臺前端應用設計說明書概要設計和詳細設計14.開發(fā)測試階段大數(shù)據(jù)平臺功能測試用例15.開發(fā)測試階段大數(shù)據(jù)平臺業(yè)務測試報告16

15、.開發(fā)測試階段大數(shù)據(jù)平臺模塊性能測試報告報告17.開發(fā)測試階段大數(shù)據(jù)平臺前端應用程序說明書18.開發(fā)測試階段大數(shù)據(jù)平臺ETL程序說明書19.開發(fā)測試階段大數(shù)據(jù)平臺接口說明20.上線及驗收階段大數(shù)據(jù)平臺用戶操作手冊21.上線及驗收階段系統(tǒng)上線和試運行方案22.上線及驗收階段大數(shù)據(jù)平臺培訓手冊23.上線及驗收階段大數(shù)據(jù)平臺系統(tǒng)安裝手冊24.上線及驗收階段大數(shù)據(jù)平臺日常維護手冊25.上線及驗收階段大數(shù)據(jù)平臺廠商建設報告26.上線及驗收階段大數(shù)據(jù)平臺廠商容災方案1.13 系統(tǒng)的交接與知識轉(zhuǎn)移我方負責將集團大數(shù)據(jù)平臺相關知識與技術向甲方人 員轉(zhuǎn)移,完成大數(shù)據(jù)平臺開發(fā)、測試、運行維護、分析挖 掘等技術向甲方人員的轉(zhuǎn)移,滿足甲方開展后續(xù)數(shù)據(jù)工作 的需要.在工程實施過程中,我方將通過多種方式向業(yè)主方進 行系統(tǒng)技術知識的轉(zhuǎn)移,通過雙方的合作和努力,爭取達 到業(yè)主方可以獨立進行系統(tǒng)維護的水平,承當未來整個集 團大數(shù)據(jù)平臺的運行維護效勞.1人員參與方式.工程過程中,甲方技術人員全程參 與包括設計和開發(fā)的整個過程,我方技術人員與集團技術人員將在工程過程中,進行從設計、開發(fā)測試到上線的全 流程密切交流,保證甲方技術人員掌握系統(tǒng)各方面知識.2培訓方式