大數(shù)據(jù)運(yùn)營服務(wù)規(guī)劃方案

1、大數(shù)據(jù)運(yùn)營服務(wù)規(guī)劃方案目錄 TOC o 1-5 h z HYPERLINK l bookmark1 o Current Document h 1第三方應(yīng)用對接32數(shù)據(jù)遷移42.1數(shù)據(jù)遷移的策略42. 2數(shù)據(jù)遷移流程圖62. 3數(shù)據(jù)遷移的實(shí)現(xiàn)63.9 HYPERLINK l bookmark13 o Current Document h 4資源調(diào)配9 HYPERLINK l bookmark16 o Current Document h 5應(yīng)用數(shù)據(jù)錄入9 HYPERLINK l bookmark19 o Current Document h 6資源更新與現(xiàn)場技術(shù)服務(wù)11 HYPERLINK l

2、bookmark22 o Current Document h 7運(yùn)營服務(wù)標(biāo)準(zhǔn)131第三方應(yīng)用對接第三方公司需要根據(jù)自己的開發(fā)者屬性進(jìn)行選擇。填寫完整正確的開發(fā)者注冊信息后，提交申請,管理員完成開發(fā)者身份和產(chǎn)品審核，并由負(fù)責(zé)人進(jìn)行二次復(fù)核,B3審核通過后服務(wù)方需提供接口，配合第三方公司進(jìn)行對接工作,并配合第三方公司進(jìn)行調(diào)試。體流程如下所示:注冊填寫注冊資料不通過提交審核審核狀態(tài)通過注冊成功結(jié)束據(jù)遷移2. 1數(shù)據(jù)遷移的策略數(shù)據(jù)遷移的策略是指采用什么方式進(jìn)行數(shù)據(jù)的遷移。結(jié)合不 同的遷移方法，主要有一次遷移、分次遷移、先錄后遷、先遷 后補(bǔ)等幾種方式可供選擇。一次遷移一次遷移是通過數(shù)據(jù)遷移工具或遷移程

3、序?qū)⑿枰臍v史數(shù)據(jù)一次性全部遷移到新系統(tǒng)中。一次遷移的優(yōu)點(diǎn)是遷移實(shí)施的過程短，相對分次遷移，遷移時(shí)涉及的問題少，風(fēng)險(xiǎn)相對比較低。其缺點(diǎn)工作強(qiáng)度比較大,由于實(shí)施遷移的人員需要一直監(jiān)Hi控遷移的過程，如果遷移所需的時(shí)間比較長，工作人員會很疲勞。一次遷移的前提是新舊系統(tǒng)數(shù)據(jù)庫差異不大，允許的宕機(jī) 時(shí)間內(nèi)可以完成所有數(shù)據(jù)量的遷移。分次遷移分次遷移是通過數(shù)據(jù)遷移工具或遷移程序，將需要的歷史數(shù) 據(jù)分幾次遷移到新系統(tǒng)中。分次遷移可以將任務(wù)分開，有效地 解決了數(shù)據(jù)量大和宕機(jī)時(shí)間短之間的矛盾。但是分次切換導(dǎo)致 數(shù)據(jù)多次合并，增加了出錯(cuò)的概率，同時(shí)為了保持整體數(shù)據(jù)的 一致性，分次遷移時(shí)需要對先切換的數(shù)據(jù)進(jìn)行同步，

4、增加了遷 移的復(fù)雜度。分次遷移一般在系統(tǒng)切換前先遷移將靜態(tài)數(shù)據(jù)和 變化不頻繁的數(shù)據(jù)，例如代碼、用戶信息等，然后在系統(tǒng)切換 時(shí)遷移動態(tài)數(shù)據(jù)，例如交易信息，對于靜態(tài)數(shù)據(jù)遷移之后發(fā)生 的數(shù)據(jù)變更，可以每天同步到新系統(tǒng)中，也可以在系統(tǒng)切換時(shí) 通過增量的方式一次同步到新系統(tǒng)中。先錄后遷先錄后遷是在系統(tǒng)切換前，先通過手工把一些數(shù)據(jù)錄入到新 系統(tǒng)中，系統(tǒng)切換時(shí)再遷移其它的歷史數(shù)據(jù)。先錄后遷主要針 對新舊系統(tǒng)數(shù)據(jù)結(jié)構(gòu)存在特定差異的情況，即對于新系統(tǒng)啟用 時(shí)必需的期初數(shù)據(jù)，無法從現(xiàn)有的歷史數(shù)據(jù)中得到。對于這部 分期初數(shù)據(jù)，就可以在系統(tǒng)切換前通過手工錄入。先遷后補(bǔ)先遷后補(bǔ)是指在系統(tǒng)切換前通過數(shù)據(jù)遷移工具或遷移程序

5、,將原始數(shù)據(jù)遷移到新系統(tǒng)中，然后通過新系統(tǒng)的相關(guān)功能，或?yàn)榇藢ｉT編寫的配套程序，根據(jù)已經(jīng)遷移到新系統(tǒng)中的原始數(shù)據(jù)，生成所需要的結(jié)果數(shù)據(jù)。先遷后補(bǔ)可以減少遷移的數(shù)據(jù)to2. 2數(shù)據(jù)遷移流程圖mH，唄務(wù)朝明協(xié)4E rm告鶴用戶曽不蛇展卷敗汪巻阪嘲3數(shù)據(jù)遷移的實(shí)現(xiàn)數(shù)據(jù)遷移的實(shí)現(xiàn)可以分為三個(gè)階段：數(shù)據(jù)遷移前的準(zhǔn)備、數(shù)據(jù)遷移的實(shí)施和數(shù)據(jù)遷移后的校驗(yàn)。數(shù)據(jù)遷移前的準(zhǔn)備數(shù)據(jù)轉(zhuǎn)換與遷移通常包括多項(xiàng)工作：舊系統(tǒng)數(shù)據(jù)字典整理、舊系統(tǒng)數(shù)據(jù)質(zhì)量分析、新系統(tǒng)數(shù)據(jù)字典整理、新舊系統(tǒng)數(shù)據(jù)差 異分析、建立新舊系統(tǒng)數(shù)據(jù)之間的影射關(guān)系、開發(fā)部署數(shù)據(jù)轉(zhuǎn)換與遷移程序、制定數(shù)據(jù)轉(zhuǎn)換與遷移過程中的應(yīng)急方案、實(shí)施舊系統(tǒng)數(shù)據(jù)到新系統(tǒng)的轉(zhuǎn)換與

6、遷移工作、檢查轉(zhuǎn)換與遷移后數(shù) 據(jù)的完整性與正確性。數(shù)據(jù)遷移的實(shí)施.1、針對目標(biāo)數(shù)據(jù)庫中的每張數(shù)據(jù)表，根據(jù)映射關(guān)系中記錄的 轉(zhuǎn)換加工描述，建立抽取函數(shù)。該映射關(guān)系為前期數(shù)據(jù)差異分析 的結(jié)果。2、根據(jù)抽取函數(shù)的SQL語句進(jìn)行優(yōu)化?？梢葬娪玫膬?yōu)化方等參數(shù)設(shè)置、式為：調(diào)整 SORT_AREA_SIZE 和 HASH_AREA_SIZE啟動并行查詢、采用提示指定優(yōu)化器、創(chuàng)建臨時(shí)表、對源數(shù)據(jù)表 作ANALYZES、增加索引。3、建立調(diào)度控制表，包括ETL函數(shù)定義表（記錄抽取函數(shù)、 轉(zhuǎn)換函數(shù)、清洗函數(shù)和裝載函數(shù)的名稱和參數(shù)）、抽取調(diào)度表（記 錄待調(diào)度的抽取函數(shù)）、裝載調(diào)度表（記錄待調(diào)度的裝載信息）、 抽取日

7、志表（記錄各個(gè)抽取函數(shù)調(diào)度的起始時(shí)間和結(jié)束時(shí)間以及 抽取的正確或錯(cuò)誤信息）、裝載日志表（記錄各個(gè)裝載過程調(diào)度 的起始時(shí)間和結(jié)束時(shí)間以及裝載過程執(zhí)行的正確或錯(cuò)誤信息）。4、建立調(diào)度控制程序，該調(diào)度控制程序根據(jù)抽取調(diào)度表動態(tài)調(diào)度抽取函數(shù)，并將抽取的數(shù)據(jù)保存入平面文件。數(shù)據(jù)遷移后的校驗(yàn)在數(shù)據(jù)遷移完成后，需要對遷移后的數(shù)據(jù)進(jìn)行校驗(yàn)。數(shù)據(jù)遷移 后的校驗(yàn)是對遷移質(zhì)量的檢查，同時(shí)數(shù)據(jù)校驗(yàn)的結(jié)果也是判斷新 系統(tǒng)能否正式啟用的重要依據(jù)?？梢酝ㄟ^兩種方式對遷移后的數(shù) 據(jù)進(jìn)行校驗(yàn)。對遷移后的數(shù)據(jù)進(jìn)行質(zhì)量分析，可以通過數(shù)據(jù)質(zhì)量檢查工具, 或編寫有針對性的檢查程序進(jìn)行。對遷移后數(shù)據(jù)的校驗(yàn)有別于遷 移前歷史數(shù)據(jù)的質(zhì)量分析

8、，主要是檢查指標(biāo)的不同。遷移后數(shù)據(jù) 校驗(yàn)的指標(biāo)主要包括五方面：完整性檢查，引用的外鍵是否存在;一致性檢查，相同含義的數(shù)據(jù)在不同位置的值是否一致；總分平 衡檢查；記錄條數(shù)檢查，檢查新舊數(shù)據(jù)庫對應(yīng)的記錄條數(shù)是否一 致；特殊樣本數(shù)據(jù)的檢查，檢查同一樣本在新舊數(shù)據(jù)庫中是否一 致。新舊系統(tǒng)查詢數(shù)據(jù)對比檢查，通過新舊系統(tǒng)各自的查詢工具,對相同指標(biāo)的數(shù)據(jù)進(jìn)行查詢，并比較最終的查詢結(jié)果；先將新系 統(tǒng)的數(shù)據(jù)恢復(fù)到舊系統(tǒng)遷移前一天的狀態(tài)，然后將最后一天發(fā)生 在舊系統(tǒng)上的業(yè)務(wù)全部補(bǔ)錄到新系統(tǒng)，檢查有無異常，并和舊系 統(tǒng)比較最終產(chǎn)生的結(jié)果。3軟件定制軟件定制是以云平臺為基礎(chǔ)根據(jù)用戶的需求為用戶進(jìn)行量 身定制，可以提供

9、教育局或?qū)W校個(gè)性化的軟件應(yīng)用，或提供相 比云平臺上提供的現(xiàn)成軟件更精確地滿足教育局或?qū)W校需求的 軟件。教育局或?qū)W校需先提交申請，審核通過后會有專門的工 作人員進(jìn)行后續(xù)溝通，進(jìn)行需求調(diào)研等工作。4資源調(diào)配資源調(diào)配包括存儲、網(wǎng)絡(luò)資源的資源分配，分為存量配置和增PP1量配置兩個(gè)方面。目的是根據(jù)用戶需求動態(tài)地調(diào)整現(xiàn)有的網(wǎng)絡(luò)資 源，以提髙資源利用率和快速響應(yīng)市場需求。由用戶申請資源, 經(jīng)審核確認(rèn)需增加資源的用戶，分配服務(wù)人員與用戶進(jìn)行溝通進(jìn) 行資源調(diào)配工作。5應(yīng)用數(shù)據(jù)錄入服務(wù)方需提供有償應(yīng)用層面數(shù)據(jù)錄入工作支持，包括提供各個(gè)應(yīng)用模塊數(shù)據(jù)錄入工作，以支持教育局和學(xué)校的日常工作。所提供服務(wù)和報(bào)價(jià)如下圖所示:

10、序號應(yīng)用提供服務(wù)1公共門戶錄入教育局?jǐn)?shù)據(jù)，新聞，通知，公告等2資源建設(shè)與管 理資源庫管理服務(wù)（錄入、審核、通過）3大裝備管理與 應(yīng)用服務(wù)平臺教育裝備資產(chǎn)管理、裝備釆購：基礎(chǔ)數(shù)據(jù)釆集 服務(wù)（房間/學(xué)科）；云圖書館管理系統(tǒng)：圖書錄入服務(wù)；4在線學(xué)習(xí)平臺錄入在線學(xué)習(xí)相關(guān)數(shù)據(jù)5智慧實(shí)驗(yàn)室教 學(xué)監(jiān)管智慧實(shí)驗(yàn)室相關(guān)設(shè)備數(shù)據(jù)錄入6考試管理與檢 測設(shè)置考場服務(wù)；生成考號服務(wù)（設(shè)置閱卷老 師）；安排考場服務(wù)（監(jiān)考老師）；制作答題 卡服務(wù)；試卷掃描服務(wù)；試卷掃描服務(wù)；閱卷 支持服務(wù)（閱卷分割、異常處理、閱卷教師調(diào) 整、發(fā)給老師判卷）；數(shù)據(jù)統(tǒng)計(jì)服務(wù)；報(bào)告導(dǎo) 出服務(wù)；考試檢察服務(wù)7網(wǎng)絡(luò)教研系統(tǒng)教師教研工作支持，保障教

11、研活動8德育檢查德育檢查項(xiàng)數(shù)據(jù)錄入9學(xué)生日常表現(xiàn)學(xué)生日常表現(xiàn)項(xiàng)錄入10選課設(shè)置選課活動服務(wù)；學(xué)生分組服務(wù)；設(shè)置課程 服務(wù)；設(shè)置選課要求及發(fā)布選課；選課結(jié)果處 理（二次選課、取消課程、調(diào)班）；選課結(jié)果 公示服務(wù)11排課設(shè)置排課活動服務(wù)；排課支持服務(wù)，包括錄入 課程安排，作息時(shí)間，無課時(shí)間等；幫助老師 進(jìn)行排課；排課結(jié)果處理服務(wù)；排課結(jié)果公示 服務(wù)，提供學(xué)校課表，教師課表，班級課表， 學(xué)生課表12公寓管理公寓信息錄入，分區(qū)13校園安全校園安全信息錄入14校園值班值班信息錄入15督導(dǎo)評估督導(dǎo)工作數(shù)據(jù)錄入16視頻云視頻云系統(tǒng)視頻數(shù)據(jù)錄入，更新6資源更新與現(xiàn)場技術(shù)服務(wù)隨著教育公共云服務(wù)平臺的建設(shè)，應(yīng)用碎

12、片化時(shí)代的到來，產(chǎn) 品版本更新速度加快，新技術(shù)應(yīng)用于產(chǎn)品的周期更短，對產(chǎn)品服 務(wù)進(jìn)程也有了新的變化。不僅提供傳統(tǒng)的運(yùn)維服務(wù)，也時(shí)刻關(guān)注 于產(chǎn)品本身的更新和新技術(shù)的運(yùn)用。因教育公共云服務(wù)平臺建設(shè) 的過程是長期持續(xù)的，需要產(chǎn)生的效果也是持續(xù)增強(qiáng)、穩(wěn)定和不 斷更新的，所以對于產(chǎn)品服務(wù)管理更滿足于學(xué)校的需求和信息化 的進(jìn)階。服務(wù)方需提供有償資源更新與現(xiàn)場技術(shù)服務(wù)工作，包括支持各個(gè)應(yīng)用模塊使用工作。所提供服務(wù)和報(bào)價(jià)如下圖所示:序號應(yīng)用功能10人人通公共門戶資源建設(shè)與管理裝備管理與應(yīng)用服務(wù)平臺仿真實(shí)驗(yàn)室視頻直播課堂互動課堂電子閱覽室創(chuàng)客空間備授課系統(tǒng)人人通空間維護(hù)；新增主題；內(nèi)容審核；錄入學(xué)校數(shù) 據(jù)，新聞

13、，通知，公告等新增模版，模板創(chuàng)建資源更新服務(wù)；資源活動支持服務(wù)；資源定制服務(wù)教育裝備資產(chǎn)管理、裝備釆購：教育裝備配備標(biāo)準(zhǔn)查 詢服務(wù)；資產(chǎn)管理及領(lǐng)用服務(wù)（標(biāo)簽、卡片、電子臺 賬、調(diào)劑、盤點(diǎn)、掃描槍）；裝備釆購服務(wù)（管理、 調(diào)撥）；實(shí)驗(yàn)教學(xué)管理系統(tǒng)：實(shí)驗(yàn)室預(yù)約與管理服 務(wù)；實(shí)驗(yàn)日志服務(wù);仿真實(shí)驗(yàn)課程自定義；新增仿真實(shí)驗(yàn)課程直播課堂現(xiàn)場支持，維護(hù)課堂互動課堂公開課支持；模課（如何用我們的設(shè)備上好 一節(jié)課）；設(shè)備初始化；設(shè)備升級圖書內(nèi)容更新（包括文字和音頻）；評論內(nèi)容維護(hù) 新增新課程；原有課程更新；輔助進(jìn)行創(chuàng)客輔助教師進(jìn)行備課，教研11教育安全公共服務(wù)平臺輔助進(jìn)行運(yùn)營基礎(chǔ)工作12在線學(xué)習(xí)平 臺門戶維護(hù)

14、13智慧實(shí)驗(yàn)室 教學(xué)監(jiān)管數(shù)據(jù)維護(hù)14網(wǎng)絡(luò)教研系 統(tǒng)教師教研工作支持，保障教研活動15教師評價(jià)輔助進(jìn)行教師評價(jià)工作16評教評學(xué)輔助進(jìn)行評教評學(xué)工作17教師培訓(xùn)教師培訓(xùn)活動支持18教師報(bào)名招 聘輔助進(jìn)行教師報(bào)名招聘工作19站點(diǎn)群管理不同站點(diǎn)分區(qū)、配置20校園安全數(shù)據(jù)統(tǒng)計(jì)服務(wù)；校車監(jiān)控服務(wù)21督導(dǎo)評估督導(dǎo)工作技術(shù)支持，配合科室進(jìn)行督導(dǎo)，并出督導(dǎo)結(jié) 果。22學(xué)生生涯規(guī) 劃自我測評服務(wù)；職業(yè)咨詢服務(wù)；專業(yè)信息服務(wù)；高校 信息服務(wù)；文理分科評測服務(wù)；優(yōu)勢學(xué)科評測服務(wù)； 專業(yè)選擇評測服務(wù)；高考選考服務(wù)；學(xué)生成長檔案服 務(wù)；教師資源中心服務(wù)；團(tuán)體層級分析服務(wù)23錄播教室支持錄播教室使用24視頻融合提供視頻融合服務(wù)25教育質(zhì)量評 價(jià)提供命題服務(wù)，包括組卷，審題，試測，定稿發(fā)卷； 提供現(xiàn)場實(shí)地測試服務(wù)，包括機(jī)讀卡填寫和主觀題作 答；提供輔助閱卷工作，包括讀卡和主觀題試卷分 區(qū)；根據(jù)學(xué)校需要，提供數(shù)據(jù)分析結(jié)果；根據(jù)學(xué)校需 求，提供學(xué)生檔案管理工作，提供學(xué)生學(xué)業(yè)檔案26數(shù)據(jù)分析根據(jù)需要對已有數(shù)據(jù)進(jìn)行定制化數(shù)據(jù)分析7運(yùn)營服務(wù)標(biāo)準(zhǔn)第三方接入需要提