電力公司營銷基礎數據系統(tǒng)維護方案

目錄

1.服務方案....................................................................2

1.1.項目建設方案...........................................................2

1.1.1.項目建設規(guī)模及內容..............................................2

1.1.2.基礎數據核查.....................................................2

1.1.3.建設內容清單.....................................................2

1.2.服務的具體策略，服務內容、服務流程...................................4

1.2.1.創(chuàng)建電力數據質量評價模型........................................4

1.2.2.創(chuàng)建電力大數據治理體系..........................................4

1.2.3.使數據質量管理水平得到提高......................................5

1.2.4,結合大數據處理功能..............................................5

1.3.服務計劃及時間進度安排及相關描述......................................6

1.3.1.技術服務要求.....................................................6

1.3.2.服務響應.........................................................6

1.3.3.服務的維護方法與保隙機制........................................6

1.3.4.服務水平質量承諾及服務管理......................................7

1.4.對確保服務質量的措施等有關問題的詳細說明............................11

1.4.1.數據質量........................................................11

1.4.2.數據治理保障機制...............................................12

1.4.3,數據質量評估辦法................................................16

1.5.服務違約賠償..........................................................19

1.6.人員安排管理..........................................................20

1.7.技術文件、技術支持、技術服務、人員培訓等范圍和內容.................23

1.7.1.對于數據治理的認識.............................................23

1.7.2.數據治理體系....................................................23

1.7.3.數據治理核心領域...............................................23

1.8.保密方案..............................................................29

1.8.1.保密原則........................................................29

1.8.2.組織機構建立....................................................29

1.8.3.保密內容........................................................30

1.8.4.做好保密工作的措施.............................................30

1.8.5.工程保密規(guī)章制度...............................................32

1.8.6.獎勵與處罰......................................................34

1.服務方案

1.1.項目建設方案

項目建設規(guī)模及內容

1.完成項目單位所有營銷基礎數據系統(tǒng)維護。

2.上述工作包括項目單位在項目合同簽訂前或驗收合格前的所有營銷基礎

數據系統(tǒng)維護。

3.受托方需嚴格按照采購人提供的標準開展工作。

4.協助營銷基礎數據系統(tǒng)維護質量管理。受托方在委托方統(tǒng)一組織下，協助

開展營銷基礎數據系統(tǒng)維護的質量管理。

一是編制并完善各類營銷基礎數據系統(tǒng)維護作業(yè)指導書，用于指導委托方所

屬地市（縣）公司具體營銷基礎數據系統(tǒng)維護丁作：

二是收集委托方所屬市C縣）公司營銷基礎數據系統(tǒng)維護實施中存在的各類

典型及特殊問題，與委托方人員共同討論并提出問題解決的方案，并經委托方審

核后用于指導數據治理工作；

三是協助委托方按周從營銷系統(tǒng)抽取營銷基礎數據，核查指標數據正確性;

四是協助委托方做好營銷基礎數據系統(tǒng)維護相關的各類報告和報表編制工

作。

5.其他事項。

受托方應按委托方要求按月制定營銷基礎數據系統(tǒng)維護工作計劃、問題整改

計劃，編制月度工作總結并交委托方審查。

1.1.2.基礎數據核查

完成項目驗收合格前所有營銷基礎數據系統(tǒng)維護工作。

1.1.3.建設內容清單

項目單位本期營銷基礎數據系統(tǒng)維護內容詳細清單如下：

序號所屬市公司縣公司高壓用戶低壓用戶用電計量箱

1260290005600

2

我公司深知隨著現代智能電網的不斷發(fā)展，促進了電力系統(tǒng)的信息化及智能

化發(fā)展，其運行過程中的歷史數據、狀態(tài)監(jiān)測數據及電能計量數據等較為龐大,

并且增長速度較快，充分展現出數據治理的必要性。

電力數據治理為基于數據責任的明確，創(chuàng)建規(guī)范化數據使用標準，使組織數

據質量得到提高，從而實現數據的廣泛共享，而且還能夠將數據應用到戰(zhàn)略決策、

資源管理、業(yè)務管理中，充分展現數據資產的商業(yè)價值?；诖髷祿崿F，如何

完善數據治理體系，有效規(guī)范工作流程，從而治理海量數據，將其中的價值充分

的挖掘出來，是現代電力行業(yè)需要面對的主要問題。

3

包括業(yè)務標準、技術標準、數據質量標準及管理標準等。

（3）在實現數據治理的過程中，和數據技術支撐具有密切的關系，企業(yè)要

通過數據技術實現企'也信息數據管控及支撐，使元數據管理、收集及應用作為主

要核心，結合規(guī)范數據標準及高質量信息，充分使用企業(yè)已經創(chuàng)建的元數據管理

平臺、數據分析技術，從而創(chuàng)建完善數據治理體系。

1.2.3.使數據質量管理水平得到提高

以企業(yè)的實際情況實現目前額數據質量管理現狀的改進，實現完善數據質量

管理體系的完善。選擇和企業(yè)相關指標作為基礎，對數據成熟度進行分析，并且

實現集中抽取。

從而實現編碼、標準、數據及模型的統(tǒng)一管理，避免出現數據多頭管理及沖

突，將數據冗余進行消除，實現數據集中管理、共享的R的。逐漸實現事前防范、

事后管理及集中監(jiān)控的閉環(huán)管理，對企業(yè)級數據質量管理規(guī)范、制度的創(chuàng)建，從

而對高價值數據屬性的識別，保證能夠提高數據質量，從而使其支撐業(yè)務運營及

經營分析。

1.2.4.結合大數據處理功能

定義數據架構，使其能夠使多數據、高速度、多樣性等需求得到滿足，實現

獨特分布式并行處理結構的創(chuàng)建，解析大數據集。其次，具備使不同技術策略實

現實時處理需求的滿足。存儲實時鍵值，實現高性能的索引。

此過程就是MapReduce技術處理，就是將制定數據作為基礎刪選數據，之后

實現數據的全面分析，使其能夠加載到其他非結構化數據庫中，然后發(fā)送到移動

設備中，和結構化數據相互關聯。不僅具備全新非結構化數據種類，大數據的優(yōu)

勢還包括：

（1）因為具有小量數據集，無法實現原始數據存儲到移動倉儲中。利用Map

實現處理，從而使縮減結果集成到數據倉儲環(huán)境中，便于實現常規(guī)BI報告、統(tǒng)計、

語義和關聯的功能。結合傳統(tǒng)BI平臺與大數據可視化的功能，能夠提高分析功能

的效果。

（2）為了能夠使Hadoop環(huán)境分析功能得到提高，可以創(chuàng)建沙盒環(huán)境實現。

5

1.3.服務計劃及時間進度安排及相關描述

1.3.1,技術服務要求

保證提供7X24小時的服務電話服務支持，招標人可直接與受托方有關技術

人員定期和不定期的進行技術咨詢和聯絡。

1.3.2.服務響應

1.我方承諾：在質保期內，對于出現的數據質量問題，我方應提供7X24

小時的服務響應，即在接到問題電話2小時內做出實質響應，若未能解決問翅，

我方啟動更高級別的響應服務，與招標人或項目實施單位協商確定到達現場時限

并進行現場處理。

2.在質保期內，如果發(fā)現任何屬于受托方責任的缺陷，我方免費進行修復；

3.在質保期滿后，我方積極響應招標人或項目實施單位對所出現工程質量

缺陷的修復請求。

1?3.3.服務的維護方法與保障機制

（一）維護方式及流程

1.維護內容及流程簡述

（1）電話遠程維寸：

①指導進行常規(guī)檢查、處理一般故障

②判斷故障范圍，根據故障難度，調度工程師現場服務

2、上門現場服務：

①查看現場，判斷類別，報告相關技術問題

②救助實施，完畢清理現場，有始有終

③填寫維護報告單，讓甲方工程師確認簽名。

3、服務合同簽訂后，公司將對客戶所有的信息系統(tǒng)進行一次全面的檢則及

整理，規(guī)范并出具相關的文檔資料及管理規(guī)章制度，供客戶備檔。將根據工作內

容安排專業(yè)的工程師為客戶進行全面的服務。公司繼續(xù)向委托方（客戶）提供系

統(tǒng)升級，擴展，設備選型方面的咨詢服務，如果是對現有設備進行升級，將不再

6

另外收取費用(設備購買費用另計)。

4、每季度巡檢：每季度固定上門巡檢一次，檢查設備的狀況，集中處理相

關故障，并嚴格按照相關表格填寫局域網及各設備的運行狀況，并做出分析意見

與建議。

5、技術培訓：不定時進行現場培訓。

6、緊急維護：電話聯系，特殊情況隨時待命，提供7*24小時城市范圍2小時

內響應到位，城區(qū)范圍外保證4小時內響應到位，響應到位起24小時內對用戶需

求提出產生原因及具體解決方案。

1.3.4.服務水平質量承諾及服務管理

(-)服務水平體系

我司的服務水平體系分四大類：報告服務、管理類服務、主動式服務及響應

式服務。

1.報告服務

主要內容如下:

服務交付內容服務級別

日常運維服務報告運維月/季/年報告月度/季度/年度

重大事件服務報告重大事件服務報告按事件發(fā)生情況

巡檢報告巡檢工作記錄月度

設備維修設備維修單5X8駐場電話

服務質量自檢服務質量自檢報告每月

系統(tǒng)安全分析安全分析報告每月

系統(tǒng)/網絡優(yōu)化分析系統(tǒng)/網絡優(yōu)化建議按客戶計劃

2.管理類服務

主要內容如下:

服務交付內容服務級別

現狀評估評估報告1次

標準化標準與流程定制1次

基線建立基線建立報告1次

標準鏡像文件預裝按客戶使用的基準鏡像隨建設更新

資產標簽資產標簽1次

文檔、知識管理文檔管理庫/知識庫每周更新

7

3.主動式服務

主要內容如下:

服務交付內容服務級別

運維服務流程規(guī)范編撰管理規(guī)范建議書按客戶計劃

（二）服務質量承諾

1.工作時間承諾：每周一至周五（不含節(jié)假日），按照采購人工作時間提供

服務，投標人在接到采購人服務申請后1小時內響應采購人。如采購人需要投標

人在節(jié)假日期間提供服務，投標人會全力支持，如需要，可到現場支持。

2.響應方式承諾：熱線電話、遠程桌面支持，駐場解決。

3.服務類型承諾：送修、現場、特殊服務要求（如購件、升級等）。

4.人員保障承諾：提供2名駐場服務工程師，1名機動服務工程師。

5.保密要求承諾：詳見保密協議v

（三）服務管理

1.服務管理總則

服務工程師將認真學習和遵守采購人所有有關外來人員管理的規(guī)章制度，且

有義務不對外透露在采購人獲得的一切信息。

項目組成員在采購人的一切工作都在得到信息中心管理人員的授權之后進

行。

項目組成員一旦發(fā)生政治事件、泄密、盜用用戶資料、擅自更資料、故意隱

瞞、超越授權操作導致惡性事件或給采購人帶來影響重大的事件等事件，即視為

安全事故。

全面配合采購人積極參與對其派駐工程師的效的監(jiān)督和管理，遵守采購人

的相關規(guī)章制度。

建立獎勵機制，問時參考采購人的建議，為優(yōu)秀員工提供培訓機會，或參加

各種認證考試，以激勵員工不斷提升工作能力。

堅決杜絕因項目組成員發(fā)生的安全問題。

保證其項目組成員符合一定的技術水平，采購人有權對不滿足工作要求的越

維科技項目組成員向越維科技提出更換的要求；工作中堅決杜絕弄虛作假的現象

出現。

8

未經采購人同意，不將所接觸到的采購人技術或業(yè)務資料、數據用作其他用

途或以任何形式泄露歸第三方。

服務臺支持管理

服務外包項目中的服務臺，即通常所指的幫助臺利呼叫中心，這是一種服務

職能而不是管理流程。在IT服務管理中，服務臺起著紐帶的作用。對服務提供方

而言，服務臺是“過濾器”和“擴音器”，可以處理很多客戶的詢問和請求，從

而節(jié)約了資源，并及時向客戶傳遞有關服務的各種情況；對客戶而言，服務臺是

“導航器”，在碰到任何問題時，只需要聯系服務臺，然后由服務臺進一步協調

跟蹤，避免了多點聯絡的問題。

服務臺的職責包括：

1.單一的聯絡點

在信息化系統(tǒng)越發(fā)靈活、復雜的今天，客戶所面臨的問題也是多種多樣，可

能涉及到不同的應用、不同的資產，但是建立了服務臺之后，客戶可以將任何1T

應用相關的問題都可以直接反映到服務臺。

2.一線技術支持

即使最高級別的現場技術支持，也不會比使用者現場自己解決問題更加快速,

服務臺非常重要的一項任務就是根據知識庫的記錄，幫助用戶現場恢復使用，一

般來說，30M50%的故障支持請求，都應該在服務臺得到解決。

3.協調、跟蹤和反饋

一旦服務臺無法幫助用戶直接解決問題，就必須根據服務協議所規(guī)定的時效

要求分派二線技術支持，并且在服務完成之前持續(xù)的跟蹤。如果服務進程出現任

何異常，必須立即向客戶進行反饋，并啟動升級機制。

4.記錄、分析和總結

服務的價值來自丁長期的積累，如果不對過往的技術問題、服務記錄進行總

結歸檔，就使得服務失去了參考的依據，從而無法獲得持續(xù)發(fā)展的動力。服務臺

作為所有服務請求的接口，必須保持準確的記錄和科學的分析。

為了在服務期間，幫助采購人建立服務的監(jiān)控管理粒度、沉淀一套較為全面

的知識庫系統(tǒng)，持續(xù)提高服務質量。

5.服務臺關于故障受理的主要工作包括：

9

受理故障時，準確記錄故障現象，并結合知識庫進行初步診斷，協助最終用

戶遠程解決故障（但指導時間不應超過5分鐘）；

在受理完成后，準確在系統(tǒng)中填寫故障狀況并于10分鐘內完成分派；并確定

是否需要車輛協同；

單據分排，30分鐘內落實任務執(zhí)行情況；

接到延遲到場或無法到場的反饋時，10分鐘內與用戶溝通并重新分排任務;

接到現場工程師的幫助請求時，利用知識庫或其他資源提供必要的支持；

接到現場工程師的異常事件升級通知時，在20分鐘內上報項目經理；

服務結束后對工程師上交的服務單據進行審核；

10

1.4.對確保服務質量的措施等有關問題的詳細說明

1.4.1.數據質量

數據質量不高將影響數據倉庫應用程度不高。低下的數據質量往往造成開發(fā)

出來的系統(tǒng)與用戶的預期大相徑庭，數據質量關系建設有關分析型信息系統(tǒng)成敗,

同時數據資源是集團單位的戰(zhàn)略資源，合理有效的使用正確的數據能指導集團單

位做出正確的決策，提高省綜合競爭力。不合理的使用不正確的數據（即差的數

據質量）可導致決策的失敗，正可謂差之亳厘、謬以千里。

數據質量管理包含對數據的絕對質量管理、過程質量管理。絕對質量即數據

的真實性、完備性、自治性是數據本身應具有的屬性。過程質量即使用質量、存

儲質量和傳輸質量，數據的使用質量是指數據被正確的使用。再正確的數據，如

果被錯誤的使用，就不可能得出正確的結論。數據的存貯質量指數據被安全的存

貯在適當的介質上。所謂存貯在適當的介質上是指當需要數據的時候能及時方便

的取出。數據的傳輸質量是指數據在傳輸過程中的效率和正確性。

高質量的數據至少有如下幾項要求：

一是正確性，在轉換、分析、存儲、傳輸、應用流程中不存在錯誤；

二是完整性，數據庫應用或要求的所有記錄、字段都存在；

三是一致性，體現在整個數據庫的定義和維護方面，確保數據在使用的整個

過程中是一致的；

四是時效性，衡量指標是在指定的數據與真實的業(yè)務情況同步的時間容忍度

內，即指定的更新頻度內，及時被刷新的數據的百分比；

五是可靠性，提供數據的數據源必須能夠可靠穩(wěn)定地提供數據。

數據質量管理的規(guī)劃和實施包括以下內容：

一是數據質量管控體系的建立，包括數據質量的評估體系，定期評估數據質

量狀況；

二是在部門各個應用系統(tǒng)中的落實，包括每個應用系統(tǒng)中的數據質量檢查等;

三是在最開始建立數據質量管理系統(tǒng)的時候，借助數據治理平臺上，通過建

立數據質量管理的規(guī)則來集中化地建立數據質量管理系統(tǒng)，發(fā)現問題并持續(xù)改進;

四是數據質量管理與業(yè)務稽核的結合，通過業(yè)務規(guī)則的稽核來發(fā)現數據質量

深層次的問題，將數據質量與業(yè)務一線結合起來，使業(yè)務人員對數據質量問撅有

11

更加清晰和明確的認識。

完善的數據質量管理是保障各項數據治理工作能夠得到有效落實，達到數據

準確、完整的目標，并能夠提供有效的增值服務的重要基礎。

1.4.2.數據治理保障機制

（一）制度章程

1.規(guī)章制度

數據治理章程類似于企業(yè)的公司條例。該章程闡明數據治理的主要目標、相

關工作人員、職責、決策權利和度量標準。

2.管控辦法

管控辦法是基于規(guī)章制度與工具的結合，可落地的操作的辦法。

3.考核機制

考核是是保障制度落實的根本，建立明確的考核制度，實際操作中可根據集

團單位情況，建立相應的針對數據治理方面的考核辦法，并與個人績效相關聯。

可參考管理學中相關考核、績效管理相關部分。

對于數據治理的考核，可見下圖進行理解：

執(zhí)行建管控體系落地的關鍵

以績效的手段促i居質量

；懿，林生產者、使用者、管

理者及擁有者關聯起來，形成T

可持續(xù)有效執(zhí)行的執(zhí)行體系，保障

持續(xù)的高數據質量

-0梳理核心業(yè)務流、雌流

：0制定管控指標（數據標準）

以標準對數據進行質量探查、處理.

:。分析

0題則對數據流進行監(jiān)控、預警

：0集成高質量雌，形成雌中

心，實現共享、分發(fā)、觸

以績效手段促進、保障數據管

i0控機制持續(xù)有效運行

12

考^^：me■員

考核標準：

觸管理質量探/L未在規(guī)定的周期內實施數據質量探直工月35扣分項

作，扣3分；

2、按指定周期實施數據質量探查,不扣分；

考^^：轆醯員

考核標準：

問題預警、分

在發(fā)現數據展量問題時，在規(guī)定時間段

發(fā)L

內，及時預瞥并函相關人員處璉，不扣分；

否則，扣3分;

考雌

考核對象：數據負責人

發(fā)生數據質量考核標準：

月35扣分項

問題的例1、發(fā)現fi雌質量問題扣1分；

2、依此蟒,直至本項指標權重扣完為止；

考核對象：數據負責人

考核標準：

1、數據質量問題影響30%以下（含30%）

信息系統(tǒng)，扣5分；

雌質量問題2、數據質量問題影響30%~70%（含70%）

影響范圉月25扣分項

信息系統(tǒng)，扣15分；

3、數據質量問題影響70%以±信息系統(tǒng)，

扣25分；

4、按月統(tǒng)計，以單次數據質量問題影響范

圍最大的數據為準；

考核對象：數據負責人

嚴重程度考核標準：以造成的經濟損失為考核依據,年扣分項

依企業(yè)情況自定義；人工考核

考核對象：數據負責人

數據質量問題

數據質盒問題考核標準：

的處理個數和月35力吩項

1、在規(guī)定時間內處理完成一W據質量問

及時is

題，加1分；否則不加分；

二、數據質量管理流程

（一）數據質量校驗流程

數據倉庫每天都有很多任務定時執(zhí)行加載數據，確保加載數據的完整性、準

確性是數據質量管理的基本要求。

1.日常數據校驗

數據質量管理人員每天要對ETL加載任務執(zhí)行情況進行檢查。

數據校驗方法選擇

ETL任務數據質量校驗要求必須采用以下三類方法中的至少一種來進行判斷:

記錄數檢查法；關鍵指標總量驗證法；值域判斷法。

數據校驗周期

13

每天加載任務比較多，如果全部執(zhí)行數據校驗需要的時間過長，因此根據每

個主題數據的可信等級確定校驗頻率。

可信等級與校驗頻率的對應關系如下：

一級：每次加載都必須執(zhí)行數據校驗

二級：每三次加載執(zhí)行一次數據校驗

三級：每六次加載執(zhí)行一次數據校驗

對于需要特別保障的主題數據，可調整校驗頻率并額外增加經驗審核法。

2.定時數據抽查

數據校驗確保每天加載的增量數據的完整性、準確性，在此基礎上，數據質

量管理小組必須每季度組織一次數據倉庫的定期抽查。

定期抽查的范圍必須包括可信等級為一級的所有主題數據，可信等級為二級

的二個主題的數據，可信等級為二級的一個主題的數據.

定期抽查必須采用數據質量評估方法中定義的所有方法。

3.全面數據檢查

數據質量管理小組必須每年組織一次數據倉庫的全面檢查。

全面檢查的范圍包括企業(yè)數據中心平臺所有主題的數據。

全面檢查必須采用數據質量評估方法中定義的所有方法。

（二）數據異常處理流程

1.數據質量管理人員發(fā)現數據差錯應及時核對核實，根據核對核實情況填寫

數據問題處理單，描述數據質量問題的現狀、原因和改正、預防措施。

2.數據質量管理小組組長審批后，報數據中心主管部門批準后執(zhí)行數據修正

任務。

（三）數據質量的評估報告

最終根據數據質量檢查的情況，數據質量管理小組會定期或不定期的生成相

關的數據質量評估報告，數據質量報告分為兩類：

每月定期提交的數據質量報告，即每月數據質量問題的陳述。

數據質量抽查或全面檢查后提交的數據質量或告。

1.每月數據質量評估報告

每月的數據質量報告是在每月月末或者下月月初時編制的月度執(zhí)行報告，數

14

據質量管理小組會對當月數據質量情況進行匯總統(tǒng)計，并根據“數據質量問題頻

率”的變化情況對各個主題的等級進行檢查策略的調整，報告格式如下：

（1）非系統(tǒng)問題

①數據質量問題的現象

②業(yè)務數據范圍

③問題陳述

（2）系統(tǒng)問題

①數據質量問題的現象

②業(yè)務數據范圍

③問題陳述

2.數據質量抽查或全面檢查后提交的數據質量報告

數據質量抽查或全面檢查報告是在每次進行完整個企業(yè)數據中心抽查或全

面檢直后編制的質量報告，同每月數據質量報告相比，除了要統(tǒng)計數據質量情況

并重新劃分主題等級外，還需要對整個質量體系運作的情況進行評估和改進，報

告格式如下：

（1）基本概況

包括：參與數據質量檢查的相關組織與人員；數據質量檢查的時間；數據質

量檢查的地點；數據質量檢查的形式；數據質量檢查的范圍等方面的內容。

（2）數據質量的檢查與評價

①評價過程與步驟

②數據檢查方式

主要分為全部檢查和抽查。全檢必須說明檢查的范圍、內容及方法。抽查必

須說明抽樣方案、過程及數據檢查的范圍、內容及方法。

③數據質量評價方法

（3）數據質量評述與結論

①評述

對數據質量進行的綜合描述（包括存在問題）。

②結論與建議

包括檢查結果、互信等級調整建議等。

15

1.4.3.數據質量評估辦法

下面將從數據質量評估核心指標、數據質量評估模式、數據質量評估管理流

程三個方面介紹數據質量評估方法。

數據質量評估的核心指標

數據質量問題頻率

指標定義：數據質量問題頻率=數據質量問題發(fā)生次數/存儲

的總數據量

指標單位：次/GB

根據數據質量評估指標將各數據倉庫中的主數據及其歷史行為劃分為三個

等級：

數據質量等級描述統(tǒng)計口徑

數據質量問題頻率大于

一級數據質量差，需要重點監(jiān)控

等于1次/GB

數據質量問題頻率大于

二級數據質量一般

等于().5次/GB,小于1次/GB

數據質量問題頻率小于

三級數據質量好

0.5次/GB

通過對數據質量問題頻率的考評和等級劃分，就可以從數據倉庫眾多的數據

中解放出來，集中精力把有限的資源投入到需要重點關注的主題數據。因此數據

質量可信等級是數據質量提高的有效途徑。與之相配套的，必須建立了一套相關

的管理制度，管理制度主要包括：

1.可信等級初始值確立流程

數據中心平臺各主題域的數據質量可信等級初始值一般設定為一級，由數據

質量管理小組牽頭，執(zhí)行全面檢杳后報數據中心主管部門批準后確立。

2.可信等級變更流程

數據質量管理小組每季度、每年組織定時抽查、全面檢查時，每半年根據檢

查結果對相關主題域的可信等級提出調整意見，報數據中心主管部門批準后確立。

數據質量評估具體方法：

對于具體數據的質量檢查模式采用記錄數檢查法、關鍵指標總量驗證法、歷

16

史數據對比法、值域判斷法、經驗審核法及匹配判斷法。通過這些方法方法，可

以對單個數據點的數據準確性進行檢查，及時發(fā)現數據質量問題。

（1）記錄數檢查法

通過比較記錄條數，對數據情況進行概括性驗證。主要是檢查數據表的記錄

數是否為確定的數值或在確定的范圍內。

適用范圍：

對于數據表中按E期進行增量加載的數據，每個加載周期遞增的記錄數為常

數值或可以確定的范圍時，必須進行記錄條數檢驗。

（2）關鍵指標總量驗證法

對于關鍵指標，對比數據總量是否一致。主要是指具有相同業(yè)務含義，從不

同維度統(tǒng)計的匯總邏輯的檢查。

適用范圍：

同表內對同個字段從不同的維度進行統(tǒng)計，存在匯總關系時，必須進行總量

檢驗。

本表的字段與其它表中的字段具有相同的業(yè)務含義，從不同的維度統(tǒng)計，存

在匯總關系，且兩張表的數據不是經同一數據源加工得到。滿足此條件時必須進

行總量檢驗。

（3）歷史數據對比法

通過歷史數據觀察數據變化規(guī)律，從而驗證數據質量。通常以同比發(fā)展速度

進行判斷。評估時應根據各種指標發(fā)展特點，重點對同比發(fā)展速度增幅（或降幅）

較大的數據進行審核。歷史數據對比法包括同比和環(huán)比兩種方式。

適用范圍：

不能進行記錄數檢查法、關鍵指標總量驗證法，且事實表的記錄數小于1000

萬條時必須進行歷史數據對比法。

（4）值域判斷法

確定一定時期內指標數據合理的變動區(qū)間，對區(qū)間外的數據進行重點審核。

其中數據的合理變動區(qū)間范圍是直接根據業(yè)務經驗來確定的。

適用范圍：

事實表中的字段互以確定取值范圍，同時可以判定不在此范圍內的數據必定

17

是錯誤的。滿足此條件必須進行值域判斷法。

(5)經驗審核法

針對報表中指標間邏輯關系僅靠計算機程序審核無法確認、量化，或有些審

核雖設定數量界限，但界限較寬不好判定的情況，需要增加人工經驗審核。

適用范圍：

以上方法都不適用的情況下，可以使用經驗審核法。

(6)匹配判斷法

與相關部門提供或發(fā)布的有關數據進行對比驗證。

適用范圍：

與有相關部門提供或發(fā)布的有關數據口徑一致的，可以使用匹配判斷法。

18

1.5.服務違約賠償

我公司承諾：

本工程服務違約賠償執(zhí)行招標文件要求。

19

1.6.人員安排管理

一、維護人員安排

中心目前有專職售后服務工程師io名，隨時處理用戶的故障投訴、技術咨

詢、客戶需求與建議、客戶關懷等多種集中受理業(yè)務，充分保證各客戶單位在佛

山本地能夠得到良好的、快速的、完善的售后服務。

如提供人員長駐服務方式的企業(yè)，將根據企業(yè)的情況、服務內容作出專業(yè)技

術分析后，合理調配人員到企業(yè)中去。

二、維護人員組織架構

有效的組織機構是項目成功的有力保證，為了達到項目預期目標，在項目開

始之前對于組織機構及其責任分工做出規(guī)劃是非常必要的，數據治理項目管理組

織建議宜采用如圖所示的組織結構：

1.組織層次

數據治理委員會由集團公司的高層領導者組成。委員會定義數據治理愿景和

目標；組織內跨業(yè)務部門和IT部門進行協調；設置數據治理計劃的總體方向：

在發(fā)生策略分歧時進行協調。此委員會也將包含來自部門或子公司的領導代表,

以及來自各單位視數據為機構資產的信息科技部門的代表。這些高層管理人員是

數據治理計劃的所有擁護者，確保在整個組織內獲得支持。

20

數據治理工作組是組織內委員會下面的下一個級別。工作組執(zhí)行數據治理計

劃。工作組負責監(jiān)督數據管理員工作。數據治理工作組由數據治理委員會中各局

領導主持。

每各業(yè)務部門有至少一位業(yè)務分析員，信息科技部門設置數據質量分析員、

數據管理員、集成開發(fā)人員。各工作人員負責本部門數據的質量，履行職責，解

決具體的問題。

2.組織職責

根據數據管理工作的實際需要，在業(yè)務管理部門、技術管理部門和業(yè)務應用

部門確定各工作人員的職責。

數據治理委員會的職責范圍：

（1）從戰(zhàn)略角度來統(tǒng)籌和規(guī)劃，對數據資產和系統(tǒng)進行清理，確定數據治

理的范圍：明確數據源的出處、使用和管理的流程及職責：

（2）明確數據治理的組織、功能、角色和職責；

（3）負責各工作組成員的培訓工作；

（4）負責審查各工作小組的目標、原則，批準數據管理的相關制度、標準

及流程；

（5）負責確定數據治理的工具、技術和平臺；

（6）負責制定數據治理的評估指標、方法。

數據治理工作小組，其主要工作職責是：

負責數據治理的牽頭，組織、指導和協調本單位的數據治理工作；

綜合數據治理管控辦法、數據治理考核機制等有關規(guī)章制度的牽頭制定、修

改等；

負責數據的分析整理并出具數據指標報告；

負責數據的監(jiān)測預測工作；

建立數據沖突的處理流程和數據變更控制流程。

負責對基礎數據質量的檢測、發(fā)布、考核和清理完善工作。

工作組成員：業(yè)務分析員、數據質量分析員、數據管理員、集成開發(fā)員

這些不同的角色在數據治理過程中承擔著彼此不同，而又相輔相成的職責。

其中集成開發(fā)人員在數據治理流程中需要肩負起數據訪問、驗證數據結構、驗證

21

數據、交付數據以及數據庫/知識庫的構建等角色，因此他們的工作包括:

＞訪問及交付相應數據給業(yè)務用戶

＞提高生產力和性能

＞最大化減少異常/出錯的影響

＞開發(fā)和完善技術最佳實踐

數據質量分析員在數據治理流程中負責數據的剖析、清洗匹配合并等。工作

包括：

＞為開發(fā)人員定義數據規(guī)格及標準

＞為機構有效的追蹤數據質量問題

＞實施被業(yè)務人員和數據管理員定義正確的數據質量規(guī)則

＞不間斷的監(jiān)控數據質量水平及問題

業(yè)務分析人員在數據治理流程中負責定義數據的轉換規(guī)則，工作包括：

＞與需求開發(fā)人員協作，正確捕獲和解析業(yè)務需求

＞與開發(fā)人員和數據管理員協作，為業(yè)務用戶縮短數據產生價值的時間

＞數據管理員需要定義引證數據，并管理元數據?，工作包括：

＞保證數據的質量、正確、完整、一致、審計及安全性

＞定義引證/參考數據

＞為組織機構數據實體給出正確業(yè)務定義

22

1.7.技術文件、技術支持、技術服務、人員培訓等范圍和內容

1.7.1,對于數據治理的認識

（一）數據治理概念

數據治理是指將數據作為組織資產而展開的一系列的具體化工作，是對數據

的全生命周期管理。

數據治理體系是指從組織架構、管理制度、操作規(guī)范、TT應用技術、績效考

核支持等多個維度對組織的數據模型、數據架構、數據質量、數據安全、數據生

命周期等各方面進行全面的梳理、建設以及持續(xù)改進的體系。

（二）數據治理目標

數據治理的目標是提高數據的質量（準確性和完整性），保證數據的安全性

（保密性、完整性及可用性），實現數據資源在各組織機構部門的共享；推進信

息資源的整合、對接和共享，從而提升集團公司或政務單位信息化水平，充分發(fā)

揮信息化作用。

1.7.2.數據治理體系

數據治理體系包含兩個方面，一是數據質量核心領域，二是數據質量保障機

制。

1.7.3.數據治理核心領域

為了有效管理信息資源，必須構集團級數據治理體系。數據治理體系包含數

據治理組織、數據構架管理、主數據管理、數據質量管理、數據服務管理及數據

安全管理內容，這些內容既有機結合，又相互支撐。

（-）數據模型

數據模型是數據構架中重要?部分，包括概念數據模型和邏輯數據模型，是

數據治理的關鍵、重點。理想的數據模型應該具有非冗余、穩(wěn)定、一致、易用等

特征。邏輯數據模型能涵蓋整個集團的業(yè)務范圍，以一種清晰的表達方式記錄跟

蹤集團單位的重要數據元素及其變動，并利用它們之間各種可能的限制條件和關

系來表達重要的業(yè)務規(guī)則。數據模型必須在設計過程中保持統(tǒng)一的業(yè)務定義。為

23

了滿足將來不同的應用分析需要，邏輯數據模型的設計應該能夠支持最小粒度的

詳細數據的存儲，以支持各種可能的分析查詢。同時保障邏輯數據模型能夠最大

程度上減少冗余，并保障結構具有足夠的靈活性和擴展性

（二）數據生命周期

一般包括數據生成及傳輸、數據存儲、數據處理及應用、數據銷毀四個方面。

1.數據生成及傳輸

數據應該能夠按照數據質量標準和發(fā)展需要產生，應采取措施保證數據的準

確性和完整性，業(yè)務系統(tǒng)上線前應該進行必要的安全測試，以保證上述措施的有

效性。對于手工流程中產生的數據在相關制度中明確要求，并通過事中復核、事

后檢查等手段保證其準確性和完整性。數據傳輸過程中需要考慮保密性和完整性

的問題，對不同種類的數據分別采取不同的措施防止數據泄漏或數據被篡改。

2.數據存儲

這個階段除了關注保密性、完整性之外，更要關心數據的可用性，對于大部

分數據應采取分級存儲的方式，不僅存儲在本地磁盤上，還應該在磁帶上，甚至

遠程復制到磁盤陣列中，或者采用光盤庫進行存儲。對于存儲備份的數據要定期

進行測試，確保其可訪問其數據完整。數據的備份恢復策略應該由數據的責任部

門或責任人負責制定，信息化管理部門可以給予相應的支持。同時還需要注意因

為部門需要或故障處理的需要，可能對數據進行修改，必須在數據管理辦法中明

確數據修改的申請審批流程，審慎對待后臺數據修改。

3.數據處理和應用

信息化相關部門需要對數據進行分析處理，以挖掘出對于管理及業(yè)務開展有

價值的信息，為保證過程中數據的安全性，一般應采用聯機處理，系統(tǒng)只輸出分

析處理的結果。但是實際中，因為相關數據分析系統(tǒng)建設不到位，需要從數據庫

中提取數據后再對數據進行必要的分析處理，在這個過程中就需要關注數據提取

操作是否可能對數據庫造成破壞、提取出的數據在交付給分析處理人員的過程中

其安全性是否會降低、數據分析處理的環(huán)境安全性等等。

4.數據銷毀

這個階段主要涉及數據的保密性。應明確數據銷毀的流程，采用必要的工具,

數據的銷毀應該有完整的記錄。尤其是對于需要送出外部修理的存儲設備，送修

24

之前應該對數據進行可靠的銷毀。

（三）數據標準

數據標準是集團單位建立的一套符合自身實際，涵蓋定義、操作、應用多層

次數據的標準化體系。

數據標準的建立是集團單位信息化、數字化建設的一項重要工作，行業(yè)的各

類數據必須遵循一個統(tǒng)一的標準進行組織，才能構成一個可流通、可共享的信息

平臺。

數據治理對標準的需求可以劃分為兩類，即基礎性標準和應用性標準。前者

主要用于在不同系統(tǒng)間，形成信息的一致理解和統(tǒng)一的坐標參照系統(tǒng)，是信息匯

集、交換以及應用的基礎，包括數據分類與編碼、數據字典、數字地圖標準；后

者是為平臺功能發(fā)揮所涉及的各個環(huán)節(jié)，提供一定的標準規(guī)范，以保證信息的高

效匯集和交換，包括元數據標準、數據交換技術規(guī)范、數據傳輸協議、數據質量

標準等。

1.數據分類與編碼

數據分類與編碼標準是信息化建設中標準化的一項基礎工作，該類標準規(guī)定

平臺匯集、交換相關信息統(tǒng)一的分類系統(tǒng)和排列順序以及編碼規(guī)則，目的是在不

同系統(tǒng)和用戶之間建立交通數據的一致參照，對提高數據采集、處理和數據交換

效率具有重要作用。數據分類與編碼標準的制定將有力推進平臺標準化及交通信

息化建設標準化的進程。

2.數據字典

針對實際需求，定義數據集，建立各個領域的數據字典，規(guī)范數據概念和數

據定義。在此基礎上，形成完備的集團單位數據集和數據字典。

3.元數據標準

元數據標準是描述數據資源的具體對象時所有規(guī)則的集合，它包括了完整描

述一個具體數據對象時所需要的數據項集合。針對各種信息資源分別制定適當的

元數據標準，可為信息的管理、發(fā)現和獲取提供一種實際而簡便的方法，從而提

高數據交換效率。

4.數據交換標準

為了保證數據共享和交換的順利實現，必須明確定義和規(guī)范數據交換的相關

25

標準。數據交換的標準規(guī)范是集團單位綜合信息平臺的核心標準。其中應當包括

數據交換內容、數據交換格式、數據傳輸方式、各類中心間數據接口的標準化等

方面。

5.數據質量標準

由于數據采集任務通常由其他二級平臺完成，數據治理平臺的標準方法主要

集中在數據的加工和管理上。應該重點開發(fā)的一個領域是數據質量控制方法。應

當從三個方面對數據質量方法進行研究：“壞數據”或“不可靠數據”的識別，

錯誤數據的編輯方法，以及缺少值的處理。

（四）主數據

主數據管理要做的就是從各部門的多個業(yè)務系統(tǒng)中整合最核心的、最需要共

享的數據（主數據），集中進行數據的清洗和豐富，并且以服務的方式把統(tǒng)一的、

完整的、準確的、具有權威性的主數據傳送給集團單位范圍內需要使用這些數據

的操作型應用系統(tǒng)和分析型應用系統(tǒng)。

主數據管理的信息流應為：

1.某個業(yè)務系統(tǒng)觸發(fā)對主數據的改動；

2.主數據管理系統(tǒng)將整合之后完整、準確的主數據傳送給所有有關的應用系

統(tǒng)

3.主數據管理系統(tǒng)為決策支持和數據倉庫系統(tǒng)提供準確的數據源。

因此對于主數據管理要考慮運用主數據管理系統(tǒng)實現，主數據管理系統(tǒng)的建

設，要從建設初期就考慮整體的平臺框架和技術實現。

（五）數據質量

數據質量不高將影響數據倉庫應用程度不高。低下的數據質量往往造成開發(fā)

出來的系統(tǒng)與用戶的預期大相徑庭，數據質量關系建設有關分析型信息系統(tǒng)成敗,

同時數據資源是集團單位的戰(zhàn)略資源，合理有效的使用正確的數據能指導集團單

位做出正確的決策，提高省綜合競爭力。不合理的使用不正確的數據（即差的數

據質量）可導致決策的失敗，正可謂差之毫厘、謬以千里。

數據質量管理包含對數據的絕對質量管理、過程質量管理。絕對質量即數據

的真實性、完備性、自治性是數據本身應具有的屬性。過程質量即使用質量、存

儲質量和傳輸質量，數據的使用質量是指數據被正確的使用。再正確的數據，如

26

果被錯誤的使用，就不可能得出正確的結論。數據的存貯質量指數據被安全的存

貯在適當的介質上。所謂存貯在適當的介質上是指當需要數據的時候能及時方便

的取出。數據的傳輸質量是指數據在傳輸過程中的效率和正確性。

高質量的交通運輸行業(yè)數據至少有如下幾項要求：

一是正確性，在轉換、分析、存儲、傳輸、應用流程中不存在錯誤；

二是完整性，數據庫應用或要求的所有記錄、字段都存在；

.三是一致性，體現在整個數據庫的定義和維護方面，確保數據在使用的整個

過程中是一致的；

四是時效性，衡量指標是在指定的數據與真實的業(yè)務情況同步的時間容忍度

內，即指定的更新頻度內，及時被刷新的數據的百分比；

五是可靠性，提供數據的數據源必須能夠可靠穩(wěn)定地提供數據。

數據質量管理的規(guī)劃和實施包括以下內容：

一是數據質量管控體系的建立，包括數據質量的評估體系，定期評估數據質

量狀況；

二是在部門各個應用系統(tǒng)中的落實，包括每個應用系統(tǒng)中的數據質量檢查等;

三是在最開始建立數據質量管理系統(tǒng)的時候，借助數據治理平臺上，通過建

立數據質量管理的規(guī)則來集中化地建立數據質量管理系統(tǒng)，發(fā)現問題并持續(xù)改進;

四是數據質量管理與業(yè)務稽核的結合，通過業(yè)務規(guī)則的稽核來發(fā)現數據質量

深層次的問題，將數據質量與業(yè)務一線結合起來，使業(yè)務人員對數據質量問題有

更加清晰和明確的認識。

完善的數據質量管理是保障各項數據治理工作能夠得到有效落實，達到數據

準確、完整的目標，并能夠提供有效的增值服務的重要基礎。

（六）數據服務

數據整理最終目的就是要服務丁各部門單位、人員等，能更準確更快更方便

的服務是數據服務管理的目標。

數據服務管理是指針對內部積累多年的數據，研究如何能夠充分利用這些數

據，分析行業(yè)業(yè)務流程優(yōu)化業(yè)務流程。數據使用的方式通常包括對數據的深度加

工和分析，包括通過各種報表、工具來分析運營層面的問題，還包括通過數據挖

掘等工具對數據進行深度加工，從而更好的管理者服務。通過建立統(tǒng)一的數據服

27

務平臺來滿足針對跨部門、跨系統(tǒng)的數據應用。通過統(tǒng)一的數據服務平臺來統(tǒng)一

數據源，變多源為單源，加快數據流轉速度，提升數據服務的效率。

（七）數據安全

由于集團單位的重要且敏感信息大部分集中在應用系統(tǒng)中，數據安全更是至

關重要。如何保障數據不被泄露和非法訪問，是非常關鍵的問題。數據安全管理

主要解決的就是數據在保存、使用和交換過程中的安全問題。

數據安全管理主要體現在以下六個方面：

一是數據使用的安全性，包括基礎數據的保存、訪問和權限管理；

二是數據隱私問題，系統(tǒng)中采集的證件號碼、銀行賬號等信息在下游分析系

統(tǒng)和內部管理系統(tǒng)中，是否要進行加密，以避免數據被非法訪問；

三是訪問權限統(tǒng)一管理，包括單點登錄問題及用戶名、數據和應用的訪問授

權統(tǒng)一管理：

四是數據安全審計，為數據修改、使用等環(huán)節(jié)設置審計方法，事后進行審計

和責任追究；

五是制度及流程建立，逐步建立數據安全性的管理辦法、系統(tǒng)開發(fā)規(guī)范、數

據隱私管理辦法及相應的應用系統(tǒng)規(guī)范、在管理決策和分析類系統(tǒng)中的審計管理

辦法等；

六是應用系統(tǒng)權限的訪問控制，建立集團級權限管理系統(tǒng)，增加數字水印等

技術在應用系統(tǒng)中的使用。

28

1.8.保密方案

我公司上曾承建了大量涉密工程，具有豐富的保密工程施工經驗、完善的保

密工作制度、先進的保密工作專用設備。在幾十年的奮斗歷程中，無論是涉及黨

和國家的政治經濟秘密，還是一般意義上的內部事項，均做到了保密工作慎之又

慎，保守秘密萬無一失，從未發(fā)生過任何失泄密事故，多次受到黨政機關和建設

方的高度贊賞。

我們會高標準地完成好這方面的防護工作。盡管如此，一旦我們中標，我們

將把完成好本工程的施工任務，確保與本工程有關的涉密事項，作為全新戰(zhàn)場、

全新的任務和全面的挑戰(zhàn)，通過制度上的高度完善、措施上的高度嚴密和行動上

的高度自覺兌現我們的各項承諾。

公司將嚴格按照《中華人民共和國保密條例》執(zhí)行，以確保工程中涉及到用

戶單位機密以及公司自身，程技術機密的不對外泄漏。機密的保管實行點對點管

理辦法，落實到人，做到有法可依，違法必究，責任落實到位。

1.8.1.保密原則

實行積極防范、突出重點、既確保秘密又便利各項工作的方針。積極防范要

求在保密工作中要把事先防范措施抓緊、抓嚴、抓落實，以減少竊密。在實際工

作中，應當把工作的立足點和著力點放在防范方面。主動把工作做在前頭，盡一

切努力消除可能造成泄密的隱患，堵塞可能泄密的漏洞，增加秘密的安全系數,

防止泄密事件發(fā)生。對于本工程的保密工作應做到進入施工現場的所有人員人人

有責。

1.8.2.組織機構建立

為保證項目保密工作的順利開展，公司以項目經理牽頭成立保密工作組，組

員由檔案管理專職人員、技術負責人、項目管理人員組成，并為檔案管理配備專

用的檔案室，針對每個工程由項目負責人兼任保密責任人。

項目保密組織體系如下圖：

29

項目經理

1.8.3.保密內容

保密內容包括：工程技術實現原理、軟硬件使用密碼、工程施工圖紙及設備

布局圖、工程進度及擴展方式、工程資料、工程實施細節(jié)、工程合同、人員部署、

項目資金等。

1.8.4.做好保密工作的措施

1.項目部把保密工作為一項重要的工作與其他工作同步進行。項目部成立以

項目經理為首的保密工作小組，抓好本工程的保密工作。

2.工程開工前，針對本工程的特點組織項目管理人員進行全面的、系統(tǒng)的保

密知識的學習及保密技能的培訓。加強管理人員的保密工作管理，提高管理人員

的政治思想和業(yè)務素質，以適應本工程保密任務的需要。工人進場前，由項目部

組織所有進場工人進行學習，簽訂保密工作協議書。堅持經常性的保密教育。

3.建立健全保密規(guī)章制度，嚴格保密紀律并嚴格執(zhí)行，經常督促檢查，堵塞

泄密漏洞。保密檢查工作程序圖如下：

30

自檢制度保密目標

檢

檢

檢

檢

檢

查

查

查

查

查

保

保

保

預

保

密

密

密

防

密

會

日

制

泄

宣

議

常

度

密

傳

記

活

措

落

教

錄

動

施

實