湖南聯(lián)通經(jīng)營分析系統(tǒng)講稿

1、2021-10-241北京東方國信電子有限公司北京東方國信電子有限公司統(tǒng)一經(jīng)營信息服務(wù)平臺統(tǒng)一經(jīng)營信息服務(wù)平臺2021-10-242交流內(nèi)容介紹 東方國信簡介東方國信簡介 系統(tǒng)建設(shè)背景系統(tǒng)建設(shè)背景 系統(tǒng)的建設(shè)方案系統(tǒng)的建設(shè)方案 數(shù)據(jù)倉庫的建設(shè)數(shù)據(jù)倉庫的建設(shè) 信息服務(wù)平臺組成信息服務(wù)平臺組成 數(shù)據(jù)挖掘數(shù)據(jù)挖掘 交流與探討交流與探討2021-10-243一、公司介紹一、公司介紹- -基本情況基本情況北京中關(guān)村科技園區(qū)高新技術(shù)企業(yè)信息產(chǎn)業(yè)部軟件企業(yè)認(rèn)定證書主要客戶群：電信運營商 人員結(jié)構(gòu)： 博士研究生： 4%碩士研究生：16% 本 科 生： 70% 其 他 人 員：10%技術(shù)狀況 crm/work

2、flow call center/ ivr /acd /ctios:unix/windowsdb:oracle/sybase/informix/ sql serverc+/delphi/java/j2ee客戶市場客戶市場客戶關(guān)系管理經(jīng)營分析與決策支持計 費 帳 務(wù) 系 統(tǒng)呼 叫 中 心綜 合 語 音 平 臺合作伙伴sas/cognossap/spssibm/microsoft售前支持市場開拓產(chǎn)品營銷產(chǎn)品開發(fā)產(chǎn)品測試質(zhì)量管理服務(wù)體系工程實施客戶保障輔助部門2021-10-244東方國信-市場情況客戶關(guān)系管理經(jīng)營分析與決策支持呼叫中心系統(tǒng)綜合帳務(wù)系統(tǒng)綜合語音平臺長春辦事處西安辦事處內(nèi)蒙辦事處上海辦

3、事處辦事處廣州辦事處辦事處2021-10-245東方國信-質(zhì)量保證軟件設(shè)計及質(zhì)量保證： 嚴(yán)格、詳細(xì)的需求調(diào)研 采用標(biāo)準(zhǔn)化軟件設(shè)計方案 詳細(xì)的文檔要求 版本控制 軟件測試（綜合性/模塊性） 階段性評定2021-10-246東方國信-服務(wù)體系公司的生存：產(chǎn)品-客戶-服務(wù)工程實施前期現(xiàn)場勘測，取得客戶的現(xiàn)場情況工程界面的細(xì)分多工程組的并行實施，核心技術(shù)人員綜合支持工程文件的交換與認(rèn)定現(xiàn)場培訓(xùn)售后服務(wù)培訓(xùn)計劃支持電話/現(xiàn)場服務(wù)承諾產(chǎn)品升級與更新 硬件-主機(jī)產(chǎn)品硬件-外設(shè)產(chǎn)品硬件-網(wǎng)絡(luò)產(chǎn)品軟件-數(shù)據(jù)庫軟件-中間件軟件-統(tǒng)計分析東方國信客戶服務(wù)中心客戶2021-10-2471.1.聯(lián)通公司面臨的挑戰(zhàn)聯(lián)通公

4、司面臨的挑戰(zhàn) 2.2.聯(lián)通對統(tǒng)一經(jīng)營信息的基本需求聯(lián)通對統(tǒng)一經(jīng)營信息的基本需求 3.3.統(tǒng)一經(jīng)營信息服務(wù)平臺統(tǒng)一經(jīng)營信息服務(wù)平臺建設(shè)的必要性建設(shè)的必要性二、系統(tǒng)建設(shè)背景二、系統(tǒng)建設(shè)背景2021-10-248wto國外電信巨頭國外電信巨頭行業(yè)背景行業(yè)背景挑戰(zhàn)挑戰(zhàn)市場市場2021-10-249三、系統(tǒng)建設(shè)方案 硬件組網(wǎng)方案圖 主要服務(wù)器列表 系統(tǒng)實際的物理主機(jī) 系統(tǒng)外購軟件物理承載 服務(wù)器處理性能指標(biāo) 主機(jī)性能分析的一些知識 ods/etl服務(wù)器性能分析 dw/olap/web服務(wù)器性能分析 系統(tǒng)存貯容量要求 ods存儲容量要求數(shù)據(jù)倉庫存儲容量估算 整個數(shù)據(jù)倉庫的容量2021-10-2410硬件組

5、網(wǎng)方案圖硬件組網(wǎng)方案圖2021-10-2411主要服務(wù)器列表 按照完整的經(jīng)營分析系統(tǒng)的建設(shè)，從邏輯上講應(yīng)用服務(wù)應(yīng)包括： etl服務(wù) ods服務(wù) dw服務(wù) 報表服務(wù) olap服務(wù) web服務(wù) 元數(shù)據(jù)信息服務(wù) 數(shù)據(jù)挖掘服務(wù) 元數(shù)據(jù)信息和數(shù)據(jù)挖掘服務(wù)功能可以考慮在二期建設(shè)完成，其它服務(wù)功能在一期開始建設(shè)。2021-10-2412系統(tǒng)實際的物理主機(jī)2021-10-2413系統(tǒng)外購軟件物理承載 系統(tǒng)外購軟件物理承載分布 dw/ods/etl服務(wù)器承載軟件 數(shù)據(jù)庫軟件：如oracle9i、sybasease+sybaseiq etl軟件：如caadvantagedatatransformer、inform

6、aticapowermart 元數(shù)據(jù)管理軟件：如caadvantagerepository olap/web/報表服務(wù)器承載軟件 olap軟件：如cognospowerplayenterpriseserver web/報表軟件：cognosimpromptuwebreport2021-10-2414服務(wù)器處理性能指標(biāo)服務(wù)器處理性能指標(biāo)服務(wù)器處理性能指標(biāo)服務(wù)器處理能力應(yīng)以未來3-5年考慮，到2003年底，全部業(yè)務(wù)的用戶數(shù)估計達(dá)到250萬，以此計算etl/ods/dw服務(wù)器的tpmc值接近4萬，采用類似ibm m85或hp rp7410檔次的小型機(jī)，比較符合未來發(fā)展的需要；從功能上分析，報表/ol

7、ap/web服務(wù)的處理能力應(yīng)大于或等于etl/ods/dw服務(wù)器的tpmc值，所以系統(tǒng)采用兩臺小型機(jī)來完成全部服務(wù)功能。2021-10-2415主機(jī)性能分析的一些知識主機(jī)性能分析的一些知識tpmc 衡量服務(wù)器處理處理能力（每秒鐘處理事務(wù)的能力） 配置的操作系統(tǒng) 處理的數(shù)據(jù) 估算應(yīng)用的事務(wù)要求，來反推主機(jī)的要求 主機(jī)tpmc值是通過實驗手段取得的； 特定配置的主機(jī)硬件 特定配置的操作系統(tǒng) 特定配置的數(shù)據(jù)庫系統(tǒng) 其配置中任何一項的變化都可能會對tpmc值有很大的影響tpc-h 針對決策支持系統(tǒng)中的即席查詢，應(yīng)當(dāng)采用tpch（每小時處理的性能）作為衡量主機(jī)處理能力的指標(biāo)。這種指標(biāo)處理是面向大量的即席

8、查詢和并發(fā)的數(shù)據(jù)修改操作。這種處理用戶往往不知道要查詢什么數(shù)據(jù)，不能對預(yù)見的數(shù)據(jù)進(jìn)行優(yōu)化工作。tpc-r 它也是以每小時處理能力為計量單位的。這種指標(biāo)是在用戶知道要查詢什么數(shù)據(jù)，并可以對可相應(yīng)的數(shù)據(jù)表進(jìn)行優(yōu)化。2021-10-2416ods/dw/etl服務(wù)器性能分析服務(wù)器性能分析以詳細(xì)話單匯總和分析為例來分析主機(jī)的性能。以詳細(xì)話單匯總和分析為例來分析主機(jī)的性能。估算條件：估算條件：(可以根據(jù)實際情況進(jìn)行修改)總用戶數(shù)按250萬計算每天每用戶按5個話單分析過程：分析過程：每分鐘處理：（用戶數(shù)）250萬*5/24/608681峰值處理：8681*2= 17362需執(zhí)行約8個sql語句，則估算一個

9、話單匯總處理業(yè)務(wù)相當(dāng)?shù)膖pc-c值為：8*0.45/4=0.9tpc-c話單匯總和分析，的tpc-c值要求滿足：17362*0.9 15626假設(shè)其他經(jīng)營分析的tpc-c總和與話單分析的tpc-c相等。15626*2=31252考慮25%的冗余（系統(tǒng)其它開銷）：主機(jī)性能=31252*1.25=39065支持到2003年底的主機(jī)性能的tpc-c值約為39065ods/etl服務(wù)器完成的功能：服務(wù)器完成的功能： 1.從源數(shù)據(jù)到ods地抽取、清潔、轉(zhuǎn)換和裝載2.從ods到dw地抽取、清潔、轉(zhuǎn)換和裝載3.在ods中保存接近當(dāng)前業(yè)務(wù)的數(shù)據(jù) 根據(jù)根據(jù)tpc-c的標(biāo)準(zhǔn)：的標(biāo)準(zhǔn)：tpmc值是根據(jù)標(biāo)準(zhǔn)模型中ne

10、w-order事務(wù)的處理數(shù)目來計算的一個new-order事務(wù)由平均4-5個sql語句處理完成整個測試的執(zhí)行過程中，new-order處理占45%。2021-10-2417報表報表/olap/web服務(wù)器性能分析服務(wù)器性能分析 dw/olap/web服務(wù)器主要完成的功能： 1數(shù)據(jù)倉庫的數(shù)據(jù)存儲 2對數(shù)據(jù)進(jìn)行olap分析 3提供用戶的連接 4提供web展現(xiàn)功能 從功能上分析，該服務(wù)器既有olap處理，又有oltp的處理。是兩種應(yīng)用的結(jié)合，因此，在性能的分析上，我們要進(jìn)行了綜合考慮。olap分析的時長是與數(shù)據(jù)量有一定的關(guān)系的，也就是數(shù)據(jù)量的增加，相應(yīng)的分析時長也會增加。olap數(shù)據(jù)模型的生成要對數(shù)

11、據(jù)庫進(jìn)行oltp處理，所以該服務(wù)器的性能應(yīng)大于或等于ods/etl服務(wù)器的tpc-c值。2021-10-2418系統(tǒng)存儲容量要求系統(tǒng)存儲容量要求系統(tǒng)存儲容量系統(tǒng)目前建設(shè)的存儲容量應(yīng)先考慮到2003年底，到2003年底，聯(lián)通全部業(yè)務(wù)的用戶數(shù)估計達(dá)到250萬，以此計算ods/dw數(shù)據(jù)庫的存儲容量為2.837tb系統(tǒng)使用兩臺小型機(jī)采用雙機(jī)群集方式運行，充分利用公司現(xiàn)有營帳的emc8430，相應(yīng)擴(kuò)展其存儲容量。2021-10-2419ods存儲容量的估算估算條件：用戶數(shù)(萬)：250萬存儲時間（月）：6月調(diào)整因子：0.25注：該用戶數(shù)為聯(lián)通全部業(yè)務(wù)（gsm,cdma,193,165,固定網(wǎng)等）以gsm

12、為準(zhǔn)折合的用戶數(shù)。序號項目存儲單位（字節(jié)） 存儲期限（月）平均使用次數(shù)（天）平均包含子項計算公式結(jié)果(g)a話單存儲20065存儲單位*平均使用次數(shù)*30*存儲期限419.10 b增值業(yè)務(wù)話單存儲6064存儲單位*平均使用次數(shù)*30*存儲期限100.58 c月帳單存儲426每月一次6存儲單位*平均包含子項*存儲期限3.52d用戶資料存儲105存儲單位*用戶數(shù)0.24 e用戶資料變更存儲6用戶資料存儲*10%*60.15 f用戶服務(wù)使用存儲419存儲單位*平均包含子項*用戶數(shù)0.86 g用戶服務(wù)變更存儲6用戶服務(wù)使用存儲*10%*60.52總計(a+b+c+d+e+f+g)*(1+調(diào)整因子)65

13、6.212021-10-2420數(shù)據(jù)倉庫存儲容量估算二、數(shù)據(jù)倉庫存儲容量估算：計算公式：(xy)z*(z*zb+xyb)*t*wz*s*se公式因子解釋平均取值x是平均維數(shù)：4y是平均層次數(shù)：3z是平均分類：4t是存儲期限（年）：2xyb是維度量字節(jié)數(shù)30zb是層次及分類度量字節(jié)數(shù)5w是維的有效壓縮比0.4s是主題個數(shù)15se是業(yè)務(wù)個數(shù)6數(shù)據(jù)倉庫容量(g)=13142021-10-2421整個數(shù)據(jù)倉庫的容量三、整個數(shù)據(jù)倉庫的容量： ods容量+數(shù)據(jù)倉庫容量(g)=656.21+1314=1970.21g系統(tǒng)因子系數(shù)：操作系統(tǒng)和數(shù)據(jù)庫本身工作空間（需要考慮系統(tǒng)緩沖區(qū)、工作空間、索引、臨時表等因素

14、）0.2raid5因子系數(shù)1.2系統(tǒng)的存儲容量系統(tǒng)的存儲容量(g)=(g)=整個數(shù)據(jù)倉庫容量整個數(shù)據(jù)倉庫容量* *（1+1+系統(tǒng)因子系數(shù)）系統(tǒng)因子系數(shù)）* *raid5raid5因子數(shù)因子數(shù) = = 2.837 t系統(tǒng)的物理磁盤存儲容量：2021-10-2422系統(tǒng)總體處理流程系統(tǒng)總體處理流程 數(shù)據(jù)格式檢查數(shù)據(jù)格式檢查數(shù)數(shù)據(jù)據(jù)系系統(tǒng)統(tǒng)管管理理數(shù)據(jù)裝載至收集層數(shù)據(jù)裝載至收集層收集層數(shù)據(jù)抽取、轉(zhuǎn)換收集層數(shù)據(jù)抽取、轉(zhuǎn)換數(shù)據(jù)抽取、清潔、轉(zhuǎn)換數(shù)據(jù)抽取、清潔、轉(zhuǎn)換數(shù)據(jù)倉庫數(shù)據(jù)裝載數(shù)據(jù)倉庫數(shù)據(jù)裝載標(biāo)準(zhǔn)報表數(shù)據(jù)文件標(biāo)準(zhǔn)報表數(shù)據(jù)文件/報表生成報表生成數(shù)據(jù)倉庫接數(shù)據(jù)倉庫接口口oltp 查詢查詢 olap統(tǒng)計報表統(tǒng)

15、計報表綜合型綜合型eis報報表表總部標(biāo)準(zhǔn)數(shù)據(jù)總部標(biāo)準(zhǔn)數(shù)據(jù)文件文件/報表傳報表傳輸輸總部統(tǒng)一經(jīng)營信息服總部統(tǒng)一經(jīng)營信息服務(wù)子系統(tǒng)務(wù)子系統(tǒng)生產(chǎn)系統(tǒng)數(shù)據(jù)生產(chǎn)系統(tǒng)數(shù)據(jù)erp系統(tǒng)系統(tǒng)oa系統(tǒng)系統(tǒng)數(shù)據(jù)采集數(shù)據(jù)采集數(shù)據(jù)加載數(shù)據(jù)加載數(shù)據(jù)分析數(shù)據(jù)分析信息展現(xiàn)信息展現(xiàn)2021-10-2423外購軟件分布外購軟件分布ca advantage repository exchange for db ( oracle,db2,informix. )ca advantage repository exchange for application( sql,powerbuilder,c+.)ca advantage repo

16、sitory data shopper optionca advantage repository engine for distributed system元數(shù)據(jù)管理ca advantage data transformeretl工具oracle9i database enterprise edition數(shù)據(jù)倉庫存儲工具sybasease+sybase iqinformatica 2021-10-2424外購軟件分布外購軟件分布impromptu web reportpowerplay enterprise server for unix 6.6impromptu administrator

17、 6.0impromptu user 6.0t r a n s f o r m a t i o n s e r v e r f o r u n i x 6 . 6powerplay user 6.6前端分析展現(xiàn)工具2021-10-2425etletl工具的比較工具的比較產(chǎn)品名稱產(chǎn)品名稱microsoftdts datastage sagentca adtinformaticaoraclewarehouse builder東方國信東方國信etl速度與吞吐能力速度與吞吐能力低中中高高中中支持的數(shù)據(jù)格式：支持的數(shù)據(jù)格式：流行數(shù)據(jù)庫、流行數(shù)據(jù)庫、odbc支持支持支持支持支持支持支持元數(shù)據(jù)支持元數(shù)據(jù)支持

18、/支持好支持支持/增量抽取能力增量抽取能力不好中中好中中不好腳本支持能力腳本支持能力支持支持支持支持支持支持支持計劃任務(wù)支持計劃任務(wù)支持支持支持支持支持支持支持支持告警提醒告警提醒支持實時監(jiān)控窗口支持支持支持支持支持運行平臺運行平臺windowswindowsunixwindowssolariswindowsunixwindowsunixwindowswindows適用場合適用場合簡單應(yīng)用中等應(yīng)用中等應(yīng)用復(fù)雜應(yīng)用復(fù)雜應(yīng)用中等應(yīng)用中等應(yīng)用2021-10-2426前端工具軟件介紹前端工具軟件介紹數(shù)據(jù)倉庫前端展現(xiàn)工具的比較：主要是3個廠家的產(chǎn)品：businessobject,brio,cognosp

19、owerplay。business object (bo)briocognos數(shù)據(jù)庫支持?jǐn)?shù)據(jù)庫支持全面全面全面操作系統(tǒng)支持操作系統(tǒng)支持全面中全面查詢和報表查詢和報表支持支持支持olap分析分析優(yōu)秀優(yōu)秀非常優(yōu)秀模型設(shè)計模型設(shè)計方便方便方便跨主題數(shù)據(jù)訪問跨主題數(shù)據(jù)訪問不支持支持支持時間序列分析時間序列分析不支持不支持支持對數(shù)學(xué)、統(tǒng)計、財務(wù)的支持（階乘、方差、折舊等）對數(shù)學(xué)、統(tǒng)計、財務(wù)的支持（階乘、方差、折舊等）良好良好優(yōu)秀支持的瀏覽器支持的瀏覽器好好好操作界面化操作界面化良好優(yōu)秀良好學(xué)習(xí)難度學(xué)習(xí)難度一般容易容易自編公式能力自編公式能力好好好支持脫機(jī)訪問支持脫機(jī)訪問差好好廠商支持廠商支持一般一般好2

20、021-10-2427應(yīng)用軟件功能介紹應(yīng)用軟件功能介紹1 1報表系統(tǒng)總部一類報表總部二類報表總部三類報表省分專業(yè)報表地市專業(yè)報表分支機(jī)構(gòu)專業(yè)報表2021-10-2428應(yīng)用軟件功能介紹應(yīng)用軟件功能介紹2 2業(yè)務(wù)信息分析營業(yè)信息分析計費信息分析繳費信息分析帳務(wù)信息分析結(jié)算信息分析客服信息分析代理商信息分析其它業(yè)務(wù)分析客戶信息分析客戶發(fā)展分析客戶價值分析客戶保持分析客戶滿意分析客戶行為分析2021-10-2429應(yīng)用軟件功能介紹應(yīng)用軟件功能介紹3 3元數(shù)據(jù)管理應(yīng)用邏輯元數(shù)據(jù)管理商業(yè)元數(shù)據(jù)管理系統(tǒng)管理用戶權(quán)限管理日常維護(hù)管理2021-10-2430備份策略備份策略元數(shù)據(jù)全部數(shù)據(jù)文件備份緩沖區(qū)層數(shù)據(jù)

21、不備份ods層數(shù)據(jù) 不備份倉庫層的數(shù)據(jù) 維表 ：表空間整體備份（文件）事實表：按月備份（磁帶/文件）cube數(shù)據(jù) 將cube文件備份日志數(shù)據(jù)將日志文件備份（一般只用于查看）2021-10-2431培訓(xùn)內(nèi)容介紹-應(yīng)用培訓(xùn)應(yīng)用軟件培訓(xùn)系統(tǒng)體系結(jié)構(gòu)操作系統(tǒng)原理數(shù)據(jù)庫及數(shù)據(jù)倉庫知識系統(tǒng)硬件及組網(wǎng)技術(shù)系統(tǒng)配置管理工具軟件的操作原理功能使用培訓(xùn)業(yè)務(wù)分析方法系統(tǒng)常見故障及解決方法基準(zhǔn)軟件培訓(xùn)體系結(jié)構(gòu)與系統(tǒng)配置數(shù)據(jù)倉庫模型etl數(shù)據(jù)采集接口集成應(yīng)用接口元數(shù)據(jù)管理軟件開發(fā)人員的培訓(xùn)(高級培訓(xùn))2021-10-2432原廠商培訓(xùn)原廠商培訓(xùn)oracle產(chǎn)品培訓(xùn)sybase產(chǎn)品培訓(xùn)ca產(chǎn)品培訓(xùn)cognos產(chǎn)品培訓(xùn)im

22、promptu應(yīng)用及管理powerplay數(shù)據(jù)探查報表powerplaytransformer模型設(shè)計2021-10-2433工程實施計劃進(jìn)度表工程實施計劃進(jìn)度表時間第一周第二周第三周第四周第五周第六周系統(tǒng)定貨需求分析系統(tǒng)設(shè)計工程實施調(diào)試運行人員培訓(xùn)2021-10-2434工程實施計劃細(xì)分工程實施計劃細(xì)分第一階段：系統(tǒng)定貨階段（包括與相關(guān)公司的配合） 合同簽定起，立即啟動定貨程序第二階段：需求分析階段（包括應(yīng)用需求、流程調(diào)查） 組建工程小組（東方國信10人，局方不少于2人） 由工程小組（2人）、項目開發(fā)小組（5人）、行業(yè)專家（3人）、用戶代表（不少于3人）等進(jìn)行需求的細(xì)化 形成需求分析書，做為

23、工程初驗時要實現(xiàn)的目標(biāo)第三階段：系統(tǒng)設(shè)計階段 工程小組開始實施（5人），項目開發(fā)小組（8人），行業(yè)專家（3人），用戶代表（不少于2人），共同實施工程。第四階段：工程實施階段 工程小組開始實施（12人），項目開發(fā)小組（4人），行業(yè)專家（2人），用戶代表（不少于2人），共同實施工程。 由測試小組（東方國信4人，局方不少于2人）進(jìn)行系統(tǒng)測試第五階段：調(diào)試試運行階段（包括試運行和系統(tǒng)調(diào)整） 工程小組開始實施（12人），項目開發(fā)小組（4人），行業(yè)專家（1人），用戶代表（不少于3人），對工程的試運行進(jìn)行觀察與維護(hù)。第六階段：系統(tǒng)維護(hù)人員培訓(xùn)階段（包括正式運行、維護(hù)） 東方國信培訓(xùn)講師（4人）對局方操作人員

24、、維護(hù)人員進(jìn)行統(tǒng)一培訓(xùn)。2021-10-2435四、企業(yè)數(shù)據(jù)倉庫的建立四、企業(yè)數(shù)據(jù)倉庫的建立1. 數(shù)據(jù)倉庫的建立過程數(shù)據(jù)采集數(shù)據(jù)倉庫裝載生成2. 產(chǎn)品的信息模型數(shù)據(jù)倉庫信息模型操作數(shù)據(jù)存儲（ods）信息模型系統(tǒng)管理信息模型2021-10-2436數(shù)據(jù)倉庫特點管理大量數(shù)據(jù)管理多介質(zhì)索引/監(jiān)視數(shù)據(jù)多種技術(shù)的接口設(shè)計者對數(shù)據(jù)存放位置的控制數(shù)據(jù)的并行存儲/管理元數(shù)據(jù)管理語言接口數(shù)據(jù)的高效裝入高效索引的利用數(shù)據(jù)壓縮復(fù)合鍵碼變長數(shù)據(jù)加鎖管理單獨索引處理快速恢復(fù)其他的技術(shù)特征2021-10-2437數(shù)據(jù)格式檢查源數(shù)據(jù)清潔、抽取、轉(zhuǎn)換ods數(shù)據(jù)抽取、轉(zhuǎn)換裝載數(shù)據(jù)到dw數(shù)據(jù)封裝成總部要求格式文件報表展現(xiàn)業(yè)務(wù)系統(tǒng)

25、數(shù)據(jù)/外部數(shù)據(jù)dw數(shù)據(jù)抽取、轉(zhuǎn)換dw數(shù)據(jù)生成報表裝載數(shù)據(jù)到ods數(shù)據(jù)文件傳輸產(chǎn)品數(shù)據(jù)流圖產(chǎn)品數(shù)據(jù)流圖2021-10-2438數(shù)據(jù)倉庫的數(shù)據(jù)采集流程數(shù)據(jù)倉庫的數(shù)據(jù)采集流程2021-10-2439數(shù)據(jù)倉庫的數(shù)據(jù)加載流程數(shù)據(jù)倉庫的數(shù)據(jù)加載流程2021-10-2440操作數(shù)據(jù)存儲（操作數(shù)據(jù)存儲（odsods）信息模型信息模型 客戶基本資料 客戶定購資料 營業(yè)模型 套餐和優(yōu)惠定購模型 帳務(wù)模型 資源管理模型 結(jié)算信息模型 客服信息模型 話單清單模型 2021-10-2441數(shù)據(jù)倉庫信息模型數(shù)據(jù)倉庫信息模型 主題主題 維表維表 事實表事實表2021-10-2442經(jīng)營信息分析的主題經(jīng)營信息分析的主題 帳務(wù)

26、信息分析帳務(wù)信息分析 計費信息分析計費信息分析 繳費信息分析繳費信息分析 結(jié)算信息分析結(jié)算信息分析 營業(yè)信息分析營業(yè)信息分析 客服信息分析客服信息分析 代理商信息分析代理商信息分析 其它信息分析其它信息分析 客戶發(fā)展分析客戶發(fā)展分析 客戶構(gòu)成分析客戶構(gòu)成分析 客戶價值分析客戶價值分析 客戶保持分析客戶保持分析 客戶行為分析客戶行為分析 客戶欠費分析客戶欠費分析 客戶流失分析客戶流失分析 客戶服務(wù)分析客戶服務(wù)分析 2021-10-2443系統(tǒng)管理信息模型系統(tǒng)管理信息模型 日志管理信息模型 安全管理信息模型 系統(tǒng)監(jiān)控信息模型 數(shù)據(jù)采集/數(shù)據(jù)上報信息模型 調(diào)度管理信息模型 2021-10-2444經(jīng)

27、營信息服務(wù)平臺架構(gòu)經(jīng)營信息服務(wù)平臺架構(gòu)數(shù)據(jù)倉庫數(shù)據(jù)倉庫olap模塊模塊報表報表/領(lǐng)導(dǎo)信息模塊領(lǐng)導(dǎo)信息模塊智能預(yù)測智能預(yù)測/規(guī)則分析規(guī)則分析企業(yè)用戶企業(yè)用戶webinternet/intranet信息門戶信息門戶2021-10-2445報表模塊報表模塊綜合查詢應(yīng)用綜合查詢應(yīng)用 企業(yè)級企業(yè)級olap分析分析領(lǐng)導(dǎo)信息系統(tǒng)領(lǐng)導(dǎo)信息系統(tǒng)用戶定制模塊用戶定制模塊企企業(yè)業(yè)信信息息門門戶戶智能分析模塊智能分析模塊2021-10-2446報表系統(tǒng)實現(xiàn)原理報表系統(tǒng)實現(xiàn)原理 報報表表生生成成模模塊塊立方體生成/更新報表發(fā)布立方體元數(shù)據(jù)立方體報表格式報表數(shù)據(jù)報表告警錯誤信息日志報表查看數(shù)數(shù)據(jù)據(jù)存存儲儲系系統(tǒng)統(tǒng)管管理理

28、、告警 錯誤管理日志管理立方體/報表元數(shù)據(jù)管理統(tǒng)計型報表數(shù)據(jù)生成/更新數(shù)據(jù)倉庫抽取數(shù)據(jù)立方體布署分析型報表生成統(tǒng)計型報表生成ods報表元數(shù)據(jù)2021-10-2447統(tǒng)計型報表數(shù)據(jù)ods數(shù)據(jù)dw數(shù)據(jù)立方體統(tǒng)計型報表報表格式告警錯誤信息日志統(tǒng)計型報表數(shù)據(jù)生成/更新生成/更新統(tǒng)計型報表生成報表發(fā)布抽取數(shù)據(jù)報表元數(shù)據(jù)統(tǒng)計型報表的生成過程統(tǒng)計型報表的生成過程2021-10-2448分析型報表生成過程分析型報表生成過程抽取數(shù)據(jù)立方體分析型報表報表格式告警錯誤信息日志立方體生成/更新分析型報表生成立方體布署報表發(fā)布dw數(shù)據(jù)立方體元數(shù)據(jù)o d s 數(shù)據(jù)表現(xiàn)方式鉆取2021-10-2449報表發(fā)布報表發(fā)布 傳遞

29、動作：推和拉推推u郵件郵件n發(fā)送一個報表郵發(fā)送一個報表郵件件u文件服務(wù)器文件服務(wù)器n工作組級文件共工作組級文件共享享u定時刷新定時刷新n定時運行報表刷定時運行報表刷新新u分布列表分布列表n發(fā)送到選定的成發(fā)送到選定的成員處員處最終用戶最終用戶標(biāo)準(zhǔn)報表標(biāo)準(zhǔn)報表拉拉web流覽器2021-10-2450報表的更新和維護(hù)報表的更新和維護(hù)數(shù)據(jù)倉庫數(shù)據(jù)倉庫2021-10-2451領(lǐng)導(dǎo)決策信息系統(tǒng)領(lǐng)導(dǎo)決策信息系統(tǒng) 綜觀全局的能力綜觀全局的能力 細(xì)致分析的能力細(xì)致分析的能力 快速方便的獲取所需的信息快速方便的獲取所需的信息 針對高層管理人員的需求針對高層管理人員的需求2021-10-2452綜合查詢服務(wù)綜合查詢

30、服務(wù) ods相關(guān)數(shù)據(jù)相關(guān)數(shù)據(jù)請求接收請求接收用戶權(quán)限信息用戶權(quán)限信息結(jié)果顯示結(jié)果顯示告警錯誤信息告警錯誤信息日志日志權(quán)限控制權(quán)限控制 數(shù)據(jù)訪問數(shù)據(jù)訪問數(shù)據(jù)返數(shù)據(jù)返回生產(chǎn)回生產(chǎn)系統(tǒng)系統(tǒng)2021-10-2453元數(shù)據(jù)管理元數(shù)據(jù)管理可操作的歷史數(shù)據(jù)物理計劃導(dǎo)入轉(zhuǎn)化轉(zhuǎn)化引入引入邏輯工具導(dǎo)入元數(shù)據(jù)確認(rèn)、同步升級2021-10-2454系統(tǒng)管理系統(tǒng)管理 元數(shù)據(jù)管理管理請求用戶權(quán)限信息元數(shù)據(jù)告警錯誤信息日志用戶權(quán)限管理系統(tǒng)監(jiān)控系統(tǒng)接口管理系統(tǒng)日志管理接口資源信息報表管理歸檔/備份/恢復(fù)管理報表歸檔/備份/恢復(fù)條件配置2021-10-2455在數(shù)據(jù)中發(fā)現(xiàn)有價值的規(guī)則或者模式在數(shù)據(jù)中發(fā)現(xiàn)有價值的規(guī)則或者模式女性

31、對市場活動做出女性對市場活動做出回應(yīng)，男性對市場活回應(yīng)，男性對市場活動不做出回應(yīng)，和年動不做出回應(yīng)，和年齡無關(guān)齡無關(guān)六、什么是數(shù)據(jù)挖掘（一）？2021-10-2456數(shù)據(jù)變的復(fù)雜會如何？數(shù)據(jù)變的復(fù)雜會如何？女性對市場活動做出回應(yīng)，女性對市場活動做出回應(yīng)，老年男性也可能對市場活動老年男性也可能對市場活動做出回應(yīng)做出回應(yīng)什么是數(shù)據(jù)挖掘？（二）2021-10-2457數(shù)據(jù)挖掘可以從異常復(fù)雜的數(shù)據(jù)中發(fā)現(xiàn)規(guī)律數(shù)據(jù)挖掘可以從異常復(fù)雜的數(shù)據(jù)中發(fā)現(xiàn)規(guī)律通過數(shù)據(jù)挖掘發(fā)通過數(shù)據(jù)挖掘發(fā)現(xiàn)回應(yīng)的現(xiàn)回應(yīng)的5條規(guī)條規(guī)則：則：1、如果收入大、如果收入大于于29622，有孩，有孩子，并且孩子的子，并且孩子的數(shù)量小于等于數(shù)量小

32、于等于2，那么對市場活，那么對市場活動會回應(yīng)動會回應(yīng)通過數(shù)據(jù)挖掘發(fā)通過數(shù)據(jù)挖掘發(fā)現(xiàn)不回應(yīng)的現(xiàn)不回應(yīng)的5條條規(guī)則：規(guī)則：1、如果收入小、如果收入小于于12640.3，并，并且有一個孩子，且有一個孩子，那么對市場活動那么對市場活動不會回應(yīng)不會回應(yīng)什么是數(shù)據(jù)挖掘？（三）2021-10-2458向60%的客戶發(fā)信，得到了90%的收益數(shù)據(jù)挖掘的意義數(shù)據(jù)挖掘收益分析（一）2021-10-2459數(shù)據(jù)挖掘以前數(shù)據(jù)挖掘以前數(shù)據(jù)挖掘以后數(shù)據(jù)挖掘以后差別差別發(fā)信的數(shù)量發(fā)信的數(shù)量1,000,000750,000(250,000)成本成本$1,000,000$750,000($250,000)響應(yīng)的數(shù)量響應(yīng)的數(shù)量10,0009,000(1,000)每個響應(yīng)的收入每個響應(yīng)的收入$125$125$0總收入總收入$1,250,000$1,125,000($125,000)凈利潤凈利潤$250,000$375,000$125,000建模的費用建模的費用040,