浪潮煙草數(shù)據(jù)中心介紹

數(shù)據(jù)中心架構(gòu)數(shù)據(jù)中體系介紹系統(tǒng)簡介題目第一頁，共48頁。第一頁，共48頁。業(yè)務(wù)、管理系統(tǒng)數(shù)據(jù)中心使用對象業(yè)務(wù)人員、普通管理人員領(lǐng)導(dǎo)層、高級管理、分析人員應(yīng)用范圍基于特定業(yè)務(wù)應(yīng)用領(lǐng)域范圍內(nèi)的業(yè)務(wù)實(shí)現(xiàn)和信息集成，跨領(lǐng)域的信息無法集成?？梢蕴幚砜绮块T、跨時間、跨業(yè)務(wù)、跨信息平臺等復(fù)雜信息的集成問題；技術(shù)實(shí)現(xiàn)對簡單的事務(wù)，短期、少量、實(shí)時數(shù)據(jù)請求提供高速響應(yīng)對復(fù)雜的查詢，集成的、歷史的、大數(shù)據(jù)量的分析提供高速響應(yīng)實(shí)現(xiàn)的功能日常業(yè)務(wù)操作處理；滿足相對固定的報表及有限的業(yè)務(wù)分析需求。提供靈活、直觀的數(shù)據(jù)分析和信息展示；適應(yīng)管理策略的調(diào)整對數(shù)據(jù)分析的需求變化及不斷增長的查詢和報表需求第二頁，共48頁。第二頁，共48頁。兩級數(shù)據(jù)中心、五個體系、三級用戶第三頁，共48頁。第三頁，共48頁。第四頁，共48頁。第四頁，共48頁。第五頁，共48頁。第五頁，共48頁。信息標(biāo)準(zhǔn)業(yè)務(wù)數(shù)據(jù)數(shù)據(jù)倉庫業(yè)務(wù)系統(tǒng)業(yè)務(wù)系統(tǒng)新系統(tǒng)信息維護(hù)庫信息發(fā)布庫標(biāo)準(zhǔn)格式規(guī)則數(shù)據(jù)交換與服務(wù)平臺第六頁，共48頁。第六頁，共48頁。抽取轉(zhuǎn)換裝載第七頁，共48頁。第七頁，共48頁。數(shù)據(jù)源分析策略主要有：數(shù)據(jù)源確認(rèn)：確認(rèn)數(shù)據(jù)的源系統(tǒng)（或文件）和結(jié)構(gòu)、目標(biāo)系統(tǒng)及結(jié)構(gòu)數(shù)據(jù)采集方法：針對每個數(shù)據(jù)源，定義抽取過程是人工抽取、自動觸發(fā)、還是基于工具抽?。粩?shù)據(jù)采集方式：聯(lián)機(jī)采集；對于關(guān)系型數(shù)據(jù)源，并且允許直接訪問的，采用直接連接數(shù)據(jù)源讀取的采集機(jī)制；中間表方式：對于關(guān)系型數(shù)據(jù)源，能夠聯(lián)機(jī)，但不允許直接訪問的，可以考慮采用中間表方式采集，即業(yè)務(wù)系統(tǒng)將需要提供的數(shù)據(jù)拷貝到中間表中，然后從中間表采集數(shù)據(jù)；數(shù)據(jù)離線導(dǎo)入：對于不能聯(lián)機(jī)訪問的，可以采用數(shù)據(jù)離線導(dǎo)入的方式，即業(yè)務(wù)系統(tǒng)將數(shù)據(jù)定時導(dǎo)出（比如excel格式），然后采集系統(tǒng)根據(jù)這些文件進(jìn)行離線導(dǎo)入；人工填報：對于原來沒有計(jì)算機(jī)系統(tǒng)，只有紙介質(zhì)數(shù)據(jù)的，可以采用人工填報＋審核方式采集；采集頻率：對于每個數(shù)據(jù)源，確定數(shù)據(jù)抽取的頻率，每天、每星期、每季度，等等；工作順序：決定抽取任務(wù)中某項(xiàng)工作是否必須等到前面的工作成功完成，才能開始；異常處理：決定如何處理無法抽取的輸入紀(jì)錄。

第八頁，共48頁。第八頁，共48頁。數(shù)據(jù)傳輸方式卷煙銷售數(shù)據(jù)卷煙購進(jìn)數(shù)據(jù)卷煙庫存數(shù)據(jù)煙葉收購數(shù)據(jù)煙葉庫存數(shù)據(jù)煙葉調(diào)撥數(shù)據(jù)許可證發(fā)放數(shù)據(jù)案件結(jié)案數(shù)據(jù)省內(nèi)ETL日采集數(shù)據(jù)卷煙數(shù)據(jù)供應(yīng)商數(shù)據(jù)卷煙價格組織機(jī)構(gòu)數(shù)據(jù)零售戶數(shù)據(jù)坐席員數(shù)據(jù)送貨員數(shù)據(jù)稽查員數(shù)據(jù)客戶經(jīng)理數(shù)據(jù)財務(wù)數(shù)據(jù)煙葉基礎(chǔ)數(shù)據(jù)省內(nèi)ETL日更新數(shù)據(jù)卷煙交易基礎(chǔ)數(shù)據(jù)卷煙交易協(xié)議數(shù)據(jù)卷煙交易合同數(shù)據(jù)煙葉購銷合同煙葉加工合同工商協(xié)同信息準(zhǔn)運(yùn)證信息（國家局信息服務(wù)平臺）webservice即時同步數(shù)據(jù)銷售計(jì)劃采購計(jì)劃信息分類標(biāo)準(zhǔn)績效考核標(biāo)準(zhǔn)社會經(jīng)濟(jì)基礎(chǔ)數(shù)據(jù)行業(yè)經(jīng)濟(jì)運(yùn)行數(shù)據(jù)工業(yè)產(chǎn)/存/價格工業(yè)銷售/價格/客戶工業(yè)銷售合同數(shù)據(jù)銷售合同執(zhí)行情況輔料、原料消耗數(shù)量外部填報/導(dǎo)入一號工程上報數(shù)據(jù)打碼到條數(shù)據(jù)非格式化上報數(shù)據(jù)MQ異步傳輸?shù)诰彭?，?8頁。第九頁，共48頁。一般存在三種類型的數(shù)據(jù)裝載：初始裝載：第一次對所有的數(shù)據(jù)倉庫表進(jìn)行遷移；增量裝載：根據(jù)需要定期裝載應(yīng)用運(yùn)行過程中發(fā)生的變化；完全刷新：完全刷新是指完全刷新一個或多個表的內(nèi)容，并重新裝載新的數(shù)據(jù)。在裝載過程中，一般會用到四種方式：裝載：如果要裝載的目標(biāo)表已經(jīng)存在，而且也有數(shù)據(jù)存在于表中，裝載過程就會抹去已有的數(shù)據(jù)，應(yīng)用輸入文件中新的數(shù)據(jù)。如果裝載的目標(biāo)是個空表，就直接應(yīng)用來自輸入文件的數(shù)據(jù)。追加：若表中已經(jīng)存在數(shù)據(jù)，追加過程會無條件地增加輸入數(shù)據(jù)，并在目標(biāo)表中保存已有的數(shù)據(jù)。當(dāng)存在記錄重復(fù)情況時，需要定義如何處理重復(fù)的輸入數(shù)據(jù)的記錄副本（可以作為副本增加進(jìn)去，也可以將其丟棄）。破壞性合并：如果輸入數(shù)據(jù)記錄的主鍵與已有記錄互相匹配，就對匹配的目標(biāo)記錄進(jìn)行更新，如果沒有匹配的目標(biāo)紀(jì)錄，就將輸入記錄添加入目標(biāo)表。建設(shè)性合并：如果數(shù)據(jù)記錄的主鍵與已有記錄匹配，就保留已有記錄，加入輸入的記錄，并將增加的記錄標(biāo)記為舊記錄的替代。抽取過程示例第十頁，共48頁。第十頁，共48頁。數(shù)據(jù)源SourceModel（包括信息資源標(biāo)準(zhǔn)庫）ODSModelDataWareHouseModelStarSchemaModelDataMiningModelReportModelExternalModelOLAPCube元數(shù)據(jù)MetaDataModelDWDW層層TDODSADAD決策信息展示展現(xiàn)層多維分析自定義報表即席查詢預(yù)定義報表數(shù)據(jù)挖掘外部訪問第十一頁，共48頁。第十一頁，共48頁。面向需求，采用星型模式建模第十二頁，共48頁。第十二頁，共48頁。RDB數(shù)據(jù)組織MDDB數(shù)據(jù)組織產(chǎn)品名稱地區(qū)銷售量紅塔山公司150紅塔山西北60紅塔山華北100紅河?xùn)|北40紅河西北70紅河華北80云煙東北90云煙西北120云煙華北140

東北西北華北冰箱5060100彩電407080空調(diào)90120140第十三頁，共48頁。第十三頁，共48頁。對以多維形式組織起來的數(shù)據(jù)，采取切片、切塊、旋轉(zhuǎn)等各種分析動作，以求剖析數(shù)據(jù)，使最終用戶能從多個角度、多側(cè)面地觀察數(shù)據(jù)庫中的數(shù)據(jù)(1)快速性:用戶對OLAP的快速反應(yīng)能力有很高的要求。(2)可分析性:OLAP系統(tǒng)能處理與應(yīng)用有關(guān)的邏輯分析和統(tǒng)計(jì)分析。(3)多維性:多維性是OLAP的關(guān)鍵屬性。提供對數(shù)據(jù)的多維視圖和分析。(4)信息性:不論數(shù)據(jù)量有多大，也不管數(shù)據(jù)存儲在何處，OLAP系統(tǒng)能及時獲得信息，并且管理大容量信息。

公司1

99

9897

紅塔山

紅河

云煙

9897公司2公司3第十四頁，共48頁。第十四頁，共48頁。1.切片和切塊(SliceandDice)在多維數(shù)據(jù)結(jié)構(gòu)中,按二維進(jìn)行切片,按三維進(jìn)行切塊,可得到所需要的數(shù)據(jù)。如在“城市、產(chǎn)品、時間”三維立方體中進(jìn)行切塊和切片,可得到各城市、各產(chǎn)品的銷售情況。第十五頁，共48頁。第十五頁，共48頁。2.鉆取(Drill)改變維的層次達(dá)到分析效果。按時間維向下鉆取按時間維向上鉆取60第十六頁，共48頁。第十六頁，共48頁。

3.旋轉(zhuǎn)(Rotate)/轉(zhuǎn)軸(Pivot)通過旋轉(zhuǎn)可以得到不同視角的數(shù)據(jù)。第十七頁，共48頁。第十七頁，共48頁。第十八頁，共48頁。第十八頁，共48頁。第十九頁，共48頁。第十九頁，共48頁。分析型指標(biāo)業(yè)務(wù)型指標(biāo)領(lǐng)導(dǎo)層：省局（公司）領(lǐng)導(dǎo)、市公司領(lǐng)導(dǎo)管理層：省局各業(yè)務(wù)部門主管、地市公司部門主管執(zhí)行層：市場經(jīng)理、品牌經(jīng)理第二十頁，共48頁。第二十頁，共48頁。駕駛倉的主要目的是通過生動而明確的圖形和數(shù)據(jù)顯示企業(yè)運(yùn)營的關(guān)鍵性指標(biāo)，使管理者能夠一目了然的了解當(dāng)前經(jīng)濟(jì)運(yùn)行的關(guān)鍵點(diǎn)情況，對企業(yè)運(yùn)營情況進(jìn)行監(jiān)控。第二十一頁，共48頁。第二十一頁，共48頁。領(lǐng)導(dǎo)層功能－績效評估依據(jù)績效考核標(biāo)準(zhǔn)或相關(guān)的管理辦法，以量化的數(shù)據(jù)結(jié)合圖形進(jìn)行直觀的分析和比較，為工作業(yè)績考核和評估提供依據(jù)，如：經(jīng)濟(jì)運(yùn)行評估、網(wǎng)建評估、品牌評價、銷售業(yè)績評估、供應(yīng)商評估、內(nèi)管考評等。第二十二頁，共48頁。第二十二頁，共48頁。領(lǐng)導(dǎo)層功能－績效評估第二十三頁，共48頁。第二十三頁，共48頁。面向流程、面向過程的實(shí)時監(jiān)控流程圖的展現(xiàn)方式供應(yīng)鏈過程、專賣內(nèi)部監(jiān)管第二十四頁，共48頁。第二十四頁，共48頁。面向關(guān)鍵業(yè)務(wù)環(huán)節(jié)的工作效率情況實(shí)時監(jiān)控，體現(xiàn)當(dāng)天不同時段的工作狀態(tài)。電訪情況電訪的工作進(jìn)度和工作質(zhì)量貨源投放情況當(dāng)天擬定的銷量與當(dāng)前完成的銷量當(dāng)天應(yīng)訪戶數(shù)與已下單戶數(shù)對比物流中心運(yùn)作情況當(dāng)天應(yīng)分揀量與已分揀量對比出庫、入庫數(shù)量第二十五頁，共48頁。第二十五頁，共48頁。第二十六頁，共48頁。第二十六頁，共48頁。第二十七頁，共48頁。第二十七頁，共48頁。核心是品類管理思想，重點(diǎn)圍繞品牌的結(jié)構(gòu)優(yōu)化市場評價為主，兼顧效益評價和發(fā)展評價市場評價主要體現(xiàn)為市場占有率；效益評價體現(xiàn)為毛利率；發(fā)展評價指標(biāo)體現(xiàn)為市場增長率。

第二十八頁，共48頁。第二十八頁，共48頁。第二十九頁，共48頁。第二十九頁，共48頁。分析工業(yè)在全省及各個分公司的貢獻(xiàn)度、銷售成長性、服務(wù)質(zhì)量等情況以及綜合評價，為制定供應(yīng)商個性化合作策略提供依據(jù)。

第三十頁，共48頁。第三十頁，共48頁。購進(jìn)監(jiān)管

庫存監(jiān)管

銷售監(jiān)管

卷煙零售戶入網(wǎng)經(jīng)營監(jiān)管

長沙公司選擇：日期選擇：200801監(jiān)管報告第三十一頁，共48頁。第三十一頁，共48頁。第三十二頁，共48頁。第三十二頁，共48頁。核心是監(jiān)控，對整個購、銷、存流程進(jìn)行跟蹤、分析、監(jiān)控、預(yù)警第三十三頁，共48頁。第三十三頁，共48頁。第三十四頁，共48頁。第三十四頁，共48頁。圍繞客戶分類屬性，分析不同客戶群的銷售特征，幫助改善品牌營銷策略和提供個性化服務(wù)。第三十五頁，共48頁。第三十五頁，共48頁。第三十六頁，共48頁。第三十六頁，共48頁。第三十七頁，共48頁。第三十七頁，共48頁。第三十八頁，共48頁。第三十八頁，共48頁。第三十九頁，共48頁。第三十九頁，共48頁。第四十頁，共48頁。第四十頁，共48頁。第四十一頁，共48頁。第四十一頁，共48頁。第四十二頁，共48頁。第四十二頁，共48頁。第四十三頁，共48頁。第四十三頁，共48頁。第四十四頁，共48頁。第四十四頁，共48頁。四步分析法根據(jù)業(yè)務(wù)處理流程，將潛在、相關(guān)的分析功能固化為問題分析路徑，形成功能導(dǎo)航欄，方便操作人員對問題的分析。第四十五頁，共48頁。第四十五頁，共48頁。工具類別工具名稱信息資源標(biāo)準(zhǔn)庫、數(shù)據(jù)交換庫DB2、sybase、oracle、sqlserver數(shù)據(jù)倉庫DB2、sybase、oracle、sqlserver多維數(shù)據(jù)庫HyperionEssbase、sqlserver、cubeviews抽取工具Powercenter、datastage、sqlserver展現(xiàn)工具dynasi