olap(在線(xiàn)分析處理)

1、1在線(xiàn)分析處理Online Analytical Processing2OLAP發(fā)展背景發(fā)展背景60年代，關(guān)系數(shù)據(jù)庫(kù)之父年代，關(guān)系數(shù)據(jù)庫(kù)之父E.F.Codd提出了關(guān)系模型，促進(jìn)了提出了關(guān)系模型，促進(jìn)了聯(lián)機(jī)事務(wù)處理(OLTP)的發(fā)展(數(shù)據(jù)以表格的形式而非文件方式存儲(chǔ))。1993年，E.F.Codd提出了OLAP概念，認(rèn)為OLTP已不能滿(mǎn)足終端用戶(hù)對(duì)數(shù)據(jù)庫(kù)查詢(xún)分析的需要，SQL對(duì)大型數(shù)據(jù)庫(kù)進(jìn)行的簡(jiǎn)單查詢(xún)也不能滿(mǎn)足終端用戶(hù)分析的要求。用戶(hù)的決策分析需要對(duì)關(guān)系數(shù)據(jù)庫(kù)進(jìn)行大量計(jì)算才能得到結(jié)果，而查詢(xún)的結(jié)果并不能滿(mǎn)足決策者提出的需求。因此，E.F.Codd提出了多維數(shù)據(jù)庫(kù)和多維分析的概念，即提出了多維數(shù)據(jù)

2、庫(kù)和多維分析的概念，即OLAP。OLAP是目前是目前RDBMS不可缺少的功能，可以作為一個(gè)獨(dú)立的不可缺少的功能，可以作為一個(gè)獨(dú)立的OLAP服務(wù)器實(shí)現(xiàn)，也可以集成在服務(wù)器實(shí)現(xiàn)，也可以集成在RDBMS中。中。3什么是OLAP？定義1 ：OLAP(聯(lián)機(jī)分析處理)是針對(duì)特定問(wèn)題的聯(lián)機(jī)數(shù)據(jù)訪(fǎng)問(wèn)和分析。通過(guò)對(duì)信息(維數(shù)據(jù))的多種可能的觀(guān)察形式進(jìn)行快速、穩(wěn)定一致和交互性的存取，允許管理決策人員對(duì)數(shù)據(jù)進(jìn)行深入觀(guān)察。定義2 ：OLAP(聯(lián)機(jī)分析處理) 是使分析人員、管理人員或執(zhí)行人員能夠從多種角度對(duì)從原始數(shù)據(jù)中轉(zhuǎn)化出來(lái)的、能夠真正為用戶(hù)所理解的、并真實(shí)反映企業(yè)維特性的信息進(jìn)行快速、一致、交互地存取，從而獲得對(duì)數(shù)

3、據(jù)的更深入了解的一類(lèi)軟件技術(shù)。(OLAP委員會(huì)的定義)OLAP的目標(biāo)是滿(mǎn)足決策支持或多維環(huán)境特定的查詢(xún)和報(bào)表需的目標(biāo)是滿(mǎn)足決策支持或多維環(huán)境特定的查詢(xún)和報(bào)表需求，它的技術(shù)核心是“維”這個(gè)概念，因此OLAP也可以說(shuō)是多維數(shù)據(jù)分析工具的集合。4OLAP決策分析OLAP分析屬于驗(yàn)證驅(qū)動(dòng)型發(fā)現(xiàn)：用戶(hù)首先提出自己的假設(shè)，然后利用OLAP工具檢索查詢(xún)以驗(yàn)證或否定假設(shè)。5口OLAP基本概念維：是人們觀(guān)察數(shù)據(jù)的特定角度，是考慮問(wèn)題時(shí)的一類(lèi)屬性 (時(shí)間維、地理維等)。維的層次：人們觀(guān)察數(shù)據(jù)的某個(gè)特定角度(即某個(gè)維)還可以存在細(xì)節(jié)程度不同的各個(gè)描述方面(時(shí)間維：日期、月份、季度、年)。卷煙銷(xiāo)售分析維的成員：維的一

4、個(gè)取值。是數(shù)據(jù)項(xiàng)在某維中位置的描述。(“某年某月某日”是在時(shí)間維上位置的描述)產(chǎn)品時(shí)間財(cái)務(wù)指標(biāo)多維數(shù)組：維和變量的組合表示。一個(gè)多維數(shù)組可以表示為：(維1，維2，維n，變量)。(時(shí)間，地區(qū)，產(chǎn)品，銷(xiāo)售額)數(shù)據(jù)單元(單元格)：多維數(shù)組的取值 。 (2000 年 1 月 ， 上 海 ， 筆 記 本 電腦，$100000)國(guó)產(chǎn)煙進(jìn) 煙 Q1 Q2 Q3 Q4 收入開(kāi)銷(xiāo)6OLAP特性快速性:用戶(hù)對(duì)OLAP的快速反應(yīng)能力有很高的要求。系統(tǒng)應(yīng)能在5秒內(nèi)對(duì)用戶(hù)的大部分分析要求做出反應(yīng)?？蛻?hù)/服務(wù)器體系結(jié)構(gòu)兩層或三層C/S結(jié)構(gòu)?？煞治鲂?OLAP系統(tǒng)應(yīng)能處理與應(yīng)用有關(guān)的任何邏輯分析和統(tǒng)計(jì)分析。多維性:多維性是

5、OLAP的關(guān)鍵屬性。系統(tǒng)必須提供對(duì)數(shù)據(jù)的多維視圖和分析,包括對(duì)層次維和多重層次維的完全支持。信息性:不論數(shù)據(jù)量有多大，也不管數(shù)據(jù)存儲(chǔ)在何處，OLAP系統(tǒng)應(yīng)能及時(shí)獲得信息，并且管理大容量信息。7OLAP工具的分類(lèi)標(biāo)準(zhǔn)多維數(shù)據(jù)庫(kù)工具（MOLAP）、關(guān)系型數(shù)據(jù)庫(kù)工具（ROLAP）和桌面型數(shù)據(jù)庫(kù)工具。支持多維數(shù)據(jù)庫(kù)工具的是多維數(shù)據(jù)庫(kù)，而不是傳統(tǒng)上的關(guān)系型數(shù)據(jù)庫(kù)，數(shù)據(jù)存儲(chǔ)不采用傳統(tǒng)關(guān)系模型所使用的記錄及表等方式，而采用矩陣（多維矩陣）方式來(lái)存儲(chǔ)數(shù)據(jù)。與多維數(shù)據(jù)庫(kù)工具相比，關(guān)系型OLAP工具在數(shù)據(jù)庫(kù)層次上有標(biāo)準(zhǔn)的關(guān)系模型和標(biāo)準(zhǔn)的數(shù)據(jù)訪(fǎng)問(wèn)方式及其編程接口，工具與數(shù)據(jù)庫(kù)的互聯(lián)性較好。桌面型OLAP工具是指在微

6、機(jī)環(huán)境下開(kāi)發(fā)的支持簡(jiǎn)單多維分析的用戶(hù)工具，這些工具沒(méi)有自己的數(shù)據(jù)存儲(chǔ)，而把用戶(hù)提交的查詢(xún)翻譯成對(duì)數(shù)據(jù)源的查詢(xún)，然后從數(shù)據(jù)源中提取結(jié)果數(shù)據(jù)，并將這些結(jié)果數(shù)據(jù)合成最終的結(jié)果返回給客戶(hù)。8OLAP操作操作切片和切塊(Slice and Dice)鉆取(Drill)旋轉(zhuǎn)(Rotate)/旋轉(zhuǎn)(Pivot)通過(guò)旋轉(zhuǎn)可以得到不同視角的數(shù)據(jù)。輔之于各種圖形展示分析結(jié)果9OLAP操作操作切片和切塊(Slice and Dice)鉆取(Drill)旋轉(zhuǎn)(Rotate)/旋轉(zhuǎn)(Pivot)通過(guò)旋轉(zhuǎn)可以得到不同視角的數(shù)據(jù)。輔之于各種圖形展示分析結(jié)果10OLAP操作操作切片和切塊(Slice and Dice)鉆取(

7、Drill)旋轉(zhuǎn)(Rotate)/旋轉(zhuǎn)(Pivot)通過(guò)旋轉(zhuǎn)可以得到不同視角的數(shù)據(jù)。輔之于各種圖形展示分析結(jié)果11切片、切塊12Dicing ExampleDicing:Filtering by AUS1+AUS2 and Wholesale13Slicing ExampleSlicing:Filtering by AUS214Web數(shù)據(jù)的多維分析數(shù)據(jù)的多維分析15OLAP操作操作切片和切塊(Slice and Dice)鉆取(Drill)旋轉(zhuǎn)(Rotate)/旋轉(zhuǎn)(Pivot)通過(guò)旋轉(zhuǎn)可以得到不同視角的數(shù)據(jù)。輔之于各種圖形展示分析結(jié)果16OLAP操作操作切片和切塊(Slice and Dic

8、e)鉆取(Drill)旋轉(zhuǎn)(Rotate)/旋轉(zhuǎn)(Pivot)通過(guò)旋轉(zhuǎn)可以得到不同視角的數(shù)據(jù)。輔之于各種圖形展示分析結(jié)果17鉆取按時(shí)間維向60上鉆取按時(shí)間維向下鉆取數(shù)據(jù)聚集18財(cái)務(wù)指標(biāo)時(shí)間旋轉(zhuǎn)產(chǎn)品時(shí)間產(chǎn)品財(cái)務(wù)指標(biāo)19pivotDrill-across:Distribution first,Sales Org. second20國(guó)際體育用品公司的數(shù)據(jù)分析（1）按城市的銷(xiāo)售數(shù)據(jù)IBM Visual Warehouse V3.1Lotus Approach或或Microsoft AccessIntelligent Miner for data/text按產(chǎn)品的銷(xiāo)售數(shù)據(jù)21國(guó)際體育用品公司的數(shù)據(jù)分析（

9、2）按地區(qū)和國(guó)家劃分的頭盔銷(xiāo)售數(shù)據(jù)按地區(qū)劃分的頭盔銷(xiāo)售數(shù)據(jù)22OLAP操作操作切片和切塊(Slice and Dice)鉆取(Drill)旋轉(zhuǎn)(Rotate)/旋轉(zhuǎn)(Pivot)通過(guò)旋轉(zhuǎn)可以得到不同視角的數(shù)據(jù)。輔之于各種圖形展示分析結(jié)果23OLAP操作操作切片和切塊(Slice and Dice)鉆取(Drill)旋轉(zhuǎn)(Rotate)/旋轉(zhuǎn)(Pivot)通過(guò)旋轉(zhuǎn)可以得到不同視角的數(shù)據(jù)。輔之于各種圖形展示分析結(jié)果24OLAP分類(lèi)OLAP按照存儲(chǔ)方式ROLAP MOLAP HOLAP按照處理地點(diǎn)Server OLAP Client OLAPRelationaldatabaseCubeROLAPMi

10、crosoftSQLServerHOLAP OLAPServiceMOLAP25擎基于關(guān)系數(shù)據(jù)庫(kù)的OLAPROLAP用關(guān)系表達(dá)式描述多維概念大量的關(guān)系表。用星型模型、雪花模型構(gòu)造維模型。DBDW基礎(chǔ)數(shù)據(jù)元數(shù)據(jù)計(jì)算結(jié)果RDBMS服務(wù)器服務(wù)器SQL 多維綜合引存取關(guān)系型OLAP服務(wù)器多維存取客戶(hù)多維視圖26ROLAP的星型模式(Star Schema)Period TableMarket TableTime_idPeriod_DescQuarterYearDimension TableProduct TableProduct_idProduct_DescBrandSizeDimension TableSales TableTime_idProduct_idMarket_idScenarioDollarsUnitsDiscount%Fact TableMarket_idMarket_DescDistrictRegionDimension TableScenario TableScenarioActualProfitBudgetDimension Table27MOLAP的多維立方體(Multicube)基于多維數(shù)據(jù)庫(kù)(MDDB)的OLAPMOLAPOLAP服務(wù)器：存儲(chǔ)OLAP服務(wù)軟件和多