數(shù)據(jù)倉(cāng)庫(kù)學(xué)習(xí)教案

1、數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)倉(cāng)庫(kù)第一頁(yè)，共65頁(yè)。第1頁(yè)/共65頁(yè)第二頁(yè)，共65頁(yè)。第2頁(yè)/共65頁(yè)第三頁(yè)，共65頁(yè)。數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)倉(cāng)庫(kù)操作操作(cozu)型環(huán)境型環(huán)境顧客顧客(gk)保險(xiǎn)費(fèi)保險(xiǎn)費(fèi)保險(xiǎn)單保險(xiǎn)單索賠索賠健康健康人壽人壽汽車汽車意外傷亡意外傷亡主題主題應(yīng)用應(yīng)用第3頁(yè)/共65頁(yè)第四頁(yè)，共65頁(yè)。在數(shù)據(jù)倉(cāng)庫(kù)中，主要主題領(lǐng)域在數(shù)據(jù)倉(cāng)庫(kù)中，主要主題領(lǐng)域(ln(ln y) y)是以一組相關(guān)的表來(lái)是以一組相關(guān)的表來(lái)具體實(shí)現(xiàn)的。具體實(shí)現(xiàn)的。第4頁(yè)/共65頁(yè)第五頁(yè)，共65頁(yè)。一個(gè)一個(gè)(y )顧客的所有表通過一個(gè)顧客的所有表通過一個(gè)(y )公共鍵碼聯(lián)系起來(lái)。公共鍵碼顧客標(biāo)識(shí)號(hào)公共鍵碼聯(lián)系起來(lái)。公共鍵碼顧客標(biāo)識(shí)號(hào)(cu

2、stomer ID)將在顧客主題領(lǐng)域中所找到的所有數(shù)據(jù)聯(lián)系起來(lái)將在顧客主題領(lǐng)域中所找到的所有數(shù)據(jù)聯(lián)系起來(lái)第5頁(yè)/共65頁(yè)第六頁(yè)，共65頁(yè)。第6頁(yè)/共65頁(yè)第七頁(yè)，共65頁(yè)。插入插入(ch r)刪除刪除(shnch)修改修改訪問訪問載入載入訪問訪問操作型環(huán)境操作型環(huán)境數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)倉(cāng)庫(kù)第7頁(yè)/共65頁(yè)第八頁(yè)，共65頁(yè)。時(shí)間期限時(shí)間期限:3090天天;記錄更新記錄更新;鍵碼結(jié)構(gòu)鍵碼結(jié)構(gòu)(jigu)包括包括時(shí)間元素時(shí)間元素/也可能也可能不包括時(shí)間元素不包括時(shí)間元素時(shí)間時(shí)間(shjin)期限期限:510年年;復(fù)雜的數(shù)據(jù)快照復(fù)雜的數(shù)據(jù)快照;鍵碼結(jié)構(gòu)包括鍵碼結(jié)構(gòu)包括時(shí)間時(shí)間(shjin)元素元素操作型環(huán)境操

3、作型環(huán)境數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)倉(cāng)庫(kù)第8頁(yè)/共65頁(yè)第九頁(yè)，共65頁(yè)。對(duì)比內(nèi)容對(duì)比內(nèi)容數(shù)據(jù)庫(kù)數(shù)據(jù)庫(kù)數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)內(nèi)容數(shù)據(jù)內(nèi)容當(dāng)前值當(dāng)前值歷史的、存檔的、歸納的、計(jì)算的數(shù)歷史的、存檔的、歸納的、計(jì)算的數(shù)據(jù)據(jù)數(shù)據(jù)目標(biāo)數(shù)據(jù)目標(biāo)面向業(yè)務(wù)操作程序、重復(fù)處面向業(yè)務(wù)操作程序、重復(fù)處理理面向主題域、管理決策分析應(yīng)用面向主題域、管理決策分析應(yīng)用數(shù)據(jù)特性數(shù)據(jù)特性動(dòng)態(tài)變化、按字段更新動(dòng)態(tài)變化、按字段更新靜態(tài)、不能直接更新、只定時(shí)添加靜態(tài)、不能直接更新、只定時(shí)添加數(shù)據(jù)結(jié)構(gòu)數(shù)據(jù)結(jié)構(gòu)高度結(jié)構(gòu)化、復(fù)雜、適合操高度結(jié)構(gòu)化、復(fù)雜、適合操作計(jì)算作計(jì)算簡(jiǎn)單、適合分析簡(jiǎn)單、適合分析使用頻率使用頻率高高中到低中到低數(shù)據(jù)訪問量數(shù)據(jù)訪問量每個(gè)事

4、務(wù)只訪問少量記錄每個(gè)事務(wù)只訪問少量記錄有的事務(wù)可能要訪問大量記錄有的事務(wù)可能要訪問大量記錄對(duì)響應(yīng)時(shí)間的要求對(duì)響應(yīng)時(shí)間的要求以秒為單位計(jì)量以秒為單位計(jì)量以秒、分鐘、甚至小時(shí)為計(jì)量單位以秒、分鐘、甚至小時(shí)為計(jì)量單位第9頁(yè)/共65頁(yè)第十頁(yè)，共65頁(yè)。第10頁(yè)/共65頁(yè)第十一頁(yè)，共65頁(yè)。第11頁(yè)/共65頁(yè)第十二頁(yè)，共65頁(yè)。第12頁(yè)/共65頁(yè)第十三頁(yè)，共65頁(yè)。 面向主題表示了數(shù)據(jù)倉(cāng)庫(kù)中數(shù)據(jù)組織的基本原則，數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)由數(shù)據(jù)都是圍繞著某一主題組織展開的。由于數(shù)據(jù)倉(cāng)庫(kù)的用戶大多是企業(yè)的管理決策者，這些人所面對(duì)(min du)的往往是一些比較抽象的、層次較高的管理分析對(duì)象。例如，企業(yè)中的客戶、產(chǎn)品、供

5、應(yīng)商等都可以作為主題看待。從信息管理的角度看，主題就是在一個(gè)較高的管理層次(cngc)上對(duì)信息系統(tǒng)的數(shù)據(jù)按照某一具體的管理對(duì)象進(jìn)行綜合、歸類所形成的分析對(duì)象。從數(shù)據(jù)組織的角度看，主題是一些數(shù)據(jù)集合，這些數(shù)據(jù)集合對(duì)分析主題是一些數(shù)據(jù)集合，這些數(shù)據(jù)集合對(duì)分析對(duì)象作了比較完整的、一致的描述，這種描述不僅涉及到數(shù)據(jù)自身，對(duì)象作了比較完整的、一致的描述，這種描述不僅涉及到數(shù)據(jù)自身，而且涉及到數(shù)據(jù)之間的關(guān)系。而且涉及到數(shù)據(jù)之間的關(guān)系。第13頁(yè)/共65頁(yè)第十四頁(yè)，共65頁(yè)。 數(shù)據(jù)倉(cāng)庫(kù)在從業(yè)務(wù)處理(chl)系統(tǒng)那里獲取數(shù)據(jù)時(shí)，并不能將源數(shù)據(jù)庫(kù)中的數(shù)據(jù)直接加載到數(shù)據(jù)倉(cāng)庫(kù)中，而是需要進(jìn)行一系列的數(shù)據(jù)預(yù)處理(chl

6、)，即數(shù)據(jù)的抽取、篩選、清理、綜合等集成工作。第14頁(yè)/共65頁(yè)第十五頁(yè)，共65頁(yè)。 源數(shù)據(jù)加載到數(shù)據(jù)倉(cāng)庫(kù)后，還要根據(jù)決策分析的 需要對(duì)這些數(shù)據(jù)進(jìn)行概括、聚集(jj)處理。第15頁(yè)/共65頁(yè)第十六頁(yè)，共65頁(yè)。c) time-variant 數(shù)據(jù)(shj)的時(shí)變性 盡管數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)并不像業(yè)務(wù)數(shù)據(jù)庫(kù)那樣反 映業(yè)務(wù)處理的實(shí)際狀況，但是(dnsh)數(shù)據(jù)也不能長(zhǎng)期不 變，如果依據(jù)10前的數(shù)據(jù)進(jìn)行決策分析，那決策 所帶來(lái)的后果將是十分可怕的。第16頁(yè)/共65頁(yè)第十七頁(yè)，共65頁(yè)。 例如，如果(rgu)分析企業(yè)近幾年的銷售情況，那快照 可以每隔一個(gè)月生成一次；如果(rgu)分析一個(gè)月的暢銷產(chǎn)品，那快照

7、生成間隔就需要每天一次。第17頁(yè)/共65頁(yè)第十八頁(yè)，共65頁(yè)。第18頁(yè)/共65頁(yè)第十九頁(yè)，共65頁(yè)。第19頁(yè)/共65頁(yè)第二十頁(yè)，共65頁(yè)。第20頁(yè)/共65頁(yè)第二十一頁(yè)，共65頁(yè)。2001年第三季度，整個(gè)(zhngg)英格蘭的總收入是多少？2000年英國(guó)(yn u)每一類房產(chǎn)銷售的總收入是多少？2001年租借房產(chǎn)業(yè)務(wù)中每個(gè)城市哪個(gè)地域最受歡迎？與過去的兩年相比有何不同？每個(gè)分支機(jī)構(gòu)本月的房產(chǎn)銷售月收入是多少，并與剛過去的12個(gè)月相比較。如果對(duì)于10萬(wàn)英鎊以上的房產(chǎn)，法定價(jià)格上升3.5%而政府稅收下降1.5%，對(duì)英國(guó)不同區(qū)域的銷售會(huì)產(chǎn)生什么影響？在英國(guó)主要城市中，哪種類型的房產(chǎn)銷售價(jià)格高于平均房產(chǎn)

8、銷售價(jià)格？這與人口統(tǒng)計(jì)數(shù)據(jù)有何聯(lián)系？第21頁(yè)/共65頁(yè)第二十二頁(yè)，共65頁(yè)。某大型超市發(fā)現(xiàn)每到周末，啤酒(pji)與尿布的銷量就會(huì)同時(shí)大增，這是什么原因呢？ 經(jīng)過研究人員分析發(fā)現(xiàn)，原來(lái)家里的太太們讓丈夫們?nèi)コ薪o孩子買尿布，而丈夫們?cè)谫I尿布的時(shí)候往往順便買上幾瓶啤酒回去喝。這樣就產(chǎn)生了這個(gè)比較奇怪的現(xiàn)象。第22頁(yè)/共65頁(yè)第二十三頁(yè)，共65頁(yè)。來(lái)自美國(guó)俄亥俄州的NCR公司（紐約證券交易所股票代碼為NCR）是全球領(lǐng)先的信息技術(shù)公司之一，為全球超過130個(gè)國(guó)家提供零售解決方案，業(yè)務(wù)涵蓋(hn i)食品店、藥店、綜合性商場(chǎng)、超市、連鎖店及餐飲業(yè)等市場(chǎng)，2001年總收益達(dá)59.17億美元。世界十大零售

9、商中，就有六家應(yīng)用NCR提供的零售業(yè)全面解決方案。第23頁(yè)/共65頁(yè)第二十四頁(yè)，共65頁(yè)。數(shù)據(jù)源 數(shù)據(jù)倉(cāng)庫(kù)(核心(hxn) 工具和接口第24頁(yè)/共65頁(yè)第二十五頁(yè)，共65頁(yè)。候只要讀出即可，無(wú)需臨時(shí)計(jì)算。為了(wi le)決策者方便地在數(shù)據(jù)倉(cāng)庫(kù)上決策 數(shù)據(jù)倉(cāng)庫(kù)還應(yīng)該提供相應(yīng)的用戶接口和各種工具軟件。第25頁(yè)/共65頁(yè)第二十六頁(yè)，共65頁(yè)。第26頁(yè)/共65頁(yè)第二十七頁(yè)，共65頁(yè)。 4.依據(jù)需要，對(duì)數(shù)據(jù)進(jìn)行弱規(guī)依據(jù)需要，對(duì)數(shù)據(jù)進(jìn)行弱規(guī)范化范化5.依據(jù)需要，生成聚集信息依據(jù)需要，生成聚集信息6.備份和歸檔數(shù)據(jù)備份和歸檔數(shù)據(jù)第27頁(yè)/共65頁(yè)第二十八頁(yè)，共65頁(yè)。第28頁(yè)/共65頁(yè)第二十九頁(yè)，共65頁(yè)

10、。第29頁(yè)/共65頁(yè)第三十頁(yè)，共65頁(yè)。第30頁(yè)/共65頁(yè)第三十一頁(yè)，共65頁(yè)。第31頁(yè)/共65頁(yè)第三十二頁(yè)，共65頁(yè)。財(cái)務(wù)部門銷售收入帳應(yīng)收帳應(yīng)付(yng f)帳成本帳銷售(xioshu)部門銷售計(jì)劃銷售合同銷售統(tǒng)計(jì)人事部門員工業(yè)績(jī)記錄員工技能情況員工薪酬表財(cái)務(wù)人事銷售.企業(yè)數(shù)據(jù)模型第32頁(yè)/共65頁(yè)第三十三頁(yè)，共65頁(yè)。第33頁(yè)/共65頁(yè)第三十四頁(yè)，共65頁(yè)。維度表維度表維度表維度表維度表事實(shí)(shsh)表第34頁(yè)/共65頁(yè)第三十五頁(yè)，共65頁(yè)。維度表維度表維度表維度表維度表事實(shí)(shsh)表詳細(xì)(xingx)類別表詳細(xì)類別表第35頁(yè)/共65頁(yè)第三十六頁(yè)，共65頁(yè)。第36頁(yè)/共65頁(yè)第三十

11、七頁(yè)，共65頁(yè)。第37頁(yè)/共65頁(yè)第三十八頁(yè)，共65頁(yè)。D.在分析過程中可以提供行標(biāo)題第38頁(yè)/共65頁(yè)第三十九頁(yè)，共65頁(yè)。第39頁(yè)/共65頁(yè)第四十頁(yè)，共65頁(yè)。第40頁(yè)/共65頁(yè)第四十一頁(yè)，共65頁(yè)。第41頁(yè)/共65頁(yè)第四十二頁(yè)，共65頁(yè)。第42頁(yè)/共65頁(yè)第四十三頁(yè)，共65頁(yè)。第43頁(yè)/共65頁(yè)第四十四頁(yè)，共65頁(yè)。第44頁(yè)/共65頁(yè)第四十五頁(yè)，共65頁(yè)。第45頁(yè)/共65頁(yè)第四十六頁(yè)，共65頁(yè)。第46頁(yè)/共65頁(yè)第四十七頁(yè)，共65頁(yè)。第47頁(yè)/共65頁(yè)第四十八頁(yè)，共65頁(yè)。OLAP技術(shù)技術(shù)(jsh) 數(shù)據(jù)倉(cāng)庫(kù)是管理決策分析的基礎(chǔ)，要有效地利用數(shù)據(jù)倉(cāng)庫(kù)的信息資源，必須要有強(qiáng)大的工具對(duì)數(shù)據(jù)倉(cāng)

12、庫(kù)的信息進(jìn)行分析決策。On-line Analytical Processing(在線分析處理或聯(lián)機(jī)分析處理)就是一個(gè)應(yīng)用廣泛的數(shù)據(jù)倉(cāng)庫(kù)使用技術(shù)。它可以根據(jù)分析人員的要求，迅速靈活地對(duì)當(dāng)量的數(shù)據(jù)進(jìn)行復(fù)雜的查詢處理，并以直觀的容易(rngy)理解的形式將查詢結(jié)果提供給各種決策人員，使他們能夠迅速準(zhǔn)確地掌握企業(yè)的運(yùn)營(yíng)情況，了解市場(chǎng)的需求。第48頁(yè)/共65頁(yè)第四十九頁(yè)，共65頁(yè)。第49頁(yè)/共65頁(yè)第五十頁(yè)，共65頁(yè)。第50頁(yè)/共65頁(yè)第五十一頁(yè)，共65頁(yè)。第51頁(yè)/共65頁(yè)第五十二頁(yè)，共65頁(yè)。第52頁(yè)/共65頁(yè)第五十三頁(yè)，共65頁(yè)。第53頁(yè)/共65頁(yè)第五十四頁(yè)，共65頁(yè)。第54頁(yè)/共65頁(yè)第五十五頁(yè)，共65頁(yè)。業(yè)務(wù)處理(chl)系統(tǒng)數(shù)據(jù)(shj)準(zhǔn)備區(qū)數(shù)據(jù)倉(cāng)庫(kù)OLAP服務(wù)器客戶端可視化處理(chl)底層底層中間層中間層頂層頂層數(shù)據(jù)抽取數(shù)據(jù)抽取數(shù)據(jù)清理數(shù)據(jù)清理 轉(zhuǎn)換轉(zhuǎn)換多維化多維化數(shù)據(jù)加載數(shù)據(jù)加載第55頁(yè)/共65頁(yè)第五十六頁(yè)，共65頁(yè)。2. 可分析性. OLAP系統(tǒng)應(yīng)能處理與應(yīng)用(yngyng)有關(guān)的邏輯與統(tǒng)計(jì)分析。3. 多維性. 多維性是OLAP的關(guān)鍵屬性。系統(tǒng)能夠提供對(duì)數(shù)據(jù)分析的多維視圖和多維分析。4.信息型. 不論數(shù)據(jù)量有多大，也不管數(shù)據(jù)存儲(chǔ)在何處，OLAP系統(tǒng)應(yīng)能及時(shí)獲得信息，并且管理大容量信息。第56頁(yè)/共65