數(shù)據(jù)倉庫與數(shù)據(jù)挖掘-數(shù)據(jù)倉庫的設(shè)計

1、數(shù)據(jù)倉庫的設(shè)計數(shù)據(jù)倉庫的設(shè)計1/162/16數(shù)據(jù)倉庫的需求與規(guī)劃數(shù)據(jù)倉庫的需求與規(guī)劃 數(shù)據(jù)倉庫是企業(yè)信息系統(tǒng)中最為復雜的部分。數(shù)據(jù)倉庫是企業(yè)信息系統(tǒng)中最為復雜的部分。 從數(shù)據(jù)倉庫使用和構(gòu)建過程本身看，從數(shù)據(jù)倉庫使用和構(gòu)建過程本身看，數(shù)據(jù)倉庫系統(tǒng)匯集了來自眾多業(yè)務(wù)系統(tǒng)的數(shù)據(jù)，數(shù)據(jù)倉庫系統(tǒng)匯集了來自眾多業(yè)務(wù)系統(tǒng)的數(shù)據(jù)，需要支持多個層次、不同用戶的決策需求需要支持多個層次、不同用戶的決策需求需要適應(yīng)業(yè)務(wù)的不斷變化，需要適應(yīng)業(yè)務(wù)的不斷變化，數(shù)據(jù)倉庫的用戶一般是企業(yè)的中上層管理人員或幕僚，數(shù)據(jù)倉庫的用戶一般是企業(yè)的中上層管理人員或幕僚，他們對決策分析的需求不能預先做出規(guī)范的說明，只能他們對決策分析的需求

2、不能預先做出規(guī)范的說明，只能給設(shè)計人員一個抽象的（模糊的）描述。給設(shè)計人員一個抽象的（模糊的）描述。3/16數(shù)據(jù)倉庫的需求與規(guī)劃數(shù)據(jù)倉庫的需求與規(guī)劃 從使用角度看，需要多方面的技巧從使用角度看，需要多方面的技巧商業(yè)技巧。業(yè)務(wù)技巧有助于了解數(shù)據(jù)倉庫中所含數(shù)據(jù)的商業(yè)技巧。業(yè)務(wù)技巧有助于了解數(shù)據(jù)倉庫中所含數(shù)據(jù)的意義和重要性。能夠更好地了解管理決策需要，并將這意義和重要性。能夠更好地了解管理決策需要，并將這種需要轉(zhuǎn)換成數(shù)據(jù)倉庫要解決的問題種需要轉(zhuǎn)換成數(shù)據(jù)倉庫要解決的問題領(lǐng)域知識。與管理活動有關(guān)，將決策觀點轉(zhuǎn)化成精確的領(lǐng)域知識。與管理活動有關(guān)，將決策觀點轉(zhuǎn)化成精確的管理需求，進而轉(zhuǎn)化成解決方案，并對數(shù)據(jù)

3、查詢或挖掘管理需求，進而轉(zhuǎn)化成解決方案，并對數(shù)據(jù)查詢或挖掘的結(jié)果進行分析、利用。的結(jié)果進行分析、利用。數(shù)據(jù)分析技巧。包括從大量數(shù)據(jù)中提煉出有價值的信息數(shù)據(jù)分析技巧。包括從大量數(shù)據(jù)中提煉出有價值的信息發(fā)現(xiàn)新的模式和趨勢、找出差異、展示管理上的可取之發(fā)現(xiàn)新的模式和趨勢、找出差異、展示管理上的可取之處。這些技巧部分來自數(shù)學、統(tǒng)計學、管理學、心理學，處。這些技巧部分來自數(shù)學、統(tǒng)計學、管理學、心理學，部分來自直覺和經(jīng)驗。部分來自直覺和經(jīng)驗。4/16數(shù)據(jù)倉庫的需求與規(guī)劃數(shù)據(jù)倉庫的需求與規(guī)劃 從涉及的技術(shù)角度從涉及的技術(shù)角度各種新技術(shù)各種新技術(shù)商業(yè)平臺商業(yè)平臺分析工具分析工具新型數(shù)學方法新型數(shù)學方法5/16

4、應(yīng)用需求應(yīng)用需求（數(shù)據(jù)、處理）（數(shù)據(jù)、處理）轉(zhuǎn)換規(guī)則、轉(zhuǎn)換規(guī)則、DBMS功能、功能、優(yōu)化方法優(yōu)化方法需求收集和分析需求收集和分析設(shè)計概念結(jié)構(gòu)設(shè)計概念結(jié)構(gòu)設(shè)計邏輯結(jié)構(gòu)設(shè)計邏輯結(jié)構(gòu)數(shù)據(jù)模型優(yōu)化數(shù)據(jù)模型優(yōu)化設(shè)計物理結(jié)構(gòu)設(shè)計物理結(jié)構(gòu)評價設(shè)計，性能預測評價設(shè)計，性能預測物理實現(xiàn)物理實現(xiàn)試驗性運行試驗性運行使用、維護數(shù)據(jù)庫使用、維護數(shù)據(jù)庫應(yīng)用要求，應(yīng)用要求，DBMS詳詳細特征細特征需求分析階段需求分析階段概念設(shè)計階段概念設(shè)計階段邏輯設(shè)計階段邏輯設(shè)計階段物理設(shè)計階段物理設(shè)計階段數(shù)據(jù)庫實施階段數(shù)據(jù)庫實施階段數(shù)據(jù)庫運行、維護階段數(shù)據(jù)庫運行、維護階段不不滿滿意意不不滿滿意意數(shù)據(jù)庫的開發(fā)流程數(shù)據(jù)庫的開發(fā)流程6/16

5、2. 數(shù)據(jù)倉庫的開發(fā)流程數(shù)據(jù)倉庫的開發(fā)流程 （1）數(shù)據(jù)倉庫規(guī)劃分析階段，在該階段的工作內(nèi)）數(shù)據(jù)倉庫規(guī)劃分析階段，在該階段的工作內(nèi)容主要包括：容主要包括：分析數(shù)據(jù)倉庫應(yīng)用環(huán)境，調(diào)查數(shù)據(jù)倉庫開發(fā)需求，完成分析數(shù)據(jù)倉庫應(yīng)用環(huán)境，調(diào)查數(shù)據(jù)倉庫開發(fā)需求，完成數(shù)據(jù)倉庫的開發(fā)規(guī)劃。數(shù)據(jù)倉庫的開發(fā)規(guī)劃。建立包括實體關(guān)系圖、星型模型、雪花模型、元數(shù)據(jù)模建立包括實體關(guān)系圖、星型模型、雪花模型、元數(shù)據(jù)模型以及數(shù)據(jù)源分析的主題區(qū)數(shù)據(jù)模型，并根據(jù)主題區(qū)數(shù)型以及數(shù)據(jù)源分析的主題區(qū)數(shù)據(jù)模型，并根據(jù)主題區(qū)數(shù)據(jù)模型開發(fā)數(shù)據(jù)倉庫邏輯的模型。據(jù)模型開發(fā)數(shù)據(jù)倉庫邏輯的模型。7/162. 數(shù)據(jù)倉庫的開發(fā)流程（數(shù)據(jù)倉庫的開發(fā)流程（2)

6、（2）數(shù)據(jù)倉庫設(shè)計實施階段，在該階段的工作內(nèi)）數(shù)據(jù)倉庫設(shè)計實施階段，在該階段的工作內(nèi)容主要包括：容主要包括：A.按照數(shù)據(jù)倉庫的邏輯模型設(shè)計數(shù)據(jù)倉庫的體系結(jié)構(gòu)。按照數(shù)據(jù)倉庫的邏輯模型設(shè)計數(shù)據(jù)倉庫的體系結(jié)構(gòu)。B.設(shè)計數(shù)據(jù)倉庫的物理數(shù)據(jù)庫。設(shè)計數(shù)據(jù)倉庫的物理數(shù)據(jù)庫。C.用物理數(shù)據(jù)庫元數(shù)據(jù)填充面向最終用戶的元數(shù)據(jù)庫。用物理數(shù)據(jù)庫元數(shù)據(jù)填充面向最終用戶的元數(shù)據(jù)庫。D.對數(shù)據(jù)倉庫中每個目標字段確認其在業(yè)務(wù)系統(tǒng)或外部對數(shù)據(jù)倉庫中每個目標字段確認其在業(yè)務(wù)系統(tǒng)或外部數(shù)據(jù)源中的數(shù)據(jù)來源。數(shù)據(jù)源中的數(shù)據(jù)來源。E.開發(fā)（或購買）用于抽取、清潔、交換和合并數(shù)據(jù)等開發(fā)（或購買）用于抽取、清潔、交換和合并數(shù)據(jù)等中間件的程序

7、。中間件的程序。F.將數(shù)據(jù)從現(xiàn)有系統(tǒng)中傳送到倉庫中。將數(shù)據(jù)從現(xiàn)有系統(tǒng)中傳送到倉庫中。8/162. 數(shù)據(jù)倉庫的開發(fā)流程數(shù)據(jù)倉庫的開發(fā)流程(3) （3）數(shù)據(jù)倉庫的使用維護階段，在該階段的工作）數(shù)據(jù)倉庫的使用維護階段，在該階段的工作內(nèi)容主要包括：內(nèi)容主要包括：A.將數(shù)據(jù)倉庫投入實際應(yīng)用，并在應(yīng)用中改進和維護數(shù)將數(shù)據(jù)倉庫投入實際應(yīng)用，并在應(yīng)用中改進和維護數(shù)據(jù)倉庫。據(jù)倉庫。B.對數(shù)據(jù)倉庫進行效益評價，以為下一個循環(huán)提供依據(jù)。對數(shù)據(jù)倉庫進行效益評價，以為下一個循環(huán)提供依據(jù)。9/16數(shù)據(jù)倉庫的生命周期開發(fā)應(yīng)用全過程數(shù)據(jù)倉庫的生命周期開發(fā)應(yīng)用全過程開發(fā)概念模型規(guī)劃與確定需求數(shù)據(jù)倉庫評價數(shù)據(jù)倉庫維護數(shù)據(jù)倉庫應(yīng)用

8、填充與測試數(shù)據(jù)倉庫開發(fā)中間件確定數(shù)據(jù)抽取源數(shù)據(jù)庫與元數(shù)據(jù)設(shè)計設(shè)計體系結(jié)構(gòu)開發(fā)邏輯模型數(shù)據(jù)倉庫開發(fā)過程規(guī)劃分析階段設(shè)計實施階段使用維護階段10/16數(shù)據(jù)倉庫的開發(fā)的需求分析數(shù)據(jù)倉庫的開發(fā)的需求分析 （1）業(yè)主需求的分析）業(yè)主需求的分析數(shù)據(jù)倉庫的業(yè)主關(guān)心的是創(chuàng)建數(shù)據(jù)倉庫的目標，建立數(shù)數(shù)據(jù)倉庫的業(yè)主關(guān)心的是創(chuàng)建數(shù)據(jù)倉庫的目標，建立數(shù)據(jù)倉庫給組織戰(zhàn)略帶來的影響，創(chuàng)建數(shù)據(jù)倉庫所需的投據(jù)倉庫給組織戰(zhàn)略帶來的影響，創(chuàng)建數(shù)據(jù)倉庫所需的投資費用以及所具有的應(yīng)用前景。業(yè)主常常參與數(shù)據(jù)倉庫資費用以及所具有的應(yīng)用前景。業(yè)主常常參與數(shù)據(jù)倉庫概念模型的認可和評審，批準開發(fā)方案，為系統(tǒng)以后的概念模型的認可和評審，批準開發(fā)方

9、案，為系統(tǒng)以后的不斷升級和連續(xù)投資進行決策。不斷升級和連續(xù)投資進行決策。11/16數(shù)據(jù)倉庫的開發(fā)的需求分析（數(shù)據(jù)倉庫的開發(fā)的需求分析（2） （2）設(shè)計者需求的分析）設(shè)計者需求的分析數(shù)據(jù)倉庫設(shè)計者不但要收集業(yè)主對數(shù)據(jù)倉庫的需數(shù)據(jù)倉庫設(shè)計者不但要收集業(yè)主對數(shù)據(jù)倉庫的需求，還要收集實現(xiàn)這些需求所需的技術(shù)要求。設(shè)求，還要收集實現(xiàn)這些需求所需的技術(shù)要求。設(shè)計者介于投資者和實現(xiàn)者之間。計者介于投資者和實現(xiàn)者之間。 企業(yè)結(jié)構(gòu)規(guī)劃（企業(yè)結(jié)構(gòu)規(guī)劃（EAP）法是用于結(jié)構(gòu)設(shè)計的）法是用于結(jié)構(gòu)設(shè)計的一種最有效的方法，在該法中，設(shè)計者可以一種最有效的方法，在該法中，設(shè)計者可以實現(xiàn)以下實現(xiàn)以下3種結(jié)構(gòu)。種結(jié)構(gòu)。A.數(shù)據(jù)結(jié)

10、構(gòu)。數(shù)據(jù)結(jié)構(gòu)。B.應(yīng)用程序結(jié)構(gòu)。應(yīng)用程序結(jié)構(gòu)。C.技術(shù)結(jié)構(gòu)。技術(shù)結(jié)構(gòu)。12/16數(shù)據(jù)倉庫的開發(fā)的需求分析數(shù)據(jù)倉庫的開發(fā)的需求分析(3) （3）開發(fā)者需求的分析）開發(fā)者需求的分析開發(fā)者負責數(shù)據(jù)倉庫各個構(gòu)件的物理安裝和集成。開發(fā)者負責數(shù)據(jù)倉庫各個構(gòu)件的物理安裝和集成。 開發(fā)者需求進一步包括如下四個方面：開發(fā)者需求進一步包括如下四個方面： A.技術(shù)需求技術(shù)需求 B.使用需求使用需求 C.數(shù)據(jù)倉庫產(chǎn)品就緒需求數(shù)據(jù)倉庫產(chǎn)品就緒需求 D.開發(fā)與使用人員及其技術(shù)需求開發(fā)與使用人員及其技術(shù)需求 13/16數(shù)據(jù)倉庫的開發(fā)的需求分析數(shù)據(jù)倉庫的開發(fā)的需求分析(4) （4）最終用戶需求的分析）最終用戶需求的分析數(shù)據(jù)倉

11、庫相對最終用戶而言是一個黑箱，他們只數(shù)據(jù)倉庫相對最終用戶而言是一個黑箱，他們只能通過查詢、報表工具和數(shù)據(jù)倉庫內(nèi)部信息的某能通過查詢、報表工具和數(shù)據(jù)倉庫內(nèi)部信息的某種影射關(guān)系來訪問數(shù)據(jù)倉庫內(nèi)部數(shù)據(jù)。因而，最種影射關(guān)系來訪問數(shù)據(jù)倉庫內(nèi)部數(shù)據(jù)。因而，最終用戶的需求主要體現(xiàn)在對工作流程的分析、決終用戶的需求主要體現(xiàn)在對工作流程的分析、決策的查詢需求、報表需求、操作需求和數(shù)據(jù)需求策的查詢需求、報表需求、操作需求和數(shù)據(jù)需求等方面。同時，在進行數(shù)據(jù)倉庫的最終用戶需求等方面。同時，在進行數(shù)據(jù)倉庫的最終用戶需求分析時，還需要對數(shù)據(jù)倉庫的主題域、信息的粒分析時，還需要對數(shù)據(jù)倉庫的主題域、信息的粒度、數(shù)據(jù)倉庫的維度

12、進行分析。度、數(shù)據(jù)倉庫的維度進行分析。14/16開發(fā)策略與目標開發(fā)策略與目標開發(fā)策略主要有：開發(fā)策略主要有： 自頂向下：實際應(yīng)用比較困難自頂向下：實際應(yīng)用比較困難 。 自底向上：用于一個數(shù)據(jù)集市或一個部門的數(shù)據(jù)倉庫開發(fā)自底向上：用于一個數(shù)據(jù)集市或一個部門的數(shù)據(jù)倉庫開發(fā) ，容易獲得成功，容易獲得成功 。 兩種策略的聯(lián)合使用兩種策略的聯(lián)合使用 ：能夠快速地完成數(shù)據(jù)倉庫的開發(fā)與應(yīng)用，而且還可：能夠快速地完成數(shù)據(jù)倉庫的開發(fā)與應(yīng)用，而且還可以建立具有長遠價值的數(shù)據(jù)倉庫方案。在實際使用中難以操作以建立具有長遠價值的數(shù)據(jù)倉庫方案。在實際使用中難以操作 。首要目標首要目標 確定所需要信息的范圍，確定數(shù)據(jù)倉庫在

13、為用戶提供決策幫助時，在主題確定所需要信息的范圍，確定數(shù)據(jù)倉庫在為用戶提供決策幫助時，在主題和指標領(lǐng)域需要哪些數(shù)據(jù)源。和指標領(lǐng)域需要哪些數(shù)據(jù)源。 另一個重要目標是確定利用哪些方法和工具訪問和導航數(shù)據(jù)？另一個重要目標是確定利用哪些方法和工具訪問和導航數(shù)據(jù)？ 其它目標是確定數(shù)據(jù)倉庫內(nèi)部數(shù)據(jù)的規(guī)模。其它目標是確定數(shù)據(jù)倉庫內(nèi)部數(shù)據(jù)的規(guī)模。 從用戶的角度分析從用戶的角度分析 從技術(shù)的角度分析從技術(shù)的角度分析 15/16數(shù)據(jù)倉庫設(shè)計需要考慮的主要內(nèi)容數(shù)據(jù)倉庫設(shè)計需要考慮的主要內(nèi)容 主題域主題域最有價值的主題？最有價值的主題？相應(yīng)主題的維度？相應(yīng)主題的維度？ 數(shù)據(jù)來源數(shù)據(jù)來源各個主題與相關(guān)的數(shù)據(jù)來源（操作型的）、結(jié)構(gòu)、位置、各個主題與相關(guān)的數(shù)據(jù)來源（操作型的）、