基于CWM的數(shù)據(jù)倉庫體系結(jié)構(gòu)設(shè)計(jì)

1、基于CWM的數(shù)據(jù)倉庫體系結(jié)構(gòu)設(shè)計(jì)我的工作作提出了一一個(gè)基于CWM的數(shù)據(jù)倉倉庫體系系結(jié)構(gòu)基于該體體系結(jié)構(gòu)構(gòu)，參與與設(shè)計(jì)和和實(shí)現(xiàn)了了一個(gè)電信綜合合業(yè)務(wù)信信息服務(wù)務(wù)平臺(tái)提綱背景介紹紹數(shù)據(jù)倉庫庫、元數(shù)數(shù)據(jù)理論論介紹CWM、MOF、UML、XMI規(guī)范介紹紹基于CWM的數(shù)據(jù)倉倉庫體系系結(jié)構(gòu)設(shè)設(shè)計(jì)電信綜合合業(yè)務(wù)信信息服務(wù)務(wù)平臺(tái)設(shè)設(shè)計(jì)背景介紹紹數(shù)據(jù)倉庫庫的應(yīng)用用越來越越廣泛不同數(shù)據(jù)據(jù)倉庫工工具之間間無法進(jìn)進(jìn)行數(shù)據(jù)據(jù)交換企業(yè)的應(yīng)應(yīng)用受到到工具的的限制利用元數(shù)數(shù)據(jù)可以以實(shí)現(xiàn)數(shù)數(shù)據(jù)交換換提綱背景介紹紹數(shù)據(jù)倉庫庫、元數(shù)數(shù)據(jù)理論論介紹CWM、MOF、UML、XMI規(guī)范介紹紹基于CWM的數(shù)據(jù)倉倉庫體系系結(jié)構(gòu)設(shè)設(shè)計(jì)電信綜合

2、合業(yè)務(wù)信信息服務(wù)務(wù)平臺(tái)設(shè)設(shè)計(jì)數(shù)據(jù)倉庫庫理論數(shù)據(jù)倉庫庫的定義義數(shù)據(jù)倉庫庫的建設(shè)設(shè)數(shù)據(jù)倉庫庫的應(yīng)用用國內(nèi)數(shù)據(jù)據(jù)倉庫建建設(shè)的問問題元數(shù)據(jù)定義描述數(shù)據(jù)據(jù)的數(shù)據(jù)據(jù)研究元數(shù)數(shù)據(jù)的原原因管理、使使用數(shù)據(jù)據(jù)的需求求系統(tǒng)分布布和互通通的要求求元數(shù)據(jù)重重用、共共享的要要求元數(shù)據(jù)的的建模和和標(biāo)準(zhǔn)化化建模的兩兩大方向向元數(shù)據(jù)參參考模型型元數(shù)據(jù)模模型標(biāo)準(zhǔn)化OMGMDC提綱背景介紹紹數(shù)據(jù)倉庫庫、元數(shù)數(shù)據(jù)理論論介紹CWM、MOF、UML、XMI規(guī)范介紹紹基于CWM的數(shù)據(jù)倉倉庫體系系結(jié)構(gòu)設(shè)設(shè)計(jì)電信綜合合業(yè)務(wù)信信息服務(wù)務(wù)平臺(tái)設(shè)設(shè)計(jì)元數(shù)據(jù)的的層次Student（“張東”，“男”，）Student（“李芳”，“女”，）Record

3、（“Student”，F(xiàn)ield（“name”，String），(Field（“sex”，String）) MetaClass（“Record”，MetaAttr(（“name”）,String),MetaAttr(“fields”),list)MetaClass（“Field”，）通用的元元模型信息，數(shù)據(jù)（M0）模型（M1）元模型（M2）元元模型（M3）OMG規(guī)范和元元數(shù)據(jù)層層次的關(guān)關(guān)系元數(shù)據(jù)層次MOF術(shù)語示例M3元元模型MOF模型M2 元模型，元元數(shù)據(jù) UML元模型，CWM元模型M1 模型，元數(shù)據(jù) UML模型，CWM模型M0對(duì)象，數(shù)據(jù)數(shù)據(jù)倉庫數(shù)據(jù)CWM和相關(guān)規(guī)規(guī)范的關(guān)關(guān)系CWM和MOF的關(guān)

4、系CWM和UML的關(guān)系直接繼承承了UML核心元模模型使用UML圖形標(biāo)記記使用UML中的OCL（對(duì)象約約束語言言）CWM和XMI的關(guān)系CWM的組成CWM元模型基礎(chǔ)包資源包分析包管理包CWMDTD和CWMXMLCWMIDL提綱背景介紹紹數(shù)據(jù)倉庫庫、元數(shù)數(shù)據(jù)理論論介紹CWM、MOF、UML、XMI規(guī)范介紹紹基于CWM的數(shù)據(jù)倉倉庫體系系結(jié)構(gòu)設(shè)設(shè)計(jì)電信綜合合業(yè)務(wù)信信息服務(wù)務(wù)平臺(tái)設(shè)設(shè)計(jì)基于CWM的數(shù)據(jù)倉倉庫體系系結(jié)構(gòu)數(shù)據(jù)源OLTP數(shù)據(jù)庫遺留數(shù)據(jù)據(jù)內(nèi)部辦公公系統(tǒng)數(shù)數(shù)據(jù)外部數(shù)據(jù)據(jù)數(shù)據(jù)源多種類型型：關(guān)系系型、多多維、記記錄、XML以及其它它一些工工具類型型關(guān)系型：模式，物物理表， 視圖圖，字段，索引，觸發(fā)器器，

5、外關(guān)關(guān)鍵字，主關(guān)鍵鍵字，數(shù)據(jù)類類型，字字段值，數(shù)據(jù)記記錄，記記錄的集集合Relational元模型Relational元模型（續(xù)1）Relational元模型（續(xù)2）關(guān)系型數(shù)數(shù)據(jù)源的的主要接接口BaseTable：查詢和和修改表表的屬性性、觸發(fā)發(fā)器和結(jié)結(jié)構(gòu)Catalog：查詢和和修改包包含的元元素Column：查詢和和設(shè)置屬屬性Row：查詢和和修改一一條記錄錄的內(nèi)容容RowSet：查詢和和修改包包含的記記錄ETL讀取數(shù)據(jù)據(jù)清潔數(shù)據(jù)據(jù)轉(zhuǎn)換數(shù)據(jù)據(jù)裝載數(shù)據(jù)據(jù)ETL組件的接接口黑盒變換換：Transformation，DataObjectSet，TransformationUse白盒變換換：Featu

6、reMap，ClassifierMap，ClassifierFeatureMap，TransformationMap變換的執(zhí)執(zhí)行順序序控制：TransformationTask，TransformationStep，TransformationActivity，StepPrecedence，PrecedenceConstraint中央數(shù)據(jù)據(jù)倉庫數(shù)據(jù)粒度度最細(xì)且且多層次次數(shù)據(jù)是歷歷史的數(shù)據(jù)是時(shí)時(shí)間相關(guān)關(guān)的大數(shù)據(jù)量量數(shù)據(jù)是整整合的通用的、全局的的操作數(shù)據(jù)據(jù)存儲(chǔ)ODS操作型系統(tǒng)O D S1/21/2企 業(yè)數(shù)據(jù)倉庫數(shù)據(jù)集市市企 業(yè)數(shù) 據(jù)倉 庫最細(xì)粒度數(shù)據(jù)集市部門2粒度2數(shù)據(jù)集市部門1粒度1部門3粒度3

7、外 部數(shù)據(jù)源數(shù)據(jù)集市數(shù)據(jù)集市市的特點(diǎn)面向部門門應(yīng)用規(guī)模小，投資少少使用方便便且成本本低元數(shù)據(jù)庫類型：中央元數(shù)數(shù)據(jù)庫本地元數(shù)數(shù)據(jù)庫內(nèi)容：抽取過程程：任務(wù)、執(zhí)執(zhí)行順序序、映射射關(guān)系、轉(zhuǎn)換規(guī)規(guī)則描述數(shù)據(jù)據(jù)：方位圖圖、數(shù)據(jù)據(jù)之間的的商業(yè)關(guān)關(guān)系、商商業(yè)規(guī)則則、數(shù)據(jù)據(jù)的改變變數(shù)據(jù)倉庫庫管理：安全性、運(yùn)行狀狀態(tài)、抽抽取過程程的調(diào)度度、I/O對(duì)象及其其關(guān)系數(shù)據(jù)倉庫庫管理訪問控制制和安全全性管理理數(shù)據(jù)增長長管理抽取過程程的管理理性能管理理故障恢復(fù)復(fù)擴(kuò)充和演演變管理理數(shù)據(jù)倉庫庫管理接接口抽取過程程的調(diào)度度（WarehouseProcess，WarehouseEvent，InternalEvent，Schedule

8、Event，ExternalEvent）抽取過程程的執(zhí)行行（TransformationExecution，StepExecution，ActivityExecution）數(shù)據(jù)元素素的變化化（Measurement，ChangeRequest）OLAP組件接口口立方體的的定義：Cube，CubeDimAssoc，CubeRegion，Dimension，Hierarchy，Level，Mearsure，LevelBasedHierarchy，HierarchyLevelAsso，ValueBasedHierarchy，MemberSelection，MemberSelGrp，立方體到到物理數(shù)數(shù)

9、據(jù)源的的映射StructureMap，LevelBasedHierarchy，ValueBasedHierarchy數(shù)據(jù)挖掘掘組件的的主要類類及接口口MiningModel：模型屬屬性和模模型的輸輸入MiningSettings：對(duì)象屬屬性，輸輸入?yún)?shù)數(shù)的說明明ApplicationInputSpecification，ApplicationAttribute：使用模模型時(shí)的的參數(shù)MiningModelResult：挖掘的的結(jié)果SupervisedMiningModel:描述預(yù)言言性算法法產(chǎn)生的的模型StatisticsSettings, AssociationRulesSettings,ClusteringSettings,ClassificationSettings,RegressionSettings：對(duì)應(yīng)模模型的設(shè)設(shè)置基于CWM的數(shù)據(jù)倉倉庫體系系結(jié)構(gòu)的的特點(diǎn)及優(yōu)優(yōu)點(diǎn)統(tǒng)一的數(shù)數(shù)據(jù)集市市和數(shù)據(jù)據(jù)倉庫中央元數(shù)數(shù)據(jù)庫驅(qū)驅(qū)動(dòng)機(jī)制制靈活高效效的數(shù)據(jù)據(jù)交換方方式易于升級(jí)級(jí)高度的可可集成性性高度的可可擴(kuò)展性性基于CORBA的企業(yè)數(shù)數(shù)據(jù)倉庫庫擴(kuò)展結(jié)結(jié)構(gòu)