BI項(xiàng)目商業(yè)智能實(shí)施方案ppt課件

1、商業(yè)智能實(shí)施方案Wednesday, May 18, 20221、實(shí)施方法?規(guī)劃處理方案支持?jǐn)?shù)據(jù)倉(cāng)庫(kù)管理(處置流程與操作)物理數(shù)據(jù)庫(kù)設(shè)計(jì)數(shù)據(jù)轉(zhuǎn)換運(yùn)用開(kāi)發(fā)數(shù)據(jù)發(fā)掘效力設(shè)計(jì)與實(shí)現(xiàn)支持與加強(qiáng)處理方案體系構(gòu)造設(shè)計(jì)元數(shù)據(jù)管理數(shù)據(jù)倉(cāng)庫(kù)評(píng)價(jià)運(yùn)用加強(qiáng)邏輯數(shù)據(jù)模型回想物理數(shù)據(jù)庫(kù)回想性能調(diào)整容量規(guī)劃處理方案集成定制處理方案規(guī)劃詳細(xì)數(shù)據(jù)分析處理方案預(yù)備就緒處理方案實(shí)施建議現(xiàn)成處理方案規(guī)劃數(shù)據(jù)倉(cāng)庫(kù)策略開(kāi)發(fā)業(yè)務(wù)探求業(yè)務(wù)探求處理方案定義邏輯數(shù)據(jù)模型設(shè)計(jì)修正邏輯數(shù)據(jù)模型驗(yàn)證處理方案數(shù)據(jù)倉(cāng)庫(kù)的循環(huán)過(guò)程.2、實(shí)施步驟數(shù)據(jù)倉(cāng)庫(kù)管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換運(yùn)用開(kāi)發(fā)數(shù)據(jù)發(fā)掘效力系統(tǒng)體系構(gòu)造設(shè)計(jì)元數(shù)據(jù)管理處理方案集成工程詳細(xì)實(shí)施步驟工程前

2、期預(yù)備業(yè)務(wù)探求信息探求邏輯數(shù)據(jù)模型1. 工程前期預(yù)備2. 業(yè)務(wù)探求Business Discovery)3. 信息探求Information Discovery)4. 邏輯數(shù)據(jù)模型設(shè)計(jì)5. 系統(tǒng)體系構(gòu)造設(shè)計(jì)6. 物理數(shù)據(jù)庫(kù)設(shè)計(jì)7. 數(shù)據(jù)轉(zhuǎn)換加載ETL8. 前端運(yùn)用開(kāi)發(fā)9. 數(shù)據(jù)發(fā)掘效力10.元數(shù)據(jù)管理11.數(shù)據(jù)倉(cāng)庫(kù)管理處置流程與操作12.處理方案集成測(cè)實(shí)驗(yàn)收與試運(yùn)轉(zhuǎn).2.1 工程前期預(yù)備主要義務(wù)： 工程啟動(dòng)會(huì)議(Kick-off Meeting) 確認(rèn)工程范圍和主要目的 確認(rèn)工程階段性驗(yàn)收及總體驗(yàn)收規(guī)范 確認(rèn)工程實(shí)施方案 成立工程組 確定各工程小組的成員及各自的任務(wù)職責(zé) 確定各工程小組的階段性

3、任務(wù)目的 確定教育訓(xùn)練方案 確定效力流程及方式 交付工程： 工程前期預(yù)備業(yè)務(wù)探求信息探求邏輯數(shù)據(jù)模型.2.2 業(yè)務(wù)探求Business Discovery)主要義務(wù)： 確定重點(diǎn)用戶與數(shù)據(jù)源 用戶需求調(diào)研與確認(rèn) 數(shù)據(jù)源確認(rèn) 用戶需求和數(shù)據(jù)源的挑選和分析 交付工程： 工程前期預(yù)備業(yè)務(wù)探求信息探求邏輯數(shù)據(jù)模型.2.3 信息探求Information Discovery)主要義務(wù)： 分析用戶需求 數(shù)據(jù)源分析 進(jìn)展工具評(píng)價(jià) 系統(tǒng)平安性設(shè)計(jì) 系統(tǒng)命名規(guī)范設(shè)計(jì)交付工程： 工程前期預(yù)備業(yè)務(wù)探求信息探求邏輯數(shù)據(jù)模型.2.4 邏輯數(shù)據(jù)模型設(shè)計(jì)主要義務(wù)： 進(jìn)展原始數(shù)據(jù)分析 建立實(shí)體模型 建立實(shí)體間依賴關(guān)系 完善并填

4、入一切屬性 建立數(shù)據(jù)庫(kù)邏輯模型 利用工具： Erwin/Power Designer交付工程： 數(shù)據(jù)倉(cāng)庫(kù)邏輯數(shù)據(jù)模型LDM工程前期預(yù)備業(yè)務(wù)探求信息探求邏輯數(shù)據(jù)模型.2.4 邏輯數(shù)據(jù)模型概念邏輯數(shù)據(jù)模型是用來(lái)發(fā)現(xiàn)、記錄和溝通業(yè)務(wù)的詳細(xì)“藍(lán)圖基于概念數(shù)據(jù)模型CDM由一系列表和實(shí)體詳細(xì)描畫(huà)組成通用的業(yè)務(wù)言語(yǔ)便于業(yè)務(wù)與業(yè)務(wù)之間的功能了解集成當(dāng)前和未來(lái)數(shù)據(jù)的藍(lán)圖獨(dú)立于技術(shù)為物理數(shù)據(jù)庫(kù)設(shè)計(jì)作預(yù)備是IT人員和業(yè)務(wù)人員溝通的工具發(fā)現(xiàn)屬性發(fā)現(xiàn)關(guān)系發(fā)現(xiàn)實(shí)體1. 業(yè)務(wù)規(guī)那么2. ER圖3. ERA建模.2.4 邏輯數(shù)據(jù)模型(LDM)例如.2.5 系統(tǒng)體系構(gòu)造設(shè)計(jì)主要義務(wù)：對(duì)業(yè)務(wù)、技術(shù)環(huán)境及企業(yè)文化的充分了解，從技術(shù)

5、、組織、教育和支持等方面對(duì)系統(tǒng)進(jìn)展全面評(píng)價(jià)定義業(yè)務(wù)驅(qū)動(dòng)力定義數(shù)據(jù)倉(cāng)庫(kù)勝利的關(guān)鍵要素定義數(shù)據(jù)倉(cāng)庫(kù)的實(shí)施原那么對(duì)系統(tǒng)體系構(gòu)造各個(gè)組件進(jìn)展詳細(xì)設(shè)計(jì)交付工程：數(shù)據(jù)倉(cāng)庫(kù)管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換運(yùn)用開(kāi)發(fā)數(shù)據(jù)發(fā)掘效力系統(tǒng)體系構(gòu)造設(shè)計(jì)元數(shù)據(jù)管理處理方案集成.2.5 體系構(gòu)造設(shè)計(jì)組件用戶類型拓?fù)錁?gòu)造網(wǎng)絡(luò)存取與互連組織機(jī)構(gòu)平安性數(shù)據(jù)體系構(gòu)造邏輯數(shù)據(jù)模型元數(shù)據(jù)數(shù)據(jù)質(zhì)量命名規(guī)范數(shù)據(jù)采集與轉(zhuǎn)換用戶存取及工具備份系統(tǒng)操作管理.2.6 物理數(shù)據(jù)庫(kù)設(shè)計(jì)主要義務(wù)：轉(zhuǎn)換邏輯數(shù)據(jù)模型LDM為物理數(shù)據(jù)模型定義主索引、次索引非正那么化處置數(shù)據(jù)庫(kù)建立設(shè)計(jì)優(yōu)化數(shù)據(jù)庫(kù)功能測(cè)試運(yùn)用工具：ERWwin交付工程： 物理數(shù)據(jù)模型LDM建模方法： 第

6、三范式 3NF 星型構(gòu)造 雪花狀構(gòu)造數(shù)據(jù)倉(cāng)庫(kù)管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換運(yùn)用開(kāi)發(fā)數(shù)據(jù)發(fā)掘效力系統(tǒng)體系構(gòu)造設(shè)計(jì)元數(shù)據(jù)管理處理方案集成.2.6 數(shù)據(jù)模型的演化概念數(shù)據(jù)模型 CDM Conceptual Data Model 主要實(shí)體和它們的關(guān)系 Major Entities and Their Relationships邏輯數(shù)據(jù)模型 LDM - Logical Data Model 業(yè)務(wù)模型加CDM Plus :一切的表及簡(jiǎn)單的數(shù)據(jù)All Tables with Sample Data輔助的表及簡(jiǎn)單的數(shù)據(jù) Minor Tables with Sample Data 主鍵與外鍵的關(guān)系 PK & FK R

7、elationships 數(shù)據(jù)約束 Constraints 屬性 Attributes 擴(kuò)展邏輯數(shù)據(jù)模型 ELDM - Extended Logical Data Model 邏輯數(shù)據(jù)模型加LDM Plus :存取詳細(xì)描畫(huà)Access Demographics數(shù)據(jù)詳細(xì)描畫(huà)Data Demographics物理數(shù)據(jù)模型 PDM - Physical Data Model 擴(kuò)張邏輯數(shù)據(jù)模型ELDM Plus:索引 Indices非正那么化 Denormalization.2.6 非正那么化處置 ( Denormalization )非正那么化的兩種類型：物理非正那么化派生數(shù)據(jù) Derived Da

8、ta匯總表 Summary Tables反復(fù)的Groups ( Repeating Groups) 多物理表 Multiple Physical Tables預(yù)銜接 Pre-joins子實(shí)體 Sub-entities邏輯非正那么化視圖 Views邏輯星型構(gòu)造 Logical Star Schemas物理非正那么化對(duì)模型的靈敏性會(huì)有影響邏輯非正那么化是一個(gè)優(yōu)選的方法OLAP實(shí)現(xiàn).2.6 物理數(shù)據(jù)模型PDM.2.7 數(shù)據(jù)轉(zhuǎn)換與加載ETL主要義務(wù)：數(shù)據(jù)源及其特性定義數(shù)據(jù)析取、轉(zhuǎn)換和加載戰(zhàn)略設(shè)計(jì)構(gòu)建和測(cè)試初始加載的程序和處置流程構(gòu)建和測(cè)試日常加載的程序和處置流程40%的任務(wù)量在數(shù)據(jù)轉(zhuǎn)換與加載上運(yùn)用工具

9、：Sagent或Datastage、Informatic交付工程： 數(shù)據(jù)轉(zhuǎn)換加載腳本 ETL Scripts) 加載流程控制 ETL Process Control)數(shù)據(jù)倉(cāng)庫(kù)管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換運(yùn)用開(kāi)發(fā)數(shù)據(jù)發(fā)掘效力系統(tǒng)體系構(gòu)造設(shè)計(jì)元數(shù)據(jù)管理處理方案集成.2.7 數(shù)據(jù)清洗方法在源系統(tǒng)上進(jìn)展清洗數(shù)據(jù)析取前在加載效力器上進(jìn)展清洗數(shù)據(jù)析取后、加載前在數(shù)據(jù)倉(cāng)庫(kù)里進(jìn)展清洗數(shù)據(jù)加載后源系統(tǒng)ETL效力器數(shù)據(jù)倉(cāng)庫(kù).2.7 數(shù)據(jù)轉(zhuǎn)換常用手段 析取 Extracting 條件 Conditioning 剔除 Scrubbing 合并 Merging 濃縮 Enrichment 確認(rèn) Validating 加載

10、Loading 評(píng)分 Scoring 關(guān)系識(shí)別 House holding.2.8 前端運(yùn)用開(kāi)發(fā)主要義務(wù)：前端運(yùn)用體系構(gòu)造設(shè)計(jì)OLAP運(yùn)用設(shè)計(jì)(Summary/Fact表及Cub的產(chǎn)生前端運(yùn)用開(kāi)發(fā)隨機(jī)查詢、預(yù)定義報(bào)表、 OLAP運(yùn)用撰寫(xiě)用戶運(yùn)用手冊(cè)用戶測(cè)實(shí)驗(yàn)收運(yùn)用工具：查詢報(bào)表工具(Hyperion performance suit)OLAP工具Essbase)基于Web的開(kāi)發(fā)工具(J2EE)其他開(kāi)發(fā)工具,如: Portal交付工程：數(shù)據(jù)倉(cāng)庫(kù)管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換運(yùn)用開(kāi)發(fā)數(shù)據(jù)發(fā)掘效力系統(tǒng)體系構(gòu)造設(shè)計(jì)元數(shù)據(jù)管理處理方案集成.2.10 元數(shù)據(jù)管理元數(shù)據(jù)(Metadata) 是指關(guān)于數(shù)據(jù)的數(shù)據(jù)，即

11、用來(lái)描畫(huà)數(shù)據(jù)的類型、來(lái)源、定義、存儲(chǔ)位置，使得業(yè)務(wù)用戶可以正確地運(yùn)用數(shù)據(jù)倉(cāng)庫(kù)。 主要義務(wù)：定義元數(shù)據(jù)運(yùn)用功能設(shè)計(jì)元數(shù)據(jù)環(huán)境邏輯構(gòu)造設(shè)計(jì)元數(shù)據(jù)環(huán)境物理構(gòu)造選擇適宜的元數(shù)據(jù)管理工具建立元數(shù)據(jù)倉(cāng)庫(kù)Metadata Repository)建立和測(cè)試元數(shù)據(jù)接口運(yùn)用工具：ETL TOOLS交付工程：數(shù)據(jù)倉(cāng)庫(kù)管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換運(yùn)用開(kāi)發(fā)數(shù)據(jù)發(fā)掘效力系統(tǒng)體系構(gòu)造設(shè)計(jì)元數(shù)據(jù)管理處理方案集成.2.10 元數(shù)據(jù)開(kāi)發(fā)元數(shù)據(jù)的開(kāi)發(fā)應(yīng)該包含在數(shù)據(jù)倉(cāng)庫(kù)實(shí)施過(guò)程的每一步驟中，以下圖是元數(shù)據(jù)各部分內(nèi)容與數(shù)據(jù)倉(cāng)庫(kù)開(kāi)發(fā)過(guò)程的對(duì)應(yīng)關(guān)系： .2.11 數(shù)據(jù)倉(cāng)庫(kù)管理主要義務(wù)：設(shè)計(jì)和開(kāi)發(fā)數(shù)據(jù)倉(cāng)庫(kù)支持體系構(gòu)造開(kāi)發(fā)和測(cè)試數(shù)據(jù)倉(cāng)庫(kù)日常運(yùn)作流

12、程開(kāi)發(fā)和測(cè)試性能監(jiān)視程序開(kāi)發(fā)和測(cè)試數(shù)據(jù)備份與恢復(fù)程序開(kāi)發(fā)和測(cè)試平安系統(tǒng)設(shè)計(jì)和開(kāi)發(fā)操作人員/最終用戶培訓(xùn)方案建立用戶支持和培訓(xùn)資料運(yùn)用工具：系統(tǒng)監(jiān)控工具和管理工具交付工程：及數(shù)據(jù)倉(cāng)庫(kù)管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換運(yùn)用開(kāi)發(fā)數(shù)據(jù)發(fā)掘效力系統(tǒng)體系構(gòu)造設(shè)計(jì)元數(shù)據(jù)管理處理方案集成.2.12 處理方案集成主要義務(wù)：建立并執(zhí)行集成測(cè)試方案建立并執(zhí)行數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)測(cè)試方案建立并執(zhí)行系統(tǒng)驗(yàn)收測(cè)試方案移植開(kāi)發(fā)系統(tǒng)到消費(fèi)系統(tǒng)執(zhí)行用戶培訓(xùn)方案實(shí)施數(shù)據(jù)倉(cāng)庫(kù)管理根底設(shè)備工程實(shí)施完成回想工程形狀交付工程：數(shù)據(jù)倉(cāng)庫(kù)管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換運(yùn)用開(kāi)發(fā)數(shù)據(jù)發(fā)掘效力系統(tǒng)體系構(gòu)造設(shè)計(jì)元數(shù)據(jù)管理處理方案集成.總結(jié)：主要步驟及文檔間關(guān)系 Business Discovery (業(yè)務(wù)探求) 業(yè)務(wù)需求闡明書(shū)(BRL) 概念數(shù)據(jù)模型(CDM)物理數(shù)據(jù)庫(kù)設(shè)計(jì) 物理數(shù)據(jù)模型 (PDM) 數(shù)據(jù)庫(kù)描畫(huà)言語(yǔ)(DDL) 數(shù)據(jù)轉(zhuǎn)換加載(ETL) 數(shù)據(jù)加載設(shè)計(jì)闡明書(shū) 數(shù)據(jù)映射 Data Mapping) 轉(zhuǎn)換加載腳本 ETL Scripts) 加載流程控制 ETL Control) 前端運(yùn)用設(shè)計(jì) 前端運(yùn)用體系構(gòu)造 前端運(yùn)用設(shè)計(jì)闡明書(shū) Summary / Fact 表設(shè)計(jì) Summary / Fact 數(shù)據(jù)生成 OLAP設(shè)計(jì) 運(yùn)用開(kāi)發(fā) 運(yùn)用集成數(shù)據(jù)倉(cāng)庫(kù)管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換運(yùn)用開(kāi)發(fā)數(shù)據(jù)發(fā)掘效力系統(tǒng)體系構(gòu)造設(shè)計(jì)元數(shù)據(jù)管理處理方案集成工程詳