數(shù)據(jù)模型基本概念與建模方法論logic

1、會計學(xué)1數(shù)據(jù)模型基本概念與建模方法論數(shù)據(jù)模型基本概念與建模方法論logic2內(nèi)容安排數(shù)據(jù)模型相關(guān)術(shù)語 什么是數(shù)據(jù)模型建模注意事項 數(shù)據(jù)模型方法論3456符號體系設(shè)計內(nèi)容表現(xiàn)形式反映內(nèi)容設(shè)計目標(biāo)789邏輯數(shù)據(jù)模型邏輯數(shù)據(jù)模型物理數(shù)據(jù)模型物理數(shù)據(jù)模型包含內(nèi)容包含內(nèi)容實體、屬性表、字段定位記錄定位記錄主鍵主索引使用名稱使用名稱業(yè)務(wù)名稱物理名稱（受限于DBMS）正則化正則化3NF建設(shè)可能會按照性能、空間要求進行非正則化冗余數(shù)據(jù)冗余數(shù)據(jù)無冗余數(shù)據(jù)含冗余數(shù)據(jù)派生數(shù)據(jù)派生數(shù)據(jù)無派生數(shù)據(jù)包含派生數(shù)據(jù)開發(fā)人員開發(fā)人員業(yè)務(wù)人員與建模人員物理數(shù)據(jù)庫設(shè)計人員1011存儲和管理采集回答業(yè)務(wù)問題 析取 清洗 條件 剔除家

2、庭關(guān)系 加載 業(yè)務(wù)系統(tǒng) 業(yè)務(wù)系統(tǒng) 業(yè)務(wù)數(shù)據(jù) 外部數(shù)據(jù) 關(guān)系數(shù)據(jù)庫管理系統(tǒng)聚集 統(tǒng)計 人工智能 神經(jīng)網(wǎng)絡(luò) 多維 可視化 EIS/DSS 電子表 對象語言 開發(fā) 企業(yè) 數(shù)據(jù)倉庫 從屬數(shù)據(jù)集市 業(yè)務(wù)人員 IT 用戶數(shù)據(jù)導(dǎo)入 知識發(fā)現(xiàn) 數(shù)據(jù)挖掘 信息存取 工具源數(shù)據(jù) 邏輯數(shù)據(jù)模型應(yīng)用數(shù)據(jù)模型12內(nèi)容安排數(shù)據(jù)模型相關(guān)術(shù)語 什么是數(shù)據(jù)模型建模注意事項 數(shù)據(jù)模型方法論13邏輯數(shù)據(jù)模型基本術(shù)語 (一) 模型結(jié)構(gòu)模型結(jié)構(gòu) q第三范式（第三范式（3NF）結(jié)構(gòu)結(jié)構(gòu) q星型結(jié)構(gòu)（多星型結(jié)構(gòu)）星型結(jié)構(gòu)（多星型結(jié)構(gòu)）q雪花型結(jié)構(gòu)雪花型結(jié)構(gòu) 模型分類模型分類q概念數(shù)據(jù)模型概念數(shù)據(jù)模型q邏輯數(shù)據(jù)模型邏輯數(shù)據(jù)模型q物理數(shù)據(jù)模型

3、物理數(shù)據(jù)模型q應(yīng)用數(shù)據(jù)模型應(yīng)用數(shù)據(jù)模型3NF基礎(chǔ)數(shù)據(jù)模型Star Schema匯總數(shù)據(jù)/已知應(yīng)用模型Snowflake星型結(jié)構(gòu)的演變14實體實體 q獨立型實體獨立型實體 q依賴型實體依賴型實體 q子類實體子類實體 q主題域主題域q層面層面q核心實體核心實體 q關(guān)系實體關(guān)系實體 q特征實體特征實體q分類實體分類實體邏輯數(shù)據(jù)模型基本術(shù)語 (二) 15屬性：屬性： （描述真實或抽象事物相關(guān)聯(lián)的特征或性質(zhì)） q主鍵主鍵（識別實體實例唯一性的屬性、屬性組） q可選鍵可選鍵 （能識別實體實例唯一性的其他屬性、屬性組）q外鍵外鍵（通過父實體到子實體關(guān)系轉(zhuǎn)移到子實體的屬性）q非鍵屬性非鍵屬性（不是實體主鍵屬性

4、的其他屬性 ） q基礎(chǔ)名基礎(chǔ)名（外鍵的原來名稱 ）q角色名角色名 （外鍵的新名稱，表明取值是父實體屬性的子集 ）q鑒別器鑒別器 （取值決定父實體實例屬于哪個子類的屬性 ）邏輯數(shù)據(jù)模型基本術(shù)語 (三) 16關(guān)系關(guān)系q二元關(guān)系二元關(guān)系父實體的一個實例嚴(yán)格關(guān)系子實體的0，1或多個實例的這種關(guān)系是二元關(guān)系 q基數(shù)基數(shù)父、子實體實例的比例，如1：1，1：Mq識別（型）關(guān)系識別（型）關(guān)系子實體實例唯一性的識別與父實體相關(guān)聯(lián)，父實體的主鍵屬性成為子實體的主鍵屬性 q非識別（型）關(guān)系非識別（型）關(guān)系子實體不需要與父實體的關(guān)系就可以確定實例唯一性,父實體的主鍵屬性成為子實體的非鍵屬性 邏輯數(shù)據(jù)模型基本術(shù)語 (四

5、) 17關(guān)系關(guān)系q確定關(guān)系確定關(guān)系父實體的一個實例對應(yīng)子實體的0、1或多個實例，并且子實體的一個實例對應(yīng)0或1個父實體的實例 q非確定關(guān)系非確定關(guān)系多對多關(guān)系 q子類關(guān)系子類關(guān)系子類實體和所屬父實體的關(guān)系 q完全子類群完全子類群所屬父實體的每個實例都能夠與子類群的一個實體實例相關(guān)聯(lián) q不完全子類群不完全子類群所屬父實體的每個實例不一定都有子類相關(guān)聯(lián) 邏輯數(shù)據(jù)模型基本術(shù)語 (五) 18 EntityKey AttributeNonkey AttributeRelationshipCardinalityOne-to-many1 : MBusiness Rule : one customer inv

6、oice at least contains one invoice item邏輯數(shù)據(jù)模型基本術(shù)語 (示例) 19關(guān)系數(shù)據(jù)庫理論中對于實體劃分、實例（記錄）設(shè)計的規(guī)則The KEY-1stNormalForm(1NF)The WHOLE Key-SecondNormalForm(2NF)And NOTHING BUT the Key-ThirdNormalForm(3NF)-E.F.Codd20如果數(shù)Quantity屬性被定義為“不是與Order相關(guān)，就是與Part相關(guān)”例如：在OLTP系統(tǒng)中常見的字段復(fù)用現(xiàn)象，屬此類問題11015221依賴了復(fù)合主鍵的一部分客戶經(jīng)理/地域客戶經(jīng)理編號22依賴

7、了非主鍵屬性（不參與主鍵的外鍵屬性）23要考慮正則化對數(shù)據(jù)庫性能的要求24內(nèi)容安排數(shù)據(jù)模型相關(guān)術(shù)語 什么是數(shù)據(jù)模型建模注意事項 數(shù)據(jù)模型方法論25?規(guī)劃規(guī)劃解決方案支持?jǐn)?shù)據(jù)倉庫管理(處理流程與操作)物理數(shù)據(jù)庫設(shè)計數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)設(shè)計與實現(xiàn)設(shè)計與實現(xiàn)支持與增強支持與增強解決方案體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理數(shù)據(jù)倉庫評估應(yīng)用增強邏輯數(shù)據(jù)模型回顧物理數(shù)據(jù)庫回顧性能調(diào)整容量規(guī)劃解決方案集成定制解決方案規(guī)劃詳細(xì)數(shù)據(jù)分析解決方案準(zhǔn)備就緒解解決決方方案案實實施施建建議議現(xiàn)成解決方案規(guī)劃數(shù)數(shù)據(jù)據(jù)倉倉庫庫策策略略開開發(fā)發(fā)業(yè)務(wù)探索業(yè)務(wù)探索解決方案定義邏輯數(shù)據(jù)模型設(shè)計修改邏輯數(shù)據(jù)模型驗證解決方案數(shù)據(jù)倉庫的循環(huán)過

8、程26Step 1: 定義業(yè)務(wù)需求與范圍Step 2: 定義實體Step 3: 定義關(guān)系Step 4: 定義非鍵屬性Step 5: 確認(rèn)模型271.確認(rèn)已經(jīng)理解全部業(yè)務(wù)需求什么困難或問題需要解決？一般情況下這些問題主要關(guān)系到增加收入或降低成本等模型必須能夠回答哪些業(yè)務(wù)問題？有哪些業(yè)務(wù)功能必須處理？有哪些業(yè)務(wù)限制存在？是否每一個參與人員都可以共享他們的業(yè)務(wù)需求？2.決定搜集需求的方法回顧已經(jīng)存在的資料（例如現(xiàn)存的報表）新的業(yè)務(wù)需求訪談以上兩種混合的方法281.制定初始的實體池（不加區(qū)分的實體集合）2.為每一個實體進行定義3.刪除超出項目范圍的實體4.為剩下的每一個實體定義主鍵5.為可用的實體編寫

9、文檔可選: 使用帶樣本數(shù)據(jù)的表格形式與用戶進行確認(rèn)必須: 使用ER圖制定最終版本的交付材料291.識別實體間的關(guān)系2.對于每一個關(guān)系刪除超出項目范圍的關(guān)系刪除間接的關(guān)系為每一個剩余的關(guān)系進行定義識別每一個可用的關(guān)系的基數(shù) (1:1, 1:M, M:M)3.參照完整性確保每一個關(guān)系（PK/FK參照）是完整的、有效的4.為模型中可用的關(guān)系編寫文檔，使用FK定義關(guān)系可選: 使用帶樣本數(shù)據(jù)的表格形式與用戶進行確認(rèn)必須: 使用ER圖制定最終版本的交付材料301.識別并定義相關(guān)的非鍵屬性2.刪除超出項目范圍的屬性3.根據(jù)直覺或經(jīng)驗將剩余的可用屬性放入一個表中4.逐一驗證每一個可用屬性的擺放位置5.為模型中

10、的每一個可用屬性編寫文檔可選: 使用帶樣本數(shù)據(jù)的表格形式與用戶進行確認(rèn)必須: 使用ER圖制定最終版本的交付材料6.在模型的最終交付文檔中添加業(yè)務(wù)限制條件31根據(jù)需要重復(fù)以上步驟1.多次反復(fù)經(jīng)常是必須的（需求、業(yè)務(wù)規(guī)則、操作的復(fù)雜性決定）2.模型中的任何變更都會帶來連鎖反應(yīng)，因此需要非常認(rèn)真的回顧與評審：實體的變更經(jīng)常影響關(guān)系的定義和屬性的位置擺放關(guān)系的變更經(jīng)常影響屬性的位置擺放屬性的位置的變更可能影響其他屬性的擺放321.通過回答以下問題，持續(xù)地對模型的范圍進行驗證: 這一模型組件的含義、與業(yè)務(wù)的關(guān)系是什么？這一模型組件驅(qū)動的業(yè)務(wù)需求是什么？2.對模型是否已經(jīng)滿足所有業(yè)務(wù)需求、業(yè)務(wù)問題及限制條

11、件等，進行驗證3.3.絕對不要考慮任何與物理實施相關(guān)的問題！絕對不要考慮任何與物理實施相關(guān)的問題！4.當(dāng)所有回答業(yè)務(wù)需求所必須的數(shù)據(jù)已經(jīng)齊備時，停止對模型進行優(yōu)化33物理數(shù)據(jù)庫設(shè)計數(shù)據(jù)倉庫管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成序號主題縮寫中文1 PARTYPAR參與人2 OFFEROFR產(chǎn)品策劃3 FINANCEFIN賬務(wù)4 LOCATIONLOC地理區(qū)域5 ADVERTISEMENTADT市場營銷6 EVENTEVT事件7 NETWORKNET網(wǎng)絡(luò)資源8 REFERENCE CODECDE代碼表3435內(nèi)容安排數(shù)據(jù)模型相關(guān)術(shù)語 什么是數(shù)據(jù)模型建模注

12、意事項 數(shù)據(jù)模型方法論363738LDM與與PDM的區(qū)別的區(qū)別邏輯數(shù)據(jù)模型 (LDM)內(nèi)容內(nèi)容業(yè)務(wù)模型業(yè)務(wù)模型記錄業(yè)務(wù)規(guī)則和關(guān)系記錄業(yè)務(wù)規(guī)則和關(guān)系，與數(shù)據(jù)庫無關(guān)與數(shù)據(jù)庫無關(guān)用途：用途：與業(yè)務(wù)人員進行溝通和理解的工具與業(yè)務(wù)人員進行溝通和理解的工具用來確認(rèn)可以回答業(yè)務(wù)問題用來確認(rèn)可以回答業(yè)務(wù)問題物理數(shù)據(jù)模型 (PDM)內(nèi)容內(nèi)容數(shù)據(jù)庫模型數(shù)據(jù)庫模型表現(xiàn)物理數(shù)據(jù)屬性表現(xiàn)物理數(shù)據(jù)屬性 數(shù)據(jù)類型數(shù)據(jù)類型, 長度長度, 索引索引與數(shù)據(jù)庫相關(guān)與數(shù)據(jù)庫相關(guān)用途：用途：支持業(yè)務(wù)系統(tǒng)運行支持業(yè)務(wù)系統(tǒng)運行解決數(shù)據(jù)存儲問題解決數(shù)據(jù)存儲問題解決應(yīng)用處理性能問題解決應(yīng)用處理性能問題39LDM實現(xiàn)為實現(xiàn)為PDM的條件的條件L

13、DM業(yè)務(wù)規(guī)則業(yè)務(wù)規(guī)則PDM軟、硬件軟、硬件平臺特性平臺特性應(yīng)用開發(fā)策略應(yīng)用開發(fā)策略進行PDM設(shè)計必須考慮的因素、缺一不可：核心業(yè)務(wù)規(guī)則軟、硬件平臺個性化用戶、開發(fā)商個性化70%10%20%主要考慮因素輸入內(nèi)容影響程度40LDM業(yè)務(wù)規(guī)則業(yè)務(wù)規(guī)則PDM業(yè)務(wù)規(guī)則繼承業(yè)務(wù)規(guī)則繼承PDM不應(yīng)違反LDM中界定的業(yè)務(wù)規(guī)則包括：業(yè)務(wù)概念相同業(yè)務(wù)關(guān)系相同核心業(yè)務(wù)要素相同LDMPDM41業(yè)務(wù)規(guī)則繼承（舉例業(yè)務(wù)規(guī)則繼承（舉例 ）客戶編碼ABC用戶編碼客戶編碼XY業(yè)務(wù)規(guī)則：客戶的定義是XXX（實體定義）鑒別客戶唯一性的標(biāo)識為客戶編碼（主鍵）客戶核心屬性包括:A，B，C（屬性）一個客戶可以擁有多個用戶（關(guān)系）識別用戶所

14、屬客戶的標(biāo)識為客戶編碼（外鍵）客戶用戶CUST_IDABCUSER_IDCUST_IDXYCUSTUSER42軟、硬件軟、硬件平臺特性平臺特性考慮平臺特色考慮平臺特色PDM應(yīng)考慮實際數(shù)據(jù)庫平臺的特色包括：不同數(shù)據(jù)庫的數(shù)據(jù)類型、長度不同不同數(shù)據(jù)庫的索引機制不同不同的數(shù)據(jù)庫處理性能不同不同的硬件平臺、配置處理性能不同PDMLDMPDM43考慮平臺特色（舉例考慮平臺特色（舉例 ）客戶編碼客戶姓名BC用戶編碼客戶編碼XY客戶用戶CUST_IDChar（8）Cust_NameChar（8）BCUSER_IDCUST_IDXYCUSTUSERCust_IDLongintGuest_NameChar（12）

15、BCUSER_IDCUST_IDXYCUSTUSER例如：數(shù)據(jù)類型、長度不同等44應(yīng)用開發(fā)策略應(yīng)用開發(fā)策略考慮應(yīng)用開發(fā)策略考慮應(yīng)用開發(fā)策略PDM應(yīng)考慮應(yīng)用系統(tǒng)的實施策略包括：表的橫向分割；表的縱向分割；創(chuàng)建匯總表、臨時表；屬性冗余；創(chuàng)建主索引（可能與LDM主鍵不同）；PDMLDMPDM45考慮應(yīng)用開發(fā)策略（舉例考慮應(yīng)用開發(fā)策略（舉例 ）客戶編碼客戶姓名BC用戶編碼客戶編碼XY客戶用戶CUST_IDCust_NameBUSER_IDCUST_IDXYCUST_BUSERCUST_IDCCUST_C橫向分表CUST_IDABCUSER_IDCUST_IDXYACUST1USERCUST_IDABC

16、CUST2CUST_IDABCCUST31類（前1000條）2類（中2000條）3類（后1000條）共3000條例如：橫向表、縱向分表、子類、屬性冗余等4647484950 放映結(jié)束 感謝各位的批評指導(dǎo)！讓我們共同進步53存儲和管理采集回答業(yè)務(wù)問題 析取 清洗 條件 剔除家庭關(guān)系 加載 業(yè)務(wù)系統(tǒng) 業(yè)務(wù)系統(tǒng) 業(yè)務(wù)數(shù)據(jù) 外部數(shù)據(jù) 關(guān)系數(shù)據(jù)庫管理系統(tǒng)聚集 統(tǒng)計 人工智能 神經(jīng)網(wǎng)絡(luò) 多維 可視化 EIS/DSS 電子表 對象語言 開發(fā) 企業(yè) 數(shù)據(jù)倉庫 從屬數(shù)據(jù)集市 業(yè)務(wù)人員 IT 用戶數(shù)據(jù)導(dǎo)入 知識發(fā)現(xiàn) 數(shù)據(jù)挖掘 信息存取 工具源數(shù)據(jù) 邏輯數(shù)據(jù)模型應(yīng)用數(shù)據(jù)模型54屬性：屬性： （描述真實或抽象事物相關(guān)

17、聯(lián)的特征或性質(zhì)） q主鍵主鍵（識別實體實例唯一性的屬性、屬性組） q可選鍵可選鍵 （能識別實體實例唯一性的其他屬性、屬性組）q外鍵外鍵（通過父實體到子實體關(guān)系轉(zhuǎn)移到子實體的屬性）q非鍵屬性非鍵屬性（不是實體主鍵屬性的其他屬性 ） q基礎(chǔ)名基礎(chǔ)名（外鍵的原來名稱 ）q角色名角色名 （外鍵的新名稱，表明取值是父實體屬性的子集 ）q鑒別器鑒別器 （取值決定父實體實例屬于哪個子類的屬性 ）邏輯數(shù)據(jù)模型基本術(shù)語 (三) 55如果數(shù)Quantity屬性被定義為“不是與Order相關(guān)，就是與Part相關(guān)”例如：在OLTP系統(tǒng)中常見的字段復(fù)用現(xiàn)象，屬此類問題110152561.通過回答以下問題，持續(xù)地對模型的范圍進行驗證: 這一模型組件的含義、與業(yè)務(wù)的關(guān)系是什么？這一模型組件驅(qū)動的業(yè)務(wù)需求是什么？2.對模型是否已經(jīng)滿足所有業(yè)務(wù)需求、業(yè)務(wù)問題及限制條件