數(shù)據(jù)庫系統(tǒng)原理與開發(fā)-NoSQL數(shù)據(jù)庫概述-1

NoSQL數(shù)據(jù)庫概述鳳荔用本節(jié)學(xué)目地?數(shù)據(jù)庫管理目地與內(nèi)容?關(guān)系數(shù)據(jù)庫局限?分布式大數(shù)據(jù)處理一鳳荔用一,數(shù)據(jù)庫管理目地與內(nèi)容?數(shù)據(jù)類型多樣化,數(shù)字,字符,文本等,還需要視頻,音頻,圖形,圖像,動畫,HTML/XML,流數(shù)據(jù)等更復(fù)雜地數(shù)據(jù)類型?數(shù)據(jù)結(jié)構(gòu)需要結(jié)構(gòu)化,半結(jié)構(gòu)化,非結(jié)構(gòu)化等各種結(jié)構(gòu)?數(shù)據(jù)存儲方式多樣化（列式存儲,鍵值存儲,圖存儲,文檔存儲等）?存儲位置--分布透明,存儲量--海量?查詢要求多層次:時空,關(guān)聯(lián),分析,挖掘等?自定義操作,各種數(shù)據(jù)統(tǒng)計分析,分類,聚類,預(yù)測,離群點發(fā)現(xiàn)等操作?數(shù)據(jù)庫地發(fā)展需要滿足不斷發(fā)展地新地領(lǐng)域需求二鳳荔用二,關(guān)系數(shù)據(jù)庫局限?用二維表地方式來存儲數(shù)據(jù)與數(shù)據(jù)之間地關(guān)系,OLTP（OnTransactionProcess在線事務(wù)處理）提供了數(shù)據(jù)處理臺?數(shù)據(jù)庫高并發(fā)讀寫需求?海量數(shù)據(jù)地高效存儲與處理?數(shù)據(jù)庫高擴展與高可用需求?在處理WEB二.零網(wǎng)站,特別是超大規(guī)模與高并非地SNS類冬天網(wǎng)站:?HignPerfprmance--主從分離,分庫,分表,緩解寫壓力,增強讀擴展?HugeStorage--海量存儲--分庫,分表,緩解數(shù)據(jù)增長壓力?HighScalabilityandHignAvbailability--高擴展與高可用--主從,復(fù)制等三鳳荔用三,分布式大數(shù)據(jù)處理?分布式文件系統(tǒng)?分布式數(shù)據(jù)庫?大數(shù)據(jù)?分布式大數(shù)據(jù)一.分布式文件系統(tǒng)?分布式文件系統(tǒng)（DistributedFileSystem:DFS）是指文件系統(tǒng)地物理存儲資源不在本地節(jié)點上,通過計算機網(wǎng)絡(luò)與節(jié)點相連。?DFS--單個訪問點與一個邏輯結(jié)構(gòu),用戶透明訪問系統(tǒng)地任何文件?DFS將統(tǒng)一網(wǎng)絡(luò)地不同計算機上地享文件夾組織起來,形成一個單獨地,邏輯地,層次式地享文件系統(tǒng)。四鳳荔用分布式文件系統(tǒng)特點:?高可靠?高訪問?在線遷移,復(fù)制?自動負載均衡?元數(shù)據(jù)與數(shù)據(jù)分離五鳳荔用二.分布式數(shù)據(jù)庫?分布式數(shù)據(jù)庫=數(shù)據(jù)庫+網(wǎng)絡(luò)技術(shù)?思想:將數(shù)據(jù)分散存儲,海量數(shù)據(jù)邏輯分片,存儲容量大,并發(fā)訪問量高六鳳荔用分布式數(shù)據(jù)庫特點:?數(shù)據(jù)地物理分布?數(shù)據(jù)地邏輯整體?數(shù)據(jù)地分布獨立?場地自治與協(xié)調(diào)?數(shù)據(jù)地冗余及冗余透明七鳳荔用三.大數(shù)據(jù)?大數(shù)據(jù)就是海量數(shù)據(jù)+復(fù)雜計算。?真實Veracity,價值Value?Volume?Velocity?Variety?Veracity?Value八鳳荔用?數(shù)據(jù)地異構(gòu)與不完備?數(shù)據(jù)處理地時效?數(shù)據(jù)地安全與隱私保護?大數(shù)據(jù)地能耗問題?大數(shù)據(jù)管理易用問題九鳳荔用五.?海量數(shù)據(jù)存儲地關(guān)鍵技術(shù)包括數(shù)據(jù)劃分（分布式）,數(shù)據(jù)一致與可用,負載均衡,容錯機制,虛擬存儲技術(shù),云存儲技術(shù)等。?要求在分布式數(shù)據(jù)庫地基礎(chǔ)上,具有更高地數(shù)據(jù)訪問速度;更強地可擴展;更高地并發(fā)訪問量。?對應(yīng)可用,一致,高并發(fā),高容量等地衡？？鳳荔用七.?面對海量大數(shù)據(jù)地存儲與管理,需要對關(guān)系數(shù)據(jù)庫行補充??數(shù)據(jù)模型