視頻監(jiān)控系統(tǒng)云存儲介紹ppt

1、這是一個(gè)大數(shù)據(jù)的時(shí)代 大數(shù)據(jù)時(shí)代的4V特征 Volume 海量數(shù)據(jù) 從TB級別，增長到PB級別 Variety 數(shù)據(jù)種類繁多 有各類文本、圖片、視頻等數(shù)據(jù)， 而且非結(jié)構(gòu)化數(shù)據(jù)越來越多 Velocity 實(shí)時(shí)性 海量數(shù)據(jù)需要快速的處理和檢索 Veracity 真實(shí)準(zhǔn)確 利用數(shù)據(jù)挖掘和分析得出真實(shí)準(zhǔn)確的信息 大數(shù)據(jù)時(shí)代，對存儲系統(tǒng)提供更高要求 大容量 高效率 高可用 大數(shù)據(jù)時(shí)代,現(xiàn)有存儲系統(tǒng)面臨的難題 以智慧城市的建設(shè)為例 海量數(shù)據(jù)存儲，如何統(tǒng)一管理和統(tǒng)一調(diào)度 數(shù)以萬計(jì)的監(jiān)控點(diǎn)，存儲容量已經(jīng)達(dá)到PB級別 智能分析抽離出的圖片、文字、摘要視頻等，數(shù)據(jù)種類多種多樣。 白色小型車 滬FW6461 逆行

2、闖紅燈 紅色上衣 紅色小型車 人員聚集告警 人臉抓拍圖片 黃色襯衫 行車軌跡 北緯31.3 東 經(jīng) 120.6 除視頻監(jiān)控?cái)?shù)據(jù)外，各類應(yīng)用系統(tǒng)的數(shù)據(jù)也需進(jìn)行融 合 移動警務(wù) 圖像資源信息庫 車牌信息數(shù)據(jù) 庫 移動警務(wù) 人員信息數(shù)據(jù) 庫 移動警務(wù) 在并發(fā)讀寫時(shí)，存儲設(shè)備的性能瓶頸在控制器或處理能力上。為提升并發(fā)處理能力，必須不斷 的進(jìn)行硬件升級。 大容量并發(fā)讀寫，設(shè)備性能成為瓶頸 存儲設(shè)備 300路高清 存儲設(shè)備 200路高清 存儲設(shè)備 100路高清 單臺最大并發(fā)處理能力 升級CPU 升級內(nèi)存 設(shè)備故障須及時(shí)修復(fù)，維護(hù)成本激增 硬盤 存儲設(shè)備 硬盤硬盤硬盤 硬盤硬盤硬盤硬盤 熱備硬盤硬盤硬盤 R

3、AID硬盤硬盤硬盤 某塊硬盤發(fā)生故障時(shí)，例如RAID，只允許設(shè)備 中有一塊硬盤失效。而RAID恢復(fù)時(shí)間往往需要十 幾個(gè)小時(shí)，期間再壞盤，就無法恢復(fù)了。因此， 需要立即更換或修復(fù)故障硬盤。 存儲設(shè)備 存儲設(shè)備 存儲設(shè)備1 某臺設(shè)備發(fā)生故障時(shí)，雖可以用負(fù)載均衡技術(shù)分 擔(dān)給其它設(shè)備，但需要立即更換或修復(fù)故障設(shè)備， 否則存儲于其中的數(shù)據(jù)無法讀取。 故障 故障 容量達(dá)到“PB”級別，維護(hù)就成為最大的難題 NAS存儲設(shè)備 NAS存儲設(shè)備 NAS存儲設(shè)備 卡口平臺監(jiān)控平臺 IP SAN存儲設(shè)備 IP SAN存儲設(shè)備 IP SAN存儲設(shè)備 圖像資源數(shù)據(jù)庫 NAS集群存儲設(shè)備 NAS集群存儲設(shè)備 NAS集群存儲

4、設(shè)備 不同的應(yīng)用系統(tǒng)間數(shù)據(jù)難以融合 各個(gè)應(yīng)用系統(tǒng)，都建設(shè)獨(dú)立的一套存儲調(diào)度系統(tǒng)，可移植性和重復(fù)利用率較差。而且，不同的應(yīng)用系 統(tǒng)需要各種類型的存儲系統(tǒng)，NAS、IPSAN或集群NAS，難以融合。 如何解決些難題？ 海量數(shù)據(jù)存儲，如何統(tǒng)一管理和統(tǒng)一調(diào)度 大容量并發(fā)讀寫，設(shè)備性能成為瓶頸 不同的應(yīng)用系統(tǒng)間數(shù)據(jù)難以融合 設(shè)備故障須及時(shí)修復(fù)，維護(hù)成本激增 云存儲應(yīng)運(yùn)而生 概念篇 只在此山中，云深不知處 什么叫做”云”？ 使用者按需獲取資源，無需關(guān)心資源在何處，如何構(gòu)建。 就像從“云端”獲取資源 云 Cloud 像是擰開水龍頭取水，打開開關(guān)獲取電一樣便捷，用戶也可以方便的使用“云”資源。 什么叫做”云”

5、？ 什么是云存儲？ 用戶按需使用存儲資源，無需關(guān)心存儲設(shè)備在何處，如何構(gòu)建。在視頻監(jiān)控領(lǐng)域，云存儲作為基礎(chǔ) 資源，其“用戶”為各類業(yè)務(wù)系統(tǒng)。 云存儲 Cloud Storage 卡口平臺 視頻監(jiān)控平臺 圖像資源數(shù)據(jù)庫 統(tǒng)一數(shù)據(jù)平臺 智能應(yīng)用系統(tǒng) 難題的解決之道 海量數(shù)據(jù)存儲，如何統(tǒng)一管理和統(tǒng)一調(diào)度 大容量并發(fā)讀寫，設(shè)備性能成為瓶頸 不同的應(yīng)用系統(tǒng)間數(shù)據(jù)難以融合 設(shè)備故障須及時(shí)修復(fù)，維護(hù)成本激增 提供分布式文件系統(tǒng)，數(shù)據(jù)調(diào)度與存儲分離 將單打獨(dú)斗升級為團(tuán)隊(duì)作戰(zhàn) 由及時(shí)維護(hù)轉(zhuǎn)變?yōu)槎ㄆ诰S護(hù) 將各種數(shù)據(jù)融合，提供統(tǒng)一接口 架構(gòu)篇 有形不累物，無跡卻隨風(fēng) 存儲節(jié)點(diǎn) 存儲節(jié)點(diǎn) 存儲節(jié)點(diǎn)存儲節(jié)點(diǎn) 云存儲的系

6、統(tǒng)架構(gòu) 云存儲的系統(tǒng)架構(gòu)，分為“控制節(jié)點(diǎn)”和“存儲節(jié)點(diǎn)”兩個(gè)部分。 控制節(jié)點(diǎn) 控制節(jié)點(diǎn) 控制節(jié)點(diǎn) 控制節(jié)點(diǎn)采用集群架構(gòu)， 存儲元數(shù)據(jù)，對存儲節(jié)點(diǎn) 進(jìn)行調(diào)度 存儲節(jié)點(diǎn)對數(shù)據(jù)進(jìn)行分布 式存儲，可進(jìn)行復(fù)制或者 RAID備份 注：元數(shù)據(jù)（metadata），包括文件目錄組織、屬性維護(hù)、訪問控 制信息、文件操作日志記錄、文件到塊的映射信息、塊當(dāng)前所在的 位置等。 云存儲的工作流程 數(shù)據(jù) 控制節(jié) 點(diǎn) 控制節(jié) 點(diǎn) 控制節(jié) 點(diǎn) 存儲節(jié)點(diǎn) 存儲節(jié)點(diǎn) 存儲節(jié)點(diǎn) 存儲節(jié)點(diǎn) 網(wǎng) 絡(luò) 業(yè)務(wù)系統(tǒng) 申請 調(diào)度 調(diào)度 備份 同步 云 存 儲 系 統(tǒng) 3412 1 2 3 4 業(yè)務(wù)系統(tǒng)向控制節(jié)點(diǎn)申請存儲資源，控制節(jié)點(diǎn)回復(fù)調(diào)度信

7、 息 數(shù)據(jù)經(jīng)由網(wǎng)絡(luò)，到達(dá)存儲節(jié)點(diǎn)進(jìn)行分布式存儲控制節(jié)點(diǎn)與存儲節(jié)點(diǎn)間同步調(diào)度與存儲信息控制節(jié)點(diǎn)間進(jìn)行元數(shù)據(jù)同步備份存儲節(jié)點(diǎn)的數(shù)據(jù)進(jìn)行復(fù)制或RAID備份 存儲節(jié)點(diǎn) 存儲節(jié)點(diǎn)存儲節(jié)點(diǎn)存儲節(jié)點(diǎn)存儲節(jié)點(diǎn) 海量存儲，彈性伸縮 相比傳統(tǒng)的存儲設(shè)備，云存儲可支持的存儲節(jié)點(diǎn)數(shù)以千計(jì)，支持的容量達(dá)百PB級別，并可彈性伸縮，無縫擴(kuò) 展。 1 2 34 85 6 79 控制節(jié)點(diǎn)控制節(jié)點(diǎn) 控制節(jié)點(diǎn) 1 234 85 6 79 增加存儲節(jié) 點(diǎn) ，數(shù)據(jù)自動重組 減少存儲節(jié) 點(diǎn) ，數(shù)據(jù)自動恢復(fù) 6 47 傳統(tǒng)的存儲設(shè)備并發(fā)讀寫性能，受到NAS機(jī)頭、CPU或控制器的能力限制，而云存儲系統(tǒng)采用控制與數(shù)據(jù)分 離的架構(gòu)，脫離了單臺設(shè)

8、備的能力束縛，整個(gè)系統(tǒng)的性能主要受到網(wǎng)絡(luò)吞吐能力的限制。 存儲節(jié)點(diǎn) 存儲節(jié)點(diǎn)存儲節(jié)點(diǎn)存儲節(jié)點(diǎn)存儲節(jié)點(diǎn) 控制節(jié)點(diǎn)控制節(jié)點(diǎn) 控制節(jié)點(diǎn) 數(shù)據(jù)流不經(jīng)過控制節(jié)點(diǎn) 千兆交換網(wǎng)絡(luò)萬兆交換網(wǎng)絡(luò) 高并發(fā)讀寫性能，擺脫單臺設(shè)備能力束縛 傳統(tǒng)的存儲設(shè)備并發(fā)讀寫性能，受到NAS機(jī)頭、CPU或控制器的能力限制，而云存儲系統(tǒng)采用控制與數(shù)據(jù)分 離的架構(gòu)，脫離了單臺設(shè)備的能力束縛，整個(gè)系統(tǒng)的性能主要受到網(wǎng)絡(luò)吞吐能力的限制。 高并發(fā)讀寫性能，擺脫單臺設(shè)備能力束縛 存儲設(shè)備 300路高清 已經(jīng)撐不住了 毫無壓力 30000路高清 云存儲 云存儲系統(tǒng)的控制節(jié)點(diǎn)采用集群架構(gòu)，單點(diǎn)發(fā)生故障時(shí)，可無縫切換，系統(tǒng)業(yè)務(wù)不會中斷。 控制節(jié)點(diǎn)控制節(jié)點(diǎn) 控制節(jié)點(diǎn) 工作節(jié) 點(diǎn) 備份節(jié) 點(diǎn) 備份節(jié) 點(diǎn) 高可靠，系統(tǒng)業(yè)務(wù)不中斷 云存儲可為多個(gè)業(yè)務(wù)系統(tǒng)同時(shí)提供服務(wù)，內(nèi)部架構(gòu)對其透明，提供統(tǒng)一的訪問入口，利于數(shù)據(jù)共享與融合。 控制節(jié)點(diǎn)控制節(jié)點(diǎn) 控制節(jié)點(diǎn) 存儲節(jié)點(diǎn)存儲節(jié)點(diǎn)存儲節(jié)點(diǎn)存儲節(jié)點(diǎn)存儲節(jié)點(diǎn) 業(yè)務(wù)系統(tǒng)1業(yè)務(wù)系統(tǒng)2業(yè)務(wù)系統(tǒng)3業(yè)務(wù)系統(tǒng)4 統(tǒng)一訪問入口，多用戶并行訪問 云存儲的