監(jiān)控集中云存儲方案

1、視頻云存儲解決方案（集中存儲）閱讀提示一、文檔類別 簡化版系統(tǒng)應(yīng)用設(shè)計(jì)方案、適用性簡述 一、闡述內(nèi)容1、方案對視頻云存儲系統(tǒng)進(jìn)行了介紹，使受眾能夠?qū)σ曨l云存儲解決方案有整體的了解。2、方案簡單闡述了視頻云存儲的系統(tǒng)架構(gòu)、系統(tǒng)特點(diǎn)以及系統(tǒng)主要功能，可以根據(jù)實(shí)際的項(xiàng)目 需求，形成初步落地的項(xiàng)目軟硬件配置參考清單。二、方案適用性方案是以推廣、初步交流和項(xiàng)目初步設(shè)計(jì)為目的而提供的系統(tǒng)簡化版方案，在使用此方案時(shí)需 要根據(jù)具體的項(xiàng)目情況，進(jìn)行相應(yīng)內(nèi)容的選擇及修改，以符合實(shí)際應(yīng)用。三、方案受眾：公司解決方案、售前相關(guān)人員以及技術(shù)人員。如果針對項(xiàng)目有具體問題請及時(shí)咨詢視頻云存儲系統(tǒng)售前工程師。三、關(guān)聯(lián)可參考文

2、檔視頻云存儲容量計(jì)算工具視頻云存儲配置清單其他云存儲相關(guān)文檔：f產(chǎn)品資料01.股份公司08.視頻云存儲功能項(xiàng)功能說明1、負(fù)責(zé)CVM蝶群的創(chuàng)建和維護(hù)工作。2、負(fù)責(zé)集群內(nèi)各節(jié)點(diǎn)的添加、刪除、修改和運(yùn)集群化管理 系統(tǒng)功能行狀態(tài)監(jiān)控工作3、負(fù)責(zé)業(yè)務(wù)響應(yīng)、處理的集群內(nèi)的負(fù)載均衡工一、系統(tǒng)概述 對視頻監(jiān)控系統(tǒng)中需要隨著視頻監(jiān)控系統(tǒng)規(guī)模越來越大，以及高清視頻的大規(guī)模應(yīng)用，存儲的數(shù)據(jù)和應(yīng)用的復(fù)雜程度在不斷提高，且視頻數(shù)據(jù)需要長時(shí)間持續(xù)地保存到存儲系統(tǒng)在未來的并要求隨時(shí)可以調(diào)用，對存儲系統(tǒng)的可靠性和性能等方面都提出了新的要求。中，顯得數(shù)據(jù)將呈現(xiàn)爆炸性的海量增長，提供對海量數(shù)據(jù)的快速存儲及檢索技術(shù)，復(fù)雜系統(tǒng)中，尤

3、為重要，存儲系統(tǒng)正在成為視頻監(jiān)控技術(shù)未來發(fā)展的決定性因素。在容量和性能的擴(kuò)展上會(huì)存在瓶頸。NAS級的海量存儲需求，傳統(tǒng)的SAN或面對百PB這對于追求高性能、而且可以實(shí)現(xiàn)性能與容量的線性擴(kuò)展，而云存儲可以突破這些性能瓶頸，高可用性的企業(yè)用戶來說是一個(gè)新選擇。)概念上延伸和發(fā)展出來的一個(gè)新的概念，是指cloud computing云存儲是在云計(jì)算(應(yīng)用存儲虛擬化技術(shù)將網(wǎng)絡(luò)中大量各種網(wǎng)格技術(shù)或分布式文件系統(tǒng)等功能，通過集群應(yīng)用、共同對外提供數(shù)據(jù)存儲和業(yè)務(wù)訪問功不同類型的存儲設(shè)備通過應(yīng)用軟件集合起來協(xié)同工作，能的一個(gè)系統(tǒng)。所以云存儲可以認(rèn)為是配置了大容量存儲設(shè)備的一個(gè)云計(jì)算系統(tǒng)。 公司專門針對大容量視

4、頻數(shù)據(jù)的存儲和管理以及滿足視頻監(jiān)控依據(jù)云存儲的功能特點(diǎn)，領(lǐng)域特殊的應(yīng)用需求，量身設(shè)計(jì)了一套視頻云存儲監(jiān)控系統(tǒng)。圖片的/視頻云存儲系統(tǒng)可以同時(shí)應(yīng)用于視頻、圖片混合存儲，承擔(dān)整個(gè)系統(tǒng)內(nèi)的視頻云存儲系統(tǒng)一方面采用了基于云架構(gòu)的分布式集群 設(shè)計(jì)和虛擬化設(shè)計(jì)，讀取工作。數(shù)據(jù)寫入/最大限度利用了硬件資源和存在系統(tǒng)內(nèi)部實(shí)現(xiàn)了多設(shè)備協(xié)同工作、性能和資源的虛擬整合，通過將云存儲的存儲功能、管理功能進(jìn)行打包， 通過開放透明的應(yīng)用接儲空間。另一方面，可靠與上層應(yīng)用平臺整合后，口和簡單易用的管理界面，為整個(gè)安防監(jiān)控系統(tǒng)提供了高效、的數(shù)據(jù)存儲服務(wù)。二、系統(tǒng)架構(gòu)（一）技術(shù)路線在視頻云存儲系統(tǒng)的設(shè)計(jì)中，采用的核心技術(shù)如下：

5、1）采用存儲全域虛擬化技術(shù)對具有海量存儲需求的用戶提供透明存儲構(gòu)架，可持續(xù)擴(kuò)容避免瓶 頸限制，可以更有效的進(jìn)行資源管理，靈活增減空間，達(dá)到最大程度上合理利用空間的效果。2）采用集群技術(shù)，解決單 /多節(jié)點(diǎn)失效問題，并利用負(fù)載均衡技術(shù)充分利用各存儲節(jié)點(diǎn)的性能， 提升系統(tǒng)的可靠性和安全性。3）采用離散存儲技術(shù)，保障了用戶高效的讀寫的同時(shí)保證了業(yè)務(wù)的持續(xù)性。4）采用統(tǒng)一完善的接口，降低對接成本、平臺維護(hù)成本和用戶管理的復(fù)雜度。5）采用開放的集成構(gòu)架，使其可兼容業(yè)界各類iSCSI/FC存儲設(shè)備，保護(hù)用戶現(xiàn)有存儲投資資源。6）采用數(shù)據(jù)備份和容災(zāi)技術(shù)，保證云存儲中的數(shù)據(jù)不丟失，保證云存儲服務(wù)的安全穩(wěn)定。 （

6、二）邏輯架構(gòu)云存儲系統(tǒng)采用分層結(jié)構(gòu)設(shè)計(jì)，整個(gè)系統(tǒng)從邏輯上分為五層，分別為設(shè)備層、存儲層、管理層、 接口層、應(yīng)用層。云存儲邏輯架構(gòu)圖1）設(shè)備層設(shè)備層是云存儲最基礎(chǔ)、最底層的部分，該層由標(biāo)準(zhǔn)的物理設(shè)備組成，支持標(biāo)準(zhǔn)的IP-SAN、FC-SAN存儲設(shè)備。在系統(tǒng)組成中，存儲設(shè)備可以是SAN架構(gòu)下的FC光纖通道存儲設(shè)備或iSCSI協(xié)議下的IP存儲設(shè)備。2）存儲層在存儲層上部署云存儲流數(shù)據(jù)系統(tǒng)，通過調(diào)用云存儲流數(shù)據(jù)系統(tǒng)，實(shí)現(xiàn)存儲傳輸協(xié)議和標(biāo)準(zhǔn)存儲設(shè)備之間的邏輯卷或磁盤陣列的映射，實(shí)現(xiàn)數(shù)據(jù)（視頻、圖片、附屬流）和設(shè)備層存儲設(shè)備之間 的通信連接，完成數(shù)據(jù)的高效的寫入、讀取和調(diào)用等服務(wù)。3）管理層在管理層，融合

7、了索引管理、計(jì)劃管理、調(diào)度管理、資源管理、集群管理、設(shè)備管理等多種核心 的管理功能?？梢詫?shí)現(xiàn)存儲設(shè)備的邏輯虛擬化管理、多鏈路冗余管理、錄像計(jì)劃的主動(dòng)下發(fā)，以及硬件設(shè)備的狀態(tài)監(jiān)控和故障維護(hù)等；實(shí)現(xiàn)整個(gè)存儲系統(tǒng)的虛擬化的統(tǒng)一管理，實(shí)現(xiàn)上層服務(wù)（視頻錄像、回放、查詢、智能分析數(shù)據(jù)請求等）的響應(yīng)。4）接口層應(yīng)用接口層是云存儲最靈活多變的部分，接口層面向用戶應(yīng)用提供完善以及統(tǒng)一的訪問接口，接口類型可分為 WebService接口、API接口、Mibs接口，可以根據(jù)實(shí)際業(yè)務(wù)類型，開發(fā)不同的應(yīng) 用服務(wù)接口，提供不同的應(yīng)用服務(wù)。實(shí)現(xiàn)和行業(yè)專屬平臺、運(yùn)維平臺的對接； 實(shí)現(xiàn)和智能分析處理系統(tǒng)之間的對接；實(shí)現(xiàn)視頻數(shù)

8、據(jù)的存儲、檢索、回放、瀏覽轉(zhuǎn)發(fā)等操作；實(shí)現(xiàn)關(guān)鍵視頻數(shù)據(jù)的 遠(yuǎn)程容災(zāi)；實(shí)現(xiàn)設(shè)備以及服務(wù)的監(jiān)控和運(yùn)維等。5）應(yīng)用層從邏輯上劃分，除了應(yīng)用層外，剩下的四層都屬于通常云存儲的范疇，但是在視頻云存儲系統(tǒng)中，為了與視頻監(jiān)控系統(tǒng)的建設(shè)和應(yīng)用更加緊密的結(jié)合，更加符合用戶的業(yè)務(wù)需求，將應(yīng)用層納入了整個(gè)系統(tǒng)架構(gòu)中，從根本上提高視頻云存儲系統(tǒng)的針對性?？蓪⑿袠I(yè)視頻監(jiān)管平臺、運(yùn)維平臺、智能分析平臺等通過相應(yīng)的接口與云存儲系統(tǒng)對接，實(shí)現(xiàn)與 云存儲系統(tǒng)之間的數(shù)據(jù)以及信令的交互。行業(yè)視頻監(jiān)控平臺可與云存儲系統(tǒng)進(jìn)行配置錄像計(jì)劃、 配置存儲策略、 檢索視頻資源、 重要錄像的備份存儲等指令的交互，輔助流數(shù)據(jù)、視頻數(shù)據(jù)、圖片數(shù)據(jù)的

9、存取。運(yùn)維平臺采用標(biāo)準(zhǔn)的SNMPB議實(shí)現(xiàn)并提供Mibs接口，對云存儲系統(tǒng)以及服務(wù)進(jìn)行監(jiān)控管理，及時(shí)將產(chǎn)生的告警傳遞給用戶。將智能分析平臺可與云存儲系統(tǒng)進(jìn)行對接， 實(shí)現(xiàn)基礎(chǔ)數(shù)據(jù)的讀取， 以及經(jīng)過存儲的二次分析后的片段信息，文本信息寫入和檢索。（ 三 ） 物理組成視頻云存儲系統(tǒng)主要由管理節(jié)點(diǎn)和存儲節(jié)點(diǎn) （物理存儲設(shè)備） 兩部分組成。 系統(tǒng)內(nèi)部需要配置的元數(shù)據(jù)信息由管理服務(wù)器統(tǒng)一管理， 管理節(jié)點(diǎn)還需要負(fù)責(zé)集群內(nèi)部的負(fù)載均衡， 失敗替換等管理職能； 視頻云存儲系統(tǒng)可以組建海量的存儲資源池， 容量分配不受物理硬盤數(shù)量的限制； 并且存 儲容量可進(jìn)行線性在線擴(kuò)容，性能和容量的擴(kuò)展都可以通過在線擴(kuò)展完成。視頻

10、云存儲管理節(jié)點(diǎn)（CVMN） ：部署管理服務(wù)器，是視頻云存儲系統(tǒng)的核心節(jié)點(diǎn)，作為云存儲系統(tǒng)的調(diào)度中心負(fù)責(zé)云存儲系統(tǒng)資源管理、索引管理、計(jì)劃管理、 策略調(diào)度等。 根據(jù)項(xiàng)目對存儲容量需求、前端支撐數(shù)目、性能要求、可靠性要求，存儲管理節(jié)點(diǎn)可以按照兩種方式部署：雙機(jī)部署、集群部署。視頻云存儲節(jié)點(diǎn)（CVSN） ：作為云存儲系統(tǒng)業(yè)務(wù)的具體執(zhí)行者負(fù)責(zé)視頻數(shù)據(jù)存儲、讀取、存儲設(shè)備管理、存儲空間管理等。三、系統(tǒng)特,電高效靈活的空間管理 1) 對存儲資源進(jìn)行虛擬化整合，提高用戶管理效率；支持存儲資源的在線擴(kuò)展， 實(shí)現(xiàn)容量與性能的線性增長；虛擬空間可靈活調(diào)整，不但能擴(kuò)大，同樣能縮小；海量數(shù)據(jù)的快速檢索 2)采用一體化

11、索引設(shè)計(jì)，大大提高了查找速度；I幀信息快速讀??；深化視頻、圖片的應(yīng)用設(shè)計(jì)，支持持續(xù)可靠的數(shù)據(jù)服務(wù) 3)小時(shí)不間斷高效可持續(xù)的數(shù)據(jù)服務(wù)，充分保護(hù)數(shù)據(jù)安全和可靠性；提供7X24多點(diǎn)故障，錄像業(yè)務(wù)采用全集群化設(shè)計(jì)，性能全面提升，設(shè)備壓力負(fù)載均衡，單 /不中斷；數(shù)據(jù)存儲采用離散存儲算法，提供系統(tǒng)級高效、穩(wěn)定存取服務(wù)；高可擴(kuò)展的應(yīng)用支撐4)系統(tǒng)的高性能設(shè)計(jì)，能夠并發(fā)服務(wù)以滿足視頻數(shù)據(jù)的高速讀取需求。采用流式數(shù)據(jù)結(jié)構(gòu)，面向視頻、圖片數(shù)據(jù)而設(shè)計(jì)，滿足視頻數(shù)據(jù)的持續(xù)寫入；深入開發(fā)視頻錄像的專業(yè)化應(yīng)用設(shè)計(jì)，優(yōu)化了應(yīng)用的服務(wù)質(zhì)量；5)開放透明的兼容系統(tǒng)統(tǒng)一開放的應(yīng)用功能接口，由上層業(yè)務(wù)平臺直接調(diào)用；存儲設(shè)備的接入

12、；、FCSAN采用的是標(biāo)準(zhǔn)設(shè)備兼容模式，支持標(biāo)準(zhǔn)IP SAN四、系統(tǒng)功能 視頻云存儲系統(tǒng)主要實(shí)現(xiàn)功能如下表所示：作，動(dòng)態(tài) 調(diào)配 集群 處理 資 源， 提高 系統(tǒng) 運(yùn)行 效率 和響 應(yīng)速 度。務(wù)壓 力自 動(dòng)調(diào) 整保 證業(yè) 務(wù)處 理不 中 斷。虛擬化管理一整 合成 為資 源 池， 實(shí)現(xiàn) 用戶 對資 源池 的透 明管 理管 理。頻和 縮 小。離散存儲管理離散 算法 自動(dòng) 分散 到不 同存 儲設(shè) 備的 數(shù)據(jù) 塊中 進(jìn)行 存 儲。離散 算法 分散 到指 定的 部分 存儲 設(shè)備 的數(shù) 據(jù)塊 總進(jìn) 行存 儲。吞吐 里和響應(yīng) 效 率。錄像管理功錄像計(jì)劃執(zhí)行1流能數(shù)據(jù)向錄像池的寫入操作。存儲應(yīng)用功視頻錄像錄像能

13、數(shù)據(jù)，錄像類型、錄像頭。將本地保存的數(shù)據(jù)補(bǔ)錄到系統(tǒng)中。程中可以按報(bào)警類型修改錄像的類型并即時(shí)保存到系統(tǒng)中。視頻回放對錄像數(shù)據(jù)進(jìn)行回放。據(jù)進(jìn)行回放時(shí)間定位。視頻標(biāo)注打標(biāo)、存儲、備份等操作。詢、檢索、篩選工作。修改、刪除等操作。圖片存儲集的圖片數(shù)據(jù)。多點(diǎn)故障時(shí)維護(hù)集群運(yùn)行高可靠性，將系統(tǒng)內(nèi)存儲節(jié)點(diǎn)內(nèi)數(shù)據(jù)塊通過虛擬化通過錄像池負(fù)載資源池靈活劃分錄像池圖片數(shù)據(jù)的存儲工作支持錄像池創(chuàng)建后的擴(kuò)錄像池靈活調(diào)整對某路或多路數(shù)據(jù)流進(jìn)行切片后按照內(nèi)對某路或多路數(shù)據(jù)流進(jìn)行切片后按照內(nèi)提高系統(tǒng)數(shù)提供數(shù)據(jù)讀取并發(fā)響應(yīng)功能、根據(jù)配置要求確定通道和存儲地址，負(fù)責(zé)將視按照用戶制定的計(jì)劃保存前端設(shè)備采集前端設(shè)備能即斷網(wǎng)等條件下

14、支持補(bǔ)錄即采集視頻數(shù)據(jù)支持動(dòng)態(tài)修改錄像類型錄像類支持根據(jù)編碼器名稱以及時(shí)間段支持根據(jù)編碼器名稱以及時(shí)間段對錄像倒序回放和手動(dòng)停止回放支持快放慢 放幀回支I圖片等數(shù)據(jù)信息所對應(yīng)的標(biāo)簽進(jìn)對錄像圖片等數(shù)據(jù)信息的標(biāo)簽信息進(jìn)行對錄像圖片 等數(shù)據(jù)信息所對應(yīng)的標(biāo)簽進(jìn)對錄像支持按照用戶制定的計(jì)劃保存前端設(shè)備圖片下載支持按時(shí)間段下載圖片。1、方式下載圖片。支持瀏覽器http 的 URL2、圖片壓縮支持圖片大小壓縮和尺寸縮放。1、運(yùn)維功能周期覆蓋容量進(jìn)行圖片數(shù)據(jù)的周按策略支持按周期、1、期覆蓋式存儲。五、系統(tǒng)參考清單 管理節(jié)點(diǎn)雙機(jī)部署）（一 HA臺服務(wù)器做當(dāng)項(xiàng)目中前端通道和車道數(shù)量總和不足千路時(shí)，云存儲管理節(jié)點(diǎn)采

15、用2雙機(jī)部署模式。此種方式是采用兩臺服務(wù)器安裝相應(yīng)管理節(jié)點(diǎn)雙機(jī)部署是一種可靠性較高的部署方式，的視頻云存儲管理軟件并運(yùn)行雙機(jī)熱備模式，形成熱備視頻云存儲管理雙節(jié)點(diǎn)。提高了視頻云存儲管理節(jié)點(diǎn)的可靠性此種雙機(jī)熱備模式，可實(shí)現(xiàn)應(yīng)用服務(wù)的故障切換，和穩(wěn)定性，工作性能也得到了保證。管理節(jié)點(diǎn)集群部署（二）當(dāng)項(xiàng)目中的前端通道和車道數(shù)量總和超過1千路時(shí)可采用管理服務(wù)器集群模式。此種方式是采用三臺或三臺高穩(wěn)定性的部署方式，管理節(jié)點(diǎn)集群部署是一種高可靠性、形成視頻云存儲管安裝視頻云存儲管理軟件并運(yùn)行集群工作模式，以上奇數(shù)臺服務(wù)器組成，理集群。提高了視頻可實(shí)現(xiàn)單臺或多臺服務(wù)器應(yīng)用的故障切換和負(fù)載均衡，此種集群工作模

16、式， 是大型視頻監(jiān)控項(xiàng)目首云存儲管理節(jié)點(diǎn)的可靠性和穩(wěn)定性，系統(tǒng)性能也得到了很大的提高，選的部署方式。存儲容量計(jì)算（三）其中視頻錄像數(shù)據(jù)主要包括監(jiān)控?cái)z存儲數(shù)據(jù)主要是視頻錄像數(shù)據(jù)和卡口車輛圖片數(shù)據(jù)，具體存儲容量需求根據(jù)項(xiàng)目的實(shí)際情況來詳細(xì)計(jì)像機(jī)視頻錄像和卡口全景攝像機(jī)視頻錄像。算，核算出所需要的硬件存儲設(shè)備數(shù)量。系統(tǒng)軟硬件清單（四）在云存儲系統(tǒng)中軟通過計(jì)算后得出了云存儲系統(tǒng)的管理服務(wù)器和存儲設(shè)備的硬件數(shù)量。云存儲存儲軟件和云存儲接入軟件的數(shù)量與硬件數(shù)量是相關(guān)的，其中包括云存儲管理軟件、因此管理軟件的數(shù)量等于管理服務(wù)器的數(shù)量。件。 云存儲管理軟件集成在管理服務(wù)器硬件中，云存儲的存儲軟件和接入軟件集成

17、在存儲設(shè)備中，因此這兩款軟件的數(shù)量等于存儲設(shè)備的數(shù)量。 設(shè)備清單如下表：視頻云存儲系統(tǒng)配置清單1、視頻云存儲系統(tǒng)硬件設(shè)備清單硬件項(xiàng)目數(shù)量單位參數(shù)說明備注視頻云存儲管理服務(wù)器N臺雙機(jī)模式：2臺；集群模式：=3 ,奇數(shù)；視頻云存儲主機(jī)M臺、視頻云存儲系統(tǒng)軟件清單2軟件項(xiàng)目數(shù)量單位參數(shù)說明備注視頻云存儲管理軟件N套CVM視頻云存儲接入軟件M套CVA視頻云存儲存儲軟件M套CVS六、主要產(chǎn)品介紹（一）存儲管理服務(wù)器存儲管理服務(wù)器是基于Intel 最新的 Romley 平臺開發(fā)的一款高性能雙路服務(wù)器，該服務(wù)器采用了全新的架構(gòu)設(shè)計(jì)：在CPU內(nèi)集成了 PCI-E ,為CPU互聯(lián)提供更多的 QPI總線，更多的

18、CPU內(nèi)核數(shù)量等都直接帶來了性能的大幅提升，相比上一代性能提升最高可達(dá)80%。存儲服務(wù)器最大可以支持內(nèi)存容量512GB，集成高性能SAS控制器，支持最多達(dá)8塊熱插拔寸SAS/SATA硬盤或寸SAS/SATA硬盤，內(nèi)部橫插卡的設(shè)計(jì)可以滿足全高擴(kuò)展卡的需求，如此強(qiáng)大的擴(kuò)展性足以支撐關(guān)鍵任務(wù)的運(yùn)行， 滿足資源密集型應(yīng)用的需要。 更多的 PCI-E 插槽、 更高速率的 PCI-E 總線讓用戶輕松實(shí)現(xiàn)擴(kuò)展。 存儲管理服務(wù)器非常適用于對服務(wù)器性能、 擴(kuò)展性及可靠性要求苛刻的數(shù)據(jù)中心環(huán)境。產(chǎn)品特點(diǎn)：全新處理器架構(gòu)帶來性能颼升；真正企業(yè)級的可靠和可用性；超強(qiáng)擴(kuò)展；IO 橫插卡設(shè)計(jì)支持全高擴(kuò)展卡；模塊化設(shè)計(jì)，免工具拆卸。（二）存儲主機(jī)的傳提供4-8Gbps存儲主機(jī)是針對高性能、高可靠性需求而推出的千兆網(wǎng)絡(luò)存儲系統(tǒng)。位四核處理器、的海量存儲空間，且支持?jǐn)U展。采用強(qiáng)大的64輸帶寬和單模塊高達(dá) 144TB技術(shù)、熱插拔硬盤、多千兆網(wǎng)口及冗余熱備電源、智能控制風(fēng)扇，RAID 6穩(wěn)定的體系架構(gòu)、 既滿足了