CommVault數(shù)據(jù)備份---技術(shù).課件

1、CommVault數(shù)據(jù)備份及恢復(fù)之技術(shù)實(shí)現(xiàn)內(nèi)容 數(shù)據(jù)保護(hù)的挑戰(zhàn) CommVault解決之道 CommVault技術(shù)創(chuàng)新 CommVault數(shù)據(jù)備份和恢復(fù)數(shù)據(jù)備份及恢復(fù)的挑戰(zhàn)備份/恢復(fù)真相備份/恢復(fù)作業(yè)的平均成功率只有70%左右超過(guò)80%的請(qǐng)求是要恢復(fù)48小時(shí)內(nèi)丟失的數(shù)據(jù)主要的恢復(fù)需求是單個(gè)文件和單個(gè)表空間恢復(fù)單個(gè)文件至少要花1個(gè)小時(shí), 有時(shí)要接近1天災(zāi)難事件引起的數(shù)據(jù)丟失少于3%備份/恢復(fù)的工作量占整個(gè)存儲(chǔ)管理的60%-70%如果備份作業(yè)失敗，備份管理員要花4-6小時(shí)用于 診斷和解決存儲(chǔ)管理員15%的時(shí)間用來(lái)數(shù)據(jù)恢復(fù)備份/恢復(fù)系統(tǒng)中, 最大的開(kāi)銷(xiāo)是磁帶介質(zhì)Source: META Group,

2、 Proactive Data Protection, April 2004介質(zhì)管理判斷備份/恢復(fù)成功困難需要手工干預(yù)恢復(fù)時(shí)間太長(zhǎng)備份時(shí)間太長(zhǎng)Source: ESG, The Evolution of Enterprise Data Protection, December 2003備份方案存在的問(wèn)題總結(jié)：數(shù)據(jù)備份的挑戰(zhàn)備份/恢復(fù)成功率低備份時(shí)間長(zhǎng)(備份窗口不夠)恢復(fù)時(shí)間長(zhǎng)(很難實(shí)現(xiàn)恢復(fù))大量手工操作離場(chǎng)保護(hù)困難管理工具缺乏缺乏驗(yàn)證手段造成困境的原因數(shù)據(jù)增長(zhǎng)太快！備份軟件發(fā)展滯后起源于20年前的IT環(huán)境體系架構(gòu)陳舊對(duì)新技術(shù)支持不夠(磁盤(pán)技術(shù)等)Galaxy備份/恢復(fù)軟件CommVault與數(shù)據(jù)

3、備份1988-1996：AT&T貝爾實(shí)驗(yàn)室, 數(shù)據(jù)事業(yè)部為AT&T內(nèi)部UNIX系統(tǒng)開(kāi)發(fā)并管理數(shù)據(jù)備份軟件ABARS 1996：從AT&T獨(dú)立1996-1998：銷(xiāo)售備份產(chǎn)品-Vault98 (ABARS)1998: 放棄Vault98, 重新開(kāi)發(fā)新的數(shù)據(jù)備份系統(tǒng)2000：推出Galaxy備份/恢復(fù)軟件全新的系統(tǒng)結(jié)構(gòu) - 數(shù)據(jù)索引，介質(zhì)管理，策略管理2002：推出QiNetix統(tǒng)一數(shù)據(jù)管理套件實(shí)現(xiàn)全方位的數(shù)據(jù)保護(hù)2007：推出Simpana一體化信息管理套件內(nèi)容查找提高可靠性的技術(shù)手段CommVault解決之道避免備份恢復(fù)錯(cuò)誤減少人工干預(yù)成功率低 圖形化操作，無(wú)需腳本 系統(tǒng)預(yù)檢和分析 介質(zhì)壽命預(yù)

4、警 合理分配存儲(chǔ)資源采用冗余的數(shù)據(jù)訪問(wèn)路徑 采用冗余的介質(zhì)存儲(chǔ)方式 離場(chǎng)和離線的數(shù)據(jù)存放健全容錯(cuò)機(jī)制CommVault解決之道減少備份次數(shù)減少備份的數(shù)據(jù)量備份時(shí)間長(zhǎng)提高備份速度縮短備份時(shí)間的技術(shù)手段 數(shù)據(jù)遷移減少對(duì)靜態(tài)數(shù)據(jù)的重復(fù)備份 數(shù)據(jù)分類(lèi)不同的數(shù)據(jù)，不同的備份策略 數(shù)據(jù)過(guò)濾過(guò)濾掉不需要的備份數(shù)據(jù) 合成全備份 斷點(diǎn)續(xù)傳 備份到磁盤(pán)，而不僅僅是磁帶 采用智能磁盤(pán)技術(shù)：快照，復(fù)制 減少備份掃描時(shí)間縮短恢復(fù)時(shí)間的技術(shù)手段CommVault解決之道減少恢復(fù)次數(shù)提高恢復(fù)速度減少恢復(fù)的數(shù)據(jù) 小顆?；謴?fù)文檔級(jí)恢復(fù)，單郵件恢復(fù)數(shù)據(jù)庫(kù)表級(jí)恢復(fù)，AD記錄級(jí)恢復(fù) 一次過(guò)恢復(fù)消除數(shù)據(jù)重復(fù)多次恢復(fù) 斷點(diǎn)續(xù)傳恢復(fù)中斷后

5、無(wú)需重新開(kāi)始恢復(fù) 減少數(shù)據(jù)恢復(fù)的介質(zhì)定位時(shí)間 從磁盤(pán)恢復(fù)，而不僅僅是磁帶 采用智能磁盤(pán)技術(shù)：快照，復(fù)制恢復(fù)時(shí)間長(zhǎng)監(jiān)控管理狀態(tài)監(jiān)控定制報(bào)表報(bào)警機(jī)制監(jiān)控管理的技術(shù)手段 報(bào)警機(jī)制當(dāng)錯(cuò)誤發(fā)生的時(shí)候，發(fā)出錯(cuò)誤警報(bào) 狀態(tài)監(jiān)控方便的觀察和監(jiān)控整個(gè)系統(tǒng)運(yùn)行的狀態(tài) 定制報(bào)表操作統(tǒng)計(jì)歷史數(shù)據(jù)分析，趨勢(shì)預(yù)測(cè)分析錯(cuò)誤原因分析CommVault解決之道審計(jì)管理人員審計(jì)數(shù)據(jù)操作審計(jì)事件審計(jì)審計(jì)管理的技術(shù)手段 事件審計(jì) （傳統(tǒng)軟件沒(méi)有）查詢和尋找針對(duì)系統(tǒng)某個(gè)特定或者孤立事件的內(nèi)容，例如：設(shè)備故障，人員操作等等。 人員審計(jì) （傳統(tǒng)軟件作的比較弱）能夠針對(duì)操作人員做的任何操作，記錄并且查詢。例如：登陸，退出，修改配置等等。 數(shù)

6、據(jù)操作審計(jì) （傳統(tǒng)軟件只有部分功能）某個(gè)應(yīng)用數(shù)據(jù)作的任何操作，進(jìn)行記錄并且查詢。例如：某個(gè)應(yīng)用是否在需要的時(shí)間進(jìn)行了備份，備份是否成功，具體情況如何。CommVault解決之道安全管理數(shù)據(jù)加密密鑰管理身份管理CommVault解決之道安全管理的技術(shù)手段 身份權(quán)限管理不同的操作員具有不同的權(quán)限，能正對(duì)不同的應(yīng)用系統(tǒng)把備份、恢復(fù)、瀏覽權(quán)限分開(kāi)。SSO集成 數(shù)據(jù)加密多種加密算法支持一級(jí)和二級(jí)數(shù)據(jù)加密 密鑰管理內(nèi)置密鑰管理功能支持多種密鑰管理手段：集中管理、分散管理、綁定管理CommVault解決之道驗(yàn)證演練自動(dòng)校驗(yàn)數(shù)據(jù)副本方便演練和驗(yàn)證自動(dòng)檢查介質(zhì)狀態(tài)驗(yàn)證演練的技術(shù)手段 自動(dòng)檢查介質(zhì)狀態(tài)自動(dòng)檢查介質(zhì)

7、的狀態(tài)，預(yù)防介質(zhì)失效。 自動(dòng)校驗(yàn)數(shù)據(jù)副本讀取副本數(shù)據(jù)，并進(jìn)行校驗(yàn)，確保數(shù)據(jù)可讀取。 方便演練和驗(yàn)證異機(jī)恢復(fù)按計(jì)劃恢復(fù)CommVault備份軟件的創(chuàng)新分布式索引技術(shù)超大的索引容量 對(duì)大規(guī)模系統(tǒng)的統(tǒng)一備份管理分布式部署 遠(yuǎn)距離集中管理精細(xì)的索引粒度 小顆?；謴?fù)數(shù)據(jù)位置索引 快速定位要恢復(fù)的數(shù)據(jù) 容錯(cuò)機(jī)制 錯(cuò)誤切換，斷點(diǎn)續(xù)傳一體化體系結(jié)構(gòu)利用“快照/復(fù)制”技術(shù)提高備份/恢復(fù)速度利用“數(shù)據(jù)分類(lèi)”技術(shù)，“遷移/歸檔”技術(shù)減少備份數(shù)據(jù)量利用“數(shù)據(jù)查找”技術(shù)改變恢復(fù)的方式數(shù)據(jù)壓縮技術(shù) 單實(shí)例存儲(chǔ)文件級(jí)/數(shù)據(jù)塊級(jí)基于磁盤(pán)/基于磁帶介質(zhì)管理備份設(shè)備虛擬化 磁盤(pán), 磁帶, VTL, DVD, USB存儲(chǔ)100%共

8、享智能化管理層次化策略管理用戶權(quán)限管理 能與AD結(jié)合系統(tǒng)就緒檢測(cè) 能事先檢測(cè)要做的備份能不能成功新一代的體系結(jié)構(gòu)QiNetix Common Technology EngineMediaAgentData IndexData MoverMedia ManagerMediaAgentData IndexData MoverMedia Manager備份工作原理介質(zhì)管理客戶端iDA介質(zhì)服務(wù)器MA備份管理二級(jí)索引管理備份數(shù)據(jù)備份發(fā)起在線數(shù)據(jù)CommServe主控服務(wù)器備份存儲(chǔ)設(shè)備一級(jí)備份索引數(shù)據(jù)索引分布式索引,由主控服務(wù)器，備份服務(wù)器二級(jí)管理一級(jí)索引由備份服務(wù)器管理; 二級(jí)索引由主控服務(wù)器管理一級(jí)索

9、引與備份數(shù)據(jù)一起存放在同一備份介質(zhì)中沒(méi)有必要對(duì)一級(jí)索引進(jìn)行專(zhuān)門(mén)備份; 索引重建非?？焖賯浞莘?wù)器維持一個(gè)索引Cache對(duì)一級(jí)索引進(jìn)行管理一級(jí)索引中包含有備份數(shù)據(jù)在介質(zhì)中存放的位置信息實(shí)現(xiàn)磁帶的”隨機(jī)”讀寫(xiě)備份/恢復(fù)顆粒小二級(jí)索引由數(shù)據(jù)庫(kù)管理, 便于檢索, 備份/恢復(fù)提高結(jié)構(gòu)的靈活性CSEnterprise CommCell AiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDaMAiDa1,000個(gè)客戶端: AIX, Solaris, Windows350

10、MediaAgent SAN Disk & Tape每晚20Tb的增量備份多個(gè)軟件堆棧多個(gè)數(shù)據(jù)和操作視圖所謂的靈活只能是增加管理域 更多資金、資源和硬件沒(méi)有集中控制和管理CommVault 更靈活、更容易擴(kuò)展競(jìng)爭(zhēng)對(duì)手 只能增加備份域備份到磁盤(pán)的優(yōu)點(diǎn)：靈活的備份策略：- 先把數(shù)據(jù)備份到磁盤(pán)，再轉(zhuǎn)存到磁帶- 每天把增量備份到磁盤(pán)，周末把全備份寫(xiě)到磁帶非?？斓膫浞莺突謴?fù)速度，并可提高備份系統(tǒng)的可靠性。可減少磁帶的使用量。能改變數(shù)據(jù)在磁帶上存儲(chǔ)狀況，把相同性質(zhì)的數(shù)據(jù)放在相鄰的地方，可加快恢復(fù)速度同時(shí)減少磁帶的磨損。N層存儲(chǔ)架構(gòu)Storage policyStorage policyUNIXWindow

11、sNAS采用虛擬化存儲(chǔ)管理數(shù)據(jù)能在多層存儲(chǔ)之間復(fù)制輔助拷貝(Aux Copy)利用備份數(shù)據(jù)制作數(shù)據(jù)副本(沒(méi)有備份窗口限制)電子化離場(chǎng)保護(hù)LAN/WANSAN備份服務(wù)器生產(chǎn)系統(tǒng)備份服務(wù)器生產(chǎn)數(shù)據(jù)備份服務(wù)器磁帶庫(kù)磁帶庫(kù)靈活的實(shí)現(xiàn)方式1:N1:1級(jí)聯(lián)N:1利用“一次過(guò)”恢復(fù)技術(shù)減少恢復(fù)次數(shù)Single Pass Restore傳統(tǒng)利用增量的恢復(fù)方式IncrementalsFull1234567891035363524IncrementalsFull1234567891093331112445666781010101251034678“一次過(guò)”增量恢復(fù)方式在傳統(tǒng)的恢復(fù)方法中，恢復(fù)目標(biāo)需要恢復(fù)多次，而“

12、一次過(guò)”只需要恢復(fù)一次，恢復(fù)速度更快！Operations Resume開(kāi)始備份100GB在80GB時(shí)中斷從80GB標(biāo)記處再繼續(xù)備份完成z操作再繼續(xù)適合： 備份-文件、數(shù)據(jù)庫(kù)、應(yīng)用 恢復(fù)-文件、數(shù)據(jù)庫(kù)、應(yīng)用 輔助復(fù)制-復(fù)制備份數(shù)據(jù)該功能允許備份、恢復(fù)、復(fù)制數(shù)據(jù)的時(shí)候，發(fā)生網(wǎng)絡(luò)或者備份設(shè)備故障的時(shí)候，從故障點(diǎn)繼續(xù)往下備份或者復(fù)制數(shù)據(jù)。通過(guò)該功能，可以在備份，恢復(fù)，復(fù)制數(shù)據(jù)發(fā)生故障的時(shí)候，不需要從頭開(kāi)始。減少了數(shù)據(jù)傳送的窗口，提高了備份的成功率。采用“斷點(diǎn)續(xù)傳”技術(shù)提高成功率Tape Library 1Tape Library 2Tape Library 3Drive 2Drive 3Drive

13、1SANMAServeriDA ClientMAServerMAServerDrive 2Drive 3Drive 1Drive 2Drive 3Drive 1StorageArrayDataDataData數(shù)據(jù)傳輸可通過(guò)備用路徑到相同的驅(qū)動(dòng)器或備用的驅(qū)動(dòng)器提高備份和恢復(fù)的可靠性和效率能重定位出錯(cuò)的驅(qū)動(dòng)器、設(shè)備、網(wǎng)絡(luò)和服務(wù)器采用“路徑冗余”技術(shù)提高系統(tǒng)可靠性利用“SIS”技術(shù)提高備份介質(zhì)利用率對(duì)文件和附件的單實(shí)例存儲(chǔ)能跨越備份和歸檔副本能用較少的存儲(chǔ)來(lái)儲(chǔ)存更多的數(shù)據(jù)具有在線和后處理選項(xiàng)對(duì)數(shù)據(jù)訪問(wèn)、恢復(fù)和攜帶進(jìn)行優(yōu)化能使用任何磁盤(pán)能與數(shù)據(jù)加密及壓縮一起使用可免費(fèi)使用消除重復(fù)數(shù)據(jù)設(shè)備用更好的方式來(lái)

14、存儲(chǔ)數(shù)據(jù)SIDB備份或歸檔邏輯副本集合Week1SIS CopyWeek2Week3在數(shù)據(jù)路徑中的物理目標(biāo)副本數(shù)字對(duì)象簽名數(shù)據(jù)中心新的離線、后處理加密對(duì)生產(chǎn)系統(tǒng)零影響提供靈活的加密策略僅在網(wǎng)絡(luò)上加密遍及所有副本僅對(duì)離線副本對(duì)選擇的副本加密安全跟蹤數(shù)據(jù)生命周期完善的密鑰管理AES-256, Blowfish 以及其他流行的標(biāo)準(zhǔn)支持LTO-4 加密及密鑰管理利用“加密”技術(shù)提高備份數(shù)據(jù)安全更好的方式來(lái) 管理數(shù)據(jù)安全D2DD2T操作界面?zhèn)鹘y(tǒng)產(chǎn)品: 面向備份操作Galaxy: 面向數(shù)據(jù)恢復(fù)用戶不需要了解備份的介質(zhì)集合，只要選擇相應(yīng)的備份內(nèi)容和時(shí)間簡(jiǎn)單可靠的恢復(fù)操作能夠一次恢復(fù)多個(gè)版本簡(jiǎn)單可靠的恢復(fù)操作

15、能夠方便的查找數(shù)據(jù)并恢復(fù)簡(jiǎn)單可靠的恢復(fù)操作圖形化操作，不需要寫(xiě)任何腳本方便完善的Oracle備份和恢復(fù)采用“系統(tǒng)預(yù)檢”提高備份成功率 備份“系統(tǒng)預(yù)檢”功能：允許在備份前檢查所有需要的網(wǎng)絡(luò)，備份設(shè)備和介質(zhì)資源，確保晚上備份成功。對(duì)于用戶的意義：由于備份都是在晚上做的，所以有了預(yù)檢機(jī)制能夠預(yù)先了解晚上的備份是否能夠成功，所需要的資源是否足夠（主要是磁帶介質(zhì)）。提高了備份成功率。數(shù)據(jù)庫(kù)文件系統(tǒng)Email磁盤(pán)帶庫(kù)定期檢測(cè)確保備份數(shù)據(jù)的可靠性360全方位的操作狀態(tài)監(jiān)控容易確定和校驗(yàn)?zāi)阋_(dá)到的目標(biāo)狀況能進(jìn)行深層次優(yōu)化、錯(cuò)誤根源查找流暢的審計(jì)功能 (SOX)，自動(dòng)生成用戶制定的報(bào)告DataArchiverD

16、ataMigratorCDRCommCell Policy ManagerQuickRecovery Galaxy策略化、自動(dòng)化操作CommCell BrowserQNetService Manager跟蹤，計(jì)劃，報(bào)告QSMStorage Resource Manager分析, 監(jiān)控完善的報(bào)表系統(tǒng)完善的出錯(cuò)信息方便排錯(cuò)中文出錯(cuò)信息用戶單擊該出錯(cuò)代碼，會(huì)自動(dòng)連接CommVault維護(hù)網(wǎng)站，查詢并且顯示相關(guān)錯(cuò)誤的所有情況和解決方法完善的操作權(quán)限管理(MSDS)Novell DirectoryService (NDS)(OpenLDAP)Lightweight DirectoryAccess Protocol(LDAP)操作對(duì)象Active Directory用戶組CommCell用戶組CommCell擴(kuò)展域組CommCell用戶功能權(quán)限能與AD的SSO相集成