Infinite Volume SE Training_zhCN

1、TME Sandra Moulton2013 年 4 月SE 培訓(xùn)演示文稿 無限卷 集群模式 Data ONTAP 8.21NetApp 機(jī)密 僅供內(nèi)部使用注：此演示文稿為動(dòng)畫播放幻燈片，請(qǐng)以幻燈片演示模式觀看。無限卷主題無限卷主題 簡介 技術(shù)定位價(jià)值主張無限卷特點(diǎn)目標(biāo)用例 技術(shù)詳解無限卷的構(gòu)成工作原理2NetApp 機(jī)密 請(qǐng)勿分發(fā)無限卷主題（續(xù)）無限卷主題（續(xù)） 配置詳細(xì)信息 無限卷如何在后臺(tái)工作 數(shù)據(jù)彈性 SnapMirror 磁帶備份 文件系統(tǒng)一致性檢查程序 設(shè)計(jì)注意事項(xiàng)和最佳實(shí)踐 系統(tǒng)要求 其他資源 總結(jié)3NetApp 機(jī)密 請(qǐng)勿分發(fā)無限卷簡介無限卷簡介 單個(gè)大型卷： 擴(kuò)展到 20 P

2、B 存儲(chǔ)多達(dá) 20 億個(gè)文件 單個(gè)掛載點(diǎn) 可擴(kuò)展至 10 個(gè)節(jié)點(diǎn) 無中斷擴(kuò)展 包含在集群內(nèi)的存儲(chǔ)虛擬機(jī)（Storage Virtual Machine，SVM）中 由集群模式 Data ONTAP 附帶 無需許可證 面向企業(yè)內(nèi)容存儲(chǔ)庫4NetApp 機(jī)密 請(qǐng)勿分發(fā)無限卷價(jià)值主張無限卷價(jià)值主張5高可用性 保護(hù)數(shù)據(jù)不受磁盤和硬件故障的影響 Snapshot 副本和復(fù)制用于實(shí)現(xiàn)快速恢復(fù) 無中斷地管理和升級(jí)單個(gè)大型內(nèi)容存儲(chǔ)庫 基于經(jīng)證實(shí)的 NetApp Data ONTAP 技術(shù) 單個(gè)卷跨越整個(gè)集群 擴(kuò)展至 20 PB 和 20 億個(gè)文件 本機(jī)存儲(chǔ)效率簡化的操作 簡化了應(yīng)用程序工作流 熟悉的管理（類似

3、于 FlexVol 卷） 載入時(shí)實(shí)現(xiàn)數(shù)據(jù)負(fù)載平衡 從小規(guī)模入手，無中斷按需擴(kuò)展NetApp 機(jī)密 請(qǐng)勿分發(fā)無限卷特點(diǎn)無限卷特點(diǎn) 易管理性 單個(gè)掛載點(diǎn) 載入時(shí)可自動(dòng)在節(jié)點(diǎn)間平衡容量 簡化的設(shè)置 數(shù)據(jù)保護(hù) 無限卷級(jí)別的 Snapshot 副本 無限卷級(jí)別的 SnapMirror 軟件功能 掛載 NFS 或 SMB 的磁帶備份（可選擇 SnapDiff） 存儲(chǔ)效率 重復(fù)數(shù)據(jù)刪除 數(shù)據(jù)壓縮 提高性能 Flash Cache 智能緩存 Flash Pool 智能緩存 標(biāo)準(zhǔn)配置 包含在存儲(chǔ)虛擬機(jī) (SVM) 中 單個(gè)容器容量高達(dá) 20 PB 支持多達(dá) 20 億個(gè)文件 跨越多達(dá) 10 個(gè)節(jié)點(diǎn) 單一命名空間

4、NAS 協(xié)議 NFSv3、NFSv4.1、pNFS、SMB1.0 可靠性 存儲(chǔ)故障轉(zhuǎn)移 高彈性NetApp 機(jī)密 僅供內(nèi)部使用6無限卷建議檢查清單無限卷建議檢查清單特性特性目標(biāo)用例目標(biāo)用例非適用情形非適用情形可擴(kuò)展性需要擴(kuò)展到 100 TB 以上的單個(gè)大型 NAS 存儲(chǔ)庫最大空間從不需要擴(kuò)展到 100 TB 以上接合路徑單個(gè)接合路徑每個(gè)無限卷無數(shù)接合路徑SVM一個(gè)存儲(chǔ)虛擬機(jī) (SVM) 專用于單個(gè)無限卷；集群可以包含若干用于 FlexVol 卷的 SVM 和若干用于無限卷的 SVM單個(gè)存儲(chǔ)虛擬機(jī) (SVM) 同時(shí)托管 FlexVol 卷和無限卷或托管無數(shù)無限卷支持的訪問協(xié)議NAS：NFSv3、

5、NFSv4.1、pNFS、SMB1.0NAS：NFS v4.0、SMB2.0 或更高版本SAN：FC、FCoE、iSCSI 系統(tǒng)類型FAS3000 和 FAS6000 系列系統(tǒng)以及同等 V 系列FAS2000 系列系統(tǒng)性能10 個(gè)節(jié)點(diǎn)的 FAS6280 集群總吞吐量小于每秒 5 GB非常高的 IOPS 或吞吐量NetApp 機(jī)密 僅供內(nèi)部使用7無限卷建議檢查清單無限卷建議檢查清單特性特性目標(biāo)用例目標(biāo)用例非適用情形非適用情形工作負(fù)載-對(duì)延遲不敏感-一般文件大小 100 KB-靜態(tài)、非結(jié)構(gòu)化、很少覆蓋或刪除-活動(dòng)歸檔、企業(yè)內(nèi)容存儲(chǔ)庫-事務(wù)性或要求低延遲 -一般文件大小 70 TBDC2 - 70

6、TBDC3 - 10 TB節(jié)點(diǎn) 1 總大小 = 150 TB4繼續(xù)為剩余節(jié)點(diǎn)創(chuàng)建其他所有節(jié)點(diǎn)同上如何創(chuàng)建數(shù)據(jù)成分卷如何創(chuàng)建數(shù)據(jù)成分卷在無中斷調(diào)整大小操作期間在無中斷調(diào)整大小操作期間21NetApp 機(jī)密 僅供內(nèi)部使用步驟 操作示例1每個(gè)節(jié)點(diǎn)需要的可用大小 = 無限卷的總大小 （命名空間成分卷與命名空間鏡像大小）/已將聚合分配給無限卷的節(jié)點(diǎn)數(shù)600 TB 可用無限卷，增加到 900 TB 可用大小（920 TB 無限卷）4 個(gè)節(jié)點(diǎn)中的聚合 = 需要每個(gè)節(jié)點(diǎn) 225 TB2向每個(gè)節(jié)點(diǎn)添加空間 = 每個(gè)節(jié)點(diǎn)大小 節(jié)點(diǎn)中已有大小225 TB 150 TB = 向節(jié)點(diǎn)添加 75 TB3確定可能的最大成分

7、卷大小 = 已將聚合分配給無限卷的所有節(jié)點(diǎn)所支持的最大 FlexVol 大小的下限由于混用 FAS6280 (100 TB) 和 FAS3270 (70 TB)，因此所有節(jié)點(diǎn)的最大容量為 70 TB4在不超過所支持最大大小的前提下，增加現(xiàn)有數(shù)據(jù)成分卷的大小，直至為每個(gè)節(jié)點(diǎn)提供所需大小DC1 - 70 TBDC2 - 70 TBDC3 - 70 TB（以前是 10 TB）5在不超過所支持最大大小的前提下，添加更多數(shù)據(jù)成分卷，直至為每個(gè)節(jié)點(diǎn)提供所需大小DC4 - 15 TB節(jié)點(diǎn) 1 總大小 = 225 TB6繼續(xù)為剩余節(jié)點(diǎn)創(chuàng)建其他所有節(jié)點(diǎn)同上重復(fù)數(shù)據(jù)刪除和數(shù)據(jù)壓縮的工作原理重復(fù)數(shù)據(jù)刪除和數(shù)據(jù)壓縮的

8、工作原理在無限卷級(jí)別已啟用并啟動(dòng)卷效率功能22NetApp 機(jī)密 僅供內(nèi)部使用NS用于無限卷的 SVM無限卷NSDC1DC2NSm通過向所有數(shù)據(jù)成分卷并行發(fā)送請(qǐng)求在后臺(tái)啟動(dòng)。在數(shù)據(jù)成分卷內(nèi)運(yùn)行重復(fù)數(shù)據(jù)刪除和數(shù)據(jù)壓縮，但是在成分卷之間不會(huì)繼承節(jié)省。例如：如果您在 DC1 中有 2 個(gè)完全相同的數(shù)據(jù)塊，在 DC2 中也有 2 個(gè)完全相同的數(shù)據(jù)塊，最終結(jié)果是 DC1 和 DC2 中各留 1 個(gè)數(shù)據(jù)塊。volume efficiency on volume IVvolume efficiency modify compression true volume IVvolume efficiency st

9、art volume IVSnapshot 副本工作原理副本工作原理在無限卷級(jí)別發(fā)出 snapshot create 命令23NetApp 機(jī)密 僅供內(nèi)部使用NS用于無限卷的 SVM無限卷DC1DC2NSm在后臺(tái)隔離操作并向所有成分卷發(fā)送單個(gè)請(qǐng)求volume snapshot create volume IV snapshot snap.2snap show volume IV -Blocks-Vserver Volume Snapshot Size Total% Used%- - - - - -vsone IV snap.1 80KB 0% 27% snap.2 92KB 0% 30%數(shù)據(jù)如

10、何實(shí)現(xiàn)負(fù)載平衡 載入無限卷的文件在寫入數(shù)據(jù)成分卷時(shí)會(huì)盡量保持各數(shù)據(jù)成分卷之間負(fù)載均衡。根據(jù)以下規(guī)則將文件寫入數(shù)據(jù)成分卷。如果數(shù)據(jù)成分卷： 為空或接近為空，將接收大多數(shù)傳入文件 容量占用不到 80%，將以循環(huán)方式接收文件 容量占用超過或等于 80%，通常不接收傳入文件24NetApp 機(jī)密 僅供內(nèi)部使用25NetApp 機(jī)密 僅供內(nèi)部使用數(shù)據(jù)彈性NSDC1DC2DC3DC4無限卷數(shù)據(jù)保護(hù)鏡像工作原理無限卷數(shù)據(jù)保護(hù)鏡像工作原理26NetApp 機(jī)密 僅供內(nèi)部使用無限卷：集群間更新時(shí)間間隔 = 1 小時(shí)snapmirror show Source Destination Mirror Relatio

11、nship Path Type Path State Status - - - - - cluster1:/vs1/IV DP cluster2:/vs1/IV Mirrored Idle NSm集群 2：鏡像的卷集群 1：源卷NSDC1DC2DC3DC4需要在源系統(tǒng)和目標(biāo)系統(tǒng)上安裝 SnapMirror 許可證在后臺(tái)將更新從各個(gè)成分卷發(fā)送到目標(biāo)卷丟失數(shù)據(jù)成分卷丟失數(shù)據(jù)成分卷27NetApp 機(jī)密 僅供內(nèi)部使用DC1NS用于無限卷的 SVM無限卷DC2NSmF1F4F3如果丟失了數(shù)據(jù)成分卷： 無法訪問出現(xiàn)故障的數(shù)據(jù)成分卷上的文件 可以繼續(xù)訪問其他數(shù)據(jù)成分卷 針對(duì)其他數(shù)據(jù)成分卷的文件操作以及一些

12、目錄操作 (mkdir) 不會(huì)受到影響F2 DC2F2F2讀取F1讀取 F2保護(hù)數(shù)據(jù)成分卷的方式包括：-RAID-DP 技術(shù)-Snapshot 副本-無限卷 SnapMirror-HA 故障轉(zhuǎn)移-磁帶備份命名空間鏡像工作原理命名空間鏡像工作原理 集群內(nèi)異步卷 SnapMirror 技術(shù) 在無限卷中自動(dòng)創(chuàng)建 每 5 分鐘更新一次 每個(gè)無限卷命名空間鏡像的數(shù)量 一個(gè) 如果啟用了 SnapDiff，則每個(gè)節(jié)點(diǎn)一個(gè)28NetApp 機(jī)密 僅供內(nèi)部使用NS用于無限卷的 SVM無限卷DC1DC2NSm無需 SnapMirror 許可證丟失命名空間成分卷丟失命名空間成分卷29NetApp 機(jī)密 僅供內(nèi)部使用

13、DC1NS用于無限卷的 SVM無限卷DC2NSmF1F4F3如果丟失了命名空間成分卷： 新文件打開請(qǐng)求將暫?；虺瑫r(shí) 無法執(zhí)行任何命名空間和目錄操作（mkdir、寫入新文件等） 針對(duì)最近訪問的文件的文件操作仍能正常執(zhí)行F2 DC2F2F2寫入 F7mkdir BH讀取 F2讀取 F3保護(hù)命名空間成分卷的方式包括：-RAID-DP 技術(shù)-Snapshot 副本-數(shù)據(jù)保護(hù)鏡像-HA 故障轉(zhuǎn)移-磁帶備份磁帶備份工作原理磁帶備份工作原理 NFS 或 SMB 掛載的磁帶備份 由 SnapDiff 支持的差別磁帶備份 可從主系統(tǒng)或 SnapMirror 二級(jí)系統(tǒng)備份 只能恢復(fù)到源系統(tǒng) 不支持 NDMP 備份

14、30NetApp 機(jī)密 僅供內(nèi)部使用NS用于無限卷的 SVM無限卷DC1DC2NSmNFS 或 CIFS文件系統(tǒng)一致性檢查程序如何在無限卷中工作文件系統(tǒng)一致性檢查程序如何在無限卷中工作 全新文件系統(tǒng)一致性檢查程序?qū)ｉT用于無限卷 在無限卷級(jí)別檢測和修復(fù)重定向一致性問題 已損壞或掛起的重定向文件、孤立數(shù)據(jù)文件等 不會(huì)取代 WAFL iron 在執(zhí)行 WAFL check/iron 之后，除了 Snapshot 提升和其他此類操作之外，還應(yīng)該隨時(shí)運(yùn)行 CRiron WAFL iron 無法感知命名空間和數(shù)據(jù)結(jié)構(gòu) 這些一致性問題都不應(yīng)該造成客戶停機(jī) NetApp 機(jī)密 僅供內(nèi)部使用3132NetApp

15、 機(jī)密 僅供內(nèi)部使用設(shè)計(jì)注意事項(xiàng)和最佳實(shí)踐無限卷要求無限卷要求33NetApp 機(jī)密 僅供內(nèi)部使用DC2DC3NSDC1用于無限卷的 SVM1DC4DC5DC6DC7A1用于無限卷的 SVM3B1CAA3B用于無限卷的 SVM2NSDC2DC1用于無限卷的 SVM4特性功能最大容量20 PB 原始容量 20 億個(gè)文件最大文件大小 = 16 TB支持 FAS 和 V 系列系統(tǒng)-3000 和 6000 系列-支持混合不同類型的平臺(tái)支持的協(xié)議NFSv3、NFSv4.1、pNFS、SMB 1.0磁盤布局聚合可在 SVM 和 FlexVol 卷以及多個(gè)成分卷之間共享多租戶支持可以為無限卷和 FlexVo

16、l 卷創(chuàng)建無數(shù) SVM每個(gè) SVM 一個(gè)無限卷最大節(jié)點(diǎn)數(shù)在一個(gè)集群中，無限卷可以跨越多達(dá) 10 個(gè)節(jié)點(diǎn)，集群中的節(jié)點(diǎn)數(shù)不受限制磁帶備份NFS、SMB 或差別支持 (SnapDiff)NSmNSm設(shè)計(jì)注意事項(xiàng)設(shè)計(jì)注意事項(xiàng) 不支持 System Manager 無限卷使用專用的 SVM 接合路徑名稱是一個(gè)元素（如 /NS） 增加節(jié)點(diǎn)數(shù)將增加容量和一些性能，但是性能并非呈線性增長 Snapshot 計(jì)劃 =1 小時(shí) 命名空間鏡像更新頻率 = 5 分鐘（固定） 無限卷 SnapMirror = 1 小時(shí) 要求能夠在源上創(chuàng)建同樣大小的成分卷 如果需要，在創(chuàng)建無限卷時(shí)限制源大小34NetApp 機(jī)密 僅供

17、內(nèi)部使用設(shè)計(jì)注意事項(xiàng)（續(xù)）設(shè)計(jì)注意事項(xiàng)（續(xù)） 無限卷大小包括命名空間成分卷和鏡像 只有數(shù)據(jù)成分卷空間可用 可用空間 = 無限卷總大小 （命名空間成分卷大小 + 命名空間鏡像大小） 無限卷永遠(yuǎn)無法縮小 成分卷可以擴(kuò)展到最大大小，但是絕不會(huì)縮小 確認(rèn) SnapMirror 源成分卷上的大小等于在創(chuàng)建無限卷時(shí)目標(biāo)成分卷上支持的最大大小 成分卷和命名空間鏡像計(jì)入節(jié)點(diǎn)的最大卷計(jì)數(shù)35NetApp 機(jī)密 僅供內(nèi)部使用最佳實(shí)踐最佳實(shí)踐 為每個(gè)無限卷分配要使用的聚合 從集群中至多 10 個(gè)節(jié)點(diǎn)為每個(gè)無限卷分配聚合 最好使用要求的最低節(jié)點(diǎn)數(shù) 請(qǐng)不要從 FAS2000 系列系統(tǒng)中分配聚合 確認(rèn)在已將聚合分配給無限

18、卷的所有節(jié)點(diǎn)之間可用容量是均等的 當(dāng)無限卷快要用盡時(shí)，添加容量36NetApp 機(jī)密 僅供內(nèi)部使用命名空間成分卷最佳實(shí)踐命名空間成分卷最佳實(shí)踐 如果集群中有大量無限卷，請(qǐng)限制為每個(gè)節(jié)點(diǎn)分配一個(gè)命名空間成分卷 將無限卷的最大個(gè)數(shù)限制為不大于集群中的節(jié)點(diǎn)數(shù) 在系統(tǒng)上為命名空間成分卷分配一個(gè)具有最大內(nèi)存的聚合 如果工作負(fù)載具有大量命名空間活動(dòng)，請(qǐng)考慮限制同一節(jié)點(diǎn)上其他活動(dòng)的數(shù)量。37NetApp 機(jī)密 僅供內(nèi)部使用SnapMirror 最佳實(shí)踐最佳實(shí)踐如果在將無限卷的大小增加 10 TB 時(shí)未啟用 SnapDiff，那么在故障轉(zhuǎn)移到數(shù)據(jù)保護(hù)無限卷之后將創(chuàng)建命名空間鏡像將數(shù)據(jù)成分卷的大小限制為您希望無限卷或?yàn)?zāi)難恢復(fù)站點(diǎn)的無限卷中所支持的最大 FlexVol 卷大小先在 SnapMirror 目標(biāo)上執(zhí)行調(diào)整大小操作，然后再在源上執(zhí)行38NetApp 機(jī)密 僅供內(nèi)部使用其他資源其他資源39NetAp