VSAN方案介紹手冊

VMwarevSAN方案介紹

演講人趙曉陽日期Agenda1vSAN架構(gòu)與使用場景2vSAN配置與運維實踐3vSAN雙活方案4案例介紹5問題與解答

數(shù)據(jù)中心的演變-通過軟件驅(qū)動基礎(chǔ)架構(gòu)3獨立的服務(wù)器和存儲機架外置SAN分布式模式VSANNetworkingvSphere服務(wù)器機架VSANNetworkingvSphere分布式模式VSANNetworkingvSphere服務(wù)器機架智能的軟件存儲、網(wǎng)絡(luò)、計算統(tǒng)一管理接口彈性擴展無需感知硬件變化軟件Software將存儲的需求融合到標準的X86機架一體化交付硬件網(wǎng)絡(luò)超融合基礎(chǔ)架構(gòu):軟件定義數(shù)據(jù)中心的理想選擇4開放系統(tǒng)/傳統(tǒng)的基礎(chǔ)架構(gòu)超融合基礎(chǔ)架構(gòu)Management

ComputeNetworkingStorage軟件定義的數(shù)據(jù)中心簡單敏捷可擴展高性能...軟件定義的存儲針對虛擬機進行了優(yōu)化超融合體系架構(gòu)（分布式，橫向和縱向擴展）可在任何標準x86服務(wù)器上運行將HDD/SSD池化為共享數(shù)據(jù)存儲提供企業(yè)級的高可用性、可擴展性和性能基于策略的自動化，滿足SLA，可按虛機甚至vmdk級別的顆粒度設(shè)置存儲策略與VMware產(chǎn)品體系深度集成OverviewVirtualSANDatastorevSphere+VirtualSAN...VMware

VSAN專為虛擬化環(huán)境設(shè)計的存儲架構(gòu)備份與災(zāi)難恢復(fù)虛擬桌面(VDI)可以很好地滿足訪問峰值時的桌面系統(tǒng)性能(引導(dǎo)、登錄、讀寫風暴)更具細粒度的擴展，減少初始投資支持更高密度的虛擬桌面部署研發(fā)、測試按需實現(xiàn)資源調(diào)配，快速的資源置備較低的成本自動化運維，全生命周期管理可通過云管理平臺實現(xiàn)自助式服務(wù)站點A站點B與VDAP,vSphere

Replication和SRM等解決方案緊密集成可顯著降低災(zāi)備站點的存儲開銷簡化數(shù)據(jù)中心的管理任務(wù)業(yè)務(wù)關(guān)鍵應(yīng)用內(nèi)置于全球最穩(wěn)定最領(lǐng)先的虛擬服務(wù)器與vSphereHA/FT技術(shù)緊密集成確保高可用單主機7讀3寫混合配置能達4萬IOPS，全閃存達9萬IOPSVSAN常見使用場景專為虛擬化優(yōu)化的存儲：簡單，快速且高性價比存儲雙活無需專用的、昂貴的外置陣列，使用標準機架服務(wù)器確保站點級的高可用支持OracleRAC和WindowsMSCSAgenda1vSAN架構(gòu)與使用場景2vSAN配置與運維實踐3vSAN雙活方案4案例介紹5問題與解答VirtualSAN軟件需要：VMware

vSphere

6

以上VirtualSAN的軟件許可VirtualSAN集群需要：至少有三臺主機為VirtualSAN數(shù)據(jù)提供存儲每臺主機至少配置一塊用于緩存的SSD磁盤每臺主機至少配置一塊用于存儲的HDD/SSD磁盤VirtualSANESXi集群成員需要：由VirtualSAN提供支持的VMkernel端口VirtualSAN的最低要求vSAN兼容列表CONFIDENTIAL9/resources/compatibility/search.php?deviceCategory=vsanBuildYourOwnbasedonCertifiedComponents.vSAN集群主機注意事項VirtualSAN集群主機：集群中各主機軟硬件配置相同主機中存儲設(shè)備驅(qū)動程序和固件版本，均要滿足vSAN的兼容要求盡量不要將僅有計算資源的主機添加到群集中請勿為了節(jié)電而在主機上配置CPU電源管理策略為便于維護，請考慮使用驅(qū)動器托架和PCIe插槽位于服務(wù)器主體前方的主機。VirtualSAN硬件資源注意事項

Virtual

SANCPU資源：為Virtual

SAN提供10%的CPU開銷Virtual

SAN內(nèi)存資源：為獲得完整的VirtualSAN功能,每ESXi主機至少需要32GBVirtualSAN支持1Gb和10Gb的以太網(wǎng)適配器：對于混合配置，專用帶寬為1Gbps對于全閃存配置，專用或共享帶寬為10Gbps與VMwarevSphere?NetworkI/OControl共享以公平分配帶寬的10Gb適配器支持大多數(shù)環(huán)境。VirtualSAN網(wǎng)絡(luò)適配器注意事項具有vSphereNetworkI/OControl份額的分布式交換機VirtualSAN主機vmk0管理10虛擬機15vmk1vMotion25vmk2vSAN50多播模式：VirtualSAN流量的物理交換機和路由器上啟用多播巨型幀(MTU

9000)：在大型部署環(huán)境中開啟巨型幀可以減少CPU的開銷針對全新部署啟用VirtualSAN支持多種控制器：SAS/SATA存儲控制器：支持直通或RAID0模式使用RAID0模式時，性能取決于控制器每種控制器支持的驅(qū)動器數(shù)量列深度小(不足256)的控制器會影響虛擬機I/O性能禁用存儲控制器緩存，如果不能禁用該緩存，請將其設(shè)置為100%讀取。禁用高級功能（例如，HPSSD智能路徑）處于RAID0模式的存儲控制器：所有磁盤配置為RAID0模式使用ESXCLI手動將設(shè)備標記為SSDVMwarevCenterClient手動將設(shè)備標記為SSD

VirtualSAN存儲控制器注意事項13VirtualSAN

集群主機ESXi開關(guān)機順序1、單一vSAN節(jié)點重啟/關(guān)機*一定要進入維護模式,即使主機上已經(jīng)沒有運行的虛擬機WebClient進入維護模式的三個選項:EnsureaccessibilityFulldatamigrationNodatamigrationVirtualSAN集群主機ESXi開關(guān)機順序(continue)2、停止/啟動全部vSAN集群場景一:vCenter未部署在vSAN集群中：關(guān)閉所有虛擬機

所有vSAN節(jié)點進入維護模式確保vSAN參數(shù)選擇NoDataMigration使用WebClient或vSphereClient進行關(guān)機操作VirtualSAN

集群主機ESXi開關(guān)機順序(continue)場景二:vCenter部署在vSAN集群中：關(guān)機順序：1、關(guān)閉除vCenter虛擬機以外的其他所有虛機2、關(guān)閉vCenter虛擬機，Webclient將會斷連3、將所有的主機置于維護模式，需要使用命令行來進行操作

#esxclisystemmaintenanceModeset-etrue-mnoAction4、關(guān)閉所有的主機VirtualSAN

集群主機ESXi開關(guān)機順序(continue)場景二:vCenter部署在vSAN集群中開機順序：1、為所有ESXi節(jié)點加電,優(yōu)先為vCenter虛機所在主機加電2、vSphereClient直連vCenter所在ESXi主機,退出維護模式,

啟動vCenter虛擬機3、登錄vSphereWebClient檢查vSAN狀態(tài)4、通過WebClient或者vSphereClient為其它虛擬機開機vSphere環(huán)境的升級順序ESXi、vCenter軟件版本升級注意事項1、注意各版本的兼容性vCenterESXivSANon-diskformat2、升級順序

vCenter->ESXi->vSANon-diskformat升級vCenter時,建議備份存儲策略和分布式交換機配置或者創(chuàng)建快照vSAN環(huán)境硬件的變更維護更換HBA/RAID卡如果是Pass-through模式，

更換操作對磁盤組沒有影響如果是RAID模式，由于可能引起設(shè)備名稱變化，建議遷移所有數(shù)據(jù)更換故障硬盤：若服務(wù)器支持熱插拔硬盤,可以在線進行物理更換操作若磁盤為RAID模式,則需要使用HBA工具重建RAID0

vSAN環(huán)境硬件的變更維護更換Cache層SSD磁盤需要重建磁盤組更換容量層SSD/MD磁盤務(wù)必在vSAN磁盤管理中從磁盤組中移除故障磁盤把新磁盤加入原磁盤組中關(guān)于VirtualSAN

預(yù)留空間的最佳實踐建議為vSAN留出30%的空間：如果一個磁盤使用率超過80%，vSAN將開始起執(zhí)行數(shù)據(jù)平衡操作如果所有磁盤都達到80%，vSAN將開始嘗試調(diào)整數(shù)據(jù),使所有的磁盤使用率基本相同實施數(shù)據(jù)遷移操作,將需要較多的臨時空間開銷(如磁盤格式升級,節(jié)點數(shù)據(jù)遷移)如果更換了vSAN存儲策略，有可能會需要額外空間來存放臨時文件VirtualSAN集群日常巡檢監(jiān)控1、vSANHealthCheck2、容量監(jiān)控3、性能監(jiān)控VMwarevSAN–

HealthCheckVMwarevSAN–監(jiān)控管理(容量監(jiān)控)VMwarevSAN–監(jiān)控管理(性能監(jiān)控)應(yīng)急操作指導(dǎo)方針避免：隨意重啟主機（除了已處于維護模式狀態(tài)下的主機）如確需重啟主機以隔離問題,應(yīng)確保數(shù)據(jù)已經(jīng)完成同步,或有足夠完整副本同時重啟多臺主機或者連續(xù)快速序列重啟多臺主機刪除磁盤組在系統(tǒng)處于非健康狀態(tài)時,調(diào)整vSAN配置(如增減節(jié)點)Agenda1vSAN架構(gòu)與使用場景2vSAN配置與運維實踐3vSAN雙活方案4案例介紹5問題與解答L3nomulticastL3nomulticast仲裁vESXiappliance站點AVSANActiveL2withMulticastvSphere+VSANStretchedClustervCenter站點BVSANActive要點概覽支持跨站點的vMotion和HA支持跨機房的災(zāi)難規(guī)避和災(zāi)難恢復(fù)支持OracleRAC和WindowsMSCSVSAN雙活可保護您的關(guān)鍵數(shù)據(jù)中心應(yīng)用不受站點范圍內(nèi)故障的影響提供零RPO優(yōu)勢概覽無需（多個）存儲網(wǎng)關(guān)，越簡單越可靠標準x86服務(wù)器，不受品牌、規(guī)格的限制統(tǒng)一、簡便的管理，沒有復(fù)雜的配置和維護針對不同的虛擬機采用不同的保護策略vSAN雙活介紹VSANStretchCluster29SiteASiteBvSphere+VSANStretchedClusterHDDSSDHDDSSDHDDSSDHDDSSDHDDSSDHDDSSD<5msRTTover>10/20/40gbpsActiveActiveL2withMulticast200msRTTover100mbpsL3nomulticastFaultDomainAFaultDomainCFaultDomainB200msRTTover100mbpsL3nomulticastwitnessvESXiapplianceWitness的節(jié)點與其他兩個站點之間的延時可以在100ms以內(nèi)（RTT<=200ms）。SiteA與SiteB之間延時小于5ms，帶寬大于10GbpsL3nomulticastL3nomulticast仲裁vESXiappliance站點AVSANActiveL2withMulticastvSphere+VSANStretchedClustervCenter站點BVSANActivevSAN雙活結(jié)合SRM實現(xiàn)兩地三中心站點CVSAN任何距離vSAN國內(nèi)案例31用戶場景客戶客戶挑戰(zhàn)與需求WhyVSAN?SolutionVDI（桌面虛擬化）國內(nèi)排名前五的證券公司VDI的總體成本壓力提升用戶體驗存儲管理復(fù)雜高性價比無需在外置磁盤陣列上大額投資可以隨VDI規(guī)模在線擴展管理簡單1000點*HorizonView高級版柜面+OA關(guān)鍵應(yīng)用山東新華書店(商流,物流,電子書城,出版行業(yè)桌面云)新業(yè)務(wù)系統(tǒng)難以即刻交付管理運維困難投資和運維成本越來越高降低設(shè)備成本與節(jié)能；提高運營效率；大幅提高性能；大幅降低TCO；存儲虛擬化提高利用率6*VSANwithNVMeSSD開發(fā)測試中國三大政策性銀行之一傳統(tǒng)存儲管理復(fù)雜降低存儲投資擴展性管理簡單無需購買高端存儲線性擴展80*VSANSDDC(廣電云)某省廣電(媒資管理系統(tǒng),OA,HR,財務(wù),廣告管理等)高性能I/O海量存儲池高擴展性成本壓力自動化部署高IO吞吐,低延遲大容量,

容易擴展高性價比與云平臺集成自動化部署210*VSANstandard遠程或分支辦公室全球排名前列的零售巨頭分支機構(gòu)運維管理人員對于vSphere了解不夠熟練節(jié)省購買存儲的成本；利用vCenter可以在地區(qū)總部進行統(tǒng)一管理3000多個節(jié)點Agenda1vSAN架構(gòu)與使用場景2vSAN配置與運維實踐3vSAN雙活方案4案例介紹5問題與解答33挑戰(zhàn)/需求原有存儲宕機，導(dǎo)致業(yè)務(wù)中斷希望采用雙活存儲方案，但是傳統(tǒng)存儲廠商技術(shù)復(fù)雜，并且都有不同的限制傳統(tǒng)的存儲供應(yīng)商對于雙活存儲的報價已經(jīng)超出預(yù)算，并且從長期而言，性能、容量的增長并不持續(xù)傳統(tǒng)的雙活增加了復(fù)雜性，對運維管理人員有很大挑戰(zhàn)解決方案在標準的x86服務(wù)器上部署VirtualSA