大數(shù)據(jù)云計(jì)算存儲(chǔ)管理大趨勢(shì)

大數(shù)據(jù)

存儲(chǔ)管理大趨勢(shì)TheDigitalUniverse2010年數(shù)據(jù)1.2ZETTABYTES1,200,000,000,000,000,000,0002020年將達(dá)到35ZETTABYTES35,000,000,000,000,000,000,000大數(shù)據(jù)正在改變企業(yè)存儲(chǔ)來源:IDC基于文件:60.7%CAGR基于塊:21.8%CAGREXABYTES到2012年,80%存儲(chǔ)空間用于基于文件的數(shù)據(jù)大數(shù)據(jù)來源

文件，非結(jié)構(gòu)化數(shù)據(jù)….“大數(shù)據(jù)”Video&

GraphicsGenetic

SequencingSatellite

PhotosComputer

ModelingSeismic

ExplorationMusic/AudioPDFsMedical

Imaging縱向擴(kuò)展技術(shù)不適合大數(shù)據(jù)擴(kuò)展性性能管理可靠性成本SCALEupSCALEup存儲(chǔ)網(wǎng)絡(luò)服務(wù)器垂直擴(kuò)展與橫向存儲(chǔ)性能容量峰值存儲(chǔ)設(shè)備性能低峰值存儲(chǔ)設(shè)備性能中峰值存儲(chǔ)設(shè)備性能中高峰值存儲(chǔ)設(shè)備性能高痛苦的系統(tǒng)遷移復(fù)雜的系統(tǒng)管理重復(fù)的系統(tǒng)投資如何滿足大數(shù)據(jù)需求:無與倫比的容量和性能擴(kuò)展性.存儲(chǔ)大數(shù)據(jù)架構(gòu)的轉(zhuǎn)變—橫向擴(kuò)展擴(kuò)展性性能管理可靠性成本10GbE網(wǎng)絡(luò)10X性能SCALEoutSCALEout集群計(jì)算&服務(wù)器虛擬化橫向擴(kuò)展

存儲(chǔ)架構(gòu)StorageNetworkServer垂直存儲(chǔ)與橫向存儲(chǔ)性能容量單一系統(tǒng)線性擴(kuò)展性能擴(kuò)展適合快速增長(zhǎng)單一文件系統(tǒng)

單一系統(tǒng)管理

靈活雙向擴(kuò)展海量數(shù)據(jù)存儲(chǔ)傳統(tǒng)統(tǒng)存存儲(chǔ)儲(chǔ)與與集集群群存存儲(chǔ)儲(chǔ)傳統(tǒng)統(tǒng)存存儲(chǔ)儲(chǔ)集群群存存儲(chǔ)儲(chǔ)Faster………………………………………………………………………………………………………………………….Slower………………………………………………………………………………………………………………………….TRAINSTOPS!!!!!!!!!!!!TRAINKEEPSGOING!!平衡性能和容量X200企業(yè)級(jí)特性數(shù)據(jù)保護(hù)強(qiáng)勁分析能力新EMCIsilon橫向向擴(kuò)擴(kuò)展展解解決決方方案案極速性能S200(可選第二個(gè)交換機(jī))IsilonIQ存儲(chǔ)層內(nèi)部Infiniband萬兆互聯(lián)層服務(wù)器客戶/應(yīng)用層NFS,CIFS,FTP,HTTP(可選第二個(gè)交換機(jī))標(biāo)準(zhǔn)千兆以太網(wǎng)層服務(wù)器服務(wù)器IsilonIQ網(wǎng)絡(luò)絡(luò)架架構(gòu)構(gòu)向IsilonIQ集群群寫寫入入一一個(gè)個(gè)文文件件（可選第二個(gè)交換機(jī)）（可選第二個(gè)交換機(jī)）服務(wù)器NFS,CIFS,FTP,HTTP（可選第二個(gè)交換機(jī)）服務(wù)器服務(wù)器向IsilonIQ集群群寫寫入入一一個(gè)個(gè)文文件件(可選第二個(gè)交換機(jī))WorkVert-Specific向IsilonIQ集群群寫寫入入一一個(gè)個(gè)文文件件(可選第二個(gè)交換機(jī))服務(wù)器NFS,CIFS,FTP,HTTP(optional2ndswitch)服務(wù)器服務(wù)器(可選第二個(gè)交換機(jī))從IsilonIQ集群群讀讀取取一一個(gè)個(gè)文文件件從IsilonIQ集群群讀讀取取一一個(gè)個(gè)文文件件(optional2ndswitch)服務(wù)器NFS,CIFS,FTP,HTTP(可選第二個(gè)交換機(jī))服務(wù)器服務(wù)器最大大的的可可擴(kuò)擴(kuò)展展文文件件系系統(tǒng)統(tǒng)傳統(tǒng)統(tǒng)文文件件系系統(tǒng)統(tǒng)100倍的的擴(kuò)擴(kuò)展展性性O(shè)neFS?單個(gè)個(gè)文文件件系系統(tǒng)統(tǒng)可可從從18TB擴(kuò)展展到到15.5PB60秒完完成成擴(kuò)擴(kuò)展展，，無無停停機(jī)機(jī)無需需修修改改客客戶戶端端設(shè)設(shè)定定世界界最最快快的的擴(kuò)擴(kuò)展展速速度度AutoBalance:節(jié)點(diǎn)點(diǎn)間間自自動(dòng)動(dòng)數(shù)數(shù)據(jù)據(jù)均均衡衡減少少了了存存儲(chǔ)儲(chǔ)擴(kuò)擴(kuò)容容的的成成本本、、復(fù)復(fù)雜雜程程度度和和風(fēng)風(fēng)險(xiǎn)險(xiǎn)最大大的的可可擴(kuò)擴(kuò)展展文文件件系系統(tǒng)統(tǒng)AutoBalance可以以在在線線將將生生產(chǎn)產(chǎn)環(huán)環(huán)境境中中的的數(shù)數(shù)據(jù)據(jù)均均衡衡到到新新的的存存儲(chǔ)儲(chǔ)節(jié)節(jié)點(diǎn)點(diǎn)不需需要要手手動(dòng)動(dòng)參參與與，，不不需需要要重重新新配配置置，，不不需需要要修修改改服服務(wù)務(wù)器器或或客客戶戶端端的的掛掛載載點(diǎn)點(diǎn)以以及及應(yīng)應(yīng)用用程程序序配配置置空空空空空滿滿滿滿均衡衡均衡衡均衡衡均衡衡均衡衡最可可靠靠的的存存儲(chǔ)儲(chǔ)系系統(tǒng)統(tǒng)(可選選第第二二個(gè)個(gè)交交換換機(jī)機(jī))高可可用用集集群群架架構(gòu)構(gòu)使用用N+1保護(hù)護(hù)時(shí)時(shí)，如如果果單單個(gè)個(gè)驅(qū)驅(qū)動(dòng)動(dòng)器器或或者者節(jié)節(jié)點(diǎn)點(diǎn)不不可可用用，，數(shù)數(shù)據(jù)據(jù)100%可用用Isilon提供供業(yè)業(yè)界界最最快快的的驅(qū)驅(qū)動(dòng)動(dòng)器器重重建建時(shí)時(shí)間間———一小小時(shí)時(shí)之之內(nèi)內(nèi)??！當(dāng)使使用用N+2,N+3,和N+4保護(hù)護(hù)級(jí)級(jí)別別時(shí)時(shí),數(shù)據(jù)據(jù)在在多多個(gè)個(gè)磁磁盤盤或或者者節(jié)節(jié)點(diǎn)點(diǎn)不不可可用用時(shí)時(shí)仍仍然然100%可用用100%可用性故障100%可用性100%可用性100%可用性100%可用性100%可用性100%可用性100%可用性故障具有有最最高高可可用用性性的的存存儲(chǔ)儲(chǔ)虛擬擬熱熱備備能夠夠使使用用集集群群全全部部剩剩余余空空間間重重建建數(shù)數(shù)據(jù)據(jù)不像像傳傳統(tǒng)統(tǒng)系系統(tǒng)統(tǒng)受受限限于于卷卷和和RAID的重重建建X失效SMARTPOOLI/OPOLICYPROTECTIONPOLICYGloballyCoherentCacheVDMKData

LatencyGloballyCoherentCache大數(shù)數(shù)據(jù)據(jù)單單一一文文件件系系統(tǒng)統(tǒng)保護(hù)護(hù)級(jí)級(jí)別別靈靈活活和和數(shù)數(shù)據(jù)據(jù)自自動(dòng)動(dòng)分分層層S200Random+1

X200Sequential+2

NLInherited+4HPCData

I/OpsFileData

MB/sArchiveSelectSelectSelectS200-SSDS200-SASX200NLI/OsThroughputArchiveRandomSequentialInherited+1+2+3+42xS200-SSDRandom2xFileData

MB/sFileData

MB/sFileData

MB/sSmartConnect高級(jí)級(jí)版版配配置置IP地址址池池地地址址會(huì)會(huì)被被指指定定的的網(wǎng)網(wǎng)絡(luò)絡(luò)接接口口使使用用\\\ifsSmartConnectZone（區(qū)區(qū)域域））名名稱稱是是客客戶戶端端要要訪訪問問的的全全名名可以以在在4種連連接接均均衡衡策策略略中中選選擇擇RoundRobin（輪輪流流））CPUUtilization（CPU使用用率率））ConnectionCounting（連連接接數(shù)數(shù)））AggregateThroughput（吞吞吐吐量量））地址址池池必必須須制制定定SmartConnect服務(wù)務(wù)子子網(wǎng)網(wǎng)，，子子網(wǎng)網(wǎng)上上也也必必須須配配置置SmartConnect服務(wù)務(wù)IPOneFS6.5操作系統(tǒng)增強(qiáng)企業(yè)級(jí)的的訪問和安全全增強(qiáng)驗(yàn)證支持CIFS協(xié)議支持NFS4.0協(xié)議Kerberized

NFSv3supportSmartQuotas概覽SmartQuotas是授權(quán)的軟件件模塊可以讓管理員員在存儲(chǔ)利用用方面有更大大的控制力配額可以針對(duì)對(duì)用戶，組或或者目錄/文件夾強(qiáng)制型和記賬賬型配額都支支持根據(jù)配額的類類型，支持多多種提示方法法IsilonSnapShotIQ概覽可以與備份解解決方案整合合當(dāng)創(chuàng)建point-in-time型快照時(shí)效果果更好可以與MicrosoftShadowCopyService整合支持新版本的的Microsoft操作系統(tǒng)快照中只保存存變更的數(shù)據(jù)據(jù)塊SnapshotIQ使用Point-in-Time(PIT)和Copy-on-Write(COW)方式來生成快快照大多數(shù)快照都都是使用其中中一種方式生生成的OneFS會(huì)根據(jù)寫入操操作的不同動(dòng)動(dòng)態(tài)選擇生成成快照的方式式PIT用于大型持續(xù)續(xù)寫入操作COW用于小文件改改變SyncIQ概覽SyncIQ是異步文件復(fù)復(fù)制模塊需要購買的授授權(quán)模塊從Isilon集群復(fù)制數(shù)據(jù)據(jù)到其他Isilon集群參與集群的大大小和型號(hào)不不必相同通過任何IP鏈路復(fù)制WAN（廣域網(wǎng)）或或者LAN（局域網(wǎng)）SyncIQ3.0復(fù)制數(shù)據(jù)塊，，而不是新的的/修改過的文件件。SmartLock經(jīng)濟(jì)高效地防防范意外、過過早或惡意地地刪除或修改改數(shù)據(jù)InsightIQ1.5業(yè)界領(lǐng)先的橫橫向擴(kuò)展綜合合分析擴(kuò)展節(jié)點(diǎn)平臺(tái)節(jié)點(diǎn)大數(shù)據(jù)橫向擴(kuò)擴(kuò)展存儲(chǔ)解決決方案S-seriesX-seriesNL-seriesAcceleratorandbackupacceleratorIsilonexNodes硬件應(yīng)用軟件操作系統(tǒng)Isilon特性業(yè)界證明的云云存儲(chǔ)解決方方案領(lǐng)先者，，國內(nèi)外最大大容量的集群群存儲(chǔ)系統(tǒng)，，APPLE（12PB），華大基因因（4PB）,金山軟件（2.8PB）。單一分布式文文件系統(tǒng)，最最大可擴(kuò)展到到15.5PB全