華為FusionStorage技術(shù)建議書分布式存儲(chǔ)

華為FusionStorage分布式存儲(chǔ)技術(shù)建議書HuaweiTechnologiesCo.,Ltd.華為技術(shù)有限公司版權(quán)所有侵權(quán)必究Revisionrecord修訂記錄文檔原封不動(dòng)發(fā)給客戶或代理商。請(qǐng)結(jié)合實(shí)際項(xiàng)目需要進(jìn)行必要增刪調(diào)整。ChangeChangeDescription修改描述初稿完成評(píng)審修改作者盧平002322532秦祖福00172507盧平00232253修訂本V1.0DateTableofContents目錄Revisionrecord..............................錯(cuò)誤!未指定書簽。TableofContents.........................................................錯(cuò)誤!未指定書簽。........................錯(cuò)誤!未指定書簽。.......................錯(cuò)誤!未指定書簽。.......................錯(cuò)誤!未指定書簽。2項(xiàng)目技術(shù)方案.................................................................................錯(cuò)誤!未指定書簽。gegegegege..............................錯(cuò)誤!未指定書簽。4.3在刀片服務(wù)器上使用組網(wǎng)方案........................................................錯(cuò)誤!未指定書簽。GE。D.......................................................錯(cuò)誤!未指定書簽。rage...............................................錯(cuò)誤!未指定書簽。.................錯(cuò)誤!未指定書簽。torage...........錯(cuò)誤!未指定書簽。orage.........................................錯(cuò)誤!未指定書簽。.........................................錯(cuò)誤!未指定書簽。9縮略語............................................................................................錯(cuò)誤!未指定書簽。1項(xiàng)目概述傳統(tǒng)SAN在企業(yè)基礎(chǔ)設(shè)施池化、云化中面臨的主要問題：存儲(chǔ)資源彈性問題：多業(yè)務(wù)負(fù)載、資源的動(dòng)態(tài)需求變化存儲(chǔ)擴(kuò)展的問題：共享、擴(kuò)展面臨了諸多的瓶頸和問題(機(jī)頭、前后端網(wǎng)絡(luò)、CPU/Cache與HDD不同步問題)形態(tài)和實(shí)施的成本、復(fù)雜性問題：獨(dú)立的存儲(chǔ)網(wǎng)絡(luò)，建設(shè)成本高、實(shí)施復(fù)雜(初始實(shí)施、擴(kuò)減容等)容錯(cuò)和可靠性問題：大規(guī)模集群中容忍的故障域問題(跨機(jī)柜、跨機(jī)房)，硬盤重建時(shí)間長(zhǎng)問題針對(duì)上述問題，建議使用FusionStorage分布式存儲(chǔ)產(chǎn)品解決上述問題，為滿足業(yè)務(wù)服務(wù)。XXX的項(xiàng)目進(jìn)行修改：序號(hào)序號(hào)項(xiàng)目需求描述備注TPMC600萬，并發(fā)用戶量為1000請(qǐng)根據(jù)實(shí)際需求刷新簡(jiǎn)配置2、基于快照的高性能鏈接克隆3、高性能增量快照技術(shù)SSD儲(chǔ)dsionStorage2項(xiàng)目技術(shù)方案分布式存儲(chǔ)FusionStorage是華為公司設(shè)計(jì),完全自主產(chǎn)權(quán)的分布式存儲(chǔ)架構(gòu).作為一種有計(jì)算存儲(chǔ)高度orageHash存儲(chǔ)接口層：通過SCSI驅(qū)動(dòng)接口向操作系統(tǒng)、數(shù)據(jù)庫提供卷設(shè)備。存儲(chǔ)服務(wù)層：提供各種存儲(chǔ)高級(jí)特性，如快照、鏈接克隆、精簡(jiǎn)配置、分布式cache、容災(zāi)備份等。性復(fù)制技術(shù)、集群故障自愈與并行數(shù)據(jù)重建子系統(tǒng)等。FusionStorage通過分布式架構(gòu)把分散的、低速的SATA/SAS機(jī)械硬盤組織成一個(gè)高效的虛擬化SAN存儲(chǔ)池設(shè)備，提供比SAN設(shè)備更高的IO能力，把性能發(fā)揮到極致。usionStorage無狀態(tài)機(jī)頭無狀態(tài)機(jī)頭對(duì)外提供本地SCSI接口或者ISCSI服務(wù)接口，可以部署在存儲(chǔ)節(jié)點(diǎn)，也可以靈活部署在計(jì)算節(jié)點(diǎn)。系統(tǒng)啟動(dòng)時(shí)，無狀態(tài)機(jī)頭會(huì)從元數(shù)據(jù)集群獲取最新的數(shù)據(jù)分布視圖。在IO過程中，無狀態(tài)機(jī)頭會(huì)將數(shù)據(jù)均衡的分發(fā)到各個(gè)存儲(chǔ)節(jié)點(diǎn)。操作系統(tǒng)，其他操作系統(tǒng)可以通過ISCSI接口提供塊存儲(chǔ)服務(wù)。存儲(chǔ)集群在IO讀寫過程中，存儲(chǔ)集群接收到無狀態(tài)機(jī)頭分發(fā)的IO請(qǐng)求，會(huì)根據(jù)副本策略，將IO劃分成讀寫緩沖區(qū)，IO直接寫到cache中就向主節(jié)點(diǎn)返回。當(dāng)緩沖區(qū)達(dá)到一定的水位后，存儲(chǔ)節(jié)點(diǎn)會(huì)自動(dòng)將緩沖區(qū)的數(shù)據(jù)刷到主存設(shè)備(機(jī)械硬盤/SSD)上。分布式機(jī)頭FusionStorage采用無狀態(tài)的分布式軟件機(jī)頭，機(jī)頭部署在各個(gè)服務(wù)器上，無集中式機(jī)頭的性能瓶頸。單個(gè)服務(wù)器上軟件機(jī)頭只占用較少的CPU資源，提供比集中式機(jī)頭更高的分布式緩存數(shù)據(jù)緩存均勻分布到各個(gè)節(jié)點(diǎn)上，所有服務(wù)器的緩存總?cè)萘窟h(yuǎn)大于采用外置獨(dú)立存儲(chǔ)的方體性能提升1~3倍，同時(shí)提供更大的有效容量。流的數(shù)據(jù)庫，支持OLAP,OLTP等主流業(yè)務(wù)。集群元數(shù)據(jù)管理rage一個(gè)節(jié)點(diǎn)或者一塊硬盤故障自動(dòng)從集群內(nèi)隔離出來，不影響整個(gè)系統(tǒng)業(yè)務(wù)的使用。多數(shù)據(jù)副本FusionStorage存儲(chǔ)系統(tǒng)中沒有使用傳統(tǒng)的RAID模式來保證數(shù)據(jù)的可靠性，而是采用分片后的數(shù)據(jù)按照一定的規(guī)則保存集群節(jié)點(diǎn)上。如下圖所示，對(duì)于服務(wù)器Server1的磁盤Disk1上的數(shù)據(jù)塊P1，它的數(shù)據(jù)備份為服務(wù)器P高IOPS,低時(shí)延：應(yīng)用大容量Cache技術(shù)，提升IOPS；無需預(yù)先設(shè)置固定RAID組，大資源池適應(yīng)應(yīng)用負(fù)載的動(dòng)態(tài)變化；應(yīng)用程序通過Cache直達(dá)存儲(chǔ)，時(shí)延更低；無級(jí)擴(kuò)容：分布式機(jī)頭(每server服務(wù)器相當(dāng)于一個(gè)機(jī)頭)，無性能瓶頸，可無級(jí)擴(kuò)容非煙囪式擴(kuò)展：存儲(chǔ)與計(jì)算同步平滑擴(kuò)展。數(shù)據(jù)重建快：并行重建速快；數(shù)據(jù)分布可以跨服務(wù)器或跨機(jī)柜，不會(huì)因某個(gè)服務(wù)器、機(jī)柜故障導(dǎo)致數(shù)據(jù)不可訪問。VDI、OA應(yīng)用。其典型特點(diǎn)是：容量共享精簡(jiǎn)分配、性能共享分時(shí)復(fù)用、計(jì)算和存儲(chǔ)配比相對(duì)均衡、成本性價(jià)比要求高。OLAP應(yīng)用。其典型特點(diǎn)是：大并發(fā)吞吐量，計(jì)算和存儲(chǔ)帶寬要求高。存儲(chǔ)和網(wǎng)絡(luò)設(shè)備上疊加了一層虛擬化軟件。這種方式雖然可以提升資源利用率，但是由于系盤組織成一個(gè)類似SAN設(shè)備的虛擬存儲(chǔ)池，對(duì)上層應(yīng)用提供存儲(chǔ)功能。華為云平臺(tái)FusionSphere主要有虛擬化基礎(chǔ)引擎FusionCompute、云管理2.3.2FusionStorage與VMware融合場(chǎng)景VMware虛擬化平臺(tái)，統(tǒng)一的云管理平臺(tái)，備份服務(wù)器。VMware與FusionStorage配套使用的系統(tǒng)架構(gòu):1、系統(tǒng)初始部署時(shí)，在每臺(tái)部署VMware的服務(wù)器上部署一個(gè)控制虛擬機(jī)，該虛擬機(jī)上部署FusionStorage的無狀態(tài)機(jī)頭，每個(gè)無狀態(tài)機(jī)頭上會(huì)提供ISCSI的服務(wù)端。DataStore。建議每個(gè)DataStore對(duì)應(yīng)一個(gè)LUN。FusionStorage與VMware融合使用，在網(wǎng)絡(luò)部署上需要進(jìn)行存儲(chǔ)節(jié)點(diǎn)和計(jì)算節(jié)點(diǎn)分離部署，不能夠融合部署。2.3.3FusionStorage與OpenStack融合場(chǎng)景FusionSpherePlatform在OpenStack的基礎(chǔ)上擴(kuò)展電信運(yùn)營(yíng)商和企業(yè)建設(shè)IT基礎(chǔ)設(shè)OpenStack、ICT統(tǒng)一的開放云平臺(tái)。FusionSpherePlatform保持了OpenStack的開放與兼容性，支持第3方廠商的計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)和安全物理硬件，也支持第3方的計(jì)算虛擬化、存儲(chǔ)虛擬化、網(wǎng)絡(luò)虛擬化和安全虛擬化產(chǎn)品。在云服務(wù)層面，在OpenStack的基礎(chǔ)上提供備份、熱遷移、親和性資源調(diào)度、基于OpenStack的FusionSphere解決方案系統(tǒng)架構(gòu):功功能簡(jiǎn)介華為OpenStack是基于開源的OpenStack軟件進(jìn)一步開發(fā)的IaaS分為本地?cái)?shù)據(jù)中心管理和多數(shù)據(jù)中心管理模塊，是華為公司提供的面OpenStackFusionManager組件功能簡(jiǎn)介組件一個(gè)虛擬存儲(chǔ)資源池，提供塊存儲(chǔ)功能。服務(wù)器通用SAN設(shè)備，向OpenStack服務(wù)器軟件結(jié)合可提供存儲(chǔ)資源。3FusionStorage應(yīng)用中典型硬件平臺(tái)織成一個(gè)虛擬存儲(chǔ)資源池，提供塊存儲(chǔ)接口個(gè)數(shù)可根據(jù)項(xiàng)目需求配置。機(jī)架式服務(wù)器硬件圖如下：CNALCNASCNACNA中MCNA用于部署管理節(jié)點(diǎn)；LCNA、SCNA、CNA用于部署用戶虛擬機(jī)。幾個(gè)刀片類型1、MCNA：管理節(jié)點(diǎn)，必配。至少兩臺(tái)服務(wù)器，需要配置2P*6核以上CPU，內(nèi)存至少64G，默認(rèn)128G。同時(shí)作為FusionStorage存儲(chǔ)節(jié)點(diǎn)。虛擬機(jī)部署VRM(4Core/8G內(nèi)存/50G存儲(chǔ))、FusionManager(4Core/16G內(nèi)存/280G存儲(chǔ))、這些管理軟件采用虛擬機(jī)部署，管理虛擬機(jī)需要獨(dú)占本地的兩塊硬盤提供e2、LCNA：計(jì)算和存儲(chǔ)節(jié)點(diǎn)，必配。同時(shí)提供計(jì)算和FusionStorage存儲(chǔ)能力，可部署用戶虛擬機(jī)。和SCNA的業(yè)務(wù)功能相同，區(qū)別在于LCNA部署了FusionStorage的MDC軟件。根據(jù)部署的用戶虛擬機(jī)規(guī)格和內(nèi)存確定CPU型號(hào)(默認(rèn)2P*2640)和內(nèi)存配置(至少配置64G，默認(rèn)128G)LCNA節(jié)點(diǎn)部署FusionStorage管理和控制軟件，這些軟件運(yùn)行在Domain0，需要盤用于FusionStorage業(yè)務(wù)存儲(chǔ)。剩余計(jì)算資源可用于部署業(yè)務(wù)虛擬機(jī)。3、SCNA：計(jì)算和存儲(chǔ)節(jié)點(diǎn)，必配。同時(shí)提供計(jì)算和FusionStorage存儲(chǔ)能力，可部署用戶虛擬機(jī)。根據(jù)部署的用戶虛擬機(jī)規(guī)格和內(nèi)存確定CPU型號(hào)(默認(rèn)2P*2640)和內(nèi)存配置(至少配置64G，默認(rèn)128G)部署FusionStorage管理和控制軟件，這些軟件運(yùn)行在Domain0，需要1CoreCPU，至少25G內(nèi)存。另外配置6~11個(gè)硬盤用于FusionStorage業(yè)務(wù)存儲(chǔ)。剩余計(jì)算資源可用于部署業(yè)務(wù)虛擬機(jī)。4、CNA：計(jì)算節(jié)點(diǎn)，選配。提供計(jì)算能力，部署用戶虛擬機(jī)。根據(jù)部署的用戶虛擬機(jī)規(guī)格和內(nèi)存確定CPU型號(hào)(默認(rèn)2P*2640)和內(nèi)存配置(至少配置64G，默認(rèn)128G)1)存儲(chǔ)虛擬化應(yīng)用中未使用傳統(tǒng)的SAN設(shè)備，存儲(chǔ)直接使用2288H服務(wù)器上的本地硬盤配合RHH盤。后置硬盤：需要消耗約440G的存儲(chǔ)空間)，LCNA和SCNA均配置300GSAS即可滿足要求。前置硬盤:SSD卡選擇華為TecalES3000PCIeSSD高性能存儲(chǔ)卡(以下簡(jiǎn)稱ES3000，外觀如下圖)，ES3000為標(biāo)準(zhǔn)的PCIe全高半長(zhǎng)插卡，接口類型為PCIe2.0x8，適合安裝在機(jī)架服務(wù)器等通用服務(wù)器內(nèi)，適用于搜索引擎、Cache、數(shù)據(jù)庫、視頻服務(wù)等隨機(jī)讀寫操作頻繁和IOPS要求較高的業(yè)務(wù)，具有高性能、高IOPS、高可靠、易維護(hù)等優(yōu)點(diǎn)。2)交換機(jī)匯聚交換機(jī)也可以使用局方的交換機(jī)，但網(wǎng)口和數(shù)量要求同華為交換機(jī)。FusionStorag+刀片式服務(wù)器的物理形態(tài)組成，支持計(jì)算、存儲(chǔ)、交換、電源模塊化設(shè)計(jì)，計(jì)算和存儲(chǔ)節(jié)點(diǎn)按需混配，支持10GE交換模塊，根據(jù)業(yè)務(wù)要求靈活配置說明如下：虛擬機(jī)部署VRM(4Core/8G內(nèi)存/50G存儲(chǔ))、FusionManager(4Core/16G內(nèi)存獨(dú)占本地的兩塊硬盤提供存儲(chǔ)。2、LCNA：計(jì)算和存儲(chǔ)節(jié)點(diǎn)，必配。同時(shí)提供計(jì)算和FusionStorage存儲(chǔ)能力，可部署用戶虛擬機(jī)。和SCNA的業(yè)務(wù)功能相同，區(qū)別在于LCNA部署了FusionStorage的MDC軟件。根據(jù)部署的用戶虛擬機(jī)規(guī)格和內(nèi)存確定CPU型號(hào)(默認(rèn)2P*2640)和內(nèi)存配置(至少配置64G，默認(rèn)128G)部署FusionStorage管理和控制軟件，這些軟件運(yùn)行在Domain0，需要1CoreCPU，至少25G內(nèi)存。FusionStorage管理需要獨(dú)占一塊專門的硬盤(用于部署zookeeper進(jìn)程)。3、SCNA：計(jì)算和存儲(chǔ)節(jié)點(diǎn)，必配。同時(shí)提供計(jì)算和FusionStorage存儲(chǔ)能力，可部署用戶虛擬機(jī)。根據(jù)部署的用戶虛擬機(jī)規(guī)格和內(nèi)存確定CPU型號(hào)(默認(rèn)2P*2640)和內(nèi)存配置(至少配置64G，默認(rèn)128G)部署FusionStorage管理和控制軟件，這些軟件運(yùn)行在Domain0，需要1CoreCPU，至少25G內(nèi)存。另外配置6~12個(gè)硬盤用于FusionStorage業(yè)務(wù)存儲(chǔ)，部署用戶虛擬機(jī)。4、CNA：計(jì)算節(jié)點(diǎn)，選配。提供計(jì)算能力，部署用戶虛擬機(jī)。根據(jù)部署的用戶虛擬機(jī)規(guī)格和內(nèi)存確定CPU型號(hào)(默認(rèn)2P*2640)和內(nèi)存配置(至少配置64G，默認(rèn)128G)4FusionStorage應(yīng)用中網(wǎng)絡(luò)設(shè)計(jì)方案10GE組網(wǎng)1、服務(wù)器上默認(rèn)配置一塊2*10GE的網(wǎng)卡，分別與兩臺(tái)10GE交換機(jī)連接，兩個(gè)網(wǎng)口做bond，缺省為負(fù)載分擔(dān)規(guī)模2、服務(wù)器的BMC網(wǎng)口與一臺(tái)GE交換機(jī)連接，GE交換機(jī)上行兩個(gè)GE線纜分別與兩個(gè)10GE交換機(jī)連接3、10GE交換機(jī)下行承擔(dān)內(nèi)部管理、存儲(chǔ)、業(yè)務(wù)平面，10GE上行對(duì)接客戶網(wǎng)絡(luò)，默認(rèn)提供4*10GE，兩臺(tái)10GE交換機(jī)堆疊1、服務(wù)器上默認(rèn)配置一塊2*10GE的網(wǎng)卡，分別與兩臺(tái)10GE交換機(jī)連接，兩個(gè)網(wǎng)口做bond，缺省為源目的IP和Port負(fù)荷分擔(dān)模式，對(duì)應(yīng)的交換機(jī)端口配置eth-trunk2、服務(wù)器的BMC網(wǎng)口與一臺(tái)GE交換機(jī)連接，GE交換機(jī)上行兩個(gè)GE線纜分別與兩個(gè)10GE交換機(jī)連接，對(duì)應(yīng)端口做eth-trunk3、10GE交換機(jī)下行承擔(dān)內(nèi)部管理、業(yè)務(wù)平面網(wǎng)絡(luò)連接，10GE上行對(duì)接客戶網(wǎng)絡(luò)，默認(rèn)提供4*10GE，兩臺(tái)10GE交換機(jī)堆疊每臺(tái)服務(wù)器上的兩個(gè)IB網(wǎng)口分別與兩臺(tái)IB交換機(jī)連接，兩臺(tái)IB交換機(jī)之間6根線互連，IB口承擔(dān)存儲(chǔ)平面的通信6、后續(xù)擴(kuò)容需要增加10GE匯聚交換機(jī)和IB主干交換機(jī)4.3.1虛擬化10GE刀片服務(wù)器組網(wǎng)1、每個(gè)刀片配置1個(gè)2*10GE端口的iNIC網(wǎng)卡或普通10GE網(wǎng)卡(MZ510)；2、每個(gè)機(jī)框使用XCUB交換板，通過基本框自級(jí)聯(lián)方式，不使用外置交換機(jī)?？蜷g使用 3、框內(nèi)兩塊交換板通過40G接口堆疊；2、每擴(kuò)展框兩塊10GE交換板與中心框2+2(40GE)互連，內(nèi)部管理與業(yè)務(wù)3、每擴(kuò)展框兩塊IB交換板與匯聚框3+3互連，其中直連2根交叉1根IB線，內(nèi)部存儲(chǔ)4、中心框上行2+2(40GE)，外部業(yè)務(wù)5、刀片采用計(jì)算存儲(chǔ)融合方式(CH223)，每刀片主要配置：1塊2*10GE(MZ510)，1塊6、每擴(kuò)展框存儲(chǔ)單面帶寬2*56Gb=112Gbps5服務(wù)器數(shù)量規(guī)劃1、1個(gè)FusionStorage存儲(chǔ)資源池，兩副本情況下最大96塊硬盤或者32張SSD卡。三虛擬化場(chǎng)景下FusionStorage單盤/單卡IOPS：假設(shè)條件假設(shè)條件Cache命中率50%，讀寫比例4:6，兩副本Cache命中率50%，讀寫比例4:6，三副本Cache命中率50%，讀寫比例4:6，三副本Cache命中率50%，讀寫比例4:6，三副本Cache類型對(duì)于小塊隨機(jī)場(chǎng)景(如VDI)。則卷/應(yīng)用層面的有效容量公式為：zr)*q*m/kIOPS盤數(shù)y1：按容量計(jì)算，硬盤數(shù)y2：需要的硬盤數(shù)N=max(y1,y2)=max(79,9)=796FusionStorage產(chǎn)品特性介紹FusionStorage通過創(chuàng)新的架構(gòu)把分散的、低速的SATA/SAS機(jī)械硬盤組織成一個(gè)高效的類SAN存儲(chǔ)池設(shè)備，提供比SAN設(shè)備更高的IO，把性能發(fā)揮到了極致。FusionStorage支持使用SSD替代HDD作為高速存儲(chǔ)設(shè)備，支持使用Infiniband網(wǎng)絡(luò)替代GE/10GE網(wǎng)絡(luò)提供更高的帶寬，為對(duì)性能要求極高的大數(shù)據(jù)量實(shí)時(shí)處理場(chǎng)景提供完美的支分布式機(jī)頭FusionStorage采用無狀態(tài)的分布式軟件機(jī)頭，機(jī)頭部署在各個(gè)服務(wù)器上，無集中式機(jī)頭的性能瓶頸。單個(gè)服務(wù)器上軟件機(jī)頭只占用較少的CPU資源，提供比集中式機(jī)頭更高的IOPS。分布式緩存ageIO量磁盤共享計(jì)算設(shè)備和存儲(chǔ)設(shè)備之間有限帶寬的問題。緩存功能，加上其大容量的優(yōu)勢(shì)，進(jìn)一步提升了系統(tǒng)性能。FusionStorage計(jì)算和存儲(chǔ)融合:全局負(fù)載均衡FusionStorage的實(shí)現(xiàn)機(jī)制保證了上層應(yīng)用對(duì)數(shù)據(jù)的IO操作均勻分布在不同服務(wù)器的不同硬盤上，不會(huì)出現(xiàn)局部的熱點(diǎn)，實(shí)現(xiàn)全局復(fù)負(fù)載均衡。在不同的服務(wù)器上，不會(huì)出現(xiàn)集中的熱點(diǎn)。第二，數(shù)據(jù)分片分配算法保證了主用副本和備用副本在不同服務(wù)器和不同硬盤上的均勻分負(fù)載的 FusionStorage分布式SSD存儲(chǔ)系統(tǒng)通過以下措施增強(qiáng)了可靠性：內(nèi)嵌的ECC檢錯(cuò)/糾錯(cuò)引擎和RAID5引擎,數(shù)據(jù)通道間形成二維的檢錯(cuò)/糾錯(cuò)機(jī)制。內(nèi)置DATAScrubbing引擎定時(shí)檢測(cè)存儲(chǔ)數(shù)據(jù)，提前預(yù)防數(shù)據(jù)錯(cuò)誤的產(chǎn)生。通道間使用DynamicRAID算法，實(shí)現(xiàn)通道間的資源共享，確保在芯片壞塊過多甚至是多個(gè)芯片故障的情況下均能正常工作。高性能快照FusionStorage提供了快照機(jī)制，將用戶的邏輯卷數(shù)據(jù)在某個(gè)時(shí)間點(diǎn)的狀態(tài)保存下來，后續(xù)可以作為導(dǎo)出數(shù)據(jù)、恢復(fù)數(shù)據(jù)之用。FusionStorage快照:高性能鏈接克隆克隆卷剛創(chuàng)建出來時(shí)的數(shù)據(jù)內(nèi)容與快照中的數(shù)據(jù)內(nèi)容一致，后續(xù)對(duì)于克隆卷的修改不會(huì)影響到原始的快照和其他克隆卷。FusionStorage支持1:256的鏈接克隆比，提升存儲(chǔ)空間利用率。FusionStorage支持批量進(jìn)行虛擬機(jī)卷部署，能夠在秒級(jí)批量創(chuàng)建上百個(gè)虛擬機(jī)卷。FusionStorage鏈接克隆:高速Infiniband網(wǎng)絡(luò)FusionStorage支持為高帶寬應(yīng)用設(shè)計(jì)的Infiniband網(wǎng)絡(luò)，存儲(chǔ)交換無瓶頸。近似無阻塞通信網(wǎng)絡(luò)，數(shù)據(jù)交換無瓶頸。納秒級(jí)通信時(shí)延，計(jì)算存儲(chǔ)信息及時(shí)傳遞。主備端口多平面通信，冗余通信無憂。單口56Gbps帶寬，完美配合極速SSD存儲(chǔ)吞吐，性能無限。集群管理FusionStorage分布式存儲(chǔ)軟件采用集群管理方式，不會(huì)出現(xiàn)單點(diǎn)故障，一個(gè)節(jié)點(diǎn)或者一塊硬盤故障自動(dòng)從集群內(nèi)隔離出來，不影響整個(gè)系統(tǒng)業(yè)務(wù)的使用。集群內(nèi)選舉進(jìn)程Leader，Leader負(fù)責(zé)數(shù)據(jù)存儲(chǔ)邏輯的處理，當(dāng)Leader出現(xiàn)故障，系統(tǒng)自動(dòng)選舉其他進(jìn)程成為新的Leader。多數(shù)據(jù)副本FusionStorage存儲(chǔ)系統(tǒng)中沒有使用傳統(tǒng)的RAID模式來保證數(shù)據(jù)的可靠性，而是采用了多片后的數(shù)據(jù)按照一定的規(guī)則保存集群節(jié)點(diǎn)上。PFusionStorage多數(shù)據(jù)副本:數(shù)據(jù)一致性。一致性復(fù)制技術(shù)確保各個(gè)數(shù)據(jù)副本的一致性。FusionStorage還支持ReadRepair機(jī)制。ReadRepair機(jī)制是指在讀數(shù)據(jù)失敗時(shí)，會(huì)判斷的方法進(jìn)行恢復(fù)，從而保證數(shù)據(jù)副本總數(shù)不減少?？焖贁?shù)據(jù)重建FusionStorage內(nèi)部具備強(qiáng)大的數(shù)據(jù)保護(hù)機(jī)制。數(shù)據(jù)存儲(chǔ)時(shí)被分片打散到多個(gè)節(jié)點(diǎn)上，這些分片數(shù)據(jù)支持分布在不同的存儲(chǔ)節(jié)點(diǎn)、不同的機(jī)柜之間，同時(shí)數(shù)據(jù)存儲(chǔ)時(shí)采用多副本技術(shù)，rage能瓶頸，對(duì)上層業(yè)務(wù)的影響做到最小化。數(shù)據(jù)故障自動(dòng)恢復(fù)流程如下圖所示。eusionStorage。數(shù)據(jù)分布上支持跨服務(wù)器，不會(huì)因某個(gè)服務(wù)器故障導(dǎo)致的數(shù)據(jù)不可訪問。能。掉電保護(hù)eFusionStorage支持的保電介質(zhì)為NVDIMM內(nèi)存條或PCIeSSD卡。程序運(yùn)行過程中器會(huì)把元數(shù)據(jù)和緩存數(shù)據(jù)寫入保電介質(zhì)中，上電后恢復(fù)保電介質(zhì)中的元數(shù)據(jù)和緩存數(shù)據(jù)。FusionStorage保電介質(zhì)(NVDIMM內(nèi)存和PCIeSSD)像卷上。dary規(guī)格名規(guī)格名稱規(guī)格指標(biāo)0備注：兩個(gè)站點(diǎn)之間的距離小于250KM。同步復(fù)制網(wǎng)絡(luò)帶寬>站點(diǎn)業(yè)務(wù)峰值寫I/O帶寬容災(zāi)鏡像卷最大規(guī)格鏡像卷最大規(guī)格FusionStorage采用的分布式集群架構(gòu)，天然支持無性能損耗的彈性擴(kuò)展。FusionStorage采用DHT(DistributeHashTable，分布式哈希表)路由數(shù)據(jù)算法。每個(gè)存儲(chǔ)節(jié)點(diǎn)負(fù)責(zé)存儲(chǔ)一小部分?jǐn)?shù)據(jù)，基于DHT實(shí)現(xiàn)整個(gè)系統(tǒng)的尋址和存儲(chǔ)。Balance這樣可以使得所有節(jié)點(diǎn)負(fù)載均衡。單調(diào)性(Monotonicity)：當(dāng)有新節(jié)點(diǎn)加入系統(tǒng)中時(shí)，系統(tǒng)重新做數(shù)據(jù)分配，原來的數(shù)據(jù)存儲(chǔ)位置不需要很大的調(diào)整。FusionStorage存儲(chǔ)路由采用分布式哈希算法，使得存儲(chǔ)系統(tǒng)具有如下特點(diǎn)：快速達(dá)到負(fù)載均衡：新加入節(jié)點(diǎn)只需要搬移很少部分?jǐn)?shù)據(jù)分片即可達(dá)到負(fù)載均衡。平滑擴(kuò)容節(jié)點(diǎn)FusionStorage的分布式架構(gòu)具有良好的可擴(kuò)展性，支持超大容量的存儲(chǔ)：DHT算法保證了擴(kuò)容后不需要做大量的數(shù)據(jù)搬遷，可以快速達(dá)到負(fù)載均衡狀態(tài)。FusionStorage分布式系統(tǒng)的帶寬和Cache都均勻分布到各個(gè)節(jié)點(diǎn)上，帶寬和Cache隨著節(jié)點(diǎn)的擴(kuò)容而線性增加。FusionStorage平滑擴(kuò)容節(jié)點(diǎn):資源按需使用比直接分配物理存儲(chǔ)資源，可以顯著提高存儲(chǔ)空間利用率。精簡(jiǎn)配置(ThinProvisioning)無任何性能下降(IPSAN擴(kuò)展空間時(shí)需要耗費(fèi)額外的性能)。易管理華為硬件配合使用的FusionStorage存儲(chǔ)軟件在出廠前已經(jīng)做了預(yù)安裝，在用戶機(jī)房只需要根據(jù)實(shí)際情況調(diào)整IP配置就可以了。FusionStorage存儲(chǔ)軟件完成安裝部署以后可以自動(dòng)運(yùn)行，不需要人工干預(yù)，系統(tǒng)缺省配置FusionStorage軟件進(jìn)程包括：Manager、Agent、MDC、VBS和OSD。其中ManagerFusionStorage軟件部署:功功能描述告警、監(jiān)控、日志、配置等OM功能，支持主備節(jié)點(diǎn)部署。上部署一個(gè)或者多個(gè)VBS進(jìn)程。軟件進(jìn)程ManagerAgentMDCFusionStoragePortalPortalKPI、告警事件和存儲(chǔ)池狀態(tài)等，操作維護(hù)簡(jiǎn)單。下圖顯示了FusionStorage的存儲(chǔ)池管理界面。硬件兼容性u(píng)sionStorageTecalRHHTecalEFusionStorage運(yùn)行在通用的X86服務(wù)器平臺(tái)上。FusionStorage采用分布式集群架構(gòu)，最少需要三個(gè)服務(wù)器節(jié)點(diǎn)。集群內(nèi)各服務(wù)器的硬盤數(shù)量必須相同，單個(gè)節(jié)點(diǎn)上支持4~12塊硬盤。每臺(tái)服務(wù)器都需要配置4GNVDIMM內(nèi)存條/或PCIeSSD卡(大小可選FusionStorage理內(nèi)存大小為：4.7G+1.7G*N， (N是硬盤個(gè)數(shù)，取值范圍：4~12)，服務(wù)器的內(nèi)存配置必須高于這個(gè)數(shù)值(還需要考慮分配給操作系統(tǒng)和應(yīng)用軟件的內(nèi)存)。要求不低于10Gbps。支持512MB/1GBCache，電池/電容可選7個(gè)PCIe擴(kuò)展插槽2個(gè)冗余熱插拔電源TecalE9000(以下簡(jiǎn)稱：E9000)是華為公司研發(fā)的一款機(jī)箱產(chǎn)品，提供12U空間，可安卓越性能可配置8個(gè)橫插的全寬計(jì)算節(jié)點(diǎn)或者16個(gè)半寬計(jì)算節(jié)點(diǎn)，支持槽位拆分。UcoreTB融合架構(gòu)計(jì)算、存儲(chǔ)、交換、散熱、供電模塊化設(shè)計(jì)豐富的交換模塊(GE10GEFCFCoEIB)，根據(jù)業(yè)務(wù)要求靈活配置軟件兼容性FusionStorage可以部署在華為FusionCompute虛擬化軟件平臺(tái)上；也可以部署在物理7FusionStorage典型應(yīng)用案例池為什么選擇FusionStorage?華為FusionStorage是唯一通過測(cè)試的廠商(三家廠商參與測(cè)試)?性能測(cè)試結(jié)果超過客戶預(yù)期(3副本，SATA盤)時(shí)延：1.98ms~4ms(高端存儲(chǔ)中載下時(shí)延3~6ms)?有成熟的大規(guī)模資源池經(jīng)驗(yàn)?可同時(shí)支持VmWare、FusionSphere等虛擬化平臺(tái)浙江電信云資源池解決方案POC測(cè)試組網(wǎng)圖(34臺(tái)存儲(chǔ)服務(wù)器，10臺(tái)計(jì)算服務(wù)器)POC測(cè)試結(jié)果部署業(yè)務(wù)硬件規(guī)模存儲(chǔ)容量核心價(jià)值用戶性能整體提升30%單服務(wù)器最大有效容量為16T，滿足業(yè)務(wù)發(fā)展業(yè)務(wù)發(fā)放速度提升16倍運(yùn)維次數(shù)、難度降低江蘇移動(dòng)CRM系統(tǒng)支持6000多萬用戶業(yè)務(wù)，隨著客戶數(shù)的不斷增加和新業(yè)務(wù)功能的不斷上線，CRM數(shù)據(jù)庫的負(fù)載不斷上升。原有小機(jī)系統(tǒng)雖經(jīng)升級(jí)到滿配配置，但依然不能滿足性能及業(yè)務(wù)穩(wěn)定性需求，對(duì)CRM系統(tǒng)運(yùn)行和用戶滿意度產(chǎn)生了極大的影響。選擇華e低成本地成功解決原系統(tǒng)所面臨的難題。業(yè)務(wù)挑戰(zhàn)?用戶增長(zhǎng)和新業(yè)務(wù)需求對(duì)CRM核心數(shù)據(jù)庫性能和擴(kuò)展性帶來更大挑戰(zhàn)來業(yè)務(wù)的發(fā)展?支持與現(xiàn)有CRM系統(tǒng)的良好兼容性和平滑遷移能力?支持100TB級(jí)大數(shù)據(jù)分析及商務(wù)智能挖掘能力解決方案iBand設(shè)徹底打破網(wǎng)絡(luò)及存儲(chǔ)瓶頸數(shù)據(jù)分發(fā)中心，對(duì)周邊系統(tǒng)開放數(shù)據(jù)支持經(jīng)分、實(shí)時(shí)營(yíng)銷、報(bào)表等DW數(shù)據(jù)分析及決策支持型業(yè)務(wù)場(chǎng)景性客戶收益主庫負(fù)載降低50%，穩(wěn)定性大大提高，不需要追加投資實(shí)時(shí)營(yíng)銷、實(shí)時(shí)經(jīng)分等新業(yè)務(wù)上線速度提升100%數(shù)據(jù)分發(fā)中心提供靈活擴(kuò)展能力，提升業(yè)務(wù)性能的同時(shí)降低升級(jí)與運(yùn)營(yíng)成本未來主庫將逐步切換到FusionStorage上心分布式數(shù)據(jù)中心系統(tǒng)架構(gòu)本地?cái)?shù)據(jù)中心基礎(chǔ)設(shè)施系統(tǒng)架構(gòu)分布式數(shù)據(jù)中心總體規(guī)劃28個(gè)數(shù)據(jù)中心每個(gè)數(shù)據(jù)中心10個(gè)AZ每個(gè)AZ512臺(tái)服務(wù)器項(xiàng)目第一期概要openstack架構(gòu)512臺(tái)服務(wù)器FusionStorage代替CephIOPS平均提升4倍，最大提升11倍IO時(shí)延從>15ms減少到1ms海關(guān)原系統(tǒng)部署圖(新舊系統(tǒng)對(duì)比)深圳海關(guān)性能結(jié)果(新舊系統(tǒng)對(duì)比)FusionStorage助力中信信托轉(zhuǎn)型互聯(lián)網(wǎng)金融“這正是我理想中的IT平臺(tái)”欲打造一個(gè)全新的IT系統(tǒng)，基于云架構(gòu)，用以支撐和牽引業(yè)務(wù)的發(fā)展。中信信托是中國(guó)資產(chǎn)管理規(guī)模最大的信托公司。截至2012年年底，中信信托資產(chǎn)管理規(guī)模已突破6000億元，連續(xù)五年保持行業(yè)第一。業(yè)務(wù)挑戰(zhàn)機(jī)房空間與供電存在較大瓶頸核心業(yè)務(wù)的機(jī)器在性能、數(shù)據(jù)存儲(chǔ)、帶寬、擴(kuò)展、可靠性等難以滿足要求解決方案將業(yè)務(wù)所需資源統(tǒng)一池化、按業(yè)務(wù)負(fù)載靈活調(diào)度、提升資源利用率融合計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)、虛擬化于一體采用華為FusionStorage，同時(shí)為虛擬化平臺(tái)、數(shù)據(jù)庫平臺(tái)提供存儲(chǔ)服務(wù)客戶收益節(jié)省運(yùn)維成本達(dá)30%新業(yè)務(wù)上線時(shí)間縮短80%e業(yè)務(wù)挑戰(zhàn)匯港資訊是香港知名金融信息服務(wù)供應(yīng)商，擁有全港超過百分之四十的零售證券投資市場(chǎng)客為香港10+銀行和300+證券行提供實(shí)時(shí)證券交易數(shù)據(jù)發(fā)布和交易系統(tǒng)，要求實(shí)現(xiàn)實(shí)