![華為云計(jì)算技術(shù)與應(yīng)用 課件 第6章 華為云存儲(chǔ)服務(wù)與應(yīng)用_第1頁](http://file4.renrendoc.com/view3/M02/2A/10/wKhkFmah_0iACSXIAAHQEijNJUY700.jpg)
![華為云計(jì)算技術(shù)與應(yīng)用 課件 第6章 華為云存儲(chǔ)服務(wù)與應(yīng)用_第2頁](http://file4.renrendoc.com/view3/M02/2A/10/wKhkFmah_0iACSXIAAHQEijNJUY7002.jpg)
![華為云計(jì)算技術(shù)與應(yīng)用 課件 第6章 華為云存儲(chǔ)服務(wù)與應(yīng)用_第3頁](http://file4.renrendoc.com/view3/M02/2A/10/wKhkFmah_0iACSXIAAHQEijNJUY7003.jpg)
![華為云計(jì)算技術(shù)與應(yīng)用 課件 第6章 華為云存儲(chǔ)服務(wù)與應(yīng)用_第4頁](http://file4.renrendoc.com/view3/M02/2A/10/wKhkFmah_0iACSXIAAHQEijNJUY7004.jpg)
![華為云計(jì)算技術(shù)與應(yīng)用 課件 第6章 華為云存儲(chǔ)服務(wù)與應(yīng)用_第5頁](http://file4.renrendoc.com/view3/M02/2A/10/wKhkFmah_0iACSXIAAHQEijNJUY7005.jpg)
版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
第6章
華為云存儲(chǔ)服務(wù)與應(yīng)用華為云計(jì)算技術(shù)與應(yīng)用6.1云存儲(chǔ)技術(shù)原理6.2華為云存儲(chǔ)服務(wù)6.3華為云備份與容災(zāi)服務(wù)學(xué)習(xí)要點(diǎn)6.4華為云存儲(chǔ)服務(wù)實(shí)踐6.1.1 基本定義存儲(chǔ)狹義的存儲(chǔ)是指根據(jù)不同的業(yè)務(wù),將信息數(shù)據(jù)存放在具有冗余、保護(hù)、遷移等功能的物理媒介中,如硬盤、緊湊型光碟(CompactDisc,CD)等。廣義的存儲(chǔ)是指為企業(yè)提供信息存取、保護(hù)、優(yōu)化和利用的一整套解決方案。本書中的數(shù)據(jù)存儲(chǔ)指廣義的存儲(chǔ)。狹義的存儲(chǔ)廣義的存儲(chǔ)6.1.1 基本定義存儲(chǔ)系統(tǒng)是指計(jì)算機(jī)中由存放程序和數(shù)據(jù)的各種存儲(chǔ)設(shè)備、控制部件以及管理信息調(diào)度的設(shè)備(硬件)和算法(軟件)所組成的系統(tǒng)。根據(jù)存儲(chǔ)器和主機(jī)的位置關(guān)系,存儲(chǔ)系統(tǒng)大致分為內(nèi)置存儲(chǔ)和外置存儲(chǔ),如圖(b)所示。內(nèi)置存儲(chǔ)系統(tǒng)直接與主機(jī)總線相連,主要包括CPU運(yùn)算所需要的高速緩存、內(nèi)存,以及與計(jì)算機(jī)主板直接相連的外存等,內(nèi)置存儲(chǔ)系統(tǒng)容量相對(duì)較小,不方便擴(kuò)展。外置存儲(chǔ)系統(tǒng)根據(jù)連接的方式可分為直連式存儲(chǔ)(DAS)和網(wǎng)絡(luò)化存儲(chǔ)(FAS)。圖(a)所示為存儲(chǔ)系統(tǒng)的物理結(jié)構(gòu),存儲(chǔ)系統(tǒng)通過控制器前端板卡與存儲(chǔ)網(wǎng)絡(luò)交換設(shè)備連接為主機(jī)提供數(shù)據(jù)訪問服務(wù)。存儲(chǔ)管理軟件是用于配置、管理和優(yōu)化存儲(chǔ)內(nèi)部的眾多子系統(tǒng)和連接件。存儲(chǔ)系統(tǒng)的分類存儲(chǔ)系統(tǒng)的物理結(jié)構(gòu)存儲(chǔ)系統(tǒng)及其分類6.1.1 基本定義云存儲(chǔ)是基于云計(jì)算延伸和發(fā)展出的一個(gè)新概念,它是指通過集群應(yīng)用、網(wǎng)絡(luò)技術(shù)和分布式文件系統(tǒng)等功能,將網(wǎng)絡(luò)中大量不同類型的存儲(chǔ)設(shè)備通過應(yīng)用軟件集合起來,共同對(duì)外提供數(shù)據(jù)存儲(chǔ)和業(yè)務(wù)訪問功能。云存儲(chǔ)6.1.2 存儲(chǔ)架構(gòu)的發(fā)展12345第一代存儲(chǔ)為直連式存儲(chǔ),指直接和計(jì)算機(jī)相連接的數(shù)據(jù)存儲(chǔ)方式,最早的形態(tài)是磁盤柜(JustaBunchOfDisks,JBOD)。磁盤柜將多個(gè)磁盤串聯(lián)在一起,主機(jī)看到的就是一堆獨(dú)立的硬盤,擴(kuò)展能力差且無法共享。第二代存儲(chǔ)旨在解決外部存儲(chǔ)共享和擴(kuò)展的問題,相繼出現(xiàn)NAS和SAN。NAS是專用的高性能文件共享和存儲(chǔ)設(shè)備,使用NAS的用戶可以通過網(wǎng)絡(luò)共享文件。NAS一般由操作系統(tǒng)、集成硬件、軟件組件等部分組成。第三代存儲(chǔ)為統(tǒng)一存儲(chǔ),既支持基于文件的NAS,又支持基于塊數(shù)據(jù)的SAN,并且可由統(tǒng)一界面進(jìn)行管理。第四代存儲(chǔ)為基于閃存的存儲(chǔ)系統(tǒng),閃存存儲(chǔ)是一種可以閃速寫入數(shù)據(jù)并執(zhí)行隨機(jī)I/O操作的數(shù)據(jù)存儲(chǔ)技術(shù)。閃存存儲(chǔ)采用非易失性內(nèi)存,不需要通過供電來維護(hù)所存儲(chǔ)數(shù)據(jù)的完整性,因此,即使斷電數(shù)據(jù)也不會(huì)丟失。第五代存儲(chǔ)為未來企業(yè)級(jí)智能存儲(chǔ),是面向多云架構(gòu),承載人工智能、物聯(lián)網(wǎng)和5G等新興技術(shù)的未來企業(yè)級(jí)智能存儲(chǔ)。第一代存儲(chǔ)第二代存儲(chǔ)第三代存儲(chǔ)第四代存儲(chǔ)第五代存儲(chǔ)6.1.3 云存儲(chǔ)核心技術(shù)與傳統(tǒng)存儲(chǔ)設(shè)備相比,云存儲(chǔ)不僅是一個(gè)硬件,而是一個(gè)由網(wǎng)絡(luò)設(shè)備、存儲(chǔ)設(shè)備、服務(wù)器、應(yīng)用軟件、公用訪問接口、接入網(wǎng)和客戶端程序等多個(gè)部分組成的復(fù)雜系統(tǒng)。云存儲(chǔ)的結(jié)構(gòu)模型存儲(chǔ)層:云存儲(chǔ)的基礎(chǔ)部分。云存儲(chǔ)中的存儲(chǔ)設(shè)備可以是光纖通道、存儲(chǔ)設(shè)備、NAS和互聯(lián)網(wǎng)SCSI等網(wǎng)絡(luò)存儲(chǔ)設(shè)備,也可以是小型計(jì)算機(jī)系統(tǒng)接口或串行連接SCSI?;A(chǔ)管理層:云存儲(chǔ)的核心部分,是極難實(shí)現(xiàn)的部分。通過集群系統(tǒng)、分布式文件系統(tǒng)、網(wǎng)格計(jì)算等技術(shù),實(shí)現(xiàn)存儲(chǔ)設(shè)備間的協(xié)同工作,提高數(shù)據(jù)訪問性能。應(yīng)用接口層:不同的云存儲(chǔ)運(yùn)營(yíng)單位可以根據(jù)實(shí)際業(yè)務(wù)類型開發(fā)不同的應(yīng)用服務(wù)接口,提供不同的應(yīng)用服務(wù)。訪問層:任何一個(gè)授權(quán)用戶都可以通過標(biāo)準(zhǔn)的公用應(yīng)用接口來登錄云存儲(chǔ)系統(tǒng),享受云存儲(chǔ)服務(wù)。云存儲(chǔ)運(yùn)營(yíng)單位不同,云存儲(chǔ)提供的訪問類型和訪問手段也不同。(1)(2)(3)(4)6.1.3 云存儲(chǔ)核心技術(shù)云存儲(chǔ)的優(yōu)勢(shì)優(yōu)勢(shì)2云存儲(chǔ)的另一個(gè)顯著優(yōu)勢(shì)是自定義元數(shù)據(jù)提供了前所未有的安全層,每個(gè)對(duì)象或文件都充當(dāng)自主數(shù)據(jù)實(shí)例,為不同方提供廣泛的受控和受限訪問策略,在動(dòng)態(tài)和靜態(tài)時(shí)提供內(nèi)置加密。優(yōu)勢(shì)1元數(shù)據(jù)有限是大多數(shù)存儲(chǔ)系統(tǒng)的缺點(diǎn),元數(shù)據(jù)的缺乏限制了系統(tǒng)僅可以實(shí)現(xiàn)部分自動(dòng)化。云存儲(chǔ)的一大優(yōu)勢(shì)是其可容納更多元數(shù)據(jù),并為特定業(yè)務(wù)和系統(tǒng)功能的數(shù)據(jù)提供出色的自定義控制。優(yōu)勢(shì)4傳統(tǒng)存儲(chǔ)災(zāi)難恢復(fù)計(jì)劃需要投入大量成本建立遠(yuǎn)程站點(diǎn),而在云存儲(chǔ)上,不需要額外的數(shù)據(jù)中心。數(shù)據(jù)和應(yīng)用程序可以自動(dòng)從私有云復(fù)制到一個(gè)或多個(gè)公有云,其成本只是構(gòu)建或租用另一個(gè)數(shù)據(jù)中心所需預(yù)算的一小部分。優(yōu)勢(shì)3每次更新傳統(tǒng)存儲(chǔ)系統(tǒng)時(shí)(通常每3年一次),必須遷移數(shù)據(jù),這個(gè)過程耗時(shí)且昂貴。而在云上,可以通過多種方式將數(shù)據(jù)從云存儲(chǔ)移動(dòng)到本地或另一個(gè)云存儲(chǔ)服務(wù),如數(shù)據(jù)遷移服務(wù),在升級(jí)過程中不用停機(jī)和修復(fù)服務(wù)器。6.1.3 云存儲(chǔ)核心技術(shù)云存儲(chǔ)的一大主要核心技術(shù)就是存儲(chǔ)虛擬化技術(shù),存儲(chǔ)虛擬化是指在存儲(chǔ)設(shè)備和服務(wù)器之間增加一個(gè)虛擬層,用于管理和控制存儲(chǔ)資源以對(duì)服務(wù)器提供存儲(chǔ)服務(wù)。對(duì)管理員來說,可以方便地對(duì)存儲(chǔ)資源進(jìn)行調(diào)整,提高存儲(chǔ)利用率。對(duì)終端用戶來說,集中的存儲(chǔ)設(shè)備可以提供更好的性能和易用性。當(dāng)前,存儲(chǔ)虛擬化技術(shù)主要包括基于主機(jī)的存儲(chǔ)虛擬化、基于存儲(chǔ)設(shè)備的存儲(chǔ)虛擬化、基于網(wǎng)絡(luò)的存儲(chǔ)虛擬化3類。存儲(chǔ)虛擬化的技術(shù)原理存儲(chǔ)虛擬化技術(shù)6.1.3 云存儲(chǔ)核心技術(shù)存儲(chǔ)產(chǎn)品與服務(wù)器是一體的,存儲(chǔ)虛擬化的應(yīng)用一般通過特定的邏輯卷管理軟件完成,邏輯卷管理軟件可把多個(gè)不同的磁盤陣列映射成一個(gè)虛擬的邏輯空間?;谥鳈C(jī)的存儲(chǔ)虛擬化基于存儲(chǔ)設(shè)備的存儲(chǔ)虛擬化基于網(wǎng)絡(luò)的存儲(chǔ)虛擬化指在網(wǎng)絡(luò)設(shè)備之間實(shí)現(xiàn)虛擬化功能,將類似于卷管理的功能擴(kuò)展到整個(gè)存儲(chǔ)網(wǎng)絡(luò),負(fù)責(zé)共享存儲(chǔ)資源、數(shù)據(jù)復(fù)制、數(shù)據(jù)遷移及遠(yuǎn)程備份等操作,并對(duì)數(shù)據(jù)路徑進(jìn)行管理,避免產(chǎn)生性能瓶頸?;诰W(wǎng)絡(luò)的存儲(chǔ)虛擬化可以采用非對(duì)稱和對(duì)稱的虛擬存儲(chǔ)架構(gòu)。其實(shí)現(xiàn)方式是在存儲(chǔ)控制器上添加虛擬化功能,存儲(chǔ)設(shè)備虛擬層管理共享存儲(chǔ)資源并匹配可用資源和訪問需求。典型的如虛擬磁盤。如圖所示為分布式文件系統(tǒng)架構(gòu),用戶可以通過客戶端的形式訪問分布式文件系統(tǒng)的主控服務(wù)器。分布式文件系統(tǒng)的主要訪問對(duì)象與管理對(duì)象就是下層的數(shù)據(jù)塊服務(wù)器。數(shù)據(jù)塊服務(wù)器主要的工作任務(wù)是定期向主控服務(wù)器通報(bào)其狀態(tài)(如運(yùn)行狀態(tài)、剩余空間、網(wǎng)絡(luò)狀況等)。如果主控服務(wù)器對(duì)某一個(gè)文件有增刪改查等操作行為,實(shí)際上命令是由主控服務(wù)器發(fā)送至數(shù)據(jù)塊服務(wù)器執(zhí)行的。分布式文件系統(tǒng)早期的發(fā)展雛形是SUN公司在1984年推出的網(wǎng)絡(luò)文件系統(tǒng)(NetworkFileSystem,NFS)。6.1.3 云存儲(chǔ)核心技術(shù)分布式文件系統(tǒng)隨著互聯(lián)網(wǎng)的快速發(fā)展,用戶的規(guī)模呈指數(shù)級(jí)增長(zhǎng),這導(dǎo)致了計(jì)算機(jī)以本地硬盤進(jìn)行擴(kuò)展的方式難以滿足用戶在硬盤容量、擴(kuò)展速度、數(shù)據(jù)安全性、數(shù)據(jù)備份等方面的需求。分布式文件系統(tǒng)可以解決這個(gè)問題。6.1.3 云存儲(chǔ)核心技術(shù)GFS和NFS類似,采用比較典型的主從管理架構(gòu)。在GFS中,所存儲(chǔ)的文件被切分成固定大小的數(shù)據(jù)塊(Chunk)。主控服務(wù)器的功能主要是管理元數(shù)據(jù)(類似索引),包括文件與Chunk命名空間、文件到Chunk之間的映射、Chunk的位置信息等。而數(shù)據(jù)塊服務(wù)器將文件以Linux文件的形式存儲(chǔ)在磁盤中。Chunk會(huì)以3個(gè)副本的形式存儲(chǔ)來提高可靠性。GFS整體架構(gòu)隨著互聯(lián)網(wǎng)流量的逐漸增多,為了存儲(chǔ)海量搜索數(shù)據(jù),谷歌于2003年發(fā)布了GFS。相比于NFS,GFS在容錯(cuò)機(jī)制、文件大小、讀寫模式等方面都有一定的優(yōu)勢(shì)??梢越鉀Q互聯(lián)網(wǎng)帶來的圖片文件小但數(shù)量多、視頻文件尺寸不一等問題。6.1.3 云存儲(chǔ)核心技術(shù)HDFS架構(gòu)HDFS與GFS類似,業(yè)界普遍認(rèn)為HDFS是GFS的開源實(shí)現(xiàn)。HDFS為Hadoop的分布式計(jì)算提供了海量、高容錯(cuò)性、高吞吐量的文件系統(tǒng)。HDFS同樣采用了分布式架構(gòu)。名詞主要功能GFS對(duì)應(yīng)術(shù)語HDFS對(duì)應(yīng)術(shù)語主控服務(wù)器控制整個(gè)文件系統(tǒng)的元數(shù)據(jù)與各數(shù)據(jù)服務(wù)器的中樞服務(wù)器MasterServerNameNode數(shù)據(jù)塊文件存儲(chǔ)的基本顆粒單位,每個(gè)文件會(huì)被切分成若干個(gè)大小一致的數(shù)據(jù)塊ChunkBlock數(shù)據(jù)服務(wù)器存儲(chǔ)數(shù)據(jù)塊的服務(wù)器,為分布式文件系統(tǒng)提供了存儲(chǔ)資源ChunkServerDataNodeHDFS和GFS中的名詞及功能說明6.1.3 云存儲(chǔ)核心技術(shù)并發(fā)寫入場(chǎng)景HDFS不支持多線程進(jìn)行文件并行寫入,單個(gè)文件只能由單個(gè)線程寫入。小文件的存儲(chǔ)與讀取場(chǎng)景主控服務(wù)器在文件尋址時(shí)需要消耗一定的內(nèi)存資源,但主控服務(wù)器的內(nèi)存資源會(huì)被優(yōu)先用于其他用途。因此,整體尋址時(shí)間會(huì)超過文件讀取時(shí)間,消耗時(shí)間太長(zhǎng),性能不佳。低時(shí)延數(shù)據(jù)訪問場(chǎng)景HDFS不適用于一些毫秒級(jí)訪問要求的場(chǎng)景。020301HDFS有一定的局限性,無法滿足以下場(chǎng)景的性能需求。6.1云存儲(chǔ)技術(shù)原理6.2華為云存儲(chǔ)服務(wù)6.3華為云備份與容災(zāi)服務(wù)學(xué)習(xí)要點(diǎn)6.4華為云存儲(chǔ)服務(wù)實(shí)踐6.2.1 塊存儲(chǔ)服務(wù)塊存儲(chǔ)概念塊存儲(chǔ)會(huì)將數(shù)據(jù)拆分成塊,每個(gè)文件或?qū)ο罂梢苑植荚诙鄠€(gè)塊上。每個(gè)數(shù)據(jù)塊都有一個(gè)唯一標(biāo)識(shí)符,所以存儲(chǔ)系統(tǒng)能將較小的數(shù)據(jù)存放在方便的位置。塊存儲(chǔ)通常會(huì)被配置為將數(shù)據(jù)與用戶環(huán)境分離,并將數(shù)據(jù)分布到可以更好地為其提供服務(wù)的多個(gè)環(huán)境中。當(dāng)用戶請(qǐng)求數(shù)據(jù)時(shí),底層存儲(chǔ)軟件會(huì)重新組裝來自這些環(huán)境的數(shù)據(jù)塊,并將它們呈現(xiàn)給用戶。由于塊存儲(chǔ)不依賴單條數(shù)據(jù)路徑,每個(gè)塊都獨(dú)立存在且可進(jìn)行分區(qū),因此,可以通過不同的操作系統(tǒng)進(jìn)行訪問,這使得用戶可以完全自由地配置數(shù)據(jù)。這是一種高效、可靠的數(shù)據(jù)存儲(chǔ)方式,且易于使用和管理,適用于要執(zhí)行大型事務(wù)的企業(yè)和部署了大型數(shù)據(jù)庫的企業(yè)。這意味著,需要存儲(chǔ)的數(shù)據(jù)越多,就越適合使用塊存儲(chǔ)。塊存儲(chǔ)也存在缺點(diǎn),如成本較為高昂,處理元數(shù)據(jù)的能力有限,這意味著它需要在應(yīng)用或數(shù)據(jù)庫級(jí)別進(jìn)行處理。6.2.1 塊存儲(chǔ)服務(wù)云硬盤簡(jiǎn)介云硬盤可以為彈性云服務(wù)器和裸金屬服務(wù)器提供高可靠、高性能、規(guī)格豐富并可彈性擴(kuò)展的塊存儲(chǔ)服務(wù),以滿足不同場(chǎng)景的業(yè)務(wù)需求,云硬盤適用于分布式文件系統(tǒng)、開發(fā)測(cè)試、數(shù)據(jù)倉庫以及高性能計(jì)算等場(chǎng)景。云硬盤類似個(gè)人計(jì)算機(jī)中的硬盤,需要掛載至對(duì)應(yīng)云服務(wù)器使用,無法單獨(dú)使用。用戶可以對(duì)已掛載的云硬盤執(zhí)行初始化、創(chuàng)建文件系統(tǒng)等操作,還可以把數(shù)據(jù)持久化地存儲(chǔ)在云硬盤上。云硬盤架構(gòu)如圖所示為華為云的云硬盤架構(gòu),用戶可以將云硬盤掛載至已購買的華為彈性云服務(wù)器上,若用戶想對(duì)云硬盤中的數(shù)據(jù)做冗余備份以保證數(shù)據(jù)的高可靠,可以通過創(chuàng)建備份和快照來完成。6.2.1 塊存儲(chǔ)服務(wù)云硬盤性能介紹根據(jù)性能,云硬盤可分為超高I/O云硬盤、通用型固態(tài)硬盤(SolidStateDisk,SSD)、高I/O云硬盤。高I/O云硬盤采用了結(jié)合低時(shí)延擁塞控制算法的遠(yuǎn)程直接存儲(chǔ)器訪問(RemoteDirectMemoryAccess,RDMA)技術(shù),單盤最大吞吐量達(dá)1000MBit/s,并具有極低的單路時(shí)延性能。與云硬盤性能相關(guān)的主要指標(biāo)如下。每秒處理的輸入/輸出請(qǐng)求(Input/OutputOperationsPerSecond,IOPS):云硬盤每秒進(jìn)行讀寫的操作次數(shù)。吞吐量:云硬盤每秒成功傳送的數(shù)據(jù)量,即讀取和寫入的數(shù)據(jù)量。I/O讀寫時(shí)延:云硬盤連續(xù)兩次進(jìn)行讀寫操作所需要的最短時(shí)間間隔。6.2.1 塊存儲(chǔ)服務(wù)共享云硬盤是一種支持多個(gè)云服務(wù)器并發(fā)讀寫訪問的數(shù)據(jù)塊級(jí)存儲(chǔ)設(shè)備,具有多掛載點(diǎn)、高并發(fā)性、高可靠性等特點(diǎn)。主要應(yīng)用于需要支持集群、高可用集群能力的關(guān)鍵企業(yè)應(yīng)用場(chǎng)景。一塊共享云硬盤最多可被同時(shí)掛載至16臺(tái)云服務(wù)器,若想實(shí)現(xiàn)文件共享,需要搭建共享文件系統(tǒng)或類似的集群管理系統(tǒng),如WindowsMSCS集群、VeritasVCS集群和CFS集群等,否則會(huì)存在數(shù)據(jù)覆蓋風(fēng)險(xiǎn)。共享云硬盤應(yīng)用場(chǎng)景共享云硬盤6.2.2 對(duì)象存儲(chǔ)服務(wù)
在對(duì)象存儲(chǔ)中,數(shù)據(jù)會(huì)被分解為稱為“對(duì)象”的離散單元,并保存在單個(gè)存儲(chǔ)庫中。對(duì)象存儲(chǔ)卷作為模塊化單元工作,每個(gè)卷都是一個(gè)自包含式存儲(chǔ)庫,均含有數(shù)據(jù)、可在分布式系統(tǒng)上找到對(duì)象的唯一標(biāo)識(shí)符以及描述數(shù)據(jù)的元數(shù)據(jù)。對(duì)象存儲(chǔ)需要一個(gè)簡(jiǎn)單的HTTPAPI,以供大多數(shù)客戶端(各種語言)使用。對(duì)象存儲(chǔ)服務(wù)(ObjectStorageService,OBS)是一個(gè)基于對(duì)象的海量存儲(chǔ)服務(wù),為客戶提供海量、安全、高可靠、低成本的數(shù)據(jù)存儲(chǔ)能力。OBS適用于大數(shù)據(jù)分析、靜態(tài)網(wǎng)站托管、在線視頻點(diǎn)播、基因測(cè)序、智能視頻監(jiān)控、備份歸檔、HPC、企業(yè)云盤等應(yīng)用場(chǎng)景。對(duì)象存儲(chǔ)概念對(duì)象存儲(chǔ)服務(wù)簡(jiǎn)介6.2.2 對(duì)象存儲(chǔ)服務(wù)
OBS的基本組成是桶(Bucket)和對(duì)象(Object)。OBS的產(chǎn)品架構(gòu)如下圖所示。對(duì)象存儲(chǔ)服務(wù)產(chǎn)品架構(gòu)AB桶對(duì)象桶是OBS中存儲(chǔ)對(duì)象的容器,每個(gè)桶都有自己的存儲(chǔ)類別、訪問權(quán)限、所屬區(qū)域等屬性,用戶在互聯(lián)網(wǎng)上通過桶的訪問域名來定位桶。對(duì)象是OBS中數(shù)據(jù)存儲(chǔ)的基本單位,一個(gè)對(duì)象實(shí)際是一個(gè)文件的數(shù)據(jù)和與其相關(guān)屬性信息的集合體,包括Key、Metadata、Data這3部分。Key為鍵值,即對(duì)象的名稱,為經(jīng)過UTF-8編碼的、長(zhǎng)度大于0且不超過1024位的字符序列。Metadata為元數(shù)據(jù),即對(duì)象的描述信息,包括系統(tǒng)元數(shù)據(jù)和用戶元數(shù)據(jù)。6.2.2 對(duì)象存儲(chǔ)服務(wù)
對(duì)象存儲(chǔ)服務(wù)類別ACB標(biāo)準(zhǔn)存儲(chǔ)低頻訪問存儲(chǔ)歸檔存儲(chǔ)時(shí)延低和吞吐量高,因而適用于有大量熱點(diǎn)文件(平均一個(gè)月多次)或小文件(小于1MB),且需要頻繁訪問數(shù)據(jù)的業(yè)務(wù)場(chǎng)景,如云應(yīng)用、大數(shù)據(jù)、移動(dòng)應(yīng)用、熱點(diǎn)視頻、社交圖片等場(chǎng)景。適用于不頻繁訪問(平均一年少于12次)但在需要時(shí)也要求快速訪問數(shù)據(jù)的業(yè)務(wù)場(chǎng)景,如文件同步/共享、企業(yè)備份等場(chǎng)景。與標(biāo)準(zhǔn)存儲(chǔ)相比,低頻訪問存儲(chǔ)有相同的數(shù)據(jù)持久性、吞吐量以及訪問時(shí)延,且成本較低,但是可用性略低于標(biāo)準(zhǔn)存儲(chǔ)。適用于很少訪問(平均一年訪問一次)數(shù)據(jù)的業(yè)務(wù)場(chǎng)景,如數(shù)據(jù)歸檔、長(zhǎng)期備份等場(chǎng)景。歸檔存儲(chǔ)安全、持久且成本極低,可以用來代替磁帶庫。但為了保持成本低廉,歸檔存儲(chǔ)的數(shù)據(jù)取回時(shí)間可能長(zhǎng)達(dá)數(shù)分鐘到數(shù)小時(shí)不等。6.2.2 對(duì)象存儲(chǔ)服務(wù)
對(duì)象存儲(chǔ)服務(wù)解決的問題(4)體驗(yàn)感知問題OBS通過智能調(diào)度和響應(yīng),優(yōu)化數(shù)據(jù)訪問路徑,并結(jié)合事件通知、傳輸加速、大數(shù)據(jù)垂直優(yōu)化等方式,為各場(chǎng)景下用戶的千億對(duì)象提供千萬級(jí)并發(fā)、超高帶寬訪問體驗(yàn)。(1)海量存儲(chǔ)問題從數(shù)據(jù)存儲(chǔ)量看,OBS提供海量數(shù)據(jù)的存儲(chǔ)服務(wù),在全球部署著N個(gè)數(shù)據(jù)中心,所有業(yè)務(wù)、存儲(chǔ)節(jié)點(diǎn)采用分布式集群方式部署,各節(jié)點(diǎn)、集群都可以獨(dú)立擴(kuò)容。(3)可靠性問題OBS擁有5級(jí)可靠性架構(gòu),即區(qū)域級(jí)可靠性,通過跨區(qū)域復(fù)制、AZ間數(shù)據(jù)容災(zāi)、AZ內(nèi)設(shè)備/數(shù)據(jù)冗余,保障數(shù)據(jù)的持久性,以及業(yè)務(wù)的連續(xù)性。(2)安全保障問題OBS支持HTTPS/SSL,支持?jǐn)?shù)據(jù)加密上傳。同時(shí)OBS可以通過訪問密鑰(ak/sk)對(duì)訪問用戶的身份進(jìn)行鑒權(quán),并結(jié)合桶策略、ACL、防盜鏈等多種方式確保數(shù)據(jù)傳輸與訪問的安全。6.2.2 對(duì)象存儲(chǔ)服務(wù)
功能名稱功能描述桶管理在OBS中,桶是OBS中存儲(chǔ)對(duì)象的容器。桶名是全局唯一的。桶所屬區(qū)域在創(chuàng)建后無法修改。OBS提供創(chuàng)建、列舉、搜索、查看、刪除等基本功能以進(jìn)行桶管理桶清單桶清單功能可以定期生成桶內(nèi)對(duì)象的元數(shù)據(jù)信息,一個(gè)桶最多支持10條桶清單對(duì)象管理對(duì)象是OBS中數(shù)據(jù)存儲(chǔ)的基本單位。通常將對(duì)象等同于文件來進(jìn)行管理,但是OBS并沒有文件系統(tǒng)中的文件和文件夾概念。為了使用戶更方便地管理數(shù)據(jù),OBS提供了一種模擬文件夾的方式,即通過在對(duì)象的名稱中增加“/”,如“test/123.jpg”。此時(shí),“test”就被模擬成了一個(gè)文件夾,“123.jpg”則被模擬成“test”文件夾下的文件名,而實(shí)際上,對(duì)象名稱仍然是“test/123.jpg”圖片處理使用圖片處理功能可以對(duì)存放在OBS中的圖片進(jìn)行瘦身、剪切、縮放、增加水印、轉(zhuǎn)換格式等操作,并且可以快速獲取到處理后的圖片生命周期管理生命周期管理是指通過配置指定的規(guī)則,實(shí)現(xiàn)定時(shí)刪除桶中的對(duì)象或定時(shí)轉(zhuǎn)換對(duì)象的存儲(chǔ)類別的功能跨區(qū)域復(fù)制跨區(qū)域復(fù)制能夠?yàn)橛脩籼峁┛鐓^(qū)域數(shù)據(jù)容災(zāi)的能力,將一個(gè)桶(源桶)中的數(shù)據(jù)自動(dòng)、異步地復(fù)制到另外一個(gè)桶(目標(biāo)桶)中,暫不支持跨賬號(hào)復(fù)制服務(wù)端加密當(dāng)啟用服務(wù)端加密功能后,用戶上傳對(duì)象時(shí),數(shù)據(jù)會(huì)在服務(wù)端被加密成密文后存儲(chǔ)。用戶下載被加密對(duì)象時(shí),存儲(chǔ)的密文會(huì)先在服務(wù)端被解密為明文,再提供給用戶信息通知OBS依賴消息通知服務(wù)提供消息通知功能,可以將OBS桶中對(duì)象的上傳、刪除等操作事件發(fā)送給指定的訂閱終端,以實(shí)時(shí)掌握OBS桶中發(fā)生的關(guān)鍵事件日志管理通過日志管理功能獲取桶的訪問數(shù)據(jù)。開啟日志管理功能后,桶的每次操作將會(huì)產(chǎn)生一條日志,并將多條日志打包成一個(gè)日志文件保存在目標(biāo)桶中,用戶可以基于日志文件進(jìn)行請(qǐng)求分析或日志審計(jì)多版本控制開啟多版本控制功能后,可以在一個(gè)桶中保留多個(gè)版本的對(duì)象,更方便地檢索和還原各個(gè)版本,在意外操作或應(yīng)用程序故障時(shí)可以快速恢復(fù)數(shù)據(jù)對(duì)象存儲(chǔ)服務(wù)功能名稱及描述6.2.2 對(duì)象存儲(chǔ)服務(wù)
不同的對(duì)象存儲(chǔ)服務(wù)工具說明和應(yīng)用場(chǎng)景工具說明應(yīng)用場(chǎng)景OBSBrowser+圖形化界面操作工具,用于訪問和管理對(duì)象,支持完善的桶管理和對(duì)象管理操作中小型企業(yè)中上傳、下載和分享個(gè)人數(shù)據(jù)等obsutil用于訪問管理OBS的命令行工具,對(duì)于熟悉命令行工具的用戶,obsutil是執(zhí)行批量處理、自動(dòng)化任務(wù)的好選擇中小型企業(yè)的IT運(yùn)維管理人員備份、分享、管理數(shù)據(jù)。命令行方式更高效,可以和腳本集成做簡(jiǎn)單自動(dòng)化處理obsfs基于FUSE的文件系統(tǒng)工具,主要用于將OBS并行文件系統(tǒng)掛載至Linux系統(tǒng),讓用戶能夠在本地像操作文件系統(tǒng)一樣直接使用OBS海量的存儲(chǔ)空間Linux操作系統(tǒng)6.2.3 彈性文件存儲(chǔ)服務(wù)
文件存儲(chǔ)以文件和文件夾的層級(jí)架構(gòu)來整理和呈現(xiàn)數(shù)據(jù)。數(shù)據(jù)會(huì)以單條信息的形式存儲(chǔ)在文件夾中,當(dāng)用戶訪問數(shù)據(jù)時(shí),存儲(chǔ)在文件中的數(shù)據(jù)會(huì)根據(jù)數(shù)量有限的元數(shù)據(jù)來進(jìn)行整理和檢索,這些元數(shù)據(jù)會(huì)告訴用戶計(jì)算機(jī)文件所在的確切位置。彈性文件服務(wù)(ScalableFileService,SFS)提供按需擴(kuò)展的高性能文件存儲(chǔ)功能,可為云上多個(gè)彈性云服務(wù)器、容器、金屬服務(wù)器提供共享訪問服務(wù)。文件存儲(chǔ)概念彈性文件服務(wù)簡(jiǎn)介圖6-12所示為華為云彈性文件服務(wù)產(chǎn)品架構(gòu)彈性文件服務(wù)可以掛載給同一個(gè)區(qū)域下的多個(gè)可用區(qū),實(shí)現(xiàn)多臺(tái)云服務(wù)器的共同訪問和文件共享;彈性文件服務(wù)可以根據(jù)需要,在不中斷應(yīng)用的情況下,增加或減少文件系統(tǒng)容量;彈性文件服務(wù)具有高性能、高可靠性的特點(diǎn),性能隨容量的增加而提升,保障數(shù)據(jù)的可持久性;彈性文件服務(wù)支持NFS,通過標(biāo)準(zhǔn)協(xié)議訪問數(shù)據(jù),無縫適配主流應(yīng)用程序進(jìn)行數(shù)據(jù)讀寫。概括來說,彈性文件服務(wù)具有文件共享、彈性擴(kuò)展、高性能、高可靠性、無縫集成、操作簡(jiǎn)單、成本低等特點(diǎn)。6.2.3 彈性文件存儲(chǔ)服務(wù)
彈性文件服務(wù)架構(gòu)及特點(diǎn)6.2.3 彈性文件存儲(chǔ)服務(wù)
不同文件系統(tǒng)類型說明文件系統(tǒng)類型文件系統(tǒng)類型存儲(chǔ)類型優(yōu)勢(shì)應(yīng)用場(chǎng)景SFS容量型—大容量、高帶寬、低成本大容量擴(kuò)展以及成本敏感型業(yè)務(wù),如媒體處理、文件共享、HPC、數(shù)據(jù)備份等。SFS容量型文件系統(tǒng)不適合海量小文件業(yè)務(wù)SFSTurboSFSTurbo標(biāo)準(zhǔn)型低時(shí)延、租戶獨(dú)享海量小文件業(yè)務(wù),如代碼存儲(chǔ)、日志存儲(chǔ)、Web服務(wù)、虛擬桌面等SFSTurbo標(biāo)準(zhǔn)型-增強(qiáng)版低時(shí)延、高帶寬、租戶獨(dú)享海量小文件業(yè)務(wù)及高帶寬型業(yè)務(wù),如代碼存儲(chǔ)、文件共享、企業(yè)OA、日志存儲(chǔ)等SFSTurbo性能型低時(shí)延、高IOPS(硬盤讀寫性能指標(biāo))、租戶獨(dú)享海量小文件、隨機(jī)I/O密集型以及時(shí)延敏感型業(yè)務(wù),如高性能網(wǎng)站、文件共享、內(nèi)容管理等SFSTurbo性能型-增強(qiáng)版低時(shí)延、高IOPS、高帶寬、租戶獨(dú)享海量小文件、時(shí)延敏感型及高帶寬型業(yè)務(wù),如圖片渲染、AI訓(xùn)練、企業(yè)OA等6.2.4 存儲(chǔ)服務(wù)的區(qū)別
不同存儲(chǔ)服務(wù)的對(duì)比云硬盤對(duì)象存儲(chǔ)服務(wù)彈性文件存儲(chǔ)服務(wù)概念可以為云服務(wù)器提供高可靠、高性能、規(guī)格豐富并且可彈性擴(kuò)展的塊存儲(chǔ)服務(wù),可滿足不同場(chǎng)景的業(yè)務(wù)需求。云硬盤類似于個(gè)人計(jì)算機(jī)中的硬盤提供海量、安全、高可靠、低成本的數(shù)據(jù)存儲(chǔ)能力,可供用戶存儲(chǔ)任意類型和大小的數(shù)據(jù)提供按需擴(kuò)展的高性能文件存儲(chǔ),可為云上多個(gè)云服務(wù)器提供共享訪問。彈性文件服務(wù)類似于Windows或Linux中的遠(yuǎn)程目錄數(shù)據(jù)存儲(chǔ)邏輯存放的是二進(jìn)制數(shù)據(jù),無法直接存放文件,如果需要存放文件,需要先格式化文件系統(tǒng)存放的是對(duì)象,可以直接存放文件,文件會(huì)自動(dòng)產(chǎn)生對(duì)應(yīng)的系統(tǒng)元數(shù)據(jù),用戶也可以自定義文件的元數(shù)據(jù)存放的是文件,會(huì)以文件和文件夾的層次結(jié)構(gòu)整理和呈現(xiàn)數(shù)據(jù)訪問方式只能在ECS/BMS中掛載使用,不能被操作系統(tǒng)應(yīng)用直接訪問,需要訪問時(shí)要先格式化成文件系統(tǒng)可以通過互聯(lián)網(wǎng)或?qū)>€訪問。需要指定桶地址進(jìn)行訪問,使用的是HTTP和HTTPS等傳輸協(xié)議在ECS/BMS中通過網(wǎng)絡(luò)協(xié)議掛載使用,支持NFS和CIFS的網(wǎng)絡(luò)協(xié)議。需要指定網(wǎng)絡(luò)地址進(jìn)行訪問,也可以將網(wǎng)絡(luò)地址映射為本地目錄后進(jìn)行訪問使用場(chǎng)景高性能計(jì)算、企業(yè)核心集群應(yīng)用、企業(yè)應(yīng)用系統(tǒng)和開發(fā)測(cè)試等大數(shù)據(jù)分析、靜態(tài)網(wǎng)站托管、在線視頻點(diǎn)播、基因測(cè)序和智能視頻監(jiān)控等高性能計(jì)算、媒體處理、文件共享和內(nèi)容管理和Web服務(wù)等容量TB級(jí)別EB級(jí)別PB級(jí)別6.1云存儲(chǔ)技術(shù)原理6.2華為云存儲(chǔ)服務(wù)6.3華為云備份與容災(zāi)服務(wù)學(xué)習(xí)要點(diǎn)6.4華為云存儲(chǔ)服務(wù)實(shí)踐6.3.1 數(shù)據(jù)備份技術(shù)原理
數(shù)據(jù)備份系統(tǒng)的組成指需要進(jìn)行數(shù)據(jù)備份的備份源。指?jìng)浞葜黧w的數(shù)據(jù)被備份至何處,如本地硬盤、SAN、NAS等。本地備份數(shù)據(jù)從本地磁盤出發(fā),通過本地的總線和內(nèi)存,經(jīng)過CPU運(yùn)算少量控制邏輯代碼以后,流回本地磁盤。如果備份主體和備份目的端不在同一設(shè)備,那么需要通過網(wǎng)絡(luò)進(jìn)行連接。一般由引擎,即備份軟件,來推動(dòng)數(shù)據(jù)從備份主體到備份的目的端。備份軟件通常包括備份軟件服務(wù)端、介質(zhì)管理服務(wù)器、各種類型的備份客戶端及其他附件的功能模塊等。指?jìng)浞輬?zhí)行引擎的工作規(guī)則,引擎需要根據(jù)設(shè)定的規(guī)則來運(yùn)轉(zhuǎn),不能一直運(yùn)轉(zhuǎn)。備份主體備份目的端備份通路備份執(zhí)行引擎?zhèn)浞莶呗詳?shù)據(jù)備份是容災(zāi)的基礎(chǔ),是為了防止系統(tǒng)出現(xiàn)操作失誤或系統(tǒng)故障導(dǎo)致數(shù)據(jù)丟失,而將全部或部分?jǐn)?shù)據(jù)復(fù)制到大容量存儲(chǔ)設(shè)備的過程。一個(gè)完整的數(shù)據(jù)備份系統(tǒng)包括:6.3.1 數(shù)據(jù)備份技術(shù)原理
備份技術(shù)的基本模式備份技術(shù)備份粒度備份技術(shù)有兩種基本模式,分別是數(shù)據(jù)恢復(fù)點(diǎn)目標(biāo)(表示業(yè)務(wù)系統(tǒng)所能容忍的數(shù)據(jù)丟失量)和數(shù)據(jù)恢復(fù)時(shí)間目標(biāo)(表示所能容忍的業(yè)務(wù)停止服務(wù)的最長(zhǎng)時(shí)間,也就是從災(zāi)難發(fā)生到業(yè)務(wù)系統(tǒng)恢復(fù)服務(wù)功能所需要的最短時(shí)間周期)。備份粒度依賴于業(yè)務(wù)需求和所需的RTO/RPO,根據(jù)粒度的不同,備份可以分為完全備份、增量備份和差異備份。6.3.1 數(shù)據(jù)備份技術(shù)原理
快照技術(shù)的定義快照技術(shù)分類全拷貝快照:鏡像分離(SplittingaMirror)。差分快照:寫時(shí)拷貝(Copy-On-Write,COW)、寫時(shí)重定向(Redirect-On-Write,ROW)、隨機(jī)寫(WriteAnywhere,WA)。通過數(shù)據(jù)快照技術(shù)可以盡可能地縮小數(shù)據(jù)備份窗口。存儲(chǔ)網(wǎng)絡(luò)行業(yè)協(xié)會(huì)對(duì)快照的定義是:對(duì)指定數(shù)據(jù)集合的一個(gè)完全可用副本,該副本包含源數(shù)據(jù)在復(fù)制時(shí)間點(diǎn)的靜態(tài)影像??煺湛梢允菙?shù)據(jù)再現(xiàn)的一個(gè)副本??煺站哂袕V泛的應(yīng)用,如可以作為備份的源、作為數(shù)據(jù)挖掘的源、作為保護(hù)應(yīng)用程序狀態(tài)的檢查點(diǎn),以及數(shù)據(jù)復(fù)制的手段等??煺占夹g(shù)6.3.1 數(shù)據(jù)備份技術(shù)原理
當(dāng)需要同時(shí)保留多個(gè)連續(xù)時(shí)間點(diǎn)快照的源數(shù)據(jù)卷,需預(yù)先創(chuàng)建多個(gè)鏡像卷,當(dāng)?shù)谝粋€(gè)鏡像卷被轉(zhuǎn)化為快照卷后,預(yù)創(chuàng)建的第二個(gè)鏡像卷立即與源數(shù)據(jù)卷同步,與源數(shù)據(jù)卷組成新的鏡像對(duì)。在快照時(shí)間點(diǎn)之前,先為源數(shù)據(jù)卷創(chuàng)建并維護(hù)一個(gè)完整的物理鏡像卷。同一數(shù)據(jù)的兩個(gè)副本將分別被保存在源數(shù)據(jù)卷和鏡像卷組成的鏡像對(duì)上。當(dāng)啟動(dòng)快照時(shí),鏡像操作停止,鏡像卷快速脫離轉(zhuǎn)換為快照卷,獲得一份數(shù)據(jù)快照。當(dāng)快照卷完成數(shù)據(jù)備份應(yīng)用后,快照卷與源數(shù)據(jù)卷同步,重新成為鏡像卷。鏡像分離的實(shí)現(xiàn)過程鏡像分離01OPTION6.3.1 數(shù)據(jù)備份技術(shù)原理
寫時(shí)拷貝02OPTION創(chuàng)建快照后,若想改寫源數(shù)據(jù)卷上數(shù)據(jù),則快照會(huì)將原始數(shù)據(jù)復(fù)制到快照卷對(duì)應(yīng)的數(shù)據(jù)塊上,然后對(duì)源卷進(jìn)行改寫。下圖所示為寫時(shí)拷貝的實(shí)現(xiàn)過程,快照前將數(shù)據(jù)p寫入塊1??煺談?chuàng)建后,若上層業(yè)務(wù)對(duì)源卷寫數(shù)據(jù)z,快照系統(tǒng)將z即將寫入的數(shù)據(jù)塊中的數(shù)據(jù)g讀出并寫入快照卷上。同時(shí),會(huì)生成一張映射表,記錄源卷及快照卷中數(shù)據(jù)變化的邏輯地址。然后,用新數(shù)據(jù)z覆蓋源卷。針對(duì)快照進(jìn)行讀操作時(shí),首先判斷數(shù)據(jù)是否在快照卷中,如果在快照卷中,則直接從快照卷讀??;若不在,則查詢映射表,去對(duì)應(yīng)源卷的邏輯地址中讀取。寫時(shí)拷貝技術(shù)中,源卷始終保持最新狀態(tài)。6.3.1 數(shù)據(jù)備份技術(shù)原理
寫時(shí)重定向03OPTION創(chuàng)建快照時(shí),會(huì)復(fù)制一份源數(shù)據(jù)指針表作為快照數(shù)據(jù)表。創(chuàng)建快照后,若發(fā)生了寫操作即寫數(shù)據(jù)z,將數(shù)據(jù)z寫入快照卷中預(yù)留的存儲(chǔ)空間。同時(shí),更新源數(shù)據(jù)指針表的記錄,使其指向新數(shù)據(jù)所在的快照卷地址。寫時(shí)重定向的實(shí)現(xiàn)過程如下圖所示。上層業(yè)務(wù)對(duì)源卷進(jìn)行讀操作時(shí),若所讀數(shù)據(jù)產(chǎn)生于創(chuàng)建快照前,即數(shù)據(jù)保存在源卷上,則上層業(yè)務(wù)從源卷中讀取;若所讀數(shù)據(jù)產(chǎn)生于創(chuàng)建快照后,則需查詢映射表,從快照卷中讀取。上層業(yè)務(wù)對(duì)快照卷進(jìn)行讀操作時(shí),若數(shù)據(jù)產(chǎn)生于創(chuàng)建快照前,即數(shù)據(jù)保存在源卷上,則上層業(yè)務(wù)查詢映射表,從源卷中讀取;若所讀數(shù)據(jù)產(chǎn)生于創(chuàng)建快照后,則直接從快照卷中讀取。6.3.2 華為云備份服務(wù)
云備份(CloudBackupandRecovery,CBR)為云內(nèi)的服務(wù)器、云硬盤、文件系統(tǒng)和云下VMware虛擬化環(huán)境提供簡(jiǎn)單易用的備份服務(wù),針對(duì)病毒入侵、人為誤刪除、軟硬件故障等場(chǎng)景,可將數(shù)據(jù)恢復(fù)到任意備份點(diǎn)。云備份概念云備份產(chǎn)品架構(gòu)備份:即一個(gè)備份對(duì)象執(zhí)行一次備份任務(wù)產(chǎn)生的備份數(shù)據(jù),包括備份對(duì)象恢復(fù)所需要的全部數(shù)據(jù)。存儲(chǔ)庫:是用來存放備份的,在創(chuàng)建備份前,需先創(chuàng)建至少一個(gè)存儲(chǔ)庫并將服務(wù)器或磁盤綁定在存儲(chǔ)庫上。備份策略:當(dāng)需要對(duì)備份對(duì)象執(zhí)行自動(dòng)備份操作時(shí),可以設(shè)置備份策略,包括備份任務(wù)執(zhí)行時(shí)間、周期、備份數(shù)據(jù)保留規(guī)則等。如圖所示,云備份產(chǎn)品架構(gòu)由備份、存儲(chǔ)庫和備份策略組成。6.3.2 華為云備份服務(wù)
備份機(jī)制和方式云備份中首次備份采用的是完全備份,備份云服務(wù)器或文件系統(tǒng)已使用的空間,后續(xù)備份為增量備份,僅備份上次備份后變化的數(shù)據(jù)。云備份提供兩種配置方式,不定期一次性備份和日常周期性備份。不定期一次性備份是用戶手動(dòng)執(zhí)行的備份,無須做備份策略,多用于操作系統(tǒng)補(bǔ)丁安裝、升級(jí)等操作之前日常周期性備份需要用戶創(chuàng)建備份策略并綁定存儲(chǔ)庫,創(chuàng)建周期性備份,多用于資源的日常備份保護(hù)用戶也可以根據(jù)業(yè)務(wù)情況將兩種方式混合使用。如右圖所示,根據(jù)數(shù)據(jù)的重要程度不同,可以將所有的服務(wù)器/文件系統(tǒng)綁定至同一個(gè)存儲(chǔ)庫,并將該存儲(chǔ)庫綁定到一個(gè)備份策略中進(jìn)行日常周期性備份。6.3.2 華為云備份服務(wù)
應(yīng)用場(chǎng)景云備份可為多種資源提供備份保護(hù)服務(wù),最大限度保障用戶數(shù)據(jù)的安全性和正確性,確保業(yè)務(wù)安全。云備份適用于數(shù)據(jù)備份和恢復(fù)的場(chǎng)景。在系統(tǒng)受黑客攻擊或病毒入侵、數(shù)據(jù)被誤刪、應(yīng)用程序更新出錯(cuò)、云服務(wù)器宕機(jī)等場(chǎng)景下,均可通過云備份快速恢復(fù)數(shù)據(jù),保障業(yè)務(wù)安全可靠。6.3.3
華為云容災(zāi)服務(wù)在6.3.2節(jié)中介紹了華為云備份服務(wù),備份主要針對(duì)病毒入侵、人為誤刪除、軟硬件故障等事件,用于業(yè)務(wù)系統(tǒng)的數(shù)據(jù)恢復(fù),其數(shù)據(jù)備份一般是在同一數(shù)據(jù)中心進(jìn)行的。備份系統(tǒng)只保護(hù)不同時(shí)間點(diǎn)版本的數(shù)據(jù),設(shè)定一天最多24個(gè)不同時(shí)間點(diǎn)的自動(dòng)備份策略。發(fā)生故障后系統(tǒng)恢復(fù)時(shí)間較長(zhǎng),可能為幾小時(shí)到幾十小時(shí)。為了更好地保護(hù)數(shù)據(jù),應(yīng)對(duì)火災(zāi)、地震等重大自然災(zāi)害,在容災(zāi)方案中,生產(chǎn)站點(diǎn)和容災(zāi)站點(diǎn)間保證一定的安全距離,保證在本地系統(tǒng)發(fā)生故障時(shí),遠(yuǎn)端可以繼續(xù)工作,切換時(shí)間可以降低至幾分鐘以保證業(yè)務(wù)的連續(xù)性。另外,容災(zāi)最高等級(jí)可以實(shí)現(xiàn)RPO為0。備份與容災(zāi)6.3.3
華為云容災(zāi)服務(wù)存儲(chǔ)容災(zāi)服務(wù)(StorageDisasterRecoveryService,SDRS)又稱存儲(chǔ)容災(zāi),是一種為彈性云服務(wù)器、云硬盤等服務(wù)提供容災(zāi)的服務(wù),如下圖所示。它通過存儲(chǔ)復(fù)制、數(shù)據(jù)冗余和緩存加速等多項(xiàng)技術(shù),為用戶提供高級(jí)別的數(shù)據(jù)可靠性以及業(yè)務(wù)連續(xù)性。存儲(chǔ)容災(zāi)服務(wù)簡(jiǎn)介6.3.3
華為云容災(zāi)服務(wù)存儲(chǔ)容災(zāi)服務(wù)特點(diǎn)按需復(fù)制:可以創(chuàng)建從生產(chǎn)站點(diǎn)至容災(zāi)站點(diǎn)的副本,也可按需將服務(wù)器復(fù)制至另一個(gè)可用區(qū)。低RTO與RPO:RTO小于30min(不包括手動(dòng)操作DNS配置、安全組配置或執(zhí)行客戶腳本等任何時(shí)間)。存儲(chǔ)容災(zāi)服務(wù)為服務(wù)器提供持續(xù)且同步的復(fù)制,保證RPO為0。保持崩潰一致性:基于存儲(chǔ)的實(shí)時(shí)同步,保證數(shù)據(jù)在兩個(gè)可用區(qū)中時(shí)刻保持崩潰一致性。6.1云存儲(chǔ)技術(shù)原理6.2華為云存儲(chǔ)服務(wù)6.3華為云備份與容災(zāi)服務(wù)學(xué)習(xí)要點(diǎn)6.4華為云存儲(chǔ)服務(wù)實(shí)踐6.4.1 華為OBS實(shí)踐登錄華為云控制臺(tái)獲取訪問密鑰獲取終端節(jié)點(diǎn)(Endpoint)下載工具并初始化1234除了通過控制臺(tái)訪問OBS以外,通過其他方式訪問OBS均需要提前獲取訪問密鑰用以鑒權(quán)。登錄華為云控制臺(tái)后指向登錄用戶名,選擇“我的憑證”選項(xiàng),選擇“訪問密鑰”選項(xiàng)根據(jù)提示操作。使用SDK、API和obsutil工具時(shí)需要提前獲取終端節(jié)點(diǎn),在地區(qū)和終端節(jié)點(diǎn)界面獲取OBS各地區(qū)的終端節(jié)點(diǎn)信息。在使用工具(OBSBrowser+、obsutil、obsfs)和SDK前,需要先下載對(duì)應(yīng)工具或SDK源碼,并進(jìn)行初始化配置。初始化01OPTION6.4.1 華為OBS實(shí)踐創(chuàng)建桶02OPTION在華為云控制臺(tái)選擇“存儲(chǔ)>對(duì)象存儲(chǔ)服務(wù)”選項(xiàng)在OBS管理控制臺(tái)左側(cè)導(dǎo)航欄選擇“桶列表”選項(xiàng)在界面右上角單擊“創(chuàng)建桶”按鈕,根據(jù)界面提示配置桶參數(shù)。單擊“立即創(chuàng)建”按鈕。(1)(2)(3)(4)如果同時(shí)購買了存儲(chǔ)包,則需要在“資源包規(guī)格確認(rèn)”界面單擊“去支付”按鈕,完成儲(chǔ)存包購買。(5)桶是OBS中存儲(chǔ)對(duì)象的容器,在上傳對(duì)象前需要先創(chuàng)建桶。OBS提供多種使用方式,用戶可以根據(jù)使用習(xí)慣、業(yè)務(wù)場(chǎng)景選擇不同的工具來創(chuàng)建桶。本示例中選擇通過控制臺(tái)創(chuàng)建桶,具體步驟如下。創(chuàng)建桶6.4.1 華為OBS實(shí)踐上傳對(duì)象03OPTION桶創(chuàng)建成功后,可以通過多種方式將文件上傳至桶,OBS最終將這些文件以對(duì)象的形式存儲(chǔ)在桶中。本示例中選擇通過控制臺(tái)上傳對(duì)象,具體步驟如下。(1)在桶列表單擊待操作的桶,進(jìn)入“對(duì)象”界面6.4.1 華為OBS實(shí)踐(2)在“上傳對(duì)象”對(duì)話框中指定對(duì)象的存儲(chǔ)類別,添加文件后開始上傳對(duì)象(3)配置元數(shù)據(jù)或WORM保留策略(此步驟為可選步驟),最后單擊“上傳”按鈕6.4.1 華為OBS實(shí)踐下載對(duì)象04OPTION用戶可以隨時(shí)隨地通過以下多種方式下載存儲(chǔ)在OBS中的文件。本示例中選擇通過控制臺(tái)下載對(duì)象,具體步驟如下。在桶列表單擊待操作的桶,進(jìn)入對(duì)象下載界面選中待下載的文件,并選擇右側(cè)的“下載”或“更多>下載為”選項(xiàng),根據(jù)瀏覽器提示完成文件下載(1)(2)(3)在OBS管理控制臺(tái)左側(cè)導(dǎo)航欄中選擇“桶列表”選項(xiàng)文件下載6.4.2 華為CBR實(shí)踐
登錄華為云控制臺(tái)01OPTION華為云備份(CBR)為云內(nèi)的彈性云服務(wù)器、裸金屬服務(wù)器、云硬盤、SFSTurbo文件系統(tǒng)、云桌面、云下VMware虛擬化環(huán)境和本地文件目錄,提供簡(jiǎn)單易用的備份服務(wù),當(dāng)發(fā)生病毒入侵、人為誤刪除、軟硬件故障等事件時(shí),可將數(shù)據(jù)恢復(fù)到任意備份點(diǎn)。下面逐步介紹如何通過華為CBR服務(wù)為服務(wù)器、磁盤、文件系統(tǒng)和線下服務(wù)器等提供備份保護(hù)。選擇“云服務(wù)器備份>購買存儲(chǔ)庫”選項(xiàng),打開左圖所示的界面。根據(jù)實(shí)際需求選擇合適的計(jì)費(fèi)模式。(1)(2)(3)單擊華為云控制臺(tái)左上角的按鈕,選擇地區(qū),單擊按鈕,選擇“存儲(chǔ)>云備份CBR”選項(xiàng)。購買云服務(wù)器備份存儲(chǔ)庫02OPTION6.4.2 華為CBR實(shí)踐
根據(jù)實(shí)際需求選擇合適的保護(hù)類型。選擇是否啟用數(shù)據(jù)庫備份。選擇備份數(shù)據(jù)冗余策略。此步驟為可選步
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 【正版授權(quán)】 ISO 23649:2025 EN Chemicals for the leather tanning industry - Determination of cyclosiloxanes
- 【正版授權(quán)】 ISO 3518:2025 EN Essential oil of sandalwood (Santalum album L.)
- 【正版授權(quán)】 ISO 18162:2024 EN Biotechnology - Biobanking - Requirements for human neural stem cells derived from pluripotent stem cells
- 2025年度標(biāo)準(zhǔn)托盤租賃及全程跟蹤服務(wù)協(xié)議
- 二手機(jī)械二手交易與環(huán)保處理服務(wù)合同(2025版)
- 2025年度二手房購房貸款保險(xiǎn)合同范本
- 2025年辦公設(shè)備升級(jí)改造項(xiàng)目合作協(xié)議
- 生產(chǎn)計(jì)劃的周期性評(píng)審與調(diào)整
- 農(nóng)業(yè)生產(chǎn)的安全防護(hù)措施計(jì)劃
- 如何制定子女的教育基金計(jì)劃
- 配電箱試驗(yàn)項(xiàng)目
- 固體廢棄物檢查記錄
- 溫室大棚花卉苗圃采暖方案空氣源熱泵
- BEC商務(wù)英語高級(jí)考試歷年真題
- 初二地理中考復(fù)習(xí)備考策略與計(jì)劃
- GB/T 5465.1-2009電氣設(shè)備用圖形符號(hào)第1部分:概述與分類
- 2023年遼寧鐵道職業(yè)技術(shù)學(xué)院高職單招(數(shù)學(xué))試題庫含答案解析
- 黔2022-T122 磷石膏砂漿噴筑復(fù)合墻標(biāo)準(zhǔn)圖集 第1部分:輕鋼龍骨-磷石膏砂漿噴筑復(fù)合墻體
- GB 29444-2012煤炭井工開采單位產(chǎn)品能源消耗限額
- CAPP教學(xué)講解課件
- 精細(xì)化學(xué)品化學(xué)-緒論課件
評(píng)論
0/150
提交評(píng)論