2025分布式存儲(chǔ)協(xié)議互聯(lián)技術(shù)要求

參考文 伴隨數(shù)據(jù)呈現(xiàn)爆炸式增長(zhǎng)，多元業(yè)務(wù)跨不同協(xié)議進(jìn)行數(shù)據(jù)訪問(wèn)己成為分布式存儲(chǔ)領(lǐng)域的重要發(fā)展趨勢(shì)。為滿足一份非結(jié)構(gòu)化數(shù)據(jù)被主機(jī)上的新型計(jì)算多元業(yè)務(wù)跨文件、對(duì)象等協(xié)議訪問(wèn)，實(shí)現(xiàn)數(shù)據(jù)實(shí)時(shí)共享互通，針對(duì)分布式存儲(chǔ)系統(tǒng)提出分布式存儲(chǔ)協(xié)議互聯(lián)技術(shù)。作為一種新的存儲(chǔ)實(shí)現(xiàn)方式，本文件旨在給出分布式存儲(chǔ)協(xié)議互聯(lián)的技術(shù)架構(gòu)，并規(guī)定實(shí)現(xiàn)分布式存儲(chǔ)協(xié)議互聯(lián)的技術(shù)要求，從而滿足在面向單一非結(jié)構(gòu)化數(shù)據(jù)訪問(wèn)服務(wù)設(shè)計(jì)的傳統(tǒng)分布式存儲(chǔ)等關(guān)鍵特性不變的基礎(chǔ)上，支持非結(jié)構(gòu)化數(shù)據(jù)多業(yè)務(wù)跨協(xié)議應(yīng)用，減少不同協(xié)議訪問(wèn)產(chǎn)生的數(shù)據(jù)副本，最大限度的減少數(shù)據(jù)流動(dòng)，降低實(shí)時(shí)并發(fā)訪問(wèn)語(yǔ)義操作損失，提升業(yè)務(wù)性能及空間存儲(chǔ)數(shù)據(jù)利用率，進(jìn)而有助于降低業(yè)務(wù)持續(xù)運(yùn)行下的能耗，通過(guò)單一數(shù)據(jù)副本互通共享，提升存儲(chǔ)系統(tǒng)的空間效率和整體效分布式存儲(chǔ)distributed[來(lái)源：GB/T36074.3-2019，3.17]存儲(chǔ)協(xié)議storage注：存儲(chǔ)協(xié)議互聯(lián)protocolinterconnectionfor注：為滿足一份數(shù)據(jù)被主機(jī)多樣應(yīng)用跨文件、對(duì)象、大數(shù)據(jù)存儲(chǔ)協(xié)議實(shí)時(shí)訪問(wèn)，分布式存儲(chǔ)基于全局可擴(kuò)展數(shù)據(jù)對(duì)象層提供全局單一副本的數(shù)據(jù)共享存儲(chǔ)方式，同時(shí)通過(guò)統(tǒng)一的存儲(chǔ)協(xié)議語(yǔ)義映射處理，實(shí)現(xiàn)文件、對(duì)象、大數(shù)據(jù)存儲(chǔ)協(xié)議同時(shí)關(guān)聯(lián)接入及語(yǔ)義操作兼容。元數(shù)據(jù)注：本文件中的元數(shù)據(jù)包含來(lái)自主機(jī)應(yīng)用產(chǎn)生的創(chuàng)建時(shí)間、修改時(shí)間、類型、訪問(wèn)權(quán)限等信息，也包含分布式存儲(chǔ)系統(tǒng)內(nèi)產(chǎn)生的數(shù)據(jù)邏輯地址與物理地址映射等信息。統(tǒng)一元數(shù)據(jù)unified注：協(xié)議元數(shù)據(jù)包括目錄（文件）、桶（對(duì)象）元數(shù)據(jù)組織organizationof數(shù)據(jù)組織organizationof[來(lái)源：GB/T39362—2020，3.7，有修改]ACL：訪問(wèn)控制列表（AccessControlList）AD：活動(dòng)目錄（ActiveDirectory）AK/SK：訪問(wèn)密鑰/保密密鑰（AccessKey/SecretAccessKey）API：應(yīng)用程序編程接口（ApplicationProgrammingInterface）CIFS：通用網(wǎng)絡(luò)文件系統(tǒng)（CommonInternetFileSystem）CPU：中央處理單元（CentralProcessingUnit）HDFS：Hadoop分布式文件系統(tǒng)（HadoopDistributedFileSystem）LDAP：輕型目錄訪問(wèn)協(xié)議（LightweightDirectoryAccessProtocol）NFS：網(wǎng)絡(luò)文件系統(tǒng)（NetworkFileSystem）NIS：網(wǎng)絡(luò)信息服務(wù)（NetworkInformationPOSIX：可移植操作系統(tǒng)接口（PortableOperatingSystemInterface）QoS：服務(wù)質(zhì)量（QualityofService）SDK：軟件開(kāi)發(fā)工具包（SoftwareDevelopmentKit）SMB：服務(wù)器消息塊（ServerMessageBlock）為滿足一份數(shù)據(jù)被主機(jī)多樣應(yīng)用跨文件、對(duì)象、大數(shù)據(jù)存儲(chǔ)協(xié)議實(shí)時(shí)訪問(wèn)，分布式存儲(chǔ)協(xié)議互聯(lián)技術(shù)基于全局可擴(kuò)展數(shù)據(jù)對(duì)象層，提供全局單一副本的數(shù)據(jù)共享存儲(chǔ)方式，同時(shí)通過(guò)統(tǒng)一的存儲(chǔ)協(xié)議11來(lái)自文件應(yīng)用的數(shù)據(jù)（文件A來(lái)自文件應(yīng)用的數(shù)據(jù)（文件A）由N協(xié)議寫(xiě)入并提供文件存儲(chǔ)協(xié)議服務(wù)，文件A數(shù)據(jù)映射和數(shù)據(jù)映射后，形成可擴(kuò)展數(shù)據(jù)對(duì)象層中全局統(tǒng)一的元數(shù)據(jù)對(duì)象和數(shù)據(jù)對(duì)象，并實(shí)現(xiàn)元數(shù)據(jù)組織和數(shù)據(jù)組織；當(dāng)對(duì)象應(yīng)用希望通過(guò)S3協(xié)議讀取文件A時(shí)，S3協(xié)議通過(guò)統(tǒng)一語(yǔ)義處理層映射到文件A，然后從可擴(kuò)展數(shù)據(jù)對(duì)象層訪問(wèn)到文件，最終映射轉(zhuǎn)換為指定S協(xié)議格式的數(shù)據(jù)內(nèi)容，實(shí)現(xiàn)文件A以N協(xié)議寫(xiě)入，S協(xié)議讀取。應(yīng)支持S3API注：S3指亞馬遜簡(jiǎn)單存儲(chǔ)（AmazonSimpleStorageService）支持賬戶的創(chuàng)建、查詢、修改、刪除、容器列舉等常用操作，支持容器的創(chuàng)建、查詢、注：Swift指對(duì)象存儲(chǔ)協(xié)議標(biāo)準(zhǔn)（OpenStackObjectStorageSwift）6）OpenStackSwift支持KeyStone用戶認(rèn)證