數(shù)據(jù)復(fù)制軟件行業(yè)操作系統(tǒng)層復(fù)制技術(shù)

數(shù)據(jù)復(fù)制軟件行業(yè)操作系統(tǒng)層復(fù)制技術(shù)數(shù)據(jù)復(fù)制軟件行業(yè)操作系統(tǒng)層復(fù)制技術(shù)根據(jù)數(shù)據(jù)捕獲環(huán)節(jié)的不同，操作系統(tǒng)層復(fù)制可以分為字節(jié)級(jí)復(fù)制和塊級(jí)復(fù)制。字節(jié)級(jí)復(fù)制技術(shù)是指對(duì)生產(chǎn)服務(wù)器文件系統(tǒng)的I/O操作信息進(jìn)行實(shí)時(shí)捕獲，生成序列化I/O操作日志并發(fā)送至目標(biāo)服務(wù)器，操作日志包括I/O操作發(fā)生的時(shí)間、發(fā)起的進(jìn)程、操作具體針對(duì)的文件、文件具體操作的位置以及操作的內(nèi)容。目標(biāo)服務(wù)器收到I/O操作日志后進(jìn)行數(shù)據(jù)的寫(xiě)入，完成數(shù)據(jù)復(fù)制。該技術(shù)具有對(duì)計(jì)算機(jī)資源占用小、復(fù)制顆粒度細(xì)等優(yōu)勢(shì)，能夠?qū)崿F(xiàn)高實(shí)時(shí)性的數(shù)據(jù)復(fù)制，在容災(zāi)以及持續(xù)數(shù)據(jù)保護(hù)領(lǐng)域有較強(qiáng)的優(yōu)勢(shì)。塊級(jí)復(fù)制技術(shù)是指在生產(chǎn)服務(wù)器的文件系統(tǒng)之下和磁盤(pán)驅(qū)動(dòng)之上的卷層設(shè)置驅(qū)動(dòng)模塊，實(shí)現(xiàn)磁盤(pán)數(shù)據(jù)變化的捕捉。通過(guò)對(duì)生產(chǎn)服務(wù)器磁盤(pán)空間進(jìn)行劃分，構(gòu)建磁盤(pán)位圖，將發(fā)生數(shù)據(jù)變化的位圖信息發(fā)送至目標(biāo)服務(wù)器并與前次位圖信息進(jìn)行整合，實(shí)現(xiàn)數(shù)據(jù)的復(fù)制。和字節(jié)級(jí)復(fù)制相比，塊級(jí)復(fù)制顆粒度較粗，單次傳輸數(shù)據(jù)量較大，適用于具有海量文件的文件系統(tǒng)或者非標(biāo)準(zhǔn)化文件系統(tǒng)的場(chǎng)景，在定時(shí)備份領(lǐng)域具有較強(qiáng)的優(yōu)勢(shì)。操作系統(tǒng)層復(fù)制技術(shù)由于不受底層存儲(chǔ)型號(hào)的限制，可以實(shí)現(xiàn)跨物理、虛擬、云等復(fù)雜環(huán)境，是第三方數(shù)據(jù)復(fù)制軟件企業(yè)主要使用的技術(shù)。部分存儲(chǔ)硬件企業(yè)在發(fā)展過(guò)程中，通過(guò)不斷收購(gòu)第三方數(shù)據(jù)復(fù)制軟件企業(yè)，也擁有了較成熟的操作系統(tǒng)層復(fù)制技術(shù)。數(shù)據(jù)復(fù)制技術(shù)行業(yè)下游催生需求空間數(shù)據(jù)復(fù)制軟件的主要功能是將一組數(shù)據(jù)從一個(gè)數(shù)據(jù)源拷貝到一個(gè)或多個(gè)數(shù)據(jù)源，涵蓋數(shù)據(jù)的監(jiān)控、獲取、傳輸、存儲(chǔ)、校驗(yàn)等步驟。根據(jù)獲取數(shù)據(jù)的層級(jí)不同，數(shù)據(jù)復(fù)制軟件也可分為存儲(chǔ)硬件層數(shù)據(jù)復(fù)制軟件、操作系統(tǒng)層數(shù)據(jù)復(fù)制軟件和數(shù)據(jù)庫(kù)層數(shù)據(jù)復(fù)制軟件：存儲(chǔ)硬件層數(shù)據(jù)復(fù)制軟件從存儲(chǔ)設(shè)備中直接獲取數(shù)據(jù)，并將其復(fù)制至新的存儲(chǔ)設(shè)備；操作系統(tǒng)層數(shù)據(jù)復(fù)制軟件是從操作系統(tǒng)中捕獲數(shù)據(jù)，并將其復(fù)制至新的操作系統(tǒng)；數(shù)據(jù)庫(kù)層數(shù)據(jù)復(fù)制軟件從數(shù)據(jù)庫(kù)捕獲數(shù)據(jù)，并將其復(fù)制至新的數(shù)據(jù)庫(kù)。數(shù)據(jù)復(fù)制軟件經(jīng)典的應(yīng)用場(chǎng)景為災(zāi)備，包括備份和容災(zāi)，用于保障用戶(hù)的數(shù)據(jù)安全和業(yè)務(wù)連續(xù)性。同時(shí)，隨著信息技術(shù)的不斷發(fā)展，大數(shù)據(jù)逐漸開(kāi)始落地應(yīng)用，數(shù)據(jù)復(fù)制軟件作為數(shù)據(jù)流通的基礎(chǔ)工具軟件，也越來(lái)越多地應(yīng)用于數(shù)據(jù)分發(fā)、共享、集成、治理等更多大數(shù)據(jù)領(lǐng)域。數(shù)據(jù)復(fù)制軟件在各應(yīng)用場(chǎng)景的具體情況備份是指對(duì)源數(shù)據(jù)形成一份同樣的拷貝，存放至其它設(shè)備中。在發(fā)生自然災(zāi)害、軟硬件故障、人為誤操作等原因?qū)е聰?shù)據(jù)失效時(shí)，可通過(guò)恢復(fù)備份的方式重新找回失效數(shù)據(jù)。備份被認(rèn)為是數(shù)據(jù)保護(hù)的最后一道防線(xiàn)，確保在企業(yè)遭遇事故時(shí)至少擁有一份數(shù)據(jù)可以用來(lái)恢復(fù)數(shù)據(jù)復(fù)制軟件是數(shù)據(jù)備份的核心。備份數(shù)據(jù)的可用性依賴(lài)于數(shù)據(jù)復(fù)制的完整性和一致性。容災(zāi)是指在本地或異地，建立兩套或多套功能相同的業(yè)務(wù)系統(tǒng)，互相之間可以進(jìn)行健康狀態(tài)監(jiān)視和功能切換，當(dāng)主生產(chǎn)系統(tǒng)非計(jì)劃性停止工作時(shí)，整個(gè)應(yīng)用系統(tǒng)可以切換到備用業(yè)務(wù)系統(tǒng)，使得該系統(tǒng)功能可以繼續(xù)正常工作。根據(jù)保障等級(jí)由低至高，容災(zāi)可以分為數(shù)據(jù)級(jí)、應(yīng)用級(jí)和業(yè)務(wù)級(jí)。數(shù)據(jù)級(jí)容災(zāi)重點(diǎn)在于數(shù)據(jù)，災(zāi)難發(fā)生后可以確保用戶(hù)原有的數(shù)據(jù)不會(huì)丟失或丟失量最少，通過(guò)備份可以實(shí)現(xiàn)數(shù)據(jù)級(jí)容災(zāi)應(yīng)用級(jí)容災(zāi)的重點(diǎn)在于應(yīng)用系統(tǒng)的不間斷服務(wù)，讓終端用戶(hù)感受不到災(zāi)難的發(fā)生，應(yīng)用的服務(wù)請(qǐng)求能夠繼續(xù)平穩(wěn)運(yùn)行并對(duì)外提供服務(wù)。數(shù)據(jù)復(fù)制軟件是實(shí)現(xiàn)應(yīng)用級(jí)容災(zāi)的重要工具，只有兩套業(yè)務(wù)系統(tǒng)擁有相同或幾乎相同的數(shù)據(jù)，才能保證應(yīng)用的順利切換。數(shù)據(jù)復(fù)制的實(shí)時(shí)性決定了系統(tǒng)切換后的數(shù)據(jù)丟失量，是衡量容災(zāi)系統(tǒng)等級(jí)的重要指標(biāo)業(yè)務(wù)級(jí)容災(zāi)是最高級(jí)別的容災(zāi)，超過(guò)了IT系統(tǒng)層面的保障，還包括對(duì)辦公地點(diǎn)、場(chǎng)所、人員、網(wǎng)絡(luò)等的保障。大數(shù)據(jù)可以總結(jié)事物發(fā)展規(guī)律、預(yù)測(cè)發(fā)展趨勢(shì)并指導(dǎo)決策，因此在生產(chǎn)和生活中得到了越來(lái)越廣泛的應(yīng)用。而海量數(shù)據(jù)從生產(chǎn)到發(fā)揮價(jià)值，需要經(jīng)過(guò)采集、處理、分析等環(huán)節(jié)，其中大數(shù)據(jù)采集與預(yù)處理作為大數(shù)據(jù)生命周期的第一環(huán)節(jié)，是釋放數(shù)字價(jià)值的前提數(shù)據(jù)復(fù)制軟件是大數(shù)據(jù)采集的基礎(chǔ)工具，可以將海量數(shù)據(jù)實(shí)時(shí)傳輸至大數(shù)據(jù)平臺(tái)或分發(fā)至各數(shù)據(jù)需求部門(mén)，為數(shù)據(jù)仿真、分析、決策、風(fēng)控等場(chǎng)景提供實(shí)時(shí)、安全、可靠的數(shù)據(jù)。在早期階段，數(shù)據(jù)復(fù)制軟件主要是依托存儲(chǔ)硬件存在，是存儲(chǔ)硬件的重要附加功能。近年來(lái)，隨著技術(shù)發(fā)展，存儲(chǔ)介質(zhì)也不斷變化，數(shù)據(jù)復(fù)制的內(nèi)容及應(yīng)用場(chǎng)景也逐步拓寬，目前進(jìn)入云計(jì)算和大數(shù)據(jù)時(shí)代的數(shù)據(jù)復(fù)制階段。數(shù)據(jù)復(fù)制技術(shù)行業(yè)操作系統(tǒng)層復(fù)制技術(shù)概況根據(jù)數(shù)據(jù)捕獲環(huán)節(jié)的不同，操作系統(tǒng)層復(fù)制可以分為字節(jié)級(jí)復(fù)制和塊級(jí)復(fù)制。字節(jié)級(jí)復(fù)制技術(shù)是指對(duì)生產(chǎn)服務(wù)器文件系統(tǒng)的I/O操作信息進(jìn)行實(shí)時(shí)捕獲，生成序列化I/O操作日志并發(fā)送至目標(biāo)服務(wù)器，操作日志包括I/O操作發(fā)生的時(shí)間、發(fā)起的進(jìn)程、操作具體針對(duì)的文件、文件具體操作的位置以及操作的內(nèi)容。目標(biāo)服務(wù)器收到I/O操作日志后進(jìn)行數(shù)據(jù)的寫(xiě)入，完成數(shù)據(jù)復(fù)制。該技術(shù)具有對(duì)計(jì)算機(jī)資源占用小、復(fù)制顆粒度細(xì)等優(yōu)勢(shì)，能夠?qū)崿F(xiàn)高實(shí)時(shí)性的數(shù)據(jù)復(fù)制，在容災(zāi)以及持續(xù)數(shù)據(jù)保護(hù)領(lǐng)域有較強(qiáng)的優(yōu)勢(shì)。塊級(jí)復(fù)制技術(shù)是指在生產(chǎn)服務(wù)器的文件系統(tǒng)之下和磁盤(pán)驅(qū)動(dòng)之上的卷層設(shè)置驅(qū)動(dòng)模塊，實(shí)現(xiàn)磁盤(pán)數(shù)據(jù)變化的捕捉。通過(guò)對(duì)生產(chǎn)服務(wù)器磁盤(pán)空間進(jìn)行劃分，構(gòu)建磁盤(pán)位圖，將發(fā)生數(shù)據(jù)變化的位圖信息發(fā)送至目標(biāo)服務(wù)器并與前次位圖信息進(jìn)行整合，實(shí)現(xiàn)數(shù)據(jù)的復(fù)制。和字節(jié)級(jí)復(fù)制相比，塊級(jí)復(fù)制顆粒度較粗，單次傳輸數(shù)據(jù)量較大，適用于具有海量文件的文件系統(tǒng)或者非標(biāo)準(zhǔn)化文件系統(tǒng)的場(chǎng)景，在定時(shí)備份領(lǐng)域具有較強(qiáng)的優(yōu)勢(shì)。操作系統(tǒng)層復(fù)制技術(shù)由于不受底層存儲(chǔ)型號(hào)的限制，可以實(shí)現(xiàn)跨物理、虛擬、云等復(fù)雜環(huán)境，是第三方數(shù)據(jù)復(fù)制軟件企業(yè)主要使用的技術(shù)。部分存儲(chǔ)硬件企業(yè)在發(fā)展過(guò)程中，通過(guò)不斷收購(gòu)第三方數(shù)據(jù)復(fù)制軟件企業(yè)，也擁有了較成熟的操作系統(tǒng)層復(fù)制技術(shù)。數(shù)據(jù)復(fù)制技術(shù)行業(yè)發(fā)展現(xiàn)狀數(shù)據(jù)復(fù)制技術(shù)主要包含了數(shù)據(jù)抓取、數(shù)據(jù)傳輸和數(shù)據(jù)復(fù)原三個(gè)環(huán)節(jié)。數(shù)據(jù)抓取環(huán)節(jié)主要指對(duì)生產(chǎn)端的變化數(shù)據(jù)進(jìn)行識(shí)別和提取，要求識(shí)別顆粒度細(xì)且對(duì)生產(chǎn)系統(tǒng)影響?。粩?shù)據(jù)傳輸環(huán)節(jié)主要指對(duì)數(shù)據(jù)進(jìn)行分段拆分組合、加密、壓縮等，實(shí)現(xiàn)準(zhǔn)確、高效、安全的數(shù)據(jù)傳輸；數(shù)據(jù)復(fù)原主要指目標(biāo)端的數(shù)據(jù)接收和數(shù)據(jù)寫(xiě)入，其核心在于快速寫(xiě)入的同時(shí)，保證數(shù)據(jù)的一致性。根據(jù)獲取數(shù)據(jù)的層級(jí)不同，數(shù)據(jù)復(fù)制軟件可分為存儲(chǔ)硬件層復(fù)制、操作系統(tǒng)層復(fù)制和數(shù)據(jù)庫(kù)層復(fù)制，不同層級(jí)的數(shù)據(jù)復(fù)制技術(shù)在功能、性能上存在一定的差異，各有特點(diǎn)，適用不同的應(yīng)用場(chǎng)景。數(shù)據(jù)復(fù)制技術(shù)行業(yè)發(fā)展現(xiàn)狀近年來(lái)，隨著數(shù)據(jù)量不斷增加，導(dǎo)致數(shù)據(jù)保護(hù)和互聯(lián)互通的需求增加，數(shù)據(jù)復(fù)制軟件作為提供數(shù)據(jù)傳輸?shù)幕A(chǔ)工具，其作用日益突出，市場(chǎng)空間廣闊。國(guó)內(nèi)數(shù)字經(jīng)濟(jì)蓬勃發(fā)展，各行業(yè)數(shù)字化轉(zhuǎn)型升級(jí)速度加快，催生更多數(shù)據(jù)流動(dòng)需求，而數(shù)據(jù)安全和業(yè)務(wù)連續(xù)性作為數(shù)字經(jīng)濟(jì)發(fā)展的重要基礎(chǔ)，也得到國(guó)家的重視，如國(guó)家先后頒布了《中華人民共和國(guó)網(wǎng)絡(luò)安全法》、《中華人民共和國(guó)數(shù)據(jù)安全法》、《關(guān)鍵信息基礎(chǔ)設(shè)施安全保護(hù)條例》等政策，為數(shù)字經(jīng)濟(jì)發(fā)展保駕護(hù)航，有望推動(dòng)數(shù)據(jù)復(fù)制軟件在災(zāi)備領(lǐng)域的市場(chǎng)空間增長(zhǎng)。根據(jù)數(shù)據(jù)顯示，我國(guó)災(zāi)備市場(chǎng)規(guī)模由2016年的135．3億元增長(zhǎng)至2020年的290．7億元，復(fù)合年均增長(zhǎng)率為21．1%，預(yù)計(jì)2022年將達(dá)367．2億元；數(shù)字經(jīng)濟(jì)規(guī)模由2016年的22．6萬(wàn)億元增長(zhǎng)至2021年的45．5萬(wàn)億元，占GDP的比重也從30．28%提升至39．78%。隨著國(guó)內(nèi)數(shù)字經(jīng)濟(jì)蓬勃發(fā)展，各行業(yè)數(shù)字化轉(zhuǎn)型升級(jí)速度加快，催生更多數(shù)據(jù)流動(dòng)需求，而數(shù)據(jù)安全和業(yè)務(wù)連續(xù)性作為數(shù)字經(jīng)濟(jì)發(fā)展的重要基礎(chǔ)，也得到國(guó)家的重視，如國(guó)家先后頒布了《中華人民共和國(guó)網(wǎng)絡(luò)安全法》、《中華人民共和國(guó)數(shù)據(jù)安全法》、《關(guān)鍵信息基礎(chǔ)設(shè)施安全保護(hù)條例》等政策，為數(shù)字經(jīng)濟(jì)發(fā)展保駕護(hù)航，有望推動(dòng)數(shù)據(jù)復(fù)制軟件在災(zāi)備領(lǐng)域的市場(chǎng)空間增長(zhǎng)。根據(jù)數(shù)據(jù)顯示，我國(guó)災(zāi)備市場(chǎng)規(guī)模由2016年的135．3億元增長(zhǎng)至2020年的290．7億元，復(fù)合年均增長(zhǎng)率為21．1%，預(yù)計(jì)2022年將達(dá)367．2億元；數(shù)字經(jīng)濟(jì)規(guī)模由2016年的22．6萬(wàn)億元增長(zhǎng)至2021年的45．5萬(wàn)億元，占GDP的比重也從30．28%提升至39．78%。大數(shù)據(jù)領(lǐng)域是數(shù)據(jù)復(fù)制軟件的一個(gè)新興應(yīng)用方向。近年來(lái)，隨著大數(shù)據(jù)技術(shù)不斷成熟及應(yīng)用范圍進(jìn)一步拓寬，其市場(chǎng)規(guī)模不斷擴(kuò)大，而數(shù)據(jù)復(fù)制軟件作為大數(shù)據(jù)產(chǎn)業(yè)的基礎(chǔ)支撐軟件，在數(shù)據(jù)匯聚、采集等環(huán)節(jié)將起到越來(lái)越重要的作用，市場(chǎng)規(guī)模也將隨之快速增長(zhǎng)。根據(jù)數(shù)據(jù)顯示，2021年我國(guó)大數(shù)據(jù)產(chǎn)業(yè)規(guī)模達(dá)1．3萬(wàn)億元，逐漸步入高質(zhì)量發(fā)展階段。大數(shù)據(jù)領(lǐng)域是數(shù)據(jù)復(fù)制軟件的一個(gè)新興應(yīng)用方向。近年來(lái)，隨著大數(shù)據(jù)技術(shù)不斷成熟及應(yīng)用范圍進(jìn)一步拓寬，其市場(chǎng)規(guī)模不斷擴(kuò)大，而數(shù)據(jù)復(fù)制軟件作為大數(shù)據(jù)產(chǎn)業(yè)的基礎(chǔ)支撐軟件，在數(shù)據(jù)匯聚、采集等環(huán)節(jié)將起到越來(lái)越重要的作用，市場(chǎng)規(guī)模也將隨之快速增長(zhǎng)。根據(jù)數(shù)據(jù)顯示，2021年我國(guó)大數(shù)據(jù)產(chǎn)業(yè)規(guī)模達(dá)1．3萬(wàn)億元，逐漸步入高質(zhì)量發(fā)展階段。數(shù)據(jù)復(fù)制技術(shù)發(fā)展趨勢(shì)數(shù)據(jù)復(fù)制技術(shù)最早是由存儲(chǔ)硬件及數(shù)據(jù)庫(kù)廠商開(kāi)發(fā)，作為其存儲(chǔ)硬件或數(shù)據(jù)庫(kù)軟件的輔助工具，通常與存儲(chǔ)硬件或數(shù)據(jù)庫(kù)綁定，只能用于本公司的存儲(chǔ)硬件或數(shù)據(jù)庫(kù)之間的數(shù)據(jù)復(fù)制。其優(yōu)點(diǎn)在于對(duì)本公司的存儲(chǔ)或數(shù)據(jù)庫(kù)產(chǎn)品的兼容良好、穩(wěn)定性高、數(shù)據(jù)復(fù)制速度快，但在靈活性和可擴(kuò)展性。隨著信息技術(shù)的發(fā)展，各行業(yè)信息系統(tǒng)不斷升級(jí)和迭代，存儲(chǔ)及數(shù)據(jù)庫(kù)類(lèi)型多樣化，數(shù)據(jù)量的提升也帶來(lái)了分級(jí)存儲(chǔ)、分級(jí)備份的需求，與硬件或數(shù)據(jù)庫(kù)綁定的復(fù)制技術(shù)功能單一、缺乏靈活性等缺點(diǎn)逐漸顯現(xiàn)。軟硬件解耦的數(shù)據(jù)復(fù)制技術(shù)可以實(shí)現(xiàn)不同存儲(chǔ)硬件、不同數(shù)據(jù)庫(kù)之間的數(shù)據(jù)復(fù)制，在信息系統(tǒng)升級(jí)、數(shù)據(jù)分級(jí)存儲(chǔ)等場(chǎng)景下具有較強(qiáng)的優(yōu)勢(shì)，有望成為未來(lái)數(shù)據(jù)復(fù)制行業(yè)的重要發(fā)展方向。同時(shí)，在國(guó)內(nèi)信息系統(tǒng)軟硬件安全可信的趨勢(shì)下，國(guó)產(chǎn)存儲(chǔ)設(shè)備和數(shù)據(jù)庫(kù)紛紛涌現(xiàn)，軟硬件解耦的數(shù)據(jù)復(fù)制技術(shù)也將在信息系統(tǒng)國(guó)產(chǎn)化進(jìn)程中發(fā)揮重要作用，加速?lài)?guó)產(chǎn)化進(jìn)程。云計(jì)算相較于傳統(tǒng)IT架構(gòu)，具有資源配置效率高、運(yùn)維難度低等優(yōu)勢(shì)。隨著云計(jì)算技術(shù)和基礎(chǔ)設(shè)施的逐步成熟，越來(lái)越多的企業(yè)開(kāi)始遷移上云。數(shù)據(jù)復(fù)制技術(shù)也從本地?cái)?shù)據(jù)復(fù)制向云端數(shù)據(jù)復(fù)制發(fā)展。和本地IT架構(gòu)不同的是，云計(jì)算架構(gòu)將底層硬件設(shè)備虛擬化后形成統(tǒng)一的計(jì)算資源、存儲(chǔ)資源和網(wǎng)絡(luò)資源，企業(yè)在云端的業(yè)務(wù)系統(tǒng)均統(tǒng)一部署在數(shù)據(jù)中心的虛擬平臺(tái)上，因此云端復(fù)制和本地復(fù)制相比，傳輸環(huán)境存在較大的差異，云端復(fù)制的傳輸具有帶寬窄、傳輸不穩(wěn)定等特點(diǎn)，對(duì)復(fù)制技術(shù)的壓縮能力、斷點(diǎn)續(xù)傳能力提出了更高的要求。同時(shí)，云端復(fù)制還需兼顧數(shù)據(jù)隱私問(wèn)題，特別是在公有云的場(chǎng)景下，云供應(yīng)商有較大的權(quán)限，可以對(duì)數(shù)據(jù)進(jìn)行管理，因此在云端復(fù)制場(chǎng)景下，數(shù)據(jù)的脫敏、加密也是云端復(fù)制技術(shù)需要考慮的重要問(wèn)題。大數(shù)據(jù)平臺(tái)是為了滿(mǎn)足大數(shù)據(jù)的存儲(chǔ)、運(yùn)算、分析、展現(xiàn)的軟件平臺(tái)，主要功能包括數(shù)據(jù)接入、數(shù)據(jù)處理、數(shù)據(jù)存儲(chǔ)、查詢(xún)檢索、分析挖掘、數(shù)據(jù)集成等。大數(shù)據(jù)平臺(tái)擁有特殊的文件系統(tǒng)、數(shù)據(jù)庫(kù)及數(shù)據(jù)處理模塊，以適配大數(shù)據(jù)的查詢(xún)、存儲(chǔ)和計(jì)算。以Hadoop為例，Hadoop平臺(tái)采用HDFS分布式文件系統(tǒng)和HBase分布式數(shù)據(jù)庫(kù)，通過(guò)Hive數(shù)據(jù)倉(cāng)庫(kù)進(jìn)行數(shù)據(jù)的存儲(chǔ)、查詢(xún)和分析，與傳統(tǒng)的數(shù)據(jù)庫(kù)結(jié)構(gòu)存在較大的差別，因此傳統(tǒng)的數(shù)據(jù)庫(kù)數(shù)據(jù)復(fù)制技術(shù)無(wú)法實(shí)現(xiàn)大數(shù)據(jù)平臺(tái)間的數(shù)據(jù)實(shí)時(shí)復(fù)制，亦無(wú)法實(shí)現(xiàn)由傳統(tǒng)數(shù)據(jù)庫(kù)向大數(shù)據(jù)平臺(tái)的數(shù)據(jù)實(shí)時(shí)復(fù)制。隨著大數(shù)據(jù)技術(shù)不斷演進(jìn)和應(yīng)用持續(xù)深化，以數(shù)據(jù)為核心的大數(shù)據(jù)產(chǎn)業(yè)生態(tài)正在加速構(gòu)建。大數(shù)據(jù)平臺(tái)作為基礎(chǔ)工具，將隨著大數(shù)據(jù)行業(yè)應(yīng)用的不斷深化，得到越來(lái)越廣泛的應(yīng)用。同時(shí)，傳統(tǒng)數(shù)據(jù)庫(kù)中的數(shù)據(jù)也將越來(lái)越多地匯聚至大數(shù)據(jù)平臺(tái)，進(jìn)行數(shù)據(jù)分析挖掘等，以發(fā)揮更大地?cái)?shù)據(jù)價(jià)值。因此，大數(shù)據(jù)平臺(tái)實(shí)時(shí)復(fù)制技術(shù)是未來(lái)數(shù)據(jù)復(fù)制行業(yè)的重要發(fā)展方向之一。數(shù)據(jù)復(fù)制技術(shù)行業(yè)存儲(chǔ)硬件層復(fù)制技術(shù)發(fā)展概況存儲(chǔ)硬件層復(fù)制主要指基于存儲(chǔ)磁盤(pán)陣列之間的直接鏡像，是通過(guò)存儲(chǔ)系統(tǒng)內(nèi)建的固件或操作系統(tǒng)，利用IP網(wǎng)絡(luò)或光纖等傳輸介質(zhì)連結(jié)，將數(shù)據(jù)以同步或異步的方式復(fù)制到目標(biāo)端。存儲(chǔ)硬件層復(fù)制的優(yōu)勢(shì)在于復(fù)制工作僅在存儲(chǔ)硬件層面進(jìn)行，與操作系統(tǒng)層無(wú)關(guān)，因此可以避免服務(wù)器的性能開(kāi)銷(xiāo)過(guò)大的問(wèn)題，適用于關(guān)鍵任務(wù)和高端交易應(yīng)用，也是目前最廣泛用于容災(zāi)場(chǎng)景的數(shù)據(jù)復(fù)制技術(shù)之一。存儲(chǔ)硬件層復(fù)制的劣勢(shì)在于主要適用于同品牌且同型號(hào)的同構(gòu)存儲(chǔ)系統(tǒng)，并需配備低延遲