B端產(chǎn)品新老系統(tǒng)切換過程中的數(shù)據(jù)遷移總結(jié)

B端產(chǎn)品新老系統(tǒng)切換過程中的數(shù)據(jù)遷移總結(jié)01數(shù)據(jù)遷移場景企業(yè)業(yè)務(wù)發(fā)現(xiàn)，原系統(tǒng)無法滿足業(yè)務(wù)需求，需要開發(fā)新的系統(tǒng)替換原有系統(tǒng)，而原系統(tǒng)中的歷史數(shù)據(jù)或正在進(jìn)行中的業(yè)務(wù)數(shù)據(jù)需要在新系統(tǒng)中體現(xiàn)，新系統(tǒng)上線前，需要完成舊系統(tǒng)向新系統(tǒng)的數(shù)據(jù)遷移。02系統(tǒng)切換方式系統(tǒng)的切換方式，會影響數(shù)據(jù)遷移方式的選擇。新老系統(tǒng)進(jìn)行切換時，常見的幾種操作方式：確定新系統(tǒng)上線時間后，新老系統(tǒng)并行運行，新訂單使用新系統(tǒng)，在途訂單使用老系統(tǒng)，待老系統(tǒng)所有在途訂單都完成后，將歷史數(shù)據(jù)一次性遷移至新系統(tǒng)。確認(rèn)新系統(tǒng)上線時間后，老系統(tǒng)停用，所有數(shù)據(jù)及功能全部切換至新系統(tǒng)。新系統(tǒng)的調(diào)整比較大，業(yè)務(wù)流程也進(jìn)行了大規(guī)模調(diào)整的情況下，也會采用選擇年或月的結(jié)算區(qū)間選擇上線時間進(jìn)行切換，切換后，業(yè)務(wù)數(shù)據(jù)不進(jìn)行遷移，歷史數(shù)據(jù)保留在舊系統(tǒng)進(jìn)行查看。03數(shù)據(jù)遷移內(nèi)容1、數(shù)據(jù)：基礎(chǔ)數(shù)據(jù)：支撐各個模塊及各業(yè)務(wù)的主數(shù)據(jù)，如客戶、資產(chǎn)、項目、產(chǎn)品、車輛、工具信息等字典數(shù)據(jù)：系統(tǒng)全局的字典數(shù)據(jù)用戶數(shù)據(jù)：用戶賬號、組織、角色、權(quán)限等業(yè)務(wù)數(shù)據(jù)：業(yè)務(wù)進(jìn)行過程中產(chǎn)生的數(shù)據(jù)，如訂單數(shù)據(jù)、交易數(shù)據(jù)、賬單數(shù)據(jù)、操作數(shù)據(jù)、各環(huán)節(jié)的流轉(zhuǎn)數(shù)據(jù)等。業(yè)務(wù)數(shù)據(jù)還包括：歷史數(shù)據(jù)：業(yè)務(wù)上已經(jīng)完成結(jié)算的或其他完成節(jié)點已經(jīng)產(chǎn)生的數(shù)據(jù)。在途數(shù)據(jù)：系統(tǒng)升級或切換的同時，業(yè)務(wù)也在正常的運行，系統(tǒng)中會存在很多在途數(shù)據(jù)，如未完成的訂單數(shù)據(jù)，在途中的運單數(shù)據(jù)等；在途數(shù)據(jù)的處理需要特別關(guān)注。2、數(shù)據(jù)間的關(guān)聯(lián)關(guān)系：關(guān)系型數(shù)據(jù)通過ID或主鍵進(jìn)行數(shù)據(jù)關(guān)聯(lián)，遷移時數(shù)據(jù)之間的關(guān)聯(lián)關(guān)系需要進(jìn)行重新對應(yīng)3、文件：部分附件、圖片等數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)直接關(guān)聯(lián)，需要重新存儲和建立聯(lián)系，一些單獨存儲的文件可直接轉(zhuǎn)移到新服務(wù)器，同時需要存儲對應(yīng)的URL等04遷移方式影響遷移方式選擇的要素很多：遷移數(shù)據(jù)量的大小、傳輸?shù)臅r長、業(yè)務(wù)是否可暫停。1、離線遷移：Excel導(dǎo)出-導(dǎo)入：通過導(dǎo)出-導(dǎo)入Excel的方式，將數(shù)據(jù)導(dǎo)入到新系統(tǒng)，導(dǎo)出的數(shù)據(jù)可根據(jù)新系統(tǒng)的數(shù)據(jù)格式進(jìn)行調(diào)整后導(dǎo)入；數(shù)據(jù)庫同步：通過Sql或數(shù)據(jù)庫同步工具，將新系統(tǒng)和老系統(tǒng)的字段進(jìn)行對應(yīng)，批量導(dǎo)入到新系統(tǒng)中；2、在線遷移：接口傳輸，通過定義和編寫接口，實現(xiàn)新老系統(tǒng)之間的數(shù)據(jù)同步，新舊系統(tǒng)切換需要雙系統(tǒng)并行的場景下，接口傳輸可實現(xiàn)新老系統(tǒng)之間的雙向同步。企業(yè)在信息化建設(shè)過程中，會存在外采轉(zhuǎn)自研的場景，項目不可控時，盡量實現(xiàn)系統(tǒng)一次性切換升級，避免系統(tǒng)并行。數(shù)據(jù)庫同步：面對遷移數(shù)據(jù)量比較大，耗時比較久的項目時，可以借助數(shù)據(jù)庫遷移工具等，采用部分?jǐn)?shù)據(jù)會進(jìn)行全量+增量遷移的方式，數(shù)據(jù)全量遷移到新系統(tǒng)，然后執(zhí)行每天的自動增量遷移或手動增量遷移，系統(tǒng)切換前，要完成最后一次增量備份。05數(shù)據(jù)驗證遷移的過程中和遷移后需要做數(shù)據(jù)的驗證，確保數(shù)據(jù)的準(zhǔn)確性、完整性、一致性，如：新舊系統(tǒng)的數(shù)據(jù)數(shù)量、數(shù)據(jù)內(nèi)容、遷移過程中未產(chǎn)生增量數(shù)據(jù)等。數(shù)據(jù)遷移一般需要多次的預(yù)演和多次的驗證，保證正式系統(tǒng)正式切換時，數(shù)據(jù)遷移的成功率。驗證需要準(zhǔn)備詳細(xì)的驗證用例，和測試用例相似：基礎(chǔ)數(shù)據(jù)、數(shù)據(jù)字典的變化頻率較低，可預(yù)先進(jìn)行數(shù)據(jù)同步，屬于上線前的環(huán)境準(zhǔn)備工作，可提前同步到新系統(tǒng)并完成測試；已經(jīng)完成的業(yè)務(wù)歷史數(shù)據(jù)，同步后通過查詢、導(dǎo)出、BI等關(guān)聯(lián)功能驗證數(shù)據(jù)是否正確，完整；未完成的業(yè)務(wù)在途數(shù)據(jù)，需額外進(jìn)行業(yè)務(wù)操作流程的驗證，根據(jù)數(shù)據(jù)所處的流程階段，進(jìn)行下一步的業(yè)務(wù)正逆向業(yè)務(wù)操作，確保在途數(shù)據(jù)能順利完成。06結(jié)語近幾年傳統(tǒng)行業(yè)進(jìn)行信息化建設(shè)，完成了多個項目的外采轉(zhuǎn)自研，經(jīng)歷了多次