MoveSure云遷移技術白皮書

MoveSure云遷移技術白皮書上海數(shù)騰軟件科技股份有限公司

2017年6月聲明上海數(shù)騰軟件科技股份有限公司所有，并保留對本文檔及本聲明的最終解釋權和修改權。本文檔中出現(xiàn)的任何文字敘述、文檔格式、插圖、照片、方法、過程等內容，除另有特別注明外，其著作權或其它相關權利均屬于上海數(shù)騰軟件科技股份有限公司。未經(jīng)上海數(shù)騰軟件科技股份有限公司書面同意，任何人不得以任何方式或形式對本文檔內的任何部分進行復制、摘錄、備份、修改、傳播、翻譯成其他語言、將其全部或部分用于商業(yè)用途。免責條款本文檔僅用于為最終用戶提供信息，其內容如有更改，恕不另行通知。上海數(shù)騰軟件科技股份有限公司在編寫本文檔的時候已盡最大努力保證其內容準確可靠，但上海數(shù)騰軟件科技股份有限公司不對本文檔中的遺漏、不準確、或錯誤導致的損失和損害承擔責任。信息反饋如果您有任何寶貴意見，請反饋：信箱：上海市普陀區(qū)大渡河路168弄31號E棟9樓郵編：200062免費咨詢熱線：400-821-6995800-820-6995公司總線：086-產品售后服務：086--8002數(shù)據(jù)恢復服務：086--8008傳真：086--8003企業(yè)郵箱：您也可以訪問數(shù)騰網(wǎng)站：獲得最新的技術和產品信息。TOC\o"1-5"\h\z第一章產品介紹篇 1背景概述 1上云焦點問題 1\o"CurrentDocument"支持平臺 1\o"CurrentDocument"風險預案 2\o"CurrentDocument"第二章方案應用篇 3\o"CurrentDocument"方案一 3\o"CurrentDocument"方案二 3適用的遷移場景 4\o"CurrentDocument"方案優(yōu)勢 4\o"CurrentDocument"整機遷移 5端到端的整機精簡遷移 5端到端的增量遷移 6遷移數(shù)據(jù)仿真驗證 6小型機數(shù)據(jù)庫遷移 錯誤!未定義書簽。數(shù)據(jù)庫集群遷移 錯誤!未定義書簽。第三章關鍵技術篇 8產品架構 8\o"CurrentDocument"關鍵技術 9\o"CurrentDocument"實現(xiàn)價值 11\o"CurrentDocument"第四章數(shù)騰軟件簡介 1.2第一章產品介紹篇背景概述如果為目前的信息技術產業(yè)設置關鍵詞，云遷移無疑是其中之一。如今，很多企業(yè)的IT管理人員都在考慮將企業(yè)數(shù)據(jù)向云中遷移，云遷移逐漸成為一個熱門趨勢。據(jù)Gartner預測，2015年云遷移將增長89.5%，市場份額達到28.8億美元;到2016年，云存儲在共享內容上和能夠實現(xiàn)從多個設備上并發(fā)訪問內容的能力會促使消費者將超過1/3的數(shù)字內容遷移存儲到云中。同時，越來越多的企業(yè)用戶在咨詢有關如何將數(shù)據(jù)遷移到云環(huán)境的問題。為了追趕上云改造的浪潮，抓住目前市場大規(guī)模遷移的需求，將遷移這一功能從容災備份產品中獨立出來，作為一個直接遷移的產品來設計和推廣。因為遷移是一個一過性的服務，因此該產品需具備兩個方面的特點：一是具有便捷高效的穩(wěn)定高效可靠的遷移功能，能夠提供市場同類產品所無法提供的服務。二是要考慮和既有的數(shù)騰容災備份產品有機結合，能夠在完成遷移服務后，有效的引導用戶繼續(xù)購買和使用數(shù)騰的容災備份產品。上云焦點問題業(yè)務中斷時間：最小限度減少待遷移業(yè)務的中斷時間。采用業(yè)務不停機方式進行數(shù)據(jù)遷移，再少量遷移增量數(shù)據(jù)。即遷即可用：基于精簡的CDP技術，源端到目標端一體化遷移，包括系統(tǒng)、數(shù)據(jù)庫、中間件和應用。異構平臺遷移：任意X2X遷移，智能硬件識別和驅動注入保證異構平臺平滑遷移。小型機數(shù)據(jù)庫采用備份或復制方式。全方案流程管理：遷移前調研、規(guī)劃、分級或分批遷移、集中遷移管理、遷移數(shù)據(jù)完整性測試和驗證，業(yè)務割接。支持平臺?支持所有乂86平臺一體化遷移?支持云平臺/物理服務器

圖1.3-1所有支持平臺風險預案限速遷移：為避免遷移過程中，數(shù)據(jù)傳輸占用業(yè)務帶寬，影響業(yè)務運行，遷移過程可以限制數(shù)據(jù)傳輸速度；及時回退：遷移過程發(fā)生任何風險，遷移操作可以立即中止，且回退到遷移前的狀態(tài)；結果驗證：為確保遷移成功，遷移完成后，可先對遷移結果進行驗證，再進行業(yè)務切割。第二章方案應用篇方案一源生產環(huán)境整機一體化備份到遷移平臺，再恢復到目標平臺；遷移平臺可提供業(yè)務接管，數(shù)據(jù)仿真測試和驗證；也可不進行業(yè)務接管，關閉源業(yè)務后，備份快照數(shù)據(jù)到遷移平臺后直接恢復。圖2.1-1業(yè)務流程1方案二源生產環(huán)境整機一體化直遷目標云平臺主機上，業(yè)務可不間斷訪問源平臺；遷移平臺對遷移任務集中批量管理，提供遷移時間和業(yè)務割接時間評估；在用戶可接受時間內進行業(yè)務割接，業(yè)務訪問最終切換到云平臺。業(yè)務訪問遷移完成,業(yè)務切換后數(shù)據(jù)遷移圖業(yè)務訪問遷移完成,業(yè)務切換后數(shù)據(jù)遷移圖2.2-1業(yè)務流程2適用的遷移場景AnyMigration技術可以實現(xiàn)X2X的任意方向自由進行一體化業(yè)務系統(tǒng)遷移，無論是異構的服務器之間還是異構的虛擬化平臺之間，亦或是物理服務器與虛擬化平臺之間，遷進遷出隨心所欲。圖2.3-1遷移場景圖方案優(yōu)勢?快速高效塊級精簡復制（專利技術）成功率99%并行多業(yè)務同時遷業(yè)務無縫遷移多平臺系統(tǒng)遷移，X2X支持?風險可控遷移過程不影響原機業(yè)務運行和性能遷移過程可視化，遷移結果可驗證?簡化流程簡化內部協(xié)調過程，如停機協(xié)調、人員協(xié)調簡化外部協(xié)調過程，如各廠商協(xié)調、集成商協(xié)調2.5.整機遷移整機遷移技術：將各業(yè)務的實時備份點數(shù)據(jù)，通過網(wǎng)絡以精簡塊遷移、實時增量遷移到目標端云主機上。前提是目標端磁盤大于等于源端磁盤。MoveSure支持在整機遷移時候，先啟動影子系統(tǒng)對備份數(shù)據(jù)完整性進行測試校驗，確定備份數(shù)據(jù)完整可靠之后，可以一次性快速重建分區(qū)結構和引導扇區(qū)。整機遷移可以實現(xiàn)系統(tǒng)+數(shù)據(jù)+應用一次性遷移到目標端云主機，是MoveSure效率最高,最方便的遷移模式。整機遷移完成后，會對遷移結果進行一次驗證，即用戶對遷移后的環(huán)境進行一次確認的過程，由用戶手動進行操作。遷移提示完成后，用戶保證源機系統(tǒng)關閉的情況下，手動啟動目標機器，驗證啟動后的系統(tǒng)環(huán)境是否符合預期。如果機器沒有正常啟動或者啟動后的環(huán)境發(fā)生數(shù)據(jù)丟失或者偏差，再目標機使用光驅進行引導，和源機進行一次同步操作，將之前未能成功遷移的數(shù)據(jù)進行一次同步。重建分區(qū)結構重建引導扇區(qū)精簡塊遷移/實日由曾量遷移業(yè)務切換到云主機遷移結果驗證裸機引導目標端云主機圖2.4-1整機遷移流程圖重建分區(qū)結構重建引導扇區(qū)精簡塊遷移/實日由曾量遷移業(yè)務切換到云主機遷移結果驗證裸機引導目標端云主機圖2.4-1整機遷移流程圖2.5.1.端到端的整機精簡遷移通過智能磁盤空間識別技術，只復制磁盤上分布的有效數(shù)據(jù)，空閑的空間跳過不做操作，極大提高了遷移速度。

2.4.1-1端到端的整機精簡遷移2.5.2.端到端的增量遷移通過智能磁盤增量實時旁路監(jiān)控技術，記錄磁盤變化量，整機遷移后，僅需遷移增量數(shù)據(jù)，極大減少業(yè)務中斷時間。2.4.2-1端到端的增量遷移2.5.3.遷移數(shù)據(jù)仿真驗證遷移平臺可提供虛擬化計算服務，基于源平臺數(shù)據(jù)進行仿真驗證，確保遷移數(shù)據(jù)的正確性。2.4.3-1遷移數(shù)據(jù)仿真驗證第三章關鍵技術篇產品架構MoveSure系統(tǒng)是將用戶的待遷移機器中的硬盤中的數(shù)據(jù)和系統(tǒng)直遷到遷移目標機器中。該系統(tǒng)支持冷遷和熱遷兩種模式。冷遷指的是業(yè)務系統(tǒng)關閉，對業(yè)務系統(tǒng)的磁盤進行全鏡像復制。熱遷移是指在業(yè)務不中斷的情況下，最小限度的影響用戶的業(yè)務。遷移模式主要點對點遷移方式，待遷移機器直接落入到目標機的數(shù)據(jù)磁盤，數(shù)據(jù)只經(jīng)過網(wǎng)絡傳輸，不經(jīng)過第三方機器的磁盤寫入操作。支持遷移任務配置和遷移任務監(jiān)控。遷移任務配置包括客戶端和目標端配對、任務策略配置。在遷移的過程中，可以進行客戶端信息監(jiān)控，包含磁盤和連接狀態(tài)檢測、本地環(huán)境檢測、驅動信息檢測。遷移任務控制臺集中管控可以對當前任務狀態(tài)展示、當前任務操作、增量遷移。遷移故障處理可以對遷移失敗的機器進行再次修復。如下圖3.1-1所示，本系統(tǒng)分為遷移客戶端（MSC）、遷移服務器（MSAS）和遷移目標客戶端（MSTC）m個功能角色。其中遷移操作是本系統(tǒng)的主要功能。系統(tǒng)圍繞遷移這條主線，可以分為遷移環(huán)境配置和檢測、遷移任務配置和監(jiān)控、遷移結果驗證和修復三大類。遷移環(huán)境配置和檢測：是用戶首先準備好遷移和待遷移的機器環(huán)境（包括網(wǎng)絡和磁盤），在待遷移機器中安裝遷移客戶端，在遷移目標服務器器中安裝遷移目標客戶端，在第三方服務器上安裝管理服務器。在環(huán)境配置安裝完畢后，用戶可以通過在Web控制界面上對目標客戶端上報的信息進行一次預檢測。用戶首先判斷目標服務器的環(huán)境是否具備遷移的條件。包括目標磁盤大小、操作系統(tǒng)匹配、目標驅動匹配這三方面。遷移任務配置和監(jiān)控：是用戶啟動管理平臺（忖5亞5）后，在配置具體的遷移操作時，對配對遷移和待遷移平臺配置遷移任務參數(shù)。參數(shù)的配置包括遷移目標的磁盤配置、遷移目標服務器的選擇、遷移結束條件的選擇和冷遷、熱遷的選擇。遷移驗證：是用戶對遷移后的環(huán)境進行一次確認的過程，由用戶手動進行操作。遷移提示完成后，用戶保證源服務器系統(tǒng)關閉的情況下，手動啟動目標服務器，驗證啟動后的系統(tǒng)環(huán)境是否符合預期。如果機器沒有正常啟動或者啟動后的環(huán)境發(fā)生數(shù)據(jù)丟失或者偏差，再次對目標服務器使用光驅進行引導，和源服務器進行一次同步操作，將之前未能成功遷移的數(shù)據(jù)進行一次同步。

MoveSure(MSWS)Clif(向Llaskconfig1315t曾4T：MoveSure(MSWS)Clif(向Llaskconfig1315t曾4T：帙r圖3.1-1產品架構圖MsgChannelModifyD^tdChannel口ut|pr1rrti6OneraiDrM^rtcmentPlatformNewDevelop關鍵技術在傳統(tǒng)的遷移工具或者方案中，用戶往往是采用數(shù)據(jù)存儲和恢復或者業(yè)務中斷的方式在執(zhí)行遷移的過程中，這樣業(yè)務中斷時間會延長，也會一定程度的影響用戶的使用。同時對遷移的目標服務器沒有一個校驗算法，只能通過人工的方式進行手動校驗，這樣的效率會比較低下而且無法進行故障恢復，因而只能采用重新遷移的方式。MoveSure采用了獨特的校驗算法，實現(xiàn)了業(yè)務直遷和業(yè)務準無縫遷移，保證了用戶遷移的效率和完整性。業(yè)務直遷：直遷的概念是實現(xiàn)目標服務器和源服務器的點對點遷移功能，中間無需經(jīng)過存儲器或者中間機器及，而是待遷移機器直接落入到目標服務器的數(shù)據(jù)磁盤，數(shù)據(jù)只經(jīng)過網(wǎng)絡傳輸，不經(jīng)過第三方機器的磁盤寫入操作。相比較傳統(tǒng)的遷移或者手動數(shù)據(jù)搬遷，用戶首先要將源服務器的業(yè)務進行終端，然后將源服務器的內容轉為存儲文件，再由用戶將存儲文件拷貝到目標服務器器，恢復到目標磁盤分區(qū)上，用戶驗證機器無誤后，再恢復業(yè)務系統(tǒng)，經(jīng)過了這些過程，用戶業(yè)務中斷的時間不可控，會對用戶的業(yè)務造成不小的影響。MoveSure的直遷系統(tǒng)采用Web集中式管理，數(shù)據(jù)傳輸采用p2p的方式，采用自定義高效數(shù)據(jù)傳輸協(xié)議，將客戶端的數(shù)據(jù)通過直連通道傳輸?shù)侥繕硕酥?，最大程度的保證了數(shù)據(jù)傳輸?shù)男省?特殊的校驗算法：MoveSure采用獨特的同步和校驗算法支持在線業(yè)務遷移。無縫遷移是通過系統(tǒng)的全量遷移、數(shù)據(jù)校驗和增量遷移這幾個步驟來實現(xiàn)的，系統(tǒng)業(yè)務在線時通過全量遷移來復制整個磁盤，然后做增量遷移的操作，將全盤遷移過程中產生的數(shù)據(jù)再次復制到目標機器當中，保證數(shù)據(jù)的一致性。而且系統(tǒng)通過自己的獨特的校驗算法對遷移目標環(huán)境進行校驗，保證對剩余數(shù)據(jù)的同步。?業(yè)務準無縫遷移：用戶可以不關閉業(yè)務的同時進行遷移操作，保證用戶的業(yè)務受到較小的影響。MoveSure采用獨特的同步和校驗算法支持在線業(yè)務遷移。無縫遷移是通過系統(tǒng)的全量遷移、數(shù)據(jù)校驗和增量遷移這幾個步驟來實現(xiàn)的，系統(tǒng)業(yè)務在線時通過全量遷移來復制整個磁盤，然后做增量遷移的操作，將全盤遷移過程中產生的數(shù)據(jù)再次復制到目標服務器器當中，保證數(shù)據(jù)的一致性。而且系統(tǒng)通過自己的獨特的校驗算法對遷移目標環(huán)境進行校驗，保證對剩余數(shù)據(jù)的同步。無縫遷移與遷移差異同步通過以上技術，基本上對在線業(yè)務環(huán)境做到了無縫遷移，將用戶的業(yè)務中斷影響降低到最小程度。在整個業(yè)務遷移的過程中，系統(tǒng)會實時的計算和評估業(yè)務完成時間，提高了用戶操作的便攜性和可控性。實現(xiàn)價值應用了MoveSure來進行數(shù)據(jù)遷移，加快了新服務器技術的部署。可以實現(xiàn)自動化的遷移，通過采用向導方式安裝與配置減少了手工操作的步驟和降低了出現(xiàn)故障的幾率。同時我們還看到，安全更新到新服務器技術，放心的遷移帶來了操作系統(tǒng)，應用程序和數(shù)據(jù)的安全可靠，提高了用戶系統(tǒng)平臺遷移的可靠性。最小化部署新技術的成本：低廉的遷移成本，滿足了用戶使用最少的資金實現(xiàn)最大的目標的愿望。整合了企業(yè)IT環(huán)境中的物理設備和虛擬設備，進行統(tǒng)一的平臺管理和必要的遷移調度。實現(xiàn)了皿資源的完全貢獻，節(jié)省系統(tǒng)資源，簡化了全新服務器技術的轉移。第四章數(shù)騰軟件簡介上海數(shù)騰軟件科技股份有限公司（簡稱數(shù)騰科技）成立于2004年，是集技術開發(fā)、軟件銷售、產品服務于一體的軟件開發(fā)公司。在“智慧運維”的理念倡導下，公司將智慧與運維完美的結合起來，不斷推進數(shù)據(jù)安全技術方面的進步，從用戶的需求出發(fā)，以創(chuàng)新、高效、與時俱進的原則籌劃及經(jīng)營各項產品，切實做到了解決方案的化繁為簡，為用戶提供更加專業(yè)、高