（3）IT運(yùn)維管理：ITIL先鋒論壇-某互聯(lián)網(wǎng)公司多活穩(wěn)定性運(yùn)維架構(gòu)解析和實(shí)踐經(jīng)驗(yàn)

多活架構(gòu)解析多活最佳實(shí)踐多活管控治理多活架構(gòu)解析應(yīng)用數(shù)據(jù)(主)應(yīng)用數(shù)據(jù)(備)單活/災(zāi)備同城多活應(yīng)用應(yīng)用數(shù)據(jù)(主)應(yīng)用數(shù)據(jù)(備)單活/災(zāi)備同城多活應(yīng)用數(shù)據(jù)(從)數(shù)據(jù)(主)應(yīng)用異地多活應(yīng)用數(shù)據(jù)B...應(yīng)用應(yīng)用數(shù)據(jù)B...應(yīng)用數(shù)據(jù)B...應(yīng)用應(yīng)用數(shù)據(jù)B數(shù)據(jù)B...同城多活同城多活50%流量調(diào)度50%,'50%流量調(diào)度50%,' Service、 Service讀/寫寫讀?無法抵抗城市級別故障/災(zāi)難，但極端災(zāi)難發(fā)生概率比較低；讀/寫寫讀存儲(從) 存儲(主)存儲(從) 存儲(主)?復(fù)雜業(yè)務(wù)場景下鏈路會出現(xiàn)頻繁跨機(jī)房調(diào)用增加響應(yīng)時(shí)間，影?業(yè)務(wù)調(diào)用單元內(nèi)封閉，少量跨機(jī)房調(diào)用，保障耗時(shí)和用戶體驗(yàn)異地多活數(shù)據(jù)分片A數(shù)據(jù)分片B雙向同步數(shù)據(jù)分片B ServiceService讀/寫/寫讀數(shù)據(jù)分片A數(shù)據(jù)分片B雙向同步數(shù)據(jù)分片B ServiceService讀/寫/寫讀 數(shù)據(jù)分片A雙向同步?南北向流量管控?用戶緯度Hash路由?SLB&GW?南北向流量管控?故障降級重試?Discovery?東西向流量管控?緩存一致性維護(hù)?純緩存場景改造?TopicSync消息雙向同步?Global/Local/None消費(fèi)模式?Proxy讀寫路由、容災(zāi)切換?支持MySQL/TiDB/KV?主從單向同步、雙向同步?高可用容災(zāi)切換?多活資源可視化?多活定義、編排?切流預(yù)檢可觀測上海可用區(qū)1上?？捎脜^(qū)2SLBSLBGZSSLBSLBGZS讀讀Cache讀讀Cache刪除/更新Cache刪除/更新Cache刪除/更新刪除/更新JobJobJobJob讀/寫GZDB/KV讀/寫GZDB/KV讀讀/寫GZDB讀讀/寫GZDB/KVHTTPDNSHTTPDNS南北向南北向上?？捎脜^(qū)2上?？捎脜^(qū)1上?？捎脜^(qū)2上海可用區(qū)1SLBSLBSLBSLB東西向東西向上?？捎脜^(qū)1上?？捎脜^(qū)2上?？捎脜^(qū)1上?？捎脜^(qū)2讀讀CacheCacheSidecar/ProxylessSidecar/Proxyless刪除/更新刪除/更新讀讀CacheCacheSidecar/ProxylessSidecar/Proxyless刪除/更新刪除/更新Sidecar/ProxylessSidecar/ProxylessJobJobSidecar/ProxylessSidecar/ProxylessJobJob讀/寫讀/寫讀GZDB/KVGZDB/讀/寫讀/寫讀GZDB/KVGZDB/KV可用區(qū)2LocalLocalLocalLocal可用區(qū)2Sync可用區(qū)2Sync上?？捎脜^(qū)2上海可用區(qū)2SeqSeq讀/寫讀讀/寫讀讀讀/寫讀讀/寫讀讀讀/寫 GZDB/KV上?？捎脜^(qū)1讀/寫 上?？捎脜^(qū)1讀/寫上海可用區(qū)1 上?？捎脜^(qū)1 讀/寫 RZDBRZDB一 上?？捎脜^(qū)2上?？捎脜^(qū)2讀/寫讀/寫Seq讀讀/寫讀讀/寫1、業(yè)務(wù)分級：業(yè)務(wù)訪問量、用戶體驗(yàn)及營收影響與產(chǎn)研商定多活改造的場景確定業(yè)務(wù)場景1、依賴應(yīng)用、接口，強(qiáng)弱依賴劃分、多活情況2、依賴中間件、組件梳理接口依賴梳理1、涉及的消息隊(duì)列梳理3、下游處理消息方式消息場景梳理接口鏈路梳理1、場景涉及業(yè)務(wù)流程梳理2、涉及服務(wù)、接口梳理數(shù)據(jù)存儲梳理1、數(shù)據(jù)分類、一致性要求2、數(shù)據(jù)可丟失性、可恢復(fù)性3、涉及存儲、緩存使用方式改造實(shí)施上線1、業(yè)務(wù)架構(gòu)、中間件改造方案2、多活管控接入、多活驗(yàn)證方案3、多活切量執(zhí)行預(yù)案SLBSLBSLBSLBGZS SLBSLBSLBSLBGZS GZDB/KV GZDB/KVSLB上?？捎脜^(qū)2上?？捎脜^(qū)1上?？捎脜^(qū)2SLBSLBSLBSLB Seq路由計(jì)算/糾偏路由計(jì)算/糾偏Job讀/寫JobJob讀/寫Job沖突處理沖突處理讀/寫 讀/寫 ?增加分片字段、校驗(yàn)時(shí)間字段?寫入DB加入分片ID，拆分多行，各可用區(qū)只寫本可用區(qū)的數(shù)據(jù)?Sidecar/SDK流量代理?業(yè)務(wù)維度路由分片計(jì)算?校驗(yàn)時(shí)間字段沖突判斷?根據(jù)需要執(zhí)行投遞沖突消息/覆蓋/暫停?單元獨(dú)立部署?全部分片數(shù)據(jù)合并計(jì)算R華南可用區(qū)1上海可用區(qū)1上?？捎脜^(qū)2R華南可用區(qū)1SLBSLBSLBSLBSLBSLB讀讀讀讀讀讀CacheCache刪除/更新刪除/更新CacheCacheCache刪除/更新刪除/更新CacheJob刪除/更新Job刪除/更新JobJobJobJob讀/寫讀讀讀/寫讀/寫讀讀讀/寫CZDB/KVGZDB/KVCZDB/KVGZDB/KVGZDB/KV規(guī)則類型：非標(biāo)的多活規(guī)則規(guī)則類型：非多活規(guī)則?容量巡檢：CPU/MEM、連接池、限流等??單可用區(qū)多活流量閉環(huán)?業(yè)務(wù)強(qiáng)弱依賴故障演練??單可用區(qū)多活流量閉環(huán)?業(yè)務(wù)強(qiáng)弱依賴故障演練??隔離巡檢：存儲資源是否跨業(yè)務(wù)混用?編排預(yù)檢可觀測驗(yàn)證切量編排預(yù)檢可觀測驗(yàn)證切量?巡檢指標(biāo)觀測業(yè)務(wù)多活流量觀測業(yè)務(wù)/應(yīng)用?巡檢指標(biāo)觀測業(yè)務(wù)多活流量觀測業(yè)務(wù)/應(yīng)用SLO指標(biāo)觀測??定義多活類型???接入層規(guī)則編排：DCDN???數(shù)據(jù)層編排：KV、DB??消息層、東西流量編排：支持中切量申請、切量對象選擇切量申請、切量對象選擇????