互聯(lián)網(wǎng)金融災(zāi)備運(yùn)維自動(dòng)化建設(shè)

1、互聯(lián)網(wǎng)金融災(zāi)備運(yùn)維自動(dòng)化建設(shè)運(yùn)維自動(dòng)化，互金災(zāi)備建設(shè)的助推器理想很豐滿(mǎn)，現(xiàn)實(shí)很骨感數(shù)據(jù)同步網(wǎng)絡(luò)互聯(lián)業(yè)務(wù)持續(xù)性管理6R模型減少Reduce（零中斷）響應(yīng)Respond（幾分鐘到幾小時(shí)）恢復(fù)Recover 重啟Resume（幾小時(shí)至幾天）重建Restore返回Return（幾星期至幾個(gè)月）災(zāi)備建設(shè)的思考邏輯時(shí)間資源RTORPO我是一個(gè)痛點(diǎn)：原樣拷貝以本地應(yīng)急資源建設(shè)為優(yōu)先應(yīng)用高可用核心網(wǎng)絡(luò)冗余硬件冗余數(shù)據(jù)庫(kù)高可用我們的經(jīng)歷：應(yīng)對(duì)局部故障多虛擬化池去軟件單點(diǎn)多點(diǎn)接入我是一個(gè)痛點(diǎn)：備機(jī)房的可用性你的主機(jī)房你的災(zāi)備機(jī)房應(yīng)用雙活10%讀寫(xiě)業(yè)務(wù)雙活太難先來(lái)應(yīng)用雙活90%混合云我們的經(jīng)歷：內(nèi)部灰度共享的基礎(chǔ)服

2、務(wù)辦公流量劫持災(zāi)備環(huán)境生產(chǎn)環(huán)境真實(shí)流量數(shù)據(jù)庫(kù)中間件存儲(chǔ)我是一個(gè)痛點(diǎn)：度量隨便報(bào)個(gè)數(shù)據(jù)，老板要，沒(méi)啥用沒(méi)有數(shù)據(jù)，我咋知道能不能在切換成功寫(xiě)進(jìn)KPI，演練后根據(jù)數(shù)據(jù)進(jìn)行考核數(shù)據(jù)生產(chǎn)者不關(guān)心數(shù)據(jù) 的價(jià)值，也不關(guān)心數(shù)據(jù) 準(zhǔn)確與否數(shù)據(jù)生產(chǎn)者關(guān)心是否會(huì) 對(duì)自己帶來(lái)懲罰或者受 益度量的意義改進(jìn)PDCA現(xiàn)狀如何與目標(biāo)的GAP度量需要循序漸進(jìn)不要讓度量成為團(tuán)隊(duì)的負(fù)擔(dān)KPIOKR度量是有成本的保證有效和可靠手工探針我們的經(jīng)歷：目標(biāo)為導(dǎo)向每月Review，評(píng)估KR對(duì)目標(biāo)的影響我是一個(gè)痛點(diǎn)：年年干一年干一次一次干一年災(zāi)備建設(shè)也可以慢慢演進(jìn)從數(shù)據(jù)和核心系統(tǒng)開(kāi)始我們的經(jīng)歷：四年三代交易核心重建主備機(jī)房切換災(zāi)備機(jī)房承擔(dān)流量2016制品庫(kù)發(fā)布工具化2017配置版本化部署工具化資源數(shù)據(jù)閉環(huán)發(fā)布流水化我們的經(jīng)歷：杜絕產(chǎn)線(xiàn)直接變更產(chǎn)線(xiàn)變更零SSH配置模板化不可變基礎(chǔ)設(shè)施由Chad Fowler于2013年提出基于虛擬化技術(shù)我們的思考和嘗試：容器化測(cè)試環(huán)境交易前中臺(tái)所有測(cè)試項(xiàng)目運(yùn)維自研項(xiàng)目未來(lái)的災(zāi)備建設(shè)：容器能帶來(lái)什么？更快速