企業(yè)級(jí)技術(shù)中臺(tái)架構(gòu)的實(shí)踐課件

1、企業(yè)級(jí)技術(shù)中臺(tái)架構(gòu)的實(shí)踐技術(shù)創(chuàng)新 變革未來(lái)很早就和客戶進(jìn)行數(shù)智化探索與實(shí)踐讓數(shù)據(jù)成為生產(chǎn)要素高效的數(shù)智化轉(zhuǎn)型ICT + 互聯(lián)網(wǎng) 雙基因數(shù)據(jù)智能 + 智能鏈接 雙翼驅(qū)動(dòng)8.5億服務(wù)超過(guò)8.5億終端用戶80+保障全球80多個(gè)國(guó)家的通信暢通250+服務(wù)全球250多家企業(yè)、政府客戶企業(yè)IT架構(gòu)轉(zhuǎn)型的背景商業(yè)模式 變化客戶行為 變化產(chǎn)品應(yīng)用 變化渠道變化生態(tài)變化架構(gòu)轉(zhuǎn)型的挑戰(zhàn)如何實(shí)現(xiàn)系統(tǒng) 架構(gòu)平穩(wěn)改造01如何高效提升 研發(fā)效率02如何快速發(fā)布 交付微服務(wù)應(yīng)用03如何平穩(wěn)運(yùn)行 和高效的運(yùn)維041+1+1方法論技術(shù)中臺(tái)1中臺(tái)DevOps理念1理念組織結(jié)構(gòu)變化1變化頂層理念+具體建設(shè)+組織運(yùn)營(yíng)技術(shù)中臺(tái)的解決方

2、案面向政企面向家庭面向個(gè)人電商企業(yè)直連應(yīng) 用 層智慧中臺(tái)極簡(jiǎn)受理解決方案新零售解決方案5G生態(tài)解決方案智慧家庭解決方案交易類商品類權(quán)益類營(yíng)銷類合作伙伴類支付類服務(wù)類服務(wù)治理能力編排運(yùn) 營(yíng) 層數(shù)據(jù)中臺(tái)業(yè)務(wù)中臺(tái)AI中臺(tái)微服務(wù)管控&能力編排客戶訂單商品銷售中 中心中心中心心結(jié)算 中心權(quán)益中 合作伙 心伴中心人力中心物資 中心BSSOSS調(diào)度故障中編排中 中心心心MSS數(shù)據(jù)模型算法學(xué)習(xí)訓(xùn)練推理通用類能力（如規(guī)則引擎、流程引擎等）數(shù)據(jù)庫(kù)技術(shù)計(jì)算服務(wù)網(wǎng)絡(luò)服務(wù)存儲(chǔ)服務(wù)中間件技術(shù)大數(shù)據(jù)技術(shù)微服務(wù)技術(shù)彈性計(jì)算技術(shù)PASSIASS內(nèi)部外 部統(tǒng) 一 開 發(fā)統(tǒng)統(tǒng)一運(yùn)安維全開發(fā)運(yùn)維 一體化 (DevOps)應(yīng)用急速孵化

3、器-AEIAPP ExtremeIncubator按需定制，積木搭建。 極速開發(fā)，創(chuàng)新賦能。智慧運(yùn)營(yíng)大腦-POBPowdeful OperateBrain意圖使能，編排協(xié)同。 持續(xù)迭代，能力運(yùn)營(yíng)。智能技術(shù)底座-ITF Intellect Technology Foundation資源整合，能力沉淀。 動(dòng)態(tài)伸縮，智能運(yùn)維。技術(shù)中臺(tái)核心競(jìng)爭(zhēng)力技術(shù)生態(tài)產(chǎn)品系列覆蓋 企業(yè)研發(fā)全生命周期提供全面的技術(shù)工具保 障提供一站式的解決方案覆蓋全面采用中臺(tái)架構(gòu)和模塊化 設(shè)計(jì)可組合拆分，靈活交付易于整合企業(yè)原有基礎(chǔ) 設(shè)施可自由擴(kuò)展架構(gòu)靈活開展系統(tǒng)穩(wěn)定建設(shè)建立多層防御體系提升系統(tǒng)反脆弱能力保障業(yè)務(wù)產(chǎn)品穩(wěn)定運(yùn) 行穩(wěn)定可

4、靠在運(yùn)營(yíng)商/政企領(lǐng)域， 上百個(gè)電信級(jí)企業(yè)項(xiàng) 目的落地將丌同行業(yè)項(xiàng)目的最 佳實(shí)踐沉淀到產(chǎn)品行業(yè)沉淀覆蓋全面：架構(gòu)轉(zhuǎn)型一站式解決方案微服務(wù)建設(shè) 服務(wù)管理 持續(xù)交付 一鍵部署研發(fā)態(tài)灰度發(fā)布 應(yīng)用管理 服務(wù)管控 服務(wù)安全問(wèn)題定位 監(jiān)控告警 運(yùn)維自動(dòng)化運(yùn)維態(tài)運(yùn)行態(tài)覆蓋全面：提供全面的分布式技術(shù)組件分布式數(shù)據(jù)庫(kù)中間件分布式消息中間件分布式緩存中間件分布式服務(wù)框架分布式流程平臺(tái)分布式內(nèi)存數(shù)據(jù)庫(kù)解決單庫(kù)訪問(wèn)瓶頸問(wèn)題實(shí)現(xiàn)應(yīng)用解藕和削峰填谷的能力提升應(yīng)用系統(tǒng)數(shù)據(jù)操作性能實(shí)現(xiàn)業(yè)務(wù)解藕，具備水平擴(kuò)容能力實(shí)現(xiàn)流程編排，統(tǒng)一調(diào)度實(shí)現(xiàn)更高性能的數(shù)據(jù)訪問(wèn)能力SCP覆蓋全面：低代碼平臺(tái)加速應(yīng)用孵化界面編排服務(wù)編排流程編排界面可

5、視化開發(fā)所見即所得前后端結(jié)合業(yè)務(wù)流程可視化編排流程環(huán)節(jié)可視化配置流程規(guī)則結(jié)合元數(shù)據(jù)和通用接口原子服務(wù)可視化編排原子服務(wù)可視化組合數(shù)字化需求業(yè)務(wù)中臺(tái)數(shù)據(jù)中臺(tái)客戶中心中臺(tái)業(yè)務(wù)能力面部識(shí)別身份識(shí)別智能小秘?cái)?shù)據(jù)驅(qū)動(dòng)AI驅(qū)動(dòng)數(shù)據(jù)商機(jī)洞悉Alibaba CloudGoogle CloudPrivate Cloud產(chǎn)商品 中心訂單中心 計(jì)費(fèi)/賬務(wù) 權(quán)益中心 資源中心網(wǎng)絡(luò)開通業(yè)務(wù)信息采集業(yè)務(wù)流程流轉(zhuǎn)業(yè)務(wù)信息共享模型編排架構(gòu)靈活：多云組件適配能力運(yùn)維管理資源管理自動(dòng)化運(yùn)維日志管理全棧監(jiān)控服務(wù)管理統(tǒng)一門戶運(yùn)營(yíng)門戶運(yùn)維門戶消費(fèi)者門戶技 術(shù) 服 務(wù)組件分布式消息分布式緩存分布式數(shù)據(jù)庫(kù)分布式服務(wù)框架分布式內(nèi)存數(shù)據(jù)庫(kù)第三

6、方組件CTGMQCTGCacheUDALSC/Dubbo.研發(fā)管理開發(fā)框架構(gòu)建管理軟件資產(chǎn)庫(kù)測(cè)試管理質(zhì)量中心能力開放平臺(tái)阿里組件開源組件阿里MQMySQLDRDSPostgreSQLEDASHadoopGTSSpark.彈性計(jì)算平臺(tái)資源適配資源調(diào)度彈性伸縮資源模板服務(wù)部署Alibaba CloudGoogle CloudOpenstack實(shí)現(xiàn)云，阿里云，天翼云，天宮云，AWS云的適配能力。同一套產(chǎn)品適配多種技術(shù)組件。架構(gòu)靈活：云管平臺(tái)靈活部署能力云管理平臺(tái)性能管理中心容器管理中心監(jiān)控中心日志中心Base門戶CMDB緩存Nginx數(shù)據(jù)庫(kù)CICD中心非容器化部署容器化部署云管平臺(tái)部署方式靈活支持精

7、簡(jiǎn)化部署業(yè)務(wù)承載方式豐富應(yīng)用、中間件管理功能可編排發(fā)布、部署、升級(jí)簡(jiǎn)單方便落地?cái)?shù)百個(gè)電級(jí)項(xiàng)目 組件穩(wěn)定建設(shè)不斷強(qiáng)化豐富故障場(chǎng)景實(shí)現(xiàn) 模擬精確注入指定故障擴(kuò)展開源組件功能 實(shí)現(xiàn)容災(zāi)功能權(quán)限認(rèn)證，操作審計(jì) 黑白名單，數(shù)據(jù)脫敏穩(wěn)定可靠故障演練提升容錯(cuò)性和可恢復(fù)性容災(zāi)建設(shè)保障業(yè)務(wù)的平穩(wěn)運(yùn)行安全增強(qiáng)滿足企業(yè)級(jí)的安全管控 要求穩(wěn)定加固增強(qiáng)產(chǎn)品的穩(wěn)定性穩(wěn)定可靠：基于故障演練的系統(tǒng)攻防提升產(chǎn)品穩(wěn)定性，引入故障演練，主動(dòng)注入 故障，修復(fù)穩(wěn)定性問(wèn)題。提供一鍵模擬各種常見故障，持續(xù)積累故障 庫(kù)，豐富故障場(chǎng)景實(shí)現(xiàn)。01故障注入、故障生命周期管理故障演練用例管理0203演練流程自動(dòng)化執(zhí)行故障演練大盤0405生成故障演練

8、報(bào)告HATT穩(wěn)定可靠：緩存集群穩(wěn)定性提升5000010000150002000025000300000 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59原生Redis與Zcache持久化：OPS對(duì)比Redis讀Redis寫Zcache讀Zcache寫1.61.41.210.80.60.40.200 1 2 3 4

9、 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59原生Redis與Zcache持久化：LATENCY(ms)對(duì)比Redis讀Redis寫Zcache讀Zcache寫用戶資料放置緩存組件實(shí)現(xiàn)高效訪問(wèn)印尼某運(yùn)營(yíng)商用戶數(shù)：1.5億開戶持久化功能后，當(dāng)磁盤IO阻塞，R edis OPS會(huì)下降很多，會(huì)造成整個(gè)服務(wù)不可用對(duì)持久化機(jī)制改造2W

10、+ OPS在磁盤IO出現(xiàn)阻塞現(xiàn)象時(shí)， ZCache組件能提供2W+ OPS的訪問(wèn)能力穩(wěn)定可靠：消息流控提升最大緩存消息量為：1000*100一段時(shí)間后， consumer2 異常退出C1C2C3隊(duì)列100隊(duì)列100隊(duì)列100最大緩存消息量為：1000*150C1隊(duì)列150C2異常crashC3隊(duì)列150ZMQ服務(wù)端 某TOPIC總隊(duì)列數(shù)300ZMQ服務(wù)端 某TOPIC總隊(duì)列數(shù)300開源的RocketMQ消息組件在消息量超大情況 下會(huì)影響系統(tǒng)可用性定 期 開 展 促 銷 活 動(dòng)有效保障項(xiàng)目促銷活動(dòng)業(yè)務(wù)正常開展實(shí)現(xiàn)topic級(jí)別的 消息流控能力穩(wěn)定可靠：故障自愈能力建設(shè)每月23次服務(wù)不可用MQ集群

11、部署在虛機(jī)， 磁盤性能差，磁盤IO不穩(wěn)定提供故障自愈方案，主動(dòng)切換資源更優(yōu)的機(jī)器節(jié)點(diǎn)； 根據(jù)業(yè)務(wù)消息處理類型決策切換至內(nèi)存消息處理模式某運(yùn)營(yíng)商項(xiàng)目資源緊缺業(yè)務(wù)彈性伸縮主機(jī)異常中間件自愈 主機(jī)異常應(yīng)用自愈 磁盤滿自動(dòng)清理進(jìn)程掛了重啟主機(jī)CPU超高處理 SQL慢自修復(fù)場(chǎng)景配置異常場(chǎng)景 診斷匹配業(yè)務(wù)指標(biāo)/CPU超閾值 CPU超閾值主機(jī)宕機(jī)/中間件節(jié)點(diǎn)掛 主機(jī)宕機(jī)/業(yè)務(wù)實(shí)例掛 文件系統(tǒng)使用率告警進(jìn)程掛 SQL響應(yīng)慢自愈服務(wù)調(diào)用應(yīng)用生命周期清理文件系統(tǒng)中間件自愈-主機(jī)異常 CPU占用Top10進(jìn)程 業(yè)務(wù)自愈-主機(jī)異常 慢SQL的TOPN進(jìn)程拉起通知報(bào)告處理結(jié)果通知 出現(xiàn)異常通知 故障自愈報(bào)告持續(xù)半年無(wú)故

12、障行業(yè)沉淀：緩存集群上限擴(kuò)容對(duì)集群節(jié)點(diǎn)通信機(jī)制改造，實(shí)現(xiàn)節(jié)點(diǎn)上限的突破redisredisredisredisredis普通節(jié)點(diǎn)管理節(jié)點(diǎn)redisredisredisredisredis印尼某運(yùn)營(yíng)商200節(jié)點(diǎn)用戶數(shù)：1.5億超過(guò)開源Redis Cluster集群節(jié)點(diǎn) 上限提升4倍，至1000節(jié)點(diǎn)行業(yè)沉淀：一鍵部署通過(guò)一鍵部署實(shí)現(xiàn)項(xiàng)目軟件的高效部署一鍵部署需求 收集一鍵部署方案 評(píng)審一鍵部署啟動(dòng) 準(zhǔn)備一鍵部署結(jié)果 匯報(bào)一鍵部署結(jié)束 測(cè)試一鍵部署開始 執(zhí)行部署需求人工收集整理一鍵部署規(guī)劃方案評(píng)估一鍵部署規(guī)劃方案確認(rèn)一鍵部署保障級(jí)別提供一鍵部署資產(chǎn)清單,含數(shù)據(jù)庫(kù) 信息、中間件信息、應(yīng)用配置文 件信息

13、等腳本應(yīng)用鏡像包生成作業(yè)執(zhí)行報(bào)告對(duì)上線異常事件進(jìn)行分析總 結(jié)執(zhí)行作業(yè)流程的子任務(wù)，自動(dòng)化測(cè) 試；測(cè)試異常自動(dòng)化預(yù)處理預(yù)處理異常升級(jí)人工處理人工判斷原因，解決問(wèn)題或者執(zhí)行回 退操作。作業(yè)平臺(tái)獲取資源根據(jù)作業(yè)流程執(zhí)行部署任 務(wù)，支持從裸機(jī)到應(yīng)用上 線的全面部署執(zhí)行過(guò)程可視化部署對(duì)象多樣化行業(yè)沉淀：資源利用率優(yōu)化ZMQ SERVER共享集群消息生產(chǎn)集群（租戶:CRM_PROD）消息生產(chǎn)集群（租戶:OSS_PROD）消息消費(fèi)集群（租戶:CRM_PROD）消息消費(fèi)集群（租戶:OSS_PROD）BUSINESS_TOPICBUSINESS_TOPICBUSINESS_TOPICBUSINESS_TOPIC

14、不同的租戶CRM和OSS擁有同樣的邏輯TOPIC，但兩個(gè)租戶互不可見，數(shù)據(jù)隔離基于多租戶機(jī)制提供共享集群200+機(jī)器能力中心數(shù)：20+；研發(fā)環(huán)境數(shù)：60+ 每套環(huán)境搭建中間件集群，各自申請(qǐng)， 導(dǎo)致機(jī)器占用多，資源利用率低僅需6臺(tái)機(jī)器行業(yè)沉淀：電信級(jí)分布式數(shù)據(jù)庫(kù)分片規(guī)則管理codepdm定制團(tuán)隊(duì)codepdm產(chǎn)品團(tuán)隊(duì)db2db3db0db1code應(yīng)用 +code1. 部署1. 部署2. 加載規(guī)則3. 分庫(kù)訪問(wèn)分片規(guī)則支持定制化， 規(guī)則分團(tuán)隊(duì)維護(hù)統(tǒng)一加載使用更方便重新設(shè)計(jì)分片規(guī)則的加載機(jī)制在國(guó)內(nèi)/國(guó)際運(yùn)營(yíng)商領(lǐng)域，政企領(lǐng)域，工業(yè)互聯(lián)網(wǎng)領(lǐng)域有眾多項(xiàng)目落地技術(shù)中臺(tái)助力數(shù)字化轉(zhuǎn)型中國(guó)中國(guó)電信、中國(guó)移 動(dòng)

15、、中國(guó)聯(lián)通等亞太50+StarHub，AIS，smartfren，Airtel等歐洲20+KPN，POST，Orange等美洲50+TELMEX， NATCOM， Digicel等非洲50+MTN， telecom，TTNet，ECoNet等1800+活躍應(yīng)用2000次日CICD構(gòu)建200次日應(yīng)用升級(jí)接入150+產(chǎn)品技術(shù)中臺(tái)助力運(yùn)營(yíng)商數(shù)字化轉(zhuǎn)型實(shí)現(xiàn)數(shù)據(jù)與應(yīng)用分離服務(wù)與界面分離服務(wù)可編排界面輕量化靈活可配置應(yīng)用水平彈性可擴(kuò)展核 心 能 力IaaS門戶PaaSX86服務(wù)器網(wǎng)絡(luò)資源分布式數(shù)據(jù)庫(kù)崗位助手存儲(chǔ)資源能力開放管理門戶能力管理能力運(yùn)維能力分析開發(fā)者門戶監(jiān)控 中心運(yùn)維 操作 中心規(guī)范 約束安全管

16、理網(wǎng)廳10000號(hào)門戶BSS統(tǒng)一門戶分布式緩存分布式消息中間件分布式計(jì)算框架CPC配置中心客戶中 心受S理a中aS 心營(yíng)服協(xié)同中心營(yíng)銷資源中心賬務(wù)中 心批價(jià)中心策略中心客戶查詢中心渠道支持中心銷售支持中心采預(yù)中 心支付中 心充值中心結(jié)算中 心基礎(chǔ)運(yùn) 營(yíng)管理 中心客戶服務(wù)中心事件偵探中心3500萬(wàn)+用戶量80萬(wàn)/天平均訂單150萬(wàn)/天高峰訂單業(yè)務(wù)效果服務(wù)積累680+查詢類業(yè)務(wù)500+規(guī)則校驗(yàn)類業(yè)務(wù)400+受理類業(yè)務(wù)敏捷交付降低至0.5天原發(fā)布周期為15 天降低至10分鐘原部署時(shí)間為4 小時(shí) 技術(shù)中臺(tái)湖南電信X項(xiàng)目鯨智WhaleDI城市級(jí)/企業(yè)級(jí)數(shù)據(jù)智能基礎(chǔ)設(shè)施城市級(jí)/企業(yè)級(jí)數(shù)據(jù)智能基礎(chǔ)設(shè)施鯨智WhaleDI是科技旗下的數(shù)據(jù)智能品牌，致力于在云原生技術(shù)時(shí)代為通信服務(wù)、城市大腦和產(chǎn) 業(yè)互聯(lián)網(wǎng)等政府和企業(yè)客戶打造城市級(jí)或企業(yè)級(jí)數(shù)據(jù)智能基礎(chǔ)設(shè)施，同時(shí)通過(guò)聯(lián)合基礎(chǔ)技術(shù)、行業(yè)協(xié)會(huì)、 科研院所和行業(yè)業(yè)務(wù)等合作