廣告系統(tǒng)服務(wù)化優(yōu)化架構(gòu)

1、廣告系統(tǒng)服務(wù)化優(yōu)化架構(gòu)技術(shù)創(chuàng)新，變革未來Agenda廣告系統(tǒng)舊的技術(shù)架構(gòu)和技術(shù)痛點(diǎn)廣告系統(tǒng)解決痛點(diǎn)問題的技術(shù)分析與選擇廣告系統(tǒng)的服務(wù)化過程技術(shù)上的權(quán)衡取舍對高可靠性和可擴(kuò)展性的架構(gòu)設(shè)計(jì) 服務(wù)化過程中的技術(shù)收獲和經(jīng)驗(yàn)總結(jié)sinaX 服務(wù)化之前的架構(gòu)流量洞斗型模型軒轅 DSP龍淵 DSP扶翼 DSP扶翼 DSP墊底廣告Reservation BuyingPrefer DealPrivate AuctionOpen AuctionBottomsinaX 舊架構(gòu)的痛點(diǎn)性能不是瓶頸測試問題業(yè)務(wù)擴(kuò)展不便服務(wù)內(nèi)業(yè)務(wù)監(jiān)控難Lua 代碼可維護(hù)性差功能開發(fā)不方便二次開發(fā)難廣告引擎服務(wù)化之前的架構(gòu)廣告引擎舊架構(gòu)的痛

2、點(diǎn)系統(tǒng)的穩(wěn)定性已經(jīng)不能支撐業(yè)務(wù) 發(fā)展廣告請求 QPS 低線上故障率高廣告處理超時率高業(yè)務(wù)狀態(tài)沒有監(jiān)控流量和客戶數(shù)沖擊大系統(tǒng)不穩(wěn)定技術(shù)痛點(diǎn)的總結(jié)功能單體化嚴(yán)重模塊間的功能交互是 plug-in 方式編程模型不適應(yīng)業(yè)務(wù)的發(fā)展系統(tǒng)運(yùn)行狀態(tài)不透明Agenda廣告系統(tǒng)舊的技術(shù)架構(gòu)和技術(shù)痛點(diǎn)廣告系統(tǒng)解決痛點(diǎn)問題的技術(shù)分析與選擇廣告系統(tǒng)的服務(wù)化過程技術(shù)上的權(quán)衡取舍對高可靠性和可擴(kuò)展性的架構(gòu)設(shè)計(jì) 服務(wù)化過程中的技術(shù)收獲和經(jīng)驗(yàn)總結(jié)痛點(diǎn)問題的技術(shù)分析與選擇各服務(wù)相互獨(dú)立，降低業(yè)務(wù)耦合度，提高產(chǎn)品需求開發(fā) 的晌應(yīng)時間功能服務(wù)化1痛點(diǎn)問題的技術(shù)分析與選擇RPC服務(wù)間的通訊采用 RPC 對比各個thrift、gRPC、

3、dubbo 和 Finagle 等 RPC 框架的生態(tài)圈，最后采用 Twitter 開源 的 finagle RPC 框架。2痛點(diǎn)問題的技術(shù)分析與選擇系統(tǒng)狀態(tài)實(shí)時監(jiān)控與跟蹤業(yè)務(wù)數(shù)據(jù)實(shí)時分析與統(tǒng)計(jì)監(jiān)控3Agenda廣告系統(tǒng)舊的技術(shù)架構(gòu)和技術(shù)痛點(diǎn)廣告系統(tǒng)解決痛點(diǎn)問題的技術(shù)分析與選擇廣告系統(tǒng)的服務(wù)化過程技術(shù)上的權(quán)衡取舍對高可靠性和可擴(kuò)展性的架構(gòu)設(shè)計(jì) 服務(wù)化過程中的技術(shù)收獲和經(jīng)驗(yàn)總結(jié)廣告系統(tǒng)的服務(wù)化過程技術(shù)的權(quán)衡取舍sinaX 的服務(wù)化過程中服務(wù)化分的問題部分服務(wù)的上下游調(diào)用過千頻繁帶寬占用過大，處理時間的 I/O占比高解決，部分服務(wù)合并sinaX 服務(wù)化的架構(gòu)廣告系統(tǒng)的服務(wù)化過程技術(shù)的權(quán)衡取舍廣告檢

4、索服務(wù)調(diào)用傳輸數(shù)據(jù)量太大，影晌系統(tǒng)擴(kuò)展性通過 rsync 周期性推數(shù)據(jù)集到投放服務(wù)解決，直接 local 查詢廣告引擎服務(wù)化的架構(gòu)廣告系統(tǒng)的服務(wù)化過程高可靠性和可擴(kuò)展性的架構(gòu)系統(tǒng)容錯性面向錯誤進(jìn)行系統(tǒng)設(shè)計(jì)服務(wù)的無狀態(tài)設(shè)計(jì)故障服務(wù)的自動替換廣告系統(tǒng)的服務(wù)化過程高可靠性和可擴(kuò)展性的架構(gòu)系統(tǒng)可靠性跟蹤監(jiān)控程序運(yùn)行狀態(tài)和熱點(diǎn)實(shí)時監(jiān)控系統(tǒng)異常，直接隔離異常服務(wù)服務(wù)分等級做多重備份廣告系統(tǒng)的服務(wù)化過程高可靠性和可擴(kuò)展性的架構(gòu)系統(tǒng)處理能力的可擴(kuò)展單機(jī)服務(wù)處理能力的線性化能力系統(tǒng)的服務(wù)處理能力擴(kuò)展關(guān)鍵在資源分配重點(diǎn)關(guān)注系統(tǒng)的數(shù)據(jù)熱點(diǎn)廣告系統(tǒng)的服務(wù)化過程高可靠性和可擴(kuò)展性的架構(gòu)系統(tǒng)架構(gòu)的可擴(kuò)展lambda 架構(gòu)

5、的模式數(shù)據(jù)致性是核心，分等級給予保證致性 hash 的問題廣告系統(tǒng)的服務(wù)化過程高可靠性和可擴(kuò)展性的架構(gòu)系統(tǒng)架構(gòu)的可擴(kuò)展業(yè)務(wù)功能和日志功能的隔離服務(wù)接口的選擇，RPC 和 Kafka系統(tǒng)的自動快速部署上線系統(tǒng)優(yōu)化效果05101592%94%96%98%100%重構(gòu)前重構(gòu)后廣告請求到達(dá)率廣告處理時間19.51.593%100%200%20%40%60%80%重構(gòu)前重構(gòu)后12%75%CPU 使用率Agenda廣告系統(tǒng)舊的技術(shù)架構(gòu)和技術(shù)痛點(diǎn)廣告系統(tǒng)解決痛點(diǎn)問題的技術(shù)分析與選擇廣告系統(tǒng)的服務(wù)化過程技術(shù)上的權(quán)衡取舍對高可靠性和可擴(kuò)展性的架構(gòu)設(shè)計(jì) 服務(wù)化過程中的技術(shù)收獲和經(jīng)驗(yàn)總結(jié)技術(shù)收獲和經(jīng)驗(yàn)總結(jié)服務(wù)劃分的粔細(xì)粒度把握切忌簡單按照業(yè)務(wù)邏轄進(jìn)行服務(wù)邏轄核心是找出真正的業(yè)務(wù)中心和業(yè)務(wù)支撐沒有統(tǒng)標(biāo)準(zhǔn)，關(guān)鍵的是 trade-off技術(shù)收獲和經(jīng)驗(yàn)總結(jié)服務(wù)的優(yōu)化重點(diǎn)在業(yè)務(wù)邏轄的優(yōu)化系統(tǒng)的熱點(diǎn)不會隨著服務(wù)化自然消失服務(wù)優(yōu)化的核心是對業(yè)務(wù)邏轄的深刻理解技術(shù)的實(shí)現(xiàn)只是手段技術(shù)收獲和經(jīng)驗(yàn)總結(jié)服務(wù)需要平滑地切換上線系統(tǒng)的服務(wù)化過程就像飛行過程中換引擎灰度上線階段時需要新