帶你深入了解Dubbo分布式服務(wù)框架

I：海云登尊區(qū)一、產(chǎn)生的背景隨著互聯(lián)網(wǎng)的發(fā)展，網(wǎng)站應(yīng)用的規(guī)模不斷擴(kuò)大，常規(guī)的垂直應(yīng)用架構(gòu)已無法應(yīng)對(duì)，分布式服務(wù)架構(gòu)以及流動(dòng)計(jì)算架構(gòu)勢在必行，亟需一個(gè)治理系統(tǒng)確保架構(gòu)有條不紊的演進(jìn)。下面我們用一個(gè)圖來具體說明架構(gòu)和開發(fā)框架的演進(jìn)過程。DubboArchitectureRoadmap單一應(yīng)用架構(gòu)當(dāng)網(wǎng)站流量很小時(shí)，只需一個(gè)應(yīng)用，將所有功能都部署在一起，以減少部署節(jié)點(diǎn)和成本。此時(shí)，用于簡化增刪改查工作量的數(shù)據(jù)訪問框架(ORM)是關(guān)鍵。垂直應(yīng)用架構(gòu)當(dāng)訪問量逐漸增大，單一應(yīng)用增加機(jī)器帶來的加速度越來越小，將應(yīng)用拆成互不相干的幾個(gè)應(yīng)用，以提升效率。此時(shí)，用于加速前端頁面開發(fā)的Web框架(MVC)是關(guān)鍵。分布式服務(wù)架構(gòu)當(dāng)垂直應(yīng)用越來越多，應(yīng)用之間交互不可避免，將核心業(yè)務(wù)抽取出來，作為獨(dú)立的服務(wù)，逐漸形成穩(wěn)定的服務(wù)中心，使前端應(yīng)用能更快速的響應(yīng)多變的市場需求。此時(shí)，用于提高業(yè)務(wù)復(fù)用及整合的分布式服務(wù)框架(RPC)是關(guān)鍵。流動(dòng)計(jì)算架構(gòu)當(dāng)服務(wù)越來越多，容量的評(píng)估，小服務(wù)資源的浪費(fèi)等問題逐漸顯現(xiàn)，此時(shí)需增加一個(gè)調(diào)度中心基于訪問壓力實(shí)時(shí)管理集群容量，提高集群利用率。此時(shí)，用于提高機(jī)器利用率的資源調(diào)度和治理中心(SOA)是關(guān)鍵。二、服務(wù)治理的需求微服務(wù)架構(gòu)是互聯(lián)網(wǎng)很熱門的話題，是互聯(lián)網(wǎng)技術(shù)發(fā)展的必然結(jié)果。它提倡將單體應(yīng)用程序劃分成一組若干小的服務(wù)，服務(wù)之間互相協(xié)調(diào)、互相配合，為用戶提供最終價(jià)值。單體應(yīng)用程序拆分成微服務(wù)后，服務(wù)治理是關(guān)鍵。那么有沒有好的服務(wù)治理方案呢?答案是有的，而且很多人都在用這個(gè)框架，它就是Dubbo。Dubbo是一個(gè)帶有服務(wù)治理功能的RPC框架，提供了一套較為完整的服務(wù)治理方案，所以企業(yè)如果要實(shí)現(xiàn)服務(wù)化的話，Dubbo是很好的一個(gè)選擇。這里簡單介紹一下Dubbo服務(wù)治理的幾個(gè)基本需求。

服^容就講論調(diào)度中心服務(wù)降級(jí)服務(wù)調(diào)用統(tǒng)計(jì)Q斗S也監(jiān)控中心使賴表系服^容就講論調(diào)度中心服務(wù)降級(jí)服務(wù)調(diào)用統(tǒng)計(jì)Q斗S也監(jiān)控中心使賴表系暫&|□丁口峰客4暫&|□丁口峰客4在大規(guī)模服務(wù)化之前，應(yīng)用可能只是通過RMI或Hessian等工具，簡單的暴露和弓I用遠(yuǎn)程服務(wù)，通過配置服務(wù)的URL地址進(jìn)行調(diào)用，通過F5等硬件進(jìn)行負(fù)載均衡。當(dāng)服務(wù)越來越多時(shí)，服務(wù)URL配置管理變得非常困難，F(xiàn)5硬件負(fù)載均衡器的單點(diǎn)壓力也越來越大。此時(shí)需要一個(gè)服務(wù)注冊(cè)中心，動(dòng)態(tài)的注冊(cè)和發(fā)現(xiàn)服務(wù)，使服務(wù)的位置透明。并通過在消費(fèi)方獲取服務(wù)提供方地址列表，實(shí)現(xiàn)軟負(fù)載均衡和Failover，降低對(duì)F5硬件負(fù)載均衡器的依賴，也能減少部分成本。當(dāng)進(jìn)一步發(fā)展，服務(wù)間依賴關(guān)系變得錯(cuò)蹤復(fù)雜，甚至分不清哪個(gè)應(yīng)用要在哪個(gè)應(yīng)用之前啟動(dòng)，架構(gòu)師都不能完整的描述應(yīng)用的架構(gòu)關(guān)系。這時(shí)，需要自動(dòng)畫出應(yīng)用間的依賴關(guān)系圖，以幫助架構(gòu)師理清關(guān)系。接著，服務(wù)的調(diào)用量越來越大，服務(wù)的容量問題就暴露出來，這個(gè)服務(wù)需要多少機(jī)器支撐?什么時(shí)候該加機(jī)器？為了解決這些問題，第一步，要將服務(wù)現(xiàn)在每天

解自北大芹帛名］解自北大芹帛名］的調(diào)用量，響應(yīng)時(shí)間，都統(tǒng)計(jì)出來，作為容量規(guī)劃的參考指標(biāo)。其次，要可以動(dòng)態(tài)調(diào)整權(quán)重，在線上，將某臺(tái)機(jī)器的權(quán)重一直加大，并在加大的過程中記錄響應(yīng)時(shí)間的變化，直到響應(yīng)時(shí)間到達(dá)閾值，記錄此時(shí)的訪問量，再以此訪問量乘以機(jī)器數(shù)反推總?cè)萘?。以上是Dubbo最基本的幾個(gè)需求。簡單的說，Dubbo就是個(gè)服務(wù)調(diào)用的框架，如果沒有分布式的需求，其實(shí)是不需要用的，只有在分布式的時(shí)候，才有使用Dubbo這樣的分布式服務(wù)框架的需求，并且本質(zhì)上是個(gè)服務(wù)調(diào)用的東東。其核心部分包含：遠(yuǎn)程通訊：提供對(duì)多種基于長連接的NIO框架抽象封裝，包括多種線程模型、序列化以及〃請(qǐng)求-響應(yīng)”模式的信息交換方式。集群容錯(cuò)：提供基于接口方法的透明遠(yuǎn)程過程調(diào)用，包括多協(xié)議支持以及軟負(fù)載均衡，失敗容錯(cuò)、地址路由、動(dòng)態(tài)配置等集群支持。自動(dòng)發(fā)現(xiàn)：基于注冊(cè)中心目錄服務(wù)，使服務(wù)消費(fèi)方能動(dòng)態(tài)的查xxx提供方，使地址透明，使服務(wù)提供方可以平滑增加或減少機(jī)器。三、Dubbo的架構(gòu)和特點(diǎn)說完產(chǎn)生的背景和需求后，下面具體談下Dubbo的總體架構(gòu)以及Dubbo的特點(diǎn)。

*DubboFnmtworlk?。忡翎mer Hovid^i, ，占it InUif^c*■：l*牝IwnfcrRtflitryMdhkt心rOrQtg立IIwyl&rFPictnrvMnmtorFrltrrMnoitorConfigRelcrthceCanfifi*DubboFnmtworlk?。忡翎mer Hovid^i, ，占it InUif^c*■：l*牝IwnfcrRtflitryMdhkt心rOrQtg立IIwyl&rFPictnrvMnmtorFrltrrMnoitorConfigRelcrthceCanfifiPro珅RegistryDiffEEtHivRegistryProIofdIMonilCifFactoryOibbnlnwfcFrJDubbcPratOEDlDubboExportcr■RubboHtfndlc-T「麗頑Pnvnter如上圖所示，Dubbo總體架構(gòu)設(shè)計(jì)一共劃分了10層，而最上面的Service層是留給實(shí)際想要使用Dubbo開發(fā)分布式服務(wù)的開發(fā)者實(shí)現(xiàn)業(yè)務(wù)邏輯的接口層。圖中左邊淡藍(lán)背景的為服務(wù)消費(fèi)方使用的接口石邊淡綠色背景的為服務(wù)提供方使用的接口，位于中軸線上的為雙方都用到的接口。下面，結(jié)合Dubbo官方文檔，理解一下總體架構(gòu)分層中，各個(gè)層次的設(shè)計(jì)要點(diǎn):服務(wù)接口層(Service):該層是與實(shí)際業(yè)務(wù)邏輯相關(guān)的，根據(jù)服務(wù)提供方和服務(wù)消費(fèi)方的業(yè)務(wù)設(shè)計(jì)對(duì)應(yīng)的接口和實(shí)現(xiàn)。配置層(Config):對(duì)外配置接口，以ServiceConfig和ReferenceConfig為中心，可以直接new配置類，也可以通過Spring解析配置生成配置類。服務(wù)代理層(Proxy):服務(wù)接口透明代理，生成服務(wù)的客戶端Stub和服務(wù)器端Skeleton，以ServiceProxy為中心，擴(kuò)展接口為ProxyFactory。服務(wù)注冊(cè)層(Registry):封裝服務(wù)地址的注冊(cè)與發(fā)現(xiàn)，以服務(wù)URL為中心，擴(kuò)展接口為RegistryFactory、Registry和RegistryService。可能沒有服務(wù)注冊(cè)中心，此時(shí)服務(wù)提供方直接暴露服務(wù)。集群層(Cluster):封裝多個(gè)提供者的路由及負(fù)載均衡，并橋接注冊(cè)中心，以Invoker為中心，擴(kuò)展接口為Cluster、Directory.Router和LoadBalance。將多個(gè)服務(wù)提供方組合為一個(gè)服務(wù)提供方，實(shí)現(xiàn)對(duì)服務(wù)消費(fèi)方透明，只需要與一個(gè)服務(wù)提供方進(jìn)行交互。監(jiān)控層(Monitor):RPC調(diào)用次數(shù)和調(diào)用時(shí)間監(jiān)控，以Statistics為中心，擴(kuò)展接口為MonitorFactory、Monitor和MonitorService。遠(yuǎn)程調(diào)用層(Protocol)封將RPC調(diào)用以Invocation和Result為中心，擴(kuò)展接口為Protocol.Invoker和Exporter。Protocol是服務(wù)域，它是Invoker暴露和弓I用的主功能入口，它負(fù)責(zé)Invoker的生命周期管理。Invoker是實(shí)體域，它是Dubbo的核心模型，其他模型都向它靠擾，或轉(zhuǎn)換成它，它代表一個(gè)可執(zhí)行體，可向它發(fā)起invoke調(diào)用。它有可能是一個(gè)本地的實(shí)現(xiàn)，也可能是一個(gè)遠(yuǎn)程的實(shí)現(xiàn)，也可能是一個(gè)集群實(shí)現(xiàn)。信息交換層(Exchange):封裝請(qǐng)求響應(yīng)模式，同步轉(zhuǎn)異步，以Request和Response為中心，擴(kuò)展接口為Exchanger、ExchangeChannel、ExchangeClient和ExchangeServer。網(wǎng)絡(luò)傳輸層(Transport):抽象mina和netty為統(tǒng)一接口，以Message為中心，擴(kuò)展接口為Channel、Transporter.Client、Server和Codec。

10.數(shù)據(jù)序列化層(Serialize):可復(fù)用的一些工具，擴(kuò)展接口為Serialization.10.Objectinput、ObjectOutput和ThreadPool。從上圖可以看出，Dubbo對(duì)于服務(wù)提供方和服務(wù)消費(fèi)方，從框架的10層中分別提供了各自需要關(guān)心和擴(kuò)展的接口，構(gòu)建整個(gè)服務(wù)生態(tài)系統(tǒng)(服務(wù)提供方和服務(wù)消費(fèi)方本身就是一個(gè)以服務(wù)為中心的)。下圖是從Dubbo官網(wǎng)直接拿來的，看一下基于RPC層，服務(wù)提供方和服務(wù)消費(fèi)方之間的調(diào)用關(guān)系，如圖所示:init*->async—>sync2.subscribeN：3-notifyregisterinit*->async—>sync2.subscribeN：3-notifyregisterProvider4jnvoke\5.count/電51CT門牌皆ServiceConsumer節(jié)點(diǎn)角色說明:涂身北大節(jié)點(diǎn) 角色說明Provider 暴露服務(wù)的服務(wù)提供方Consumer 調(diào)用遠(yuǎn)程服務(wù)的服務(wù)消費(fèi)方Reeistry 服務(wù)注冊(cè)與發(fā)現(xiàn)的注冊(cè)中心Mani^r 統(tǒng)汁服務(wù)的調(diào)用次數(shù)和調(diào)用時(shí)間的監(jiān)控中心Container 服務(wù)運(yùn)行容器—— 與51。丁。博客調(diào)用關(guān)系說明：0:服務(wù)容器負(fù)責(zé)啟動(dòng)，加載，運(yùn)行服務(wù)提供者。1:服務(wù)提供者在啟動(dòng)時(shí)，向注冊(cè)中心注冊(cè)自己提供的服務(wù)。2:服務(wù)消費(fèi)者在啟動(dòng)時(shí)，向注冊(cè)中心訂閱自己所需的服務(wù)。3:注冊(cè)中心返回服務(wù)提供者地址列表給消費(fèi)者，如果有變更，注冊(cè)中心將基于長連接推送變更數(shù)據(jù)給消費(fèi)者。4:服務(wù)消費(fèi)者，從提供者地址列表中，基于軟負(fù)載均衡算法，選一臺(tái)提供者進(jìn)行調(diào)用，如果調(diào)用失敗，再選另一臺(tái)調(diào)用。5:服務(wù)消費(fèi)者和提供者，在內(nèi)存中累計(jì)調(diào)用次數(shù)和調(diào)用時(shí)間，定時(shí)每分鐘發(fā)送一次統(tǒng)計(jì)數(shù)據(jù)到監(jiān)控中心。Dubbo架構(gòu)采用的是一種非常簡單的模型，要么是提供方提供服務(wù)，要么是消費(fèi)方消費(fèi)服務(wù)，所以基于這一點(diǎn)可以抽象出服務(wù)提供方(Provider)和服務(wù)消費(fèi)方(Consumer)兩個(gè)角色。另外Dubbo架構(gòu)還具有以下幾個(gè)特點(diǎn)，連通性、健壯憩Si上力云登校ix性、伸縮性、升級(jí)性，有關(guān)注冊(cè)中心、協(xié)議支持、服務(wù)監(jiān)控等內(nèi)容，也在特點(diǎn)里有詳細(xì)的描述。連通性（服務(wù)消費(fèi)者和服務(wù)提供者的關(guān)聯(lián)）注冊(cè)中心負(fù)責(zé)服務(wù)地址的注冊(cè)與查找，相當(dāng)于目錄服務(wù)，服務(wù)提供者和消費(fèi)者只在啟動(dòng)時(shí)與注冊(cè)中心交互，注冊(cè)中心不轉(zhuǎn)發(fā)請(qǐng)求，壓力較小。監(jiān)控中心負(fù)責(zé)統(tǒng)計(jì)各服務(wù)調(diào)用次數(shù)，調(diào)用時(shí)間等，統(tǒng)計(jì)先在內(nèi)存匯總后每分鐘一次發(fā)送到監(jiān)控中心服務(wù)器，并以報(bào)表展示。服務(wù)提供者向注冊(cè)中心注冊(cè)其提供的服務(wù)，并匯報(bào)調(diào)用時(shí)間到監(jiān)控中心，此時(shí)間不包含網(wǎng)絡(luò)開銷。服務(wù)消費(fèi)者向注冊(cè)中心獲取服務(wù)提供者地址列表，并根據(jù)負(fù)載算法直接調(diào)用提供者，同時(shí)匯報(bào)調(diào)用時(shí)間到監(jiān)控中心，此時(shí)間包含網(wǎng)絡(luò)開銷。注冊(cè)中心，服務(wù)提供者，服務(wù)消費(fèi)者三者之間均為長連接，監(jiān)控中心除外。注冊(cè)中心通過長連接感知服務(wù)提供者的存在，服務(wù)提供者宕機(jī)，注冊(cè)中心將立即推送事件通知消費(fèi)者。注冊(cè)中心和監(jiān)控中心全部宕機(jī)，不影響已運(yùn)行的提供者和消費(fèi)者，消費(fèi)者在本地緩存了提供者列表。注冊(cè)中心和監(jiān)控中心都是可選的，服務(wù)消費(fèi)者可以直連服務(wù)提供者。健壯性（任意節(jié)點(diǎn)宕掉后，服務(wù)仍然可用）監(jiān)控中心宕掉不影響使用，只是丟失部分采樣數(shù)據(jù)。@黑￡上海云登校IX數(shù)據(jù)庫宕掉后，注冊(cè)中心仍能通過緩存提供服務(wù)列表查詢，但不能注冊(cè)新服務(wù)。注冊(cè)中心對(duì)等集群，任意一臺(tái)宕掉后，將自動(dòng)切換到另一臺(tái)。注冊(cè)中心全部宕掉后，服務(wù)提供者和服務(wù)消費(fèi)者仍能通過本地緩存通訊。服務(wù)提供者無狀態(tài)，任意一臺(tái)宕掉后，不影響使用。服務(wù)提供者全部宕掉后，服務(wù)消費(fèi)者應(yīng)用將無法使用，并無限次重連等待服務(wù)提供者恢復(fù)。伸縮性（節(jié)點(diǎn)可以自動(dòng)增加）注冊(cè)中心為對(duì)等集群，可動(dòng)態(tài)增加機(jī)器部署實(shí)例，所有客戶端將自動(dòng)發(fā)現(xiàn)新的注冊(cè)中心。服務(wù)提供者無狀態(tài)，可動(dòng)態(tài)增加機(jī)器部署實(shí)例，注冊(cè)中心將推送新的服務(wù)提供者信息給消費(fèi)者。升級(jí)性（可平滑升級(jí)）當(dāng)服務(wù)集群規(guī)模進(jìn)一步擴(kuò)大，帶動(dòng)IT治理結(jié)構(gòu)進(jìn)一步升級(jí)，需要實(shí)現(xiàn)動(dòng)態(tài)部署，進(jìn)行流動(dòng)計(jì)算，不會(huì)給現(xiàn)有分布式服務(wù)架構(gòu)帶來阻力。下圖是未來可能的一種調(diào)用架構(gòu)：

解門北KDubbaArchitectureFutureapplicodonplatform-->inh-^>async;—>synccbJUEUJOJnQo一AJCU5S.subscrib&^^knoEify6.renterDeplovmerii|Registryr?〕Repository|AH*cbJUEUJOJnQo一AJCU5S.subscrib&^^knoEify6.renterDeplovmerii|Registryr?〕Repository|AH* JD^cributedService； EM弘把Computing節(jié)點(diǎn)角色說明:節(jié)點(diǎn) 角色說明Deplayer 自動(dòng)部署服務(wù)的本地代理Rtpcjsitcry 倉庫用于存儲(chǔ)服務(wù)應(yīng)用發(fā)布包弘詭如1如 調(diào)度中心基于訪問壓力自動(dòng)增減服務(wù)提供者M(jìn)min 統(tǒng)—管理控制臺(tái)R即姑E 服務(wù)注冊(cè)與發(fā)現(xiàn)的注冊(cè)中心Unitor 統(tǒng)計(jì)服務(wù)的調(diào)用次數(shù)和調(diào)用時(shí)間的監(jiān)控中心必51CTO■客四、總結(jié)@心豈■ I:海云