運維平臺民案例

企業(yè)互聯(lián)網(wǎng)化的DevOps

整合一切——企業(yè)級開發(fā)及運維平臺實踐iUAP本部20160813每次新項目的上線，都是一次痛苦的折磨！至少提前2個月準備某 訪談中國

網(wǎng)花費這么長時間根源在于：這一切是依賴了人！??！如何縮短交付周期？從互聯(lián)網(wǎng)項目上線說起高并發(fā)業(yè)務場景下根本不清楚系統(tǒng)運行情況是什么樣的DevOps時代，運維需要一個看板及時反饋給開發(fā)當前有多少用戶在 系統(tǒng)每臺機器正承受多大壓力當前業(yè)務交易量是多少雙11，交易量如何統(tǒng)計的怎樣做才能不再是黑盒？618，實時流量如何統(tǒng)計的項目上線，不是結(jié)束，才剛剛開始…ABCDE調(diào)用鏈復雜線上系統(tǒng)，錯綜復雜F到線上出現(xiàn)的問題，一般不是小問題網(wǎng)絡問題環(huán)境問題代碼問題第 API問題curlnetnetstat

tracert

toppsenvstracejprofilejdbrest

testpostmanjstackHouseMD阿里MNS接口線上業(yè)務出錯，排查問題無從下手BDE

F業(yè)務大面積癱瘓，整體崩掉B

C擴容不及時，可能造成及時擴容，拯救系統(tǒng)擴容的成本居高不下CABCDEF

E及時進行系統(tǒng)的擴容AABBEAADEF業(yè)務穩(wěn)定了，但流量的暴增，導致系統(tǒng)雪崩業(yè)務大面積癱瘓A+M

A+MB+M

B+ME+M

E+MM

M

M從其他業(yè)務線，借用機器，臨時部署業(yè)務Docker才是救兵擴容需要一致化的環(huán)境M借用機器進行了系統(tǒng)擴容M

M環(huán)境的改變，

了M的全線癱瘓BDCFAEABCDEF不恰當?shù)臄U容，其他問題面對這些問題，技術團隊的現(xiàn)狀技術團隊團隊壓力大代碼管理缺乏技術積累新項目啟動沒有 的項目模板，導致每次項目啟動都是底層代碼都要重寫一遍模塊封裝不夠，導致本可以公用的模塊，每個團隊都要重新封裝一次研發(fā)資源重復投入，投入成本高老項目發(fā)展沒有 框架，技術使用五花八門技術難點成果不能 ，比如：瀏覽器兼容、多級緩存等項目組之間交接 ，資源不能共享底層框架問題不能聚焦資源 處理沒有 UE風格，每次頁面都是重新切圖，沒有公用的模板套用離職，交接成本高小團隊初創(chuàng)時沒有精力投入到 框架，但是當業(yè)務慢慢壯大，問題凸顯新互聯(lián)網(wǎng)項目的開發(fā)，重新搭框架，以前代碼不能復用擴容上線后服務出問題能快速定位知道何時用戶量出現(xiàn)暴增暴增的時候，能夠快速擴容發(fā)布部署開發(fā)完后快點上線

新版本能夠持續(xù)集成上線后服務別掛開發(fā)框架通用的模板可套用

穩(wěn)定的經(jīng)過驗證的組件開發(fā)過程快速開發(fā)完新需求不斷迭代新版本服務自愈能夠自動檢測服務的狀態(tài)如果服務掛掉了，自重啟快速恢復到可用狀態(tài)痛定思痛，需要一個穩(wěn)定的底層支撐，保證業(yè)務的快速發(fā)展…運維

成本降低持續(xù)集成的過程更加順暢開發(fā)、運維高度協(xié)同自動化流程一切規(guī)范新版本迭代更快更強線上的運行穩(wěn)定可靠DevOps

=

Culture

+

Tools使用平臺將會帶來的收益支持devops全生命周期管理，并提供了對應工具支撐提供了devops的最佳實踐和工具使用說明提供組件庫對研發(fā)成果進行管理

支持自動化測試，提供了性能測試、代碼掃描、自動化測試等工具支持基于docker容器的持續(xù)交付支持應用性能 ，能夠以非侵入形式對系統(tǒng)進行端到端的支持日志分析，提供了系統(tǒng)運營等看板，實時 系統(tǒng)線上運行情況如何支持DevOps的快速交付？框架與組件提供了完整的基礎運行框架，以及大量的互聯(lián)網(wǎng)技術、應用組件；底層技術無需再關注官網(wǎng)文檔開 檔全部放在iuap官網(wǎng)，并有反饋通道，快速響應示例代碼每個組件均有樣例工程，無需協(xié)助，即可學會如何使用組件開發(fā)工具提供了一鍵啟動的集成開發(fā)環(huán)境，并配有代碼智能提示、代碼生成引擎、頁面模版等輔助功能前端模版iuap

design官網(wǎng)提供了樣式板、模版庫等前端支持方式，解決前端快速上手問題快速開發(fā)開發(fā)工具中提供可視化模型設計、智能文件編輯器、頁面模板、代碼生成引擎等整合互聯(lián)網(wǎng)技術，提供穩(wěn)定的技術框架提供豐富的技術及應用組件，使開發(fā)者無需關注底層技術細節(jié)提供樣例工程以及組件級示例代碼

提供前端模版，通用業(yè)務界面可直接使用模版整理入門、開發(fā)指導、組件使用等大量文檔如何支持快速開發(fā)？企業(yè)級敏捷開發(fā)高并發(fā)快速微服務提供高并發(fā)互聯(lián)網(wǎng)架構(gòu)支持企業(yè)級互聯(lián)網(wǎng)應用開發(fā)支持微服務架構(gòu)快速開發(fā)能力安全安全保障體系前端企業(yè)級前端解決方案構(gòu)建敏捷迭代模式開發(fā)平臺的優(yōu)勢與特性CollectorIndexQuery后端數(shù)據(jù)前端數(shù)據(jù)ElasticSearchWeb

UISearch

Query系統(tǒng)不再是黑盒，報表實時可視化展現(xiàn)線上情況業(yè)務總覽報表基于大數(shù)據(jù)的分析，使得運行情況盡在掌控總體性能情況代碼異常下鉆定位Js報錯分析瀏覽器性能分析用戶行為分析應用服務分析線上出錯，分分鐘搞定問題定位，基于可視化工具，精準快速Docker鏡像倉庫ABCDEF擴容Docker應用業(yè)務以鏡像的方式存在再次拉取鏡像部署Docker應用拉取鏡像ACDEFBCAE以Docker形態(tài)運行的應用B

A

D

EFBBCA快速擴容，基于Docker鏡像的一致性大流量突然來襲，不再束手無措基于Docker，可以實現(xiàn)快速擴容數(shù)字共享服務友云采友人才惠商云云建筑對內(nèi)支撐對外支撐盈科旅游華科誠信美的全友象嶼中國中國移動小貸卡考中國

中國國際航空上鈺大帳房河北交通廳國家開發(fā)銀行民太安碧桂園參仙源iuap開發(fā)平臺&運維平臺，大家都在用iuap

design前端模板iuap

design可視化設計器iuap云運維平臺iuap開發(fā)平臺iuap3.0，因為有你，更加綻放謝謝大家民太安保險公估大型保險公估互聯(lián)網(wǎng)平臺項目民太安公估2005民太安 保險公估成立2013“民太安財險”承接“民太安”旗下所有保險公估業(yè)務，收入破3億元收入3.8億元，連續(xù)15年行業(yè)第一，登陸新三板，

代碼8339842016預計收入突破4億元20152007年收入突破1億元2008收入突破2億元依托公司的品牌優(yōu)勢，借助資本市場的支持，利用信息化

，以保險服務為主線，打造國內(nèi)領先、國際知名、專業(yè)化、信息化的保險服務、風險管理、汽車服務、數(shù)據(jù)服務的綜合平臺。車險公估財水險公估醫(yī)健險公估審計司法鑒定車生活配件價格本地化及直供服務能力深圳2500+自有員工1700+

公估人34家40家營業(yè)部車險年處理 量超300萬件財水險年處理 量超2萬件醫(yī)健險年處理 量超1,.5萬件服務網(wǎng)絡覆蓋項目背景及信息化現(xiàn)狀項目目標項目現(xiàn)狀客戶業(yè)務范圍：保險檢驗、估價、風險評估、出險后的查勘、檢驗、估損理算及出險保險標的殘值處理。設立34個，營業(yè)收入市場份額連續(xù)15年位居中國保險公估行業(yè)第一。國際公估合作包括亞洲、非洲、歐洲、美洲四大洲87個國家及地區(qū)。客戶信息部門開發(fā)了一套適合的業(yè)務處理系統(tǒng)。市場目標：使公司業(yè)務從“保險公估”到“互聯(lián)網(wǎng)+保險理賠服務”。行業(yè)目標：在公估行業(yè)打造全新的

“公估2.0”企業(yè)新模式。公司目標：實現(xiàn)由“精細化”向“精準化”轉(zhuǎn)變；通過技術的持續(xù)創(chuàng)新，建設一套符合財水險產(chǎn)品線持續(xù)發(fā)展要求的信息化管理系統(tǒng)，為實現(xiàn)公司目標提供有力技術保障。正式上線。該保險理賠服務共享平臺，以高效、創(chuàng)新、共享、綠色、共贏的全新發(fā)展理念，整合社有的保險理賠服務資源，幫助客戶向廣大客戶和保險人提供快捷、專業(yè)、優(yōu)質(zhì)的理賠服務。同時，各地有理賠服務能力的個人及單位可以通過加盟平臺提供服務，并獲取相應收益。項目背景項目價值互聯(lián)網(wǎng)+保險公估在信息化平臺的基礎

上，通過物理網(wǎng)點、服務、公估人的多服務模式，建立覆蓋的服務網(wǎng)絡。擴大服務覆蓋面整合外部的專業(yè)理賠服務資源，發(fā)揮后援中心的服務與管控作用，通過賠伴網(wǎng)平臺為客戶提供線上線下的專業(yè)化、信息化、標準化、透明化的理賠服務整合線上線下資源依托智能化互聯(lián)網(wǎng)+公估模式，打通環(huán)節(jié)，整合各方，構(gòu)建可持續(xù)發(fā)展的保險公估服務生態(tài)圈。建立生態(tài)圈項目需求-賠伴網(wǎng)賠伴網(wǎng)

專為中小財險公司打造的公共理賠，致力于解決中小財險公司服務網(wǎng)絡不全、理賠區(qū)域覆蓋不足的問題整合社會上有效的理賠服務資源，用更低的成本更迅速的服務，解決中小新外財險公司理賠難題建立

平臺級后援團隊，以移動互聯(lián)網(wǎng)、大數(shù)據(jù)分析等技術為工具，實時作業(yè)指導和風險管控調(diào)度運營支持中心委托資料轉(zhuǎn)錄保險公司業(yè)內(nèi)專業(yè)被保險人報案考試對帳錢包提現(xiàn)電子工牌信用評價查勘定損貨運險查勘人傷查勘其他新型服務計費規(guī)則第

支付應收公估費核算應收過帳財務公估人保證金作業(yè)費/傭金計算應收對帳應付過帳財務保險公司預收管理NC財務系統(tǒng)大數(shù)據(jù)分析應用商業(yè)分析前臺APP/web門戶中臺業(yè)務運營公估師招募/認證團隊管理接案派工定損品質(zhì)審核評價公估師評價回訪

統(tǒng)計分析客訴處理

保險公司系統(tǒng)接口UAPWEB平臺+iUAP技術平臺財務管理UAP

WEB平臺+iUAP

ESBBQ

8+UDH發(fā)布部署iUAPMobile+iUAP技術平臺持續(xù)交付性能運維管理日志分析運行iUAP運維平臺采用iUAP與公估整體業(yè)務解決方案相融合賠伴網(wǎng)總體應用架構(gòu)體系（2016年）賠伴網(wǎng)項目 難點大并發(fā)要求，技術門檻高傳統(tǒng)的企業(yè) 架構(gòu)不足以支撐2C互聯(lián)網(wǎng)項目的并發(fā)要求；開源的互聯(lián)網(wǎng)技術架構(gòu)對技術 要求很高。持續(xù)迭代、快速上線業(yè)務探索持續(xù)改進，相應的要求IT開發(fā)迭代、上線能夠跟上業(yè)務變更的速度。完全個性化定制創(chuàng)新業(yè)務，完全的個性化定制，以往的經(jīng)驗可借鑒的不多。用戶體驗為王用戶界面風格互聯(lián)網(wǎng)化，不同于企業(yè)辦公界面，有較高UE要求。使用iUAP技術平臺解決方案實現(xiàn)門戶服務器端服務層客戶端開發(fā)工具前端開發(fā)工具(HBuilder)緩存服務Redis移動端PC前端展示層消息隊列服務ActiveMQ//RabbitMQ分布式服務框架Dubbox/ZookeeperEclipse服務端集成開發(fā)工具

(Git/Maven)客戶端開發(fā)框架KnockoutJS/Bootstrap性能測試工具(iUAP

Runner)集成測試工具(Selenium)搜索服務Solr/Zookeeper持久層服務Spring

data

jpaiUAP

Mobile(HybridAPP)移動開發(fā)工具(iUAP

Mobile)html/json

http/rest負載均衡層Web緩存層負載均衡技術LVS/Haproxy/NginxWeb緩存Nginx/VarnishWeb層WEB服務框架Spring

MVC/FreeMarker層安全框架Shiro(登錄)數(shù)據(jù)庫MySQL/PostgreSQL/Oracle文件FastDFS/MongoDB索引數(shù)據(jù)文件

服務調(diào)度服務iUAP開發(fā)平臺支撐持續(xù)集成模式編譯代碼靜態(tài)檢查單元測試打包功能測試開發(fā)態(tài)工具集持續(xù)集成構(gòu)建工具代碼靜態(tài)檢查代碼安全檢查持續(xù)集成工具集黑盒自動化測試白盒自動化測試性能測試測試工具集交付效果展示：前端門戶交付效果展示：后端運營iUAP

Mobile交付效果：創(chuàng)客APP（安卓）iUAP

Mobile交付效果：創(chuàng)客APP（蘋果）運維工作量大、成本高傳統(tǒng)運維過程，環(huán)節(jié)眾多，人力、時間、測試、部署成本高修改配置手工部署上傳war包準備環(huán)境準備機器啟動應用運維驗證開發(fā)驗證測試驗證準備切換Nginx配置修改代碼提交Git/SVN代碼構(gòu)建Maven倉庫應用war包新服務上線線上調(diào)優(yōu)用戶可老服務降級極簡的互聯(lián)網(wǎng)架構(gòu)ELBNginxTomcat數(shù)據(jù)庫應用部署邏輯架構(gòu)圖iuap運維平臺支撐系統(tǒng)運行應用發(fā)布管理截圖發(fā)布后的應用列表和依賴的Redis中間件應用部署發(fā)布可視化的運維應用管理界面，運維的整個流程自動化，基于Docker、鏡像，應用快速部署上線為Docker鏡像配置信息不再應用擴容，一鍵完成可視化查看業(yè)務情況實時統(tǒng)計用戶的瀏覽器端真實用戶體驗者的地域分布者瀏