光載無(wú)限監(jiān)控體系的變革與演進(jìn)

光載無(wú)限監(jiān)控體系的變革與演進(jìn)2016/04/09在開(kāi)始之前?設(shè)備監(jiān)控、資源監(jiān)控、網(wǎng)絡(luò)監(jiān)控、服務(wù)監(jiān)控、網(wǎng)站監(jiān)控、業(yè)務(wù)監(jiān)控、性能監(jiān)控、應(yīng)用性能管理（APM）、應(yīng)用程序監(jiān)控、安全監(jiān)控目錄????過(guò)去的監(jiān)控系統(tǒng)?我們?yōu)槭颤N選擇了Open-Falcon?光載無(wú)限如何玩轉(zhuǎn)Open-Falcon?總結(jié)過(guò)去的監(jiān)控系統(tǒng)?4過(guò)去的監(jiān)控系統(tǒng)????難以擴(kuò)展?二次開(kāi)發(fā)難度高?多套系統(tǒng)，不同的操作方式?Zabbix需要管理不同的配置，系統(tǒng)間同步??難以保證監(jiān)控全覆蓋WhatsupGold?Cacti5需求總結(jié)?統(tǒng)一監(jiān)控工具，降低維護(hù)以及排查的成本??

降低值班人員的學(xué)習(xí)成本與技術(shù)門(mén)檻，將解決問(wèn)題的經(jīng)驗(yàn)積累到系統(tǒng)上?提高監(jiān)控系統(tǒng)的效能、可用性、用戶(hù)體驗(yàn)???高可擴(kuò)展性??

目標(biāo)至少支持一萬(wàn)臺(tái)服務(wù)器的規(guī)模?能滿足內(nèi)部的二次定制需求?6尋找開(kāi)源解決方案?7有這麼多的開(kāi)源監(jiān)控系統(tǒng)...Zabbix,Nagios,Cacti,WhatsupGOLD,Sensu,

Open-Falcon,

Prometheus,

Flapjack,Bonsun,OMD,Check_MK,graphite,collectd,Zenoss,monit,Munin,OpenNMS,Ganglia,Consul...8也有這麼多的商業(yè)監(jiān)控系統(tǒng)...NewRelic,LogicalMonitor,DataDog,Splunk,監(jiān)控寶,Elastic-Marvel,Librato,Stackdriver...9我們?nèi)绾芜x擇開(kāi)源項(xiàng)目????現(xiàn)代化的設(shè)計(jì)與良好的架構(gòu)?活躍的社區(qū)與大公司的支持?模塊化、可擴(kuò)展性高，易於二次開(kāi)發(fā)??可以很容易地利用既有的ZabbixScript或Plugin??滿足光載無(wú)限的業(yè)務(wù)需求??網(wǎng)路質(zhì)量、7x24小時(shí)值班人員、等等10依照這標(biāo)準(zhǔn)，剩下...???Sensu?Consul??

2011??

2013??HasiCorp??Heavy-Water??Prometheus?

Open-Falcon???2012?2015??

SoundCloud?

Xiaomi11我們?yōu)槭颤N選擇Open-Falcon???????系統(tǒng)設(shè)計(jì)簡(jiǎn)潔，易於二次開(kāi)發(fā)?分佈式組件，水平擴(kuò)展容易，支持量級(jí)高?高效數(shù)據(jù)展示與查詢(xún)?Golang二進(jìn)制部署方便?完善的基礎(chǔ)採(cǎi)集項(xiàng)?人性化的告警策略與模板設(shè)計(jì)12Open-Falcon的問(wèn)題13Op?????????G14Open-Falcon的問(wèn)題?????????系統(tǒng)不易分發(fā)?安全性考量不到位?沒(méi)有通盤(pán)考慮的權(quán)限設(shè)計(jì)?複雜度稍高?每個(gè)

Graph

實(shí)例均是單點(diǎn)?Graph

擴(kuò)容有損?上下游組件沒(méi)有

naming?報(bào)警沒(méi)有入庫(kù)?報(bào)警現(xiàn)場(chǎng)沒(méi)有保存15二次開(kāi)發(fā)Open-Falcon?16玩轉(zhuǎn)Open-Falcon???????Container/MonitoringasaService?安全性補(bǔ)強(qiáng)?用戶(hù)界面改善與體驗(yàn)優(yōu)化?CMDB與Open-Falcon結(jié)合?運(yùn)維內(nèi)部接口適配?後端模塊統(tǒng)一與簡(jiǎn)化?CDN網(wǎng)絡(luò)質(zhì)量監(jiān)測(cè)17我們是這麼看待Open-Falcon的UICoreAux.Aux.storagenoti?cationAgent18Enhanced?DashboardCMDBGrafana?Dashboard?EnhancedQueryInfluxDBContainerasaService??Open-Falcon所有組件容搭配Docker-Swarm做資20安全性補(bǔ)強(qiáng)??SSO單一登入?Grafana

與

Open-Falcon222的賬號(hào)整合SingleSign-OnDashboard

Portal

UICFE

Grafana21用戶(hù)界面改善與體驗(yàn)優(yōu)化（1/4）??統(tǒng)一入口不再迷失?加入側(cè)邊欄、導(dǎo)覽列2用戶(hù)界面改善與體驗(yàn)優(yōu)化（1/4）??探索趨勢(shì)圖以外的可能?Grafana與Open-Falcon的深度整合23用戶(hù)界面改善與體驗(yàn)優(yōu)化（3/4）?IsomorphicWebDesign????單頁(yè)式設(shè)計(jì)?服務(wù)端渲染?前端組件統(tǒng)一24用戶(hù)界面改善與體驗(yàn)優(yōu)化（4/4）25CMDB整合（1/2）???支持以?xún)?nèi)部BOSS賬號(hào)登入?設(shè)備列表跳轉(zhuǎn)至概覽頁(yè)面?資產(chǎn)信息同步26CMDB整合（2/2）?CMDB統(tǒng)一管理服務(wù)與角色，專(zhuān)用接口替換模板變量27運(yùn)維內(nèi)部接口適配?協(xié)助運(yùn)維更快上手??

Screen,Template,HostGroup的初始範(fàn)本??Zabbix腳本移植、提供插件範(fàn)本??Agent安裝流程與配置簡(jiǎn)化??如：RPM包安裝、/etc/init.d啟動(dòng)腳本???支持ZabbixAPI接口?支持以HostGroup為單位查找，設(shè)備同步自CMDB28網(wǎng)路質(zhì)量監(jiān)測(cè)?點(diǎn)對(duì)點(diǎn)的網(wǎng)絡(luò)指標(biāo)數(shù)據(jù)採(cǎi)集29網(wǎng)路質(zhì)量監(jiān)測(cè)的挑戰(zhàn)????多維度??

機(jī)房、省份、城市、地區(qū)、運(yùn)營(yíng)商?批次計(jì)算??平均值、最大/最小值、標(biāo)準(zhǔn)差?不同的分組：??

內(nèi)網(wǎng)、外網(wǎng)、平臺(tái)?向量??

方向與大小30架構(gòu)上的調(diào)整OWLGrafanaMySQLRedis…OWLNQM31網(wǎng)路質(zhì)量監(jiān)測(cè)（1/3）32網(wǎng)路質(zhì)量監(jiān)測(cè)（2/3）33後端模塊統(tǒng)一與簡(jiǎn)化（1/2）?

借鑒

Consol與

Docker-Compose??

簡(jiǎn)化服務(wù)端維護(hù)與部署的負(fù)擔(dān)??

配置檔統(tǒng)一管理??打造周邊工具鏈??

docker,

vagrant,

test,

scripts,

make?集中管理，聚人氣??代碼、文檔、問(wèn)題、反饋、PR??

★399

agent

(~2016/04/09)??

★262of-release(~2016/04/09)34後端模塊統(tǒng)一與簡(jiǎn)化（2/2）UIDockerBackendModulesDriver35總結(jié)36回顧Open-Falcon的問(wèn)題?????????系統(tǒng)不易分發(fā)?安全性考量不到位?沒(méi)有通盤(pán)考慮的權(quán)限設(shè)計(jì)?複雜度稍高?每個(gè)

Graph

實(shí)例均是單點(diǎn)?Graph