移動性能監(jiān)控系統(tǒng)架構(gòu)設(shè)計(jì)

移動性能監(jiān)控系統(tǒng)架構(gòu)設(shè)計(jì)第1頁/共14頁Front-end

Back-end

Front-end

架構(gòu)Performance

Collector

Write

to

Queue

Data

Queue

Async,

Read

from

Queue

Agent

Compressor

+

Sender

Back-end

Js

LibraryUse

LocalStorage

Use

HTTP

GET

1*1

GIF

See

Next第2頁/共14頁Back-end

架構(gòu)

Front-end

Nginx

Storm

QueueDashboardPush

ServiceHive

/

HBaseBack-endFront-end

Real-time

Report

Service

ApplicationsReal-time

App,

<2s

Near

Real-time

App

<10s

Scene

#2,

#5

AlertingReal-time

App,

<2sScene

#1,

#2,

#3

按地址位置、設(shè)

備、瀏覽器、運(yùn)

營商等信息做實(shí)

時(shí)數(shù)據(jù)匯總，并

計(jì)算用戶訪問流Dashboard按分鐘、小時(shí)、天、周等預(yù)先預(yù)聚合數(shù)據(jù)提供快速圖表查詢Alerting對實(shí)時(shí)數(shù)據(jù)和同期做對比，當(dāng)發(fā)生明顯差異的時(shí)候發(fā)生報(bào)警HBase和Hive中保存明細(xì)數(shù)據(jù)，可幫助快速排障第3頁/共14頁Storm

拓?fù)銵og

SpoutTimed

Spout

EventSpout

Timed

Bolt

Esper

BoltNotification

BoltAlertingTopology

UBTTopology

解數(shù)據(jù)包，過濾

異常值等ETL處理

ETL

BoltDelivery

Analysis

Bolt

Bolt

按分鐘統(tǒng)計(jì)匯總數(shù)據(jù)第4頁/共14頁Hadoop

存儲WriterHadoopWriterWriterWriterRaw

Data

RCFilePerformance

DetailHBaseHDFSHiveMRDashboard

Metrics第5頁/共14頁Scene

#1

–

實(shí)時(shí)性能看板及預(yù)警性能實(shí)時(shí)趨勢圖綜合反映當(dāng)前的性能概況，若與歷史同期比發(fā)生異常則最優(yōu)先檢查最近發(fā)布以及服務(wù)器狀況運(yùn)營商網(wǎng)絡(luò)性能反映不同網(wǎng)絡(luò)下的性能，若某一特定網(wǎng)絡(luò)出現(xiàn)異常則需要檢查CDN線路以及公司對于相關(guān)網(wǎng)絡(luò)的出口帶寬第6頁/共14頁地理位置性能

若少數(shù)城市出現(xiàn)異常則需要檢查網(wǎng)絡(luò)線路

Scene

#1

–

實(shí)時(shí)性能看板及預(yù)警

用戶設(shè)備性能若部分設(shè)備出現(xiàn)異常則需要檢查代碼兼容性或者關(guān)注相關(guān)系統(tǒng)的升級補(bǔ)丁第7頁/共14頁Scene

#2

–

故障排查

頁面請求當(dāng)發(fā)現(xiàn)某個(gè)頁面慢的時(shí)候查看每一個(gè)Ajax

/

Jsonp調(diào)用的性能概況耗時(shí)分布對于性能不穩(wěn)定Restful

Service，查看耗時(shí)分布，找到異常點(diǎn)第8頁/共14頁性能詳情Scene

#2

–

故障排查根據(jù)用戶的訪問流上下文環(huán)境分析用

戶當(dāng)時(shí)的環(huán)境，找到具體慢在哪里查看某一分鐘的性能詳情，找到訪問慢的請求訪問流第9頁/共14頁Scene

#3

–

增量更新推送■

推送增量更新必然會占用一部分的帶寬資源■

性能數(shù)據(jù)能實(shí)時(shí)反映用戶當(dāng)前的真實(shí)使用狀況■

選擇網(wǎng)絡(luò)性能良好的時(shí)機(jī)能讓用戶感覺到更新更加平穩(wěn)，甚至察覺不到■

灰度推送更新，保持核心網(wǎng)絡(luò)通暢第10頁/共14頁Scene

#4

–

數(shù)據(jù)大小監(jiān)控■

在收集性能數(shù)據(jù)的同時(shí)，可以獲取頁面請求的Restful

Service返回到客戶端的Response

Size■

通過分析和監(jiān)控

Response

Size

的變化，預(yù)知對用戶產(chǎn)生的影響，

避免不必要的風(fēng)險(xiǎn)■

同時(shí)對于有固定類型返回值的接

口，若Response

Size分布異常，

可以幫助快速定位問題第11頁/共14頁Architecture

Value■

實(shí)時(shí)性能監(jiān)測■

每個(gè)真實(shí)用戶的使用體驗(yàn)■

應(yīng)