愛奇藝基于Docker的App Engine實踐課件

1、愛奇藝基于 Docker 的 App Engine 實踐內(nèi)容提要背景、出發(fā)點、目標(biāo)iQIYI App Engine 設(shè)計與實現(xiàn) 一些經(jīng)驗（坑）現(xiàn)狀與展望 Q & A背景 業(yè)務(wù)上后臺服務(wù)25%其它55%Worker 20%背景 技術(shù)上2014 年 Q3出發(fā)點人錢省資源目標(biāo)人錢省很多資源道路 曲折的西葡道路 曲折的北京道路 曲折的項目目標(biāo) 會變的人錢省很多資源目標(biāo) 會變的錢資源人用戶受 益省很多學(xué)習(xí)成 本易用性用戶受益資源到位快 部署快（上線、升級） 擴容快 自動故障轉(zhuǎn)移，免運維 完善的監(jiān)控預(yù)警 持續(xù)集成、發(fā)布內(nèi)容提要 背景、出發(fā)點、目標(biāo) iQIYI App Engine 設(shè)計與實現(xiàn)一些經(jīng)驗（坑）

2、現(xiàn)狀與展望 Q & AiQIYI App Engine(QAE)QAE 監(jiān)控和預(yù)警QAE 自動擴展（Auto Scaling）QAE 事件總線QAE 服務(wù)發(fā)現(xiàn)QAE 日志QAE CI/CD內(nèi)容提要背景、出發(fā)點、目標(biāo) iQIYI App Engine 設(shè)計與實現(xiàn)一些經(jīng)驗（坑）現(xiàn)狀與展望 Q & A容器監(jiān)控 Zabbix 優(yōu)勢已有 Zabbix 基礎(chǔ)服務(wù)Auto Discovery 能發(fā)現(xiàn)容器啟動/消失事件 劣勢需要在容器內(nèi)部安裝 zabbix, overhead 太大 不是很穩(wěn)定數(shù)據(jù)統(tǒng)計比較復(fù)雜容器監(jiān)控 cAdvisor 優(yōu)勢背靠 Google 且開源 監(jiān)控數(shù)據(jù)詳盡 劣勢 集群化開發(fā)成本較高，K

3、ubernetes heapster 實 現(xiàn)influxDB 而非 graphite（當(dāng)時有基礎(chǔ)服務(wù)）容器監(jiān)控 dAdvisorDocker Advisor采集：CPU, 內(nèi)存，磁盤，網(wǎng)絡(luò) 集成現(xiàn)有 Graphite統(tǒng)計數(shù)據(jù)方便（Graphite 內(nèi)置一些操作符） 呈現(xiàn)方便（Graphite Render URL API） 開發(fā)量不大Time Series Database Graphite 優(yōu)勢老牌（Since 1999），已有服務(wù)，經(jīng)過驗證 簡單、內(nèi)置 aggregator，Render URL API 劣勢項目及社區(qū)已經(jīng)幾乎停滯 集群化配置復(fù)雜，需要詳細(xì)規(guī)劃 缺乏多用戶認(rèn)證，授權(quán)機制，黑

4、白名單太單薄 數(shù)據(jù)刪除缺少 API服務(wù)發(fā)現(xiàn)（Service Discovery） 負(fù)載均衡/反向代理方案HAProxy：Marathon 支持，用戶少 Nginx：大量用戶 服務(wù)發(fā)現(xiàn)Flask 推送，SSH，不可靠，不安全 Ansible 推送，SSH，不可靠，不安全 event bus + guardro-template日志 ELK (Elasticsearch + Logstash + Kibana)延時較高（分鐘級） 只支持格式化后的日志（for machine） 用戶訴求低延時（秒級），準(zhǔn)實時 裸日志（for real person） 備份日志（Apache Flume）內(nèi)容提要 背景、出發(fā)點、目標(biāo)iQIYI App Engine 設(shè)計與實現(xiàn) 一些經(jīng)驗（坑）現(xiàn)狀與展望 Q & A現(xiàn)狀處于活躍開發(fā)狀態(tài) 接入了幾十個業(yè)務(wù)主要業(yè)務(wù)類型：服務(wù)型，RPC，Worker 服務(wù)型業(yè)務(wù) QPS 大于 10 萬4 個數(shù)據(jù)中心展望支持短任務(wù) Quota 和計費 Web Console內(nèi)置典