04-CCTC2016-中國移動劉軍衛(wèi)-中國移動OpenStack研發(fā)和實踐之路

中國移動OpenStack研發(fā)和實踐之路概要部署架構(gòu)測試數(shù)據(jù)分析優(yōu)化方法公司和個人介紹中移(蘇州)軟件技術(shù)有限公司(蘇州研發(fā)中心)?中國移動一級子公司，總投資31.72億，注冊資本6億?現(xiàn)有正式員工550人，遠(yuǎn)期規(guī)模4500人，園區(qū)規(guī)劃占地480畝?云計算、大數(shù)據(jù)、IT支撐系統(tǒng)以及部分應(yīng)用產(chǎn)品等開發(fā)和應(yīng)用?已經(jīng)在集團(tuán)一級私有云、公有云、省級資源池中廣泛應(yīng)用劉軍衛(wèi)?技術(shù)總監(jiān)，負(fù)責(zé)云計算產(chǎn)品的研?OpenStack和Qemu社區(qū)的貢獻(xiàn)者社區(qū)貢獻(xiàn)OpenStack區(qū)貢獻(xiàn)?Mitaka版本被tc-approvetag統(tǒng)計的patch共計25個，排名第34位?OpenStackAustinSummit入選3個Presentation(2個第一作者)?主辦第一屆OpenStack蘇州meetup?DCOS(mesos,k8s)與OpenStack整合，提供PaaS服務(wù)?云計算開源產(chǎn)業(yè)聯(lián)盟理事會員?數(shù)千規(guī)模物理節(jié)點OpenStack部署實踐分享(OpenStack中國聯(lián)盟)AustinSummit演講主題演講1：單Region1000個物理節(jié)點公有云環(huán)境性能分析演講2：深入分析“有狀態(tài)”應(yīng)用向DCOS平臺遷移實踐演講3：深入分析并定位novascheduler的性能瓶頸社區(qū)貢獻(xiàn)og?創(chuàng)建并維護(hù)sheepdog-ng項目，最主要的維護(hù)者和貢獻(xiàn)者?貢獻(xiàn)221個patch，不停機(jī)熱補(bǔ)丁，手動成員控制?2015年10月主辦了第一屆Sheepdog全球峰會Linux社區(qū)貢獻(xiàn)?被MergedPatch81個，社區(qū)排名第211位?基于CentOS發(fā)布BC-Linux定制化發(fā)行版兼容性測試：浪潮、惠普、戴爾，寶藍(lán)德、東方通等云計算產(chǎn)品線容器集群管理平臺統(tǒng)一資源調(diào)度BC-PaaS容器集群管理平臺統(tǒng)一資源調(diào)度BC-PaaS平臺云計算門戶及應(yīng)用(公有云、私有云/專有云、混合云)大云企業(yè)網(wǎng)盤數(shù)據(jù)中心數(shù)據(jù)中心操作系統(tǒng)(DCOS)管理域運營管理管理域運營管理(BC-OP)資源池管理(BC-CloudMaster)云計算安全(BC-Security)定制化操作系統(tǒng)彈性計算(BC-彈性計算(BC-EC)彈性塊存儲(BC-EBS)對象存儲(BC-oNest)共享文件系統(tǒng)(BC-NFS)網(wǎng)絡(luò)管理(BC-vNetwork)云平臺云平臺操作系統(tǒng)(OpenStack)BCBC-Linux(Docker)Zone1(highaggregate)Zone2(lowaggregate)Zone3(windowsaggregate)Zone1(highaggregate)Zone2(lowaggregate)Zone3(windowsaggregate)BJRegion1(OpenStack)RabbitMQKeystoneNovaNeutronGlanceCeilometerSenlinIronicZone1(highaggregate)Zone2(lowaggregate)MysqlZone3(windowsaggregate)CinderHeategion(OpenStack)?南北兩個數(shù)據(jù)中心統(tǒng)一管理(統(tǒng)一認(rèn)證和鑒權(quán))?數(shù)據(jù)中心內(nèi)部多Region部署(異構(gòu)和擴(kuò)展性)Openstack和OpenNebula單數(shù)據(jù)中心超過2000個節(jié)點?根據(jù)硬件類型或者guestos類型劃分AZHostaggregate作為AZ的標(biāo)簽?管理節(jié)點資源利用率太低部分服務(wù)容器化全面采用kollaBC-OPovaCellBC-OPBeijingDCGangzhouBeijingDCZone1(highaggregate)Zone2(lowaggregate)ZoneZone1(highaggregate)Zone2(lowaggregate)Zone3(windowsaggregate)ion(OpenStack)RabbitMQKeystoneNovaNeutronGlanceCeilometerSenlinIronicZone1(highaggregate)Zone2(lowaggregate)MysqlZone3(windowsaggregate)CinderHeat(OpenNebula)softcn并發(fā)測試softcn硬件增加SSD？APIlimits優(yōu)化ApiserverrefusetocreatenewconnectionMOD_WSGI替換默認(rèn)的HTTPDOlsobugsToken做前端cache994149MaxMaxTPSinConcurrencytPS02urrency1632641282565127682urrencyMaxTPSinConcurrencyTest0inConcurrencyTest0rency48163264128256512768rencyrateMySQLStatusin512Concurrency20000150001000050000QPSCommitRollbackTPS并發(fā)測試metercomputeSmetercollectorroxyBmetercomputeSmetercollectorroxyBusterMysqlter 0g0g551000010000VMs個Ceilometer-CollectorServersCPU>80%?6GnocchiServersCPU>80%TPSofMySQL>8000未來計劃上線新服務(wù)：裸機(jī)服務(wù)(ironic)和分布式文件系統(tǒng)服務(wù)(Manila)新服務(wù)(ironic，manila)