監(jiān)控及報(bào)警模型的設(shè)計(jì)與實(shí)現(xiàn)

1、    監(jiān)控及報(bào)警模型的設(shè)計(jì)與實(shí)現(xiàn)    摘要：文章簡述了監(jiān)控的概念，介紹現(xiàn)階段國內(nèi)外實(shí)現(xiàn)監(jiān)控的方式方法，根據(jù)上海財(cái)經(jīng)大學(xué)實(shí)際情況選擇使用開源工具建立監(jiān)控系統(tǒng)，詳細(xì)闡述了多維度監(jiān)控和報(bào)警體系的模型設(shè)計(jì)并基于開源分布式軟件zabbix實(shí)現(xiàn)了該模型，通過對(duì)各層次數(shù)據(jù)的展示和報(bào)警設(shè)置，快速直觀的發(fā)現(xiàn)和定位故障、反應(yīng)業(yè)務(wù)的容量和性能，對(duì)各維度、各層次數(shù)據(jù)的量化，展現(xiàn)業(yè)務(wù)運(yùn)行的狀態(tài)。關(guān)鍵詞：自動(dòng)化，監(jiān)控平臺(tái)，監(jiān)控系統(tǒng)，配置管理數(shù)據(jù)庫隨著高校信息化的不斷發(fā)展，數(shù)字校園和智慧校園的深入建設(shè)，如何保障業(yè)務(wù)的連續(xù)性，如何實(shí)時(shí)的自動(dòng)監(jiān)控各個(gè)業(yè)務(wù)系統(tǒng)的健康狀況，建立多維度的監(jiān)

2、控和報(bào)警模型，以及分析和預(yù)測未來可能出現(xiàn)的故障，是需要考慮和解決的重要課題。主動(dòng)監(jiān)控模式已經(jīng)成為重要的監(jiān)控手段。第一時(shí)間發(fā)現(xiàn)、定位并記錄異常，從外部到內(nèi)部、從業(yè)務(wù)到基礎(chǔ)環(huán)境、從功能到性能等各個(gè)方面對(duì)業(yè)務(wù)數(shù)據(jù)進(jìn)行采集、展現(xiàn)和報(bào)警體系的建設(shè)，對(duì)提高服務(wù)的可靠性和可用性是非常關(guān)鍵的。一個(gè)良好、全面、完善的業(yè)務(wù)健康多維度監(jiān)控體系，能夠幫助準(zhǔn)確、及時(shí)、完善地了解業(yè)務(wù)各個(gè)層面的生存情況，并最終實(shí)現(xiàn)對(duì)業(yè)務(wù)的量化管理。1 一、國內(nèi)外研究現(xiàn)狀國內(nèi)外有很多優(yōu)秀的開源監(jiān)控工具。 cacti、nagios、zabbix主要側(cè)重于系統(tǒng)層、網(wǎng)絡(luò)層的監(jiān)控。在應(yīng)用方面，nagios是應(yīng)用比較廣泛的監(jiān)控工具，例如facebo0

3、k、新浪、搜狐、網(wǎng)易、阿里巴巴等國內(nèi)外的大型企業(yè)都在使用nagios和cacti這套監(jiān)控平臺(tái)。著名互聯(lián)網(wǎng)視頻提供商pptv部署了全世界最大的zabbix集群，監(jiān)控項(xiàng)多達(dá)一百萬以上，報(bào)警點(diǎn)也超過三十萬個(gè)。 實(shí)現(xiàn)監(jiān)控主要有兩個(gè)途徑，分別是自建監(jiān)控系統(tǒng)和采用第三方開源解決方案來實(shí)現(xiàn)。自建監(jiān)控系統(tǒng)，是針對(duì)現(xiàn)在業(yè)務(wù)特性，定制和實(shí)現(xiàn)業(yè)務(wù)監(jiān)控模型，進(jìn)而達(dá)到監(jiān)控業(yè)務(wù)各組成部分的健康，大的互聯(lián)網(wǎng)公司一般會(huì)選擇自建監(jiān)控系統(tǒng)，成立一個(gè)專職團(tuán)隊(duì)將監(jiān)控、報(bào)警及事件、故障結(jié)合起來，產(chǎn)生一整套行之有效的電子流，將故障事前、事中、事后的處理流程化、生產(chǎn)線化。開發(fā)一個(gè)agent在服務(wù)器上運(yùn)行，agent會(huì)上報(bào)所需要的所有監(jiān)控任

4、務(wù)的數(shù)據(jù)到服務(wù)端入庫，再做數(shù)據(jù)前臺(tái)的展現(xiàn)。第三方監(jiān)控解決方案，主要包括開源及第三方監(jiān)控運(yùn)營商，第三方監(jiān)控比較擅長某個(gè)領(lǐng)域，如networkbench、gomez是基于用戶端監(jiān)控的收費(fèi)監(jiān)控廠商，在個(gè)人電腦和手機(jī)端安裝監(jiān)控軟件，并上報(bào)監(jiān)控?cái)?shù)據(jù)，能夠比較真實(shí)反饋用戶體驗(yàn)數(shù)據(jù)。2 高校技術(shù)研發(fā)人員較少，獨(dú)立研發(fā)監(jiān)控系統(tǒng)不現(xiàn)實(shí)，基于優(yōu)秀的開源工具二次開發(fā)來實(shí)現(xiàn)監(jiān)控系統(tǒng)是較好的方案。 二、監(jiān)控模型設(shè)計(jì)監(jiān)控的核心作用是對(duì)業(yè)務(wù)具有診斷能力，通過掌握生產(chǎn)環(huán)境下的多個(gè)維度數(shù)據(jù)，按照一定的監(jiān)控模型，對(duì)影響運(yùn)營質(zhì)量的諸多要素和運(yùn)營過程的各個(gè)環(huán)節(jié)進(jìn)行監(jiān)控、采集、建模、展現(xiàn)，通過監(jiān)控來量化系統(tǒng)運(yùn)營狀況和確保最佳用戶體驗(yàn)。

5、1 多維度監(jiān)控模型可分為服務(wù)器維度、存儲(chǔ)維度、網(wǎng)絡(luò)設(shè)備維度、網(wǎng)絡(luò)質(zhì)量維度、業(yè)務(wù)維度、數(shù)據(jù)庫維度、中間件維度等，如表1所示。   通過多維度的監(jiān)控模型對(duì)現(xiàn)有的業(yè)務(wù)環(huán)節(jié)下的各個(gè)關(guān)鍵指標(biāo)進(jìn)行實(shí)時(shí)的有效監(jiān)控和數(shù)據(jù)展示，有助于把握和掌控核心業(yè)務(wù)運(yùn)行的現(xiàn)狀，真正做到監(jiān)控?zé)o死點(diǎn)。 三、報(bào)警模型設(shè)計(jì)1.報(bào)警方式 報(bào)警是發(fā)生異常時(shí)，快速定位和快速修復(fù)問題，挽回?fù)p失和用戶體驗(yàn)的方式。 報(bào)警根據(jù)各維度實(shí)時(shí)監(jiān)控反饋信息判斷是否超過預(yù)設(shè)的閾值，如果是，則按預(yù)定的步驟（流程）進(jìn)行報(bào)警或自動(dòng)修復(fù)等操作。監(jiān)控到的事件會(huì)導(dǎo)致或可能導(dǎo)致生產(chǎn)環(huán)境服務(wù)中斷或服務(wù)質(zhì)量下降的故障，事件發(fā)生后，需要通過報(bào)警去觸發(fā)人為介入，之后斷

6、定是否為故障及故障影響等，進(jìn)而通過故障管理進(jìn)行永久規(guī)避。 出了故障可以立即知道，以便即時(shí)處理，預(yù)見故障，防患于未然，如何最快、有效的將報(bào)警信息傳遞給接收人跟報(bào)警途徑有關(guān)，通常會(huì)有表2的幾種途徑。   2.報(bào)警模型 報(bào)警模型的建立關(guān)系到報(bào)警質(zhì)量和價(jià)值，報(bào)警模型可以理解為具有一定規(guī)則的預(yù)處理程序，這個(gè)規(guī)則可以是一個(gè)閥值，也可以是多維組合條件，針對(duì)規(guī)則進(jìn)行后續(xù)的處理，比如報(bào)警或自動(dòng)觸發(fā)自動(dòng)修復(fù)、過載保護(hù)等。通常報(bào)警模型分為通用型和業(yè)務(wù)型兩大類： 通用型主要是系統(tǒng)運(yùn)行指標(biāo)，硬件可用性，網(wǎng)絡(luò)狀態(tài)，緩存、數(shù)據(jù)庫通用應(yīng)用運(yùn)行狀態(tài)等，此類報(bào)警模型對(duì)研發(fā)透明，主要由運(yùn)維主導(dǎo)和負(fù)責(zé)。 業(yè)務(wù)型主要是指非常

7、規(guī)的應(yīng)用模塊，一個(gè)學(xué)校有多個(gè)產(chǎn)品線，每個(gè)產(chǎn)品線有多個(gè)服務(wù)，每個(gè)服務(wù)又分多個(gè)服務(wù)模塊單元，每一個(gè)模塊又有多個(gè)特性，此類報(bào)警模型根據(jù)用途又可分為自定義報(bào)警模型、服務(wù)報(bào)警模型、集群報(bào)警模型。針對(duì)一個(gè)產(chǎn)品線需要建立一系列的通用型、業(yè)務(wù)型監(jiān)測與報(bào)警，當(dāng)發(fā)生故障時(shí)才能實(shí)現(xiàn)及時(shí)人工處理和自動(dòng)處理、自動(dòng)恢復(fù)。報(bào)警模型如表3所示。   3.報(bào)警收斂 報(bào)警收斂可以提高報(bào)警質(zhì)量、報(bào)警響應(yīng)質(zhì)量、報(bào)警自動(dòng)處理和自動(dòng)恢復(fù)質(zhì)量。報(bào)警收斂是通過一定規(guī)則減少數(shù)量，減少干擾，提高單條報(bào)警價(jià)值，主要有以下兩類： （1）按頻率收斂，根據(jù)頻率和次數(shù)設(shè)計(jì)報(bào)警模型，例如按不同重要級(jí)別的產(chǎn)品線進(jìn)行細(xì)分，重要的產(chǎn)品高頻率多次報(bào)警，次

8、要的低頻率少報(bào)警，并根據(jù)報(bào)警次數(shù)進(jìn)行合并，只展現(xiàn)不發(fā)送。 （2）按對(duì)象收斂，根據(jù)監(jiān)控模型、ip、服務(wù)器負(fù)責(zé)人等對(duì)象進(jìn)行橫向、縱向的報(bào)警收斂，一定時(shí)段同一類報(bào)警進(jìn)行合并報(bào)警、合并展現(xiàn)，例如機(jī)房數(shù)百臺(tái)服務(wù)器因網(wǎng)絡(luò)閃斷觸發(fā)報(bào)警，每一個(gè)報(bào)警接收人應(yīng)該只接收到幾條報(bào)警，而不是各報(bào)警模型觸發(fā)數(shù)百條報(bào)警。 四、應(yīng)用效果基于開源分布式軟件zabbix實(shí)現(xiàn)多維度監(jiān)控平臺(tái)的搭建和實(shí)施，完成對(duì)多維度監(jiān)控模型中的服務(wù)器、存儲(chǔ)、網(wǎng)絡(luò)設(shè)備、網(wǎng)絡(luò)質(zhì)量、業(yè)務(wù)系統(tǒng)等全方位多維度的監(jiān)控，能夠及時(shí)發(fā)現(xiàn)故障并發(fā)出警告，警告方式通過郵件和短信方式發(fā)出。整體的效果如圖1所示。   五、結(jié)束語基于分布式zabbix系統(tǒng)建立的自動(dòng)

9、化監(jiān)控平臺(tái)，集成自動(dòng)化運(yùn)維工具（puppet）和配置管理數(shù)據(jù)庫（cmdb），完成了自動(dòng)化監(jiān)控的目標(biāo)，實(shí)現(xiàn)了對(duì)我校服務(wù)器集群、虛擬化集群、web應(yīng)用集群、f5負(fù)載均衡設(shè)備、一卡通設(shè)備、oracle/mysql數(shù)據(jù)庫集群的實(shí)時(shí)監(jiān)控。不僅有助于掌握系統(tǒng)整體運(yùn)行情況，而且能夠及時(shí)發(fā)現(xiàn)故障信息，很大程度上提高了信息化辦公室的整體服務(wù)質(zhì)量，保障業(yè)務(wù)持續(xù)性。隨著學(xué)校信息化的持續(xù)不斷發(fā)展，自動(dòng)化監(jiān)控系統(tǒng)還將不斷的完善，發(fā)揮更大的作用。 未來自動(dòng)化監(jiān)控平臺(tái)還有很多工作要做。如何提高監(jiān)控的有效性，提高監(jiān)控的準(zhǔn)確性，減少誤報(bào)率，如何多方面多角度的監(jiān)控，形成立體的監(jiān)控體系，還有待進(jìn)一步的研究和探索。 參考文獻(xiàn)： 1李

10、艷霞，劉乃嘉，王鑫.高校信息系統(tǒng)自動(dòng)監(jiān)控報(bào)警平臺(tái)的研發(fā)與應(yīng)用j.實(shí)驗(yàn)技術(shù)與管理，2011，28（3）：101103. 2周偉強(qiáng)，陳燦華，李淑娟.基于cacti和nagios的校園一卡通監(jiān)控系統(tǒng)研究j.實(shí)驗(yàn)技術(shù)與管理，2011，28（4）：246249. 3陳琳，王彬.開源系統(tǒng)自動(dòng)監(jiān)控大量虛擬主機(jī)j.中國教育網(wǎng)絡(luò)，2011（8）. 4張暉，周利霞，姚會(huì)琴等.nagios監(jiān)控系統(tǒng)在天津地震應(yīng)急系統(tǒng)中的綜合應(yīng)用j.震災(zāi)防御技術(shù)istic，2012，7（3）. 5楊磊.基于linux系統(tǒng)的監(jiān)控工具與其自動(dòng)化測試的設(shè)計(jì)與實(shí)現(xiàn)d.電子科技大學(xué)，2012. 6葛君偉，張博，方義秋.云計(jì)算環(huán)境下的資源監(jiān)測模型

11、研究j.計(jì)算機(jī)工程，2011，37（11）. 7崔振裕.基于開源軟件校園網(wǎng)監(jiān)測系統(tǒng)的研究與實(shí)現(xiàn)d.石家莊：河北師范大學(xué)，2012. 8薛冰，何燚.linux系統(tǒng)異常監(jiān)控模型研究j. computer engineering，2012，38（5）. 9陳大偉，章洋，彭泳.配置管理系統(tǒng)在服務(wù)生成平臺(tái)中的應(yīng)用研究db/ol. http：/ 1001ups，rihards. zabbix 1.8 network monitoring. packt pub1ishing ltd，2010. 11andreo1ini m， co1ajanni m，pietri m. a scalable architecture for realtime monitoring of large information systemsc/network c1oud computing a