nagios監(jiān)控系統(tǒng)上課講義

1、Good is good, but better carries it.精益求精，善益求善。nagios監(jiān)控系統(tǒng)nagios網(wǎng)絡(luò)監(jiān)控Nagios是什么：Nagios是一款開源的免費(fèi)網(wǎng)絡(luò)監(jiān)視工具，能有效監(jiān)控Windows、Linux和Unix的主機(jī)狀態(tài)，交換機(jī)路由器等網(wǎng)絡(luò)設(shè)置，打印機(jī)等。在系統(tǒng)或服務(wù)狀態(tài)異常時發(fā)出郵件或短信報警第一時間通知網(wǎng)站運(yùn)維人員，在狀態(tài)恢復(fù)后發(fā)出正常的郵件或短信通知。nagios是功能強(qiáng)大的監(jiān)控軟件，主要用來監(jiān)控網(wǎng)絡(luò)設(shè)備的狀態(tài)（比如：主機(jī)的資源狀態(tài)）；適合于：對大量的服務(wù)器進(jìn)行監(jiān)控，判斷其負(fù)載或服務(wù)是否正常，發(fā)生異常能通過郵件、短信報警。特別注意：流量監(jiān)控不是他的強(qiáng)項，流量

2、監(jiān)控建議使用cacti.可以繪制非常直觀的圖形nagios能監(jiān)視什么：nagios可以監(jiān)控：1、主機(jī)是否宕機(jī)（通過ping命令，如果ping不通會認(rèn)為主機(jī)屬于宕機(jī)狀態(tài)，但不影響所監(jiān)控的其他服務(wù)）；2、服務(wù)器資源（cpu使用率、硬盤剩余空間等）；3、網(wǎng)絡(luò)服務(wù)（smtppop3http）;4、監(jiān)控網(wǎng)絡(luò)設(shè)備（路由器、交換機(jī)等。）一、RHEL系統(tǒng)上部署Nagios：(禁用selinux功能)系統(tǒng)環(huán)境:RHEL，在nagios主機(jī)上監(jiān)控mysql服務(wù)器nagios主機(jī):00mysql主機(jī):01操作步驟：安裝編譯所需的軟件包：如下圖所示：#yumyinstallhttpdphp-*gd-*mysql-de

3、vel（若mysql-devel包不安裝，會沒有check_mysql插件。）2、創(chuàng)建運(yùn)行nagios服務(wù)的用戶注：useraddnagios#創(chuàng)建運(yùn)行nagios服務(wù)的用戶usermod-Gnagiosapache#使apache用戶對nagios目錄具有寫權(quán)限,不然web頁面操作失敗.3、nagios軟件安裝釋放nagios源碼包，進(jìn)行編譯前的預(yù)備置：編譯并安裝nagios及相關(guān)操作，如下圖所示：注：makeinstall/安裝主程序，CGI和HTML文件makeinstall-init/在/etc/rc.d/init.d安裝啟動腳本makeinstall-commandmode/配置目錄

4、權(quán)限makeinstall-config/安裝示例配置文件makeinstall-webconf/安裝nagios的web接口,會在/etc/httpd/conf.d目錄中創(chuàng)建nagios.conf文件。注：若在RHEL6X32位系統(tǒng)中安裝nagios-cn-3.2.3.tar.bz2要先執(zhí)行makeclean操作，然后再執(zhí)行./configure和makeall等操作，否則執(zhí)行makeall時會報如下錯誤。驗證安裝是否成功：驗證程序是否被正確安裝，我們切換目錄到安裝路徑（默認(rèn)安裝目錄是/usr/local/nagios），看是否存在etc、bin、sbin、share、var、這五個目錄，如

5、果存在說明程序被正確安裝到系統(tǒng)了下面我們對這五個目錄功能做簡要說明：bin：nagios執(zhí)行程序所在的目錄，nagios文件即為主程序。etc：nagios配置文件目錄，當(dāng)makeinstall-config完以后etc下面就會出現(xiàn)默認(rèn)的配置文件。sbin：nagiosCGI文件所在目錄，這里存放的是一些外部命令執(zhí)行程序。share：nagios網(wǎng)頁文件目錄，存放一些html文件。var：nagios日志文件、pid等文件目錄。4、安裝nagios-plugins插件：nagios-plugins是nagios官方提供的一套插件程序，nagios監(jiān)控主機(jī)的功能其實(shí)都是通過執(zhí)行插件程序來實(shí)現(xiàn)的。

6、釋放nagios-plugins源碼包并進(jìn)行編譯前的預(yù)備置編譯并安裝nagios-plugins插件：這個裝完之后會在/usr/local/nagios/libexec文件夾中多出一些文件，這里存放nagios所要用到的所有插件.安裝后所有插件命令將被安裝到/usr/local/nagios/libexec目錄下到此nagios就安裝完畢，但還需修改nagios的配文件預(yù)備知識：聯(lián)系人contact：出了問題向誰報告?一般當(dāng)然是系統(tǒng)管理員了監(jiān)控時間段timeperiod：7X24小時不間斷還是周一至周五,或是自定義的其他時間段被監(jiān)控主機(jī)Host：所需要監(jiān)控的服務(wù)器,當(dāng)然可以是監(jiān)控機(jī)自己監(jiān)控命令

7、command：nagios發(fā)出的哪個指令來執(zhí)行某個監(jiān)控,這也是自己定義的被監(jiān)控的服務(wù)Service：例如主機(jī)是否存活,80端口是否開,磁盤使用情況或者自定義的服務(wù)等注意：多個被監(jiān)控主機(jī)可以定義為一個主機(jī)組,多個聯(lián)系人可以被定義為一個聯(lián)系人組5、修改配置文件：修改nagios的主配置文件nagios.cfgcfg_file=/usr/local/nagios/etc/objects/hosts.cfg#新建hosts.cfg文件,存放主機(jī)與主機(jī)組定義cfg_file=/usr/local/nagios/etc/objects/services.cfg#新建services.cfg文件,存放服務(wù)

8、與服務(wù)組定義#cfg_file=/usr/local/nagios/etc/objects/localhost.cgf#加“#”注釋localhost.cfg修改后結(jié)果如下圖所示：將localhost.cfg文件注釋掉，添加有關(guān)hosts.cfg和services.cfg文件定義。注：在/usr/local/nagios/etc/objects目錄下存放一些以.cfg為后綴的文件timeperiods.cfg/監(jiān)控時間段配置文件如下圖所示定義了一個監(jiān)控時間段,它的名稱是24x7（時間段的名稱,這個地方不要有空格）,監(jiān)控的時間是每天全天24小時commands.cfg/命令配置文件圖略conta

9、cts.cfg/聯(lián)系人配置文件如下圖所示定義了一個聯(lián)系人，聯(lián)系人的名稱是nagioscontact,并定義了一個聯(lián)系人組，聯(lián)系人組名是admins，包含一個成員nagioscontact下面列出其中重要的幾個選項做說明：service_notification_period24x7服務(wù)出了狀況通知的時間段,這個時間段就是上面在timeperiods.cfg中定義的.host_notification_period24x7主機(jī)出了狀況通知的時間段,這個時間段就是上面在timeperiods.cfg中定義的service_notification_optionsw,u,c,r當(dāng)服務(wù)出現(xiàn)w-報警(w

10、arning),u-未知(unkown),c-嚴(yán)重(critical),或者r-從異常情況恢復(fù)正常,在這四種情況下通知聯(lián)系人host_notification_optionsd,u,r當(dāng)主機(jī)出現(xiàn)d-當(dāng)機(jī)(down),u-返回不可達(dá)(unreachable),r-從異常情況恢復(fù)正常,在這3種情況下通知聯(lián)系人service_notification_commandsnotify-service-by-email服務(wù)出問題通知采用的命令notify-service-by-email,這個命令是在commands.cfg中定義的,作用是給聯(lián)系人發(fā)郵件,還可以飛信發(fā)手機(jī)短信給聯(lián)系人，但需要安裝飛信程序。

11、.host_notification_commandsnotify-host-by-email同上,主機(jī)出問題時采用的也是發(fā)郵件和飛信的方式通知聯(lián)系人。emailyahoon很明顯,聯(lián)系的人email地址Pager137XXXXXXXX聯(lián)系人接收報警信息電話可以將多個聯(lián)系人組成一個聯(lián)系人組definecontactgroupcontactgroup_nameadmins/聯(lián)系人組的名稱,同樣不能空格aliasNagiosAdministrators/別名membersnagioscontact/組的成員,來自于上面定義的聯(lián)系人,如果有多個聯(lián)系人則以逗號相隔templates.cfg/模板配置文

12、件圖略/usr/local/nagios/etc/cgi.cfg/它的作用是控制相關(guān)cgi腳本其他配置文件以實(shí)際情況來進(jìn)行配置發(fā)現(xiàn)在/usr/local/nagios/etc/objects目錄中并不存在hosts.cfg和services.cfg文件，這兩個文件需要手工創(chuàng)建。6、創(chuàng)建hosts.cfg文件：#vi/usr/local/nagios/etc/objects/hosts.cfg內(nèi)容如下：注：definehostuselinux-server/定義使用的模板host_namenagios/被監(jiān)控主機(jī)的名稱,最好別帶空格aliasnagios/別名address/被監(jiān)控主機(jī)的IP地址

13、check_commandcheck-host-alive/監(jiān)控的命令check-host-alive,這個命令來自commands.cfg,用來監(jiān)控主機(jī)是否存活max_check_attempts5/檢查失敗后重試的次數(shù)check_period24x7/檢查的時間段24x7,同樣來自timeperiods.cfg中定義notification_interval10/提醒的間隔,每隔10分鐘提醒一次notification_period24x7/提醒的周期,24x7,同樣來自timeperiods.cfg中定義contact_groupsadmins/聯(lián)系人組,上面在contactgroups

14、.cfg中定義的adminsnotification_optionsd,u,r/指定什么情況下提醒主機(jī)組并不是必須的,這是配合nagios的監(jiān)控頁面的顯示通過簡單的復(fù)制修改就可以定義多個主機(jī)了.后面我們會加上被監(jiān)控主機(jī)mysql7、創(chuàng)建services.cfg文件：（這里只是簡單介紹，也可在services.cfg文件中添加hosts.cfg文件中的參數(shù)）#vi/usr/local/nagios/etc/objects/services.cfg內(nèi)容如下：check_local_users!20!50/監(jiān)測遠(yuǎn)程主機(jī)當(dāng)前的登錄用戶數(shù)量，如果大于20用戶則報warning，如果大于50則報criti

15、calcheck_local_disk!20%!10%!/如果可用空間低于20%會報Warning，如果可用空間低于10%則報Critical：check_local_procs!250!400!RSZDT/監(jiān)測遠(yuǎn)程主機(jī)當(dāng)前的進(jìn)程總數(shù)，如果大于250進(jìn)程則報warning，如果大于400進(jìn)程則報critical，S（休眠）、R(運(yùn)行)、Z(僵死)、D（不可中斷）、T（停止）check_load-w5,4,3-c10,6,4這個命令的意義如下當(dāng)1分鐘多于5個進(jìn)程等待,5分鐘多于4個,15分鐘多于3個則為warning狀態(tài)當(dāng)1分鐘多于10個進(jìn)程等待,5分鐘多于6個,15分鐘多于4個則為critic

16、al狀態(tài)Check_local_swap!20%!10%/如果交換空間低于20%會報Warning，如果可用空間低于10%則報Critical服務(wù)組并不是必須的,這是配合nagios的監(jiān)控頁面的顯示校驗nagios配置文件的正確性:/usr/local/nagios/bin/nagios-v/usr/local/nagios/etc/nagios.cfg若顯示如下圖所示則表示沒有錯誤nagios監(jiān)控頁面訪問用戶和密碼:注：安裝好nagios后會在apache安裝目錄中的conf.d目錄存在一個nagios.conf文件，這個文件中定義了有關(guān)訪問nagios的web頁面的定義。在httpd.co

17、nf文件使用Includeconf.d/*.conf配置項將nagios.conf文件的定義包含到httpd.conf文件中。執(zhí)行htpasswd命令添加一個訪問nagios頁面的授權(quán)用戶啟動httpd和nagios服務(wù)并設(shè)置開機(jī)自動啟動#servicenagiosstart#啟動nagios和httpd服務(wù)#servicehttpdstart#啟動httpd服務(wù)#chkconfighttpdon#chkconfignagioson注意：如果你開啟了selinux需要配置如下二步：chcon-R-thttpd_sys_content_t/usr/local/nagios/sbin/chcon-

18、R-thttpd_sys_content_t/usr/local/nagios/share/訪問nagios監(jiān)控頁面,輸入上面添加的用戶名和密碼HYPERLINKhttp:/IP/nagioshttp:/IP/nagios(注意nagios服務(wù)器上有關(guān)防火墻的設(shè)置)顯示結(jié)果如下：二、監(jiān)控mysql服務(wù)運(yùn)行1、mysql主機(jī)上運(yùn)行有mysql服務(wù):安裝mysql的服務(wù)器軟件包（這里我是以RPM類型包安裝mysql服務(wù)器）啟動mysqld服務(wù)并設(shè)置為開機(jī)自動啟動#servicemysqldstart#chkconfigmysqldon2、在mysql服務(wù)器上創(chuàng)建監(jiān)控檢測帳戶：3、在nagios主機(jī)

19、上檢測是否可以連接mysql主機(jī)上的mysql服務(wù)（注意要在mysql主機(jī)設(shè)置防火墻允許3306端口的通信）注：若沒有check_mysql插件，是因為沒有安裝mysql-devel包，將mysql-devel包安裝后重新安裝一下nagios-plugins就有了4、在nagios主機(jī)上添加對mysql服務(wù)監(jiān)控的定義：#vi/usr/local/nagios/etc/objects/hosts.cfg添加如下行#vi/usr/local/nagios/etc/objects/services.cfg添加如下行#vi/usr/local/nagios/etc/objects/commands.c

20、fg添加如下行（注：check_mysql命令必須存在于/usr/local/nagios/libexec目錄中）/usr/local/nagios/bin/nagios-v/usr/local/nagios/etc/nagios.cfg#檢測無誤后重載nagiosservicenagiosreload訪問ngios的web頁面：如下所示，能通過監(jiān)控發(fā)現(xiàn)MYSQL服務(wù)運(yùn)行正常。如果訪問nagios頁面報下圖錯誤解決方法:修改/usr/local/nagios/etc/cgi.cfg文件三、Nagios通過NRPE監(jiān)控遠(yuǎn)程主機(jī)系統(tǒng)狀況（如msyql主機(jī)）NRPE總共由兩部分組成:check_nr

21、pe插件：運(yùn)行在監(jiān)控主機(jī)上（即nagios主機(jī)）NRPEdaemon：運(yùn)行在遠(yuǎn)程的linux主機(jī)上(通常就是被監(jiān)控機(jī))整個的監(jiān)控過程:當(dāng)Nagios需要監(jiān)控某個遠(yuǎn)程linux主機(jī)的服務(wù)或者資源情況時：1:nagios運(yùn)行check_nrpe插件,我們要在nagios配置文件中告訴它要檢查什么.2:check_nrpe插件會通過SSL連接到遠(yuǎn)程的NRPEdaemon.3:NRPEdaemon會運(yùn)行相應(yīng)的nagios插件來執(zhí)行檢查本地資源或服務(wù).4:NRPEdaemon將檢查的結(jié)果返回給check_nrpe插件,插件將其遞交給nagios做處理.注意:NRPEdaemon需要nagios插件和Nr

22、pe一起安裝在遠(yuǎn)程被監(jiān)控linux主機(jī)上,否則,daemon不能做任何的監(jiān)控.別外因為它們間的通信是加密的SSL,所以需要安裝SSL這個插件需要openssl的支持，沒有就直接安裝一下（yuminstallopenssl-devel）1、遠(yuǎn)程主機(jī)設(shè)定（即被監(jiān)控主機(jī)設(shè)定）這里仍然對mysql服務(wù)器進(jìn)行監(jiān)控，在mysql主機(jī)上進(jìn)行如下操作：被監(jiān)控端只需安裝nagios-plugins和nrpe就可以的創(chuàng)建nagios用戶：編譯安裝nagios-plugins插件上：安裝xinetd軟件包：編譯安裝nrpe軟件包：注：makeinstall-daemon/安裝守護(hù)進(jìn)程makeinstall-daem

23、on-config/安裝配置文件makeinstall-xinetd/安裝xinetd腳本配置nrpe，添加nrpe服務(wù)vi/etc/xinetd.d/nrpe修改如下行only_from=00/在后面增加監(jiān)控主機(jī)（即nagios服務(wù)器）的地址00,以空格間隔/改后only_from=00如下圖所示：編輯/etc/services文件,增加NRPE服務(wù)vi/etc/services在該文件尾部添加如下行nrpe5666/tcp#nrpe服務(wù)監(jiān)聽端口修改后如下圖：vi/usr/local/nagios/etc/nrpe.cfg修改如下行將下圖中的#注釋去掉并進(jìn)行修改修改后效果如下圖：comman

24、dcheck_disk=/usr/local/nagios/libexec/check_disk-w20%-c10%-p/注:commandcheck_disk=/usr/local/nagios/libexec/check_disk-w20%-c10%-p/#根分區(qū)監(jiān)測重啟xinetd服務(wù)，查看NRPE是否已經(jīng)啟動可以看到5666端口已經(jīng)在監(jiān)聽了，并確保防火墻允許此端口附錄：/usr/local/nagios/libexec/check_nrpeh查看這個命令的用法可以看到用法是check_nrpeH被監(jiān)控的主機(jī)-c要執(zhí)行的監(jiān)控命令注意:-c后面接的監(jiān)控命令必須是nrpe.cfg文件中定義的

25、.也就是NRPEdaemon只運(yùn)行nrpe.cfg中所定義的命令查看NRPE的監(jiān)控命令vim/usr/local/nagios/etc/nrpe.cfg/內(nèi)容如下：#Tmandcheck_users=/usr/local/nagios/libexec/check_users-w5-c10commandcheck_load=/usr/local/nagios/libexec/check_load-w15,10,5-c30,25,20commandcheck_hda1=/usr/local/nagios/libexec/check_disk-w20-c10-p/dev/hda1commandche

26、ck_zombie_procs=/usr/local/nagios/libexec/check_procs-w5-c10-sZcommandcheck_total_procs=/usr/local/nagios/libexec/check_procs-w150-c200注意：其他命令需要自行添加也就是check_nrpe的-c參數(shù)可以接的內(nèi)容,等號（=）后面是實(shí)際執(zhí)行的插件程序(只這與commands.cfg中定義命令的形式十分相似,不過是寫在了一行).也就是說check_users就是等號后面/usr/local/nagios/libexec/check_users-w5-c10的簡稱.上面

27、這5行定義的命令分別是檢測登陸用戶數(shù),cpu負(fù)載,hda1的容量,僵尸進(jìn)程,總進(jìn)程數(shù).各條命令具體的含義見插件用法(執(zhí)行”插件程序名h”)如：由于-c后面只能接nrpe.cfg中定義的命令,也就是說現(xiàn)在我們只能用上面定義的這五條命令.可以在本機(jī)實(shí)驗一下.執(zhí)行/usr/local/nagios/libexec/check_nrpe-Hlocalhost-ccheck_users/usr/local/nagios/libexec/check_nrpe-Hlocalhost-ccheck_load/usr/local/nagios/libexec/check_nrpe-Hlocalhost-cche

28、ck_hda1/usr/local/nagios/libexec/check_nrpe-Hlocalhost-ccheck_zombie_procs/usr/local/nagios/libexec/check_nrpe-Hlocalhost-ccheck_total_procs監(jiān)控主機(jī)設(shè)置（即nagios服務(wù)器）編譯安裝nrpe軟件包：執(zhí)行下列命令，如能看到下圖輸出說明連接正常。/usr/local/nagios/libexec/check_nrpe-H01#vi/usr/local/nagios/etc/objects/commands.cfg添加如下行附錄：上圖含義如下command_n

29、amecheck_nrpe定義命令名稱為check_nrpe,在services.cfg中要使用這個名稱.command_line$USER1$/check_nrpe-H$HOSTADDRESS$-c$ARG1$用$USER1$代替/usr/local/nagios/libexec這是定義實(shí)際運(yùn)行的插件程序.這個命令行的書寫要完全按照check_nrpe這個命令的用法.不知道用法的就用check_nrpeh查看；-c后面帶的$ARG1$參數(shù)是傳給nrpedaemon執(zhí)行的檢測命令,之前說過了它必須是nrpe.cfg中所定義的那5條命令中的其中一條.注：比如想要監(jiān)控mysql主機(jī)(01)的SWA

30、P分區(qū)，你需要mysql主機(jī)的nrpe.cfg面加入重啟xinetd服務(wù)。在監(jiān)控主機(jī)上執(zhí)行：如果這里沒有定義好，那你在服務(wù)器端會報錯誤:NRPEcommandcheck_swapnotdefined在監(jiān)控主機(jī)（即nagios服務(wù)器）的/usr/local/nagios/etc/objects/services.cfg文件中添加要監(jiān)控的資源,如下圖所示：保存退出并執(zhí)行下列命令檢查是否有錯誤：最后重新加載nagios.cfg文件。通過瀏覽器訪問nagios的web頁面，查看新添加的監(jiān)控資源（swap信息）附錄：在services.cfg中使用check_nrpe的時候要用！帶上這個參數(shù)#vi/us

31、r/local/nagios/etc/objects/services.cfg添加如下行/usr/local/nagios/bin/nagios-v/usr/local/nagios/etc/nagios.cfg#檢測無誤后重載nagiosservicenagiosreload注：defineserviceusegeneric-service/使用的模板host_namemysqlhost/被監(jiān)控的主機(jī)名,這里注意必須是linux且運(yùn)行著nrpe,而且必須是hosts.cfg中定義的service_descriptioncheck-disk/監(jiān)控項目的名稱check_commandcheck_

32、nrpe!check_disk/監(jiān)控命令是check_nrpe,是在commands.cfg中定義的,帶的參數(shù)是check_disk,是在nrpe.cfg中定義的max_check_attempts5/最大檢測嘗試次數(shù)normal_check_interval3/正常檢測間隔時間retry_check_interval2/重試檢測間隔時間check_period24x7/監(jiān)控周期設(shè)置notification_interval10/通知間隔notification_period24x7/通知周期設(shè)置notification_optionsw,u,c,r/定義什么狀態(tài)時報警contact_grou

33、pssagroup/報警聯(lián)系組訪問ngios的web頁面：如下所示，能過監(jiān)控發(fā)現(xiàn)MYSQL系統(tǒng)的運(yùn)行情況。四：通過郵件發(fā)送報警nagios除了豐富的監(jiān)控功能外，報警功能相當(dāng)?shù)膹?qiáng)大。對于報警而言，常用的無非就是郵件和短信報警兩種方式，本文中主要是寫的nagios的郵件報警的功。郵件報警的配置我們只需要編輯/usr/local/nagios/etc/object下的contact.cfg文件，在email后添加管理員的郵箱即可。一般而言，如果監(jiān)控項目的分工不是太細(xì)的話就是管理員可以負(fù)責(zé)所有的監(jiān)控、并對其進(jìn)行處理的話，可以直接將一個或者多個管理員的郵件地址寫上，使用空格或者逗號隔開。但是如果監(jiān)控的內(nèi)

34、容中服務(wù)器有單獨(dú)的管理員，網(wǎng)絡(luò)有單獨(dú)的管理員的話，我們就可以定義多個contact(聯(lián)系人)，然后再用contactgroup(聯(lián)系組)對各contact進(jìn)行分組。例如管理網(wǎng)絡(luò)的有兩人，管理服務(wù)器的有兩個人，我們就可以定義兩個contactgroup，然后定義四個管理員的contact,如下例是當(dāng)前我正在使用的contact.cfg，服務(wù)器管理員有兩名，網(wǎng)絡(luò)管理員有兩名contact.cfg的配置definecontactcontact_namezhang1usegeneric-contactaliaszhang1service_notification_period24x7host_notification_period24x7service_notification_optionsw,u,c,rhost_notification_optionsd,u,rservice_notification_commandsnotify-service-by-emailhost_notification_commandsnotify-host-by-emailemailHYPERLINKmailto:zhang1zhang1definecontactcontact_namezhang2usegeneric-contac