系統(tǒng)運(yùn)維操作手冊(cè)

1、xxxx 系統(tǒng)系統(tǒng) 運(yùn)維操作手冊(cè)運(yùn)維操作手冊(cè) xxxx 公司 二零零九年十月 版本控制版本控制 版本號(hào)版本號(hào)日期日期參與人員參與人員更新說(shuō)明更新說(shuō)明 1.02011-06-06創(chuàng)建 分發(fā)控制分發(fā)控制 編號(hào)編號(hào)讀者讀者文檔權(quán)限文檔權(quán)限與文檔的主要關(guān)系與文檔的主要關(guān)系 1創(chuàng)建、修改、讀取負(fù)責(zé)編制、修改、審核 2批準(zhǔn)負(fù)責(zé)本文檔的批準(zhǔn)程序 3標(biāo)準(zhǔn)化審核作為本項(xiàng)目的標(biāo)準(zhǔn)化負(fù)責(zé)人，負(fù) 責(zé)對(duì)本文檔進(jìn)行標(biāo)準(zhǔn)化審核 4讀取 5讀取 1概述概述.5 2 2主機(jī)系統(tǒng)主機(jī)系統(tǒng).6 2.1檢查文件系統(tǒng)利用率.6 2.2查看系統(tǒng)硬件軟件告警日志.6 2.3檢查僵死或運(yùn)行時(shí)間過(guò)長(zhǎng)的進(jìn)程.7 2.4檢查系統(tǒng) CPU 利用率.

2、8 2.5檢查系統(tǒng)內(nèi)存利用率.8 2.6檢查系統(tǒng) IO 利用率.9 2.7檢查系統(tǒng)交換量.10 2.8檢查系統(tǒng)高可用性（HA）的使用狀態(tài).10 2.9清理過(guò)時(shí)的系統(tǒng)臨時(shí)文件.11 2.10檢查磁帶庫(kù)和磁帶使用情況.11 2.11修改用戶口令.12 2.12清洗磁帶機(jī).12 2.13檢索操作系統(tǒng)日志.13 3系統(tǒng)啟動(dòng)與關(guān)閉系統(tǒng)啟動(dòng)與關(guān)閉.14 3.1系統(tǒng)的運(yùn)行架構(gòu).14 3.2系統(tǒng)的啟動(dòng).15 3.3系統(tǒng)的關(guān)閉.18 4系統(tǒng)部署系統(tǒng)部署.24 4.1生成部署包.24 4.2程序部署.28 5重要的系統(tǒng)參數(shù)配置重要的系統(tǒng)參數(shù)配置.41 5.1CONFIG.PROPERTIES.41 5.2SPRI

3、NG-MISTASK.XML.41 6日志查看日志查看.43 6.1WAS 日志.43 6.2DB2 日志.43 7查系統(tǒng)是否正確運(yùn)行查系統(tǒng)是否正確運(yùn)行.45 8系統(tǒng)管理員維護(hù)人員信息日志系統(tǒng)管理員維護(hù)人員信息日志.47 9查看表空間及附件硬盤的使用情況查看表空間及附件硬盤的使用情況.48 9.1DB2 表空間查看 .48 9.2115 服務(wù)器附件文件占用情況.48 10服務(wù)停啟順序服務(wù)停啟順序.50 1 概述概述 本手冊(cè)給出了湖南省移動(dòng)公司的報(bào)賬平臺(tái)系統(tǒng)及報(bào)賬平臺(tái)外圍 系統(tǒng)的運(yùn)維操作細(xì)則。手冊(cè)從主機(jī)系統(tǒng)、應(yīng)用系統(tǒng)以及數(shù)據(jù)庫(kù)系統(tǒng) 三個(gè)方面對(duì)任務(wù)項(xiàng)進(jìn)行組織，對(duì)應(yīng)章節(jié)包括第 Error! Refe

4、rence source not found.章報(bào)賬平臺(tái)主機(jī)系統(tǒng)，第 Error! Reference source not found.章報(bào)賬平臺(tái)應(yīng)用軟件系統(tǒng)以及第 Error! Reference source not found.章報(bào)賬平臺(tái)數(shù)據(jù)庫(kù)系統(tǒng)。每個(gè)任務(wù)項(xiàng)中可能涉及的表格將 在第 5 章表單模板中統(tǒng)一給出。 2 2 主機(jī)系統(tǒng)主機(jī)系統(tǒng) 2.1 檢查文件系統(tǒng)利用率檢查文件系統(tǒng)利用率 編 號(hào)名 稱檢查文件系統(tǒng)利用率 描 述此任務(wù)檢查文件系統(tǒng)利用率不低于 85%或有大于 0.5G 以上的空閑空間 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說(shuō)明 1. 系統(tǒng)的正常運(yùn)行應(yīng)保證

5、有足夠的磁盤空間，文件系統(tǒng)被寫滿會(huì)導(dǎo)致 系統(tǒng)服務(wù)的中斷，可以使用 df k 進(jìn)行檢查是否有文件系統(tǒng)利用率 高于 85%并且可用空間小于 500M，對(duì)于保存數(shù)據(jù)庫(kù)數(shù)據(jù)文件所在的 磁盤空間和保存歸檔日志的應(yīng)有更高的空閑空間。 2. 但也不可以盲目的擴(kuò)展文件系統(tǒng)，因?yàn)槟壳?31 省所使用的文件系統(tǒng) 均不可以縮小，如果要回收空間只能刪除重建 表單填寫參見(jiàn)表單模板中的巡檢單表格 2.2 查看系統(tǒng)硬件軟件告警日志查看系統(tǒng)硬件軟件告警日志 編 號(hào)名 稱查看系統(tǒng)硬件軟件告警日志 描 述此任務(wù)查看系統(tǒng)硬件軟件告警日志 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說(shuō)明 以 root 運(yùn)行 tai

6、l /var/adm/messages 查看，如果系統(tǒng)寫滿了一個(gè) message 文件會(huì)自動(dòng)備份為 message.0， message.1 等。 表單填寫參見(jiàn)表單模板中的巡檢單表格 2.3 檢查僵死或運(yùn)行時(shí)間過(guò)長(zhǎng)的進(jìn)程檢查僵死或運(yùn)行時(shí)間過(guò)長(zhǎng)的進(jìn)程 編 號(hào)名 稱檢查僵死或運(yùn)行時(shí)間過(guò)長(zhǎng)的進(jìn)程 描 述此任務(wù)查看檢查僵死或運(yùn)行時(shí)間過(guò)長(zhǎng)的進(jìn)程 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說(shuō)明 1. 使用 ps ef|grep applprd 和 ps ef |grep oraprd 進(jìn)行檢查 （運(yùn)行時(shí)間超過(guò) 12 小時(shí)的絕大部分是需要注意的進(jìn)程） 。 2. 而程序名為 defunct

7、 的均為孤兒或僵死進(jìn)程。 3. 由于，夜晚為非工作時(shí)間，因此運(yùn)行超過(guò) 12 個(gè)小時(shí)的應(yīng)用服務(wù)例如， form 服務(wù)的客戶端進(jìn)程（AIX 平臺(tái)為 f60runm，SUN 平臺(tái)為 f60webmx） ，很可能是運(yùn)行出錯(cuò)的進(jìn)程，應(yīng)可以 kill 掉，對(duì)于數(shù)據(jù) 庫(kù)進(jìn)程一般不采用在 UNIX 命令中 kill 的方法而是登陸到數(shù)據(jù)庫(kù)使用 alter system kill session ,的方法中止 該數(shù)據(jù)庫(kù)進(jìn)程。 表單填寫參見(jiàn)表單模板中的巡檢單表格 2.4 檢查系統(tǒng)檢查系統(tǒng) CPU 利用率利用率 編 號(hào)名 稱檢查系統(tǒng) CPU 利用率 描 述此任務(wù)檢查系統(tǒng) CPU 利用率 操作角色 主機(jī)系統(tǒng) 管理員

8、所屬管控類別巡檢執(zhí)行頻度每日 操作說(shuō)明 1.prstat a solaris 2. psrinfo -v (CPU 狀態(tài)) 表單填寫參見(jiàn)表單模板中的巡檢單表格 2.5 檢查系統(tǒng)內(nèi)存利用率檢查系統(tǒng)內(nèi)存利用率 編 號(hào)名 稱檢查系統(tǒng)內(nèi)存利用率 描 述此任務(wù)檢查內(nèi)存利用率 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說(shuō)明 1.solaris vmstat 查看 free 值 2.prtdiag -v 表單填寫參見(jiàn)表單模板中的巡檢單表格 2.6 檢查系統(tǒng)檢查系統(tǒng) IO 利用率利用率 編 號(hào)名 稱檢查系統(tǒng) IO 利用率 描 述此任務(wù)檢查 IO 利用率 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控

9、類別巡檢執(zhí)行頻度每日 操作說(shuō)明 1.solaris iostat 表單填寫參見(jiàn)表單模板中的巡檢單表格 2.7 檢查系統(tǒng)交換量檢查系統(tǒng)交換量 編 號(hào)名 稱檢查系統(tǒng)交換量 描 述此任務(wù)檢查系統(tǒng)交換量 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說(shuō)明 1. 手動(dòng)運(yùn)行的方法如下： topas 2.swap l & swap s solaris 表單填寫參見(jiàn)表單模板中的巡檢單表格 2.8 檢查系統(tǒng)高可用性（檢查系統(tǒng)高可用性（HA）的使用狀態(tài)）的使用狀態(tài) 編 號(hào)名 稱檢查系統(tǒng)高可用性（HA）的使用狀態(tài) 描 述此任務(wù)檢查系統(tǒng)高可用性（HA）的使用狀態(tài) 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控類

10、別巡檢執(zhí)行頻度每日 操作說(shuō)明 1.webview 狀 態(tài) # /etc/opt/FJSVwvbs/etc/bin/wvstat 2.CF 和心跳狀 態(tài) # cftool - 和 cftool -r 3.SF 狀態(tài) # sdtool -s 4.CIP 狀態(tài)# ciptool -a 和 # ciptool -n 5.CRM 狀態(tài) # /etc/opt/FJSVcluster/bin/clgettree 6.RMS 狀態(tài) # hvdisp -a 1. 表單填寫參見(jiàn)表單模板中的巡檢單表格 2.9 清理過(guò)時(shí)的系統(tǒng)臨時(shí)文件清理過(guò)時(shí)的系統(tǒng)臨時(shí)文件 編 號(hào)名 稱清理過(guò)時(shí)的系統(tǒng)臨時(shí)文件 描 述此任務(wù)清理過(guò)時(shí)的系

11、統(tǒng)臨時(shí)文件 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每周 操作說(shuō)明 1. f60*dump*。 2. $ORACLE_HOME/reports60/server/cache/*（最好關(guān)閉服務(wù) 清理） 。 3. $APPLTMP/*（只有關(guān)閉服務(wù)后可以進(jìn)行） 。 表單填寫參見(jiàn)表單模板中的巡檢單表格 2.10 檢查磁帶庫(kù)和磁帶使用情況檢查磁帶庫(kù)和磁帶使用情況 編 號(hào)名 稱檢查磁帶庫(kù)和磁帶使用情況 描 述此任務(wù)檢查磁帶庫(kù)和磁帶使用情況 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每周 操作說(shuō)明 1. 檢查是否有足夠的空間保存?zhèn)浞荨?2. 磁帶庫(kù)運(yùn)行中是否有錯(cuò)誤出現(xiàn)。 表單填寫參見(jiàn)

12、表單模板中的巡檢單表格 2.11 修改用戶口令修改用戶口令 編 號(hào)名 稱修改 UNIX 用戶口令 描 述此項(xiàng)目修改用戶口令 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控類別 用戶帳號(hào)及 密碼管理 執(zhí)行頻度每月 操作說(shuō)明 1. 修改 UNIX 密碼步驟如下： letterboxusername1: passwd Enter login password: 您的舊密碼 New password: 您的新密碼 Re-enter new password: 您的新密碼 passwd (SYSTEM): passwd successfully changed for username letterboxuser

13、name2: 2.密碼修改之后，必須及時(shí)通知系統(tǒng)管理員。 修改過(guò) UNIX 口令之后，需要通知需要知道口令的人員。 表單填寫參見(jiàn)表單模板中的用戶帳號(hào)管理情況登記表 2.12 清洗磁帶機(jī)清洗磁帶機(jī) 編 號(hào)名 稱清洗磁帶機(jī) 描 述此任務(wù)將清洗磁帶機(jī)清洗干凈 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控類別備份管理執(zhí)行頻度每月 操作說(shuō)明 用清洗帶清洗磁帶機(jī)。 表單填寫參見(jiàn)表單模板中的巡檢單表格 2.13 檢索操作系統(tǒng)日志檢索操作系統(tǒng)日志 編 號(hào)名 稱檢索 AIX 操作系統(tǒng)日志 描 述此任務(wù)檢索操作系統(tǒng)日志 操作角色 主機(jī)系統(tǒng) 管理員 所屬管控類別日志管理執(zhí)行頻度每周 操作說(shuō)明 1查看用戶登陸日志： 在命令行

14、輸入命令：last 2查看用戶失敗登陸日志： 在命令行輸入命令，進(jìn)入日志所在目錄：cd /etc/security 查看日志內(nèi)容： vi failedlogin 3查看 su 命令執(zhí)行日志內(nèi)容： 在命令行輸入命令，進(jìn)入日志所在目錄：cd /var/adm 查看日志內(nèi)容：vi sulog 4查看 Auditor 文件操作日志 首先需要在系統(tǒng)中開(kāi)啟 audit 功能，會(huì)在系統(tǒng)中自動(dòng)生成 /etc/security/audit/bin*文件。此處的 bin*指所有以 bin 開(kāi)頭的文件 進(jìn)入日志所在目錄：cd /etc/security/audit/ 查看日志： vi bin* 表單填寫參見(jiàn)表單模板

15、中日志檢索申請(qǐng)表及日志檢索記錄表 根據(jù)情況可能需要備份介質(zhì)訪問(wèn)登記表 3 系統(tǒng)啟動(dòng)與關(guān)閉系統(tǒng)啟動(dòng)與關(guān)閉 3.1 系統(tǒng)的運(yùn)行架構(gòu)系統(tǒng)的運(yùn)行架構(gòu) 3.2 系統(tǒng)的啟動(dòng)系統(tǒng)的啟動(dòng) 編 號(hào)名 稱檢查系統(tǒng)啟動(dòng) 描 述此任務(wù)查看系統(tǒng)登錄以了解應(yīng)用系統(tǒng)此時(shí)此刻的運(yùn)行狀況 操作角色 應(yīng)用系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度系統(tǒng)更改 操作說(shuō)明 第一步： 第二步：掛接 NFS： 第三步：?jiǎn)?dòng)其他軟件， 表單填寫參見(jiàn)表單模板中的巡檢單表格 輸入用戶名 root 和 root 的密碼，點(diǎn)擊 OK。 選擇 Global Cluster Service； 選擇 Cluster Admin，選擇其中的任意一個(gè)節(jié)點(diǎn)，如 db

16、svr； 選擇 rms 標(biāo)簽頁(yè)，在 Tools 菜單中選擇啟動(dòng)； 啟動(dòng)后的狀態(tài)如下圖所示： 3.3 系統(tǒng)的關(guān)閉系統(tǒng)的關(guān)閉 編 號(hào)名 稱系統(tǒng)關(guān)閉 描 述此任務(wù)查看系統(tǒng)關(guān)閉 操作角色 應(yīng)用系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度系統(tǒng)更改 操作說(shuō)明 表單填寫參見(jiàn)表單模板中的巡檢單表格 輸入用戶名 root 和 root 的密碼，點(diǎn)擊 OK。 選擇 Global Cluster Service； 第一步： 第二步：關(guān)閉其他軟件 這樣，應(yīng)用就關(guān)閉完成了。 選擇 Cluster Admin，選擇其中的任意一個(gè)節(jié)點(diǎn)，如 dbsvr； 選擇 rms 標(biāo)簽頁(yè)，在 Tools 菜單中選擇關(guān)閉； 根據(jù)需要，選擇 st

17、op all Apps。 關(guān)閉完成后，如下圖所示： 4 系統(tǒng)部署系統(tǒng)部署 4.1 生成部署包生成部署包 首先，需要更新 SVN 上的版本，在版本管理機(jī)器 F:ProductSpecialSrc1128src 下， 選定下面的文件，按右鍵，選擇 update： F:ProductSpecialSrc1128WebRoot 下，選定下面的文件，按右鍵，選擇 update： 進(jìn)入 Eclipse： 查看項(xiàng)目屬性，確實(shí)為 F:ProductSpecialSrc1128 的項(xiàng)目： 在項(xiàng)目上按右鍵，選擇 Refresh。 在 Project 菜單，選擇 Clean： 待 Clean 完成后，在 File

18、菜單選擇 Export， 選擇 War file： 導(dǎo)出到一個(gè)文件夾： 這樣，部署包就生成了。 4.2 程序部署程序部署 登錄到：15:9060/ibm/console/ 輸入用戶名，可輸入 root： 選擇應(yīng)用程序企業(yè)應(yīng)用程序，選定 eFinance.war，點(diǎn)擊停止： 待停止完成后，選擇 eFinance.war，點(diǎn)擊刪除： 點(diǎn)擊確定： 點(diǎn)擊保存： 點(diǎn)擊安裝： 點(diǎn)擊瀏覽，選定部署包： 輸入上下文根： eFinance ，點(diǎn)擊下一步： 點(diǎn)擊下一步： 選定所有集群和服務(wù)器，選定 ent_bpms，點(diǎn)擊應(yīng)用； 選定 ent_bpms，點(diǎn)擊下一步： 點(diǎn)擊完成：

19、點(diǎn)擊保存： 部署包已經(jīng)部署完成，如下圖所示： 下一步的任務(wù)是啟動(dòng)應(yīng)用程序。 點(diǎn)擊集群： 選擇 Cluster，點(diǎn)擊停止： 待選擇 Cluster，點(diǎn)擊啟動(dòng)： 啟動(dòng)完成后，如下圖所示： 啟動(dòng)完成后，進(jìn)行驗(yàn)證：16/eFinance 5 重要的系統(tǒng)參數(shù)配置重要的系統(tǒng)參數(shù)配置 6 日志查看日志查看 6.1 WAS 日志日志 編 號(hào)名 稱檢查 WAS 日志 描 述此任務(wù)查看WAS 日志狀況 操作角色 應(yīng)用系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說(shuō)明 1Wassvr 日志存放于： /opt/IBM/WebSphere/AppServer/profiles/Ap

20、pSrv01/logs/wassvr 2dbsvr 日志存放于 /opt/IBM/WebSphere/AppServer/profiles/AppSrv01/logs/dbsvr 表單填寫參見(jiàn)表單模板中的巡檢單表格 6.2 DB2 日志日志 編 號(hào)名 稱檢查 DB2 日志 描 述此任務(wù)查看DB2 日志狀況 操作角色 應(yīng)用系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說(shuō)明 1Db2 日志存放與 dbsvr 服務(wù)器的： /ef/appinst/sqllib/db2dump 表單填寫參見(jiàn)表單模板中的巡檢單表格 7 查系統(tǒng)是否正確運(yùn)行查系統(tǒng)是否正確運(yùn)行 編 號(hào)名 稱檢查系統(tǒng)登錄 描 述此任務(wù)查看系統(tǒng)登錄以了解應(yīng)用系統(tǒng)此時(shí)此刻的運(yùn)行狀況 操作角色 應(yīng)用系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說(shuō)明 1. 如果頁(yè)面能正常顯示，說(shuō)明 115 服務(wù)器或 11