軟件系統(tǒng)部署應(yīng)急預(yù)案初稿

1、系統(tǒng)應(yīng)急預(yù)案1. 目的 32. 適用范圍 33. 涉及服務(wù)器列表 34. 危險因素分析. 35. 危險事件等級定義分類 46. 應(yīng)急響應(yīng)流程. 46.1. 事件報警與確認 46.2. 對系統(tǒng)進行檢查 46.3. 安全審計及事故分析 46.4. 消除隱患、恢復(fù)正常運行. 56.5. 重新啟動系統(tǒng) 56.6. 安全報告、歸檔 57. 應(yīng)急處理措施. 57.1. 一般故障. 57.2. 重大故障. 57.3. 特大故障. 57.3.1. 系統(tǒng)無法登錄 57.3.2. 系統(tǒng)應(yīng)用連接數(shù)據(jù)庫超時 67.3.3. 滿意度調(diào)查系統(tǒng)應(yīng)用服務(wù)啟動正常，卻無法訪問系統(tǒng) 67.3.4. 數(shù)據(jù)庫出錯導(dǎo)致系統(tǒng)無法使用 6

2、7.3.5. DB2 數(shù)據(jù)庫程序異常 77.3.6. 操作系統(tǒng)故障 77.3.7. 系統(tǒng)收集調(diào)查問卷失敗 78. 系統(tǒng)環(huán)境要求. 錯誤! 未定義書簽。8.1. 硬件環(huán)境. 錯誤! 未定義書簽。8.2. 網(wǎng)絡(luò)環(huán)境 錯誤 ! 未定義書簽。精品資料1 .目的為妥善應(yīng)對和處置甘肅省零售客戶滿意度網(wǎng)上調(diào)查系統(tǒng)信息安全突發(fā)事件、確保滿意度調(diào)查系統(tǒng)的運行安全和數(shù)據(jù)安全，結(jié)合滿意度調(diào)查項目實際情況，特制定本應(yīng)急預(yù)案。 本預(yù)案主要立足防范和消除以下危害情況的出現(xiàn)：1、滿意度系統(tǒng)運行過程中數(shù)據(jù)庫異常， 導(dǎo)致數(shù)據(jù)丟失，系統(tǒng)不能正常運行；2、滿意度系統(tǒng)運行過程中，應(yīng)用服務(wù)程序異常，導(dǎo)致系統(tǒng)異常系統(tǒng)不能正常運行；3、滿

3、意度系統(tǒng)運行過程中，服務(wù)器間網(wǎng)絡(luò)連接異常，導(dǎo)致系統(tǒng)異常系統(tǒng)不 能正常運行。2 .適用范圍本預(yù)案適用于甘肅省煙草公司零售客戶滿意度網(wǎng)上調(diào)查系統(tǒng)正在發(fā)生或可 能發(fā)生的系統(tǒng)安全和數(shù)據(jù)安全突發(fā)事件。3 .涉及服務(wù)器列表設(shè)備名稱系統(tǒng)名稱IP地址操作系統(tǒng)甘肅省煙草公司 內(nèi)網(wǎng)系統(tǒng)業(yè)務(wù)平 臺應(yīng)用服務(wù)器甘肅省零售客戶 滿總度網(wǎng)上調(diào)查 系統(tǒng)10.52.4.157、10.52.4.158Aix6.1甘肅省煙草公司 內(nèi)網(wǎng)系統(tǒng)業(yè)務(wù)平 臺數(shù)據(jù)庫服務(wù)器甘肅省零售客戶 滿總度網(wǎng)上調(diào)查 系統(tǒng)10.52.4.161、10.52.4.162Aix6.14 .危險因素分析客戶滿意度網(wǎng)上調(diào)查系統(tǒng)是作為應(yīng)用組件部署在信息中心數(shù)據(jù)和業(yè)務(wù)兩

4、個平臺，而并非單獨孤立的應(yīng)用系統(tǒng)， 且該系統(tǒng)直接部署在生產(chǎn)環(huán)境中，所以引發(fā)零售客戶客戶滿意度網(wǎng)上調(diào)查系統(tǒng)潛在危險的因素主要包括：部署環(huán)境的硬件設(shè)備故障、部署軟件系統(tǒng)故障、網(wǎng)絡(luò)故障及滿意度系統(tǒng)本身的程序錯誤。5 . 危險事件等級定義分類1、一般故障：指系統(tǒng)出現(xiàn)輕微錯誤或瑕疵，具體包括：個別圖片無法顯示、個別信息內(nèi)容出現(xiàn)明顯錯誤、個別服務(wù)和功能無法正常使用等。2、重大故障：指出現(xiàn)系統(tǒng)出現(xiàn)異常，但不影響系統(tǒng)日常使用，具體包括：局部頁面錯誤、部分功能無法使用，部分信息內(nèi)容出現(xiàn)明顯錯誤等。3、特大故障：指系統(tǒng)崩潰，應(yīng)用服務(wù)停止，導(dǎo)致大規(guī)模用戶無法使用系統(tǒng)，出現(xiàn)數(shù)據(jù)丟失，具體包括：系統(tǒng)服務(wù)無法啟動、數(shù)據(jù)庫

5、無法連接、系統(tǒng)程序異常和數(shù)據(jù)庫文件損壞等。6 . 應(yīng)急響應(yīng)流程6.1. 事件報警與確認工作人員對數(shù)據(jù)庫服務(wù)器、應(yīng)用系統(tǒng)的運行狀況以及網(wǎng)絡(luò)情況進行監(jiān)測，及時發(fā)現(xiàn)系統(tǒng)的異常和網(wǎng)絡(luò)故障，一旦發(fā)現(xiàn)異常情況需及時通知項目維護相關(guān)人員進行原因的排查和故障的處理；6.2. 對系統(tǒng)進行檢查1、 檢查網(wǎng)絡(luò)連接：需要相關(guān)網(wǎng)絡(luò)管理人員配合檢查；2、檢查應(yīng)用服務(wù)器性能指標，檢查的內(nèi)容包括：Web Sphere進程是否正常、CPUS用率、內(nèi)存使用率；3、 檢查后臺數(shù)據(jù)庫服務(wù)器性能指標，檢查內(nèi)容包括：數(shù)據(jù)庫服務(wù)器雙機狀態(tài)、數(shù)據(jù)庫進程是否正常、數(shù)據(jù)庫服務(wù)是否啟動、CPUS用率、內(nèi)存使用率。6.3. 安全審計及事故分析通過系

6、統(tǒng)日志、網(wǎng)絡(luò)設(shè)備日志、數(shù)據(jù)庫訪問日志等，對事件進行審計，對損失進行評估，追查事件的發(fā)生原因；6.4. 消除隱患、恢復(fù)正常運行根據(jù)審計結(jié)果，排除系統(tǒng)隱患，恢復(fù)系統(tǒng)正常運行；6.5. 重新啟動系統(tǒng)啟動數(shù)據(jù)庫服務(wù)器-> 啟動應(yīng)用服務(wù)器；6.6. 安全報告、歸檔提供故障分析報告，分析故障原因，修正預(yù)案處理流程并歸檔。7 . 應(yīng)急處理措施7.1. 一般故障工作人員第一時間迅速準確判斷事件原因，提交甘肅省煙草公司零售客戶滿意度網(wǎng)上調(diào)查系統(tǒng)項目組進行處置。7.2. 重大故障按規(guī)定及時向信息中心報告。報告內(nèi)容主要包括故障范圍、影響范圍、事件性質(zhì)、事件發(fā)展趨勢和采取的措施等。信息中心召集相關(guān)責任部門共同協(xié)

7、商解決。必要時可以停止系統(tǒng)運行。7.3. 特大故障按規(guī)定及時向甘肅省煙草公司信息中心辦公室報告，并要實行報告勢態(tài)進程。甘肅省煙草公司信息中心辦公室根據(jù)系統(tǒng)故障發(fā)展態(tài)勢，現(xiàn)場指導(dǎo)，組織派遣應(yīng)急支援力量。具體措施如下：7.3.1. 系統(tǒng)無法登錄系統(tǒng)無法正常登錄一般由于應(yīng)用服務(wù)器與數(shù)據(jù)庫服務(wù)器之間網(wǎng)絡(luò)連接異常或數(shù)據(jù)庫服務(wù)未啟動導(dǎo)致，現(xiàn)場處理措施如下：? 檢查應(yīng)用服務(wù)器與數(shù)據(jù)庫服務(wù)器之間網(wǎng)絡(luò)連接是否正常，若應(yīng)用服務(wù)器與數(shù)據(jù)庫服務(wù)器之間網(wǎng)絡(luò)連接異常，恢復(fù)應(yīng)用服務(wù)器與數(shù)據(jù)庫服務(wù)器網(wǎng)絡(luò)解決，重新啟動系統(tǒng)；? 應(yīng)用程序后臺服務(wù)是否運行正常；?檢查數(shù)據(jù)庫服務(wù)器數(shù)據(jù)庫服務(wù)是否運行正常，如數(shù)據(jù)庫服務(wù)器服務(wù)未啟 動則

8、啟動數(shù)據(jù)庫服務(wù)器數(shù)據(jù)庫服務(wù)，重新啟動系統(tǒng)；?若以上方案均無法解決系統(tǒng)無法登錄問題，抓取并保存系統(tǒng)出錯信息及 日志文件，簡單判斷異常部位，通知系統(tǒng)維護相關(guān)人員，保留現(xiàn)場，分 析查找原因。7.3.2. 系統(tǒng)應(yīng)用連接數(shù)據(jù)庫超時數(shù)據(jù)庫連接超時，一種情況是應(yīng)用服務(wù)器與數(shù)據(jù)庫服務(wù)器網(wǎng)絡(luò)連接異常； 另一種情況是系統(tǒng)數(shù)據(jù)源出錯，現(xiàn)場處理措施如：? 應(yīng)用服務(wù)器與數(shù)據(jù)庫服務(wù)器網(wǎng)絡(luò)連接異常， 排除網(wǎng)絡(luò)連接異常故障， 重啟數(shù)據(jù)庫服務(wù)器和應(yīng)用服務(wù)器。?系統(tǒng)數(shù)據(jù)源出錯，重新配置系統(tǒng)數(shù)據(jù)源。（詳情參照甘肅省煙草 公司零售客戶滿意度網(wǎng)上調(diào)查系統(tǒng)部署方案5.3配置文件說明配置 數(shù)據(jù)源）。? 以上方案無法解決系統(tǒng)故障時，應(yīng)停止系

9、統(tǒng)后臺服務(wù)，防止不知情 用戶繼續(xù)投遞數(shù)據(jù)。抓取并保存系統(tǒng)出錯信息及日志文件，簡單判 斷異常部位，通知系統(tǒng)維護相關(guān)人員，保留現(xiàn)場，分析查找原因。7.3.3. 滿意度調(diào)查系統(tǒng)應(yīng)用服務(wù)啟動正常，卻無法訪問系統(tǒng)如果滿意度調(diào)查系統(tǒng)應(yīng)用服務(wù)啟動正常，無法訪問系統(tǒng)。現(xiàn)場處理措施 如下：? 系統(tǒng)應(yīng)用程序包出現(xiàn)故障，需重新部署滿意度調(diào)查系統(tǒng)應(yīng)用程序包；?系統(tǒng)數(shù)據(jù)源出錯，需重新配置數(shù)據(jù)源。（詳情參照甘肅省煙草公 司零售客戶滿意度網(wǎng)上調(diào)查系統(tǒng)部署方案 5.3配置文件說明配置數(shù) 據(jù)源）。7.3.4. 數(shù)據(jù)庫出錯導(dǎo)致系統(tǒng)無法使用數(shù)據(jù)庫出現(xiàn)故障系統(tǒng)數(shù)據(jù)文件損壞，以系統(tǒng)管理員用戶登錄在應(yīng)用服務(wù) 器10.52.4.161上的

10、DB室戶端，創(chuàng)建新的表空間，導(dǎo)入最近的一個時間點的系統(tǒng)數(shù)據(jù)庫備份文件到新建的表空間里，重新添加部署系統(tǒng)數(shù)據(jù)源，進行恢復(fù)操作。 操作過程中，應(yīng)停止系統(tǒng)后臺服務(wù)，防止不知情用戶繼續(xù)投遞數(shù)據(jù)。7.3.5. DB2數(shù)據(jù)庫程序異常BD2數(shù)據(jù)庫出現(xiàn)故障無法繼續(xù)使用，需重新安裝DB2數(shù)據(jù)庫程序，安裝完成后，創(chuàng)建新的數(shù)據(jù)庫和表空間，導(dǎo)入系統(tǒng)數(shù)據(jù)文件到新建的表空間里，重新添加部署應(yīng)用系統(tǒng)數(shù)據(jù)庫，進行恢復(fù)操作。操作完后重新啟動應(yīng)用服務(wù)及數(shù)據(jù)服務(wù)。7.3.6. 操作系統(tǒng)故障應(yīng)用服務(wù)器或數(shù)據(jù)庫服務(wù)器系統(tǒng)故障，導(dǎo)致系統(tǒng)無法正常運行，需重新安裝操作系統(tǒng)。? 應(yīng)用服務(wù)器操作系統(tǒng)故障，重新安裝操作系統(tǒng)，重新部署滿意度系統(tǒng)。具

11、體操作參照甘肅省煙草公司零售客戶滿意度網(wǎng)上調(diào)查系統(tǒng)部署方案，部署完畢啟動數(shù)據(jù)庫服務(wù)和應(yīng)用服務(wù)。? 數(shù)據(jù)庫服務(wù)器操作系統(tǒng)故障，重新安裝操作系統(tǒng)，以系統(tǒng)管理員用戶登錄在應(yīng)用服務(wù)器10.52.4.161上的DB2客戶端，創(chuàng)建新的表空間，導(dǎo)入最近的一個時間點的系統(tǒng)數(shù)據(jù)庫備份文件到新建的表空間里，重新添加部署系統(tǒng)數(shù)據(jù)源，進行恢復(fù)操作。7.3.7. 系統(tǒng)收集調(diào)查問卷失敗系統(tǒng)收集調(diào)查問卷失敗一般由于網(wǎng)絡(luò)連接故障、數(shù)據(jù)庫異常或系統(tǒng)程序?qū)е?，現(xiàn)場處理措施如下：? 檢查應(yīng)用服務(wù)器與數(shù)據(jù)庫服務(wù)器之間網(wǎng)絡(luò)連接是否正常，若應(yīng)用服務(wù)器與數(shù)據(jù)庫服務(wù)器之間網(wǎng)絡(luò)連接異常，恢復(fù)應(yīng)用服務(wù)器與數(shù)據(jù)庫服務(wù)器網(wǎng)絡(luò)解決，重新啟動系統(tǒng)；? 檢查應(yīng)用服務(wù)器與新商盟平臺網(wǎng)絡(luò)連接是否正常，若應(yīng)用服務(wù)器與新商盟平息之間網(wǎng)絡(luò)連接異常，排除網(wǎng)絡(luò)故障，重新啟動系統(tǒng)；? 應(yīng)用程序后