數(shù)據(jù)庫技術方案

內部公開▲本文中的所有信息均為秦唐科技有限公司所有，未經許可不得向外傳播。第2/16頁廣西區(qū)質量技術監(jiān)督局數(shù)據(jù)庫維保服務方案南寧秦唐科技有限公司2016年8月目錄廣西區(qū)質量技術監(jiān)督局數(shù)據(jù)庫 1維保服務方案 11 項目背景及目標 31.1 項目背景 31.2 項目目標 32 需求分析 33 維保范圍 44 數(shù)據(jù)庫維保方案 54.1 系統(tǒng)健康狀態(tài)檢查 54.1.1 Oracle數(shù)據(jù)庫運維主要核查項 54.1.2 Mysql數(shù)據(jù)庫運維主要檢查項 94.1.3 SqlServer數(shù)據(jù)庫運維主機檢查項 104.2 數(shù)據(jù)庫性能分析與優(yōu)化調整 104.3 數(shù)據(jù)庫備份以及恢復服務 114.4 數(shù)據(jù)庫補丁分析與安裝 124.5 7*24小時數(shù)據(jù)庫救援服務 125 技術支持以及服務體系 135.1 故障處理要求 135.2 重大活動現(xiàn)場護航 135.3 維護作業(yè)計劃 145.4 信息安全保障 145.5 第三方協(xié)助服務 145.6 服務質量分析 146 項目實施以及管理 156.1 項目實施策略 156.2 項目實施計劃 156.3 項目交付文檔 156.4 交付要求 156.5 提交文件資料 16

項目背景及目標項目背景廣西區(qū)質量技術監(jiān)督局信息化建設經過多年的發(fā)展和完善，已經建立成熟的網(wǎng)絡環(huán)境及生產經營管理的各類應用系統(tǒng)，目前質監(jiān)局擁有多套不同類型的數(shù)據(jù)庫（多種操作系統(tǒng)）混合使用（Oracle，Mysql，SqlServer），共十幾個節(jié)點，其中最大的oracle生產數(shù)據(jù)庫已高達3TB；隨著質監(jiān)工作的業(yè)務發(fā)展，各系統(tǒng)數(shù)據(jù)量逐年增加，作為業(yè)務核心的數(shù)據(jù)庫，安全性，可靠性的要求也變得越來越高,需要更加專業(yè)細致地對數(shù)據(jù)庫維護，以便更好地為全區(qū)質監(jiān)工作提供IT服務。項目目標通過建立規(guī)范的維護作業(yè)體系，及時發(fā)現(xiàn)數(shù)據(jù)庫運行中的風險問題，防患于未然，保障數(shù)據(jù)庫運行健康持續(xù)。對數(shù)據(jù)庫運行性能進行監(jiān)測分析，及時發(fā)現(xiàn)瓶頸，通過外部資源調優(yōu)、行的重新安排調優(yōu)、SQL性能調優(yōu)、表格和索引存儲參數(shù)設置調優(yōu)等方式，及時對性能問題進行處理，保障數(shù)據(jù)庫穩(wěn)定高效工作；對各個系統(tǒng)數(shù)據(jù)庫進行補丁升級服務，安裝補丁前需要對補丁的可行性及風險性進行分析，并制定升級計劃和應急回退計劃。同時要做好系統(tǒng)備份準備及詳細的測試工作，確保系統(tǒng)的穩(wěn)定性、安全性，保障系統(tǒng)業(yè)務數(shù)據(jù)的安全；需求分析廣西區(qū)質量技術監(jiān)督局項目現(xiàn)場多種數(shù)據(jù)庫共存，相互為多個應用系統(tǒng)服務。為保證數(shù)據(jù)庫系統(tǒng)的穩(wěn)定、安全、合理和高效，減低故障對生產的影響，消除生產故障的薄弱環(huán)節(jié)，現(xiàn)需購買對以下數(shù)據(jù)庫的保修和維護服務。ID數(shù)據(jù)庫節(jié)點數(shù)據(jù)庫類型應用說明保障級別1oraclerac雙節(jié)點（HP主機）oracle10g金質工程核心數(shù)據(jù)庫重要2oraclerac雙節(jié)點（Linux）oracle10g金質工程核心數(shù)據(jù)庫重要3Oracle單節(jié)點Oracle10g邊界交換數(shù)據(jù)庫重要4Oracle單節(jié)點Oracle10g云平臺數(shù)據(jù)庫（內網(wǎng)）重要5Oracle單節(jié)點Oracle10g云平臺數(shù)據(jù)庫（外網(wǎng)）重要6SQLSERVERMSCS1mssqlserver2008外部門戶數(shù)據(jù)庫重要7SQLSERVERMSCS2mssqlserver2008外部門戶數(shù)據(jù)庫重要8SQLSERVERMSCS3mssqlserver2008OA考核重要10SQLSERVERMSCS4mssqlserver2008——重要11mysql集群1————普通12mysql集群2————普通維保范圍

提供常態(tài)化服務和技術支持，并配備資深工程師，工程師熟悉oracle/sqlserver/mysql等各種主流數(shù)據(jù)庫技術，保證能快速、有效的解決各類故障。配置和優(yōu)化系統(tǒng)安全、加固，故障的診斷與排除等。數(shù)據(jù)庫系統(tǒng)恢復服務，確保系統(tǒng)崩潰后的快速恢復。為客戶提供各個版本數(shù)據(jù)庫系統(tǒng)運行和維護的合理建議。數(shù)據(jù)庫系統(tǒng)軟件升級（用戶要求）和不限次（或配合用戶）安裝。

對數(shù)據(jù)庫系統(tǒng)本身存在的安全隱患和安全問題，進行修復；對系統(tǒng)配置和數(shù)據(jù)定期備份提供系統(tǒng)維修及維護報告。數(shù)據(jù)庫維保方案數(shù)據(jù)庫維保工作主要包括：數(shù)據(jù)庫健康狀態(tài)檢查、數(shù)據(jù)庫性能分析與調整、數(shù)據(jù)庫備份與恢復、數(shù)據(jù)庫補丁分析與安裝、7*24小時數(shù)據(jù)庫救援等工作。系統(tǒng)健康狀態(tài)檢查檢查內容包括：Oracle數(shù)據(jù)庫和CRS錯誤日志和分析；文件系統(tǒng)空間使用情況檢查；Oracle數(shù)據(jù)庫及RAC系統(tǒng)運行情況狀態(tài)、性能分析和優(yōu)化建議;檢查其OS狀況，包括CPU、內存和交換區(qū)使用情況，硬盤和網(wǎng)絡的IO情況檢查;記錄Oracle數(shù)據(jù)庫存儲空間的邏輯結構；Oracle數(shù)據(jù)庫備份情況檢查；等根據(jù)檢查結果分析并給出數(shù)據(jù)庫可行的調整建議和實施；每月至少進行一次系統(tǒng)健康狀態(tài)的檢查，根據(jù)制定的維保服務內容和流程對Oracle、Mysql，SqlServer進行一次全面巡檢，包括檢查數(shù)據(jù)庫設備、系統(tǒng)的運行情況；每月25日之前提供數(shù)據(jù)庫巡檢報告。Oracle數(shù)據(jù)庫運維主要核查項數(shù)據(jù)庫的運維主要結合廣西質量技術監(jiān)督局的實際情況，提供切實可行的運維建設機制，內容覆蓋ORACLE數(shù)據(jù)庫的日常維護、緊急故障處理，軟件升級等，客戶可依據(jù)服務內容進行相應的定制。我們將會提供全面的、針對性的服務解決方案，以保客戶系統(tǒng)穩(wěn)定、高效、可靠的運行，以達到對業(yè)務系統(tǒng)的有效支持。檢查數(shù)據(jù)庫cpu、I/O、內存性能記錄數(shù)據(jù)庫的cpu使用、IO、內存等使用情況，使用vmstat,iostat,sar,top等命令進行信息收集并檢查這些信息，判斷資源使用情況。檢查rman備份的有效性restorepreview/restoredatabasepreview命令此命令用來查看還原需要使用哪個備份集來執(zhí)行特定的恢復

使用validate和checklogical參數(shù)的restore命令，檢查備份集，以確認數(shù)據(jù)庫是可恢復的

restoredatabasevalidate；

使用checklogical參數(shù)可以更完全的檢查最新備份集

run

{

restoredatabasechecklogicalvalidate;

}使用validatebackupset命令

使用具有validate參數(shù)或checklogical參數(shù)的restore命令只能檢查最新的備份集，如果要檢查任意的備份集，就需要用validatebackupset命令。

首先必須確認要檢查的備份集的鍵(backupsetkey)

listbackupset;

再執(zhí)行檢查

validatebackupset141;

或

validatebackupset141checklogical;檢查oracle數(shù)據(jù)庫集群運行狀況用crs_stat–t命令檢查oracle數(shù)據(jù)庫的幾個集群模塊是否有offline的檢查數(shù)據(jù)庫的Alert.log日志，是否有ora錯誤對每個數(shù)據(jù)庫,cd到bdump目錄,通常是$ORACLE_BASE/admin/<SID>/bdump查看最新時候有ora錯誤，找出來分析收集每個數(shù)據(jù)庫的AWR報告，根據(jù)報告內容，優(yōu)化數(shù)據(jù)庫排查是否存在影響系統(tǒng)性能的等待事件、top5SQL、硬解析是否太高、緩沖區(qū)命中率是否高檢查ASM磁盤組空間是否足夠selectinstance_name,host_name,startup_time,status,database_statusfromgv$instance;確保數(shù)據(jù)磁盤組有足夠的空間給數(shù)據(jù)庫使用，如果是用于歸檔日志用的ASM磁盤組空間滿，必須及時用rman備份并刪除舊的歸檔日志。檢查各個數(shù)據(jù)庫操作系統(tǒng)的磁盤空間利用率df–h或者df–m文件系統(tǒng)空間使用率超過80%，必須要清理磁盤無用的文件或者日志檢查數(shù)據(jù)庫各個節(jié)點都處于讀寫模式selectname,log_mode,open_modefromgv$database;各個節(jié)點都正常，數(shù)據(jù)庫才能實現(xiàn)負載均衡和失敗切換的功能查看表空間使用率，及時添加數(shù)據(jù)文件SELECTUPPER(F.TABLESPACE_NAME)"表空間名",D.TOT_GROOTTE_MB"表空間大小(M)",D.TOT_GROOTTE_MB-F.TOTAL_BYTES"已使用空間(M)",TO_CHAR(ROUND((D.TOT_GROOTTE_MB-F.TOTAL_BYTES)/D.TOT_GROOTTE_MB*100,2),'990.99')"使用比",F.TOTAL_BYTES"空閑空間(M)",F.MAX_BYTES"最大塊(M)"FROM(SELECTTABLESPACE_NAME,ROUND(SUM(BYTES)/(1024*1024),2)TOTAL_BYTES,ROUND(MAX(BYTES)/(1024*1024),2)MAX_BYTESFROMSYS.DBA_FREE_SPACEGROUPBYTABLESPACE_NAME)F,(SELECTDD.TABLESPACE_NAME,ROUND(SUM(DD.BYTES)/(1024*1024),2)TOT_GROOTTE_MBFROMSYS.DBA_DATA_FILESDDGROUPBYDD.TABLESPACE_NAME)DWHERED.TABLESPACE_NAME=F.TABLESPACE_NAMEORDERBY4DESC;密切關注各個表空間使用情況，使用率查過85%以上的，要及時添加數(shù)據(jù)文件到表空間，并與上個月巡檢結果對比，估算主要業(yè)務表空間增長增長情況，一次性添加做過數(shù)據(jù)文件檢查失效的索引Select*

from

dba_indexes

where

status='UNUSABLE';如果有失效索引，alterindexindex_namerebuildonline在線重建。檢查大表，分析是否需要轉換成分區(qū)表存放SELECTSEGMENT_NAME,ROUND(SUM(BYTES)/1024/1024/1024,2)GFROMDBA_SEGMENTSWHEREOWNERNOTIN('SYS','SYSTEM')ANDsegment_typeNOTIN('INDEX','INDEXPARTITION','INDEXSUBPARTITION')GROUPBYSEGMENT_NAMEORDERBYGDESC;對于日志大表，建議改造成采用按時間分區(qū)的分區(qū)表，提升數(shù)據(jù)庫讀寫效率。檢查oracle每個實例的的實際連接數(shù)和數(shù)據(jù)庫配置的連接數(shù)Selectcount(1)fromv$session;--實際連接的session數(shù)量showparametersession;如果實際連接的session連接數(shù)快要達到系統(tǒng)配置的session數(shù)量，需要增加session的數(shù)量，以免有業(yè)務無法正常連接數(shù)據(jù)庫檢查數(shù)據(jù)庫運行慢的SQLSELECTUSERNAME,SID,OPNAME,ROUND(SOFAR*100/TOTALWORK,0)||'%'ASPROGRESS,TIME_REMAINING,SQL_TEXTFROMV$SESSION_LONGOPS,V$SQLWHERETIME_REMAINING<>0ANDSQL_ADDRESS=ADDRESSANDSQL_HASH_VALUE=HASH_VALUE;檢查占用CPU比較多的SQLSELECTP.PIDPID,S.SIDSID,P.SPIDSPID,S.USERNAMEUSERNAME,S.OSUSEROSNAME,P.SERIAL#S_#,P.TERMINAL,P.PROGRAMPROGRAM,P.BACKGROUND,S.STATUS,RTRIM(SUBSTR(A.SQL_TEXT,1,80))SQLFROMV$PROCESSP,V$SESSIONS,V$SQLAREAAWHEREP.ADDR=S.PADDRANDS.SQL_ADDRESS=A.ADDRESS(+)ANDP.SPIDLIKE'%&1%';檢查最消耗內存資源的SQLselectb.pga_alloc_mem/1024/1024,a.*fromv$sessiona,v$processbwherea.PADDR=b.addrandpga_alloc_mem/1024/1024>100;Mysql數(shù)據(jù)庫運維主要檢查項檢查數(shù)據(jù)庫備份是否正常檢查是否有備份機制，已有備份機制，且最后一個備份成功為正常檢查數(shù)據(jù)庫后臺日志，最近是否有error錯誤檢查data目錄下host_name.err近期是否有錯誤檢查MySQL數(shù)據(jù)庫連接統(tǒng)計show

status;

檢查

Aborted_clients

由于客戶沒有正確關閉連接已經死掉，已經放棄的連接數(shù)量。

Aborted_connects

嘗試已經失敗的MySQL服務器的連接的次數(shù)。Threads_connected

當前打開的連接的數(shù)量。

Max_used_connections

同時使用的連接的最大數(shù)目

以

Max_used_connections

遠小于f中的最大連接數(shù)目則正常。如果接近則考慮增大最大數(shù)目。檢查MySQL數(shù)據(jù)庫表鎖統(tǒng)計（包括立即鎖及等待鎖）show

status

like

'table%';

如果

waited的數(shù)值比較高，說明數(shù)據(jù)庫鎖爭用比較嚴重

主庫查看狀態(tài)Showmasterstatus查詢從服務器狀態(tài)Showslavestatus，經常檢查從服務器的復制狀態(tài)，防止復制過程中出現(xiàn)故障從而導致進程停止Mysql連接數(shù)排查Showvariableslike‘%max_connectins%’Showgloablestatuslike‘max_use_connections’當前數(shù)據(jù)庫已經使用的最大連接數(shù)不能超過閥值Mysql文件打開數(shù)檢查Showglobalstatuslike‘open_files’;Showvariableslike‘open_files_limit’打開數(shù)量要小于limit值SqlServer數(shù)據(jù)庫運維主機檢查項檢查數(shù)據(jù)庫自動備份是否正常檢查是否有備份機制，以有備份機制，且最后一個備份成功為正常驗證備份集驗證備份集(\o"RESTOREVERIFYONLY(Transact-SQL)"RESTOREVERIFYONLY)檢查數(shù)據(jù)庫集群是否能正常工作檢查磁盤空間是否足夠檢查數(shù)據(jù)文件所在的磁盤空間使用情況檢查日志文件所在的磁盤空間使用情況檢查備份的磁盤空間使用情況檢查系統(tǒng)日志使用“事件查看器”，查看系統(tǒng)日志，關注錯誤信息排查錯誤。重點關注與SQLServer相關的日志信息。及時備份與清理過期的日志信息。數(shù)據(jù)庫性能分析與優(yōu)化調整根據(jù)用戶需要進行數(shù)據(jù)庫的性能分析，針對發(fā)現(xiàn)的問題提出合理的解決方案；每月巡檢中包含對數(shù)據(jù)庫運行性能的分析。主要包括：數(shù)據(jù)庫性能的監(jiān)控和調整、系統(tǒng)資源的監(jiān)控及管理。如：優(yōu)化服務器配置根據(jù)現(xiàn)有硬件配置及用戶訪問量及服務器性能指標,確定是否存在系統(tǒng)(cpu,內存,硬盤)瓶頸及數(shù)據(jù)庫配置問題,提出解決瓶頸的方法及建議。優(yōu)化應用程序根據(jù)應用程序配置,確定是否存在應用程序問題使系統(tǒng)運行緩慢,提出應用程序優(yōu)化建議(如:負載均衡)。數(shù)據(jù)庫及應用程序整合分析數(shù)據(jù)庫與應用布局是否合理,提出整合建議。數(shù)據(jù)庫參數(shù)調整優(yōu)化參數(shù)，使數(shù)據(jù)庫在最優(yōu)的環(huán)境下運行。數(shù)據(jù)庫潛在重要問題數(shù)據(jù)庫是否存在潛在問題，對數(shù)據(jù)庫有什么重要的影響,或深圳廣西質量技術監(jiān)督局方面認為緊急的。優(yōu)化內存配置與系統(tǒng)后臺進程優(yōu)化物理文件的存放,對大型數(shù)據(jù)庫考慮用磁盤陣列柜存放優(yōu)化數(shù)據(jù)庫邏輯結構優(yōu)化表空間、臨時表空間、回滾段優(yōu)化數(shù)據(jù)庫對象優(yōu)化表結構、建立分區(qū)表，優(yōu)化索引結構、更新統(tǒng)計信息優(yōu)化SQL語句查詢運行慢的SQL語句，并給出優(yōu)化建議提供數(shù)據(jù)庫優(yōu)化方案及實施方案、報告等數(shù)據(jù)庫備份以及恢復服務根據(jù)現(xiàn)場情況，制定合理的備份計劃，定期備份各個數(shù)據(jù)庫。具備條件的情況下，要定期對備份集進行異機恢復，測試備份集是否可用。數(shù)據(jù)庫發(fā)生重大故障時（如磁盤陣列故障導致的數(shù)據(jù)庫癱瘓），以最快的速度從備份系統(tǒng)中恢復數(shù)據(jù)，并使系統(tǒng)能夠在最短的時間內恢復正常運行。數(shù)據(jù)庫補丁分析與安裝根據(jù)用戶需要提供相關系統(tǒng)軟件升級服務；當數(shù)據(jù)庫ORACLE、MYSQL、SQLSERVER軟件有最新更新升級時，維保方須及時通知廣西質量技術監(jiān)督局，并根據(jù)廣西質量技術監(jiān)督局的要求和安排到現(xiàn)場進行更新升級（每年一般不超過兩次）。7*24小時數(shù)據(jù)庫救援服務提供7×24小時應急響應熱線，由具有豐富工作經驗的資深OCP認證工程師在用戶的Oracle產品出現(xiàn)重大故障時提供現(xiàn)場緊急救援服務。重大故障包括：OS故障，導致Oracle不能正常啟動或運行硬件故障（包括CPU、硬盤等），導致數(shù)據(jù)庫崩潰人為故障，包括維護人員不小心刪除數(shù)據(jù)庫文件，或人為將Table中的數(shù)據(jù)刪除等等導致數(shù)據(jù)庫不能正常運行的情況，如控制文件遭破壞，RedoLog文件遭破壞，數(shù)據(jù)文件遭破壞等等其他故障，包括影響數(shù)據(jù)庫正常運行的各類緊急故障技術支持以及服務體系故障處理要求25分鐘內故障處理電話響應服務，故障服務的現(xiàn)場響應時間小于1小時,即1小時內有能夠處理故障的技術人員到達現(xiàn)場，并立即投入對故障的處理，并能夠在2個小時內恢復故障系統(tǒng)的正常運行。如果用戶的問題不能通過電話解決，客戶服務部會立刻派經驗豐富的工程師到現(xiàn)場為用戶解決問題，客戶服務人員對解決的過程進行記錄，并向用戶提供解決問題的報告．包括問題原因、解決方法、解決問題的方式和進程，以及建議用戶對系統(tǒng)進行正常使用的指導和培訓．問題解決后需要用戶進行確認。重大活動現(xiàn)場護航敏感時期、重大節(jié)假日、領導巡查，維護技術原因提前入場做詳細巡檢，并于活動時間段內入駐客戶駐地，提供5*8小時的現(xiàn)場保障服務。在國家節(jié)假日期間前一個星期，提供節(jié)日值班表，包含：當日負責人姓名及聯(lián)系電話、反應時間、到現(xiàn)場時間、處理好時間等內容。以發(fā)電子郵件方式告知客戶負責人。維護作業(yè)計劃為保障數(shù)據(jù)庫系統(tǒng)的長效運行。我們制定日、周、月的檢查內容，通過自動、遠程、現(xiàn)場相結合的方式，形成日常作業(yè)計劃，對數(shù)據(jù)庫運行情況檢查，及早發(fā)現(xiàn)問題和處理問題。如：每日的數(shù)據(jù)庫表自動分析、每周的遠程備份情況檢查、每月的現(xiàn)場設備檢查等。信息安全保障系統(tǒng)的安全性是業(yè)務正常運行的保障，其重要性不言而喻。我公司會根據(jù)標準的安全規(guī)范和成功經驗，為用戶的系統(tǒng)進行安全性檢查，包括文件權限的設置、用戶訪問的限制、增補軟件的更新等技術方面，同時對系統(tǒng)安全策略進行評估，將發(fā)現(xiàn)的問題隱患及改進建議以報告的形式提交給用戶。通過系統(tǒng)安全性檢查，可以提高系統(tǒng)的安全級別，防止系統(tǒng)遭到惡性攻擊口。第三方協(xié)助服務協(xié)助用戶或第三方完成對系統(tǒng)設備、軟件的維護、升級、擴容等技術支持工作，確?？蛻羯a系統(tǒng)的安全平穩(wěn)運行。服務質量分析提供每月1次對oracle、sqlserver、mysql全面巡檢服務，對維保范圍系統(tǒng)進行細致全面地監(jiān)視、檢查、隱患排除等。并按照用戶要求提供特殊時段保障要