數(shù)據(jù)庫技術(shù)方案

1、-作者xxxx-日期xxxx數(shù)據(jù)庫技術(shù)方案【精品文檔】廣西區(qū)質(zhì)量技術(shù)監(jiān)督局數(shù)據(jù)庫維保服務(wù)方案南寧秦唐科技有限公司2016年8月目錄廣西區(qū)質(zhì)量技術(shù)監(jiān)督局數(shù)據(jù)庫1維保服務(wù)方案11項目背景及目標(biāo)3項目背景3項目目標(biāo)32需求分析33維保范圍44數(shù)據(jù)庫維保方案5系統(tǒng)健康狀態(tài)檢查5Oracle數(shù)據(jù)庫運維主要核查項5Mysql數(shù)據(jù)庫運維主要檢查項9SqlServer數(shù)據(jù)庫運維主機檢查項10數(shù)據(jù)庫性能分析與優(yōu)化調(diào)整10數(shù)據(jù)庫備份以及恢復(fù)服務(wù)11數(shù)據(jù)庫補丁分析與安裝127*24小時數(shù)據(jù)庫救援服務(wù)125技術(shù)支持以及服務(wù)體系13故障處理要求13重大活動現(xiàn)場護航13維護作業(yè)計劃14信息安全保障14第三方協(xié)助服務(wù)14服

2、務(wù)質(zhì)量分析146項目實施以及管理15項目實施策略15項目實施計劃15項目交付文檔15交付要求15提交文件資料161 項目背景及目標(biāo)1.1 項目背景廣西區(qū)質(zhì)量技術(shù)監(jiān)督局信息化建設(shè)經(jīng)過多年的發(fā)展和完善，已經(jīng)建立成熟的網(wǎng)絡(luò)環(huán)境及生產(chǎn)經(jīng)營管理的各類應(yīng)用系統(tǒng)，目前質(zhì)監(jiān)局擁有多套不同類型的數(shù)據(jù)庫（多種操作系統(tǒng)）混合使用（Oracle，Mysql，SqlServer），共十幾個節(jié)點，其中最大的oracle生產(chǎn)數(shù)據(jù)庫已高達3TB；隨著質(zhì)監(jiān)工作的業(yè)務(wù)發(fā)展，各系統(tǒng)數(shù)據(jù)量逐年增加 ，作為業(yè)務(wù)核心的數(shù)據(jù)庫，安全性，可靠性的要求也變得越來越高, 需要更加專業(yè)細致地對數(shù)據(jù)庫維護，以便更好地為全區(qū)質(zhì)監(jiān)工作提供IT服務(wù)。1.

3、2 項目目標(biāo)通過建立規(guī)范的維護作業(yè)體系，及時發(fā)現(xiàn)數(shù)據(jù)庫運行中的風(fēng)險問題，防患于未然，保障數(shù)據(jù)庫運行健康持續(xù)。對數(shù)據(jù)庫運行性能進行監(jiān)測分析，及時發(fā)現(xiàn)瓶頸，通過外部資源調(diào)優(yōu)、行的重新安排調(diào)優(yōu)、SQL 性能調(diào)優(yōu)、表格和索引存儲參數(shù)設(shè)置調(diào)優(yōu)等方式，及時對性能問題進行處理，保障數(shù)據(jù)庫穩(wěn)定高效工作；對各個系統(tǒng)數(shù)據(jù)庫進行補丁升級服務(wù)，安裝補丁前需要對補丁的可行性及風(fēng)險性進行分析，并制定升級計劃和應(yīng)急回退計劃。同時要做好系統(tǒng)備份準(zhǔn)備及詳細的測試工作，確保系統(tǒng)的穩(wěn)定性、安全性，保障系統(tǒng)業(yè)務(wù)數(shù)據(jù)的安全；2 需求分析廣西區(qū)質(zhì)量技術(shù)監(jiān)督局項目現(xiàn)場多種數(shù)據(jù)庫共存，相互為多個應(yīng)用系統(tǒng)服務(wù)。為保證數(shù)據(jù)庫系統(tǒng)的穩(wěn)定、安全、合

4、理和高效，減低故障對生產(chǎn)的影響，消除生產(chǎn)故障的薄弱環(huán)節(jié)，現(xiàn)需購買對以下數(shù)據(jù)庫的保修和維護服務(wù)。ID數(shù)據(jù)庫節(jié)點數(shù)據(jù)庫類型應(yīng)用說明保障級別1oracle rac 雙節(jié)點（HP主機）oracle10g金質(zhì)工程核心數(shù)據(jù)庫重要2oracle rac 雙節(jié)點（Linux）oracle10g金質(zhì)工程核心數(shù)據(jù)庫重要3Oracle 單節(jié)點Oracle 10g邊界交換數(shù)據(jù)庫重要4Oracle 單節(jié)點Oracle 10g云平臺數(shù)據(jù)庫（內(nèi)網(wǎng)）重要5Oracle 單節(jié)點Oracle 10g云平臺數(shù)據(jù)庫（外網(wǎng)）重要6SQL SERVER MSCS1mssql server2008外部門戶數(shù)據(jù)庫重要7SQL SERVER

5、MSCS2mssql server2008外部門戶數(shù)據(jù)庫重要8SQL SERVER MSCS3mssql server2008OA考核重要10SQL SERVER MSCS4mssql server2008重要11mysql 集群1普通12mysql 集群2普通3 維保范圍1) 提供常態(tài)化服務(wù)和技術(shù)支持，并配備資深工程師，工程師熟悉oracle/sqlserver/mysql等各種主流數(shù)據(jù)庫技術(shù)，保證能快速、有效的解決各類故障。 2) 配置和優(yōu)化系統(tǒng)安全、加固，故障的診斷與排除等。3) 數(shù)據(jù)庫系統(tǒng)恢復(fù)服務(wù)，確保系統(tǒng)崩潰后的快速恢復(fù)。4) 為客戶提供各個版本數(shù)據(jù)庫系統(tǒng)運行和維護的合理建議。5)

6、數(shù)據(jù)庫系統(tǒng)軟件升級（用戶要求）和不限次（或配合用戶）安裝。6) 對數(shù)據(jù)庫系統(tǒng)本身存在的安全隱患和安全問題，進行修復(fù)；對系統(tǒng)配置和數(shù)據(jù)定期備份7) 提供系統(tǒng)維修及維護報告。4 數(shù)據(jù)庫維保方案數(shù)據(jù)庫維保工作主要包括： 數(shù)據(jù)庫健康狀態(tài)檢查、數(shù)據(jù)庫性能分析與調(diào)整、數(shù)據(jù)庫備份與恢復(fù)、數(shù)據(jù)庫補丁分析與安裝、7*24小時數(shù)據(jù)庫救援等工作。4.1 系統(tǒng)健康狀態(tài)檢查檢查內(nèi)容包括 ： Oracle數(shù)據(jù)庫和CRS錯誤日志和分析 ； 文件系統(tǒng)空間使用情況檢查； Oracle數(shù)據(jù)庫及RAC系統(tǒng)運行情況狀態(tài)、性能分析和優(yōu)化建議; 檢查其OS狀況，包括CPU、內(nèi)存和交換區(qū)使用情況，硬盤和網(wǎng)絡(luò)的IO情況檢查; 記錄Oracl

7、e數(shù)據(jù)庫存儲空間的邏輯結(jié)構(gòu)； Oracle 數(shù)據(jù)庫備份情況檢查；等根據(jù)檢查結(jié)果分析并給出數(shù)據(jù)庫可行的調(diào)整建議和實施；每月至少進行一次系統(tǒng)健康狀態(tài)的檢查， 根據(jù)制定的維保服務(wù)內(nèi)容和流程對Oracle、Mysql，SqlServer進行一次全面巡檢，包括檢查數(shù)據(jù)庫設(shè)備、系統(tǒng)的運行情況 ； 每月25日之前提供數(shù)據(jù)庫巡檢報告 。4.1.1 Oracle數(shù)據(jù)庫運維主要核查項數(shù)據(jù)庫的運維主要結(jié)合廣西質(zhì)量技術(shù)監(jiān)督局的實際情況，提供切實可行的運維建設(shè)機制，內(nèi)容覆蓋 ORACLE 數(shù)據(jù)庫的日常維護、緊急故障處理，軟件升級等，客戶可依據(jù)服務(wù)內(nèi)容進行相應(yīng)的定制。我們將會提供全面的、針對性的服務(wù)解決方案，以?？蛻粝到y(tǒng)

8、穩(wěn)定、高效、可靠的運行，以達到對業(yè)務(wù)系統(tǒng)的有效支持。 檢查數(shù)據(jù)庫cpu、I/O、內(nèi)存性能記錄數(shù)據(jù)庫的cpu使用、IO、內(nèi)存等使用情況，使用vmstat,iostat,sar,top等命令進行信息收集并檢查這些信息，判斷資源使用情況。 檢查rman備份的有效性restore preview/restore database preview命令此命令用來查看還原需要使用哪個備份集來執(zhí)行特定的恢復(fù)使用validate和check logical參數(shù)的restore命令，檢查備份集，以確認數(shù)據(jù)庫是可恢復(fù)的restore database validate；使用check l

9、ogical參數(shù)可以更完全的檢查最新備份集runrestore database check logical validate;使用validate backupset命令使用具有validate參數(shù)或check logical參數(shù)的restore命令只能檢查最新的備份集，如果要檢查任意的備份集，就需要用validate backupset命令。首先必須確認要檢查的備份集的鍵(backup set key)list backupset;再執(zhí)行檢查validate backupset 141;或validate backupset 141 check logical; 檢查orac

10、le數(shù)據(jù)庫集群運行狀況用crs_statt命令檢查oracle數(shù)據(jù)庫的幾個集群模塊是否有offline的 檢查數(shù)據(jù)庫的日志，是否有ora錯誤對每個數(shù)據(jù)庫,cd 到bdump目錄,通常是$ORACLE_BASE/admin/bdump查看最新時候有ora錯誤，找出來分析 收集每個數(shù)據(jù)庫的AWR報告，根據(jù)報告內(nèi)容，優(yōu)化數(shù)據(jù)庫排查是否存在影響系統(tǒng)性能的等待事件、top 5 SQL、硬解析是否太高、緩沖區(qū)命中率是否高 檢查ASM磁盤組空間是否足夠select instance_name,host_name,startup_time,status,databas

11、e_status from gv$instance;確保數(shù)據(jù)磁盤組有足夠的空間給數(shù)據(jù)庫使用，如果是用于歸檔日志用的ASM磁盤組空間滿，必須及時用rman備份并刪除舊的歸檔日志。 檢查各個數(shù)據(jù)庫操作系統(tǒng)的磁盤空間利用率dfh或者dfm文件系統(tǒng)空間使用率超過80%，必須要清理磁盤無用的文件或者日志 檢查數(shù)據(jù)庫各個節(jié)點都處于讀寫模式select name,log_mode,open_mode from gv$database;各個節(jié)點都正常，數(shù)據(jù)庫才能實現(xiàn)負載均衡和失敗切換的功能 查看表空間使用率，及時添加數(shù)據(jù)文件SELECT UPPER(F.TABLESP

12、ACE_NAME) 表空間名, D.TOT_GROOTTE_MB 表空間大小(M), D.TOT_GROOTTE_MB - F.TOTAL_BYTES 已使用空間(M), TO_CHAR(ROUND(D.TOT_GROOTTE_MB - F.TOTAL_BYTES) / D.TOT_GROOTTE_MB * 100, 2), 990.99) 使用比, F.TOTAL_BYTES 空閑空間(M), F.MAX_BYTES 最大塊(M) FROM (SELECT TABLESPACE_NAME, ROUND(SUM(BYTES) / (1024 * 1024), 2) TOTAL_BYTES, R

13、OUND(MAX(BYTES) / (1024 * 1024), 2) MAX_BYTES FROM GROUP BY TABLESPACE_NAME) F, (SELECT DD.TABLESPACE_NAME, ROUND(SUM(DD.BYTES) / (1024 * 1024), 2) TOT_GROOTTE_MB FROM SYS.DBA_DATA_FILES DD GROUP BY DD.TABLESPACE_NAME) D WHERE ORDER BY 4 DESC;密切關(guān)注各個表空間使用情況，使用率查過85%以上的，要及時添加數(shù)據(jù)文件到表空間，并與上個月巡檢結(jié)果對比，估算主要業(yè)

14、務(wù)表空間增長增長情況，一次性添加做過數(shù)據(jù)文件0 檢查失效的索引Select * fromdba_indexeswherestatus=UNUSABLE;如果有失效索引，alter index index_name rebuild online在線重建。1 檢查大表，分析是否需要轉(zhuǎn)換成分區(qū)表存放SELECT SEGMENT_NAME, ROUND(SUM(BYTES) / 1024 / 1024 / 1024, 2) G FROM DBA_SEGMENTS WHERE OWNER NOT IN (SYS, SYSTEM) AND segment_type NOT IN

15、 (INDEX, INDEX PARTITION, INDEX SUBPARTITION) GROUP BY SEGMENT_NAME ORDER BY G DESC;對于日志大表，建議改造成采用按時間分區(qū)的分區(qū)表，提升數(shù)據(jù)庫讀寫效率。2 檢查oracle每個實例的的實際連接數(shù)和數(shù)據(jù)庫配置的連接數(shù)Select count(1) from v$session; -實際連接的session數(shù)量show parameter session;如果實際連接的session連接數(shù)快要達到系統(tǒng)配置的session數(shù)量，需要增加session的數(shù)量，以免有業(yè)務(wù)無法正常連接數(shù)據(jù)庫3

16、檢查數(shù)據(jù)庫運行慢的SQLSELECT USERNAME, SID, OPNAME, ROUND(SOFAR * 100 / TOTALWORK, 0) | % AS PROGRESS, TIME_REMAINING, SQL_TEXT FROM V$SESSION_LONGOPS, V$SQL WHERE TIME_REMAINING 0 AND SQL_ADDRESS = ADDRESS AND SQL_HASH_VALUE = HASH_VALUE;4 檢查占用CPU比較多的SQLSELECT P.PID PID, S.SID SID, P.SPID SPID, S.USER

17、NAME USERNAME, S.OSUSER OSNAME, P.SERIAL# S_#, P.TERMINAL, P.PROGRAM PROGRAM, P.BACKGROUND, S.STATUS, RTRIM(SUBSTR(A.SQL_TEXT, 1, 80) SQLFROM V$PROCESS P, V$SESSION S, V$SQLAREA A WHERE P.ADDR = S.PADDR AND S.SQL_ADDRESS = A.ADDRESS(+) AND P.SPID LIKE %&1%;5 檢查最消耗內(nèi)存資源的SQLselect b.pga_alloc_me

18、m / 1024 / 1024, a.* from v$session a, v$process b where and pga_alloc_mem / 1024 / 1024 100;4.1.2 Mysql數(shù)據(jù)庫運維主要檢查項 檢查數(shù)據(jù)庫備份是否正常檢查是否有備份機制，已有備份機制，且最后一個備份成功為正常 檢查數(shù)據(jù)庫后臺日志，最近是否有error錯誤檢查data目錄下近期是否有錯誤 檢查MySQL數(shù)據(jù)庫連接統(tǒng)計showstatus;檢查Aborted_clients由于客戶沒有正確關(guān)閉連接已經(jīng)死掉，已經(jīng)放棄的連接數(shù)量。Aborted_connect

19、s嘗試已經(jīng)失敗的MySQL服務(wù)器的連接的次數(shù)。Threads_connected當(dāng)前打開的連接的數(shù)量。Max_used_connections同時使用的連接的最大數(shù)目以Max_used_connections遠小于中的最大連接數(shù)目則正常。如果接近則考慮增大最大數(shù)目。 檢查MySQL數(shù)據(jù)庫表鎖統(tǒng)計（包括立即鎖及等待鎖）showstatusliketable%;如果waited的數(shù)值比較高，說明數(shù)據(jù)庫鎖爭用比較嚴重 主庫查看狀態(tài)Show master status 查詢從服務(wù)器狀態(tài)Show slave status，經(jīng)常檢查從服務(wù)器的復(fù)制狀態(tài)，防止復(fù)制過程

20、中出現(xiàn)故障從而導(dǎo)致進程停止 Mysql連接數(shù)排查Show variables like %max_connectins%Show gloable status like max_use_connections當(dāng)前數(shù)據(jù)庫已經(jīng)使用的最大連接數(shù)不能超過閥值 Mysql文件打開數(shù)檢查Show global status like open_files;Show variables like open_files_limit打開數(shù)量要小于limit值4.1.3 SqlServer數(shù)據(jù)庫運維主機檢查項 檢查數(shù)據(jù)庫自動備份是否正常檢查是否有備份機制，以有備份機制，且

21、最后一個備份成功為正常 驗證備份集驗證備份集(RESTORE VERIFYONLY ) 檢查數(shù)據(jù)庫集群是否能正常工作 檢查磁盤空間是否足夠檢查數(shù)據(jù)文件所在的磁盤空間使用情況檢查日志文件所在的磁盤空間使用情況檢查備份的磁盤空間使用情況 檢查系統(tǒng)日志使用“事件查看器”，查看系統(tǒng)日志，關(guān)注錯誤信息排查錯誤。重點關(guān)注與SQLServer相關(guān)的日志信息。及時備份與清理過期的日志信息。4.2 數(shù)據(jù)庫性能分析與優(yōu)化調(diào)整根據(jù)用戶需要進行數(shù)據(jù)庫的性能分析，針對發(fā)現(xiàn)的問題提出合理的解決方案 ；每月巡檢中包含對數(shù)據(jù)庫運行性能的分析。主要包括：數(shù)據(jù)庫性能的監(jiān)控和

22、調(diào)整、系統(tǒng)資源的監(jiān)控及管理 。如：l 優(yōu)化服務(wù)器配置根據(jù)現(xiàn)有硬件配置及用戶訪問量及服務(wù)器性能指標(biāo),確定是否存在系統(tǒng)(cpu,內(nèi)存,硬盤)瓶頸及數(shù)據(jù)庫配置問題,提出解決瓶頸的方法及建議。l 優(yōu)化應(yīng)用程序根據(jù)應(yīng)用程序配置,確定是否存在應(yīng)用程序問題使系統(tǒng)運行緩慢,提出應(yīng)用程序優(yōu)化建議(如:負載均衡)。l 數(shù)據(jù)庫及應(yīng)用程序整合分析數(shù)據(jù)庫與應(yīng)用布局是否合理,提出整合建議。l 數(shù)據(jù)庫參數(shù)調(diào)整優(yōu)化參數(shù)，使數(shù)據(jù)庫在最優(yōu)的環(huán)境下運行。l 數(shù)據(jù)庫潛在重要問題數(shù)據(jù)庫是否存在潛在問題，對數(shù)據(jù)庫有什么重要的影響, 或深圳廣西質(zhì)量技術(shù)監(jiān)督局方面認為緊急的。l 優(yōu)化內(nèi)存配置與系統(tǒng)后臺進程l 優(yōu)化物理文件的存放,對大型數(shù)據(jù)庫

23、考慮用磁盤陣列柜存放l 優(yōu)化數(shù)據(jù)庫邏輯結(jié)構(gòu)優(yōu)化表空間、臨時表空間、回滾段l 優(yōu)化數(shù)據(jù)庫對象優(yōu)化表結(jié)構(gòu)、建立分區(qū)表，優(yōu)化索引結(jié)構(gòu)、更新統(tǒng)計信息l 優(yōu)化SQL語句查詢運行慢的SQL語句，并給出優(yōu)化建議l 提供數(shù)據(jù)庫優(yōu)化方案及實施方案、報告等4.3 數(shù)據(jù)庫備份以及恢復(fù)服務(wù)根據(jù)現(xiàn)場情況，制定合理的備份計劃，定期備份各個數(shù)據(jù)庫。具備條件的情況下，要定期對備份集進行異機恢復(fù)，測試備份集是否可用。數(shù)據(jù)庫發(fā)生重大故障時（如磁盤陣列故障導(dǎo)致的數(shù)據(jù)庫癱瘓），以最快的速度從備份系統(tǒng)中恢復(fù)數(shù)據(jù)，并使系統(tǒng)能夠在最短的時間內(nèi)恢復(fù)正常運行。4.4 數(shù)據(jù)庫補丁分析與安裝根據(jù)用戶需要提供相關(guān)系統(tǒng)軟件升級服務(wù)；當(dāng)數(shù)據(jù)庫ORACL

24、E、MYSQL、SQLSERVER軟件有最新更新升級時，維保方須及時通知廣西質(zhì)量技術(shù)監(jiān)督局，并根據(jù)廣西質(zhì)量技術(shù)監(jiān)督局的要求和安排到現(xiàn)場進行更新升級（每年一般不超過兩次）。4.5 7*24小時數(shù)據(jù)庫救援服務(wù)提供724小時應(yīng)急響應(yīng)熱線，由具有豐富工作經(jīng)驗的資深OCP認證工程師 在用戶的Oracle產(chǎn)品出現(xiàn)重大故障時提供現(xiàn)場緊急救援服務(wù)。重大故障包括： OS故障，導(dǎo)致Oracle不能正常啟動或運行 硬件故障（包括CPU、硬盤等），導(dǎo)致數(shù)據(jù)庫崩潰 人為故障，包括維護人員不小心刪除數(shù)據(jù)庫文件，或人為將Table中的數(shù)據(jù)刪除等等 導(dǎo)致數(shù)據(jù)庫不能正常運行的情況，如控制文件遭破壞，Redo Log文件遭破壞，

25、數(shù)據(jù)文件遭破壞等等 其他故障，包括影響數(shù)據(jù)庫正常運行的各類緊急故障5 技術(shù)支持以及服務(wù)體系5.1 故障處理要求25分鐘內(nèi)故障處理電話響應(yīng)服務(wù)，故障服務(wù)的現(xiàn)場響應(yīng)時間小于1小時,即1小時內(nèi)有能夠處理故障的技術(shù)人員到達現(xiàn)場，并立即投入對故障的處理，并能夠在2個小時內(nèi)恢復(fù)故障系統(tǒng)的正常運行。如果用戶的問題不能通過電話解決，客戶服務(wù)部會立刻派經(jīng)驗豐富的工程師到現(xiàn)場為用戶解決問題，客戶服務(wù)人員對解決的過程進行記錄，并向用戶提供解決問題的報告包括問題原因、解決方法、解決問題的方式和進程，以及建議用戶對系統(tǒng)進行正常使用的指導(dǎo)和培訓(xùn)問題解決后需要用戶進行確認。5.2 重大活動現(xiàn)場護航敏感時期、重大節(jié)假日、領(lǐng)導(dǎo)

26、巡查，維護技術(shù)原因提前入場做詳細巡檢，并于活動時間段內(nèi)入駐客戶駐地，提供5*8小時的現(xiàn)場保障服務(wù) 。在國家節(jié)假日期間前一個星期， 提供節(jié)日值班表，包含： 當(dāng)日負責(zé)人姓名及聯(lián)系電話、反應(yīng)時間、到現(xiàn)場時間、處理好時間 等內(nèi)容。 以發(fā)電子郵件方式告知客戶負責(zé)人。5.3 維護作業(yè)計劃為保障數(shù)據(jù)庫系統(tǒng)的長效運行。我們制定 日、周、月 的檢查內(nèi)容，通過 自動、遠程、現(xiàn)場相結(jié)合的方式，形成日常作業(yè)計劃，對數(shù)據(jù)庫運行情況檢查，及早發(fā)現(xiàn)問題和處理問題。如：每日的數(shù)據(jù)庫表自動分析、每周的遠程備份情況檢查、每月的現(xiàn)場設(shè)備檢查等 。5.4 信息安全保障系統(tǒng)的安全性是業(yè)務(wù)正常運行的保障，其重要性不言而喻。我公司會根據(jù)標(biāo)

27、準(zhǔn)的安全規(guī)范和成功經(jīng)驗，為用戶的系統(tǒng)進行安全性檢查，包括文件權(quán)限的設(shè)置、用戶訪問的限制、增補軟件的更新等技術(shù)方面，同時對系統(tǒng)安全策略進行評估，將發(fā)現(xiàn)的問題隱患及改進建議以報告的形式提交給用戶。通過系統(tǒng)安全性檢查，可以提高系統(tǒng)的安全級別，防止系統(tǒng)遭到惡性攻擊口。5.5 第三方協(xié)助服務(wù)協(xié)助用戶或第三方完成對系統(tǒng)設(shè)備、軟件的維護、升級、擴容等技術(shù)支持工作，確?？蛻羯a(chǎn)系統(tǒng)的安全平穩(wěn)運行。5.6 服務(wù)質(zhì)量分析提供每月1次對oracle、sqlserver、mysql全面巡檢服務(wù)，對維保范圍系統(tǒng)進行細致全面地監(jiān)視、檢查、隱患排除等。并按照用戶要求提供特殊時段保障要求的巡檢。每月提交月度服務(wù)報告、包括并不限于服務(wù)天數(shù)、次數(shù)、電話接通延遲時間、報修故障及原因、恢復(fù)措施報告等定量數(shù)據(jù)；根據(jù)用戶需要召開服務(wù)