性能測試需求

1、 2016|CRM客戶關(guān)系管理系統(tǒng)性能測試CRM客戶關(guān)系管理系統(tǒng)性能測試報告文 檔 編 號保 密 等 級非機密作 者SPASVO最后修改日期2016-10審 核 人最后審批日期批 準(zhǔn) 人最后批準(zhǔn)日期上海澤眾軟件科技有限公司SPASVO目 錄目 錄I1 概述11.1 測試目的11.2 術(shù)語定義11.3 參考文檔22 測試說明22.1 測試需求22.2 測試計劃42.3 基準(zhǔn)測試42.4 并發(fā)測試52.5 混合場景穩(wěn)定性測試53 各場景測試結(jié)果及分析63.1.1 基準(zhǔn)測試63.1.2 并發(fā)測試7SPASVO 1 概述1.1 測試目的本次客戶管理以新增客戶、登錄兩個交易作為此次性能測試內(nèi)容。通過設(shè)定

2、多個場景，并發(fā)施壓對比Vuser圖、事務(wù)圖、點擊量、吞吐量等數(shù)據(jù)來得出系統(tǒng)相對應(yīng)模塊的性能和瓶頸。并且與預(yù)期性能做對比，得出系統(tǒng)是否符合需求。1.2 術(shù)語定義1) 運行的VUSER圖：顯示當(dāng)前運行的用戶數(shù)?？v軸代表用戶，橫軸代表時間。橫縱坐標(biāo)所在點代表當(dāng)前時間在線的用戶。2) 事務(wù)概要圖：分別顯示各個事務(wù)成功失敗的總數(shù)。橫軸顯示事務(wù)名稱?？v軸代表事務(wù)總量。3) 事務(wù)響應(yīng)時間：分顏色顯示各個事務(wù)的響應(yīng)時間?？v軸代表的是事務(wù)的響應(yīng)時間，橫軸代表事務(wù)的名稱。4) 每秒事務(wù)數(shù)：代表每個事務(wù)到達每一秒時執(zhí)行的次數(shù)。（不同的事務(wù)分顏色顯示）。橫軸代表時間，縱軸代表事務(wù)數(shù)量。5) 每秒事務(wù)總數(shù)：代表到達每一

3、秒時，成功和失敗的事務(wù)總數(shù)（分顏色顯示）。橫軸代表時間，縱軸代表事務(wù)數(shù)量。6) 事務(wù)性能概要圖：事務(wù)性能概要圖顯示了場景或會話步驟中所有事務(wù)的最小、最大和平均性能時間。 橫軸執(zhí)行事務(wù)名稱，縱軸代表事務(wù)執(zhí)行時間。7) 每秒點擊量：每秒點擊次數(shù)圖顯示在場景或會話步驟運行過程中 Vuser 每秒向 Web服務(wù)器提交的 HTTP 請求數(shù)。借助此圖可依據(jù)點擊次數(shù)來評估 Vuser 產(chǎn)生的負載量?？蓪⒋藞D與平均事務(wù)響應(yīng)時間圖進行比較，以查看點擊次數(shù)對事務(wù)性能產(chǎn)生影響。 橫軸表示場景或會話步驟開始運行以來已用的時間?？v軸表示服務(wù)器上的點擊次數(shù)。 8) 吞吐量圖：吞吐量圖顯示場景或會話步驟運行的每一秒內(nèi)服務(wù)器

4、上的吞吐量。吞吐量的度量單位是字節(jié)，表示 Vuser 在任何給定的某一秒上從服務(wù)器獲得的數(shù)據(jù)量。借助此圖您可以依據(jù)服務(wù)器吞吐量來評估 Vuser 產(chǎn)生的負載量。可將此圖與平均事務(wù)響應(yīng)時間圖進行比較，以查看吞吐量對事務(wù)性能產(chǎn)生影響。橫軸表示場景或會話步驟開始運行以來已用的時間?？v軸表示服務(wù)器的吞吐量（以字節(jié)為單位）。 9) cpu使用率：實時查看cpu使用率。10) 物理內(nèi)存使用：可以查看服務(wù)器占用的物理內(nèi)存。11) 網(wǎng)絡(luò)流量：查看實時上傳和下載的網(wǎng)絡(luò)流量。12) Tps:每秒處理事務(wù)量。Tps=并發(fā)用戶/平均響應(yīng)時間1.3 參考文檔CRM客戶關(guān)系管理系統(tǒng)需求規(guī)格說明書2 測試說明2.1 測試需

5、求1) 測試范圍： 模塊交易名稱登錄登錄客戶管理新增客戶聯(lián)絡(luò)管理新增聯(lián)絡(luò)、聯(lián)絡(luò)管理文檔管理新增文檔、文檔管理預(yù)定管理新增預(yù)定、等待預(yù)定、預(yù)定管理日志管理新增日志、日志管理2) 預(yù)期需求：Ø 響應(yīng)時間方法指標(biāo)指標(biāo)值（秒）方法一（估算法）登錄交易都在5秒內(nèi)完成新增客戶交易都在5秒內(nèi)完成查看潛在客戶查看正式客戶交易查看放棄客戶交易查看簽約客戶交易新增聯(lián)絡(luò)交易聯(lián)絡(luò)管理交易新增文檔交易文檔管理交易新增預(yù)定交易等待預(yù)定交易預(yù)定管理交易日志追蹤交易方法二（測試報表分析）登錄交易都在5秒內(nèi)完成新增客戶交易查看潛在客戶查看正式客戶交易查看放棄客戶交易查看簽約客戶交易新增聯(lián)絡(luò)交易聯(lián)絡(luò)管理交易新增文檔交易

6、文檔管理交易新增預(yù)定交易等待預(yù)定交易預(yù)定管理交易日志追蹤交易Ø 最大并發(fā)用戶數(shù)計算模式指標(biāo)類型指標(biāo)值處理時間系統(tǒng)單筆事務(wù)平均處理時間（秒）5高峰期時段單位時間接入的新用戶數(shù)（人或秒）40（注：系統(tǒng)單筆事務(wù)平均處理時間結(jié)果基于以下硬件配置測試操作系統(tǒng)：win10，64-bit，內(nèi)存：4G，CPU：2.4GHz）；Ø 可用性指標(biāo)指標(biāo)值系統(tǒng)服務(wù)時間（小時/年）8640容忍故障總時間（小時/年）1容忍故障發(fā)生次數(shù)（次/年）32562.2 測試計劃時間工作內(nèi)容10月17日測試環(huán)境搭建與與需求分析10月18日測試環(huán)境搭建與與需求分析10月19日場景規(guī)劃，腳本開發(fā)10月20日混合穩(wěn)定測試

7、10月21日編寫測試報告3) 性能測試的原理：用戶在做交易時，會對系統(tǒng)發(fā)送響應(yīng)請求，這些請求會占用系統(tǒng)的CUP、內(nèi)存，網(wǎng)絡(luò)、數(shù)據(jù)庫等資源。如果大批量同時做并發(fā)交易，那么系統(tǒng)資源可能會跟不上消耗，這樣就存在性能瓶頸，導(dǎo)致發(fā)送的請求得不到及時的響應(yīng)、或者返回錯誤的響應(yīng)?？梢酝ㄟ^對比各種數(shù)據(jù)，比如說CPU、內(nèi)存的使用、并發(fā)用戶量、響應(yīng)時間、TPS等來得出具體的導(dǎo)致性能瓶頸的原因。2.3 基準(zhǔn)測試Ø 測試方法通過單交易基準(zhǔn)測試，獲取系統(tǒng)無壓力的情況下，單用戶重復(fù)執(zhí)行多次的平均交易響應(yīng)時間，檢查被測交易是否存在性能缺陷，并為以后的壓力測試提供數(shù)據(jù)參考。Ø 測試場景場景名稱基準(zhǔn)測試單交

8、易基準(zhǔn)測試測試方法和目的基準(zhǔn)測試也叫綠燈測試，針對每支選定交易，在系統(tǒng)無壓力的情況下，單個用戶執(zhí)行運行10分鐘結(jié)果獲取單個用戶業(yè)務(wù)響應(yīng)時間指標(biāo)場景名稱新增客戶交易壓力測試測試方法和目的通過壓力測試，找出被測系統(tǒng)的最大并發(fā)結(jié)果通過一組壓力測試找出系統(tǒng)最大并發(fā)場景名稱查看潛在客戶交易壓力測試測試方法和目的通過壓力測試找出查看潛在客戶的最大并發(fā)結(jié)果通過一組壓力測試找出查看潛在客戶的最大并發(fā)場景名稱查看正式客戶交易壓力測試測試方法和目的通過壓力測試找出查看正式客戶的最大并發(fā)結(jié)果通過一組壓力測試找出查看正式客戶的最大并發(fā)場景名稱查看放棄客戶交易壓力測試測試方法和目的通過壓力測試找出查看放棄客戶的最大并發(fā)

9、結(jié)果通過一組壓力測試找出查看放棄客戶的最大并發(fā)場景名稱查看簽約客戶交易壓力測試測試方法和目的通過壓力測試找出查看簽約客戶的最大并發(fā)結(jié)果通過一組壓力測試找出查看簽約客戶的最大并發(fā)場景名稱新增聯(lián)絡(luò)交易壓力測試測試方法和目的通過壓力測試找出新增聯(lián)絡(luò)的最大并發(fā)結(jié)果通過一組壓力測試找出新增聯(lián)絡(luò)的最大并發(fā)場景名稱聯(lián)絡(luò)管理交易壓力測試測試方法和目的通過壓力測試找出聯(lián)絡(luò)管理的最大并發(fā)結(jié)果通過一組壓力測試找出聯(lián)絡(luò)管理的最大并發(fā)2.4 并發(fā)測試Ø 測試方法按照并發(fā)梯度增加的方法，逐步提升對系統(tǒng)聯(lián)機交易的壓力，以10并發(fā)、20并發(fā)為梯度加壓，多用戶重復(fù)執(zhí)行多次的平均交易響應(yīng)時間，檢查被測交易是否存在性能缺

10、陷。Ø 測試場景場景名稱并發(fā)測試測試方法和目的通過在被測系統(tǒng)上不斷增加壓力，獲得系統(tǒng)諸如響應(yīng)時間確定在各種工作負載下系統(tǒng)的性能，直到性能指標(biāo)達到極限。獲取在不同壓力下的性能表現(xiàn)，并獲響應(yīng)時間結(jié)果獲取在不同壓力下的性能表現(xiàn)，并獲取響應(yīng)時間2.5 混合場景穩(wěn)定性測試Ø 測試方法采用低于混合場景并發(fā)用戶總數(shù)進行長時間的穩(wěn)定性測試。Ø 測試場景場景名稱混合穩(wěn)定性測試 通過完全模業(yè)務(wù)的實際操作混合業(yè)務(wù)場景測試系統(tǒng)。結(jié)果獲得交易成功率，TPS，響應(yīng)時間，獲得系統(tǒng)內(nèi)存資源占用情況，判斷是否存在內(nèi)存泄露，考察應(yīng)用服務(wù)器，報表服務(wù)器，數(shù)據(jù)庫服務(wù)器是否出現(xiàn)宕機、交易失敗等情況。3 各

11、場景測試結(jié)果及分析3.1.1 基準(zhǔn)測試Ø 數(shù)據(jù)：1個用戶，運行10分鐘Ø 結(jié)果： 并發(fā)數(shù)（個）運行時間（分）事務(wù)平均響應(yīng)時間（秒）事務(wù)最大響應(yīng)時間（秒）TPS (筆/秒)交易失敗數(shù)事務(wù)通過數(shù)事務(wù)成功率/%交易失敗率/%105：020.03681.1754311080499.99%0.01%Ø 分析：從圖中可以清楚的看到：在1個用戶運行10分鐘的情況下，每次交易平均響應(yīng)時間為：0.34秒，這是屬于正常范圍內(nèi)。3.1.2 并發(fā)測試Ø 數(shù)據(jù)及結(jié)果： 并發(fā)數(shù)（個）運行時間（分）事務(wù)平均響應(yīng)時間（秒）事務(wù)最大響應(yīng)時間（秒）TPS (筆/秒)交易失敗數(shù)事務(wù)通過數(shù)事務(wù)