性能測試及LoadRunner入門培訓(xùn) - 張小燕

1、性能測試及性能測試及 LoadRunner入門入門 上海久彰電子商務(wù)有限公司張小燕 2016年3月30日內(nèi)容概述性能測試性能測試 概要介紹概要介紹性能測試工具性能測試工具使用使用LR VuGen 創(chuàng)建測試腳本創(chuàng)建測試腳本使用使用LR controller創(chuàng)建運(yùn)行場景創(chuàng)建運(yùn)行場景監(jiān)控場景及結(jié)果分析監(jiān)控場景及結(jié)果分析性能測試概要介紹 定義定義 ： 性能測試是指在一定的負(fù)載情況下，系統(tǒng)性能測試是指在一定的負(fù)載情況下，系統(tǒng)的響應(yīng)時(shí)間等特性是否滿足特定的需求。的響應(yīng)時(shí)間等特性是否滿足特定的需求。 性能指標(biāo)：性能指標(biāo)： 對于一個(gè)應(yīng)用系統(tǒng)，需要監(jiān)控的性能指標(biāo)對于一個(gè)應(yīng)用系統(tǒng)，需要監(jiān)控的性能指標(biāo)主要有以下三個(gè)

2、：主要有以下三個(gè)： 響應(yīng)時(shí)間、吞吐量、服務(wù)器資源占用率響應(yīng)時(shí)間、吞吐量、服務(wù)器資源占用率 響應(yīng)時(shí)間反映完成某個(gè)業(yè)務(wù)所需要的時(shí)間，比如從提交登錄按鈕到服務(wù)器返回登錄成功信息所需時(shí)間是1秒，那么登錄這個(gè)操作的響應(yīng)時(shí)間就是1秒。吞吐量反映單位時(shí)間內(nèi)系統(tǒng)所能完成的某個(gè)操作（事務(wù)）數(shù)，比如系統(tǒng)支持1000人同時(shí)登錄，且平均響應(yīng)時(shí)間為0.5秒，則系統(tǒng)的吞吐量為2000次（登錄）/秒服務(wù)器資源占用反映在負(fù)載條件下系統(tǒng)的資源利用率，主要是指cpu的占用率、內(nèi)存使用率等。一個(gè)優(yōu)秀的系統(tǒng)應(yīng)能夠在一定的成本約束條件下盡可能的降低資源占用率。 因?yàn)橄到y(tǒng)最終是要面向客戶的，因此響應(yīng)時(shí)間往往是客戶最為關(guān)心，也是對系統(tǒng)性能

3、好壞最直觀的評價(jià)，一般情況下，用戶所作的操作響應(yīng)時(shí)間應(yīng)在5秒之內(nèi)才被接受。目前項(xiàng)目測試下來，橙色Pose 200用戶并發(fā)1萬單響應(yīng)時(shí)間在2.133s,系統(tǒng)性能較好。性能測試工具 由于性能測試往往需要模擬大量用戶的并發(fā)操作，如果采用人工方式，耗資將十分巨大而且并不可行，因此，往往采用工具來執(zhí)行，性能測試的工具主要有： Loadrunner 預(yù)測系統(tǒng)行為和性能的負(fù)載測試工具 Jmeter Apache組織開發(fā)的基于Java的壓力測試工具 WEBLODE RadView公司推出的一個(gè)性能測試和分析工具 目前主流的性能測試工具是HP公司的loadrunner（下文簡稱LR），本文將主要介紹應(yīng)用LR 進(jìn)

4、行性能測試的基本方法。使用LR進(jìn)行性能測試的一般步驟l在VuGenerator組件中進(jìn)行用戶行為模擬l在Controller組件中實(shí)現(xiàn)負(fù)載生成及監(jiān)控l在Analysis中進(jìn)行數(shù)據(jù)收集分析即腳本實(shí)現(xiàn) 虛擬場景 結(jié)果分析在VuGenerator組件中進(jìn)行用戶行為模擬l報(bào)文l腳本l回放驗(yàn)證腳本l參數(shù)化使得腳本動(dòng)態(tài)運(yùn)行l(wèi)添加事務(wù)捕獲響應(yīng)時(shí)間l添加集合點(diǎn)形成并發(fā)6步VuGenerator組件l報(bào)文報(bào)文轉(zhuǎn)換：（轉(zhuǎn)換規(guī)則：1. ;2. uu。）l接口規(guī)范http協(xié)議 一般選擇post方法 ，想到web_submit_form()和web_submit_data()兩個(gè)函數(shù)，提交表單到某個(gè)頁面；web_cus

5、tom_request()是一個(gè)可以用于自定義http請求的“萬能”函數(shù)，具有web_link()、web_url()、web_submit_data()函數(shù)的功能，可以自由定義需要的http的get和post請求。 l需要寫接口測試的腳本。 VuGenerator組件lweb_reg_save_param 語法和使用語法和使用語法語法2.示例 VuGenerator組件lweb_custom_request()函數(shù)函數(shù)語法語法Body 3.事例VuGenerator組件l接口測試腳本VuGenerator組件圖中的“URL=？”輸入你所需要測試報(bào)文中的網(wǎng)址。如： CodeSend 發(fā)碼： h

6、ttp:/7:16070/Verify/sand/CodeSend； CodeVerify 核銷： 7:16070/Verify/sand/CodeVerify； GetCode 查詢： 7:16070/Verify/sand/GetCode。 橙色Pose： 36:8080/marketing/remote/httpInterface。VuGenerator組件2.圖中的“json=?”輸入轉(zhuǎn)換好格式的報(bào)文。如：json=mid:,apiName:,phoneN

7、umbersaleChannelNo:10001,orderId:20160307,orderDate:20160307135542,smsFlag:0,catId:0,num:3,signType:,sign:演示核銷接口發(fā)碼和橙色Pose返現(xiàn)l腳本參數(shù)化 在模擬多用戶并發(fā)發(fā)碼業(yè)務(wù)場景時(shí)，對腳本進(jìn)行參數(shù)化改造是必不可少的，否則會因?yàn)閿?shù)據(jù)庫對訂單號參數(shù)的唯一性限制而導(dǎo)致場景運(yùn)行失敗，達(dá)不到真實(shí)模擬多個(gè)不同用戶的并發(fā)發(fā)碼等實(shí)際業(yè)務(wù)的效果。 方法：在腳本中選中需要進(jìn)行參數(shù)化的字段：如訂單號，右鍵選擇“使用參數(shù)代替”即可。 VuGenerator組件核銷發(fā)碼接口：訂單號 o

8、rderId橙色Pose返現(xiàn)：支付訂單號 payOrderIdVuGenerator組件l腳本參數(shù)化 在發(fā)碼時(shí)，訂單號有唯一性要求，在發(fā)碼接口測試腳本中找到orderId字段，orderId值就是我們輸入的值，按住右鍵選中，點(diǎn)擊replace with a parameter 。 VuGenerator組件l腳本參數(shù)化 在彈出的創(chuàng)建參數(shù)欄中，給參數(shù)設(shè)定個(gè)名稱，點(diǎn)擊OK，參數(shù)創(chuàng)建完成 ，字體變?yōu)樽仙?shí)際項(xiàng)目中核銷發(fā)碼接口參數(shù)名為orderid,橙色Pose參數(shù)名為ord，參數(shù)名一般設(shè)置成英文就可以。 VuGenerator組件l腳本參數(shù)化 點(diǎn)擊菜單欄的參數(shù)列表按鈕 (open paramete

9、r list)彈出參數(shù)編輯框，可對參數(shù)進(jìn)行賦值和更新策略設(shè)置。 VuGenerator組件l腳本參數(shù)化 將Excel中事先準(zhǔn)備好的參數(shù)數(shù)據(jù)復(fù)制到參數(shù)列表中(點(diǎn)擊edit with notepad) 根據(jù)實(shí)際業(yè)務(wù)類型設(shè)置不同的參數(shù)更新策略 假設(shè)現(xiàn)在要測試的業(yè)務(wù)場景是180人并發(fā)3500單，參數(shù)列表的值可以如此設(shè)置： 演示VuGenerator組件l腳本參數(shù)化 注：Runtime-settings其他一些設(shè)置可以參考相關(guān)書籍l 添加事務(wù) 事務(wù)是指用戶在客戶端做一種或多種業(yè)務(wù)所需要的操作集，通過事務(wù)函數(shù)可以統(tǒng)計(jì)用戶操作的響應(yīng)時(shí)間，事務(wù)響應(yīng)時(shí)間是用戶請求的開始時(shí)間和服務(wù)器返回內(nèi)容到客戶時(shí)間的差值。 結(jié)

10、合當(dāng)前業(yè)務(wù)，可以將用戶操作劃分為一個(gè)事務(wù)： 核銷接口發(fā)碼 橙色Pose返現(xiàn)VuGenerator組件l 添加事務(wù) 分別在腳本的一個(gè)事務(wù)前后加入事務(wù)開始點(diǎn)和結(jié)束點(diǎn)。注意 事務(wù)的開始點(diǎn)和結(jié)束點(diǎn)都是配對的。 添加事務(wù)可以通過主菜單 下 INSERT-START TRANSACTION,END TRANSACTION或者菜單欄圖標(biāo) (演示)。 VuGenerator組件l 添加集合點(diǎn) 集合點(diǎn)函數(shù)主要用于讓用戶在同一時(shí)間點(diǎn)上進(jìn)行操作來測試系統(tǒng)并發(fā)處理的能力。 在核銷發(fā)碼接口測試業(yè)務(wù)場景下，如果需要考察系統(tǒng)對180個(gè)用戶并發(fā)3500單接口處理能力，需要在發(fā)碼前增加集合點(diǎn)。 注意：集合點(diǎn)通常需要與事務(wù)結(jié)合起

11、來運(yùn)用。 添加集合點(diǎn)在主菜單 INSERTRENDEZVOUS (演示) VuGenerator組件l 添加集合點(diǎn) 現(xiàn)在 ，模擬用戶行為的VUGenerator組件腳本創(chuàng)建及優(yōu)化基本完成，更復(fù)雜的業(yè)務(wù)邏輯腳本還需要在今后的工作中不斷的去學(xué)習(xí)積累。負(fù)載生成及監(jiān)控controller組件 l選擇執(zhí)行腳本以橙色Pose為例負(fù)載生成及監(jiān)控controller組件 l腳本聯(lián)調(diào)負(fù)載生成及監(jiān)控controller組件 l聯(lián)調(diào)成功負(fù)載生成及監(jiān)控controller組件 當(dāng)虛擬用戶腳本開發(fā)完成后，使用LR的 controller組件將執(zhí)行這個(gè)腳本的用戶從單人 轉(zhuǎn)化為多人，從而模擬大量用戶操作，形成負(fù)載。 而通過

12、對負(fù)載進(jìn)行設(shè)計(jì)配置，便形成了場景。執(zhí)行場景可以向服務(wù)器形成負(fù)載，驗(yàn)證各系統(tǒng)性能指標(biāo)是否達(dá)到用戶要求。負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場景 點(diǎn)擊VUGenerator 組件的Tools-Create Controller Scenario 菜單進(jìn)入目標(biāo)場景 負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場景 目標(biāo)場景(goal scenario) 主要是設(shè)置一個(gè)運(yùn)行目標(biāo)，通過Controller 的Auto load功能進(jìn)行自動(dòng)化負(fù)載，如果測試的結(jié)果達(dá)到目標(biāo)，則說明系統(tǒng)的性能符合測試目標(biāo)，否則就提示無法達(dá)到目標(biāo)。 目標(biāo)場景一般是在性能指標(biāo)需求明確的情況下，由LR自動(dòng)加壓，但是無法設(shè)置集

13、合點(diǎn)策略。 假定現(xiàn)在要考察系統(tǒng)應(yīng)對180人并發(fā)3500單的響應(yīng)時(shí)間，在沒有明確需求的情況下，可以考慮采取另一種場景設(shè)計(jì)方式 手工場景(Manual Scenario) 有關(guān)目標(biāo)場景的策略設(shè)置，可以參考相關(guān)書籍。 負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場景 手工場景(Manual Scenario)通過設(shè)計(jì)用戶的添加和減少過程，來模擬真實(shí)的用戶請求模型，實(shí)現(xiàn)負(fù)載的生成。在性能需求不明確，且需要測試并發(fā)操作的情況下，可以通過手工場景進(jìn)行負(fù)載測試和并發(fā)測試。 當(dāng)前演示(180人并發(fā)3500單)采用手工場景進(jìn)行設(shè)計(jì) 場景計(jì)劃 及組計(jì)劃 負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場景 Real

14、world schedule 真實(shí)場景模擬，通過反復(fù)添加start user，duration，stop-user的過程可形成波浪式的負(fù)載負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場景 Real world schedule真實(shí)場景可應(yīng)對需求復(fù)雜的業(yè)務(wù)場景 演示中采用Real world schedule真實(shí)場景負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場景 Basic schedule 基本場景模式只能設(shè)置一次性加壓過程負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場景 設(shè)計(jì)用戶初始化方式，雙擊initialize Action 這里一般選擇第一項(xiàng)即可，即一次性初始化所有虛擬用戶負(fù)載生成及

15、監(jiān)控controller組件l設(shè)計(jì)場景 設(shè)計(jì)負(fù)載加壓策略，雙擊start vusers 一般選擇周期負(fù)載增加方式，以免由于一次負(fù)載增加太快，系統(tǒng)無法承受，影響并發(fā)性能測試數(shù)據(jù)準(zhǔn)確性。180個(gè)用戶并發(fā)每一秒加載2個(gè)用戶負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場景 設(shè)計(jì)負(fù)載持續(xù)時(shí)間，雙擊Duration 一般選擇持續(xù)10-30分鐘，但是在目前業(yè)務(wù)場景里，由于并發(fā)發(fā)碼參數(shù)值只有3500個(gè)，一旦超過這個(gè)數(shù)，虛擬用戶將面臨無參數(shù)可用的狀態(tài)，必將造成發(fā)碼失敗。因此，選擇用戶任務(wù)結(jié)束就停止(Run until completion) 。負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場景 設(shè)計(jì)負(fù)載釋放過程，

16、雙擊stop vusers 每一秒2個(gè)用戶逐漸退出負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場景 負(fù)載生成及監(jiān)控controller組件l監(jiān)控場景 場景運(yùn)行時(shí)需要進(jìn)行對相關(guān)圖表進(jìn)行監(jiān)控以進(jìn)行分析。Scenario groups 該圖表主要顯示當(dāng)前運(yùn)行用戶數(shù)、等待用戶數(shù)、處于集合點(diǎn)用戶數(shù) 、失敗用戶數(shù)等。含義： 80個(gè)用戶處于掛起狀態(tài)，40個(gè)用戶初始化，60個(gè)用戶準(zhǔn)備就緒。負(fù)載生成及監(jiān)控controller組件l監(jiān)控場景 Scenario status（場景狀態(tài)） 場景狀態(tài)信息，包括運(yùn)行用戶數(shù)、消耗時(shí)間、每秒點(diǎn)擊數(shù)、通過/失敗 事務(wù)數(shù)、錯(cuò)誤信息 負(fù)載生成及監(jiān)控controller組件l監(jiān)控場景

17、 Available graphs（可用的圖表）可以從該列表中拖取若干關(guān)心的指標(biāo)放到右邊的方格中一般我們比較關(guān)心的是trans response time（平均事務(wù)響應(yīng)時(shí)間）、hits per second （每秒點(diǎn)擊數(shù)）、unix resources （服務(wù)器資源利用）、throughput（吞吐量）等指標(biāo)負(fù)載生成及監(jiān)控controller組件l結(jié)果分析 吞吐量圖含義：整個(gè)場景過程平均吞吐量為3827.015。負(fù)載生成及監(jiān)控controller組件l結(jié)果分析 響應(yīng)時(shí)間圖含義：事件平均響應(yīng)時(shí)間為2.498負(fù)載生成及監(jiān)控controller組件l結(jié)果分析 點(diǎn)擊率注：系統(tǒng)平均點(diǎn)擊率為14.776負(fù)載生成及監(jiān)控controller組件l結(jié)果分析 Transaction Summary圖通過率：97.715%(pass事物數(shù)/總事物數(shù))負(fù)載生成及監(jiān)控controller組件l服務(wù)器資源占用率實(shí)時(shí)監(jiān)控服務(wù)器資源占用率實(shí)時(shí)監(jiān)控 負(fù)載生成及