性能測(cè)試及LoadRunner入門(mén)培訓(xùn)-張小燕

1、性能測(cè)試及性能測(cè)試及 LoadRunner入門(mén)入門(mén) 上海久彰電子商務(wù)有限公司張小燕 2016年3月30日內(nèi)容概述性能測(cè)試性能測(cè)試 概要介紹概要介紹性能測(cè)試工具性能測(cè)試工具使用使用LR VuGen 創(chuàng)建測(cè)試腳本創(chuàng)建測(cè)試腳本使用使用LR controller創(chuàng)建運(yùn)行場(chǎng)景創(chuàng)建運(yùn)行場(chǎng)景監(jiān)控場(chǎng)景及結(jié)果分析監(jiān)控場(chǎng)景及結(jié)果分析性能測(cè)試概要介紹 定義定義 ： 性能測(cè)試是指在一定的負(fù)載情況下，系統(tǒng)性能測(cè)試是指在一定的負(fù)載情況下，系統(tǒng)的響應(yīng)時(shí)間等特性是否滿足特定的需求。的響應(yīng)時(shí)間等特性是否滿足特定的需求。 性能指標(biāo)：性能指標(biāo)： 對(duì)于一個(gè)應(yīng)用系統(tǒng)，需要監(jiān)控的性能指標(biāo)對(duì)于一個(gè)應(yīng)用系統(tǒng)，需要監(jiān)控的性能指標(biāo)主要有以下三個(gè)

2、：主要有以下三個(gè)： 響應(yīng)時(shí)間、吞吐量、服務(wù)器資源占用率響應(yīng)時(shí)間、吞吐量、服務(wù)器資源占用率 響應(yīng)時(shí)間反映完成某個(gè)業(yè)務(wù)所需要的時(shí)間，比如從提交登錄按鈕到服務(wù)器返回登錄成功信息所需時(shí)間是1秒，那么登錄這個(gè)操作的響應(yīng)時(shí)間就是1秒。吞吐量反映單位時(shí)間內(nèi)系統(tǒng)所能完成的某個(gè)操作（事務(wù)）數(shù)，比如系統(tǒng)支持1000人同時(shí)登錄，且平均響應(yīng)時(shí)間為0.5秒，則系統(tǒng)的吞吐量為2000次（登錄）/秒服務(wù)器資源占用反映在負(fù)載條件下系統(tǒng)的資源利用率，主要是指cpu的占用率、內(nèi)存使用率等。一個(gè)優(yōu)秀的系統(tǒng)應(yīng)能夠在一定的成本約束條件下盡可能的降低資源占用率。 因?yàn)橄到y(tǒng)最終是要面向客戶(hù)的，因此響應(yīng)時(shí)間往往是客戶(hù)最為關(guān)心，也是對(duì)系統(tǒng)性能

3、好壞最直觀的評(píng)價(jià)，一般情況下，用戶(hù)所作的操作響應(yīng)時(shí)間應(yīng)在5秒之內(nèi)才被接受。目前項(xiàng)目測(cè)試下來(lái)，橙色Pose 200用戶(hù)并發(fā)1萬(wàn)單響應(yīng)時(shí)間在2.133s,系統(tǒng)性能較好。性能測(cè)試工具 由于性能測(cè)試往往需要模擬大量用戶(hù)的并發(fā)操作，如果采用人工方式，耗資將十分巨大而且并不可行，因此，往往采用工具來(lái)執(zhí)行，性能測(cè)試的工具主要有： Loadrunner 預(yù)測(cè)系統(tǒng)行為和性能的負(fù)載測(cè)試工具 Jmeter Apache組織開(kāi)發(fā)的基于Java的壓力測(cè)試工具 WEBLODE RadView公司推出的一個(gè)性能測(cè)試和分析工具 目前主流的性能測(cè)試工具是HP公司的loadrunner（下文簡(jiǎn)稱(chēng)LR），本文將主要介紹應(yīng)用LR 進(jìn)

4、行性能測(cè)試的基本方法。使用LR進(jìn)行性能測(cè)試的一般步驟l在VuGenerator組件中進(jìn)行用戶(hù)行為模擬l在Controller組件中實(shí)現(xiàn)負(fù)載生成及監(jiān)控l在Analysis中進(jìn)行數(shù)據(jù)收集分析即腳本實(shí)現(xiàn) 虛擬場(chǎng)景 結(jié)果分析在VuGenerator組件中進(jìn)行用戶(hù)行為模擬l報(bào)文l腳本l回放驗(yàn)證腳本l參數(shù)化使得腳本動(dòng)態(tài)運(yùn)行l(wèi)添加事務(wù)捕獲響應(yīng)時(shí)間l添加集合點(diǎn)形成并發(fā)6步VuGenerator組件l報(bào)文報(bào)文轉(zhuǎn)換：（轉(zhuǎn)換規(guī)則：1. ;2. uu。）l接口規(guī)范http協(xié)議 一般選擇post方法 ，想到web_submit_form()和web_submit_data()兩個(gè)函數(shù)，提交表單到某個(gè)頁(yè)面；web_cus

5、tom_request()是一個(gè)可以用于自定義http請(qǐng)求的“萬(wàn)能”函數(shù)，具有web_link()、web_url()、web_submit_data()函數(shù)的功能，可以自由定義需要的http的get和post請(qǐng)求。 l需要寫(xiě)接口測(cè)試的腳本。 VuGenerator組件lweb_reg_save_param 語(yǔ)法和使用語(yǔ)法和使用語(yǔ)法語(yǔ)法2.示例 VuGenerator組件lweb_custom_request()函數(shù)函數(shù)語(yǔ)法語(yǔ)法Body 3.事例VuGenerator組件l接口測(cè)試腳本VuGenerator組件圖中的“URL=？”輸入你所需要測(cè)試報(bào)文中的網(wǎng)址。如： CodeSend 發(fā)碼： h

6、ttp:/7:16070/Verify/sand/CodeSend； CodeVerify 核銷(xiāo)： 7:16070/Verify/sand/CodeVerify； GetCode 查詢(xún)： 7:16070/Verify/sand/GetCode。 橙色Pose： 36:8080/marketing/remote/httpInterface。VuGenerator組件2.圖中的“json=?”輸入轉(zhuǎn)換好格式的報(bào)文。如：json=mid:,apiName:,phoneN

7、umbersaleChannelNo:10001,orderId:20160307,orderDate:20160307135542,smsFlag:0,catId:0,num:3,signType:,sign:演示核銷(xiāo)接口發(fā)碼和橙色Pose返現(xiàn)l腳本參數(shù)化 在模擬多用戶(hù)并發(fā)發(fā)碼業(yè)務(wù)場(chǎng)景時(shí)，對(duì)腳本進(jìn)行參數(shù)化改造是必不可少的，否則會(huì)因?yàn)閿?shù)據(jù)庫(kù)對(duì)訂單號(hào)參數(shù)的唯一性限制而導(dǎo)致場(chǎng)景運(yùn)行失敗，達(dá)不到真實(shí)模擬多個(gè)不同用戶(hù)的并發(fā)發(fā)碼等實(shí)際業(yè)務(wù)的效果。 方法：在腳本中選中需要進(jìn)行參數(shù)化的字段：如訂單號(hào)，右鍵選擇“使用參數(shù)代替”即可。 VuGenerator組件核銷(xiāo)發(fā)碼接口：訂單號(hào) o

8、rderId橙色Pose返現(xiàn)：支付訂單號(hào) payOrderIdVuGenerator組件l腳本參數(shù)化 在發(fā)碼時(shí)，訂單號(hào)有唯一性要求，在發(fā)碼接口測(cè)試腳本中找到orderId字段，orderId值就是我們輸入的值，按住右鍵選中，點(diǎn)擊replace with a parameter 。 VuGenerator組件l腳本參數(shù)化 在彈出的創(chuàng)建參數(shù)欄中，給參數(shù)設(shè)定個(gè)名稱(chēng)，點(diǎn)擊OK，參數(shù)創(chuàng)建完成 ，字體變?yōu)樽仙?。?shí)際項(xiàng)目中核銷(xiāo)發(fā)碼接口參數(shù)名為orderid,橙色Pose參數(shù)名為ord，參數(shù)名一般設(shè)置成英文就可以。 VuGenerator組件l腳本參數(shù)化 點(diǎn)擊菜單欄的參數(shù)列表按鈕 (open paramete

9、r list)彈出參數(shù)編輯框，可對(duì)參數(shù)進(jìn)行賦值和更新策略設(shè)置。 VuGenerator組件l腳本參數(shù)化 將Excel中事先準(zhǔn)備好的參數(shù)數(shù)據(jù)復(fù)制到參數(shù)列表中(點(diǎn)擊edit with notepad) 根據(jù)實(shí)際業(yè)務(wù)類(lèi)型設(shè)置不同的參數(shù)更新策略 假設(shè)現(xiàn)在要測(cè)試的業(yè)務(wù)場(chǎng)景是180人并發(fā)3500單，參數(shù)列表的值可以如此設(shè)置： 演示VuGenerator組件l腳本參數(shù)化 注：Runtime-settings其他一些設(shè)置可以參考相關(guān)書(shū)籍l 添加事務(wù) 事務(wù)是指用戶(hù)在客戶(hù)端做一種或多種業(yè)務(wù)所需要的操作集，通過(guò)事務(wù)函數(shù)可以統(tǒng)計(jì)用戶(hù)操作的響應(yīng)時(shí)間，事務(wù)響應(yīng)時(shí)間是用戶(hù)請(qǐng)求的開(kāi)始時(shí)間和服務(wù)器返回內(nèi)容到客戶(hù)時(shí)間的差值。 結(jié)

10、合當(dāng)前業(yè)務(wù)，可以將用戶(hù)操作劃分為一個(gè)事務(wù)： 核銷(xiāo)接口發(fā)碼 橙色Pose返現(xiàn)VuGenerator組件l 添加事務(wù) 分別在腳本的一個(gè)事務(wù)前后加入事務(wù)開(kāi)始點(diǎn)和結(jié)束點(diǎn)。注意 事務(wù)的開(kāi)始點(diǎn)和結(jié)束點(diǎn)都是配對(duì)的。 添加事務(wù)可以通過(guò)主菜單 下 INSERT-START TRANSACTION,END TRANSACTION或者菜單欄圖標(biāo) (演示)。 VuGenerator組件l 添加集合點(diǎn) 集合點(diǎn)函數(shù)主要用于讓用戶(hù)在同一時(shí)間點(diǎn)上進(jìn)行操作來(lái)測(cè)試系統(tǒng)并發(fā)處理的能力。 在核銷(xiāo)發(fā)碼接口測(cè)試業(yè)務(wù)場(chǎng)景下，如果需要考察系統(tǒng)對(duì)180個(gè)用戶(hù)并發(fā)3500單接口處理能力，需要在發(fā)碼前增加集合點(diǎn)。 注意：集合點(diǎn)通常需要與事務(wù)結(jié)合起

11、來(lái)運(yùn)用。 添加集合點(diǎn)在主菜單 INSERTRENDEZVOUS (演示) VuGenerator組件l 添加集合點(diǎn) 現(xiàn)在 ，模擬用戶(hù)行為的VUGenerator組件腳本創(chuàng)建及優(yōu)化基本完成，更復(fù)雜的業(yè)務(wù)邏輯腳本還需要在今后的工作中不斷的去學(xué)習(xí)積累。負(fù)載生成及監(jiān)控controller組件 l選擇執(zhí)行腳本以橙色Pose為例負(fù)載生成及監(jiān)控controller組件 l腳本聯(lián)調(diào)負(fù)載生成及監(jiān)控controller組件 l聯(lián)調(diào)成功負(fù)載生成及監(jiān)控controller組件 當(dāng)虛擬用戶(hù)腳本開(kāi)發(fā)完成后，使用LR的 controller組件將執(zhí)行這個(gè)腳本的用戶(hù)從單人 轉(zhuǎn)化為多人，從而模擬大量用戶(hù)操作，形成負(fù)載。 而通過(guò)

12、對(duì)負(fù)載進(jìn)行設(shè)計(jì)配置，便形成了場(chǎng)景。執(zhí)行場(chǎng)景可以向服務(wù)器形成負(fù)載，驗(yàn)證各系統(tǒng)性能指標(biāo)是否達(dá)到用戶(hù)要求。負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場(chǎng)景 點(diǎn)擊VUGenerator 組件的Tools-Create Controller Scenario 菜單進(jìn)入目標(biāo)場(chǎng)景 負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場(chǎng)景 目標(biāo)場(chǎng)景(goal scenario) 主要是設(shè)置一個(gè)運(yùn)行目標(biāo)，通過(guò)Controller 的Auto load功能進(jìn)行自動(dòng)化負(fù)載，如果測(cè)試的結(jié)果達(dá)到目標(biāo)，則說(shuō)明系統(tǒng)的性能符合測(cè)試目標(biāo)，否則就提示無(wú)法達(dá)到目標(biāo)。 目標(biāo)場(chǎng)景一般是在性能指標(biāo)需求明確的情況下，由LR自動(dòng)加壓，但是無(wú)法設(shè)置集

13、合點(diǎn)策略。 假定現(xiàn)在要考察系統(tǒng)應(yīng)對(duì)180人并發(fā)3500單的響應(yīng)時(shí)間，在沒(méi)有明確需求的情況下，可以考慮采取另一種場(chǎng)景設(shè)計(jì)方式 手工場(chǎng)景(Manual Scenario) 有關(guān)目標(biāo)場(chǎng)景的策略設(shè)置，可以參考相關(guān)書(shū)籍。 負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場(chǎng)景 手工場(chǎng)景(Manual Scenario)通過(guò)設(shè)計(jì)用戶(hù)的添加和減少過(guò)程，來(lái)模擬真實(shí)的用戶(hù)請(qǐng)求模型，實(shí)現(xiàn)負(fù)載的生成。在性能需求不明確，且需要測(cè)試并發(fā)操作的情況下，可以通過(guò)手工場(chǎng)景進(jìn)行負(fù)載測(cè)試和并發(fā)測(cè)試。 當(dāng)前演示(180人并發(fā)3500單)采用手工場(chǎng)景進(jìn)行設(shè)計(jì) 場(chǎng)景計(jì)劃 及組計(jì)劃 負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場(chǎng)景 Real

14、world schedule 真實(shí)場(chǎng)景模擬，通過(guò)反復(fù)添加start user，duration，stop-user的過(guò)程可形成波浪式的負(fù)載負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場(chǎng)景 Real world schedule真實(shí)場(chǎng)景可應(yīng)對(duì)需求復(fù)雜的業(yè)務(wù)場(chǎng)景 演示中采用Real world schedule真實(shí)場(chǎng)景負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場(chǎng)景 Basic schedule 基本場(chǎng)景模式只能設(shè)置一次性加壓過(guò)程負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場(chǎng)景 設(shè)計(jì)用戶(hù)初始化方式，雙擊initialize Action 這里一般選擇第一項(xiàng)即可，即一次性初始化所有虛擬用戶(hù)負(fù)載生成及

15、監(jiān)控controller組件l設(shè)計(jì)場(chǎng)景 設(shè)計(jì)負(fù)載加壓策略，雙擊start vusers 一般選擇周期負(fù)載增加方式，以免由于一次負(fù)載增加太快，系統(tǒng)無(wú)法承受，影響并發(fā)性能測(cè)試數(shù)據(jù)準(zhǔn)確性。180個(gè)用戶(hù)并發(fā)每一秒加載2個(gè)用戶(hù)負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場(chǎng)景 設(shè)計(jì)負(fù)載持續(xù)時(shí)間，雙擊Duration 一般選擇持續(xù)10-30分鐘，但是在目前業(yè)務(wù)場(chǎng)景里，由于并發(fā)發(fā)碼參數(shù)值只有3500個(gè)，一旦超過(guò)這個(gè)數(shù)，虛擬用戶(hù)將面臨無(wú)參數(shù)可用的狀態(tài)，必將造成發(fā)碼失敗。因此，選擇用戶(hù)任務(wù)結(jié)束就停止(Run until completion) 。負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場(chǎng)景 設(shè)計(jì)負(fù)載釋放過(guò)程，

16、雙擊stop vusers 每一秒2個(gè)用戶(hù)逐漸退出負(fù)載生成及監(jiān)控controller組件l設(shè)計(jì)場(chǎng)景 負(fù)載生成及監(jiān)控controller組件l監(jiān)控場(chǎng)景 場(chǎng)景運(yùn)行時(shí)需要進(jìn)行對(duì)相關(guān)圖表進(jìn)行監(jiān)控以進(jìn)行分析。Scenario groups 該圖表主要顯示當(dāng)前運(yùn)行用戶(hù)數(shù)、等待用戶(hù)數(shù)、處于集合點(diǎn)用戶(hù)數(shù) 、失敗用戶(hù)數(shù)等。含義： 80個(gè)用戶(hù)處于掛起狀態(tài)，40個(gè)用戶(hù)初始化，60個(gè)用戶(hù)準(zhǔn)備就緒。負(fù)載生成及監(jiān)控controller組件l監(jiān)控場(chǎng)景 Scenario status（場(chǎng)景狀態(tài)） 場(chǎng)景狀態(tài)信息，包括運(yùn)行用戶(hù)數(shù)、消耗時(shí)間、每秒點(diǎn)擊數(shù)、通過(guò)/失敗 事務(wù)數(shù)、錯(cuò)誤信息 負(fù)載生成及監(jiān)控controller組件l監(jiān)控場(chǎng)景

17、 Available graphs（可用的圖表）可以從該列表中拖取若干關(guān)心的指標(biāo)放到右邊的方格中一般我們比較關(guān)心的是trans response time（平均事務(wù)響應(yīng)時(shí)間）、hits per second （每秒點(diǎn)擊數(shù)）、unix resources （服務(wù)器資源利用）、throughput（吞吐量）等指標(biāo)負(fù)載生成及監(jiān)控controller組件l結(jié)果分析 吞吐量圖含義：整個(gè)場(chǎng)景過(guò)程平均吞吐量為3827.015。負(fù)載生成及監(jiān)控controller組件l結(jié)果分析 響應(yīng)時(shí)間圖含義：事件平均響應(yīng)時(shí)間為2.498負(fù)載生成及監(jiān)控controller組件l結(jié)果分析 點(diǎn)擊率注：系統(tǒng)平均點(diǎn)擊率為14.776負(fù)載生成及監(jiān)控controller組件l結(jié)果分析 Transaction Summary圖通過(guò)率：97.715%(pass事物數(shù)/總事物數(shù))負(fù)載生成及監(jiān)控controller組件l服務(wù)器資源占用率實(shí)時(shí)監(jiān)控服務(wù)器資源占用率實(shí)時(shí)監(jiān)控 負(fù)載生成及