LoadRunner性能測試報(bào)告

第1頁共14頁第0頁共14頁xxx系統(tǒng)性能測試報(bào)告姓名：班級：學(xué)號：目錄1前言 32被測系統(tǒng)定義 32.1功能簡介 32.2性能測試指標(biāo) 43系統(tǒng)結(jié)構(gòu)及流程 43.1系統(tǒng)總體結(jié)構(gòu) 43.2功能模塊 43.3業(yè)務(wù)流程 53.4關(guān)鍵點(diǎn)描述 63.5性能測試環(huán)境 64性能測試 64.1性能測試概述 74.2測試目的 74.3測試方法及測試用例 74.4測試指標(biāo)及期望 84.5測試數(shù)據(jù)準(zhǔn)備 104.6運(yùn)行狀況記錄 105測試過程及結(jié)果描述 105.1測試描述 115.2測試場景 115.3測試結(jié)果 116測試分析和結(jié)論 16第11頁共14頁前言目前，隨著WebTours訂票系統(tǒng)在生產(chǎn)狀態(tài)下日趨穩(wěn)定、成熟，系統(tǒng)的性能問題也逐步成為了我們關(guān)注的焦點(diǎn)：隨著訂票過程中大數(shù)據(jù)量的“沖擊”，在客戶信息信息進(jìn)入時(shí)，系統(tǒng)能穩(wěn)定在什么樣的性能水平，面臨公司業(yè)務(wù)沖刺時(shí)，系統(tǒng)能否經(jīng)受住“考驗(yàn)”，這些問題需要通過一個(gè)完整的性能測試來給出答案。本報(bào)告前部分即是基于上述考慮，參考科學(xué)的性能測試方法而撰寫的，用以指導(dǎo)即將進(jìn)行的WebTours訂票系統(tǒng)的性能測試。HPWebTours系統(tǒng)定義HPWebTours訂票系統(tǒng)作為本次測試的被測系統(tǒng)，該業(yè)務(wù)系統(tǒng)的主要功能包括：搜索航班，預(yù)訂機(jī)票并查看航班路線。在本次測試中，將針對上述的功能進(jìn)行壓力測試，檢查并評估在模擬環(huán)境中，系統(tǒng)對負(fù)載的承受能力，在不同的用戶連接情況下，系統(tǒng)地吞吐能力和響應(yīng)能力，以及在預(yù)計(jì)的數(shù)據(jù)容量中，系統(tǒng)能夠容忍的最大用戶數(shù)。功能簡介HPWebTours主要功能如下：用戶注冊登錄查詢航班性能測試指標(biāo)本次測試是針對HPWebTours訂票系統(tǒng)的性能特征和系統(tǒng)的性能調(diào)優(yōu)而進(jìn)行的，主要需要獲得如下的測試指標(biāo)。1、系統(tǒng)的響應(yīng)能力：即在各種負(fù)載壓力情況下，系統(tǒng)的響應(yīng)時(shí)間，也就是從客戶端交易發(fā)起，到服務(wù)器端交易應(yīng)答返回所需要的時(shí)間，包括網(wǎng)絡(luò)傳輸時(shí)間和服務(wù)器處理時(shí)間。2、應(yīng)用系統(tǒng)的吞吐率：即應(yīng)用系統(tǒng)在單位時(shí)間內(nèi)完成的交易量，也就是在單位時(shí)間內(nèi)，應(yīng)用系統(tǒng)針對不同的負(fù)載壓力，所能完成的交易數(shù)量。3、應(yīng)用系統(tǒng)的負(fù)載能力：即系統(tǒng)所能容忍的最大用戶數(shù)量，也就是在正常的響應(yīng)時(shí)間中，系統(tǒng)能夠支持的最多的客戶端的數(shù)量。系統(tǒng)結(jié)構(gòu)及流程HPWebTours訂票系統(tǒng)在實(shí)際生產(chǎn)中的體系結(jié)構(gòu)跟本次性能測試所采用的體系結(jié)構(gòu)是一樣的，交易流程也完全一致的。不過，由于硬件條件的限制，本次性能測試的硬件平臺跟實(shí)際生產(chǎn)環(huán)境略有不同。系統(tǒng)總體結(jié)構(gòu)HPWebTours訂票系統(tǒng)系統(tǒng)由用戶注冊、登錄、查詢航班等這些功能構(gòu)成。功能模塊本次性能測試中各類交易都是由若干功能模塊組成的，每個(gè)交易都根據(jù)其執(zhí)行特點(diǎn)分成了若干操作步驟，每個(gè)步驟就是一個(gè)功能點(diǎn)（即功能模塊），在HPWebTours訂票系統(tǒng)中，各種交易及其包含的功能模塊關(guān)系如下：注冊登錄查詢航班本次壓力測試主要設(shè)計(jì)的功能模塊以及所屬的路徑如下表名稱所屬交易路徑業(yè)務(wù)流程本次性能測試中，選擇的各類交易的業(yè)務(wù)流程如下：注冊登錄查詢航班查詢交易的業(yè)務(wù)流程只是單一步驟的，即：輸入查詢條件后獲取查詢結(jié)果，因此在本次性能測試中只作為一個(gè)事務(wù)處理，交易流程圖略。關(guān)鍵點(diǎn)描述本次性能測試的關(guān)鍵點(diǎn)，就是查看HPWebTours訂票系統(tǒng)在并發(fā)壓力下的表現(xiàn)，即：支持的并發(fā)用戶數(shù)目和并發(fā)用戶發(fā)送頻率，以及在較大壓力下，系統(tǒng)的交易處理能力，并找出各類交易的性能瓶頸。性能測試環(huán)境本次性能測試環(huán)境與真實(shí)運(yùn)行環(huán)境基本一致，都運(yùn)行在同樣的硬件和網(wǎng)絡(luò)環(huán)境中，數(shù)據(jù)庫是真實(shí)環(huán)境數(shù)據(jù)庫的一個(gè)復(fù)制（或縮?。?，本系統(tǒng)采用標(biāo)準(zhǔn)的CS結(jié)構(gòu)，客戶端都是通過瀏覽器訪問應(yīng)用系統(tǒng)。其中具體的硬件和網(wǎng)絡(luò)環(huán)境如下：服務(wù)器設(shè)備：IBM570（DBserver），IBM690（APserver）操作系統(tǒng)：Windows2003網(wǎng)絡(luò)環(huán)境：LAN（10M）數(shù)據(jù)庫：MYSQL客戶端：PC（Windows）網(wǎng)絡(luò)拓?fù)浜徒Y(jié)構(gòu)圖如下：性能測試從廣泛意義上講性能測試包括：壓力測試、穩(wěn)定性測試、負(fù)載能力測試和可擴(kuò)展性測試等。在不同應(yīng)用系統(tǒng)的性能測試中，需要根據(jù)應(yīng)用系統(tǒng)的特點(diǎn)和測試目的的不同來選擇具體的測試方案，本次HPWebTours訂票系統(tǒng)的性能測試主要是采用通常的壓力測試模式來執(zhí)行的，即：逐步增加壓力，查看應(yīng)用系統(tǒng)在各種壓力狀況小的性能表現(xiàn)。在性能測試中，壓力測試主要是為了獲取系統(tǒng)在較大壓力狀況下的性能表現(xiàn)而設(shè)計(jì)并實(shí)現(xiàn)的，壓力測試主要是獲取系統(tǒng)的性能瓶頸和系統(tǒng)的最大吞吐率。性能測試概述本次壓力測試是指針對現(xiàn)行的HPWebTours訂票業(yè)務(wù)系統(tǒng)的聯(lián)機(jī)交易處理能力的測試，檢驗(yàn)系統(tǒng)的吞吐率。本系統(tǒng)的壓力測試主要是針對HPWebTours訂票系統(tǒng)，檢查在日間交易高峰時(shí)期，并發(fā)用戶數(shù)較多的時(shí)候的處理能力等等。測試目的壓力測試的目的就是檢驗(yàn)系統(tǒng)的最大吞吐量，檢驗(yàn)現(xiàn)行的HPWebTours訂票系統(tǒng)在各種壓力交易量下的運(yùn)行狀況，檢驗(yàn)系統(tǒng)地運(yùn)行瓶頸，獲取系統(tǒng)的處理能力等等。本次針對HPWebTours訂票業(yè)務(wù)系統(tǒng)所進(jìn)行的壓力測試的測試目的為：給出HPWebTours訂票系統(tǒng)當(dāng)前的性能狀況定位新業(yè)務(wù)系統(tǒng)性能瓶頸或潛在性能瓶頸總結(jié)一套合理的、可操作的、適合公司現(xiàn)實(shí)情況的性能測試方案，為后續(xù)的性能測試工作提供基本思路。測試方法及測試用例使用性能測試軟件LoadRunner，對現(xiàn)行的HPWebTours訂票系統(tǒng)進(jìn)行腳本錄制、測試回放、逐步加壓和跟蹤記錄。測試過程中，由LoadRunner的管理平臺調(diào)用各臺測試前臺，發(fā)起各種組合的交易請求，并跟蹤記錄服務(wù)器端的運(yùn)行情況和返回給客戶端的運(yùn)行結(jié)果。本次測試將依照如下場景進(jìn)行測試：用戶數(shù)功能模塊業(yè)務(wù)操作2004007001000注冊注冊登錄登錄業(yè)務(wù)查詢航班針對每個(gè)測試案例，都將采用逐步加壓和瞬間加壓兩種客戶端連接方式進(jìn)行，查看服務(wù)器端在客戶端的連接數(shù)量變化過程中對應(yīng)的處理能力，測試運(yùn)行安排如下：每隔2秒增加1個(gè)用戶連接，最多增加到200個(gè)用戶，查看并記錄運(yùn)行情況每隔2秒增加2個(gè)用戶連接，最多增加到200個(gè)用戶，查看并記錄運(yùn)行情況一次性連接10個(gè)用戶，查看記錄運(yùn)行情況一次性連接100個(gè)用戶，查看記錄運(yùn)行情況測試指標(biāo)及期望在本次性能測試中，各類測試指標(biāo)包括測試中應(yīng)該達(dá)到的某些性能指標(biāo)，這些性能指標(biāo)均是來自應(yīng)用系統(tǒng)設(shè)計(jì)開發(fā)時(shí)遵循的業(yè)務(wù)需求，當(dāng)某個(gè)測試的某一類指標(biāo)已經(jīng)超出了業(yè)務(wù)需求的要求范圍，則測試已經(jīng)達(dá)到目的，即可終止壓力測試。應(yīng)用軟件級別的測試指標(biāo)：1)聯(lián)機(jī)交易類的執(zhí)行情況交易的平均響應(yīng)時(shí)間（期望值：<15s）交易的最大響應(yīng)時(shí)間（期望值：<30s）平均每秒處理交易數(shù)量（分別記錄單位時(shí)間內(nèi)成功、失敗和停止的交易數(shù)量）交易成功率（期望值：>95%）不同并發(fā)用戶數(shù)的狀況下的上述記錄值2）測試結(jié)果分析情況單筆記錄的處理時(shí)間（期望值：<15s）單位時(shí)間內(nèi)的處理交易筆數(shù)（期望值：>10個(gè)）某個(gè)時(shí)間段內(nèi)的交易處理數(shù)量單筆能處理的最大數(shù)據(jù)量在每個(gè)交易處理中最大（最耗時(shí)）的模塊在不同數(shù)量的測試數(shù)據(jù)基礎(chǔ)上的上述記錄值網(wǎng)絡(luò)級別的測試指標(biāo)：吞吐量：單位時(shí)間內(nèi)網(wǎng)絡(luò)傳輸數(shù)據(jù)量沖突率：在以太網(wǎng)上監(jiān)測到的每秒沖突數(shù)操作系統(tǒng)級別的測試指標(biāo)：進(jìn)程/線程交換率：進(jìn)程和線程之間每秒交換次數(shù)CPU利用率：即CPU占用率（％）系統(tǒng)CPU利用率：系統(tǒng)的CPU占用率（％）用戶CPU利用率：用戶模式下的CPU占用率（％）磁盤交換率：磁盤交換速率中斷速率：CPU每秒處理的中斷數(shù)讀入內(nèi)存頁速率：物理內(nèi)存中每秒讀入內(nèi)存頁的數(shù)目寫出內(nèi)存頁速率：每秒從物理內(nèi)存中寫到頁文件中的內(nèi)存頁數(shù)目或者從物理內(nèi)存中刪掉的內(nèi)存頁數(shù)目內(nèi)存頁交換速率：每秒寫入內(nèi)存頁和從物理內(nèi)存中讀出頁的個(gè)數(shù)進(jìn)程入交換率：交換區(qū)輸入的進(jìn)程數(shù)目進(jìn)程出交換率：交換區(qū)輸出的進(jìn)程數(shù)目數(shù)據(jù)庫級別的測試指標(biāo)：數(shù)據(jù)庫的并發(fā)連接數(shù)：客戶端的最大連接數(shù)數(shù)據(jù)庫鎖資源的使用數(shù)量測試數(shù)據(jù)準(zhǔn)備前期準(zhǔn)備工作包括：錄制好一段完整的腳本,包括(注冊，登錄，查詢航班)進(jìn)行相關(guān)的設(shè)置運(yùn)行狀況記錄記錄可擴(kuò)展性測試中的測試結(jié)果及其系統(tǒng)的運(yùn)行狀況。除了記錄測試指標(biāo)以外，應(yīng)該結(jié)合測試實(shí)時(shí)記錄系統(tǒng)各個(gè)層次的資源和參數(shù)。主要包括：硬件環(huán)境資源服務(wù)器操作系統(tǒng)參數(shù)網(wǎng)絡(luò)相關(guān)參數(shù)數(shù)據(jù)庫相關(guān)參數(shù)：具體數(shù)據(jù)庫參數(shù)有所不同，結(jié)合各個(gè)數(shù)據(jù)庫獨(dú)有的特點(diǎn)記錄測試過程及結(jié)果描述HPWebTours訂票系統(tǒng)的性能測試共計(jì)執(zhí)行了2次，兩次執(zhí)行的腳本流程作了調(diào)整，其他的環(huán)境和數(shù)據(jù)都一樣。在測試數(shù)據(jù)準(zhǔn)備完備以后，第一次測試中，操作流程為每次交易都執(zhí)行用戶登錄操作，第二次測試中，操作流程為先進(jìn)行用戶登錄，然后每次交易都不再執(zhí)行用戶登錄。測試描述兩次測試都是在12月22日凌晨進(jìn)行的。第一次測試執(zhí)行了30分鐘左右，執(zhí)行腳本都是采用每次交易都執(zhí)行登錄操作，測試過程中，交易的執(zhí)行速度隨著測試的進(jìn)行，越來越慢，交易的響應(yīng)時(shí)間越來越長，交易出錯(cuò)（超時(shí)）情況也越來越嚴(yán)重，交易在執(zhí)行到30分鐘左右，用戶登錄交易開始大量失?。ǔ瑫r(shí)）并導(dǎo)致后續(xù)的交易都無法完成，于是終止本次測試。第二次測試執(zhí)行了50分鐘左右，在第一次測試的基礎(chǔ)上，調(diào)整交易流程，讓每次交易都只登錄一次，然后順序執(zhí)行交易邏輯。測試開始初期，交易的響應(yīng)時(shí)間隨著交易并發(fā)量的增加而快速增加，在測試執(zhí)行了10分鐘左右，所有的用戶登錄操作都基本完成，此后交易響應(yīng)時(shí)間開始減少，并比較平穩(wěn)的執(zhí)行，絕大部分交易執(zhí)行比較平穩(wěn)成功率也很高，除了兩個(gè)交易：xxx(Audit_Transaction)和xxx(ClaimRegister_Transaction)，這兩個(gè)交易的執(zhí)行速度特別慢，交易相應(yīng)時(shí)間一直都維持在190秒左右和160秒左右，這兩個(gè)交易超時(shí)現(xiàn)象嚴(yán)重，交易成功率很低，很多交易都因?yàn)槌瑫r(shí)而失敗。測試場景測試中，使用逐步加壓的模式，采用：每隔2秒啟動(dòng)1個(gè)并發(fā)用戶（Vuser）的方式，即：每隔1秒，啟動(dòng)1個(gè)Vuser，在7分鐘左右啟動(dòng)所有的Vuser（200個(gè)），執(zhí)行登錄，并根據(jù)設(shè)置的時(shí)間間隔發(fā)起交易。這次測試都部署在如下的場景中。運(yùn)行的腳本部署在3臺PC機(jī)，主要目的就是檢查在較大壓力的情況下，xxxxx心業(yè)務(wù)系統(tǒng)的性能表現(xiàn)。選擇了2臺PC，每臺PC機(jī)部署了70個(gè)左右并發(fā)用戶，選擇1臺PC，部署60個(gè)左右的并發(fā)用戶，并運(yùn)行LoadRunner的控制器（Controller）測試結(jié)果兩次測試AP服務(wù)器主機(jī)上的CPU利用率如下：可以看出在兩次測試執(zhí)行中第一次（1:52–2:20）測試過程中CPU的利用率都幾乎達(dá)到了100%，第二次測試中（2:45-4:00）CPU的利用率也達(dá)到了95%以上。兩次測試在數(shù)據(jù)庫（Oracle）服務(wù)器上主機(jī)上的CPU利用率如下：可以看出兩次測試執(zhí)行中第一次（1:52–2:20）測試過程中CPU的利用率很低，第二次測試中（2:45-4:00）CPU的利用率較高也達(dá)到了75%以上，但兩次測試的CPU的IO等待時(shí)間卻都比較高，IO和CPU利用率對照表如下：可以看出兩次測試執(zhí)行中第一次（1:52–2:20）測試過程中CPU的IO等待率較低，因?yàn)榇蠖鄶?shù)的交易都是用戶登錄，都壓在AP服務(wù)器上了，第二次測試中（2:45-4:00）CPU的IO第一次測試第一次測試使用了200個(gè)并發(fā)用戶，并發(fā)用戶的啟動(dòng)信息如下：各類交易的交易相應(yīng)時(shí)間（秒）ColorScale交易名稱最小平均最大1AutoUW_Transaction0.023.73387.8711Confirm_Transaction210.203210.203210.2031CTDetail_Transaction105.878151.032199.4771EdorNoscanAppInput_Transaction60.704153.425259.2341GeneralQuery_Transaction0.06713.62339.0941IndividualQuery_Transaction0.78128.04264.9841Issue_Transaction5.14530.660.2218.531109.639210.74611.2818.55315.47410.09319.46959.271各類交易的平均響應(yīng)時(shí)間圖：可以看出隨著測試的進(jìn)行，交易相應(yīng)時(shí)間逐漸增大，最終導(dǎo)致交易超時(shí)而失敗。第二次測試第二次測試調(diào)整了交易處理邏輯，大大減少了用戶登錄的操作數(shù)目，每個(gè)用戶只執(zhí)行一次用戶登錄，然后執(zhí)行對應(yīng)的交易處理，交易過程中不再執(zhí)行用戶登錄操作。運(yùn)行的并發(fā)用戶數(shù)目如下圖：在用戶登錄過程中，交易的平均響應(yīng)時(shí)間如下圖：從圖中可以看出，隨著并發(fā)用戶數(shù)量的不斷增加，所有的交易的平均響應(yīng)時(shí)間都在加大，直到并發(fā)用戶數(shù)不再增加，這時(shí)候所有的交易相應(yīng)時(shí)間下降到一定的數(shù)值，并一直穩(wěn)定在這個(gè)數(shù)值左右。在第二次測試中，各類交易的平均響應(yīng)時(shí)間如下