系統(tǒng)性能測(cè)試與WAS使用

1、系統(tǒng)性能測(cè)試方案1引言1.1編寫目的編寫本方案的目的是用于指導(dǎo)XXXX系統(tǒng)的性能測(cè)試,主要從測(cè)試環(huán)境、測(cè)試工具、測(cè)試策略、測(cè)試具體執(zhí)行方法、任務(wù)與進(jìn)度表等事先計(jì)劃和設(shè)計(jì)。 1.2適用圍XXXX系統(tǒng)性能測(cè)試組XXXX系統(tǒng)開發(fā)組XXXX系統(tǒng)性能優(yōu)化組1.3參考資料系統(tǒng)性能測(cè)試指南1.4術(shù)語和縮寫詞縮寫、術(shù)語 解 釋 性能測(cè)試（performance testing）運(yùn)行這些測(cè)試通常要確定程序運(yùn)行有多快，以便確定是否需要優(yōu)化 負(fù)載測(cè)試(load testing)通過在面臨很多資源要求的系統(tǒng)上運(yùn)行，攻擊被測(cè)程序或系統(tǒng)可靠性測(cè)試(reliability testing)持續(xù)進(jìn)行的性能測(cè)試，目標(biāo)是發(fā)現(xiàn)短序

2、列程序測(cè)試遺漏的情況           2系統(tǒng)介紹3測(cè)試環(huán)境3.1網(wǎng)絡(luò)拓?fù)鋱D3.2硬件環(huán)境3.3軟件環(huán)境4測(cè)試圍與主要容測(cè)試圍：如：XXXX系統(tǒng)各項(xiàng)性能指標(biāo)，反應(yīng)時(shí)間的性能測(cè)試、CPU、Memory的性能測(cè)試、負(fù)載的性能測(cè)試（壓力測(cè)試）、可靠性測(cè)試主要檢測(cè)容：如：1. 典型應(yīng)用的反應(yīng)時(shí)間2. 客戶端、服務(wù)器的CPU、Memory使用情況3. 服務(wù)器的響應(yīng)速度4. 系統(tǒng)支持的最優(yōu)負(fù)載數(shù)量5. 網(wǎng)絡(luò)指標(biāo)6. 系統(tǒng)可靠性測(cè)試5測(cè)試工具和測(cè)試方法5.1測(cè)試工具M(jìn)I（Mercury Interactive）公司的LoadRunner7.5.1創(chuàng)建虛擬用

3、戶腳本工具Virtual User GeneratorMI（Mercury Interactive）公司的LoadRunner7.5.1創(chuàng)建、運(yùn)行實(shí)際場(chǎng)景工具ControllerMI（Mercury Interactive）公司的LoadRunner7.5.1分析測(cè)試結(jié)果工具Analysis性能監(jiān)視器（MicroSoft Win2000自帶）5.2測(cè)試方法5.2.1反應(yīng)時(shí)間的性能測(cè)試處理點(diǎn)或事件期望的反應(yīng)時(shí)間實(shí)際反映時(shí)間平均值（至少3次）上次或上版本實(shí)際反映時(shí)間平均值（至少3次）                &#

4、160;                       測(cè)試結(jié)果分析：5.2.2CPU、Memory的性能測(cè)試條件：1.客戶端情況2. 應(yīng)用服務(wù)器情況3.數(shù)據(jù)庫服務(wù)器情況測(cè)試結(jié)果分析：5.2.3負(fù)載的性能測(cè)試（壓力測(cè)試輸入/動(dòng)作輸出/響應(yīng)能否正常運(yùn)行10個(gè)用戶操作     20個(gè)用戶操作     30個(gè)用戶操作     50個(gè)用戶操作     100個(gè)用戶操作      

5、;   測(cè)試結(jié)果分析：5.2.4可靠性測(cè)試 任務(wù)描述   連續(xù)運(yùn)行時(shí)間 建議72小時(shí) 故障發(fā)生的時(shí)刻 故障描述           統(tǒng)計(jì)分析 任務(wù)A無故障運(yùn)行的平均時(shí)間間隔 （CPU小時(shí)） 任務(wù)A無故障運(yùn)行的最小時(shí)間間隔 （CPU小時(shí)） 任務(wù)A無故障運(yùn)行的最大時(shí)間間隔 （CPU小時(shí)） 測(cè)試結(jié)果分析： 5.2.5網(wǎng)絡(luò)性能測(cè)試對(duì)網(wǎng)絡(luò)性能的測(cè)試，如網(wǎng)絡(luò)流量、每秒采樣數(shù)、網(wǎng)絡(luò)延遲等。6測(cè)試完成準(zhǔn)則系統(tǒng)滿足各項(xiàng)性能要求、能滿足實(shí)際使用情況并提供測(cè)試報(bào)告7任務(wù)與進(jìn)度表8提交的文檔和報(bào)告XXXX系統(tǒng)性能測(cè)試方案XXXX系統(tǒng)性能測(cè)試報(bào)告XX

6、XX系統(tǒng)性能測(cè)試腳本利用Web Application Stress Tool(WAS)做性能測(cè)試 摘要：這篇文章討論了性能測(cè)試對(duì)于成功發(fā)布一個(gè)網(wǎng)絡(luò)應(yīng)用的重要性，集中討論了微軟的 Web Application Stress (WAS) 這個(gè)用于測(cè)試性能的工具。 容介紹 ：使用 WAS 的好處 WAS 的缺陷 安裝 WAS 創(chuàng)建測(cè)試腳本 配置測(cè)試腳本 運(yùn)行測(cè)試腳本 結(jié)論：最好的習(xí)慣 介紹 性能測(cè)試是成功發(fā)布一個(gè)網(wǎng)絡(luò)應(yīng)用的關(guān)鍵因素。當(dāng)越來越多的用戶訪問你的站點(diǎn)時(shí)，清楚地知道你的應(yīng)用程序和你的服務(wù)器群是怎樣工作的就顯得非常重要了。 為了給你的網(wǎng)絡(luò)應(yīng)用程序模擬出那種類型的使用，你可以協(xié)同幾百甚至上千

7、的真實(shí)用戶在一段設(shè)計(jì)好的時(shí)間段里訪問你的站點(diǎn)，你也可以只與一個(gè)能復(fù)制這么多用戶負(fù)載的測(cè)試工具一起工作。 許多性能測(cè)試工具可以幫你的忙?；旧?，這些工具都允許你以有限的客戶端模擬大量的虛擬用戶，并發(fā)地訪問預(yù)先確定的頁面或的 URLs (Uniform Resource Locators) 。每一個(gè)虛擬用戶都能精確地仿效在真實(shí)瀏覽器和服務(wù)器之間進(jìn)行通訊協(xié)議。 在這篇文章里，我們將專注于其中一個(gè)這樣的工具： Microsoft® Web Application Stress (WAS) 工具。你可以在微軟的 Microsoft Windows® 2000 Resource Kit

8、 CD (WAS version 288) 里面找到這個(gè)工具。 注意 WAS 不能再從 Microsoft 的下載了， Visual Studio .NET 的企業(yè)架構(gòu)和企業(yè)開發(fā)版本都包含一個(gè)新的網(wǎng)絡(luò)壓力測(cè)試工具，這個(gè)工具叫做 Application Center Test ，是受 Microsoft 技術(shù)支持的工具。這個(gè)工具包含在 Visual Studio .NET 安裝時(shí)的 Enterprise Development Tools 部分。在寫這篇文章時(shí)， Application Center Test 還沒有正式公開發(fā)表。關(guān)于如何得到 Visual Studio .NET ， 使用 WA

9、S 的好處 首先，我們來討論一下使用 WAS 測(cè)試你的應(yīng)用程序的好處。 WAS 允許你以不同的方式創(chuàng)建測(cè)試腳本：你可以通過使用瀏覽器走一遍站點(diǎn)來錄制腳本，可以從服務(wù)器的日志文件導(dǎo)入 URL ，或者從一個(gè)網(wǎng)絡(luò)容文件夾選擇一個(gè)文件。當(dāng)然，你也可以手工地輸入 URL 來創(chuàng)建一個(gè)新的測(cè)試腳本。 不像其它的工具，你可以使用任何數(shù)量的客戶端運(yùn)行測(cè)試腳本，全部都有一個(gè)中央主客戶端來控制。在每一個(gè)測(cè)試開始前，主客戶機(jī)透明地執(zhí)行以下任務(wù)： ·與其他所有的客戶機(jī)通訊 ·把測(cè)試數(shù)據(jù)分發(fā)給所有的客戶端 ·在所有客戶端同時(shí)初始化測(cè)試 ·從所有的客戶端收集測(cè)試結(jié)果和報(bào)告 這個(gè)特性非

10、常重要，尤其對(duì)于要測(cè)試一個(gè)需要使用很多客戶端的服務(wù)器群的最大吞吐量時(shí)非常有用。 它的高可用性 WAS 是被設(shè)計(jì)用于模擬 Web 瀏覽器發(fā)送請(qǐng)求到任何采用了 1.0 或 1.1 標(biāo)準(zhǔn)的服務(wù)器，而不考慮服務(wù)器運(yùn)行的平臺(tái)。 除了它的易用性外， WAS 還有很多其它的有用的特性，包括： ·對(duì)于需要署名登錄的，它允許創(chuàng)建用戶。 ·允許為每個(gè)用戶存儲(chǔ) cookies 和 Active Server Pages (ASP) 的 session 信息 ·支持隨機(jī)的或順序的數(shù)據(jù)集，以用在特定的名字 - 值對(duì) · 支持帶寬調(diào)節(jié)和隨機(jī)延遲（“思考的時(shí)間”）以更真實(shí)地模擬顯示情

11、形。 ·支持 Secure Sockets Layer (SSL) 協(xié)議 ·允許 URL 分組和對(duì)每組的點(diǎn)擊率的說明 ·提供一個(gè)對(duì)象模型，可以通過 Microsoft Visual Basic® Scripting Edition (VBScript) 處理或者通過定制編程來達(dá)到開啟，結(jié)束和配置測(cè)試腳本的效果。 WSA 的缺陷 除了優(yōu)勢(shì)外， WAS 的確有一些缺陷存在。當(dāng)前知道的 bug 和有關(guān)事項(xiàng)都列在 WAS 的上了。以下是當(dāng)前 WAS 不支持的特性： ·以前面所發(fā)請(qǐng)求返回的結(jié)果為基礎(chǔ)，修改 URL 參數(shù)的能力。 ·運(yùn)行或模仿客戶

12、端邏輯的能力 ·為所分配的測(cè)試指定一個(gè)確定數(shù)量的測(cè)試周期的能力。 ·對(duì)擁有不同 IP 地址或域名的多個(gè)服務(wù)器的同時(shí)測(cè)試能力 注意 你可以使用多個(gè)主客戶端來同時(shí)測(cè)試多個(gè)服務(wù)器。然而，如果你想把所有測(cè)試結(jié)果聯(lián)系起來成為一個(gè)整體，則需要整理從各個(gè) WAS 數(shù)據(jù)庫得到的數(shù)據(jù) ·支持頁面在不同 IP 地址或域名間的重定向的能力 ·從 Web 瀏覽器直接記錄 SSL 頁面的能力 注意 WSA 已經(jīng)支持 SSL 頁面的測(cè)試，但是沒有記錄它們。你需要在腳本錄制完后，手工地為每個(gè)設(shè)計(jì)好的 URL 打開 SSL 支持 雖然對(duì)這些限制有一些相應(yīng)的解決辦法，但是如果你的應(yīng)用依賴

13、一個(gè)或多個(gè)這樣的功能的話，你也許不能完全享受 WAS 帶來的好處。 安裝 WAS WAS 要求 Microsoft Windows NT® 4.0 Service Pack 4 或以上版本，包括 Windows 2000 平臺(tái)。還要求 Internet Explorer 4.0 以上版本，與 Internet Explorer 5.0 工作更好。 要安裝 WAS ，首先下載最新版本的 setup.exe 程序，按照安裝向?qū)У闹甘??？截惒⒃谀愕臏y(cè)試機(jī)器上安裝。 注意 在本文介紹的所有步驟均以 WAS version 293 為藍(lán)本。 創(chuàng)建測(cè)試腳本 雖然你可以手動(dòng)地創(chuàng)建測(cè)試腳本， WAS

14、 可以通過記錄瀏覽器活動(dòng)，導(dǎo)入服務(wù)器日志文件或評(píng)估 Web 文件夾的容來幫助你創(chuàng)建測(cè)試腳本。在本文，我們將主要通過記錄覽器活動(dòng)的方式來創(chuàng)建測(cè)試腳本。采用這個(gè)方法而不用其它的方法有幾個(gè)原因，包括： ·記錄覽器活動(dòng)的方式以精確的方式捕捉所有用戶的交互活動(dòng)。任何從瀏覽器發(fā)往服務(wù)器的 URL 指向，應(yīng)用程序參數(shù)和 頭部信息都會(huì)被自動(dòng)地記錄在新的測(cè)試腳本里。 ·導(dǎo)入服務(wù)器日志文件的方法在站點(diǎn)已經(jīng)進(jìn)入投入使用階段，有了真實(shí)的用戶流量的情況下使用最好。但是，一個(gè)新的站點(diǎn)未必有這么多的真實(shí)用戶使用數(shù)據(jù)，進(jìn)一步說，可能還需要合并大量的日志文件來達(dá)到較好地體現(xiàn)用戶活動(dòng)的目的，這將需要?jiǎng)?chuàng)建大量的

15、測(cè)試腳本，將需要客戶端更多的系統(tǒng)資源。 ·選取 Web 容文件夾的方法最好用在測(cè)試多數(shù)是靜態(tài) HTML 文件的站點(diǎn)。這種方法允許在已有服務(wù)器的 Web 頁面的基礎(chǔ)上快速創(chuàng)建測(cè)試腳本。然而，這種方法并不捕捉任何由大多數(shù)應(yīng)用程序文件產(chǎn)生的參數(shù)，像 Common Gateway Interface (CGI) 程序或 Active Server Pages (ASP). 你只需要在主客戶機(jī)器創(chuàng)建和存儲(chǔ)你的測(cè)試腳本，當(dāng)測(cè)試由主客戶端初始化時(shí)，測(cè)試腳本會(huì)自動(dòng)地分發(fā)到其他的測(cè)試客戶端。 準(zhǔn)備測(cè)試客戶端機(jī)器 如果你正在你的部網(wǎng)通過代理服務(wù)器使用 WAS ，并且從部網(wǎng)外的客戶端發(fā)送請(qǐng)求頁面，而且你的

16、公司使用 Microsoft Proxy Server ，那么按照以下的步驟建立你的客戶端： 1.從開始菜單，指向設(shè)置 控制面板。雙擊管理工具圖標(biāo)，然后是服務(wù)圖標(biāo)。 2.雙擊 WebTool 服務(wù)打開屬性對(duì)話框 3. Log On As 標(biāo)簽，然后點(diǎn) This account 選擇按鈕添加你的網(wǎng)絡(luò)用戶名和密碼。使用 domainuser name 的格式 4.停止并重起 WebTool 服務(wù) 5.然后，安裝 Microsoft Windows Proxy client 2.0 ，也叫 Winsock Proxy 客戶端，可以在 Microsoft Proxy Server CD 里找到（更多有

17、關(guān)怎樣安裝和設(shè)置這個(gè)軟件的信息，請(qǐng)參考包含在 CD 里面的文檔） 6.對(duì)于希望使用代理服務(wù)器的每個(gè)測(cè)試客戶端，重復(fù)步驟 1-5 。 如果你的公司使用其他的代理服務(wù)器，就要安裝該代理服務(wù)器的代理客戶端。 準(zhǔn)備瀏覽器 在開始錄制一個(gè)腳本前，你需要準(zhǔn)備好你的瀏覽器，清除你的瀏覽器的緩沖 cache 。否則， WAS 也許不能記錄所需的瀏覽器活動(dòng)，因?yàn)闉g覽器可能從緩沖區(qū)而不是從所請(qǐng)求的服務(wù)器取得請(qǐng)求頁面。 關(guān)掉 IE 的緩沖區(qū) 1. 在工具菜單，點(diǎn) Internet 選項(xiàng) 2.點(diǎn)常規(guī)標(biāo)簽，然后點(diǎn)刪除文件。按鈕。 如果使用 IE5 。 0 或以上版本則不需要修改代理設(shè)置，因?yàn)?5 。 0 以上版本的 I

18、E 允許 WAS 改變這些設(shè)置。然而，對(duì)于 IE4 。 0 或早期版本， WAS 使用一個(gè)置的代理服務(wù)器來記錄瀏覽器活動(dòng)。 按 WAS 的需要指定代理設(shè)置 1.在工具菜單，點(diǎn) Internet 選項(xiàng) 2.在連接標(biāo)簽里，修改代理設(shè)置以使代理服務(wù)器指向 Localhost 并且使用端口 8000 3.不選對(duì)于本地地址不使用代理服務(wù)器 記錄腳本 在你的瀏覽器和客戶端已經(jīng)準(zhǔn)備好記錄后，做下面的操作： 1. 當(dāng)你第一次運(yùn)行 WAS 時(shí)，你會(huì)看到一個(gè) Create new script 的對(duì)話框（ Figure 1 ） , 詢問你以什么樣的方式創(chuàng)建一個(gè)新的測(cè)試腳本。 Figure 1. Creating

19、the script 2.點(diǎn) Record 按鈕 。如果之前你選擇了 Don't display at startup ， Create new script 將不會(huì)顯示出來。你可以在 Script 菜單選擇 Record 然后 Create . 3.在 Browser Recorder Step 1 of 2 對(duì)話框，你會(huì)被要求指定一些記錄設(shè)置。在這里，清除所有的選擇框點(diǎn) Next 繼續(xù)。 4.在 Browser Recorder Step 2 of 2 對(duì)話框，點(diǎn) Finish 。一個(gè)新的 IE 窗口會(huì)出現(xiàn)以便記錄瀏覽器活動(dòng)，同時(shí) WAS 會(huì)被置于記錄模式。 5.在新出現(xiàn)的 IE

20、窗口的地址欄，輸入你的目的站點(diǎn)的地址。在 WAS 的窗口你將看到 信息在跟隨你的瀏覽活動(dòng)而實(shí)時(shí)改變著。 6. 當(dāng)完成了你的站點(diǎn)瀏覽后，轉(zhuǎn)回 WAS 窗口 還處于記錄狀態(tài) 點(diǎn) Stop Recording 按鈕。就會(huì)終止記錄并產(chǎn)生一個(gè)新的測(cè)試腳本，如 Figure 2 所示。 Figure 2. The WAS program window after recording is finished 在右邊窗口的底部，你將看到一個(gè)列出所有腳本的列表。 對(duì)于需要安全連接的站點(diǎn)， WAS 支持 SSL 頁面。然而不允許 SSL 的記錄。要解決這些限制，你可以在服務(wù)器端關(guān)掉 SSL ，記錄腳本，然后再重新

21、激活服務(wù)器上的 SSL 。 利用Web Application Stress Tool(WAS)做性能測(cè)試（3） 建立各客戶端機(jī)器 WAS 允許你使用多個(gè)客戶端機(jī)器測(cè)試你的。當(dāng)一個(gè)測(cè)試開始時(shí)， WAS 會(huì)自動(dòng)地與所有客戶機(jī)取得聯(lián)系，向他們傳輸所有的測(cè)試信息（包括測(cè)試腳本項(xiàng)，頁面組和用戶定義信息），啟動(dòng)和停止他們的測(cè)試，然后收集測(cè)試結(jié)果。 使用其中一個(gè)客戶機(jī)器作為你的主客戶端。這個(gè)主客戶端應(yīng)該是你用來記錄和設(shè)置測(cè)試腳本的機(jī)器。 建立測(cè)試客戶端 1.在左邊窗口展開腳本信息 2.點(diǎn) Clients 節(jié)點(diǎn)在右邊窗口打開相應(yīng)的視圖 3.雙擊 Default 客戶端打開客戶端視圖 本地客戶端的記錄（在你工

22、作的主客戶端）已經(jīng)默認(rèn)被創(chuàng)建。 4.要想加入新的客戶端，在 Machine name 輸入 IP 地址或域名。 5.點(diǎn) Add 按鈕，新的客戶端會(huì)以 Connected 的狀態(tài)被加到表單中去。 6.重復(fù)步驟 5 和 6 ，直到全部客戶端機(jī)器都被加入。 當(dāng)添加新的客戶端時(shí)，盡量加那些大致一樣處理能力的機(jī)器。我們發(fā)現(xiàn)添加一個(gè)明顯比其他機(jī)器速度慢的機(jī)器比不添加它還要產(chǎn)生更多的 socket 錯(cuò)誤。 我們也發(fā)現(xiàn)如果我們?cè)O(shè)置一臺(tái)專注的機(jī)器作為主客戶端，但是這臺(tái)機(jī)器不參與產(chǎn)生負(fù)載。這樣的設(shè)置，我們會(huì)產(chǎn)生較少的 socket 錯(cuò)誤，而且測(cè)試結(jié)束得更快。 要這樣設(shè)置的話，從客戶端列表去掉主客戶端的名字。如果你

23、有一臺(tái)慢的機(jī)器而你不打算用做負(fù)載產(chǎn)生機(jī)器，它可以作為你的主客戶端而不會(huì)影響測(cè)試的輸出。注意，這臺(tái)主客戶端仍然做所有的產(chǎn)生報(bào)告和分發(fā)測(cè)試腳本的工作。一臺(tái)慢速度的主客戶端意味著你的測(cè)試啟動(dòng)和結(jié)束的速度會(huì)慢些，而且要更多的時(shí)間來產(chǎn)生報(bào)告。 設(shè)置性能計(jì)數(shù)器 WAS 可以與 Windows NT 性能監(jiān)視器結(jié)合簡(jiǎn)化測(cè)試數(shù)據(jù)的收集。你可以為每個(gè)腳本存儲(chǔ)你最喜歡的性能監(jiān)視計(jì)數(shù)器， WAS會(huì)像其它信息一樣收集它們的數(shù)據(jù)。 把性能監(jiān)視計(jì)數(shù)器加到你的腳本 1.在左邊的窗口展開腳本的信息 2.在右邊的窗口點(diǎn) Perf Counters 節(jié)點(diǎn)打開相應(yīng)的視圖 3.在 Collection Interval ，輸入收集時(shí)

24、間間隔。這是以秒計(jì)算的取樣時(shí)間。 4.點(diǎn) Add Counter 按鈕 5.從 Add counter to report 對(duì)話框，通過點(diǎn) Add 按鈕選機(jī)器，對(duì)象和你感興趣收集的計(jì)數(shù)器。 在 WAS 幫助文件的 "Common performance monitor counters" 部分有一系列的通用性能計(jì)數(shù)器的介紹。 如果你在使用這個(gè)特性時(shí)遇到什么問題，請(qǐng)參考 WAS 的基本知識(shí)介紹。 運(yùn)行測(cè)試腳本 一旦你設(shè)置好了測(cè)試腳本，就準(zhǔn)備好了在你的客戶機(jī)運(yùn)行腳本 啟動(dòng)主客戶端的測(cè)試 1.點(diǎn)需要測(cè)試的腳本 2.從 Scripts 菜單選 Run 也可以點(diǎn)工具欄上的 Play

25、按鈕運(yùn)行腳本。 檢查測(cè)試報(bào)告 測(cè)試完成后，你應(yīng)該先檢查測(cè)試報(bào)告看是否有 socket 或 錯(cuò)誤 從報(bào)告中檢查這些錯(cuò)誤 1.從 View 菜單選 Reports 打開相應(yīng)的視圖，見 Figure 7. Figure 7. Reports view screen 2.在左邊窗口，雙擊腳本打開測(cè)試報(bào)告，如果需要的話 3.點(diǎn)測(cè)試報(bào)告名（有測(cè)試運(yùn)行時(shí)間指定），如果需要的話。你會(huì)看到右邊窗口顯示報(bào)告的概要。 4.在報(bào)告概要，檢查 Socket Errors 部分是否有任何的 socket 有關(guān)的錯(cuò)誤（值不為 0 ）。這里列出每種 socket 錯(cuò)誤的解釋： · Connect 客戶端不能與服務(wù)器取得連接的次數(shù)。如果這個(gè)值偏高，檢查在客戶端與服務(wù)器之間產(chǎn)生的任何潛在的錯(cuò)誤。從每個(gè)客戶端 Ping 服務(wù)器或 t