軟件測(cè)試工具實(shí)用知識(shí)及其實(shí)例

軟件測(cè)試工具使用知識(shí)及其實(shí)例

組員：軟件工程軟件測(cè)試概述軟件測(cè)試工具基礎(chǔ)測(cè)試工具介紹軟件測(cè)試實(shí)例1.軟件測(cè)試概述簡(jiǎn)介軟件測(cè)試是軟件工程過(guò)程中的關(guān)鍵組件。軟件測(cè)試是軟件質(zhì)量保證的要素，可以將其描述為一個(gè)運(yùn)行程序以檢測(cè)錯(cuò)誤（如果有）的過(guò)程。測(cè)試的目的為了發(fā)現(xiàn)盡可能多的缺陷，不是為了說(shuō)明軟件中沒(méi)有缺陷。測(cè)試的常識(shí)與道理編程大師說(shuō)：沒(méi)有錯(cuò)誤的程序世間難求。（《編程之道》）你在學(xué)校里學(xué)過(guò)測(cè)試嗎？（讀到博士可能也不懂測(cè)試）你所在的企業(yè)重視測(cè)試嗎？（小公司程序員的技能更加全面）臨時(shí)抱佛腳行嗎？你以為有文檔模板就會(huì)測(cè)試了嗎？測(cè)試的常識(shí)與道理如果不懂得有效地進(jìn)行測(cè)試，你不僅得不到功勞，也沒(méi)人欣賞你的苦勞，你擁有最多的將只是疲勞。職業(yè)軟件工程師應(yīng)當(dāng)掌握需求開發(fā)、系統(tǒng)設(shè)計(jì)、編程、測(cè)試、維護(hù)所有技能。軟件測(cè)試原則完全測(cè)試程序是不可能的輸入量太大輸出結(jié)果太多軟件實(shí)現(xiàn)途徑太多軟件說(shuō)明書沒(méi)有客觀標(biāo)準(zhǔn)。從不同角度看，軟件缺陷的標(biāo)準(zhǔn)不同。軟件測(cè)試是有風(fēng)險(xiǎn)的行為測(cè)試無(wú)法顯示潛伏的軟件缺陷找到的軟件缺陷越多，就說(shuō)明軟件缺陷越多并非所有軟件缺陷都能修復(fù)軟件測(cè)試一項(xiàng)講究條理的技術(shù)專業(yè)軟件測(cè)試方法－黑盒和白盒白盒測(cè)試中（有時(shí)候稱為開盒測(cè)試），軟件測(cè)試員可以訪問(wèn)程序員的代碼，并通過(guò)檢查代碼來(lái)協(xié)助測(cè)試－可以看到盒子里面。一般在單元測(cè)試中采用白盒測(cè)試，用于測(cè)試模塊中所有可能的路徑、執(zhí)行所有循環(huán)并測(cè)試所有邏輯表達(dá)式。

黑盒測(cè)試則側(cè)重于軟件的整體功能。它不基于程序的內(nèi)部結(jié)構(gòu)而基于系統(tǒng)功能。猶如一個(gè)人站在黑盒子外面，只知道系統(tǒng)輸入一定數(shù)據(jù)，得到一定的輸出，而不必清楚這個(gè)黑盒子中進(jìn)行了哪些操作和運(yùn)算。軟件測(cè)試方法－靜態(tài)和動(dòng)態(tài)靜態(tài)檢查確保系統(tǒng)按照組織的標(biāo)準(zhǔn)和過(guò)程運(yùn)行，主要依賴于評(píng)審和非運(yùn)行的手段來(lái)檢查。通常包括需求評(píng)審、設(shè)計(jì)評(píng)審、代碼走查和代碼檢查。動(dòng)態(tài)檢查在生命周期中進(jìn)行測(cè)試（運(yùn)行）。通常包括單元測(cè)試、集成測(cè)試、系統(tǒng)測(cè)試、用戶的驗(yàn)收測(cè)試。測(cè)試技術(shù)2.軟件測(cè)試工具基礎(chǔ)什么是測(cè)試工具？輔助測(cè)試整個(gè)過(guò)程的工具軟件整個(gè)過(guò)程包括：靜態(tài)分析，測(cè)試計(jì)劃，測(cè)試設(shè)計(jì)，測(cè)試執(zhí)行，測(cè)試缺陷跟蹤，測(cè)試報(bào)告和質(zhì)量度量等單元測(cè)試工具的種類靜態(tài)分析工具代碼規(guī)范審核工具內(nèi)存和資源檢查工具測(cè)試數(shù)據(jù)生成工具測(cè)試框架工具測(cè)試結(jié)果比較工具測(cè)試度量工具測(cè)試文檔生成和管理工具自動(dòng)測(cè)試工具好處

速度和效率準(zhǔn)確度和精確度耐性、不休息、可重復(fù)局限

對(duì)軟件變更，尤其是代碼變更比較敏感先期的測(cè)試開發(fā)比較費(fèi)時(shí)有些測(cè)試結(jié)果無(wú)法用工具比較和分析有些工具的腳本/代碼會(huì)使程序運(yùn)行環(huán)境不純凈使用自動(dòng)測(cè)試工具的目的測(cè)試工具提高測(cè)試效率，節(jié)省測(cè)試成本測(cè)試設(shè)計(jì)提高測(cè)試效果，同時(shí)也可以提高測(cè)試效率，節(jié)省測(cè)試成本有些測(cè)試單靠手工很難完成壓力測(cè)試，模擬并發(fā)測(cè)試等多數(shù)的單元測(cè)試有些測(cè)試使用測(cè)試工具更合適回歸測(cè)試大量測(cè)試數(shù)據(jù)的生成、部分測(cè)試結(jié)果的比較缺陷管理和測(cè)試用例管理如何引入自動(dòng)測(cè)試工具-1選擇自動(dòng)測(cè)試工具是一個(gè)重要的步驟，所以一定要謹(jǐn)慎因?yàn)闇y(cè)試工作經(jīng)常會(huì)涉及到管理流程和開發(fā)流程的改變、涉及到人員的考評(píng)標(biāo)準(zhǔn)，所以它有時(shí)會(huì)對(duì)整個(gè)企業(yè)產(chǎn)生影響。測(cè)試工具應(yīng)該能夠管理測(cè)試過(guò)程和測(cè)試文檔，并生成各種測(cè)試報(bào)告。自動(dòng)測(cè)試工具應(yīng)該允許用戶把自動(dòng)測(cè)試數(shù)據(jù)和流程與手工的測(cè)試數(shù)據(jù)和流程結(jié)合到一起。如何引入自動(dòng)測(cè)試工具-2自動(dòng)測(cè)試工具應(yīng)該能夠?qū)I(yè)務(wù)需求與測(cè)試計(jì)劃、測(cè)試設(shè)計(jì)和測(cè)試結(jié)果相關(guān)聯(lián)，允許最終用戶根據(jù)測(cè)試結(jié)果來(lái)評(píng)估應(yīng)用程序的完成情況。自動(dòng)測(cè)試工具中的各功能模塊應(yīng)該緊密集成到一起，共享和重用測(cè)試數(shù)據(jù)，支持回歸測(cè)試。工具應(yīng)該可以很容易地利用過(guò)去的或者其他人員的測(cè)試資料。工具內(nèi)部應(yīng)該使用一致的腳本語(yǔ)言和數(shù)據(jù)格式。如何引入自動(dòng)測(cè)試工具-3自動(dòng)測(cè)試工具的體系結(jié)構(gòu)和文件格式應(yīng)該是開放的，可以很容易地與其他技術(shù)或工具進(jìn)行交互和集成。自動(dòng)測(cè)試工具廠商應(yīng)該有比較完善的科室培訓(xùn)和技術(shù)支持機(jī)制，能夠?yàn)樽詣?dòng)測(cè)試工具的實(shí)施提供咨詢和支持。3.測(cè)試工具介紹白盒測(cè)試工具JtestBoundsCheckerTrueCoverageC++TestCodeWizard黑盒測(cè)試工具WinRunnerAstraQuicktestRobotSilkTestLoadRunner集成測(cè)試軟件Panorama測(cè)試工具PanoramaPanorama是由8個(gè)產(chǎn)品和超過(guò)20種工具集成組成的一種自動(dòng)化軟件測(cè)試工具。一般用于：新系統(tǒng)開發(fā)過(guò)程中的質(zhì)量保證和單元測(cè)試；舊系統(tǒng)維護(hù)過(guò)程中質(zhì)量保證與測(cè)試；在工程中的系統(tǒng)分析。它也用來(lái)進(jìn)行QA（QUALITYASSURANCE）或者維護(hù)環(huán)境。Panorama產(chǎn)品背景及功能20OO-Test：測(cè)試用例生成和管理：1、記錄和生成測(cè)試用例2、最小化測(cè)試用例集3、測(cè)試覆蓋分析OO-Browser：系統(tǒng)結(jié)構(gòu)分析：1、生成系統(tǒng)中類和函數(shù)的繼承/調(diào)用關(guān)系圖2、實(shí)現(xiàn)代碼與關(guān)系圖的雙向?qū)?yīng)和跳轉(zhuǎn)3、顯示系統(tǒng)結(jié)構(gòu)測(cè)試覆蓋結(jié)果OO-Diagrammer：流程結(jié)構(gòu)分析：1、生成控制流程圖、邏輯流程圖、代碼流程圖2、實(shí)現(xiàn)代碼與流程圖的雙向?qū)?yīng)和跳轉(zhuǎn)3、顯示流程結(jié)構(gòu)測(cè)試覆蓋結(jié)果OO-SQA：質(zhì)量度量分析：1、設(shè)定質(zhì)量度量標(biāo)準(zhǔn)和指標(biāo)2、生成質(zhì)量度量數(shù)據(jù)3、顯示質(zhì)量度量結(jié)果OO-Analyzer：系統(tǒng)文檔生成：1、生成100多種設(shè)計(jì)文檔和質(zhì)量文檔OO-Playback：GUI測(cè)試過(guò)程回放：1、捕獲并記錄測(cè)試過(guò)程2、回放測(cè)試過(guò)程3、比較回放結(jié)果OO-MemoryChecker：內(nèi)存泄漏和非法使用檢測(cè)：1、檢測(cè)內(nèi)存泄漏和非法使用2、記錄錯(cuò)誤發(fā)生的語(yǔ)句位置3、生成檢測(cè)報(bào)告OO-DefectTracer：缺陷定位和追溯：1、檢測(cè)并記錄缺陷(包括死機(jī))發(fā)生的路徑和語(yǔ)句位置2、生成缺陷定位報(bào)告Panorama產(chǎn)品背景及功能產(chǎn)品功能應(yīng)用：新系統(tǒng)開發(fā)支持舊系統(tǒng)維護(hù)支持系統(tǒng)再工程支持其他1、設(shè)計(jì)支持-系統(tǒng)結(jié)構(gòu)/流程結(jié)構(gòu)自動(dòng)生成與維護(hù)-多重復(fù)雜性度量及分析-生成復(fù)雜性度量報(bào)告2、編碼及調(diào)試支持-確定編碼順序-保證編碼和設(shè)計(jì)的雙向?qū)?yīng)-生成代碼邏輯結(jié)構(gòu)-顯示測(cè)試路徑和頻率-顯示錯(cuò)誤(尤其是意外中止)的語(yǔ)句位置和執(zhí)行路徑3、測(cè)試支持-確定單元測(cè)試順序-生成并管理測(cè)試用例-執(zhí)行測(cè)試用例并顯示結(jié)果-測(cè)試分析和度量-支持回歸測(cè)試-生成質(zhì)量報(bào)告1、復(fù)雜性度量支持-多重復(fù)雜性度量及分析-生成復(fù)雜性度量報(bào)告2、代碼修改支持-系統(tǒng)結(jié)構(gòu)/流程結(jié)構(gòu)自動(dòng)生成與維護(hù)、編碼和設(shè)計(jì)的雙向?qū)?yīng)、錯(cuò)誤定位和追溯-加強(qiáng)代碼理解、避免修改的副作用-幫助代碼靜態(tài)分析技術(shù)的實(shí)施3、測(cè)試支持-確定單元測(cè)試順序-生成并管理測(cè)試用例-執(zhí)行測(cè)試用例并顯示結(jié)果-測(cè)試分析和度量-支持回歸測(cè)試-生成質(zhì)量報(bào)告1、系統(tǒng)設(shè)計(jì)分析-系統(tǒng)結(jié)構(gòu)/流程結(jié)構(gòu)自動(dòng)生成與維護(hù)，加強(qiáng)設(shè)計(jì)理解-編碼和設(shè)計(jì)的雙向?qū)?yīng)，加強(qiáng)代碼理解2、系統(tǒng)復(fù)雜性分析-多重復(fù)雜性度量及分析-生成復(fù)雜性度量報(bào)告3、系統(tǒng)性能分析-分析模塊執(zhí)行性能和執(zhí)行瓶頸4、文檔報(bào)告生成-生成多種系統(tǒng)分析報(bào)告和質(zhì)量報(bào)告1、支持工程管理和進(jìn)度估算-代碼文件和設(shè)計(jì)文檔的一致性維護(hù)-多種度量分析方法2、訓(xùn)練項(xiàng)目組新進(jìn)人員-理解系統(tǒng)結(jié)構(gòu)和流程結(jié)構(gòu)-方便閱讀和理解代碼3、支持驗(yàn)收評(píng)估-自動(dòng)生成設(shè)計(jì)和編碼文檔-自動(dòng)生成測(cè)試分析報(bào)告-自動(dòng)生成質(zhì)量度量報(bào)告22產(chǎn)品術(shù)語(yǔ)基礎(chǔ)-1基本概念1、塊，也叫基本段、可視段2、不可視段基本不可視段：if,switch高端循環(huán)邊界(執(zhí)行0次循環(huán)體)低端循環(huán)邊界(執(zhí)行1次循環(huán)體)3、段，也叫標(biāo)準(zhǔn)段包括可視段與基本不可視段4、增強(qiáng)段包括可視段和不可視段23應(yīng)用原理與環(huán)境-1使用流程.mak文件是C/C++編譯文件.hsi文件是Panorama內(nèi)部使用的輸入緩沖區(qū)文件，用于記載C/C++文件結(jié)構(gòu)信息.dbs文件是Panorama內(nèi)部使用的數(shù)據(jù)庫(kù)文件，用于記載C/C++文件分析和測(cè)試結(jié)果信息，一般與his文件配合使用24應(yīng)用原理與環(huán)境-2應(yīng)用原理25工具的局限性局限性1、中文顯示問(wèn)題2、使用自己的腳本技術(shù)，但這種腳本技術(shù)與其他的測(cè)試工具不兼容3、需要執(zhí)行.mak文件，而不是編譯C程序后生成的.obj文件4、僅能處理C/C++程序5、界面不夠友好4.軟件測(cè)試實(shí)例基本測(cè)試過(guò)程基本測(cè)試過(guò)程原則：盡早測(cè)試、經(jīng)常測(cè)試、充分測(cè)試。開發(fā)過(guò)程與測(cè)試過(guò)程：分析、測(cè)試、設(shè)計(jì)、測(cè)試、編碼、測(cè)試。測(cè)試計(jì)劃應(yīng)該是按照開發(fā)者的要求并用具體例子來(lái)描述一個(gè)測(cè)試計(jì)劃的層次結(jié)構(gòu)以及各個(gè)測(cè)試計(jì)劃相聯(lián)系的標(biāo)準(zhǔn)模版。測(cè)試方案設(shè)計(jì)良好的測(cè)試設(shè)計(jì)由以下的若干個(gè)方面組成：測(cè)試策略測(cè)試計(jì)劃測(cè)試說(shuō)明書測(cè)試規(guī)范這些方案適用于從單元測(cè)試到系統(tǒng)測(cè)試等各個(gè)級(jí)別的測(cè)試。測(cè)試設(shè)計(jì)需要根據(jù)軟件說(shuō)明書來(lái)進(jìn)行。單元測(cè)試概況定義：檢驗(yàn)程序最小單位有無(wú)錯(cuò)誤。一般在編碼之后，由開發(fā)人員完成。單元：軟件開發(fā)中的最小的獨(dú)立部分C語(yǔ)言中的單元：函數(shù)或者是子過(guò)程C++語(yǔ)言中的單元：類單元測(cè)試目前狀況：實(shí)施效果非常好，但是實(shí)施阻力比較大(主要是人員和管理因素)，一般只在關(guān)鍵的程序單元中實(shí)施有比較系統(tǒng)的理論和方法，但也依賴于系統(tǒng)的特殊性和開發(fā)人員的經(jīng)驗(yàn)有大量的輔助工具，開發(fā)人員也經(jīng)常自己開發(fā)測(cè)試代碼和測(cè)試工具主要使用白盒測(cè)試和靜態(tài)分析，也使用黑盒測(cè)試29單元測(cè)試流程測(cè)試計(jì)劃測(cè)試設(shè)計(jì)測(cè)試執(zhí)行測(cè)試記錄分析測(cè)試總結(jié)完畢缺陷跟蹤針對(duì)測(cè)試目標(biāo)，規(guī)定測(cè)試任務(wù)、資源分配、人員角色、進(jìn)度安排等。根據(jù)測(cè)試計(jì)劃，設(shè)計(jì)測(cè)試用例，包括：測(cè)試步驟、測(cè)試場(chǎng)景、測(cè)試代碼、測(cè)試數(shù)據(jù)(包括預(yù)期結(jié)果)。根據(jù)測(cè)試計(jì)劃，配置測(cè)試環(huán)境，并手動(dòng)或者自動(dòng)執(zhí)行測(cè)試設(shè)計(jì)。根據(jù)測(cè)試計(jì)劃，忠實(shí)地記錄測(cè)試執(zhí)行的過(guò)程和結(jié)果。分析測(cè)試記錄，如果發(fā)現(xiàn)與預(yù)期結(jié)果不同，確定并重現(xiàn)缺陷。檢查測(cè)試設(shè)計(jì)是否全部執(zhí)行完畢，缺陷是否全部關(guān)閉。記錄、分發(fā)、評(píng)估、關(guān)閉缺陷報(bào)告。分析測(cè)試過(guò)程和缺陷報(bào)告，評(píng)估測(cè)試質(zhì)量和測(cè)試效果，給出是否通過(guò)測(cè)試的建議。單元測(cè)試說(shuō)明書——測(cè)試計(jì)劃編號(hào)如：stb-tp0013標(biāo)題如：文字排版功能.字間距.MayCourse版本號(hào)如：V1.0執(zhí)行狀態(tài)如：未執(zhí)行修改記錄如：2003年7月28日；××編制/修改；原因測(cè)試目標(biāo)如：語(yǔ)句覆蓋測(cè)試人員如：××1負(fù)責(zé)執(zhí)行測(cè)試用例xxx；××2負(fù)責(zé)執(zhí)行測(cè)試用例xxx測(cè)試用例編號(hào)(多個(gè))如：stb-fg00021/stb-fg00031/stb-fg00035…被測(cè)試單元代碼位置如：$tag1/layout/MayCourse.cpp單元測(cè)試說(shuō)明書——測(cè)試用例編號(hào)如：stb-tp00014標(biāo)題如：測(cè)試“文字排版功能.字間距.MayCourse”版本號(hào)如：V1.3執(zhí)行狀態(tài)如：已經(jīng)執(zhí)行修改記錄如：2003年7月29日；××編制/修改；原因測(cè)試步驟如：配置運(yùn)行環(huán)境；輸入測(cè)試數(shù)據(jù)；執(zhí)行X功能/測(cè)試代碼；觀察/記錄XX測(cè)試場(chǎng)景如：在聯(lián)網(wǎng)的環(huán)境下測(cè)試代碼如：stb-tp00021(位置)/stb-tp00035(位置)…測(cè)試數(shù)據(jù)如：輸入數(shù)據(jù)(輸入文件、文字描述…)；預(yù)期結(jié)果(性能、圖片、文字描述…)單元測(cè)試說(shuō)明書——測(cè)試記錄編號(hào)如：stb-tp00015標(biāo)題如：記錄測(cè)試“文字排版功能.字間距.MayCourse”結(jié)果填寫記錄如：2003年7月30日；××填寫；原因測(cè)試用例編號(hào)如：stb-tp0015輸出結(jié)果如：圖片、文字描述測(cè)試觀察符合/不符合期望結(jié)果單元測(cè)試說(shuō)明書——缺陷跟蹤報(bào)告編號(hào)如：stb-tp00016標(biāo)題如：文字排版功能.字間距.MayCourse計(jì)算錯(cuò)誤版本號(hào)如：V1.3執(zhí)行狀態(tài)如：空白/草稿/提交/審批/分發(fā)/正在修改/修改完畢/正在確認(rèn)/關(guān)閉…修改記錄如：2003年7月31日；××編制/修改；原因測(cè)試環(huán)境和版本號(hào)碼、程序編寫人員錯(cuò)誤嚴(yán)重程度和優(yōu)先級(jí)別錯(cuò)誤詳細(xì)描述重現(xiàn)步驟和方式、