測(cè)試和軟件質(zhì)量分析報(bào)告ppt課件

1、軟件測(cè)試方法和技術(shù)軟件測(cè)試方法和技術(shù) 第第16章章 測(cè)試和軟件質(zhì)量分析報(bào)告測(cè)試和軟件質(zhì)量分析報(bào)告 顧進(jìn)廣顧進(jìn)廣, Ph.D., Pweibo//simon企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST本章要處理的問題n單元測(cè)試采用什么方法和工具的？代碼行覆蓋率能否到達(dá)所設(shè)定的目的？n集成測(cè)試能否全面驗(yàn)證了一切接口及其參數(shù)？n測(cè)試用例能否經(jīng)過開發(fā)人員、產(chǎn)品經(jīng)理的嚴(yán)厲評(píng)審？n系統(tǒng)測(cè)試能否包含了性能、兼容性、平安性、恢復(fù)性等各項(xiàng)測(cè)試？假設(shè)執(zhí)行了，又是怎樣進(jìn)展的、結(jié)果如何？n能否完成了測(cè)試方

2、案所要求的各項(xiàng)測(cè)試內(nèi)容？n需求執(zhí)行的測(cè)試用例能否百分之百地完成了？n一切嚴(yán)重的Bug都修正了？企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST第十六章第十六章 測(cè)試和軟件質(zhì)量分析報(bào)告測(cè)試和軟件質(zhì)量分析報(bào)告 16.1 軟件產(chǎn)品的質(zhì)量度量軟件產(chǎn)品的質(zhì)量度量16.2 評(píng)價(jià)系統(tǒng)測(cè)試的覆蓋程度評(píng)價(jià)系統(tǒng)測(cè)試的覆蓋程度16.3 基于缺陷分析的產(chǎn)質(zhì)量量評(píng)價(jià)基于缺陷分析的產(chǎn)質(zhì)量量評(píng)價(jià)16.4 測(cè)試報(bào)告的詳細(xì)內(nèi)容測(cè)試報(bào)告的詳細(xì)內(nèi)容企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST16.1軟件產(chǎn)品的質(zhì)量度量軟件產(chǎn)品的質(zhì)量度量16.1.1 軟件度量及其過程軟件度量及其過程16.1.2 軟

3、件質(zhì)量的度量軟件質(zhì)量的度量16.1.3 質(zhì)量度量的統(tǒng)計(jì)方法質(zhì)量度量的統(tǒng)計(jì)方法企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST16.1.1 軟件度量及其過程軟件度量及其過程軟件度量就是對(duì)軟件所包含的各種屬性的量化表示。軟件度量可以提供對(duì)軟件過程和軟件產(chǎn)品的深化了解的衡量目的，使組織可以更好地做出決策以達(dá)成目的，軟件度量具有如下作用： 用數(shù)據(jù)目的闡明驗(yàn)收規(guī)范； 監(jiān)控工程進(jìn)度和預(yù)見風(fēng)險(xiǎn)； 分配資源時(shí)進(jìn)展量化平衡； 估計(jì)和控制產(chǎn)品的過程、本錢和質(zhì)量。企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST軟件度量的分類軟件度量的分類丈量丈量Measurement 、度量、度量M

4、etric 和目的和目的 (Indicator) 軟件度量的分類軟件度量的分類 軟件過程度量軟件過程度量 軟件工程度量軟件工程度量 產(chǎn)質(zhì)量量度量產(chǎn)質(zhì)量量度量企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST軟件度量的內(nèi)容軟件度量的內(nèi)容p 規(guī)模度量：代碼行數(shù)，功能點(diǎn)和對(duì)象點(diǎn)等規(guī)模度量：代碼行數(shù)，功能點(diǎn)和對(duì)象點(diǎn)等p 復(fù)雜度度量：軟件構(gòu)造復(fù)雜度目的。復(fù)雜度度量：軟件構(gòu)造復(fù)雜度目的。p 缺陷度量：協(xié)助確定產(chǎn)品缺陷變化的形狀，并指示修缺陷度量：協(xié)助確定產(chǎn)品缺陷變化的形狀，并指示修復(fù)缺陷活動(dòng)所需的任務(wù)量，分析產(chǎn)品缺陷分布的情況復(fù)缺陷活動(dòng)所需的任務(wù)量，分析產(chǎn)品缺陷分布的情況p 任務(wù)量度量任務(wù)量

5、度量p 進(jìn)度度量進(jìn)度度量p 消費(fèi)率度量：代碼行數(shù)人消費(fèi)率度量：代碼行數(shù)人月，測(cè)試用例數(shù)月，測(cè)試用例數(shù)/人人日；日；p 風(fēng)險(xiǎn)度量：風(fēng)險(xiǎn)度量： “風(fēng)險(xiǎn)發(fā)生的概率和風(fēng)險(xiǎn)發(fā)生的概率和“風(fēng)險(xiǎn)發(fā)生后所帶風(fēng)險(xiǎn)發(fā)生后所帶來的損失來的損失企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST軟件度量的分工軟件度量的分工p 度量任務(wù)小組由專職的度量研討人員和工程協(xié)調(diào)人員度量任務(wù)小組由專職的度量研討人員和工程協(xié)調(diào)人員組成，度量研討人員的主要職責(zé)是定義度量過程和指組成，度量研討人員的主要職責(zé)是定義度量過程和指點(diǎn)進(jìn)展度量活動(dòng)，并對(duì)數(shù)據(jù)進(jìn)展分析、反響；工程協(xié)點(diǎn)進(jìn)展度量活動(dòng)，并對(duì)數(shù)據(jù)進(jìn)展分析、反響；工程協(xié)調(diào)人員的

6、職責(zé)是為定義度量過程提供詳細(xì)的需求信息，調(diào)人員的職責(zé)是為定義度量過程提供詳細(xì)的需求信息，并擔(dān)任度量過程在工程組的推行。并擔(dān)任度量過程在工程組的推行。p 數(shù)據(jù)提供者普通是工程中的研發(fā)人員，有時(shí)還會(huì)包括數(shù)據(jù)提供者普通是工程中的研發(fā)人員，有時(shí)還會(huì)包括用戶效力人員和最終用戶。用戶效力人員和最終用戶。p IT支持者確定數(shù)據(jù)提供的格式與數(shù)據(jù)存儲(chǔ)方式，提供支持者確定數(shù)據(jù)提供的格式與數(shù)據(jù)存儲(chǔ)方式，提供數(shù)據(jù)搜集工具與數(shù)據(jù)存儲(chǔ)設(shè)備數(shù)據(jù)搜集工具與數(shù)據(jù)存儲(chǔ)設(shè)備 企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST軟件度量的過程軟件度量的過程p 識(shí)別目的。分析出度量的任務(wù)目的和列表，并由管理者識(shí)別目的。分析

7、出度量的任務(wù)目的和列表，并由管理者審核確認(rèn)審核確認(rèn)p 定義度量過程。定義其搜集要素、搜集過程、分析、反定義度量過程。定義其搜集要素、搜集過程、分析、反響過程、響過程、IT支持體系，為詳細(xì)的搜集活動(dòng)、分析、反響支持體系，為詳細(xì)的搜集活動(dòng)、分析、反響活動(dòng)和活動(dòng)和 IT設(shè)備、工具開發(fā)提供指點(diǎn)。設(shè)備、工具開發(fā)提供指點(diǎn)。p 搜集數(shù)據(jù)。運(yùn)用搜集數(shù)據(jù)。運(yùn)用IT支持工具進(jìn)展數(shù)據(jù)搜集任務(wù)，并按指支持工具進(jìn)展數(shù)據(jù)搜集任務(wù)，并按指定的方式審查和存儲(chǔ)。定的方式審查和存儲(chǔ)。p 數(shù)據(jù)分析與反響。根據(jù)數(shù)據(jù)搜集結(jié)果，按照已定義的分?jǐn)?shù)據(jù)分析與反響。根據(jù)數(shù)據(jù)搜集結(jié)果，按照已定義的分析方法進(jìn)展數(shù)據(jù)分析，完成規(guī)定格式的圖表，進(jìn)展反響

8、。析方法進(jìn)展數(shù)據(jù)分析，完成規(guī)定格式的圖表，進(jìn)展反響。p 過程改良。根據(jù)度量的分析報(bào)告，管理者基于度量數(shù)據(jù)過程改良。根據(jù)度量的分析報(bào)告，管理者基于度量數(shù)據(jù)做出決策。做出決策。企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST16.1.2 軟件質(zhì)量的度量軟件質(zhì)量的度量軟件可靠性度量、復(fù)雜度度量、缺陷度量和規(guī)模度量軟件可靠性度量、復(fù)雜度度量、缺陷度量和規(guī)模度量 Mic1f1c2f2cnfn Mi是一個(gè)軟件質(zhì)量要素是一個(gè)軟件質(zhì)量要素(如如SQRC層各項(xiàng)待計(jì)算值層各項(xiàng)待計(jì)算值)， fn是影響質(zhì)量要素的度量值如是影響質(zhì)量要素的度量值如SQDC層各項(xiàng)估計(jì)值，層各項(xiàng)估計(jì)值，cn是加權(quán)因子。是加權(quán)

9、因子。 企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST16.1.3 質(zhì)量度量的統(tǒng)計(jì)方法質(zhì)量度量的統(tǒng)計(jì)方法p 闡明不完好或闡明錯(cuò)誤闡明不完好或闡明錯(cuò)誤(IES)p 與客戶交流不夠所產(chǎn)生的誤解與客戶交流不夠所產(chǎn)生的誤解(MCC)p 故意與闡明偏離故意與闡明偏離(IDS)p 違反編程規(guī)范違反編程規(guī)范(VPS)p 數(shù)據(jù)表示有錯(cuò)數(shù)據(jù)表示有錯(cuò)(EDR)p 模塊接口不一致模塊接口不一致(IMI)p 設(shè)計(jì)邏輯有錯(cuò)設(shè)計(jì)邏輯有錯(cuò)(EDL)p 不完好或錯(cuò)誤的測(cè)試不完好或錯(cuò)誤的測(cè)試(IET)p 不準(zhǔn)確或不完好的文檔不準(zhǔn)確或不完好的文檔(IID)p 將設(shè)計(jì)翻譯成程序設(shè)計(jì)言語中的錯(cuò)誤將設(shè)計(jì)翻譯成程序設(shè)計(jì)

10、言語中的錯(cuò)誤(PLT)p 不明晰或不一致的人機(jī)界面不明晰或不一致的人機(jī)界面(HCI)p 雜項(xiàng)雜項(xiàng)(MIS)企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST質(zhì)量度量的統(tǒng)計(jì)方法質(zhì)量度量的統(tǒng)計(jì)方法 2總計(jì)(Ei)嚴(yán)重(Si)普通(Mi)微小(Ti)錯(cuò)誤數(shù)量百分比數(shù)量百分比數(shù)量百分比數(shù)量百分比IES29622.3%5528.2%9518.6%14623.4%MCC20415.3%189.2%8717.0%9915.9%IDS644.8%21.0%316.1%315.0%VPS342.6%10.5%193.7%142.2%EDR18213.7%3819.5%9017.6%548.7%IM

11、I826.2%147.2%214.1%477.5%EDL644.8%2010.3%173.3%274.3%IET14010.5%178.7%5110.0%7211.6%IID544.1%31.5%285.5%233.7%PLT876.5%2211.3%265.1%396.3%HCI423.2%42.1%275.3%111.8%MIS816.1%10.5%203.9%609.6%總計(jì)1330100%195100%512100%623100%企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST16.2 評(píng)價(jià)系統(tǒng)測(cè)試的覆蓋程度評(píng)價(jià)系統(tǒng)測(cè)試的覆蓋程度16.2.1 對(duì)軟件需求的估算對(duì)軟件需求

12、的估算16.2.2 基于需求的測(cè)試覆蓋評(píng)價(jià)基于需求的測(cè)試覆蓋評(píng)價(jià)16.2.3 基于代碼的測(cè)試覆蓋評(píng)價(jià)基于代碼的測(cè)試覆蓋評(píng)價(jià)企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST測(cè)試的評(píng)價(jià)測(cè)試的評(píng)價(jià)軟件測(cè)試評(píng)價(jià)主要有兩個(gè)的目的軟件測(cè)試評(píng)價(jià)主要有兩個(gè)的目的 量化測(cè)試進(jìn)程，判別測(cè)試進(jìn)展的形狀和進(jìn)度量化測(cè)試進(jìn)程，判別測(cè)試進(jìn)展的形狀和進(jìn)度 為測(cè)試或質(zhì)量分析報(bào)告生成所需的量化數(shù)據(jù)，如缺陷去為測(cè)試或質(zhì)量分析報(bào)告生成所需的量化數(shù)據(jù)，如缺陷去除率、測(cè)試覆蓋率等。除率、測(cè)試覆蓋率等。 例子：例子： 測(cè)試覆蓋項(xiàng)測(cè)試覆蓋項(xiàng)測(cè)試覆蓋率目的測(cè)試描畫測(cè)試覆蓋率目的測(cè)試描畫測(cè)試結(jié)果測(cè)試結(jié)果界面覆蓋符合需求界面圖標(biāo)、

13、信息區(qū)、形狀區(qū)靜態(tài)功能覆蓋 功能滿足需求動(dòng)態(tài)功能覆蓋 一切功能的轉(zhuǎn)換功能正確正常測(cè)試覆蓋 一切硬件軟件正常時(shí)處置異常測(cè)試覆蓋 硬件或軟件異常時(shí)處置不允許的操作測(cè)試終了判別企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST16.2.1 對(duì)軟件需求的估算對(duì)軟件需求的估算假設(shè)有假設(shè)有R個(gè)需求，功能需求的數(shù)目為個(gè)需求，功能需求的數(shù)目為F,非功能需求數(shù)為非功能需求數(shù)為N, 那么：那么：R= F + N.Q1 M/R其中其中Q1表示需求確實(shí)定性，表示需求確實(shí)定性，M是一切復(fù)審者都有一樣解釋的需求數(shù)目。是一切復(fù)審者都有一樣解釋的需求數(shù)目。功能需求的完好性功能需求的完好性Q2：Q2Fu/(NiN

14、s)其中其中Fu是獨(dú)一功能需求的數(shù)目，是獨(dú)一功能需求的數(shù)目，Ni是由規(guī)格設(shè)計(jì)闡明書定義的輸入個(gè)數(shù)，是由規(guī)格設(shè)計(jì)闡明書定義的輸入個(gè)數(shù)，Ns是是被表示的形狀的個(gè)數(shù)。被表示的形狀的個(gè)數(shù)。思索非功能需求思索非功能需求 :Q3Fc/(FcFnv)其中其中Fc是曾經(jīng)確以為正確的需求的個(gè)數(shù)，是曾經(jīng)確以為正確的需求的個(gè)數(shù)，F(xiàn)nv是尚未被確認(rèn)的需求的個(gè)數(shù)是尚未被確認(rèn)的需求的個(gè)數(shù) 企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST16.2.2 基于需求的測(cè)試覆蓋評(píng)價(jià)基于需求的測(cè)試覆蓋評(píng)價(jià)假定Tx已執(zhí)行的測(cè)試過程數(shù)或測(cè)試用例數(shù)，Rft是測(cè)試需求的總數(shù)：已執(zhí)行的測(cè)試覆蓋 TxRft假定Ts是已執(zhí)行的完全

15、勝利、沒有缺陷的測(cè)試過程數(shù)或測(cè)試用例數(shù)。勝利的測(cè)試覆蓋 TsRft企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST16.2.3 基于代碼的測(cè)試覆蓋評(píng)價(jià)基于代碼的測(cè)試覆蓋評(píng)價(jià)基于代碼的測(cè)試覆蓋評(píng)測(cè)是對(duì)被測(cè)試的程序代碼語句、途徑或條件的覆蓋率分析。這種測(cè)試覆蓋戰(zhàn)略對(duì)于平安至上的系統(tǒng)來說非常重要?；诖a的測(cè)試覆蓋經(jīng)過以下公式計(jì)算：已執(zhí)行的測(cè)試覆蓋 TcTnc 其中Tc是用代碼語句、條件分支、代碼途徑、數(shù)據(jù)形狀斷定點(diǎn)或數(shù)據(jù)元素名表示的已執(zhí)行工程數(shù)，TncTotal number of items in the code是代碼中的工程總數(shù)。 企業(yè)信息系統(tǒng)與語義Web研究室http:/O

16、NTOWEBWUST16.3 基于缺陷分析的產(chǎn)質(zhì)量量評(píng)價(jià)基于缺陷分析的產(chǎn)質(zhì)量量評(píng)價(jià)16.3.1 缺陷評(píng)測(cè)的基線缺陷評(píng)測(cè)的基線16.3.1 經(jīng)典的種子公式經(jīng)典的種子公式16.3.2 基于缺陷去除率的估算方法基于缺陷去除率的估算方法16.3.3 軟件產(chǎn)品性能評(píng)價(jià)軟件產(chǎn)品性能評(píng)價(jià)企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST16.3.1 缺陷評(píng)測(cè)的基線缺陷評(píng)測(cè)的基線為軟件產(chǎn)品的質(zhì)量設(shè)置起點(diǎn)，在基線的根底上再設(shè)置新的為軟件產(chǎn)品的質(zhì)量設(shè)置起點(diǎn)，在基線的根底上再設(shè)置新的目的，作為對(duì)系統(tǒng)評(píng)價(jià)能否經(jīng)過的規(guī)范目的，作為對(duì)系統(tǒng)評(píng)價(jià)能否經(jīng)過的規(guī)范條目條目目的目的低程度低程度缺陷去除效率95%70%

17、原有缺陷密度每個(gè)功能點(diǎn) 7超出風(fēng)險(xiǎn)之外的本錢0%=10%全部需求功能點(diǎn)=50%全部程序文檔每個(gè)功能點(diǎn)頁數(shù) 6員工離任率每年1 to 3%每年5%企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST已測(cè)試出的種子已測(cè)試出的種子Bug (s) 已測(cè)試出的非種子已測(cè)試出的非種子Bug (n)一切的種子一切的種子Bug (S) 全部的非種子全部的非種子Bug (N)那么可以推出程序的總那么可以推出程序的總Bug數(shù)為：數(shù)為：N = S * n /s其中其中n是所進(jìn)展實(shí)踐測(cè)試時(shí)發(fā)現(xiàn)的是所進(jìn)展實(shí)踐測(cè)試時(shí)發(fā)現(xiàn)的Bug總數(shù)。假設(shè)總數(shù)。假設(shè) n = N, 闡闡明一切的明一切的Bug已找出來，闡明做的測(cè)

18、試足夠充分。已找出來，闡明做的測(cè)試足夠充分。這種測(cè)試能否充分，可以用一個(gè)自信心指數(shù)來表示，即用一這種測(cè)試能否充分，可以用一個(gè)自信心指數(shù)來表示，即用一個(gè)百分比表示，值越大，闡明對(duì)產(chǎn)質(zhì)量量的自信心越高，最個(gè)百分比表示，值越大，闡明對(duì)產(chǎn)質(zhì)量量的自信心越高，最大值為大值為1。 = 1 if nNC = S/(S-N+1), if n=N16.3.2 經(jīng)典的種子公式經(jīng)典的種子公式=企業(yè)信息系統(tǒng)與語義Web研究室http:/ONTOWEBWUST16.3.3 基于缺陷去除率的估算方法基于缺陷去除率的估算方法F為描畫軟件規(guī)模用的功能點(diǎn)；D1為在軟件開發(fā)過程中發(fā)現(xiàn)的一切缺陷數(shù)；D2為軟件發(fā)布后發(fā)現(xiàn)的缺陷數(shù)；D為發(fā)現(xiàn)的總?cè)毕輸?shù)。因此，D=D1+D2。 質(zhì)量=D2/F； 缺陷注入率=D/F； 整體缺陷去除率=D1/D；缺陷源缺陷源潛在缺潛在缺陷陷去除效率去除效率(%)被交付的缺陷被交付的缺陷需求報(bào)告1.00770.23設(shè)計(jì)1.25850.19編碼1.75950.09文檔0.60800.12錯(cuò)誤修正0.40700.12合計(jì)5.0085