軟件測試標(biāo)準(zhǔn)規(guī)范

-.z.軟件測試標(biāo)準(zhǔn)標(biāo)準(zhǔn)目的為了確保軟件產(chǎn)品質(zhì)量，使產(chǎn)品能夠順利交付和通過驗(yàn)收，特編寫本文檔，以作參考適用范圍本文檔適用于工程開發(fā)過程中的單元測試、集成測試、系統(tǒng)測試、業(yè)務(wù)測試、驗(yàn)收測試以及一些專項(xiàng)測試。職責(zé)工程測試負(fù)責(zé)人組織編制"測試方案"、"測試方案"，指導(dǎo)和催促測試人員完成各階段的測試工作。工程組測試人員按照"測試方案"、"測試方案"完成所承當(dāng)?shù)臏y試任務(wù)，并按要求填寫"問題報告及維護(hù)記錄"。測試經(jīng)理依照確認(rèn)規(guī)程和準(zhǔn)則對工作產(chǎn)品進(jìn)展確認(rèn)，提出對確認(rèn)規(guī)程和準(zhǔn)則的修改意見工程負(fù)責(zé)人組織測試環(huán)境的建立。工程經(jīng)理審核負(fù)責(zé)控制整個工程的時間和質(zhì)量。研發(fā)人員確認(rèn)修改測試人員提交的bug。工作流程測試依據(jù)詳細(xì)設(shè)計是模塊測試的依據(jù)。因此設(shè)計人員應(yīng)向測試人員提供"系統(tǒng)需求規(guī)格書名書"、"詳細(xì)設(shè)計"、"概要設(shè)計"等有關(guān)資料。測試人員必須認(rèn)真閱讀，真正弄懂系統(tǒng)需求和詳細(xì)設(shè)計。制訂"測試方案"在測試之前，由工程負(fù)責(zé)人根據(jù)"測試方案"的要求，組織人員編制相應(yīng)的"測試方案"，"測試方案"應(yīng)包括以下內(nèi)容：測試目的；所需人員及相應(yīng)培訓(xùn)要求；測試環(huán)境、工具和測試軟件；測試用例、測試數(shù)據(jù)和預(yù)期的結(jié)果。單元測試工程開發(fā)實(shí)現(xiàn)過程中，每個程序單元〔程序單元的劃分視具體開發(fā)工具而定，一般定為函數(shù)或子程序級〕編碼調(diào)試通過后，要及時進(jìn)展單元測試。單元測試由單元開發(fā)者自己進(jìn)展，使用白盒測試方法，根據(jù)程序單元的控制流程，爭取到達(dá)分支覆蓋。對于交互式運(yùn)行的產(chǎn)品，不便于進(jìn)展自動測試的，可以采用功能測試的方法進(jìn)展。單元測試針對程序模塊，從程序的內(nèi)部構(gòu)造出發(fā)設(shè)計測試用例。多個模塊可以獨(dú)立進(jìn)展單元測試。單元測試內(nèi)容包括模塊接口測試、局部數(shù)據(jù)構(gòu)造測試、路徑測試、錯誤處理測試等；單元測試組織原則一遍根據(jù)開發(fā)進(jìn)度安排對已開發(fā)完成的單一模塊進(jìn)展測試；單元測試停頓標(biāo)準(zhǔn)：完成了所有規(guī)定單元的測試，單元測試中發(fā)現(xiàn)的bug已經(jīng)得到修改。集成測試編碼開發(fā)完成，工程組內(nèi)部應(yīng)進(jìn)展組裝測試。集成測試由工程負(fù)責(zé)人組織籌劃〔編寫測試方案、測試用例〕并實(shí)施。集成測試著重對各功能模塊之間的接口進(jìn)展測試，驗(yàn)證各功能模塊是否能協(xié)調(diào)工作、參數(shù)傳遞及功能調(diào)用是否正常。測試采用穿插方法，即個人開發(fā)的軟件應(yīng)由其他的工程組成員進(jìn)展測試。集成測試過程應(yīng)填寫"問題報告及維護(hù)記錄"，測試結(jié)果應(yīng)形成"測試報告"。系統(tǒng)測試在工程開發(fā)完成之后，應(yīng)對整個系統(tǒng)軟件和硬件進(jìn)展系統(tǒng)測試。對性能、可靠性、強(qiáng)健性、壓力承受力等方面分別進(jìn)展評價，以驗(yàn)證系統(tǒng)是否滿足規(guī)定的需要。系統(tǒng)測試由測試負(fù)責(zé)人組織籌劃〔編寫測試方案、測試用例〕并實(shí)施，系統(tǒng)測試過程應(yīng)形成"問題報告及維護(hù)記錄"。系統(tǒng)測試一般進(jìn)展如下幾種情況的測試：正常情況非正常情況破壞性測試邊界情況非法情況強(qiáng)度測試性能測試兼容性測試用戶友好性測試界面設(shè)計標(biāo)準(zhǔn)測試：光標(biāo)的初始位置字體是否統(tǒng)一字號是否符合規(guī)定標(biāo)題顏色按鈕的名稱是否標(biāo)準(zhǔn)界面布局是否合理，整體效果如何輸入值測試：數(shù)據(jù)類型數(shù)據(jù)長度約束條件是否滿足，是否完整TAB和Enter鍵是否起作用鍵盤操作能否全部代替鼠標(biāo)操作輸入〔光標(biāo)〕是否按照順序前進(jìn)按鈕測試：將按鈕放開和封閉是否嚴(yán)格、準(zhǔn)確，不能使用的按鈕必須封閉檢查"退出〞、"取消〞等具有共性按鈕的功能異常情況測試：在完成正常功能測試后，安正常處理的一樣操作順序，執(zhí)行與正常處理不同的動作例如正常處理中要求輸入日期的字段，這時輸入字符或數(shù)字正常處理中輸入字段有范圍要求，這時輸入超過范圍的值正常處理中用兩個值限定范圍，這時用一個值或不限定正常處理中要求用"Tab〞鍵，這時安"Enter〞鍵或其他鍵正常處理中單項(xiàng)選擇框、多項(xiàng)選擇框、下拉框等，十一偶那個非指定鍵操作使用不同于指定的按鈕操作業(yè)務(wù)測試在組裝測試與系統(tǒng)測試完畢后，均可由最終用戶或測試人員對系統(tǒng)進(jìn)展測試。業(yè)務(wù)測試著重測試業(yè)務(wù)流程，功能、用戶界面等方面。工程、測試負(fù)責(zé)人負(fù)責(zé)組織相關(guān)人員制定測試方案和測試用例，并進(jìn)展測試。測試的結(jié)果應(yīng)形成"問題報告及維護(hù)記錄"。驗(yàn)收測試驗(yàn)收測試的條件按照工程方案規(guī)定的驗(yàn)收測試進(jìn)度安排進(jìn)展測試準(zhǔn)備在驗(yàn)收測試前，各項(xiàng)內(nèi)部的測試活動都受到監(jiān)控并爭取執(zhí)行交付版本的要求按照集成測試用例完成了整個系統(tǒng)的集成測試集成版本滿足設(shè)計定義的各項(xiàng)功能、性能要求提交的數(shù)據(jù)庫腳本樣本需要完整，沒有冗余數(shù)據(jù)在集成測試中發(fā)現(xiàn)的bug已經(jīng)得到解決，各級缺陷修改率到達(dá)標(biāo)準(zhǔn)軟件需求分析說明書中定義的所有功能都已經(jīng)實(shí)現(xiàn)，性能指標(biāo)全部到達(dá)性能需求指標(biāo)提交階段性測試報告，包括功能和性能測試報告所有文檔齊備完整版本發(fā)布的準(zhǔn)則軟件產(chǎn)品通過了單元測試、集成測試、業(yè)務(wù)測試、系統(tǒng)測試、性能測試測試部提交文檔：測試方案、測試方案、測試用例、測試分析報告所有測試項(xiàng)必須符合以下標(biāo)準(zhǔn)致命錯誤：無功能錯誤：無功能缺陷：工程經(jīng)理、技術(shù)經(jīng)理、測試負(fù)責(zé)人審核通過界面缺陷：工程經(jīng)理、技術(shù)經(jīng)理、測試負(fù)責(zé)人審核通過建議：工程經(jīng)理、技術(shù)經(jīng)理、測試負(fù)責(zé)人審核通過以上幾項(xiàng)其中之一不滿足要求，視為不合格在產(chǎn)品交付和用戶驗(yàn)收之前，通過驗(yàn)收測試來確認(rèn)在規(guī)定的使用環(huán)境下整個產(chǎn)品的運(yùn)行情況是否滿足規(guī)定的要求。在產(chǎn)品交付之前，由指定的驗(yàn)收負(fù)責(zé)人組織制定測試方案和測試用例，主持驗(yàn)收。驗(yàn)收測試過程應(yīng)形成"問題報告及維護(hù)記錄"。用戶現(xiàn)場測試將軟件部署到用戶實(shí)際生產(chǎn)環(huán)境后，由于環(huán)境差異，需要在用戶現(xiàn)場進(jìn)展確認(rèn)測試，保證系統(tǒng)功能、性能完備，可正常運(yùn)行。測試內(nèi)容：根據(jù)軟件系統(tǒng)規(guī)模，準(zhǔn)備現(xiàn)場測試用例，涵蓋所有重要功能點(diǎn)，假設(shè)規(guī)模小，需要將全部功能點(diǎn)全部測試一遍對于后臺已定義好的工作流、功能欄目路徑以及用戶信息等數(shù)據(jù)，不可進(jìn)展修改和刪除操作，新增的測試數(shù)據(jù)也需要在測試完成后給予清楚重點(diǎn)檢查上傳、下載的數(shù)據(jù)是否可以正常的翻開或保存確認(rèn)界面美觀，根本信息和無錯誤考慮用戶實(shí)際的軟件環(huán)境和網(wǎng)絡(luò)環(huán)境，以客戶端最為復(fù)雜的軟硬件環(huán)境作為測試機(jī)器，檢查有無異常情況出現(xiàn)針對前期發(fā)現(xiàn)的bug進(jìn)展回歸測試，以保證發(fā)布版本為最新版本編寫測試文檔測試點(diǎn)將測試模塊分解成多個功能點(diǎn)，測試點(diǎn)應(yīng)涵蓋功能點(diǎn)，也涵蓋了正常測試和異常測試。輸入數(shù)據(jù)輸入數(shù)據(jù)包括界面輸入數(shù)據(jù)、數(shù)據(jù)庫的初始數(shù)據(jù)及其他外部輸入數(shù)據(jù)。特別是數(shù)據(jù)庫的初始所需屬性一一列出，全面是指：數(shù)據(jù)能到達(dá)模塊所涉及的全部功能，典型是指這個數(shù)據(jù)能充分反映功能特點(diǎn)。測試描述描述測試步驟，包括：操作員所執(zhí)行的動作〔包括鼠標(biāo)、鍵盤、加載外部數(shù)據(jù)等操作〕；系統(tǒng)的反響，包括：光標(biāo)定位、光標(biāo)聚焦、顯示字段值、按鈕的封閉和放開、功能鍵的封閉和放開、系統(tǒng)提示和系統(tǒng)消息等。預(yù)期輸出數(shù)據(jù)按準(zhǔn)備的輸入數(shù)據(jù)和設(shè)計要求的處理過程，模塊應(yīng)輸出的數(shù)據(jù)。輸出數(shù)據(jù)包括：屏幕輸出數(shù)據(jù)、輸出到數(shù)據(jù)庫的數(shù)據(jù)、輸出到其他外部介質(zhì)上的數(shù)據(jù)，并指出斷點(diǎn)結(jié)果或最終結(jié)果。實(shí)際輸出填寫本測試點(diǎn)程序運(yùn)行后的實(shí)際輸出。正確與否程序運(yùn)行后，實(shí)際輸出結(jié)果和預(yù)期輸出結(jié)果一致時，為正常，否則為不正常。測試結(jié)論填寫本次測試的結(jié)論，是合格或不合格。假設(shè)不合格時，應(yīng)總結(jié)存在的問題，可以讓修改者一目了然。缺陷管理缺陷的定義及其根本屬性缺陷是指在軟件開發(fā)過程中的針對軟件產(chǎn)品和開發(fā)過程中的問題，這些問題已經(jīng)影響或可能會影響軟件產(chǎn)品的質(zhì)量。缺陷應(yīng)該具備以下屬性，也就是往缺陷管理庫或者缺陷列表中提交的缺陷應(yīng)該具備以下屬性：屬性名稱描述缺陷標(biāo)識標(biāo)記*個缺陷的一組符號，每個缺陷必須有一個唯一的標(biāo)識缺陷類型根據(jù)缺陷的自然屬性劃分的缺陷種類缺陷驗(yàn)證程度因缺陷引起的故障對軟件產(chǎn)品的影響程度缺陷所處的模塊或子系統(tǒng)缺陷分步的模塊或子系統(tǒng)缺陷出現(xiàn)幾率指發(fā)現(xiàn)錯誤的幾率缺陷的重現(xiàn)步驟詳細(xì)的缺陷重現(xiàn)步驟附件與缺陷相關(guān)的附件〔截圖、附件、用例等〕備注對缺陷的其他描述缺陷分類根據(jù)缺陷的定義，將缺陷分為如以下：文檔缺陷：是指對文檔的靜態(tài)檢查過程中發(fā)現(xiàn)的缺陷。檢查活動包括同行評審、產(chǎn)品審計等。評審的缺陷要根據(jù)被評審對象的類型來確定，被評審的對象包括最終出產(chǎn)物和中間過程產(chǎn)出物，比方需求文檔、設(shè)計文檔、方案、報告、用例等代碼缺陷：是指對代碼進(jìn)展同行評審、審計或代碼走查過程中發(fā)現(xiàn)的缺陷測試缺陷：是指由測試活動發(fā)現(xiàn)的測試對象〔被測對象一般是指可運(yùn)行的代碼、系統(tǒng)，不包括靜態(tài)測試發(fā)現(xiàn)的問題〕的缺陷，測試活動包括單元測試、集成測試、系統(tǒng)測試、性能測試等過程缺陷：有稱為不符合項(xiàng)問題，是指通過過程審計、過程分析、管理評審、質(zhì)量評估、質(zhì)量審核等活動發(fā)現(xiàn)的關(guān)于過程的缺陷和問題。過程缺陷的發(fā)現(xiàn)者一般是測試人員、工程經(jīng)理等文檔缺陷分類缺陷分類描述描述不完整文檔內(nèi)容缺失，或文檔應(yīng)該包括的范圍沒有涵蓋不一致一致性問題有兩類：一是與源頭說明書不一致，比方需求和客戶業(yè)務(wù)需求不一致、設(shè)計與需求不一致等二是上下文或者與前提不一致描述錯誤文檔描述是錯誤的，不可實(shí)現(xiàn)或?qū)е洛e誤的輸出或結(jié)果功能問題該缺陷將會導(dǎo)致用戶功能的錯誤、不滿足、不可用不清楚或有歧義內(nèi)容的描述不清楚、不能準(zhǔn)確表達(dá)、或表達(dá)的意思有歧義邏輯錯誤內(nèi)容組織邏輯不清楚、邏輯錯誤接口問題與最終用戶接口問題、與外部系統(tǒng)的接口問題、內(nèi)部子系統(tǒng)或模塊的接口問題輸入輸出問題輸入輸出不完整、不正確、不可測試或驗(yàn)證不細(xì)化內(nèi)容還需要進(jìn)一步細(xì)化性能問題文檔的設(shè)計或?qū)崿F(xiàn)方式存在性能問題平安性問題文檔的設(shè)計或?qū)崿F(xiàn)方式存在平安性問題代碼缺陷分類缺陷分類描述常量變量定義問題不滿足設(shè)計或需求編寫代碼不符合標(biāo)準(zhǔn)條件判斷處理循環(huán)處理錯誤異常處理算法邏輯問題注釋問題代碼冗余性能問題系統(tǒng)測試缺陷分類缺陷類型描述功能錯誤影響了重要的特性、用戶界面、產(chǎn)品接口或全局?jǐn)?shù)據(jù)構(gòu)造，并且設(shè)計文檔需要爭取的變更。如邏輯、循環(huán)、遞歸、功能等缺陷構(gòu)造錯誤Web應(yīng)用程序構(gòu)造化頁面無法顯示，或者顯示錯誤腳本錯誤Web應(yīng)用程序當(dāng)中出現(xiàn)腳本錯誤，包括客戶端對數(shù)據(jù)進(jìn)展校驗(yàn)和運(yùn)算的各種情況下產(chǎn)生的錯誤頁面錯誤Web應(yīng)用程序頁面出現(xiàn)空、錯誤、死頁面文字錯誤Web應(yīng)用程序頁面出現(xiàn)的中外文拼寫、使用、以及不同語種頁面的編碼錯誤頁面圖形錯誤Web應(yīng)用程序頁面出現(xiàn)圖片內(nèi)容使用不當(dāng)，或者無法顯示ALT錯誤Web應(yīng)用程序頁面當(dāng)中超文本標(biāo)識語言、文本標(biāo)簽解釋錯誤排版錯誤Web應(yīng)用程序頁面排版不符合要求或者不符合使用習(xí)慣業(yè)務(wù)邏輯不合理應(yīng)用程序的實(shí)現(xiàn)流程和規(guī)定業(yè)務(wù)流程不一致，或者實(shí)現(xiàn)流程無法正確完成。包括流程數(shù)據(jù)的局部并行、爭用、同步等操作，引起的流程斷裂、死鎖、以及其他異常情況業(yè)務(wù)邏輯不方便應(yīng)用程序?qū)崿F(xiàn)流程在實(shí)際情況下雖然可以完成，但是存在不必要的反復(fù)、等待、冗余等影響使用效率的情況其他錯誤其他未分類錯誤建議系統(tǒng)改良建議缺陷等級定義缺陷的嚴(yán)重程度對以上所述的缺陷類型都是適合的，缺陷的嚴(yán)重程度反映的是對缺陷的發(fā)現(xiàn)對象可能造成的影響或后果來定義的。缺陷等級缺陷性質(zhì)系統(tǒng)中對應(yīng)的錯誤分類描述一級致命錯誤系統(tǒng)崩潰系統(tǒng)死鎖導(dǎo)致對被描述的主要對象的理解錯誤、不可行、不可運(yùn)轉(zhuǎn)、對業(yè)務(wù)和整個系統(tǒng)造成重大損失或損害；對使用、維護(hù)或保管人員有危險或不平安，以及對產(chǎn)品的根本功能有致命影響的缺陷二級嚴(yán)重缺陷嚴(yán)重錯誤對被描述的局部對象的理解或?qū)崿F(xiàn)錯誤，局部的模塊或系統(tǒng)不可行或不能運(yùn)轉(zhuǎn)或局部模塊和系統(tǒng)缺失，對整個系統(tǒng)有重大影響或可能造成局部的損失或損害；嚴(yán)重影響使用平安三級一般缺陷次要錯誤布局不合理文字錯誤系統(tǒng)中局部單元模塊或單個功能描述和實(shí)現(xiàn)有錯誤、有偏差、不一致或有缺失，不影響模塊的正常運(yùn)行，或有影響，但可以有替代的方法或防止方法四級微小缺陷微缺乏道根本不影響系統(tǒng)的運(yùn)行和功能的實(shí)現(xiàn)。但是與標(biāo)準(zhǔn)、標(biāo)準(zhǔn)和定義不一致五級建議缺陷新特性不在定義、標(biāo)準(zhǔn)、范圍的定義和約束之內(nèi)，但是從提出者來看是需要完善的建議缺陷優(yōu)先級定義缺陷優(yōu)先級描述特急需要立刻進(jìn)展修改加急一天到兩天之內(nèi)必須修改高介于中和加急之間中缺陷需要正常排隊(duì)等待修復(fù)或列入軟件發(fā)布清單低留到組后解決，如果工程的進(jìn)度跟緊張可以在產(chǎn)品發(fā)布以前不解決缺陷狀態(tài)定義缺陷狀態(tài)描述初始狀態(tài)〔New〕測試或開發(fā)人員提交一個新的缺陷，等待開發(fā)人員或工程經(jīng)理分配修改負(fù)責(zé)人打回〔FeedBack〕要求缺陷的報告者再次對缺陷進(jìn)展說明已分配〔Assigned〕是指已經(jīng)分配給屬主，等待修改。已解決〔Resolved〕缺陷被屬主修改，等待測試人員驗(yàn)證關(guān)閉〔Closed〕測試人員驗(yàn)證缺陷已經(jīng)修復(fù)重新翻開〔Reopen〕測試人員驗(yàn)證，缺陷沒有修改正確遺留〔Later〕經(jīng)工程經(jīng)理和技術(shù)經(jīng)理驗(yàn)證此缺陷在本版本中不用修改缺陷完成度缺陷完成度描述翻開〔Open〕缺陷沒有被解決已解決〔Fi*ed〕缺陷已經(jīng)修改遺留〔Suspended〕此缺陷步驟本階段解決重新翻開〔Reopen〕重新翻開*個缺陷不做修改〔Won’tfi*〕不對這個缺陷進(jìn)展修改重復(fù)〔Duplicate〕與*個缺陷重復(fù)需求如此經(jīng)理和開發(fā)人員經(jīng)過需求和設(shè)計的核實(shí)后決定不需要修改不可重現(xiàn)被指派的開發(fā)人員想要再現(xiàn)缺陷進(jìn)展修改個時候，發(fā)現(xiàn)缺陷始終不能再現(xiàn)缺陷管理流程處理機(jī)制退回機(jī)制假設(shè)在測試過程中發(fā)生如下情況，將系統(tǒng)退回到申請部門：經(jīng)過測試后，發(fā)現(xiàn)與需求說明規(guī)格說明書中定義的功能項(xiàng)存在較大的差異單一模塊，測試過程中發(fā)現(xiàn)缺陷輸了較多或者無法繼續(xù)進(jìn)展系統(tǒng)其它功能模塊的測試，繼續(xù)測試無意義測試過程中，頻繁死機(jī)或系統(tǒng)崩潰主業(yè)務(wù)流程出現(xiàn)斷點(diǎn)異常情況處理機(jī)制非