系統(tǒng)測(cè)試流程

1、系統(tǒng)測(cè)試控制程序1目的本程序描述了產(chǎn)品的系統(tǒng)測(cè)試流程。2適用范圍本程序適用于公司立項(xiàng)產(chǎn)品的系統(tǒng)測(cè)試過(guò)程的控制。3職責(zé)產(chǎn)品市場(chǎng)部：下達(dá)任務(wù)項(xiàng)目書。產(chǎn)品研發(fā)部：完成項(xiàng)目的研發(fā)和集成，修改軟件問(wèn)題。系統(tǒng)測(cè)試部：系統(tǒng)測(cè)試包括設(shè)計(jì)的驗(yàn)證測(cè)試和模擬客戶環(huán)境進(jìn)行的產(chǎn)品確認(rèn)測(cè)試。了 解產(chǎn)品需求，制定測(cè)試計(jì)劃，編寫測(cè)試用例，完成測(cè)試，記錄測(cè)試結(jié)果，提交測(cè)試報(bào)告； 提交產(chǎn)品問(wèn)題，跟蹤問(wèn)題直至問(wèn)題關(guān)閉；為發(fā)布后的產(chǎn)品提供后續(xù)測(cè)試服務(wù)。技術(shù)支持部：在產(chǎn)品的維護(hù)階段，反饋客戶對(duì)產(chǎn)品的測(cè)試新需求。Bugzilla維護(hù)人員：負(fù)責(zé)管理公司的 bugzilla服務(wù)器。4工作程序?qū)τ谟上到y(tǒng)測(cè)試部執(zhí)行驗(yàn)收測(cè)試的項(xiàng)目，執(zhí)行后面的工作

2、程序。4.1 收到項(xiàng)目任務(wù)書4.1.1 指派項(xiàng)目測(cè)試組成員系統(tǒng)測(cè)試部經(jīng)理收到產(chǎn)品市場(chǎng)部發(fā)出的項(xiàng)目任務(wù)書后，指派項(xiàng)目測(cè)試組成員。項(xiàng)目測(cè) 試組由leader和成員組成。系統(tǒng)測(cè)試部經(jīng)理將項(xiàng)目系統(tǒng)測(cè)試leader及其職責(zé)/權(quán)限用電子郵件的形式通知，被通知人包括：項(xiàng)目的產(chǎn)品經(jīng)理、項(xiàng)目的研發(fā)組leader、項(xiàng)目研發(fā)組成員、項(xiàng)目組測(cè)試成員、項(xiàng)目組其他成員、技術(shù)支持部經(jīng)理，并抄送給開(kāi)發(fā)部經(jīng)理，產(chǎn)品市 場(chǎng)部經(jīng)理。項(xiàng)目系統(tǒng)測(cè)試leader的職責(zé)如下：a.根據(jù)本測(cè)試流程的描述，組織項(xiàng)目測(cè)試組成員完成測(cè)試；b.制定測(cè)試計(jì)劃，組織編寫測(cè)試用例，執(zhí)行項(xiàng)目測(cè)試；c.負(fù)責(zé)維護(hù)項(xiàng)目系統(tǒng)測(cè)試任務(wù)計(jì)劃；d.監(jiān)督和控制項(xiàng)目的測(cè)試質(zhì)量

3、；組織成員完成維護(hù)階段的產(chǎn)品測(cè)試任務(wù)。4.1.2 建立項(xiàng)目測(cè)試目錄項(xiàng)目測(cè)試組leader收到項(xiàng)目測(cè)試職責(zé)的指派后，馬上為該項(xiàng)目建立測(cè)試目錄，并參考 項(xiàng)目測(cè)試目錄結(jié)構(gòu)和文件命名規(guī)范創(chuàng)建目錄結(jié)構(gòu)，并搜集相關(guān)文件。所有與該 項(xiàng)目測(cè)試相關(guān)的文檔要求保存到該目錄下。4.1.3 Bug跟蹤計(jì)劃項(xiàng)目測(cè)試組leader收到項(xiàng)目測(cè)試職責(zé)的指派后，開(kāi)始編寫B(tài)ug跟蹤計(jì)劃。Bug跟蹤計(jì)劃的編寫和批準(zhǔn)應(yīng)該在項(xiàng)目測(cè)試計(jì)劃完成前完成。項(xiàng)目產(chǎn)品經(jīng)理把參與本項(xiàng)目的相關(guān)人員及其郵件帳號(hào)提供給項(xiàng)目測(cè)試組leader。項(xiàng)目研發(fā)組leader把本項(xiàng)目研發(fā)組成員及其郵件帳號(hào)提供給項(xiàng)目測(cè)試組leader,包括項(xiàng)目子模塊名和研發(fā)人員的對(duì)應(yīng)

4、關(guān)系。技術(shù)支持部經(jīng)理把參與本項(xiàng)目的技術(shù)支持成員及其郵件帳號(hào)提供給項(xiàng)目測(cè)試組 leader。項(xiàng)目測(cè)試組leader根據(jù)模板Bug跟蹤計(jì)劃模板編寫 bug跟蹤計(jì)劃。如果需要，可 以重新定義模板中bug嚴(yán)重等級(jí)和優(yōu)先級(jí)的定義。項(xiàng)目測(cè)試組leader將編寫完的Bug跟蹤計(jì)劃發(fā)給本項(xiàng)目的產(chǎn)品、研發(fā)、測(cè)試、技術(shù)支 持成員確認(rèn)，并將確認(rèn)后的最終版本抄送各自部門經(jīng)理和bugzilla管理人員。Bugzilla管理人員根據(jù)“ Bug跟蹤計(jì)劃”在 bugzilla服務(wù)器上建立本項(xiàng)目，并將 Bug 跟蹤計(jì)劃中描述的角色和人員加入該項(xiàng)目。4.2 制定測(cè)試計(jì)劃4.2.1 編寫測(cè)試計(jì)劃項(xiàng)目測(cè)試組leader參考系統(tǒng)測(cè)試計(jì)

5、劃模板編寫測(cè)試計(jì)劃。測(cè)試計(jì)劃用于描述測(cè)試 目的、質(zhì)量目標(biāo)即測(cè)試通過(guò)的準(zhǔn)則、人員構(gòu)成、測(cè)試資源、測(cè)試范圍、測(cè)試活動(dòng)及其進(jìn) 度。項(xiàng)目測(cè)試組leader應(yīng)該在項(xiàng)目策劃階段完成測(cè)試計(jì)劃的編寫。項(xiàng)目系統(tǒng)測(cè)試組根據(jù)項(xiàng)目任務(wù)書中的原始需求、產(chǎn)品的主要應(yīng)用目的和SRS,確定本項(xiàng)目系統(tǒng)測(cè)試的范圍，并識(shí)別項(xiàng)目的測(cè)試重點(diǎn)；項(xiàng)目中將進(jìn)行功能重建/加強(qiáng)/改善的地方要作為測(cè)試重點(diǎn)。有關(guān)功能重建等信息可以從項(xiàng)目整體概要設(shè)計(jì)書或者SDP對(duì)重點(diǎn)開(kāi)發(fā)任務(wù)的計(jì)劃中獲得。項(xiàng)目系統(tǒng)測(cè)試組leader根據(jù)測(cè)試范圍，估計(jì)需要的測(cè)試資源、測(cè)試工作量。根據(jù)估計(jì) 的工作量、項(xiàng)目任務(wù)書中的時(shí)間計(jì)劃、以及研發(fā)的SDP草案制定系統(tǒng)測(cè)試活動(dòng)的時(shí)間計(jì)劃。

6、產(chǎn)品的硬件兼容測(cè)試應(yīng)計(jì)劃在最初兩個(gè)Beta版完成。4.2.2 評(píng)審測(cè)試計(jì)劃在原始需求、SRS、項(xiàng)目研發(fā)計(jì)劃均評(píng)審?fù)旰?，?xiàng)目測(cè)試組 leader組織下列人員參與測(cè)試計(jì)劃的評(píng)審：項(xiàng)目的產(chǎn)品經(jīng)理、項(xiàng)目研發(fā)組leader、項(xiàng)目測(cè)試組成員、以及產(chǎn)品市場(chǎng)部經(jīng)理、系統(tǒng)測(cè)試部經(jīng)理、研發(fā)經(jīng)理。測(cè)試計(jì)劃中的測(cè)試質(zhì)量目標(biāo)不得低于公司定義的測(cè)試質(zhì)量目標(biāo)，產(chǎn)品質(zhì)量目標(biāo)不得低 于公司定義的產(chǎn)品質(zhì)量目標(biāo)。測(cè)試計(jì)劃通過(guò)評(píng)審的標(biāo)準(zhǔn)：A.規(guī)定參與的所有人員均參與了評(píng)審；B.測(cè)試質(zhì)量目標(biāo)和產(chǎn)品質(zhì)量目標(biāo)不低于公司目標(biāo)，如果低于，需要由公司的管理者 代表批準(zhǔn)；C.識(shí)別的測(cè)試范圍、測(cè)試重點(diǎn)能夠達(dá)到制定的質(zhì)量目標(biāo)，估計(jì)的測(cè)試資源合理、時(shí)

7、間進(jìn)度符合項(xiàng)目總體進(jìn)度要求；D.識(shí)別了可能發(fā)生的風(fēng)險(xiǎn)，以及應(yīng)對(duì)措施；評(píng)審結(jié)果記錄在評(píng)審報(bào)告中。通過(guò)評(píng)審后，測(cè)試計(jì)劃由系統(tǒng)測(cè)試部經(jīng)理批準(zhǔn)。4.3 實(shí)施測(cè)試計(jì)劃4.3.1 測(cè)試計(jì)劃的跟蹤維護(hù)項(xiàng)目系統(tǒng)測(cè)試Leader跟蹤測(cè)試計(jì)劃的實(shí)施情況，識(shí)別與計(jì)劃的不符合程度、并估計(jì)不 符合對(duì)項(xiàng)目產(chǎn)品質(zhì)量、測(cè)試質(zhì)量、發(fā)布時(shí)間計(jì)劃產(chǎn)生的影響。當(dāng)估計(jì)會(huì)產(chǎn)生嚴(yán)重影響時(shí)， 發(fā)起會(huì)議討論應(yīng)對(duì)措施。會(huì)議參與人包括：項(xiàng)目的產(chǎn)品經(jīng)理、項(xiàng)目研發(fā)組leader、以及產(chǎn)品市場(chǎng)部經(jīng)理、系統(tǒng)測(cè)試部經(jīng)理、研發(fā)經(jīng)理。當(dāng)需要變更STP時(shí)，項(xiàng)目系統(tǒng)測(cè)試Leader執(zhí)行變更，并組織人員評(píng)審變更后的測(cè)試計(jì) 劃，評(píng)審標(biāo)準(zhǔn)見(jiàn)本文檔中“制定測(cè)試計(jì)劃”段的描

8、述，并由系統(tǒng)測(cè)試部經(jīng)理批準(zhǔn)。項(xiàng)目系 統(tǒng)測(cè)試Leader將變更后的測(cè)試計(jì)劃發(fā)給應(yīng)該參與評(píng)審的所有成員。4.3.2 編寫 TestCas琲口 CheckList“TestCasS和“ CheckList”是指導(dǎo)項(xiàng)目系統(tǒng)測(cè)試如何進(jìn)行的工具，它描述了被測(cè)試的內(nèi)容、測(cè)試的方法、應(yīng)用的測(cè)試工具名稱和版本、允收的標(biāo)準(zhǔn)。項(xiàng)目系統(tǒng)測(cè)試組leader按照測(cè)試計(jì)劃組織項(xiàng)目測(cè)試成員參考CheckList模板和TestCase模板編寫項(xiàng)目的CheckList 和 TestCasa編寫完成后，項(xiàng)目系統(tǒng)測(cè)試組leader組織項(xiàng)目測(cè)試組成員交叉評(píng)審后，組織項(xiàng)目的產(chǎn)品經(jīng)理、項(xiàng)目研發(fā)組leader、項(xiàng)目研發(fā)組成員、項(xiàng)目測(cè)試組成員

9、初步評(píng)審。在產(chǎn)品研發(fā)的“階段，研發(fā)提交 a版本給系統(tǒng)測(cè)試組，系統(tǒng)測(cè)試組根據(jù)該版本完善 TestCase和CheckList。如果發(fā)現(xiàn)文檔和 a版本有差異時(shí)，應(yīng)先向測(cè)試組leader說(shuō)明差異情況，在測(cè)試組leader認(rèn)可后可更新 TestCase和CheckList。項(xiàng)目測(cè)試組leader在產(chǎn)品第一個(gè) B版送測(cè)前組織TestCase和CheckListt的正式評(píng)審評(píng)審參與人包括：項(xiàng)目的產(chǎn)品經(jīng)理、項(xiàng)目研發(fā)組leader、項(xiàng)目研發(fā)組成員、項(xiàng)目系統(tǒng)測(cè)試組成員。通過(guò)評(píng)審的標(biāo)準(zhǔn)：Checklist要覆蓋所有測(cè)試范圍即所有需求，對(duì)于測(cè)試重點(diǎn)，TestCase和CheckList要覆蓋基本功能，擴(kuò)展功能；對(duì)于

10、非測(cè)試重點(diǎn)TestCase和CheckList要覆蓋重要功能和路徑；TestCase和CheckList覆蓋率能達(dá)到部門要求。評(píng)審結(jié)果填寫在 評(píng)審報(bào)告中。評(píng)審后的TestCase和CheckList是項(xiàng)目測(cè)試方法和允收標(biāo)準(zhǔn)的基線，進(jìn)入配置庫(kù)，并 按配置管理程序?qū)嵤┳兏目刂啤?.3.3 測(cè)試版本的測(cè)試項(xiàng)目研發(fā)組leader提交測(cè)試版本的產(chǎn)品發(fā)布報(bào)告。項(xiàng)目測(cè)試 leader將產(chǎn)品發(fā)布 報(bào)告保留到項(xiàng)目測(cè)試目錄下。項(xiàng)目測(cè)試組leader根據(jù)版本產(chǎn)品發(fā)布報(bào)告中的 Changelog,核查原有的測(cè)試用例， 根據(jù)需要更新測(cè)試用例，并按配置管理程序?qū)嵤┳兏目刂?。?xiàng)目測(cè)試組leader組織測(cè)試成員根據(jù) Te

11、stCase和CheckList執(zhí)行測(cè)試，并在測(cè)試過(guò)程 中記錄測(cè)試結(jié)果。發(fā)現(xiàn)問(wèn)題后，根據(jù) Bug跟蹤計(jì)劃和Bug跟蹤規(guī)程，使用專用的 bug報(bào)告系統(tǒng)向項(xiàng)目研發(fā)組報(bào)告問(wèn)題，報(bào)告內(nèi)容包括：?jiǎn)栴}的嚴(yán)重程度、發(fā)生的位置、重 現(xiàn)的方法等。研發(fā)組對(duì) bug的修改記錄、以及修改后測(cè)試人員驗(yàn)證的結(jié)果，均記錄在 bug 報(bào)告系統(tǒng)中。版本測(cè)試完成后，a）項(xiàng)目測(cè)試組成員提交自己執(zhí)行測(cè)試部分的：完成情況報(bào)告、測(cè)試結(jié)果詳細(xì)記b）項(xiàng)目測(cè)試組leader搜集下列數(shù)據(jù)：產(chǎn)品目前的質(zhì)量：各個(gè)嚴(yán)重等級(jí)Bug的數(shù)量，與目標(biāo)的差距；測(cè)試質(zhì)量：i. 測(cè)試Checklist對(duì)需求的覆蓋率；ii. 測(cè)試Checklist被執(zhí)行的比例；ii

12、i. 測(cè)試進(jìn)展和計(jì)劃進(jìn)度的差距；研發(fā)、測(cè)試質(zhì)量iv. 新Bug占當(dāng)前所有bug的比例；v. Bug未跟蹤比率=未跟蹤的bug占當(dāng)前所有bug的百分比；（未跟蹤的 bug指的是在以前版本被置為 NEW、REOPENED、NEEDINFO、 WANTHOLD 、WANTNOTBUG 的bug,其狀態(tài)在本版本測(cè)試結(jié)束時(shí)仍未 得到更新）。研發(fā)質(zhì)量：vi. 已關(guān)閉bug占當(dāng)前所有bug的比例；vii.當(dāng)前REOPENED bug占當(dāng)前所有bug的比例;c）項(xiàng)目測(cè)試組leader用E-mail形式向相關(guān)人員報(bào)告測(cè)試情況，報(bào)告內(nèi)容包括： 報(bào)告人名字、報(bào)告時(shí)間、版本測(cè)試完成情況、測(cè)試結(jié)果記錄、bug統(tǒng)計(jì)結(jié)果、

13、 產(chǎn)品質(zhì)量與目標(biāo)的差距，同時(shí)說(shuō)明被測(cè)版本的質(zhì)量是否合格、是否可以放行，并提請(qǐng)研發(fā)確定Review bug的時(shí)間。d）對(duì)于質(zhì)量合格的版本，項(xiàng)目的配置管理人員將對(duì)配置庫(kù)中該版本做合格品標(biāo) 識(shí)。項(xiàng)目研發(fā)組Leader組織研發(fā)成員了解bug,根據(jù)Bug跟蹤規(guī)程修改bug狀態(tài)，確 定 review bug 時(shí)間。項(xiàng)目研發(fā)組Leader根據(jù)Bug跟蹤規(guī)程組織 bug review meeting。項(xiàng)目測(cè)試組leader將所有與該版本相關(guān)的測(cè)試文檔保留到測(cè)試目錄下。4.3.4 項(xiàng)目測(cè)試版本的管理系統(tǒng)測(cè)試部只對(duì)項(xiàng)目的產(chǎn)品經(jīng)理提供本項(xiàng)目產(chǎn)品的版本，包括測(cè)試版本和最終版，不 對(duì)公司其他部門提供，也不對(duì)任何個(gè)人提供

14、。4.3.5 測(cè)試結(jié)束項(xiàng)目測(cè)試結(jié)束后，項(xiàng)目系統(tǒng)測(cè)試 Leader組織測(cè)試人員完成項(xiàng)目測(cè)試總結(jié)文檔。包括： 產(chǎn)品功能測(cè)試報(bào)告、軟件兼容報(bào)告、硬件兼容報(bào)告、性能測(cè)試報(bào)告、穩(wěn)定性測(cè)試報(bào)告、測(cè) 試活動(dòng)總結(jié)、產(chǎn)品實(shí)施手冊(cè)。測(cè)試活動(dòng)總結(jié)報(bào)告總結(jié)下列內(nèi)容：項(xiàng)目系統(tǒng)測(cè)試覆蓋的內(nèi)容是否達(dá)到計(jì)劃的預(yù)期，覆蓋比率是否達(dá)到質(zhì)量目標(biāo)？成功/失敗的原因；Bug跟蹤比率是否達(dá)到目標(biāo)？未達(dá)到原因是什么？測(cè)試完成時(shí)間、投入人力是否符合計(jì)劃，不符合情況的描述，原因；測(cè)試活動(dòng)的管理存在的問(wèn)題，以及經(jīng)驗(yàn)。產(chǎn)品實(shí)施手冊(cè)不同于用戶手冊(cè)，其從具體內(nèi)容和證據(jù)角度描述下列內(nèi)容：產(chǎn)品的物理構(gòu)成，功能構(gòu)成，相對(duì)以前版本的改進(jìn)，與以前版本的不同；產(chǎn)品各部分質(zhì)量的描述，強(qiáng)點(diǎn)，弱點(diǎn)；與競(jìng)爭(zhēng)產(chǎn)品的不同：功能特性不同，競(jìng)爭(zhēng)產(chǎn)品的強(qiáng)點(diǎn)，弱點(diǎn)；產(chǎn)品的兼容列表地址，推薦的搭配方案；對(duì)軟展件產(chǎn)品的安裝、配置、使用方法，存在的問(wèn)題，需要注意的點(diǎn)，性能調(diào)優(yōu)方法;產(chǎn)品所有已知問(wèn)題的解決辦法4.4 項(xiàng)目中止在產(chǎn)品的最終版本發(fā)布前，如果項(xiàng)目被中止，則中止本項(xiàng)目的系統(tǒng)測(cè)試。對(duì)于中止的項(xiàng)目，系統(tǒng)測(cè)試人員完成項(xiàng)目測(cè)試活動(dòng)總結(jié)報(bào)告，在報(bào)告中明確說(shuō)明項(xiàng)目 中途終止。被中止的產(chǎn)品應(yīng)提交給項(xiàng)目的產(chǎn)品經(jīng)理封存。4.5 產(chǎn)品最終版的發(fā)行項(xiàng)目的產(chǎn)品經(jīng)理根據(jù)客戶實(shí)際使用環(huán)境下測(cè)試/確認(rèn)的結(jié)果或模擬客戶實(shí)際環(huán)境的測(cè)試