2022面向大數(shù)據(jù)應(yīng)用的就緒可用軟件產(chǎn)品質(zhì)量要求和測(cè)試細(xì)則

面向大數(shù)據(jù)應(yīng)用的就緒可用軟件產(chǎn)品質(zhì)量要求和測(cè)試細(xì)則目 次前 言 II范圍 1規(guī)范性引用文件 1術(shù)語(yǔ)和定義 1縮略語(yǔ) 3符合性 3軟件質(zhì)量要求 3數(shù)據(jù)要求 8測(cè)試環(huán)境 9測(cè)試文檔集要求 9符合性評(píng)價(jià)細(xì)則 12I面向大數(shù)據(jù)應(yīng)用的就緒可用軟件產(chǎn)品質(zhì)量要求和測(cè)試細(xì)則范圍數(shù)據(jù)要求、測(cè)試環(huán)境、測(cè)試文檔集要求、符合性評(píng)價(jià)細(xì)則。本文件適用于面向大數(shù)據(jù)應(yīng)用的就緒可用軟件產(chǎn)品的質(zhì)量要求和測(cè)試。規(guī)范性引用文件（包括所有的修改單適用于本文件。GB/T20271-2006信息安全技術(shù)信息系統(tǒng)通用安全技術(shù)要求GB/T25000.51-2016（SQuaRE）51GB/T36344-2018信息技術(shù)數(shù)據(jù)質(zhì)量評(píng)價(jià)指標(biāo)術(shù)語(yǔ)和定義GB/T25000.51-2016界定的以及下列術(shù)語(yǔ)和定義適用于本文件。3.1需方acquirer從供方獲取或采購(gòu)產(chǎn)品或服務(wù)的利益相關(guān)方。需方可能是以下之一：買(mǎi)主、顧客、擁有者、采購(gòu)者。[來(lái)源:ISO/IEC12207:2008]3.2異常anomaly離。[來(lái)源：IEEEstd1044-2009]3.3應(yīng)用管理職能applicationadministrationfunction由用戶履行的職能，包括安裝、配置、備份、維護(hù)（打補(bǔ)丁和升級(jí)）、卸載等。13.4符合性評(píng)價(jià)conformityevaluation對(duì)產(chǎn)品、過(guò)程或服務(wù)達(dá)到規(guī)定要求的程度所進(jìn)行的系統(tǒng)性考核。[來(lái)源：ISO/IECGUIDE2：2004]3.5符合性評(píng)價(jià)報(bào)告conformityevaluationreport說(shuō)明對(duì)RUSP實(shí)施評(píng)價(jià)的行為和結(jié)果的文檔。3.6面向大數(shù)據(jù)應(yīng)用的就緒可用軟件產(chǎn)品readytousesoftwareproductbigdataapplicationoriented無(wú)論是否付費(fèi)，任何用戶可以不經(jīng)歷開(kāi)發(fā)活動(dòng)就能獲得的基于大數(shù)據(jù)相關(guān)應(yīng)用的軟件產(chǎn)品。3.7就緒可用軟件產(chǎn)品readytousesoftwareproduct無(wú)論是否付費(fèi),任何用戶可以不經(jīng)歷開(kāi)發(fā)活動(dòng)就能獲得的軟件產(chǎn)品。3.8最終用戶enduser最終受益于RUSP功能的個(gè)人。注：最終用戶可以是軟件產(chǎn)品的正式操作員;或是臨時(shí)用戶,例如公眾中的一員。[來(lái)源：GB/T25000.1—2010，4.14]3.9故障fault計(jì)算機(jī)程序中不正確的步驟、過(guò)程或數(shù)據(jù)定義。[來(lái)源：IEEEstd610.12—1998]3.10測(cè)試用例testcase為某個(gè)特定目標(biāo)(例如,為演練具體的程序路徑或驗(yàn)證對(duì)特定需求的依從性)而開(kāi)發(fā)的輸入、執(zhí)行條件以及預(yù)期結(jié)果的集合。[來(lái)源：IEEEstd610.12—1998]23.11測(cè)試文檔集testdocumentation測(cè)試活動(dòng)特有的文檔匯集。[來(lái)源：IEEEstd610.12—1998]縮略語(yǔ)下列縮略語(yǔ)適用于本文件。RUSP：就緒可用軟件產(chǎn)品（ReadytoUseSoftwareProduct）RUSPBDAO：面向大數(shù)據(jù)應(yīng)用的就緒可用軟件產(chǎn)品（ReadytousesoftwareproductBigdataapplicationoriented）符合性RUSPBDAO應(yīng)符合以下條件：678測(cè)試期間發(fā)現(xiàn)的異常，可在產(chǎn)品發(fā)布前消除；若該異常違背產(chǎn)品廣告宣傳的性能，且不能消除，則應(yīng)取消此種性能聲稱；可認(rèn)為該異常是可接受的。軟件質(zhì)量要求功能性測(cè)試項(xiàng)試用例設(shè)計(jì)應(yīng)滿足以下幾個(gè)方面：每個(gè)功能特性應(yīng)被一個(gè)或多個(gè)正常測(cè)試用例和一個(gè)或多個(gè)被認(rèn)可的異常測(cè)試用例所覆蓋；測(cè)試用例的輸入應(yīng)至少包括有效等價(jià)類值、無(wú)效等價(jià)類值和邊界數(shù)據(jù)值；逐項(xiàng)測(cè)試大數(shù)據(jù)就緒可用軟件產(chǎn)品設(shè)計(jì)說(shuō)明規(guī)定的功能特性；測(cè)試軟件產(chǎn)品配置項(xiàng)之間及軟件配置項(xiàng)與硬件之間的接口；測(cè)試軟件產(chǎn)品輸出及其格式。功能完備性功能集對(duì)指定的任務(wù)、用戶目標(biāo)、數(shù)據(jù)質(zhì)量，應(yīng)覆蓋功能用戶的需求。注1：功能可以在需求規(guī)格說(shuō)明、設(shè)計(jì)規(guī)格說(shuō)明、用戶手冊(cè)中進(jìn)行指定。注2：當(dāng)軟件產(chǎn)品無(wú)法實(shí)現(xiàn)指定的功能時(shí)，即檢測(cè)到缺少的功能。注3：功能包括對(duì)數(shù)據(jù)質(zhì)量的要求。3功能正確性在特定的使用條件下，應(yīng)提供具有所需精度的正確結(jié)果。注1：不正確的功能是指功能無(wú)法給出達(dá)到特定預(yù)期目標(biāo)的合理、可接受的結(jié)果。注2：開(kāi)發(fā)方或維護(hù)方可能通過(guò)評(píng)審或測(cè)試檢查單個(gè)功能，并決定功能能否為需求規(guī)格說(shuō)明中定義的特定的目標(biāo)提供正確的結(jié)果。在這種情況下，正確性的程度是由每個(gè)功能決定的。功能適合性在指定條件下使用時(shí)，應(yīng)促使指定的任務(wù)和目標(biāo)實(shí)現(xiàn)。依從性產(chǎn)品應(yīng)遵循與功能性相關(guān)的標(biāo)準(zhǔn)、約定或法規(guī)以及類似規(guī)定。測(cè)試過(guò)程下列測(cè)試過(guò)程適用于RUSPBDAO的功能性測(cè)試：根據(jù)需求規(guī)格說(shuō)明書(shū)、概要設(shè)計(jì)等相關(guān)軟件設(shè)計(jì)說(shuō)明書(shū)，分析并拆分軟件產(chǎn)品功能點(diǎn)；100%；根據(jù)軟件產(chǎn)品相關(guān)設(shè)計(jì)說(shuō)明，編制每條測(cè)試用例的執(zhí)行步驟、測(cè)試結(jié)果；執(zhí)行每條測(cè)試用例；檢驗(yàn)執(zhí)行結(jié)果是否滿足測(cè)試用例預(yù)期結(jié)果；根據(jù)執(zhí)行結(jié)果填寫(xiě)執(zhí)行記錄和缺陷報(bào)告。可靠性成熟性軟件或組件在正常運(yùn)行時(shí)應(yīng)滿足可靠性要求。注：系統(tǒng)或軟件能力、運(yùn)行場(chǎng)景或功能的比例等。容錯(cuò)性余度、平均故障通告時(shí)間等。注：內(nèi)部或外部容錯(cuò)性測(cè)度與發(fā)生運(yùn)行故障或違反規(guī)定接口時(shí)，軟件產(chǎn)品維持規(guī)定性能水平的能力有關(guān)。易恢復(fù)性發(fā)生中斷或失效時(shí)，軟件能夠恢復(fù)直接受影響的數(shù)據(jù)并重建期望的系統(tǒng)狀態(tài)。注：測(cè)試指標(biāo)可包括軟件從失效中恢復(fù)需要的時(shí)間，以及定期備份數(shù)據(jù)項(xiàng)的比例。測(cè)試過(guò)程下列測(cè)試過(guò)程適用于可靠性：軟件產(chǎn)品操作過(guò)程中出現(xiàn)誤操作，包括填寫(xiě)表單超出限制范圍，違反業(yè)務(wù)邏輯等；記錄檢測(cè)過(guò)程中軟件產(chǎn)品出現(xiàn)的故障及故障糾正數(shù)量；4情況；軟件產(chǎn)品在多臺(tái)終端上，通過(guò)自動(dòng)化測(cè)試手段持續(xù)運(yùn)行，查看其運(yùn)行情況。易用性用戶使用。（使用質(zhì)量的子集來(lái)進(jìn)行指定或測(cè)量?？杀孀R(shí)性應(yīng)確保用戶能夠辨識(shí)軟件是否適合其要求。易學(xué)性定目標(biāo)，應(yīng)可為指定用戶使用。注：測(cè)試指標(biāo)可包括用戶指導(dǎo)完整性、輸入字段的默認(rèn)值設(shè)置、差錯(cuò)信息的易理解性、用戶界面的自解釋性等。易操作性軟件應(yīng)具有易于操作和控制的屬性。注：測(cè)試指標(biāo)可包括操作的一致性、消息的正確性、功能的易定制性、用戶界面的易定制性、監(jiān)視能力、撤銷操作能力、消息分類的易理解性、外觀的一致性、輸入設(shè)備的支持性等。易訪問(wèn)性在指定的使用周境中，為了達(dá)到指定的目標(biāo)，軟件應(yīng)被具有最廣泛的特征和能力的個(gè)體所使用。測(cè)試過(guò)程下列測(cè)試過(guò)程適用于易用性測(cè)試：查看用戶手冊(cè)內(nèi)容，操作軟件產(chǎn)品過(guò)程中查看頁(yè)面布局，查看輸入輸出項(xiàng)的易理解性；查看用戶手冊(cè)、培訓(xùn)手冊(cè)、系統(tǒng)文檔，查看文檔能否幫助用戶學(xué)習(xí)操作；用鍵盤(pán)快捷鍵；檢測(cè)過(guò)程中查看軟件產(chǎn)品頁(yè)面所有的元素是否美觀，具備吸引性。性能效率測(cè)試項(xiàng)RUSPBDAO時(shí)，應(yīng)測(cè)試其所能承受壓力的強(qiáng)度，包括但不限于：響應(yīng)時(shí)間：服務(wù)端響應(yīng)事務(wù)的平均時(shí)長(zhǎng)；每秒處理事務(wù)數(shù)：服務(wù)端每秒處理事務(wù)的數(shù)量；事務(wù)通過(guò)率：服務(wù)端處理事務(wù)的成功率；5CPUCPU內(nèi)存占用率：服務(wù)端在處理事務(wù)時(shí)，服務(wù)器內(nèi)存占用情況；I/O時(shí)間特性軟件時(shí)間特性應(yīng)滿足以下幾方面要求：軟件執(zhí)行其功能時(shí)，其響應(yīng)時(shí)間、處理時(shí)間及吞吐量應(yīng)滿足用戶需求；應(yīng)滿足規(guī)定目標(biāo)；定目標(biāo)；測(cè)試吞吐量特性，測(cè)試軟件單位時(shí)間內(nèi)完成作業(yè)的平均數(shù)量應(yīng)滿足規(guī)定目標(biāo)。容量軟件參數(shù)的最大限度應(yīng)滿足需求。吞吐量和數(shù)據(jù)庫(kù)規(guī)模。資源利用性軟件執(zhí)行其功能時(shí)，所使用的資源數(shù)量和類型應(yīng)滿足需求。測(cè)試指標(biāo)包括處理器平均占用率、內(nèi)存平均占用率、I/O測(cè)試過(guò)程下列測(cè)試過(guò)程適用于性能（效率）測(cè)試：模擬測(cè)試場(chǎng)景操作步驟，與服務(wù)器建立連接，傳輸數(shù)據(jù)，并能得到正確的服務(wù)器反饋；回放操作步驟，模擬并發(fā)用戶操作典型應(yīng)用場(chǎng)景，向服務(wù)器施加壓力；統(tǒng)計(jì)模擬多人操作時(shí)，服務(wù)端響應(yīng)能力和服務(wù)器資源占用情況。維護(hù)性易分析性（變更軟件的一個(gè)或多個(gè)部分改部分。注：測(cè)試指標(biāo)可包括系統(tǒng)日志完整性、診斷功能有效性和診斷功能的充分性等。模塊化由多個(gè)獨(dú)立組件組成的系統(tǒng)或計(jì)算機(jī)程序，其中一個(gè)組件的變更對(duì)其他組件的影響應(yīng)最小。注：測(cè)試指標(biāo)可包括組件間的耦合度、圈復(fù)雜度的充分性等。易測(cè)試性應(yīng)能夠?yàn)檐浖蚪M件建立測(cè)試準(zhǔn)則，并通過(guò)測(cè)試執(zhí)行來(lái)確定測(cè)試準(zhǔn)則是否被滿足有效性和效率。注：測(cè)試指標(biāo)可包括測(cè)試功能的完整性、測(cè)試獨(dú)立性和測(cè)試的重啟動(dòng)性。6可重用性資產(chǎn)應(yīng)能被用于多個(gè)系統(tǒng)或其他資產(chǎn)建設(shè)。注：測(cè)試指標(biāo)可包括系統(tǒng)中可重復(fù)使用資產(chǎn)的數(shù)量、符合所要求編碼規(guī)則的模塊的數(shù)量。測(cè)試過(guò)程下列測(cè)試過(guò)程適用于維護(hù)性測(cè)試：查看服務(wù)端日志，檢測(cè)軟件產(chǎn)品分析診斷能力；查看軟件產(chǎn)品圖形化頁(yè)面及權(quán)限配置頁(yè)面，檢測(cè)軟件產(chǎn)品可配置能力；查看軟件產(chǎn)品配置參數(shù)元文件，檢測(cè)軟件產(chǎn)品修改能力；使用主流測(cè)試工具，檢測(cè)軟件產(chǎn)品對(duì)主流測(cè)試工具的支持?？梢浦残赃m應(yīng)性軟件應(yīng)能有效地、高效地適應(yīng)不同的或演變的硬件、軟件或者其他運(yùn)營(yíng)（或使用）環(huán)境。注：測(cè)試指標(biāo)可包括硬件環(huán)境的適應(yīng)性、系統(tǒng)軟件環(huán)境的適應(yīng)性、運(yùn)營(yíng)環(huán)境的適應(yīng)性。易替換性在相同環(huán)境中，軟件應(yīng)能替換另一個(gè)相同用途的指定軟件產(chǎn)品。注：測(cè)試指標(biāo)可包括使用相似性、產(chǎn)品質(zhì)量等價(jià)性、功能的包容性和數(shù)據(jù)復(fù)用/導(dǎo)入能力。易安裝性在指定環(huán)境中，軟件應(yīng)能成功地安裝和/或卸載。注：測(cè)試指標(biāo)可包括安裝的時(shí)間效率和安裝的靈活性。測(cè)試過(guò)程下列測(cè)試過(guò)程適用于可移植性測(cè)試：在多操作系統(tǒng)環(huán)境下安裝部署軟件產(chǎn)品服務(wù)端，檢測(cè)其運(yùn)行情況；使用多種模式安裝，包括服務(wù)端和移動(dòng)終端；安裝完成是否影響其他軟件產(chǎn)品的正常運(yùn)行。軟件產(chǎn)品應(yīng)能對(duì)數(shù)據(jù)進(jìn)行保護(hù),并對(duì)訪問(wèn)控制實(shí)行權(quán)限管理，只允許授權(quán)用戶訪問(wèn)。注：測(cè)試指標(biāo)可包括訪問(wèn)控制性、數(shù)據(jù)加密正確性和加密算法的強(qiáng)度等。完整性軟件產(chǎn)品應(yīng)能識(shí)別并防止對(duì)數(shù)據(jù)的未授權(quán)訪問(wèn)。軟件產(chǎn)品應(yīng)具有基于先進(jìn)加密算法的防篡改機(jī)制，識(shí)別并阻止對(duì)計(jì)算機(jī)程序或數(shù)據(jù)的篡改。防入侵性軟件產(chǎn)品應(yīng)能識(shí)別并阻止惡意入侵事件，并通報(bào)給相關(guān)授權(quán)用戶。7抗抵賴性軟件產(chǎn)品應(yīng)能確保事件發(fā)生后應(yīng)可以被證實(shí)且不可被否認(rèn)。注：測(cè)試指標(biāo)可包括使用數(shù)字簽名，處理需要抗抵賴性事務(wù)的比例?？珊瞬樾攒浖a(chǎn)品的運(yùn)行活動(dòng)應(yīng)可以被唯一地追溯到該實(shí)體地。注：測(cè)試指標(biāo)可包括對(duì)用戶訪問(wèn)系統(tǒng)或數(shù)據(jù)地審計(jì)跟蹤地完整程度，系統(tǒng)日志存儲(chǔ)在穩(wěn)定存儲(chǔ)器中地時(shí)間占要求地存儲(chǔ)時(shí)間的比例。真實(shí)性軟件產(chǎn)品在對(duì)處理對(duì)象或資源的合法身份標(biāo)識(shí)應(yīng)能夠被識(shí)別并證實(shí)其符合性。注：測(cè)試指標(biāo)可包括鑒別機(jī)制的充分性和鑒別規(guī)則的符合性等。測(cè)試過(guò)程信息安全性的測(cè)試過(guò)程應(yīng)符合GB/T20271-2006中5.2.6的規(guī)定。兼容性共存性品造成負(fù)面影響。注：測(cè)試指標(biāo)可包括當(dāng)規(guī)定的其他軟件產(chǎn)品與該軟件產(chǎn)品共享環(huán)境，而不會(huì)對(duì)質(zhì)量特性或功能產(chǎn)生負(fù)面影響的比?；ゲ僮餍詢蓚€(gè)或多個(gè)軟件或組件應(yīng)能夠交換信息并使用已交換的信息。注：測(cè)試指標(biāo)可包括數(shù)據(jù)格式可交換性、數(shù)據(jù)交換協(xié)議充分性、外部接口充分性等。測(cè)試過(guò)程兼容性測(cè)試過(guò)程包括以下步驟：卸載、啟動(dòng)、運(yùn)行等操作，分別查看在終端上的運(yùn)行情況；CPU數(shù)據(jù)要求GB/T36344-2018數(shù)據(jù)存儲(chǔ)量應(yīng)符合面向大數(shù)據(jù)應(yīng)用的就緒可用軟件產(chǎn)品測(cè)試用例的需求。測(cè)試數(shù)據(jù)應(yīng)均衡分布在計(jì)算機(jī)集群的節(jié)點(diǎn)上。8測(cè)試環(huán)境硬件環(huán)境面向大數(shù)據(jù)應(yīng)用的就緒可用軟件產(chǎn)品硬件測(cè)試環(huán)境應(yīng)包括以下幾方面要求：應(yīng)符合面向大數(shù)據(jù)應(yīng)用的就緒可用軟件產(chǎn)品測(cè)試用例需求的分布式計(jì)算機(jī)節(jié)點(diǎn)集群；CPU可用軟件產(chǎn)品的數(shù)據(jù)存儲(chǔ)、計(jì)算和集群通訊等需求；CPU高性能的處理基礎(chǔ)。軟件環(huán)境面向大數(shù)據(jù)應(yīng)用的就緒可用軟件產(chǎn)品軟件測(cè)試環(huán)境應(yīng)包括以下幾方面要求：需求；應(yīng)搭建面向大數(shù)據(jù)應(yīng)用的就緒可用軟件產(chǎn)品測(cè)試用例需求的大數(shù)據(jù)處理框架，包括但不限于Hadoop、Spark測(cè)試文檔集要求目的測(cè)試文檔集的目的是證實(shí)軟件符合第6章、第7章的規(guī)定。一致性測(cè)試文檔集中的每個(gè)文檔所包含的信息應(yīng)是正確的并且是可驗(yàn)證的。測(cè)試文檔集中的每個(gè)文檔不應(yīng)自相矛盾，并且不應(yīng)與產(chǎn)品說(shuō)明和用戶文檔集矛盾。內(nèi)容要求測(cè)試文檔集應(yīng)包含以下幾個(gè)文檔：測(cè)試計(jì)劃；測(cè)試說(shuō)明；測(cè)試結(jié)果(報(bào)告)。測(cè)試文檔集中的每個(gè)文檔，應(yīng)包括以下幾方面內(nèi)容：標(biāo)題；產(chǎn)品標(biāo)識(shí)；修改歷史或說(shuō)明該文檔演變的任何其他元素；目次或?qū)?nèi)容的說(shuō)明；該文檔正文中引用的文檔的標(biāo)識(shí)符；有關(guān)作者和審查者的信息；f)術(shù)語(yǔ)表。9方法6用戶文檔集中說(shuō)明的所有功能，均應(yīng)經(jīng)過(guò)至少一個(gè)測(cè)試用例的測(cè)試。測(cè)試用例應(yīng)能驗(yàn)證軟件與用戶文檔集中的陳述相符。應(yīng)指明測(cè)試用例的設(shè)計(jì)方法。注：可能的設(shè)計(jì)方法有：邊界值分析、檢查表、數(shù)據(jù)流分析、故障插入、容量測(cè)試。安裝規(guī)程應(yīng)經(jīng)過(guò)測(cè)試用例測(cè)試。在產(chǎn)品說(shuō)明和用戶文檔集中指明的操作限制，均應(yīng)經(jīng)過(guò)測(cè)試用例測(cè)試。對(duì)違法輸入應(yīng)經(jīng)過(guò)測(cè)試用例測(cè)試。例。測(cè)試計(jì)劃要求通過(guò)-失敗準(zhǔn)則測(cè)試計(jì)劃應(yīng)明確用于判定測(cè)試結(jié)果是否符合要求的符合性準(zhǔn)則。測(cè)試環(huán)境測(cè)試計(jì)劃應(yīng)明確將要進(jìn)行的測(cè)試所處的軟件測(cè)試環(huán)境。進(jìn)度測(cè)試計(jì)劃應(yīng)明確整個(gè)測(cè)試的進(jìn)度。風(fēng)險(xiǎn)測(cè)試計(jì)劃應(yīng)識(shí)別、更新和記錄測(cè)試活動(dòng)中存在的風(fēng)險(xiǎn)，并提供應(yīng)對(duì)措施。人力資源測(cè)試計(jì)劃中應(yīng)明確測(cè)試活動(dòng)所需的人力資源情況。工具和環(huán)境資源測(cè)試計(jì)劃中應(yīng)明確測(cè)試活動(dòng)所需的工具，必要的測(cè)試環(huán)境。測(cè)試說(shuō)明要求測(cè)試用例說(shuō)明對(duì)每個(gè)測(cè)試用例的說(shuō)明應(yīng)包括以下幾個(gè)方面：測(cè)試目標(biāo)；唯一性標(biāo)識(shí)符；測(cè)試的輸入數(shù)據(jù)和測(cè)試邊界；詳細(xì)實(shí)施步驟；系統(tǒng)的預(yù)期行為；測(cè)試用例的預(yù)期輸出；10結(jié)果判定準(zhǔn)則；用于判定測(cè)試用例的肯定或否定結(jié)果的準(zhǔn)則。測(cè)試規(guī)程測(cè)試規(guī)程應(yīng)包括以下幾個(gè)步驟：測(cè)試準(zhǔn)備；開(kāi)始和執(zhí)行測(cè)試所必需的動(dòng)作；記錄測(cè)試結(jié)果所必需的動(dòng)作；停止和最終重啟動(dòng)測(cè)試的條件和動(dòng)作；在軟件被糾正之后,對(duì)于所涉及的功能和任何相關(guān)的功能,應(yīng)有一種重新測(cè)試的規(guī)程。執(zhí)行報(bào)告應(yīng)包含以下內(nèi)容：全部測(cè)試用例結(jié)果；已正式按照測(cè)試計(jì)劃執(zhí)行的測(cè)試用例；測(cè)試用例的標(biāo)識(shí)符；測(cè)試執(zhí)行日期；測(cè)試人員姓名和職責(zé)；測(cè)試用例