GB/T 30975-2014信息技術(shù)基于計算機(jī)的軟件系統(tǒng)的性能測量與評級

ICS35080

L77.

中華人民共和國國家標(biāo)準(zhǔn)

GB/T30975—2014/ISO/IEC147561999

:

信息技術(shù)基于計算機(jī)的

軟件系統(tǒng)的性能測量與評級

Informationtechnology—Measurementandratingof

performanceofcomputer-basedsoftwaresystems

(ISO/IEC14756:1999,IDT)

2014-09-03發(fā)布2015-02-01實施

中華人民共和國國家質(zhì)量監(jiān)督檢驗檢疫總局發(fā)布

中國國家標(biāo)準(zhǔn)化管理委員會

GB/T30975—2014/ISO/IEC147561999

:

目次

前言

…………………………Ⅲ

引言

…………………………Ⅳ

范圍

1………………………1

符合性

2……………………2

規(guī)范性引用文件

3…………………………3

術(shù)語和定義

4………………3

縮略語和符號

5……………7

縮略語

5.1………………7

符號

5.2…………………7

測量

6………………………8

配置需求

6.1……………8

用戶模擬

6.2……………9

測量規(guī)程

6.3……………10

測量有效性的證明

6.4…………………11

性能值的計算

7SUT……………………12

平均執(zhí)行時間

7.1………………………12

吞吐量

7.2………………12

適時吞吐量

7.3…………………………12

用于評級的基礎(chǔ)數(shù)據(jù)

8……………………12

用戶需求

8.1……………12

用于軟件效率評級的基準(zhǔn)環(huán)境

8.2……………………12

性能值評級

9………………13

計算性能參考值

9.1……………………13

計算性能評級值

9.2……………………13

總體性能評級

9.3SUT………………13

性能評估

9.4……………13

輸入需求

10………………14

描述

10.1SUT…………………………14

工作負(fù)載參數(shù)集

10.2…………………15

用于測量確認(rèn)的輸入

10.3……………17

測量

11……………………18

測量規(guī)程

11.1…………………………18

單個評級區(qū)間

11.2……………………19

測量規(guī)程的輸出

12………………………20

測量日志文件

12.1……………………20

計算結(jié)果文件

12.2……………………20

Ⅰ

GB/T30975—2014/ISO/IEC147561999

:

測量確認(rèn)

13………………20

計算正確性確認(rèn)

13.1SUT……………21

準(zhǔn)確度確認(rèn)

13.2RTE…………………21

測得的平均執(zhí)行時間的統(tǒng)計顯著性確認(rèn)

13.3………21

性能值計算

14SUT………………………22

平均執(zhí)行時間

14.1……………………22

吞吐量

14.2……………22

適時吞吐量

14.3………………………22

測得性能值的評級

15SUT………………23

評級級別規(guī)格說明

15.1………………23

計算性能參考值

15.2…………………23

計算評級值

15.3………………………23

評級

15.4………………24

附錄規(guī)范性附錄基本功能規(guī)格說明

A()RTE………26

附錄規(guī)范性附錄附加計算公式

B()……………………27

附錄規(guī)范性附錄工作負(fù)載描述格式

C()………………33

附錄規(guī)范性附錄日志文件格式

D()……………………36

附錄資料性附錄實用程序

E()…………37

附錄資料性附錄工作負(fù)載示例

F()……………………39

Ⅱ

GB/T30975—2014/ISO/IEC147561999

:

前言

本標(biāo)準(zhǔn)按照給出的規(guī)則起草

GB/T1.1—2009。

本標(biāo)準(zhǔn)使用翻譯法等同采用信息技術(shù)基于計算機(jī)的軟件系統(tǒng)的性能測量

ISO/IEC14756:1999《

與評級

》。

本標(biāo)準(zhǔn)由全國信息技術(shù)標(biāo)準(zhǔn)化技術(shù)委員會提出并歸口

(SAC/TC28)。

本標(biāo)準(zhǔn)起草單位北京郵電大學(xué)中國電子技術(shù)標(biāo)準(zhǔn)化研究院山東省計算中心山東省計算機(jī)網(wǎng)

:、、、

絡(luò)重點(diǎn)實驗室

。

本標(biāo)準(zhǔn)主要起草人史慧玲楊美紅李剛韓明軍鄒豐義周鳴樂韓慶良顧衛(wèi)東董火民

:、、、、、、、、、

韓紅強(qiáng)劉建毅胡宇高翊王樅

、、、、。

Ⅲ

GB/T30975—2014/ISO/IEC147561999

:

引言

在設(shè)計和使用數(shù)據(jù)處理系統(tǒng)時執(zhí)行速度是一個重要的性質(zhì)該性質(zhì)主要受系統(tǒng)中所使用軟件的

,。

效率影響測量軟件系統(tǒng)執(zhí)行速度以及軟件效率影響是最關(guān)心的問題

。,,。

為了測量軟件對一個數(shù)據(jù)處理系統(tǒng)在時變行為方面的影響有必要測量整個系統(tǒng)的時變行為基

,。

于本標(biāo)準(zhǔn)建議的測量規(guī)程可定義和計算軟件時間效率的數(shù)值

,。

時變行為可重復(fù)估算是非常重要的在實驗中使用真實用戶是不可能的一個原因是真實用戶不

。,

可能像計算機(jī)那樣在沒有偏差的前提下重復(fù)執(zhí)行操作另一個原因是當(dāng)工作或任務(wù)流是來自很多用戶

,

時若由真實用戶來執(zhí)行這樣的實驗需要花費(fèi)非常高的代價因此在測試中需要采用模擬器該模擬

,,。,,

器通過一個輔助數(shù)據(jù)處理系統(tǒng)來模擬多用戶操作

。

這意味著要根據(jù)本標(biāo)準(zhǔn)進(jìn)行性能測量和評級需要借助工具該工具應(yīng)是按照本標(biāo)準(zhǔn)規(guī)范要求來

,。

運(yùn)行的模擬器應(yīng)證明實際使用的模擬器滿足這些規(guī)范

。。

所有相關(guān)實驗細(xì)節(jié)都通過用戶模擬器記錄在日志文件中通過該日志文件可計算出描述時變行

。,

為的值如響應(yīng)時間和吞吐量的值根據(jù)這些性能值可計算出軟件效率評級值

()。,。

并不是所有性能值都需要進(jìn)行測量和評級例如對于一個具有簡單負(fù)載的軟件系統(tǒng)只有很少的

。,,

交互任務(wù)或者只有很小批量的執(zhí)行要求則只需要定義部分性能指標(biāo)及其值該方法也適用于測量和

,,。

評級大的復(fù)雜的基于計算機(jī)的軟件系統(tǒng)可處理由一系列不同用戶產(chǎn)生的復(fù)雜工作流

、(CBSS),CBSS

或任務(wù)流定義中有必要包括一些數(shù)學(xué)術(shù)語目的是為了計算性能值和評級值校驗測量運(yùn)行和評級步

。,、

驟的正確性以及為了確定性能值和評級結(jié)果的統(tǒng)計上的意義獲取精確的數(shù)學(xué)依據(jù)

,()。

測量結(jié)果由計算的性能值組成包括吞吐量和執(zhí)行時間的值性能評估的最終結(jié)果由評級

,。CBSS

值構(gòu)成評級值可通過比較性能值與用戶需求獲得另外如果需要通過與一個可參考的如

。。,,CBSS(,

具有相同硬件配置但卻具有相同功能的應(yīng)用程序的不同版本性能值相比較可對待測性能值

,),CBSS

進(jìn)行評級

。

評級結(jié)果是一組值每個值或者大于或者小于或者等于分別表示性能好于壞于等于定

,1,1,1,、、

義的需求或者是另一個作為參考的待測系統(tǒng)特性最終的一組評級值評估工作負(fù)載中分別定義的各

()。

個任務(wù)類型

。

附錄和附錄包含軟件以及特殊的數(shù)據(jù)因為不能印刷故本標(biāo)準(zhǔn)未提供在這兩個附錄中都

EF,,。

提供了簡短的概述

。

Ⅳ

GB/T30975—2014/ISO/IEC147561999

:

信息技術(shù)基于計算機(jī)的

軟件系統(tǒng)的性能測量與評級

1范圍

本標(biāo)準(zhǔn)界定了對基于計算機(jī)的軟件系統(tǒng)面向用戶的性能如何測量和評級從用戶例如各

(CBSS)。(

種不同終端的用戶或者數(shù)據(jù)處理中心的操作用戶和商業(yè)用戶角度看就是一種數(shù)據(jù)處理系統(tǒng)

,),CBSS。

包括硬件及其所有軟件系統(tǒng)軟件和應(yīng)用軟件這些是實施用戶所需的數(shù)據(jù)處理功能所要

CBSS(),

求的或可影響到的時變行為

,CBSS。

本標(biāo)準(zhǔn)適用于測試所有受時間約束的系統(tǒng)或系統(tǒng)的一部分同樣網(wǎng)絡(luò)可以是某個系統(tǒng)的組成部

。,

分或者可成為測試的主題本標(biāo)準(zhǔn)所界定的方法不限于像經(jīng)典的批處理或終端宿主系統(tǒng)等特例例

,。-,

如也包括客戶服務(wù)器系統(tǒng)或按廣義理解對任務(wù)界定的實時系統(tǒng)但是就測試大環(huán)境所需花費(fèi)來

,-“”。

說測試的實用性會受到限制

,。

本標(biāo)準(zhǔn)規(guī)定了面向用戶的性能術(shù)語的關(guān)鍵指標(biāo)以及測量和評級這些性能值的方法所規(guī)定的性

,。

能值描述了用戶命令任務(wù)的執(zhí)行速度的性能值即如下三位一體的

(),“”:

執(zhí)行時間

———;

吞吐量

———;

適時性

———。

用戶命令以下稱為任務(wù)在內(nèi)部結(jié)構(gòu)上可以很簡單也可以很復(fù)雜一項任務(wù)可能是一項作業(yè)事

,,,。、

務(wù)過程或更為復(fù)雜的結(jié)構(gòu)但都根據(jù)評價者的需要界定一個啟動時間和結(jié)束時間進(jìn)行性能評價時

、,,。,

除單個響應(yīng)時間外還可參考商務(wù)事務(wù)處理完成時間使用本標(biāo)準(zhǔn)來測量系統(tǒng)的時變行為

,,。

評級可根據(jù)用戶需求來完成或者通過與兩個或更多的已測量系統(tǒng)類型或版本相比較來完成

,