DB5101T 174-2023 航空零部件制造企業(yè)計(jì)算機(jī)輔助制造軟件測(cè)試指南

5101四川省成都市地方標(biāo)準(zhǔn)Testingguidanceforevaluationofcomputeraidsoftwareofaviationpartsmanufac成都市市場(chǎng)監(jiān)督管理局發(fā)布I Ⅲ 1 1 1 2 2 3 7 8 本文件按照GB/T1.1—2020《標(biāo)準(zhǔn)化工作導(dǎo)則第1部分：標(biāo)準(zhǔn)化文件的結(jié)構(gòu)和起草規(guī)則》的規(guī)定1航空零部件制造企業(yè)計(jì)算機(jī)輔助制造軟件測(cè)試指南助制造軟件開(kāi)發(fā)機(jī)構(gòu)、第三方測(cè)試機(jī)構(gòu)實(shí)施的計(jì)算機(jī)輔助制造軟件測(cè)試活動(dòng)提供凡是不注日期的引用文件，其最新版本（包括所有的修改單）GB/T9386計(jì)算機(jī)軟件測(cè)試文檔計(jì)算機(jī)輔助制造computeraidedmanufa驗(yàn)收測(cè)試acceptancete2測(cè)試評(píng)價(jià)testingevalu通過(guò)軟件功能、性能和產(chǎn)品化指標(biāo)的測(cè)量，對(duì)計(jì)4縮略語(yǔ)CAM：計(jì)算機(jī)輔助制造（ComputerCPU：中央處理器（CentralProcessing5.1測(cè)試目標(biāo)5.2測(cè)試內(nèi)容5.2.1概述5.2.2功能測(cè)試CAM軟件功能測(cè)試是對(duì)軟件的功能正確性和完備性進(jìn)行測(cè)試，宜遵循以下c)軟件發(fā)生錯(cuò)誤時(shí)，有提示并記錄錯(cuò)誤日志，并可d)軟件的窗口、控件、菜單、鼠標(biāo)的操作及操作提示符合所使用操作系統(tǒng)5.2.3性能測(cè)試CAM軟件性能測(cè)試是指對(duì)軟件完成其設(shè)計(jì)功能的特性進(jìn)行測(cè)試，包括負(fù)載能力、壓力表現(xiàn)、軟件效3CAM軟件產(chǎn)品化測(cè)試是對(duì)軟件的可用性和軟件的產(chǎn)品化程度進(jìn)行測(cè)試，宜遵循以下內(nèi)c)具有線上服務(wù)、產(chǎn)品介紹、用戶(hù)培訓(xùn)等方面的用戶(hù)技術(shù)支5.3測(cè)試過(guò)程航空零部件制造企業(yè)CAM軟件測(cè)試過(guò)程宜分為四個(gè)階段，依次為：測(cè)試策劃、測(cè)試設(shè)計(jì)、測(cè)試執(zhí)行和測(cè)試總結(jié)。有關(guān)測(cè)試過(guò)程的內(nèi)容見(jiàn)GB/T5.4測(cè)試方法5.4.2軟件測(cè)試大綱和軟件測(cè)試技術(shù)規(guī)范書(shū)宜明確在測(cè)試中針對(duì)系統(tǒng)的每一項(xiàng)功能或性能需要完成的基本測(cè)試項(xiàng)目和測(cè)試評(píng)判依據(jù)；宜能滿足測(cè)試大綱和軟件測(cè)試技術(shù)規(guī)范5.6測(cè)試管理航空零部件制造企業(yè)CAM軟件測(cè)試宜由相對(duì)獨(dú)立的人員進(jìn)行，宜對(duì)測(cè)試過(guò)程、軟件配置、測(cè)試評(píng)審進(jìn)行管理。有關(guān)測(cè)試管理的內(nèi)容見(jiàn)GB/T1555.7測(cè)試文檔航空零部件制造企業(yè)CAM軟件測(cè)試文檔宜包括測(cè)試大綱、測(cè)試設(shè)計(jì)說(shuō)明、測(cè)試用例說(shuō)明、測(cè)試規(guī)程和軟件規(guī)模等級(jí)可進(jìn)行合理的取舍與合并。有關(guān)測(cè)試文檔的內(nèi)容見(jiàn)GB/T46.1.2.2針對(duì)CAM軟件功能的不同特點(diǎn)，測(cè)試工具指導(dǎo)測(cè)試用例的自動(dòng)生成。各類(lèi)測(cè)試用例納入數(shù)據(jù)庫(kù)管理，按照設(shè)定的規(guī)則，測(cè)試用例庫(kù)中的測(cè)試用例自動(dòng)生成用于測(cè)試的6.1.2.3宜制定測(cè)試標(biāo)準(zhǔn)文檔描述規(guī)范，將測(cè)試用例導(dǎo)入、導(dǎo)出測(cè)試有關(guān)測(cè)試環(huán)境需求的內(nèi)容見(jiàn)GB/T15532。6.2.3.1CAM軟件功能測(cè)試工具包括測(cè)試腳本6.2.3.2CAM軟件的功能測(cè)試宜采用黑盒測(cè)試法b)測(cè)試人員在功能測(cè)試過(guò)程中，宜及時(shí)記錄原始數(shù)據(jù)，測(cè)試結(jié)束后宜對(duì)測(cè)試記錄進(jìn)行審核；c)相關(guān)人員在測(cè)試過(guò)程中，如發(fā)現(xiàn)系統(tǒng)功能方面的問(wèn)題，宜向開(kāi)發(fā)方d)開(kāi)發(fā)方對(duì)測(cè)試中發(fā)現(xiàn)的功能問(wèn)題進(jìn)行修改后，測(cè)試方宜進(jìn)行回歸測(cè)試，并出具宜測(cè)試CAM軟件是否能夠成功安裝和測(cè)試。若不能，宜保證系統(tǒng)的軟、硬件環(huán)境符合設(shè)計(jì)文檔的需56.4.2.1.1CAM軟件功能測(cè)試分為功能加工刀具軌跡生成、刀具軌跡編輯、后置處理及加工仿真等五大類(lèi)6.4.2.1.2完備性測(cè)試是對(duì)CAM軟件提供給用戶(hù)的功能指標(biāo)是否完整進(jìn)行判斷。完備性測(cè)試宜以功能測(cè)測(cè)試開(kāi)始測(cè)試開(kāi)始CAM功能完備性測(cè)試器初始化CAM功能完備性測(cè)試用例庫(kù)CAM五大功能完備性CAM功能完備性測(cè)試用例庫(kù)CAM五大功能完備性指標(biāo)體系CAM五大功能完備性指標(biāo)CAM功能完備性測(cè)試用例執(zhí)行CAM功能完備性測(cè)試否否記錄測(cè)試結(jié)果完備性測(cè)試執(zhí)行完備性測(cè)試執(zhí)行是否完畢vi是測(cè)試結(jié)果統(tǒng)計(jì)分析模塊測(cè)試結(jié)束測(cè)試結(jié)束讀取CAM功能正確性測(cè)試用例庫(kù)測(cè)試開(kāi)始讀取CAM功能正確性測(cè)試用例庫(kù)測(cè)試開(kāi)始CAM功能正確性測(cè)試器初始化CAM五大功能正確性測(cè)試用例執(zhí)行CAM功能正確性測(cè)試否否記錄測(cè)試結(jié)果正確性測(cè)試執(zhí)行是否完畢v是測(cè)試結(jié)果統(tǒng)計(jì)分析模塊測(cè)試結(jié)束測(cè)試結(jié)束6功能完備性評(píng)價(jià)目的是為了確定被測(cè)軟件中所有功能與功能測(cè)試大綱的契合度，衡量被測(cè)軟件與CAM相關(guān)的功能是否達(dá)到專(zhuān)業(yè)級(jí)別，判斷被測(cè)7宜根據(jù)CAM軟件的設(shè)計(jì)文檔、用戶(hù)手冊(cè)和技術(shù)手冊(cè)等關(guān)于關(guān)鍵性能指標(biāo)的說(shuō)明，結(jié)合所使用的性能測(cè)試環(huán)境和測(cè)試工具，制定與性能測(cè)試相關(guān)的CAM軟件性能測(cè)試工具宜可檢測(cè)、評(píng)估其軟件的關(guān)鍵性能指標(biāo)，包括系統(tǒng)的聯(lián)機(jī)響應(yīng)時(shí)間、處理速CAM軟件性能測(cè)試參照?qǐng)D3所示流程進(jìn)行。開(kāi)始開(kāi)始CAM性能測(cè)試器初始化CAM性能測(cè)試器初始化讀取CAM性能測(cè)試用例庫(kù)回歸測(cè)試讀取CAM性能測(cè)試用例庫(kù)回歸測(cè)試調(diào)用CAM性能測(cè)試用例執(zhí)行CAM性能測(cè)試性能測(cè)試結(jié)果分析開(kāi)發(fā)方對(duì)系統(tǒng)進(jìn)行優(yōu)化并提交新版本系統(tǒng)性能是否開(kāi)發(fā)方對(duì)系統(tǒng)進(jìn)行優(yōu)化并提交新版本系統(tǒng)性能是否達(dá)到要求記錄問(wèn)題并提交問(wèn)題報(bào)告v是提交相關(guān)報(bào)告測(cè)試結(jié)束8b)在測(cè)試完成后，測(cè)試人員宜提供原始測(cè)試數(shù)據(jù)，并交給測(cè)試分析員審核；d)開(kāi)發(fā)方對(duì)測(cè)試中發(fā)現(xiàn)的性能問(wèn)題進(jìn)行改進(jìn)后，測(cè)試方宜進(jìn)行回歸測(cè)試，并出具加時(shí)，系統(tǒng)各組成部分的響應(yīng)輸出項(xiàng)，如通過(guò)率、響應(yīng)時(shí)間、CPU負(fù)載、內(nèi)存使用等情況，綜合分析后CAM性能測(cè)試完成后，宜對(duì)軟件的負(fù)載性能、壓力性能和效率測(cè)試結(jié)果進(jìn)行分析，確定8.1.3可靠性9a)系統(tǒng)對(duì)重要數(shù)據(jù)的錄入提供有效性檢查，對(duì)非法數(shù)據(jù)輸入有明確b)對(duì)不符合有效性的輸入數(shù)據(jù)，宜使用中文給出簡(jiǎn)潔、準(zhǔn)確的提示信息，必要時(shí)給出幫助；b)若數(shù)據(jù)和系統(tǒng)受損，能提供補(bǔ)救工具，補(bǔ)救上次保存或自動(dòng)保存以前的數(shù)據(jù)；8.1.4易用性a)界面簡(jiǎn)潔、美觀、實(shí)用，采用簡(jiǎn)體中文，8.1.4.2易學(xué)性a)用戶(hù)手冊(cè)內(nèi)容全面詳細(xì)、易于理解，描述與軟件功能一致、提供b)軟件以易觀察、易讀的方式向用戶(hù)提供信息，必要時(shí)可向用戶(hù)發(fā)出警報(bào)；e)輸入數(shù)據(jù)的要求能夠被用戶(hù)理解，軟件輸出項(xiàng)符合用戶(hù)b)軟件的局部修改不影響軟件的整體b)依據(jù)用戶(hù)手冊(cè)安裝，能在指定環(huán)境成功a)明確文檔驗(yàn)收的標(biāo)準(zhǔn)，軟件開(kāi)發(fā)人員和用戶(hù)應(yīng)f)檢驗(yàn)文檔的可理解性，即文檔表達(dá)CAM軟件的技術(shù)支持與服務(wù)宜包括線上服務(wù)、產(chǎn)品介紹、培訓(xùn)資料等9測(cè)試總結(jié)9.1測(cè)試結(jié)果a)可重復(fù)性：由同一測(cè)試者按同一測(cè)試大綱對(duì)同一軟件進(jìn)行重復(fù)測(cè)試，宜產(chǎn)生同一種結(jié)b)可再現(xiàn)性：由不同測(cè)試者按同一測(cè)試大綱對(duì)同一軟件進(jìn)行測(cè)試，宜產(chǎn)生同一種結(jié)果；9.2測(cè)試文檔9.3測(cè)試報(bào)告CAM軟件的測(cè)試活動(dòng)和測(cè)試結(jié)果宜匯總在測(cè)A.1設(shè)計(jì)準(zhǔn)則A.2編制方法CAM軟件功能完備性包括工藝方案設(shè)計(jì)、加工刀具軌跡生成、刀具軌跡等五大類(lèi)，每個(gè)大類(lèi)又分為若干子類(lèi)，而每個(gè)子類(lèi)又包含若干功能安全平面、初始點(diǎn)進(jìn)刀、退刀方式選擇測(cè)試評(píng)價(jià)方法功能測(cè)試結(jié)果產(chǎn)品化測(cè)試結(jié)果測(cè)試評(píng)價(jià)內(nèi)容功能測(cè)試結(jié)果產(chǎn)品化測(cè)試結(jié)果性能測(cè)試結(jié)果測(cè)試評(píng)價(jià)結(jié)果航空零部件制造企業(yè)CAM軟件測(cè)試評(píng)價(jià)內(nèi)容包括功能測(cè)試評(píng)價(jià)、性能測(cè)試評(píng)航空零部件制造企業(yè)CAM軟件測(cè)試中，功能測(cè)試、性能測(cè)試和產(chǎn)品化測(cè)試均是通過(guò)子特v=Σmi/n…………（C.1）為0；n——為子特性的測(cè)試指標(biāo)項(xiàng)總數(shù)。v1——為功能完備性的測(cè)量值；0≤v1＜0.850.85≤v1＜0.900.90≤v1＜0.950.95≤v1≤10≤v2＜0.850.85≤v2＜0.900.90≤v2＜0.950.95≤v2≤10≤Vf＜0.850.85≤Vf＜0.900.90≤Vf＜0.950.95≤Vf≤1差差差差差差差Vc——為性能測(cè)試的測(cè)量值；v3——為效率的測(cè)量值。0≤v1＜0.850.85≤v1＜0.900.90≤v1＜0.950.95≤v1≤10≤v2＜0.850.85≤v2＜0.900.90≤v2＜0.950.95≤v2≤10≤v3＜0.850.85≤v3＜0.900.90≤v3＜0.950.95≤v3≤10≤Vc＜0.850.85≤Vc＜0.900.90≤Vc＜0.950.95≤Vc≤1v1——為可用性的測(cè)量值；0≤v1＜0.850.85≤v1＜0.900.90≤v1＜0.950.95≤v1≤10≤v2＜0.850.85≤v2＜0.900.90≤v2＜0.950.95≤v2≤10≤Vp＜0.850.85≤Vp＜0.900.90≤Vp＜0.950.95≤Vp≤1差差差差差差差Wf——為功能測(cè)試的權(quán)重，且0＜Wf＜1；0≤Vr＜0.850.85≤Vr＜0.900.90≤Vr＜0.950.95≤Vr≤1CAM軟件的測(cè)試活動(dòng)和測(cè)試結(jié)果宜匯總在測(cè)試