《人工智能 家庭智能中樞系統(tǒng)可信賴(lài)技術(shù)規(guī)范》

ICS35.160

CCSL60

團(tuán)體標(biāo)準(zhǔn)

T/CESAXXXX—202X

人工智能家庭智能中樞系統(tǒng)可信賴(lài)技術(shù)規(guī)范

Artificialintelligence–Technicalspecificationoftrustworthinessforhomeintelligent

centersystems

征求意見(jiàn)稿

在提交反饋意見(jiàn)時(shí)，請(qǐng)將您知道的相關(guān)專(zhuān)利連同支持性文件一并附上。

已授權(quán)的專(zhuān)利證明材料為專(zhuān)利證書(shū)復(fù)印件或扉頁(yè)，已公開(kāi)但尚未授權(quán)的專(zhuān)利申

請(qǐng)證明材料為專(zhuān)利公開(kāi)通知書(shū)復(fù)印件或扉頁(yè)，未公開(kāi)的專(zhuān)利申請(qǐng)的證明材料為專(zhuān)利

申請(qǐng)?zhí)柡蜕暾?qǐng)日期。

202X-XX-XX發(fā)布202X-XX-XX實(shí)施

中國(guó)電子工業(yè)標(biāo)準(zhǔn)化技術(shù)協(xié)會(huì)發(fā)布

T/CESAXXXX—202X

人工智能家庭智能中樞系統(tǒng)可信賴(lài)技術(shù)規(guī)范

1范圍

本文件確立了家庭智能中樞系統(tǒng)的框架，規(guī)定了系統(tǒng)的可信賴(lài)技術(shù)要求，描述了對(duì)應(yīng)的測(cè)試方法。

本文件適用于家庭智能中樞系統(tǒng)的設(shè)計(jì)、開(kāi)發(fā)、應(yīng)用和測(cè)試。

2規(guī)范性引用文件

下列文件中的內(nèi)容通過(guò)文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中，注日期的引用文件，

僅該日期對(duì)應(yīng)的版本適用于本文件；不注日期的引用文件，其最新版本（包括所有的修改單）適用于本

文件。

GB/T35273-2020信息安全技術(shù)個(gè)人信息安全規(guī)范

GB/T36464.2-2018信息技術(shù)智能語(yǔ)音交互系統(tǒng)第2部分：智能家居

GB/T41772-2022信息技術(shù)生物特征識(shí)別人臉識(shí)別系統(tǒng)技術(shù)要求

GB/T41867-2022信息技術(shù)人工智能術(shù)語(yǔ)

GB/T42564-2023信息安全技術(shù)邊緣計(jì)算安全技術(shù)要求

T/CESAXXXX-XXXX人工智能可信賴(lài)規(guī)范第1部分：通則

T/CESA1197-2022人工智能深度合成圖像系統(tǒng)技術(shù)規(guī)范

3術(shù)語(yǔ)和定義

GB/T41867-2022界定的以及下列術(shù)語(yǔ)和定義適用于本文件。

3.1

家庭智能中樞系統(tǒng)homeintelligentcentersystem

家庭大腦系統(tǒng)homebrainsystem

將視覺(jué)、聽(tīng)覺(jué)等感知信號(hào)轉(zhuǎn)化為理解、推理、決策、語(yǔ)言等認(rèn)知信息，對(duì)家庭空間范圍內(nèi)的互聯(lián)的

設(shè)備進(jìn)行智慧化控制。具備邊緣計(jì)算、數(shù)據(jù)存儲(chǔ)等能力，可實(shí)現(xiàn)設(shè)備與用戶(hù)自然交互的系統(tǒng)。下文中簡(jiǎn)

稱(chēng)系統(tǒng)。

3.2

終端設(shè)備enddevice

具備感知物理世界，或能夠處理和響應(yīng)物理世界信息的設(shè)備。通常用戶(hù)使用此類(lèi)設(shè)備采集信息或執(zhí)

行智慧家庭場(chǎng)景服務(wù)。

3.3

響應(yīng)時(shí)間responsetime

系統(tǒng)啟動(dòng)操作到系統(tǒng)返回運(yùn)行結(jié)果的時(shí)間。

1

T/CESAXXXX—202X

4縮略語(yǔ)

下列縮略語(yǔ)適用于本文件。

API：應(yīng)用程序接口(ApplicationProgramInterface)

MTBF：平均無(wú)故障工作時(shí)間(MeanTimeBetweenFailure)

WAN：廣域網(wǎng)(WideAreaNetwork)

5家庭智能中樞系統(tǒng)框架

5.1應(yīng)用框架

家庭智能中樞(家庭大腦)系統(tǒng)是一種在家庭中使用的邊緣設(shè)備，它通過(guò)網(wǎng)絡(luò)與云平臺(tái)連接，獲取網(wǎng)

絡(luò)數(shù)據(jù)和服務(wù)，系統(tǒng)具備計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)通信等能力，可為終端設(shè)備提供算力服務(wù)，提升終端設(shè)備的

智能化、交互能力，讓家庭數(shù)據(jù)變得可感知、可視化、可交互，實(shí)現(xiàn)智慧家庭多樣化的場(chǎng)景需求。系統(tǒng)

與云側(cè)設(shè)備、終端側(cè)設(shè)備共同構(gòu)成設(shè)備層，進(jìn)行云邊端協(xié)同工作，實(shí)現(xiàn)算力、存儲(chǔ)等資源的高效分配與

利用，豐富應(yīng)用層中各類(lèi)場(chǎng)景應(yīng)用，降低應(yīng)用的延時(shí)，提升應(yīng)用的隱私保護(hù)、安全性等能力。本文件主

要聚焦于設(shè)備層中的家庭智能中樞系統(tǒng)的可信賴(lài)技術(shù)要求，設(shè)備層中的云側(cè)設(shè)備、終端側(cè)設(shè)備以及應(yīng)用

層的可信賴(lài)技術(shù)要求不在本文件中規(guī)定。

系統(tǒng)應(yīng)用框架見(jiàn)圖1。

注：圖中實(shí)線(xiàn)部分對(duì)應(yīng)本文件規(guī)定的范圍，虛線(xiàn)部分僅為表明家庭智能中樞系統(tǒng)應(yīng)用框架，不在本文件中規(guī)定。

圖1家庭智能中樞系統(tǒng)應(yīng)用框架

設(shè)備層主要由云側(cè)、邊緣側(cè)、終端側(cè)構(gòu)成，其中云側(cè)由云平臺(tái)構(gòu)成，主要用于提供云服務(wù)；邊緣側(cè)

由家庭智能中樞系統(tǒng)構(gòu)成，系統(tǒng)有多種形式，如獨(dú)立的邊緣設(shè)備，或由算力設(shè)備、存儲(chǔ)設(shè)備和網(wǎng)關(guān)等共

同構(gòu)成的系統(tǒng)，主要用于邊緣計(jì)算、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)處理、設(shè)備管理等；終端側(cè)由多媒體設(shè)備、家用電

器、安防設(shè)備和家居設(shè)備等構(gòu)成，主要用于信息的感知、呈現(xiàn)等。

應(yīng)用層為主要的智慧家庭應(yīng)用場(chǎng)景，包括但不限于健康、娛樂(lè)、社交、商務(wù)、教育、健身、節(jié)能、

安防等。

2

T/CESAXXXX—202X

5.2可信賴(lài)技術(shù)框架

家庭智能中樞系統(tǒng)在智慧家庭各類(lèi)場(chǎng)景應(yīng)用中充當(dāng)大腦的角色，構(gòu)建以下特征能力：

a)感知中心：視覺(jué)、聽(tīng)覺(jué)等信息的感知；

b)邏輯處理中心：執(zhí)行識(shí)別、理解、推理、判斷、決策等行為；

c)控制中心：發(fā)出指令對(duì)各類(lèi)活動(dòng)、業(yè)務(wù)控制；

d)存儲(chǔ)中心：數(shù)據(jù)的存儲(chǔ)。

本文件參考T/CESAXXXX-XXXX中第4章規(guī)定的人工智能可信賴(lài)技術(shù)的核心概念域、關(guān)鍵技術(shù)域的部

分技術(shù)特征，如可控性、實(shí)時(shí)性、魯棒性、韌性、可靠性、信息安全、可追溯性、備份、隱私保護(hù)、透

明性等，以提高系統(tǒng)感知、邏輯處理、控制、存儲(chǔ)的能力，增強(qiáng)系統(tǒng)在各類(lèi)應(yīng)用場(chǎng)景業(yè)務(wù)實(shí)現(xiàn)過(guò)程中的

可信賴(lài)程度。系統(tǒng)的可信賴(lài)技術(shù)框架見(jiàn)圖2。

圖2家庭智能中樞系統(tǒng)可信賴(lài)技術(shù)框架

6技術(shù)要求

6.1可控性

6.1.1設(shè)備協(xié)同

主要用于評(píng)估家庭智能中樞系統(tǒng)對(duì)各類(lèi)終端設(shè)備的接入控制、協(xié)同交互等能力，具體要求包括：

a)應(yīng)具備連接云平臺(tái)，并與云平臺(tái)進(jìn)行數(shù)據(jù)交換、獲取服務(wù)等能力；

b)應(yīng)具備局域網(wǎng)內(nèi)設(shè)備發(fā)現(xiàn)、識(shí)別接入功能?？山尤刖邆渚W(wǎng)絡(luò)通信功能的設(shè)備（例如麥克風(fēng)、

攝像頭、揚(yáng)聲器、顯示器、環(huán)境傳感器、家用電器等）；

c)應(yīng)具備對(duì)外開(kāi)放的API；

d)應(yīng)具備算力共享接口，并能為接入系統(tǒng)的終端設(shè)備提供算力共享服務(wù)，如多模態(tài)信息分析與

處理，隱私計(jì)算等；

e)宜具備云平臺(tái)和系統(tǒng)的算力協(xié)同能力，如系統(tǒng)算力資源不足的時(shí)候，云側(cè)能為邊緣側(cè)提供算

力支持；

f)宜支持終端設(shè)備和系統(tǒng)之間的互操作，如終端設(shè)備為系統(tǒng)提供交互界面、系統(tǒng)集中控制終端

設(shè)備等。

3

T/CESAXXXX—202X

6.1.2設(shè)備管理

主要用于評(píng)估家庭智能中樞系統(tǒng)對(duì)連接的設(shè)備管理，以及系統(tǒng)自身的管理能力，具體要求包括：

a)應(yīng)具備系統(tǒng)的管理能力，包括操作系統(tǒng)、驅(qū)動(dòng)、數(shù)據(jù)庫(kù)升級(jí)等；

b)應(yīng)具備安裝、卸載、升級(jí)軟件等能力；

c)應(yīng)支持對(duì)接入的設(shè)備進(jìn)行管理，包括接入設(shè)備的注冊(cè)、停用、刪除等；

d)應(yīng)支持運(yùn)行狀態(tài)查詢(xún)、設(shè)置、顯示；

e)宜支持接入設(shè)備的運(yùn)行狀態(tài)查詢(xún)、設(shè)置、顯示；

6.1.3算法管理

主要用于評(píng)估家庭智能中樞系統(tǒng)對(duì)基礎(chǔ)算法、智慧家庭應(yīng)用場(chǎng)景算法的統(tǒng)一管理能力，以及為應(yīng)用

服務(wù)、終端設(shè)備提供算法支撐的能力，具體要求包括：

a)應(yīng)支持系統(tǒng)自身的算法的選擇、升級(jí)、調(diào)用等；

b)應(yīng)支持系統(tǒng)為終端設(shè)備提供算力共享時(shí)，所需要的算法的選擇、升級(jí)、調(diào)用等；

c)宜支持分布式算法訓(xùn)練。

6.2實(shí)時(shí)性

6.2.1信息處理

主要用于評(píng)估系統(tǒng)對(duì)實(shí)時(shí)交互類(lèi)場(chǎng)景應(yīng)用的響應(yīng)速度，保障用戶(hù)的使用體驗(yàn)感。對(duì)于不同的應(yīng)用場(chǎng)

景，信息處理實(shí)時(shí)性要求如下：

a)語(yǔ)音：

1)智能語(yǔ)音等平均響應(yīng)時(shí)間應(yīng)≤2秒；

2)語(yǔ)音喚醒平均響應(yīng)時(shí)間宜≤2秒。

b)視覺(jué)：

1)靜態(tài)手勢(shì)識(shí)別執(zhí)行時(shí)長(zhǎng)應(yīng)≤2秒；

2)人臉檢測(cè)、識(shí)別平均響應(yīng)時(shí)間應(yīng)≤1秒；

3)動(dòng)態(tài)手勢(shì)、動(dòng)作識(shí)別等執(zhí)行時(shí)長(zhǎng)宜≤5秒。

6.2.2信息傳輸

主要用于評(píng)估系統(tǒng)的各類(lèi)數(shù)據(jù)、信息的傳輸延時(shí)、傳輸量等。對(duì)于不同的應(yīng)用場(chǎng)景，要求如下：

a)系統(tǒng)與終端設(shè)備之間的協(xié)同的指令及數(shù)據(jù)參數(shù)的雙向傳輸時(shí)延應(yīng)≤30毫秒；

b)多媒體數(shù)據(jù)從系統(tǒng)到終端設(shè)備的雙向傳輸時(shí)延應(yīng)≤250毫秒；

c)數(shù)據(jù)傳輸吞吐量宜支持千兆位/秒級(jí)別。

6.2.3終端連接

主要用于評(píng)估系統(tǒng)與終端設(shè)備以短距離通訊方式的連接速度，設(shè)備被搜索發(fā)現(xiàn)的平均響應(yīng)時(shí)間應(yīng)≤

2秒，且能正常連接通訊。

6.3魯棒性

6.3.1感知環(huán)境變化

主要用于評(píng)估系統(tǒng)在各類(lèi)場(chǎng)景在感知環(huán)境變化情況下的性能保持能力，要求如下：

a)光線(xiàn)變化：

4

T/CESAXXXX—202X

視覺(jué)類(lèi)功能在不同光線(xiàn)條件下，應(yīng)能正常工作。

b)抗遮擋能力：

視覺(jué)識(shí)別功能在遮擋面積≤20%的情況下，應(yīng)能正常識(shí)別。

c)噪聲變化：

語(yǔ)音識(shí)別功能在高噪家居環(huán)境（聲音強(qiáng)度在60dB~65dB）中，句識(shí)別正確率應(yīng)≥85%。

6.3.2通信環(huán)境變化

主要用于評(píng)估系統(tǒng)抗弱網(wǎng)的能力，要求如下：

a）多媒體功能：

音、視頻等多媒體功應(yīng)能正常使用，不出現(xiàn)破音、卡頓、馬賽克等異常。

b）系統(tǒng)功能：

系統(tǒng)基本功能應(yīng)能正常工作，不出現(xiàn)死機(jī)、重啟等異常。

6.4韌性

6.4.1功能保持

主要用于評(píng)估當(dāng)系統(tǒng)與廣域網(wǎng)(WAN)連接斷開(kāi)時(shí)，功能保持正常工作的能力。應(yīng)至少滿(mǎn)足以下一項(xiàng)

的要求：

a)6.1.1設(shè)備協(xié)同中的b）、f）；

b)6.1.2設(shè)備管理中的c）、e）；

c)6.1.3算法管理中的b）；

d)6.2.1信息處理中任意一項(xiàng)要求。

6.4.2故障恢復(fù)

主要用于評(píng)估系統(tǒng)故障恢復(fù)的能力。應(yīng)至少滿(mǎn)足以下一項(xiàng)的要求：

a)程序崩潰后能自動(dòng)重啟程序；

b)程序崩潰后顯示異常狀態(tài)，并提示用戶(hù)處理；

c)需要連接網(wǎng)絡(luò)才能使用的功能，在斷網(wǎng)重連后能夠恢復(fù)正常工作。

6.4.3防崩潰

主要用于評(píng)估系統(tǒng)防止出現(xiàn)崩潰問(wèn)題的能力，要求系統(tǒng)在最大數(shù)據(jù)傳輸或處理負(fù)荷下工作，系統(tǒng)不

出現(xiàn)崩潰問(wèn)題，負(fù)荷解除后，系統(tǒng)可正常工作。

6.4.4對(duì)抗樣本攻擊

主要用于評(píng)估系統(tǒng)抵御對(duì)抗樣本攻擊的能力，要求針對(duì)人臉識(shí)別的功能，應(yīng)支持活體檢測(cè)。

6.5可靠性

6.5.1算法準(zhǔn)確率

6.5.1.1感知準(zhǔn)確率

主要用于評(píng)估系統(tǒng)的感知能力，各類(lèi)場(chǎng)景任務(wù)的準(zhǔn)確率要求如下：

a)語(yǔ)音類(lèi)：

語(yǔ)音識(shí)別句識(shí)別正確率應(yīng)不低于90%。

5

T/CESAXXXX—202X

b)視覺(jué)類(lèi)：

1)人臉識(shí)別準(zhǔn)確率應(yīng)不低于90%；

2)人臉檢測(cè)準(zhǔn)確率應(yīng)不低于95%；

3)靜態(tài)動(dòng)作識(shí)別準(zhǔn)確率應(yīng)不低于90%，如靜態(tài)手勢(shì)等；

4)動(dòng)態(tài)動(dòng)作識(shí)別準(zhǔn)確率宜不低于85%，如動(dòng)態(tài)手勢(shì)、運(yùn)動(dòng)姿態(tài)等。

6.5.1.2推理準(zhǔn)確率

主要用于評(píng)估系統(tǒng)的推理能力，各類(lèi)場(chǎng)景任務(wù)的準(zhǔn)確率要求如下：

a)語(yǔ)音類(lèi)：

語(yǔ)音合成發(fā)音準(zhǔn)確率宜不低于90%。

b)視覺(jué)類(lèi)：

目標(biāo)跟蹤準(zhǔn)確率應(yīng)不低于85%。

c)自然語(yǔ)言處理類(lèi)：

意圖理解準(zhǔn)確率應(yīng)不低于90%。

6.5.2穩(wěn)定運(yùn)行

主要用于評(píng)估系統(tǒng)和軟件穩(wěn)定運(yùn)行的能力，要求包括：

a)系統(tǒng)在7天內(nèi)持續(xù)運(yùn)行，應(yīng)不出現(xiàn)內(nèi)存泄漏現(xiàn)象。運(yùn)行時(shí)，計(jì)算機(jī)資源占用率仍在系統(tǒng)運(yùn)行

的正常范圍內(nèi)；

b)軟件在運(yùn)行過(guò)程中，輸入錯(cuò)誤的指令或操作，系統(tǒng)應(yīng)不出現(xiàn)無(wú)法控制或崩潰的現(xiàn)象。

6.5.3MTBF

主要用于評(píng)估系統(tǒng)的平均無(wú)故障工作時(shí)間，要求MTBF應(yīng)不低于10000小時(shí)。

6.5.4電源適應(yīng)性

主要用于評(píng)估系統(tǒng)在輸入電源波動(dòng)的情況下正常工作的能力，要求在額定輸入電壓±10%的條件下

應(yīng)能正常工作。

6.6信息安全

6.6.1網(wǎng)絡(luò)安全

主要用于評(píng)估系統(tǒng)的網(wǎng)絡(luò)安全保護(hù)能力，要求如下：

a)安全協(xié)議應(yīng)符合GB/T42564-2023中6.3.2a）的規(guī)定；

b)邊界防護(hù)應(yīng)符合GB/T42564-2023中6.3.4的規(guī)定；

c)訪(fǎng)問(wèn)控制應(yīng)符合GB/T42564-2023中6.3.5的規(guī)定；

d)宜具備安全態(tài)勢(shì)感知功能。

6.6.2應(yīng)用安全

主要用于評(píng)估系統(tǒng)的應(yīng)用安全保護(hù)能力，要求如下：

a)身份鑒別應(yīng)符合GB/T42564-2023中6.4.1的規(guī)定；

b)訪(fǎng)問(wèn)控制應(yīng)符合GB/T42564-2023中6.4.2的規(guī)定；

c)可信驗(yàn)證應(yīng)符合GB/T42564-2023中6.4.4的規(guī)定。

6.6.3數(shù)據(jù)安全

6

T/CESAXXXX—202X

主要用于評(píng)估系統(tǒng)的數(shù)據(jù)安全保護(hù)能力，要求如下：

a)數(shù)據(jù)存儲(chǔ)應(yīng)符合GB/T42564-2023中6.5.2b）的規(guī)定；

b)數(shù)據(jù)使用和加工應(yīng)符合GB/T42564-2023中6.5.3a）的規(guī)定；

c)數(shù)據(jù)傳輸應(yīng)符合GB/T42564-2023中6.5.4a）的規(guī)定；

d)數(shù)據(jù)協(xié)同應(yīng)符合GB/T42564-2023中6.8.3的規(guī)定。

6.7可追溯性

主要用于評(píng)估系統(tǒng)數(shù)據(jù)的可追溯能力，要求如下：

a)應(yīng)具備日志管理能力；

b)宜具備重要數(shù)據(jù)流轉(zhuǎn)過(guò)程的可追溯能力。

6.8備份

主要用于評(píng)估系統(tǒng)的備份能力，要求如下：

a)應(yīng)具備數(shù)據(jù)備份、恢復(fù)等能力；

b)應(yīng)支持多種數(shù)據(jù)的存儲(chǔ)，包括結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)；

c)應(yīng)具備數(shù)據(jù)緩沖能力。

6.9隱私保護(hù)

主要用于評(píng)估系統(tǒng)對(duì)用戶(hù)隱私保護(hù)的能力，要求如下：

a)個(gè)人信息安全應(yīng)符合GB/T35273-2020的規(guī)定的要求；

b)處理或涉及隱私信息的算法，應(yīng)對(duì)模型進(jìn)行加密運(yùn)算，且運(yùn)行結(jié)果不能保留；

c)宜具備隱私計(jì)算功能。

6.10透明性

主要用于評(píng)估系統(tǒng)的行為、決策透明性的能力，要求如下：

a)由系統(tǒng)生成的圖像、語(yǔ)音等信息應(yīng)具備能夠查驗(yàn)的特殊標(biāo)記；

b)由系統(tǒng)生成的數(shù)據(jù)，生成過(guò)程應(yīng)進(jìn)行記錄，包括生成的位置、方式等。

7測(cè)試方法

7.1可控性

7.1.1設(shè)備協(xié)同

設(shè)備協(xié)同的測(cè)試方法如下：

a)查看系統(tǒng)可否可以連接云平臺(tái)，并運(yùn)行需要連接云平臺(tái)的服務(wù)查看其是否可以正常運(yùn)行；

b)使用具有網(wǎng)絡(luò)通信功能的設(shè)備，按照廠(chǎng)家聲明的要求，與系統(tǒng)進(jìn)行連接，查看是否可以發(fā)現(xiàn)

該設(shè)備，并能夠正常連接；

c)查看系統(tǒng)是否具有可用的API接口；

d)查看系統(tǒng)是否具有算力共享的功能或應(yīng)用，并運(yùn)行該功能或應(yīng)用，查看運(yùn)行結(jié)果是否可以滿(mǎn)

足與廠(chǎng)家聲明的要求；

e)運(yùn)行對(duì)計(jì)算資源要求較高的任務(wù)或在限制系統(tǒng)的計(jì)算資源的情況下運(yùn)行計(jì)算任務(wù)，檢查任務(wù)

的運(yùn)行結(jié)果、完成時(shí)間等；

f)按照廠(chǎng)家聲明的操作方式進(jìn)行設(shè)備之間的互操作。

7

T/CESAXXXX—202X

7.1.2設(shè)備管理

設(shè)備管理的測(cè)試方法如下：

a)按照廠(chǎng)家聲明的文件檢查系統(tǒng)功能；

b)按照系統(tǒng)要求的方法安裝、卸載、升級(jí)軟件；

c)向系統(tǒng)接入新設(shè)備，查看設(shè)備注冊(cè)信息。對(duì)已接入的設(shè)備進(jìn)行停用、刪除等操作；

d)通過(guò)交互界面查看系統(tǒng)的運(yùn)行狀態(tài)，并按照廠(chǎng)家聲明的要求對(duì)系統(tǒng)進(jìn)行設(shè)置；

e)通過(guò)交互界面查看接入設(shè)備的運(yùn)行狀態(tài)，并按照廠(chǎng)家聲明的要求對(duì)接入設(shè)備進(jìn)行設(shè)置。

7.1.3算法管理

算法管理的測(cè)試評(píng)價(jià)方法如下：

a)按照廠(chǎng)家聲明的要求檢查系統(tǒng)是否支持算法選擇、升級(jí)、調(diào)用；

b)按照廠(chǎng)家聲明的要求檢查系統(tǒng)是否支持對(duì)終端設(shè)備算法選擇、升級(jí)、調(diào)用；

c)檢查系統(tǒng)是否支持分布式算法訓(xùn)練。

7.2實(shí)時(shí)性

7.2.1信息處理

信息處理的測(cè)試方法如下：

a)語(yǔ)音類(lèi)：

按GB/T36464.2-2018中6.3.7響應(yīng)時(shí)間進(jìn)行測(cè)試；

b)視覺(jué)類(lèi)：

1)手勢(shì)、動(dòng)作識(shí)別：按照廠(chǎng)家聲明的功能或操作方式，執(zhí)行對(duì)應(yīng)的手勢(shì)、動(dòng)作，記錄手勢(shì)

或動(dòng)作開(kāi)始執(zhí)行到系統(tǒng)指令執(zhí)行所持續(xù)的時(shí)間；

2)人臉識(shí)別：記錄從系統(tǒng)采集端人臉采集完成到系統(tǒng)返回識(shí)別結(jié)果的時(shí)間。

7.2.2信息傳輸

信息處理的測(cè)試方法如下：

a)時(shí)延類(lèi)：

調(diào)整發(fā)送端與接收端的系統(tǒng)時(shí)間保持一致，時(shí)間誤差小于1毫秒。發(fā)送端在發(fā)送數(shù)據(jù)時(shí)獲取

發(fā)送時(shí)間，接收端在收到數(shù)據(jù)時(shí)獲取接收時(shí)間，計(jì)算兩個(gè)時(shí)間差。

b)吞吐量類(lèi)：

在云側(cè)和系統(tǒng)間傳輸數(shù)據(jù)，記錄傳輸?shù)臄?shù)據(jù)量和傳輸時(shí)間，計(jì)算單位時(shí)間內(nèi)的數(shù)據(jù)傳輸量。

7.2.3終端連接

使用具備無(wú)線(xiàn)網(wǎng)絡(luò)通信功能的終端設(shè)備，將終端設(shè)備與系統(tǒng)設(shè)備放到正常使用的通信范圍內(nèi)，設(shè)備

間無(wú)遮擋物。打開(kāi)終端設(shè)備物聯(lián)網(wǎng)功能后，開(kāi)啟系統(tǒng)物聯(lián)網(wǎng)設(shè)備搜索功能，記錄該終端設(shè)備被發(fā)現(xiàn)的時(shí)

間。建立系統(tǒng)和終端設(shè)備之間的物聯(lián)網(wǎng)連接，并檢查是否可以正常通信。

7.3魯棒性

7.3.1感知環(huán)境變化

感知環(huán)境的測(cè)試方法如下：

a)光線(xiàn)變化：

8

T/CESAXXXX—202X

分別在75lx±5lx、500lx±30lx的光照度下驗(yàn)證視覺(jué)功能是否可以正常工作。

b)抗遮擋能力：

使用遮擋物對(duì)識(shí)別目標(biāo)進(jìn)行遮擋，驗(yàn)證目標(biāo)是否可以正常識(shí)別。

c)噪聲變化：

按照GB/T36464.2-2018中6.3.1語(yǔ)音識(shí)別測(cè)試進(jìn)行測(cè)試。

7.3.2通信環(huán)境變化

通信環(huán)境變化的測(cè)試方法如下：

a)多媒體功能：

系統(tǒng)接入網(wǎng)絡(luò)測(cè)試工具或安裝網(wǎng)絡(luò)模擬軟件，對(duì)系統(tǒng)與廣域網(wǎng)連接的信號(hào)傳輸網(wǎng)絡(luò)施加以下

干擾信號(hào)：

1丟包率0.1%；

2抖動(dòng)50毫秒；

3延遲50毫秒。

b)系統(tǒng)功能：

系統(tǒng)接入網(wǎng)絡(luò)測(cè)試工具或安裝網(wǎng)絡(luò)模擬軟件，將系統(tǒng)與廣域網(wǎng)連接的信號(hào)傳輸網(wǎng)絡(luò)的平均傳

輸速率，限定在廠(chǎng)家推薦或規(guī)定的最低工作值的90%，持續(xù)12小時(shí)。

7.4韌性

7.4.1功能保持

測(cè)試方法按照7.1、7.2對(duì)應(yīng)條款執(zhí)行。

7.4.2故障恢復(fù)

按照廠(chǎng)家聲明的要求設(shè)置故障場(chǎng)景，檢查系統(tǒng)是否具備故障恢復(fù)相關(guān)的功能。

7.4.3防崩潰

對(duì)系統(tǒng)施加最大數(shù)據(jù)傳輸或處理負(fù)荷，持續(xù)時(shí)間1h后消除負(fù)荷，對(duì)整個(gè)過(guò)程進(jìn)行系統(tǒng)狀態(tài)監(jiān)測(cè)。

7.4.4對(duì)抗樣本攻擊

按照GB/T41772-2022中附錄A規(guī)定的二維靜態(tài)紙質(zhì)圖像攻擊方法進(jìn)行人臉識(shí)別測(cè)試。

7.5可靠性

7.5.1算法準(zhǔn)確性

7.5.1.1感知準(zhǔn)確率

感知準(zhǔn)確率的測(cè)試方法如下：

a)語(yǔ)音類(lèi)：

按照GB/T36464.2-2018中6.3.1語(yǔ)音識(shí)別測(cè)試進(jìn)行測(cè)試；

b)視覺(jué)類(lèi)：

建立測(cè)試數(shù)據(jù)集，準(zhǔn)確率按式（1）進(jìn)行計(jì)算：

····················································(1)

9

T/CESAXXXX—202X

式中：

T——識(shí)別正確的次數(shù)；

F——識(shí)別錯(cuò)誤的次數(shù)。

7.5.1.2推理準(zhǔn)確率

推理準(zhǔn)確率的測(cè)試方法如下：

a)語(yǔ)音類(lèi)：

按照T/CESA1197-2022中7.2.4.2.1發(fā)音準(zhǔn)確率進(jìn)行測(cè)試。

b)視覺(jué)類(lèi)、自然能語(yǔ)言處理類(lèi)：

建立測(cè)試數(shù)據(jù)集，準(zhǔn)確率按式（1）進(jìn)行計(jì)算。

7.5.2穩(wěn)定運(yùn)行

穩(wěn)定運(yùn)行的測(cè)試方法如下：

a)系統(tǒng)不間斷運(yùn)行，對(duì)系統(tǒng)進(jìn)行正常操作以及非破壞性的異常操作，盡量達(dá)到實(shí)際運(yùn)行規(guī)模，

并監(jiān)測(cè)系統(tǒng)狀態(tài)；

b)使用實(shí)際使用場(chǎng)景或測(cè)試工具，輸入錯(cuò)誤指令或操作，檢查系統(tǒng)運(yùn)行狀態(tài)是否正常，且不會(huì)

出現(xiàn)異常退出等現(xiàn)象。

7.5.3MTBF

在正常使用的環(huán)境下，保持系統(tǒng)處于正常工作狀態(tài)。

7.5.4電源適應(yīng)性

將系統(tǒng)接入可調(diào)節(jié)穩(wěn)壓電源，按照6.6.3的要求調(diào)節(jié)電壓，并檢查設(shè)備工作狀態(tài)。

7.6信息安全

7.6.1網(wǎng)絡(luò)安全

網(wǎng)絡(luò)安全的測(cè)試方法如下：

a)檢查系統(tǒng)是否采用安全協(xié)議保密協(xié)議保證網(wǎng)絡(luò)通信的安全性；

b)檢查系統(tǒng)是否能夠保證跨越邊界的訪(fǎng)問(wèn)和數(shù)據(jù)流通，通過(guò)系統(tǒng)提供的受控接口進(jìn)行通信；

c)檢查系統(tǒng)是否具有相應(yīng)的訪(fǎng)問(wèn)控制策略；

d)檢查系統(tǒng)是否具有安全態(tài)勢(shì)感知功能。

7.6.2應(yīng)用安全

系統(tǒng)的應(yīng)用安全測(cè)試方法如下：

a)檢查系統(tǒng)是否具有相應(yīng)的身份鑒別機(jī)制；

b)檢查系統(tǒng)是否具有相應(yīng)的訪(fǎng)問(wèn)控制策略；

c)檢查系統(tǒng)是否具有相應(yīng)的可信驗(yàn)證機(jī)制。

7.6.3數(shù)據(jù)安全

系統(tǒng)的數(shù)據(jù)安全測(cè)試方法如下：

a)檢查系統(tǒng)是否明確數(shù)據(jù)分享、禁止使用和數(shù)據(jù)清除的有效期，支持對(duì)數(shù)據(jù)存儲(chǔ)時(shí)效性配置功

能的訪(fǎng)問(wèn)控制；

10

T/CESAXXXX—202X

b)檢查系統(tǒng)是否具備對(duì)數(shù)據(jù)使用過(guò)程進(jìn)行實(shí)時(shí)監(jiān)測(cè)的功能，避免數(shù)據(jù)在使用過(guò)程中丟失、竊取

及篡改；

c)檢查系統(tǒng)數(shù)據(jù)傳輸是否對(duì)傳輸通道兩端進(jìn)行主體身份鑒別和認(rèn)證、以及對(duì)傳輸數(shù)據(jù)加密；；

d)檢查系統(tǒng)是否滿(mǎn)足數(shù)據(jù)協(xié)同的技術(shù)要求。

7.7可追溯性

可追溯性的測(cè)試方法如下：

a)檢查系統(tǒng)是否具備日志管理相關(guān)的功能，包括日志記錄、訪(fǎng)問(wèn)控制