《人工智能 家庭智能中樞系統(tǒng)可信賴技術(shù)規(guī)范》

ICS35.160

CCSL60

團體標準

T/CESAXXXX—202X

人工智能家庭智能中樞系統(tǒng)可信賴技術(shù)規(guī)范

Artificialintelligence–Technicalspecificationoftrustworthinessforhomeintelligent

centersystems

征求意見稿

在提交反饋意見時，請將您知道的相關(guān)專利連同支持性文件一并附上。

已授權(quán)的專利證明材料為專利證書復(fù)印件或扉頁，已公開但尚未授權(quán)的專利申

請證明材料為專利公開通知書復(fù)印件或扉頁，未公開的專利申請的證明材料為專利

申請?zhí)柡蜕暾埲掌凇?/p>

202X-XX-XX發(fā)布202X-XX-XX實施

中國電子工業(yè)標準化技術(shù)協(xié)會發(fā)布

T/CESAXXXX—202X

人工智能家庭智能中樞系統(tǒng)可信賴技術(shù)規(guī)范

1范圍

本文件確立了家庭智能中樞系統(tǒng)的框架，規(guī)定了系統(tǒng)的可信賴技術(shù)要求，描述了對應(yīng)的測試方法。

本文件適用于家庭智能中樞系統(tǒng)的設(shè)計、開發(fā)、應(yīng)用和測試。

2規(guī)范性引用文件

下列文件中的內(nèi)容通過文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中，注日期的引用文件，

僅該日期對應(yīng)的版本適用于本文件；不注日期的引用文件，其最新版本（包括所有的修改單）適用于本

文件。

GB/T35273-2020信息安全技術(shù)個人信息安全規(guī)范

GB/T36464.2-2018信息技術(shù)智能語音交互系統(tǒng)第2部分：智能家居

GB/T41772-2022信息技術(shù)生物特征識別人臉識別系統(tǒng)技術(shù)要求

GB/T41867-2022信息技術(shù)人工智能術(shù)語

GB/T42564-2023信息安全技術(shù)邊緣計算安全技術(shù)要求

T/CESAXXXX-XXXX人工智能可信賴規(guī)范第1部分：通則

T/CESA1197-2022人工智能深度合成圖像系統(tǒng)技術(shù)規(guī)范

3術(shù)語和定義

GB/T41867-2022界定的以及下列術(shù)語和定義適用于本文件。

3.1

家庭智能中樞系統(tǒng)homeintelligentcentersystem

家庭大腦系統(tǒng)homebrainsystem

將視覺、聽覺等感知信號轉(zhuǎn)化為理解、推理、決策、語言等認知信息，對家庭空間范圍內(nèi)的互聯(lián)的

設(shè)備進行智慧化控制。具備邊緣計算、數(shù)據(jù)存儲等能力，可實現(xiàn)設(shè)備與用戶自然交互的系統(tǒng)。下文中簡

稱系統(tǒng)。

3.2

終端設(shè)備enddevice

具備感知物理世界，或能夠處理和響應(yīng)物理世界信息的設(shè)備。通常用戶使用此類設(shè)備采集信息或執(zhí)

行智慧家庭場景服務(wù)。

3.3

響應(yīng)時間responsetime

系統(tǒng)啟動操作到系統(tǒng)返回運行結(jié)果的時間。

1

T/CESAXXXX—202X

4縮略語

下列縮略語適用于本文件。

API：應(yīng)用程序接口(ApplicationProgramInterface)

MTBF：平均無故障工作時間(MeanTimeBetweenFailure)

WAN：廣域網(wǎng)(WideAreaNetwork)

5家庭智能中樞系統(tǒng)框架

5.1應(yīng)用框架

家庭智能中樞(家庭大腦)系統(tǒng)是一種在家庭中使用的邊緣設(shè)備，它通過網(wǎng)絡(luò)與云平臺連接，獲取網(wǎng)

絡(luò)數(shù)據(jù)和服務(wù)，系統(tǒng)具備計算、存儲、網(wǎng)絡(luò)通信等能力，可為終端設(shè)備提供算力服務(wù)，提升終端設(shè)備的

智能化、交互能力，讓家庭數(shù)據(jù)變得可感知、可視化、可交互，實現(xiàn)智慧家庭多樣化的場景需求。系統(tǒng)

與云側(cè)設(shè)備、終端側(cè)設(shè)備共同構(gòu)成設(shè)備層，進行云邊端協(xié)同工作，實現(xiàn)算力、存儲等資源的高效分配與

利用，豐富應(yīng)用層中各類場景應(yīng)用，降低應(yīng)用的延時，提升應(yīng)用的隱私保護、安全性等能力。本文件主

要聚焦于設(shè)備層中的家庭智能中樞系統(tǒng)的可信賴技術(shù)要求，設(shè)備層中的云側(cè)設(shè)備、終端側(cè)設(shè)備以及應(yīng)用

層的可信賴技術(shù)要求不在本文件中規(guī)定。

系統(tǒng)應(yīng)用框架見圖1。

注：圖中實線部分對應(yīng)本文件規(guī)定的范圍，虛線部分僅為表明家庭智能中樞系統(tǒng)應(yīng)用框架，不在本文件中規(guī)定。

圖1家庭智能中樞系統(tǒng)應(yīng)用框架

設(shè)備層主要由云側(cè)、邊緣側(cè)、終端側(cè)構(gòu)成，其中云側(cè)由云平臺構(gòu)成，主要用于提供云服務(wù)；邊緣側(cè)

由家庭智能中樞系統(tǒng)構(gòu)成，系統(tǒng)有多種形式，如獨立的邊緣設(shè)備，或由算力設(shè)備、存儲設(shè)備和網(wǎng)關(guān)等共

同構(gòu)成的系統(tǒng)，主要用于邊緣計算、數(shù)據(jù)存儲、數(shù)據(jù)處理、設(shè)備管理等；終端側(cè)由多媒體設(shè)備、家用電

器、安防設(shè)備和家居設(shè)備等構(gòu)成，主要用于信息的感知、呈現(xiàn)等。

應(yīng)用層為主要的智慧家庭應(yīng)用場景，包括但不限于健康、娛樂、社交、商務(wù)、教育、健身、節(jié)能、

安防等。

2

T/CESAXXXX—202X

5.2可信賴技術(shù)框架

家庭智能中樞系統(tǒng)在智慧家庭各類場景應(yīng)用中充當大腦的角色，構(gòu)建以下特征能力：

a)感知中心：視覺、聽覺等信息的感知；

b)邏輯處理中心：執(zhí)行識別、理解、推理、判斷、決策等行為；

c)控制中心：發(fā)出指令對各類活動、業(yè)務(wù)控制；

d)存儲中心：數(shù)據(jù)的存儲。

本文件參考T/CESAXXXX-XXXX中第4章規(guī)定的人工智能可信賴技術(shù)的核心概念域、關(guān)鍵技術(shù)域的部

分技術(shù)特征，如可控性、實時性、魯棒性、韌性、可靠性、信息安全、可追溯性、備份、隱私保護、透

明性等，以提高系統(tǒng)感知、邏輯處理、控制、存儲的能力，增強系統(tǒng)在各類應(yīng)用場景業(yè)務(wù)實現(xiàn)過程中的

可信賴程度。系統(tǒng)的可信賴技術(shù)框架見圖2。

圖2家庭智能中樞系統(tǒng)可信賴技術(shù)框架

6技術(shù)要求

6.1可控性

6.1.1設(shè)備協(xié)同

主要用于評估家庭智能中樞系統(tǒng)對各類終端設(shè)備的接入控制、協(xié)同交互等能力，具體要求包括：

a)應(yīng)具備連接云平臺，并與云平臺進行數(shù)據(jù)交換、獲取服務(wù)等能力；

b)應(yīng)具備局域網(wǎng)內(nèi)設(shè)備發(fā)現(xiàn)、識別接入功能?？山尤刖邆渚W(wǎng)絡(luò)通信功能的設(shè)備（例如麥克風、

攝像頭、揚聲器、顯示器、環(huán)境傳感器、家用電器等）；

c)應(yīng)具備對外開放的API；

d)應(yīng)具備算力共享接口，并能為接入系統(tǒng)的終端設(shè)備提供算力共享服務(wù)，如多模態(tài)信息分析與

處理，隱私計算等；

e)宜具備云平臺和系統(tǒng)的算力協(xié)同能力，如系統(tǒng)算力資源不足的時候，云側(cè)能為邊緣側(cè)提供算

力支持；

f)宜支持終端設(shè)備和系統(tǒng)之間的互操作，如終端設(shè)備為系統(tǒng)提供交互界面、系統(tǒng)集中控制終端

設(shè)備等。

3

T/CESAXXXX—202X

6.1.2設(shè)備管理

主要用于評估家庭智能中樞系統(tǒng)對連接的設(shè)備管理，以及系統(tǒng)自身的管理能力，具體要求包括：

a)應(yīng)具備系統(tǒng)的管理能力，包括操作系統(tǒng)、驅(qū)動、數(shù)據(jù)庫升級等；

b)應(yīng)具備安裝、卸載、升級軟件等能力；

c)應(yīng)支持對接入的設(shè)備進行管理，包括接入設(shè)備的注冊、停用、刪除等；

d)應(yīng)支持運行狀態(tài)查詢、設(shè)置、顯示；

e)宜支持接入設(shè)備的運行狀態(tài)查詢、設(shè)置、顯示；

6.1.3算法管理

主要用于評估家庭智能中樞系統(tǒng)對基礎(chǔ)算法、智慧家庭應(yīng)用場景算法的統(tǒng)一管理能力，以及為應(yīng)用

服務(wù)、終端設(shè)備提供算法支撐的能力，具體要求包括：

a)應(yīng)支持系統(tǒng)自身的算法的選擇、升級、調(diào)用等；

b)應(yīng)支持系統(tǒng)為終端設(shè)備提供算力共享時，所需要的算法的選擇、升級、調(diào)用等；

c)宜支持分布式算法訓練。

6.2實時性

6.2.1信息處理

主要用于評估系統(tǒng)對實時交互類場景應(yīng)用的響應(yīng)速度，保障用戶的使用體驗感。對于不同的應(yīng)用場

景，信息處理實時性要求如下：

a)語音：

1)智能語音等平均響應(yīng)時間應(yīng)≤2秒；

2)語音喚醒平均響應(yīng)時間宜≤2秒。

b)視覺：

1)靜態(tài)手勢識別執(zhí)行時長應(yīng)≤2秒；

2)人臉檢測、識別平均響應(yīng)時間應(yīng)≤1秒；

3)動態(tài)手勢、動作識別等執(zhí)行時長宜≤5秒。

6.2.2信息傳輸

主要用于評估系統(tǒng)的各類數(shù)據(jù)、信息的傳輸延時、傳輸量等。對于不同的應(yīng)用場景，要求如下：

a)系統(tǒng)與終端設(shè)備之間的協(xié)同的指令及數(shù)據(jù)參數(shù)的雙向傳輸時延應(yīng)≤30毫秒；

b)多媒體數(shù)據(jù)從系統(tǒng)到終端設(shè)備的雙向傳輸時延應(yīng)≤250毫秒；

c)數(shù)據(jù)傳輸吞吐量宜支持千兆位/秒級別。

6.2.3終端連接

主要用于評估系統(tǒng)與終端設(shè)備以短距離通訊方式的連接速度，設(shè)備被搜索發(fā)現(xiàn)的平均響應(yīng)時間應(yīng)≤

2秒，且能正常連接通訊。

6.3魯棒性

6.3.1感知環(huán)境變化

主要用于評估系統(tǒng)在各類場景在感知環(huán)境變化情況下的性能保持能力，要求如下：

a)光線變化：

4

T/CESAXXXX—202X

視覺類功能在不同光線條件下，應(yīng)能正常工作。

b)抗遮擋能力：

視覺識別功能在遮擋面積≤20%的情況下，應(yīng)能正常識別。

c)噪聲變化：

語音識別功能在高噪家居環(huán)境（聲音強度在60dB~65dB）中，句識別正確率應(yīng)≥85%。

6.3.2通信環(huán)境變化

主要用于評估系統(tǒng)抗弱網(wǎng)的能力，要求如下：

a）多媒體功能：

音、視頻等多媒體功應(yīng)能正常使用，不出現(xiàn)破音、卡頓、馬賽克等異常。

b）系統(tǒng)功能：

系統(tǒng)基本功能應(yīng)能正常工作，不出現(xiàn)死機、重啟等異常。

6.4韌性

6.4.1功能保持

主要用于評估當系統(tǒng)與廣域網(wǎng)(WAN)連接斷開時，功能保持正常工作的能力。應(yīng)至少滿足以下一項

的要求：

a)6.1.1設(shè)備協(xié)同中的b）、f）；

b)6.1.2設(shè)備管理中的c）、e）；

c)6.1.3算法管理中的b）；

d)6.2.1信息處理中任意一項要求。

6.4.2故障恢復(fù)

主要用于評估系統(tǒng)故障恢復(fù)的能力。應(yīng)至少滿足以下一項的要求：

a)程序崩潰后能自動重啟程序；

b)程序崩潰后顯示異常狀態(tài)，并提示用戶處理；

c)需要連接網(wǎng)絡(luò)才能使用的功能，在斷網(wǎng)重連后能夠恢復(fù)正常工作。

6.4.3防崩潰

主要用于評估系統(tǒng)防止出現(xiàn)崩潰問題的能力，要求系統(tǒng)在最大數(shù)據(jù)傳輸或處理負荷下工作，系統(tǒng)不

出現(xiàn)崩潰問題，負荷解除后，系統(tǒng)可正常工作。

6.4.4對抗樣本攻擊

主要用于評估系統(tǒng)抵御對抗樣本攻擊的能力，要求針對人臉識別的功能，應(yīng)支持活體檢測。

6.5可靠性

6.5.1算法準確率

6.5.1.1感知準確率

主要用于評估系統(tǒng)的感知能力，各類場景任務(wù)的準確率要求如下：

a)語音類：

語音識別句識別正確率應(yīng)不低于90%。

5

T/CESAXXXX—202X

b)視覺類：

1)人臉識別準確率應(yīng)不低于90%；

2)人臉檢測準確率應(yīng)不低于95%；

3)靜態(tài)動作識別準確率應(yīng)不低于90%，如靜態(tài)手勢等；

4)動態(tài)動作識別準確率宜不低于85%，如動態(tài)手勢、運動姿態(tài)等。

6.5.1.2推理準確率

主要用于評估系統(tǒng)的推理能力，各類場景任務(wù)的準確率要求如下：

a)語音類：

語音合成發(fā)音準確率宜不低于90%。

b)視覺類：

目標跟蹤準確率應(yīng)不低于85%。

c)自然語言處理類：

意圖理解準確率應(yīng)不低于90%。

6.5.2穩(wěn)定運行

主要用于評估系統(tǒng)和軟件穩(wěn)定運行的能力，要求包括：

a)系統(tǒng)在7天內(nèi)持續(xù)運行，應(yīng)不出現(xiàn)內(nèi)存泄漏現(xiàn)象。運行時，計算機資源占用率仍在系統(tǒng)運行

的正常范圍內(nèi)；

b)軟件在運行過程中，輸入錯誤的指令或操作，系統(tǒng)應(yīng)不出現(xiàn)無法控制或崩潰的現(xiàn)象。

6.5.3MTBF

主要用于評估系統(tǒng)的平均無故障工作時間，要求MTBF應(yīng)不低于10000小時。

6.5.4電源適應(yīng)性

主要用于評估系統(tǒng)在輸入電源波動的情況下正常工作的能力，要求在額定輸入電壓±10%的條件下

應(yīng)能正常工作。

6.6信息安全

6.6.1網(wǎng)絡(luò)安全

主要用于評估系統(tǒng)的網(wǎng)絡(luò)安全保護能力，要求如下：

a)安全協(xié)議應(yīng)符合GB/T42564-2023中6.3.2a）的規(guī)定；

b)邊界防護應(yīng)符合GB/T42564-2023中6.3.4的規(guī)定；

c)訪問控制應(yīng)符合GB/T42564-2023中6.3.5的規(guī)定；

d)宜具備安全態(tài)勢感知功能。

6.6.2應(yīng)用安全

主要用于評估系統(tǒng)的應(yīng)用安全保護能力，要求如下：

a)身份鑒別應(yīng)符合GB/T42564-2023中6.4.1的規(guī)定；

b)訪問控制應(yīng)符合GB/T42564-2023中6.4.2的規(guī)定；

c)可信驗證應(yīng)符合GB/T42564-2023中6.4.4的規(guī)定。

6.6.3數(shù)據(jù)安全

6

T/CESAXXXX—202X

主要用于評估系統(tǒng)的數(shù)據(jù)安全保護能力，要求如下：

a)數(shù)據(jù)存儲應(yīng)符合GB/T42564-2023中6.5.2b）的規(guī)定；

b)數(shù)據(jù)使用和加工應(yīng)符合GB/T42564-2023中6.5.3a）的規(guī)定；

c)數(shù)據(jù)傳輸應(yīng)符合GB/T42564-2023中6.5.4a）的規(guī)定；

d)數(shù)據(jù)協(xié)同應(yīng)符合GB/T42564-2023中6.8.3的規(guī)定。

6.7可追溯性

主要用于評估系統(tǒng)數(shù)據(jù)的可追溯能力，要求如下：

a)應(yīng)具備日志管理能力；

b)宜具備重要數(shù)據(jù)流轉(zhuǎn)過程的可追溯能力。

6.8備份

主要用于評估系統(tǒng)的備份能力，要求如下：

a)應(yīng)具備數(shù)據(jù)備份、恢復(fù)等能力；

b)應(yīng)支持多種數(shù)據(jù)的存儲，包括結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)；

c)應(yīng)具備數(shù)據(jù)緩沖能力。

6.9隱私保護

主要用于評估系統(tǒng)對用戶隱私保護的能力，要求如下：

a)個人信息安全應(yīng)符合GB/T35273-2020的規(guī)定的要求；

b)處理或涉及隱私信息的算法，應(yīng)對模型進行加密運算，且運行結(jié)果不能保留；

c)宜具備隱私計算功能。

6.10透明性

主要用于評估系統(tǒng)的行為、決策透明性的能力，要求如下：

a)由系統(tǒng)生成的圖像、語音等信息應(yīng)具備能夠查驗的特殊標記；

b)由系統(tǒng)生成的數(shù)據(jù)，生成過程應(yīng)進行記錄，包括生成的位置、方式等。

7測試方法

7.1可控性

7.1.1設(shè)備協(xié)同

設(shè)備協(xié)同的測試方法如下：

a)查看系統(tǒng)可否可以連接云平臺，并運行需要連接云平臺的服務(wù)查看其是否可以正常運行；

b)使用具有網(wǎng)絡(luò)通信功能的設(shè)備，按照廠家聲明的要求，與系統(tǒng)進行連接，查看是否可以發(fā)現(xiàn)

該設(shè)備，并能夠正常連接；

c)查看系統(tǒng)是否具有可用的API接口；

d)查看系統(tǒng)是否具有算力共享的功能或應(yīng)用，并運行該功能或應(yīng)用，查看運行結(jié)果是否可以滿

足與廠家聲明的要求；

e)運行對計算資源要求較高的任務(wù)或在限制系統(tǒng)的計算資源的情況下運行計算任務(wù)，檢查任務(wù)

的運行結(jié)果、完成時間等；

f)按照廠家聲明的操作方式進行設(shè)備之間的互操作。

7

T/CESAXXXX—202X

7.1.2設(shè)備管理

設(shè)備管理的測試方法如下：

a)按照廠家聲明的文件檢查系統(tǒng)功能；

b)按照系統(tǒng)要求的方法安裝、卸載、升級軟件；

c)向系統(tǒng)接入新設(shè)備，查看設(shè)備注冊信息。對已接入的設(shè)備進行停用、刪除等操作；

d)通過交互界面查看系統(tǒng)的運行狀態(tài)，并按照廠家聲明的要求對系統(tǒng)進行設(shè)置；

e)通過交互界面查看接入設(shè)備的運行狀態(tài)，并按照廠家聲明的要求對接入設(shè)備進行設(shè)置。

7.1.3算法管理

算法管理的測試評價方法如下：

a)按照廠家聲明的要求檢查系統(tǒng)是否支持算法選擇、升級、調(diào)用；

b)按照廠家聲明的要求檢查系統(tǒng)是否支持對終端設(shè)備算法選擇、升級、調(diào)用；

c)檢查系統(tǒng)是否支持分布式算法訓練。

7.2實時性

7.2.1信息處理

信息處理的測試方法如下：

a)語音類：

按GB/T36464.2-2018中6.3.7響應(yīng)時間進行測試；

b)視覺類：

1)手勢、動作識別：按照廠家聲明的功能或操作方式，執(zhí)行對應(yīng)的手勢、動作，記錄手勢

或動作開始執(zhí)行到系統(tǒng)指令執(zhí)行所持續(xù)的時間；

2)人臉識別：記錄從系統(tǒng)采集端人臉采集完成到系統(tǒng)返回識別結(jié)果的時間。

7.2.2信息傳輸

信息處理的測試方法如下：

a)時延類：

調(diào)整發(fā)送端與接收端的系統(tǒng)時間保持一致，時間誤差小于1毫秒。發(fā)送端在發(fā)送數(shù)據(jù)時獲取

發(fā)送時間，接收端在收到數(shù)據(jù)時獲取接收時間，計算兩個時間差。

b)吞吐量類：

在云側(cè)和系統(tǒng)間傳輸數(shù)據(jù)，記錄傳輸?shù)臄?shù)據(jù)量和傳輸時間，計算單位時間內(nèi)的數(shù)據(jù)傳輸量。

7.2.3終端連接

使用具備無線網(wǎng)絡(luò)通信功能的終端設(shè)備，將終端設(shè)備與系統(tǒng)設(shè)備放到正常使用的通信范圍內(nèi)，設(shè)備

間無遮擋物。打開終端設(shè)備物聯(lián)網(wǎng)功能后，開啟系統(tǒng)物聯(lián)網(wǎng)設(shè)備搜索功能，記錄該終端設(shè)備被發(fā)現(xiàn)的時

間。建立系統(tǒng)和終端設(shè)備之間的物聯(lián)網(wǎng)連接，并檢查是否可以正常通信。

7.3魯棒性

7.3.1感知環(huán)境變化

感知環(huán)境的測試方法如下：

a)光線變化：

8

T/CESAXXXX—202X

分別在75lx±5lx、500lx±30lx的光照度下驗證視覺功能是否可以正常工作。

b)抗遮擋能力：

使用遮擋物對識別目標進行遮擋，驗證目標是否可以正常識別。

c)噪聲變化：

按照GB/T36464.2-2018中6.3.1語音識別測試進行測試。

7.3.2通信環(huán)境變化

通信環(huán)境變化的測試方法如下：

a)多媒體功能：

系統(tǒng)接入網(wǎng)絡(luò)測試工具或安裝網(wǎng)絡(luò)模擬軟件，對系統(tǒng)與廣域網(wǎng)連接的信號傳輸網(wǎng)絡(luò)施加以下

干擾信號：

1丟包率0.1%；

2抖動50毫秒；

3延遲50毫秒。

b)系統(tǒng)功能：

系統(tǒng)接入網(wǎng)絡(luò)測試工具或安裝網(wǎng)絡(luò)模擬軟件，將系統(tǒng)與廣域網(wǎng)連接的信號傳輸網(wǎng)絡(luò)的平均傳

輸速率，限定在廠家推薦或規(guī)定的最低工作值的90%，持續(xù)12小時。

7.4韌性

7.4.1功能保持

測試方法按照7.1、7.2對應(yīng)條款執(zhí)行。

7.4.2故障恢復(fù)

按照廠家聲明的要求設(shè)置故障場景，檢查系統(tǒng)是否具備故障恢復(fù)相關(guān)的功能。

7.4.3防崩潰

對系統(tǒng)施加最大數(shù)據(jù)傳輸或處理負荷，持續(xù)時間1h后消除負荷，對整個過程進行系統(tǒng)狀態(tài)監(jiān)測。

7.4.4對抗樣本攻擊

按照GB/T41772-2022中附錄A規(guī)定的二維靜態(tài)紙質(zhì)圖像攻擊方法進行人臉識別測試。

7.5可靠性

7.5.1算法準確性

7.5.1.1感知準確率

感知準確率的測試方法如下：

a)語音類：

按照GB/T36464.2-2018中6.3.1語音識別測試進行測試；

b)視覺類：

建立測試數(shù)據(jù)集，準確率按式（1）進行計算：

····················································(1)

9

T/CESAXXXX—202X

式中：

T——識別正確的次數(shù)；

F——識別錯誤的次數(shù)。

7.5.1.2推理準確率

推理準確率的測試方法如下：

a)語音類：

按照T/CESA1197-2022中7.2.4.2.1發(fā)音準確率進行測試。

b)視覺類、自然能語言處理類：

建立測試數(shù)據(jù)集，準確率按式（1）進行計算。

7.5.2穩(wěn)定運行

穩(wěn)定運行的測試方法如下：

a)系統(tǒng)不間斷運行，對系統(tǒng)進行正常操作以及非破壞性的異常操作，盡量達到實際運行規(guī)模，

并監(jiān)測系統(tǒng)狀態(tài)；

b)使用實際使用場景或測試工具，輸入錯誤指令或操作，檢查系統(tǒng)運行狀態(tài)是否正常，且不會

出現(xiàn)異常退出等現(xiàn)象。

7.5.3MTBF

在正常使用的環(huán)境下，保持系統(tǒng)處于正常工作狀態(tài)。

7.5.4電源適應(yīng)性

將系統(tǒng)接入可調(diào)節(jié)穩(wěn)壓電源，按照6.6.3的要求調(diào)節(jié)電壓，并檢查設(shè)備工作狀態(tài)。

7.6信息安全

7.6.1網(wǎng)絡(luò)安全

網(wǎng)絡(luò)安全的測試方法如下：

a)檢查系統(tǒng)是否采用安全協(xié)議保密協(xié)議保證網(wǎng)絡(luò)通信的安全性；

b)檢查系統(tǒng)是否能夠保證跨越邊界的訪問和數(shù)據(jù)流通，通過系統(tǒng)提供的受控接口進行通信；

c)檢查系統(tǒng)是否具有相應(yīng)的訪問控制策略；

d)檢查系統(tǒng)是否具有安全態(tài)勢感知功能。

7.6.2應(yīng)用安全

系統(tǒng)的應(yīng)用安全測試方法如下：

a)檢查系統(tǒng)是否具有相應(yīng)的身份鑒別機制；

b)檢查系統(tǒng)是否具有相應(yīng)的訪問控制策略；

c)檢查系統(tǒng)是否具有相應(yīng)的可信驗證機制。

7.6.3數(shù)據(jù)安全

系統(tǒng)的數(shù)據(jù)安全測試方法如下：

a)檢查系統(tǒng)是否明確數(shù)據(jù)分享、禁止使用和數(shù)據(jù)清除的有效期，支持對數(shù)據(jù)存儲時效性配置功

能的訪問控制；

10

T/CESAXXXX—202X

b)檢查系統(tǒng)是否具備對數(shù)據(jù)使用過程進行實時監(jiān)測的功能，避免數(shù)據(jù)在使用過程中丟失、竊取

及篡改；

c)檢查系統(tǒng)數(shù)據(jù)傳輸是否對傳輸通道兩端進行主體身份鑒別和認證、以及對傳輸數(shù)據(jù)加密；；

d)檢查系統(tǒng)是否滿足數(shù)據(jù)協(xié)同的技術(shù)要求。

7.7可追溯性

可追溯性的測試方法如下：

a)檢查系統(tǒng)是否具備日志管理相關(guān)的功能，包括日志記錄、訪問控制